JP2009211358A

JP2009211358A - 顕微鏡用画像の情報処理装置

Info

Publication number: JP2009211358A
Application number: JP2008053080A
Authority: JP
Inventors: Takako Matsuzaki; 貴子松崎; Yusaku Tachibana; 勇作橘
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2008-03-04
Filing date: 2008-03-04
Publication date: 2009-09-17

Abstract

【課題】より簡単かつ確実に所望する画像を検索できるようにする。
【解決手段】カメラコントロールユニット１３は、観察画像の記録時に、観察画像に付加するコメントの項目として、顕微鏡１１の使用用途により予め定められている項目の情報を選択するための入力欄および表示欄をモニタ２４に表示させる。そして、カメラコントロールユニット１３は、ユーザにより指定されたコメントの各項目の情報と、顕微鏡システムの設定を示す設定情報とを観察画像に付加して記録させる。これにより、記録されている観察画像の検索時において、使用用途ごとに定められた項目の情報、または設定情報の少なくとも１つを検索条件として検索を行うことができ、簡単かつ確実に所望の画像を得ることができる。本発明は、顕微鏡システムに適用することができる。
【選択図】図１

Description

本発明は、顕微鏡システムで撮像された画像を検索する場合に用いて好適な顕微鏡用画像の情報処理装置に関する。

従来、観察対象の標本を撮像して得られた観察画像と、その観察画像に対するコメントとを記録しておく顕微鏡システムが知られている。

また、画像にコメントを付加する技術として、画像に対するコメントを入力する場合に、以前に入力された、他の画像に対するコメントを活用する方法が提案されている（例えば、特許文献１参照）。

特開２０００−１０１８９４号公報

ところで、顕微鏡システムでは、観察画像に付加されるコメントには、観察画像の撮像場所、観察対象となった標本、標本の状態など、多くの項目が含まれることがあり、コメントにどのような項目が必要となるかは、顕微鏡システムの使用用途によって異なる。

さらに、標本を撮像して、観察画像を記録させる行為は、通常、複数のユーザにより行われるのが普通であり、観察画像にどのような項目を含むコメントを付加するかは、ユーザ自身の判断に委ねられている。そのため、コメントに含まれる単語をキーとして観察画像の検索を行っても、必ずしも所望する観察画像が得られるとは限らない。

また、以前に入力されたコメントを活用する方法では、コメント入力の簡素化を図ることはできるが、コメントの入力形式が定められていないため、やはりコメントに含まれる単語をキーとして画像の検索を行っても、所望の画像を得ることができない場合があった。

本発明は、このような状況に鑑みてなされたものであり、より簡単かつ確実に所望する画像を検索することができるようにするものである。

本発明の顕微鏡用画像の情報処理装置は、観察試料の撮像時における顕微鏡システムの使用用途ごとに定められている項目の情報であるコメント情報を、ユーザの入力操作に応じて選択する選択手段と、前記撮像された試料の観察画像、前記観察試料の撮像時における前記顕微鏡システムの設定を示す設定情報、および選択された前記コメント情報を記録する記録手段と、前記記録手段に記録されている前記観察画像の中から、前記ユーザにより指定された前記設定情報または前記コメント情報に基づいて特定される観察画像を検索する検索手段と、前記検索手段による検索結果の表示を制御する表示制御手段とを備えることを特徴とする。

本発明によれば、より簡単かつ確実に所望する画像を検索することができる。

以下、図面を参照して、本発明を適用した実施の形態について説明する。

図１は、本発明を適用した顕微鏡システムの一実施の形態の構成例を示す図である。

顕微鏡システムは、顕微鏡１１、カメラヘッド１２、およびカメラコントロールユニット１３から構成される。顕微鏡１１は、USB I/F（Universal Serial Bus Interface）２１を介してカメラコントロールユニット１３に接続されており、また顕微鏡１１の図中、上側に設けられたポートには、カメラヘッド１２が取り付けられている。顕微鏡１１のステージには、観察対象の標本が載置され、顕微鏡１１は標本からの観察光を集光してカメラヘッド１２に導く。

カメラヘッド１２は、カメラＩ／Ｆケーブル２２を介してカメラコントロールユニット１３に接続されている。また、カメラヘッド１２には、例えばＣＣＤ（Charge Coupled Devices）素子が組み込まれており、カメラヘッド１２は、顕微鏡１１の光学系から入射した観察光を受光して光電変換することで、標本の観察画像を撮像する。カメラヘッド１２により撮像された観察画像は、カメラヘッド１２においてデジタルデータに変換されて、カメラコントロールユニット１３に転送される。

カメラコントロールユニット１３には、キーボードやマウスなどからなる入力操作部２３と、モニタ２４とが接続されている。例えばモニタ２４には、標本の観察画像や、顕微鏡システムを制御するためのＧＵＩ（Graphical User Interface）が表示される。また、カメラコントロールユニット１３には、カメラコントロールユニット１３に対して着脱自在なリムーバブルメディア２５が装着される。

カメラコントロールユニット１３は、リムーバブルメディア２５に記録されている画像や、カメラヘッド１２からの観察画像などの各種の画像に対して画像処理を施す。例えば、カメラコントロールユニット１３は、カメラヘッド１２からの観察画像をＲＧＢフォーマットの画像に変換してモニタ２４に表示させたり、観察画像を所定のフォーマットの画像に変換してリムーバブルメディア２５に記録させたりする。

また、カメラコントロールユニット１３は、入力操作部２３からユーザの操作に応じた信号が供給されると、その信号に基づいて、顕微鏡１１やカメラヘッド１２にコマンドを転送して、顕微鏡１１やカメラヘッド１２を制御する。

次に、顕微鏡システムの動作について説明する。

ユーザが標本を観察しようとする場合、まず、ユーザは、これから観察しようとする標本を顕微鏡１１のステージに載せる。そして、ユーザは、入力操作部２３を操作してメインメニューの表示を指示する。すると、カメラコントロールユニット１３は、入力操作部２３からの信号に応じて、標本の観察画像と、メインメニューとが表示されるウィンドウをモニタ２４に表示させる。

すなわち、カメラコントロールユニット１３は、顕微鏡１１にコマンドを転送して、顕微鏡１１に標本への照明光の照射を指示するとともに、カメラヘッド１２にコマンドを転送して、カメラヘッド１２に標本の観察画像を撮像させる。そして、カメラコントロールユニット１３は、カメラヘッド１２からの観察画像と、カメラコントロールユニット１３の図示せぬ不揮発性のメモリに記録されているＧＵＩ画像とをモニタ２４に供給し、モニタ２４にウィンドウを表示させる。

これにより、モニタ２４には、例えば図２に示すウィンドウ５１が表示される。ウィンドウ５１には、標本の観察画像が表示される画像表示領域５２と、メニューが表示されるメニュー表示領域５３とが設けられており、メニュー表示領域５３には、メインメニューが表示されている。

メインメニューには、各種の処理を実行させるときに操作されるメニュー項目５４−１乃至メニュー項目５４−５が設けられている。そして、メニュー項目５４−１乃至メニュー項目５４−５には、それぞれ文字「カメラヘッド制御」、「カメラコントロールユニット制御」、「顕微鏡制御」、「画像保存」、および「画像検索」が表示されている。

メニュー項目５４−１乃至メニュー項目５４−３のそれぞれは、カメラヘッド１２、カメラコントロールユニット１３、および顕微鏡１１のそれぞれの動作を制御するときに操作される。また、メニュー項目５４−４は、画像表示領域５２に表示されている観察画像を保存するときに操作され、メニュー項目５４−５は、リムーバブルメディア２５に記録されている観察画像から、所定の条件を満たす観察画像を検索するときに操作される。

なお、以下、メニュー項目５４−１乃至メニュー項目５４−５のそれぞれを個々に区別する必要のない場合、単にメニュー項目５４とも称する。

メインメニューが表示されると、ユーザは、まず顕微鏡１１の光学系等の調整を行うために、入力操作部２３を操作してメニュー項目５４−３を選択（操作）する。すると、カメラコントロールユニット１３は、ユーザの操作に応じてモニタ２４に顕微鏡制御メニューを表示させる。これにより、モニタ２４には、例えば図３に示す顕微鏡制御メニューが表示される。

顕微鏡制御メニューには、標本の観察に用いる顕微鏡１１の対物レンズを選択するための表示欄８１が設けられており、表示欄８１には、選択の候補となる対物レンズを示す文字「レンズＡ」、「レンズＢ」、および「レンズＣ」が並べられて表示されている。また、表示欄８１の図中、下側には、標本の観察に用いる照明光（顕微鏡１１の光源）を選択するための表示欄８２が設けられており、表示欄８２には、選択の候補となる照明光を示す文字「照明Ａ」、「照明Ｂ」、および「照明Ｃ」が表示されている。

さらに、表示欄８２の図中、下側には、標本の観察に用いる顕微鏡１１のフィルタを選択するための表示欄８３が設けられており、表示欄８３には、選択の候補となるフィルタを示す文字「なし」、「フィルタＡ」、および「フィルタＢ」が表示されている。ここで、文字「なし」が選択されると、標本の観察時には、特にフィルタは用いられない。さらに、また、表示欄８３の図中、下側には、顕微鏡１１のステージの位置を指定するための表示欄８４が設けられている。

表示欄８４にはステージのＸ軸方向の位置、Ｙ軸方向の位置、およびＺ軸方向の位置のそれぞれを指定するための位置指定領域が設けられており、それらの位置指定領域には、ステージの各方向の位置を示す文字「＋５」、「−２」、および「＋１０」が表示されている。また、位置指定領域には、ステージの位置を指定するときに操作されるスピンボタンが設けられている。

顕微鏡制御メニューの表示欄８１乃至表示欄８３に表示される情報は、予め定められており、それらの情報は、カメラコントロールユニット１３に設けられた、図示せぬ不揮発性のメモリに記録されている。すなわち、メモリには、例えば図４に示すように、顕微鏡１１の設定の項目ごとに、その設定を行うための表示欄に表示される選択の候補を示す情報が記録されている。

図４の例では、「項目」の欄に、顕微鏡１１の設定の項目を示す文字「対物レンズ」、「照明」、および「フィルタ」が示されており、「種別」の欄に各項目における選択の候補を示す文字が示されている。例えば、設定の項目「対物レンズ」の候補として、「レンズＡ」、「レンズＢ」、および「レンズＣ」が示されており、メモリには、これらの対物レンズを示す情報が記録されている。そして、カメラコントロールユニット１３は、メモリに記録されている対物レンズの候補を示す情報を読み出し、読み出した情報に基づいて、顕微鏡制御メニューの表示欄８１に対物レンズの候補を示す文字を表示させる。

このように、ウィンドウ５１のメニュー表示領域５３に顕微鏡制御メニューが表示されると、ユーザは、入力操作部２３を操作して表示欄８１乃至表示欄８４に対する操作を行い、顕微鏡１１における各種設定を指示する。図３では、顕微鏡１１において用いられる対物レンズ、照明、およびフィルタとして、「レンズＡ」、「照明Ａ」、および「なし」が選択されている。

顕微鏡１１の設定が指示されると、カメラコントロールユニット１３は、ユーザの指示に応じたコマンドを、USB I/F２１を介して顕微鏡１１に転送し、顕微鏡１１に各種の設定を行わせる。顕微鏡１１は、転送されてきたコマンドに応じて、対物レンズやフィルタの切り換えなどの設定を行う。

また、顕微鏡制御メニューの表示欄８１乃至表示欄８４のそれぞれの図中、左側には、それらの表示欄において指定された設定を示す情報を、観察画像に重畳させるときに操作されるチェックボックス８５−１乃至チェックボックス８５−４が設けられている。

例えば、チェックボックス８５−１が操作されて、チェックボックス８５−１にチェック記号が表示されたとする。すると、カメラコントロールユニット１３は、観察画像に重畳させる重畳情報として、チェックボックス８５−１に対応する表示欄８１において指定された「レンズＡ」を示す情報を保持しておく。そして、観察画像の記録時において、カメラコントロールユニット１３に保持されている重畳情報に基づいて、指定された顕微鏡１１の設定を示す「レンズＡ」が重畳された観察画像が生成されて記録される。なお、以下、チェックボックス８５−１乃至チェックボックス８５−４のそれぞれを個々に区別する必要のない場合、単にチェックボックス８５と称する。

カメラコントロールユニット１３は、チェックボックス８５が操作されると、操作されたチェックボックス８５に対応する表示欄において指定された設定を示す重畳情報を生成して保持する。また、カメラコントロールユニット１３は、生成した重畳情報により示される情報を、画像表示領域５２の観察画像に一時的に重畳させて表示させる。図３の例では、チェックボックス８５−１に対応する表示欄８１において指定された「レンズＡ」が、観察画像に重畳されて表示されている。

このように、顕微鏡１１の設定が行われると、メニュー表示領域５３の表示は、顕微鏡制御メニューから、図２のメインメニューに切り替わる。

次に、ユーザは、カメラヘッド１２の状態を標本の観察に適した状態とするために、ウィンドウ５１のメインメニューから、メニュー項目５４−１を選択する。すると、カメラコントロールユニット１３は、ユーザの操作に応じてモニタ２４にカメラヘッド制御メニューを表示させる。例えば、カメラヘッド制御メニューには、カメラヘッド１２による標本の撮像方法を定めるカメラモード、観察画像の撮像時の露光方式、および測光方法を指定するための表示欄や、観察画像の明るさやホワイトバランスを調整するためのボタン等が表示される。

カメラコントロールユニット１３の図示せぬメモリには、カメラヘッド制御メニューの表示欄に表示される、カメラモードなどの各項目の候補を示す情報が記録されている。例えば、カメラモードの項目の候補として、５００万画素の観察画像を撮像するノーマルモード、２５０万画素の観察画像を撮像するビニングモード、ユーザが撮像タイミングを指示するトリガモードなどを示す情報が記録されている。そして、カメラモードを設定するための表示欄には、これらのカメラモードを示す文字が表示され、ユーザは、表示された文字を選択することで、所望のカメラモードを指定する。

同様に、例えば、カメラコントロールユニット１３のメモリには、露光方式の項目の候補として、プログラムＡＥ（Auto Exposure）、マニュアルＡＥ、シャッタスピード優先ＡＥ、および絞り優先ＡＥを示す情報が記録されている。ここで、プログラムＡＥは、予め記録されているプログラムによりシャッタスピードおよび絞り値を定める露光方式であり、マニュアルＡＥは、シャッタスピードおよび絞り値がユーザにより指定される露光方式である。また、シャッタスピード優先ＡＥおよび絞り優先ＡＥのそれぞれは、シャッタスピードおよび絞り値のそれぞれが固定値とされて、絞り値およびシャッタスピードが定められる露光方式である。

また、例えばメモリには測光方式の項目の候補として、中央部重点方式、多分割方式、およびスポット方式のそれぞれを示す情報が記録されており、これらの方式を示す文字が測光方式を設定するための表示欄に表示される。

メニュー表示領域５３にカメラヘッド制御メニューが表示されると、ユーザは、表示されたカメラヘッド制御メニューの所望の項目に対して操作を行い、標本に適したカメラモード、露光方式、測光方式等を選択し、カメラヘッド１２における各種設定を指示する。

カメラコントロールユニット１３は、ユーザの指示に応じたコマンドを、カメラＩ／Ｆケーブル２２を介してカメラヘッド１２に転送し、各種の設定を行わせる。カメラヘッド１２は転送されてきたコマンドに応じて、例えばカメラモードとして、ノーマルモードを設定したり、測光方式としてスポット方式を設定したりする。

また、カメラヘッド制御メニューには、図３における場合と同様に、カメラヘッド１２の設定の各項目の情報を観察画像に重畳させるときに操作されるチェックボックスが設けられている。カメラコントロールユニット１３は、それらのチェックボックスに対する操作に応じて、カメラヘッド１２の設定についての重畳情報を生成して保持する。そしてカメラコントロールユニット１３は、生成した重畳情報により示される情報を、画像表示領域５２の観察画像に一時的に重畳させて表示させる。

さらに、ユーザは、画像表示領域５２に表示される観察画像をより見やすくするために、ウィンドウ５１のメニュー表示領域５３にメインメニューを表示させて、メインメニューからメニュー項目５４−２を選択する。すると、カメラコントロールユニット１３は、ユーザの操作に応じてメニュー表示領域５３にカメラコントロールユニット制御メニューを表示させる。

例えば、カメラコントロールユニット制御メニューには、検鏡方法に適した色みの補正方法を指定するための表示欄、観察画像のシャープネスの強弱を指定するための表示欄や、観察画像の彩度や色相を指定するためのボタン等が表示される。

また、カメラコントロールユニット１３のメモリには、色みの補正方法の候補を示す情報や、シャープネスの強弱を示す情報が記録されている。例えば、メモリには、色みの補正方法の項目の候補として明視野観察に適した色み補正、蛍光観察に適した色み補正、および微分干渉観察に適した色み補正を示す情報や、シャープネスの強弱の項目の候補として強い、普通、および弱いを示す情報が記録されている。そして、メモリに記録されているこれらの情報を示す文字が、カメラコントロールユニット制御メニューの各表示欄に表示される。

ユーザは、表示されたカメラコントロールユニット制御メニューの所望の項目に対して操作を行って観察画像の色み、シャープネス等の調整を行い、カメラコントロールユニット１３における各種設定を指示する。

カメラコントロールユニット１３は、ユーザの指示に応じて各種の設定を行う。すなわち、カメラコントロールユニット１３は、カメラヘッド１２からの観察画像に対して各種の画像処理を施し、観察画像の色みやシャープネス等を変更する。

また、カメラコントロールユニット制御メニューには、図３における場合と同様に、カメラコントロールユニット１３の設定の各項目の情報を観察画像に重畳させるときに操作されるチェックボックスが設けられている。カメラコントロールユニット１３は、それらのチェックボックスに対する操作に応じて、カメラコントロールユニット１３の設定についての重畳情報を生成して保持する。そしてカメラコントロールユニット１３は、生成した重畳情報により示される情報を、画像表示領域５２の観察画像に一時的に重畳させて表示させる。

さらに、ユーザは、顕微鏡１１におけるオートフォーカス制御を指示する。すると、カメラコントロールユニット１３は、ユーザの操作に応じたコマンドを顕微鏡１１に転送し、顕微鏡１１はコマンドに応じて、標本にピントが合うようにステージを移動させる。これにより画像表示領域５２には、標本におけるユーザの所望する部位が表示される。

以上のように、メニュー表示領域５３に表示されたメインメニューのメニュー項目５４が操作されると、画像表示領域５２には標本の観察画像が表示される。この観察画像を保存しようとする場合には、ユーザは入力操作部２３を操作し、メインメニューにおいてメニュー項目５４−４を選択する。すると、カメラコントロールユニット１３は、ユーザの操作に応じて、モニタ２４に画像保存メニューを表示させる。

これにより、例えばウィンドウ５１のメニュー表示領域５３には、図５に示す画像保存メニューが表示される。

画像保存メニューには、観察画像の保存先の候補が表示される表示欄１１１が設けられており、表示欄１１１には、既にリムーバブルメディア２５上に設けられている各ディレクトリを示す画像および文字が表示されている。表示欄１１１内の所定のディレクトリが選択されると、そのディレクトリは、観察画像が記録されるディレクトリとされる。また、表示欄１１１の図中、下側には、リムーバブルメディア２５に新たなディレクトリを作成させるときに操作されるチェックボックス１１２と、そのディレクトリの名前が入力される入力欄１１３とが設けられている。

さらに、入力欄１１３の図中、下側には表示欄１１４が設けられており、表示欄１１４には、表示欄１１１において選択されたディレクトリ内に記録されている観察画像を示す画像、および観察画像のファイル名を示す文字が表示されている。入力欄１１４内のファイル名が選択されると、これから記録される観察画像は、その選択されたファイル名で記録される。

また、表示欄１１４の図中、下側には、観察画像を新たなファイル名で記録させるときに操作されるチェックボックス１１５と、そのファイル名が入力される入力欄１１６とが設けられている。入力欄１１６の図中、下側には、標本の観察時、つまり観察画像の撮像時における顕微鏡システムの使用用途を選択するためのプルダウンボックス１１７が設けられており、ユーザは、プルダウンボックス１１７に対する操作を行い、適切な使用用途を選択する。図５の例では、使用用途として、病理診断が選択されており、プルダウンボックス１１７には、選択された使用用途を示す文字「病理診断」が表示されている。

プルダウンボックス１１７の図中、下側には、観察画像に付加されるコメントを入力するための入力欄等が表示されている。観察画像には、顕微鏡システムの使用用途ごとに、予め定められた項目の情報がコメントとして付加されるようになされている。

したがって、図５の例では、使用用途「病理診断」に対して予め定められている各項目について、情報を入力する入力欄や、情報を選択するための表示欄などが表示されている。つまり、プルダウンボックス１１７により選択された使用用途によって、メニュー表示領域５３に表示される入力欄などが異なる。

プルダウンボックス１１７の図中、下側には、コメントの項目についての表示欄に表示される、コメントとして付加される情報の候補の表示順を、所定の表示順とするためのチェックボックス１１８−１乃至チェックボックス１１８−４が設けられている。チェックボックス１１８−１乃至チェックボックス１１８−４のそれぞれの右側には、文字「昇順」、「降順」、「使用頻度順」、および「使用時期順」が表示されている。

例えば、チェックボックス１１８−１、またはチェックボックス１１８−２が操作されると、表示欄に表示される候補は、五十音の昇順または降順に表示される。また、チェックボックス１１８−３が操作されると、表示欄に表示される候補は、使用頻度の高い順で表示され、チェックボックス１１８−４が操作されると、表示欄に表示される候補は、最後に選択された日時が現在時刻に近い順番で表示される。なお、以下、チェックボックス１１８−１乃至チェックボックス１１８−４のそれぞれを個々に区別する必要の無い場合、単にチェックボックス１１８と称する。

チェックボックス１１８の下側には、観察画像に付加されるコメントの項目としてのカルテ番号が入力される入力欄１１９が設けられている。また、入力欄１１９の下には、コメントの項目としての性別を選択するための表示欄１２０が設けられており、表示欄１２０には、選択の候補となる性別を示す文字「男性」および「女性」が表示されている。ここで、コメントの項目としての性別は、病理診断の用途で撮像された、画像表示領域５２に表示されている観察画像中の細胞、つまり観察対象の標本である細胞が採取された患者の性別を示している。図５の例では、文字「男性」が選択されており、観察画像は男性患者から採取された細胞の画像とされる。

表示欄１２０の図中、下側には、コメントの項目としての年齢が入力される入力欄１２１が設けられており、入力欄１２１には、観察対象の標本である細胞が採取された患者の年齢が入力される。また、入力欄１２１の下には、コメントの項目としての診断方法を選択するための表示欄１２２が設けられており、表示欄１２２には、選択の候補となる診断方法を示す文字「細胞診」、「内視鏡」、および「切除片」が表示されている。図５の例では、文字「細胞診」が選択されており、細胞診により病理診断が行われた旨のコメントが付加されることになる。

表示欄１２２の図中、下側には、コメントの項目としての撮像部位を選択するための表示欄１２３が設けられており、表示欄１２３には、選択の候補となる撮像部位を示す文字「胃」、「肺」、および「骨髄」が表示されている。図５の例では、文字「胃」が選択されており、観察画像は患者から採取された胃の細胞の画像とされる。

さらに、チェックボックス１１８の図中、下側には、コメントの項目としての染色法を選択するための表示欄１２４が設けられており、表示欄１２４には、選択の候補となる観察対象の細胞の染色法を示す文字「ＨＥ」、「Ａｚａｎ」、および「ＭＴ」が表示されている。表示欄１２４の下には、コメントの項目としての診断を選択するための表示欄１２５が設けられており、表示欄１２５には、選択の候補となる病理診断の診断結果を示す文字「異常なし」、「大腸癌」、「胃潰瘍」、および「胃癌」が表示されている。

このように、メニュー表示領域５３には、顕微鏡システムの使用用途ごとに、予め定められた項目の情報を指定するための入力欄１１９乃至表示欄１２５が表示される。これらの入力欄１１９乃至表示欄１２５は、カメラコントロールユニット１３が図示せぬメモリに記録されているコメントデータベースを参照することで表示される。このコメントデータベースには、使用用途ごとのコメントに関する情報が記録されている。

例えば、コメントデータベースには、使用用途「病理診断」に関する情報として、図６に示す情報が記録されている。図６では、使用用途の欄には、顕微鏡システムの使用用途を示す情報が示されており、項目の欄には、各使用用途に対して定められたコメントの項目が示されており、コメントデータの欄には、各項目の情報の候補が示されている。また、選択回数の欄には、各候補が過去に選択された回数が示されており、最終使用日時の欄には、各候補が最後に選択された日時が示されている。

図６の例では、使用用途として「病理診断」が示されている。また、病理診断に対して定められたコメントの項目として、カルテ番号、性別、年齢、診断方法、撮像部位、染色法、診断結果、および顕微鏡システムの管理者により追加された項目のそれぞれを示す文字「カルテＮｏ」、「性別」、「年齢」、「診断方法」、「撮像部位」、「染色法」、「診断」、および「追加項目」のそれぞれが示されている。

さらに、コメントデータの欄には、コメントの項目としての性別、診断方法、撮像部位、染色法、および診断のそれぞれの候補が複数示されており、選択回数および最終使用日時の欄には、それらの候補の選択回数と、最終使用日時とが示されている。例えば、項目「性別」のコメントデータの欄には、性別の候補として「男性」および「女性」が示されている。また、選択回数および最終使用日時の欄には、候補「男性」の選択回数「４」および最終使用日時「2007.12.1」と、候補「女性」の選択回数「１」および最終使用日時「2007.12.2」とが示されている。例えば、最終使用日時「2007.12.1」は、その日時が２００７年の１２月１日であることを示している。

カメラコントロールユニット１３は、プルダウンボックス１１７が操作されて使用用途が選択されると、コメントデータベースを参照して、選択された使用用途について定められている各項目の情報を指定するための表示欄や入力欄を、メニュー表示領域５３に表示させる。

図５の説明に戻り、表示欄１２５の図中、下側には、コメントの各項目のうちのいくつかの項目の情報を一括して指定するタグを示すボタン１２６−１およびボタン１２６−２が設けられており、それらのボタンには文字「胃診断」および「腸診断」が表示されている。なお、以下、ボタン１２６−１およびボタン１２６−２を個々に区別する必要のない場合、単にボタン１２６と称する。

プルダウンボックス１１７、入力欄１１９乃至表示欄１２５、およびボタン１２６のそれぞれの図中、左側には、各項目の情報を観察画像上に重畳表示させるときに操作されるチェックボックス１２７−１乃至チェックボックス１２７−９が設けられている。

例えば、チェックボックス１２７−２が操作され、チェックボックス１２７−２にチェック記号が表示されると、カメラコントロールユニット１３は、チェックボックス１２７−２に対応する入力欄１１９に入力されたカルテ番号を示す重畳情報を生成し、保持しておく。そして、カメラコントロールユニット１３は、生成した重畳情報により示される情報を、画像表示領域５２の観察画像に一時的に重畳させて表示させる。

図５の例では、顕微鏡１１の設定時において生成された重畳情報により示される情報「レンズＡ」と、チェックボックス１２７が操作されて生成された重畳情報により示される情報「細胞診」および「胃」とが、観察画像に重畳されて表示されている。また、観察画像の記録時には、重畳情報により示される情報が観察画像に重畳された最終的な観察画像が生成されて記録される。

なお、以下、チェックボックス１２７−１乃至チェックボックス１２７−９のそれぞれを個々に区別する必要のない場合、単にチェックボックス１２７と称する。

また、ボタン１２６の図中、下側には、タグの登録を行うときに操作される登録ボタン１２８と、観察画像に、画像保存メニューにおいて入力（指定）されたコメントを付加して記録させるときに操作される保存ボタン１２９とが設けられている。

例えば、図５に示す画像保存メニューが表示されている状態で、ユーザが登録ボタン１２８を操作すると、モニタ２４には、図７に示すタグ登録画面が表示される。タグ登録画面には、タグ名が入力される入力欄１６１が設けられている。また、入力欄１６１の図中、下側には、登録画面が表示される直前の画像保存メニューにおいて、プルダウンボックス１１７により選択された使用用途を示す文字と、表示欄１２２、表示欄１２３、および表示欄１２４により選択された診断方法、撮像部位、および染色法を示す文字とが表示されている。

すなわち、タグ登録画面には文字「使用用途」と、表示されている項目を示す文字「診断方法」、「撮像部位」、および「染色法」とが表示されている。また、それらの文字の図中、右側には、使用用途を示す文字「病理診断」、診断方法を示す文字「細胞診」、撮像部位を示す文字「胃」、および染色法を示す文字「ＨＥ」が表示されている。

タグにおいては、使用用途ごとに、一括して指定できるコメントの項目は予め定められており、図７の例では、指定できるコメントの項目が、表示欄１２２、表示欄１２３、および表示欄１２４により指定される項目とされている。そして、それらの表示欄において選択された情報「細胞診」、「胃」、および「ＨＥ」がタグ登録画面に表示されている。

また、タグ登録画面内の図中、右下には、タグの登録を指示するときに操作される実行ボタン１６２が設けられている。実行ボタン１６２が操作されると、タグ名、使用用途を示す情報、および特定の項目の情報からなるタグのタグ情報が生成される。そして、このタグ情報は、カメラコントロールユニット１３の図示せぬメモリに記録される。

例えば、図７のタグ登録画面において、入力欄１６１にタグ名「胃診断」が入力され、実行ボタン１６２が操作されると、図８に示すタグ情報が生成される。図８では、タグ情報には、タグ名「胃診断」および使用用途「病理診断」と、コメントの項目としての診断方法「細胞診」、撮像部位「胃」、および染色法「ＨＥ」とを示す情報が含まれている。

タグ情報は、画像保存メニューにおいて、コメントの項目のうちの特定のいくつかの項目の情報を一括して指定するために用いられる。例えば、画像保存メニューが表示された状態で、ユーザがプルダウンボックス１１７を操作して使用用途を指定すると、カメラコントロールユニット１３は、メモリに記録されているタグ情報のうち、指定された使用用途を示す情報が含まれるタグ情報を検索する。そして、カメラコントロールユニット１３は、検索により得られたタグ情報のタグを示すボタンを画像保存メニュー上に表示させる。図５の例では、タグを示すボタン１２６−１およびボタン１２６−２が表示されている。

ここで、ユーザが、タグ名が「胃診断」であるタグを示すボタン１２６−１を操作すると、カメラコントロールユニット１３は、画像保存メニューに表示されているコメントの項目のうち、ボタン１２６−１により特定されるタグ情報に含まれている項目の情報を選択する。つまり、この場合、表示欄１２２内の候補「細胞診」、表示欄１２３内の候補「胃」、および表示欄１２４内の候補「ＨＥ」が選択された状態となる。

このように、タグを示すボタン１２６を選択することで、ユーザは、コメントの特定の項目の情報を簡単に指定することができる。

なお、タグ情報に含まれるコメントの項目は、使用用途に対して定められたコメントの項目のうち、例えばカルテ番号や年齢などの入力のたびに異なる可能性の高い項目が除かれた項目、つまり同じ情報が入力される可能性の高い項目とされる。

また、タグ情報には、画像保存メニューにおいて、コメントの項目に対応するチェックボックス１２７にチェック記号を表示させるか否かを示す情報も含まれるようにしてもよい。そのような場合、例えば、タグの登録時にタグ情報に含まれるコメントの項目のうち、対応するチェックボックス１２７にチェック記号が表示されている項目について、その項目にチェック記号を表示させる旨の情報がタグ情報として記録される。そして、画像保存メニューにおいて、そのタグ情報のタグを示すボタン１２６が選択されると、タグ情報に含まれるチェック記号を表示させる旨の情報に基づいて、チェックボックス１２７にチェック記号が表示される。

さらに、画像保存メニューにおいて、保存ボタン１２９が操作されると、カメラコントロールユニット１３は、ユーザの操作に応じてリムーバブルメディア２５を制御し、リムーバブルメディア２５上のユーザにより指定されたディレクトリに、指定されたファイル名で観察画像を記録させる。観察画像が記録されると、モニタ２４の表示は、図２に示したメインメニューに切り替わる。

より詳細には、カメラコントロールユニット１３は、カメラヘッド１２からの観察画像に、保持している重畳情報により示される顕微鏡システムの設定やコメントの項目の情報が表示される最終的な観察画像を生成する。そして、カメラコントロールユニット１３は、生成した最終的な観察画像をファイル形式の画像データに変換する。

また、カメラコントロールユニット１３は、カメラヘッド１２から、カメラヘッド制御メニューにおいて選択された設定を示す情報を取得するとともに、顕微鏡１１から、顕微鏡制御メニューにおいて選択された設定を示す情報を取得する。そして、カメラコントロールユニット１３は、カメラコントロールユニット制御メニューにおいて選択された設定を示す情報と、顕微鏡１１およびカメラヘッド１２から取得した情報とを設定情報とする。

さらに、カメラコントロールユニット１３は、ファイル形式に変換された画像データ（観察画像）に、設定情報、および画像保存メニューにおいて入力されたコメントを付加し、リムーバブルメディア２５に供給して記録させる。例えば、図５の例では、入力欄１１９乃至表示欄１２５において選択または入力された各項目の情報が、コメントとして観察画像に付加される。また、より詳細には、観察画像には、その画像の撮像日時を示す情報も付加される。

なお、画像保存メニューにおいて、必ずしも全ての項目の情報が指定されなくてもよい。また、画像保存メニューにおいて、コメントの項目の表示欄に文字を入力することができるようにし、カメラコントロールユニット１３が入力された文字に基づいて、コメントデータベースから、その項目の情報の候補を検索するようにしてもよい。

例えば、ユーザが図５の表示欄１２４に文字「Ａ」を入力したとすると、カメラコントロールユニット１３は、図６のコメントデータベースを参照して、表示欄１２４に候補が表示される項目「染色法」の候補から、文字「Ａ」で始まる候補を検索する。その結果、先頭の文字が「Ａ」である候補「Ａｚａｎ」が得られる。すると、カメラコントロールユニット１３は、表示欄１２４に表示されている候補の順番を、候補「Ａｚａｎ」が図５中、一番上に位置するように並び替える。これにより、例えば表示欄１２４には、候補「Ａｚａｎ」、候補「ＨＥ」、および候補「ＭＴ」の順で候補が表示される。

さらに、ユーザが文字「Ａ」に続いて文字「Ｂ」を入力すると、カメラコントロールユニット１３は、コメントデータベースを参照して、項目「染色法」の候補から、先頭の２文字が「ＡＢ」である候補を検索する。すると、先頭が「ＡＢ」である候補はないので、カメラコントロールユニット１３は、表示欄１２４に新たな候補を示す文字「ＡＢ」と、その文字「ＡＢ」に続いて他の候補を表示させる。

このように、入力された文字により特定される候補が検索により得られなかった場合には、カメラコントロールユニット１３は、入力された文字を新たな候補を示す文字として、コメントデータの欄に、入力された文字により示される新たな候補を記録する。この場合、項目「染色法」のコメントデータの欄に、新たな候補「ＡＢ」の欄が設けられ、表示欄１２４にも候補「ＡＢ」が表示されることになる。

なお、顕微鏡システムの管理者は、項目の新たな候補だけでなく、新たな項目を設けることができる。例えば、管理者が入力操作部２３を操作して、新たな項目の生成を指示し、その項目を示す文字（項目名）を入力すると、カメラコントロールユニット１３は、図６のコメントデータベースの項目の「追加項目」の欄に、入力された項目名を記録する。これにより、所定の使用用途のコメントの項目として、新たな項目が追加される。さらに、新たな項目が追加された場合には、その項目についての候補がユーザにより入力され、コメントデータベースのコメントデータの欄に追加されるようにしてもよい。

以上のようにして、リムーバブルメディア２５に観察画像が記録されると、ユーザは、記録されている観察画像のうち、所定の条件を満たす観察画像を検索することができる。そのような場合、ユーザは、入力操作部２３を操作して、ウィンドウ５１のメインメニューに表示されているメニュー項目５４−５を選択（操作）する。

これにより、モニタ２４には、例えば図９に示す検索画面が表示される。

図９の検索画面には、観察画像の検索の対象となるリムーバブルメディア２５の領域（ディレクトリ）を指定するための表示欄２０１が設けられている。表示欄２０１には、リムーバブルメディア２５の全体を示す文字「メディア全体」と、各ディレクトリを示す文字「Ａ」、「Ｂ」、および「Ｃ」とが表示されている。

また、表示欄２０１の図中、下側には、観察画像の検索条件として、撮像日時が入力される入力欄２０２、カメラヘッド１２の設定を指定する表示欄等、カメラコントロールユニット１３の設定を指定する表示欄等、顕微鏡１１の設定を指定する表示欄等、およびコメントの内容を指定する表示欄等が設けられている。

すなわち、入力欄２０２には、検索条件としての観察画像の撮像日時が入力される。また、入力欄２０２の下には、検索条件としてカメラヘッド１２の設定を指定する表示欄２０３、表示欄２０４、入力欄２０５、および表示欄２０６が設けられている。

表示欄２０３には、検索条件としてのカメラモードの候補「ノーマルモード」、候補「ビニングモード」、および候補「トリガモード」が表示されており、ユーザは必要に応じてそれらの候補のうちの１つを、検索条件（検索のキー）として指定する。

また、表示欄２０３の図中、右側には検索条件としての露光方式の候補が表示される表示欄２０４が設けられており、表示欄２０３の下には、検索条件としての明るさが入力される入力欄２０５が設けられている。さらに、表示欄２０４の図中、下側には検索条件としての測光方式の候補が表示される表示欄２０６が設けられている。

さらに、入力欄２０５の図中、下側には、検索条件としてカメラコントロールユニット１３の設定を指定する表示欄２０７、表示欄２０８、入力欄２０９、および入力欄２１０が設けられている。

表示欄２０７には、検索条件としての色みの補正方法の候補「明視野」、候補「蛍光」、および候補「ＤＩＣ」が表示されており、ユーザは必要に応じて、それらの候補のうちの１つを検索条件として指定する。また、表示欄２０７の図中、右側には、検索条件としてのシャープネスの強弱の候補が表示される表示欄２０８が設けられており、表示欄２０７の下には、検索条件としての彩度が入力される入力欄２０９が設けられている。さらに、入力欄２０９の右側には、検索条件としての色相が入力される入力欄２１０が設けられている。

また、入力欄２０９の図中、下側には、検索条件として顕微鏡１１の設定を指定する表示欄２１１、表示欄２１２、表示欄２１３、および入力欄２１４が設けられている。

表示欄２１１には、検索条件としての対物レンズの候補「レンズＡ」、候補「レンズＢ」、および候補「レンズＣ」が表示されており、ユーザは必要に応じて、それらの候補のうちの１つを検索条件として指定する。また、表示欄２１１の図中、右側には、検索条件としてのフィルタの候補が表示される表示欄２１２が設けられており、表示欄２１１の下には、検索条件としての照明の候補が表示される表示欄２１３が設けられている。さらに、表示欄２１３の右側には、検索条件としてのステージの位置を入力する入力欄２１４が設けられている。

また、表示欄２１３の図中、下側には、検索条件として、コメントに含まれる情報を指定する表示欄等を表示させるためのプルダウンボックス２１５およびチェックボックス２１６−１乃至チェックボックス２１６−４が設けられている。

ユーザは、プルダウンボックス２１５を操作して、顕微鏡システムの使用用途を指定することで、使用用途ごとに予め定められた項目の情報を指定するための表示欄等を表示させる。図９の例では、プルダウンボックス２１５により、使用用途「病理診断」が指定されており、検索画面には、「病理診断」に対して予め定められた項目の情報を指定するための入力欄２１７、表示欄２１８、入力欄２１９、表示欄２２０乃至表示欄２２３、ボタン２２４−１、およびボタン２２４−２が表示されている。

なお、これらの入力欄２１７乃至ボタン２２４−２は、コメントデータベースに基づいて表示され、図５の入力欄１１９乃至ボタン１２６−２と同様であるので、その説明は適宜、省略する。すなわち、入力欄２１７乃至ボタン２２４−２と、入力欄１１９乃至ボタン１２６−２とは、観察画像に付加するコメントの項目の情報を指定するか、または検索条件として、コメントの項目の情報を指定するかという点においてのみ異なっている。

また、ユーザにより、チェックボックス２１６−１乃至チェックボックス２１６−４の何れかが操作されると、表示欄２１８および表示欄２２０乃至表示欄２２３に表示される項目の候補の並ぶ順番が変更される。

例えば、チェックボックス２１６−１またはチェックボックス２１６−２が操作されると、表示欄２１８および表示欄２２０乃至表示欄２２３に表示される項目の候補は、五十音の昇順または降順に並び替えられる。

また、チェックボックス２１６−３が選択されると、表示欄２１８および表示欄２２０乃至表示欄２２３に表示される項目の候補は、コメントデータベースに記録されている選択回数の多い順に並び替えられる。例えば、図６のコメントデータベースにおいて、項目「性別」の候補「男性」および候補「女性」の選択回数は、それぞれ「４」および「１」であるので、表示欄２１８において、選択回数の多い順に図中、上から候補「男性」および候補「女性」の順に表示される。

さらに、チェックボックス２１６−４が選択されると、表示欄２１８および表示欄２２０乃至表示欄２２３に表示される項目の候補は、コメントデータベースに記録されている最終使用時刻の新しい順に並び替えられる。

なお、同様に、図５のチェックボックス１１８−３またはチェックボックス１１８−４が操作された場合にも、カメラコントロールユニット１３は、コメントデータベースに記録されている選択回数または最終使用時刻を参照して、画像保存メニューのコメントの項目の表示欄内の候補の順番を並び替える。また、コメントデータベースに、コメントの各項目の情報が、検索画面において選択された回数および最後に選択された日時が記録されるようにしてもよい。そのような場合、チェックボックス２１６−３またはチェックボックス２１６−４が操作されたときには、検索画面における各候補の選択回数または最終使用日時に基づいて、各表示欄の候補が並び替えられる。

なお、以下、チェックボックス２１６−１乃至チェックボックス２１６−４のそれぞれを個々に区別する必要のない場合、単にチェックボックス２１６と称する。また、以下、ボタン２２４−１およびボタン２２４−２を個々に区別する必要のない場合、単にボタン２２４と称する。

さらに、検索画面の図中、右下には、検索ボタン２２５が設けられている。ユーザは、入力操作部２３を操作して、検索対象となる範囲（ディレクトリ）および検索条件を指定し、その後、検索ボタン２２５を選択することで、観察画像を検索させることができる。カメラコントロールユニット１３は、検索ボタン２２５が選択されて検索が指示されると、ユーザにより指定されたディレクトリから、指定された検索条件を満たす観察画像を検索し、その結果得られた観察画像に関する情報を検索画面の図中、左側に並べて表示させる。

図９では、検索画面には、検索結果として得られた観察画像のサムネイル画像２２６−１乃至サムネイル画像２２６−５のそれぞれが表示されている。また、それらのサムネイル画像の図中、右側には、観察画像のファイル名、観察画像に付加された撮像日時、カメラヘッド１２の設定、カメラコントロールユニット１３の設定、顕微鏡１１の設定、およびコメントが表示されている。なお、以下、サムネイル画像２２６−１乃至サムネイル画像２２６−５のそれぞれを個々に区別する必要のない場合、単にサムネイル画像２２６と称する。

さらに、検索画面にサムネイル画像２２６が表示されると、ユーザは、所望のサムネイル画像２２６を選択して、選択したサムネイル画像２２６に対応する観察画像を表示させたり、観察画像を他のディレクトリに移動させたりすることができる。また、観察画像が、USB（Universal Serial Bus）ネットワークや外部インターフェース等によりカメラコントロールユニット１３に接続されている、他の装置に出力されるようにしてもよい。

例えば、検索画面の図中、左下にはサムネイル画像２２６に対応する観察画像のうちの２つを並べて表示させるときに操作される比較ボタン２２７が設けられており、ユーザにより比較ボタン２２７が操作されると、モニタ２４には、図１０に示す比較画面が表示される。

比較画面には、サムネイル画像２２６に対応する観察画像が表示される表示領域２５１および表示領域２５２が並べられて設けられている。例えば、表示領域２５１には、図９の検索画面中の最も上側に位置するサムネイル画像２２６−１に対応する観察画像が表示され、表示領域２５２には、図９の検索画面中の上から２番目に位置するサムネイル画像２２６−２に対応する観察画像が表示される。

図１０の例では、表示領域２５１および表示領域２５２に表示されている観察画像上には、その観察画像に重畳された顕微鏡システムの設定やコメントを示す文字「ノーマルモード」、「病理診断」、および「胃」が表示されている。また、表示領域２５１には、表示されている観察画像のファイル名「画像１」と、その観察画像が検索画面において、図９中、上から何番目のサムネイル画像２２６に対応する画像であるかを示す文字「No.1/5」とが表示されている。ここで、文字「No.1/5」は、図９の検索画面に表示された５つのサムネイル画像２２６のうち、一番上側に位置するサムネイル画像２２６に対応する観察画像であることを示している。

さらに、表示領域２５１には、表示領域２５１の表示を切り替えるためのボタン２５３およびボタン２５４が設けられており、それらのボタンが操作されると、表示領域２５１には、現時点において表示されている観察画像の１つ前および後の観察画像が表示される。

例えば、表示領域２５１にサムネイル画像２２６−２の観察画像が表示されている状態でボタン２５３が操作されると、表示領域２５１には、検索画面においてサムネイル画像２２６が表示されている順番における１つ前のサムネイル画像２２６−１の観察画像が表示される。同様に、表示領域２５１にサムネイル画像２２６−２の観察画像が表示されている状態でボタン２５４が操作されると、表示領域２５１には、１つ後のサムネイル画像２２６−３の観察画像が表示される。

また、表示領域２５２には、表示領域２５１と同様に、表示されている観察画像のファイル名「画像３」と、その観察画像が検索画面において、図９中、上から何番目のサムネイル画像２２６に対応する画像であるかを示す文字「No.3/5」とが表示されている。さらに、表示領域２５２には、表示領域２５２の表示を切り替えるためのボタン２５６およびボタン２５７が設けられており、それらのボタンが操作されると、表示領域２５２には、現時点において表示されている観察画像の１つ前および後の観察画像が表示される。

さらに、また、表示領域２５２にはボタン２５８が設けられており、ボタン２５８が操作されると、モニタ２４の表示は、比較画面から直前に表示されていた検索画面に切り替わる。

比較画面が表示されると、ユーザは、ボタン２５３乃至ボタン２５７を適宜、操作することにより、サムネイル画像２２６のうちの所望する２つのサムネイル画像２２６に対応する観察画像を、表示領域２５１および表示領域２５２に並べて表示させることができる。例えば、ユーザは、表示領域２５１に基準となる特定の観察画像を表示させたままの状態で、ボタン２５６およびボタン２５７を操作して、表示領域２５２に他の観察画像を順番に表示させていき、基準となる観察画像と、他の観察画像とを比較することができる。

このように、検索により得られた複数の観察画像を並べて表示することにより、ユーザは、同じ用途または条件で撮像された観察画像を簡単に比較することができる。

なお、２つの観察画像が並べられて表示される例について説明したが、３以上の観察画像が並べられて表示されるようにしてもよく、例えば検索により得られた全ての観察画像が並べられて表示されてもよい。

次に、図１１および図１２のフローチャートを参照して、以上において説明した顕微鏡システムの動作の流れについて説明する。

図１１は、顕微鏡システムが観察画像をリムーバブルメディア２５に記録する処理である記録処理を説明するフローチャートである。この記録処理は、ウィンドウ５１に標本の観察画像が表示された状態でメインメニュー上のメニュー項目５４−４が選択され、ウィンドウ５１に図５の画像保存メニューが表示されると開始される。

ステップＳ１１において、カメラコントロールユニット１３は、入力操作部２３からの信号に応じて、観察画像の保存先のディレクトリ、および観察画像のファイル名を選択する。すなわち、画像保存メニューが表示されると、ユーザは入力操作部２３を操作して、表示欄１１１から所望のディレクトリを指定するか、またはチェックボックス１１２にチェック記号を表示させ、入力欄１１３に新たなディレクトリ名を入力する。また、ユーザは、入力操作部２３を操作して、表示欄１１４から所望のファイル名を指定するか、またはチェックボックス１１５にチェック記号を表示させ、入力欄１１６に新たなファイル名を入力する。

カメラコントロールユニット１３は、ユーザの操作に応じて、表示欄１１１で指定されたディレクトリまたは入力欄１１３に入力されたディレクトリ名の新たなディレクトリを、観察画像の保存先のディレクトリとして選択する。また、カメラコントロールユニット１３は、表示欄１１４で指定されたファイル名または入力欄１１６に入力されたファイル名を、記録する観察画像のファイル名として選択する。

ステップＳ１２において、カメラコントロールユニット１３は、ユーザの操作に応じて顕微鏡システムの使用用途を選択する。すなわち、ユーザが入力操作部２３を操作してプルダウンボックス１１７に対する操作を行い、使用用途を指定すると、カメラコントロールユニット１３は、ユーザの指定した使用用途を選択する。

ステップＳ１３において、カメラコントロールユニット１３は、図示せぬメモリに記録されているコメントデータベースを参照し、選択した使用用途に対して定められているコメントの項目を指定するための領域を画像保存メニューに表示させる。例えば、使用用途として「病理診断」が選択された場合、カメラコントロールユニット１３は、図６のコメントデータベースに基づいて、画像保存メニューに、図５の入力欄１１９乃至表示欄１２５を表示させる。

また、カメラコントロールユニット１３は、カメラコントロールユニット１３の図示せぬメモリに記録されているタグ情報のうち、選択された使用用途を示す情報が含まれているタグ情報を検索し、検索により得られたタグ情報を示すボタン１２６を画像保存メニューに表示させる。さらに、ユーザによりチェックボックス１１８が操作された場合には、カメラコントロールユニット１３は、コメントデータベースに基づいて、表示欄に表示されている候補を並び替える。

このように、画像保存メニューに、コメントを入力するための入力欄１１９乃至ボタン１２６が表示されると、ユーザは、入力欄に文字を入力したり、表示欄から候補を選択したり、またはボタン１２６を選択したりして、コメントの各項目について情報を入力する。また、ユーザは、必要に応じてチェックボックス１２７を操作し、観察画像上に表示させる情報を指定する。

ユーザにより入力操作部２３が操作され、コメントが入力されると、ステップＳ１４において、カメラコントロールユニット１３は、ユーザの入力操作に応じて、ユーザにより指定された、コメントの項目の情報を、観察画像に付加するコメントとして選択する。例えば、カメラコントロールユニット１３は、入力欄１１９乃至表示欄１２５において入力された情報または指定されている候補を、コメントの各項目の情報として選択する。

ステップＳ１５において、カメラコントロールユニット１３は、ユーザによりタグの登録が指示されたか否かを判定する。例えば、ユーザにより登録ボタン１２８が操作された場合、タグの登録が指示されたと判定される。

ステップＳ１５において、タグの登録が指示されなかったと判定された場合、処理はステップＳ１７に進む。

これに対して、ステップＳ１５において、タグの登録が指示されたと判定された場合、ステップＳ１６において、カメラコントロールユニット１３は、タグを登録する。すなわち、カメラコントロールユニット１３は、ユーザの操作に応じて、モニタ２４に図７のタグ登録画面を表示させ、実行ボタン１６２が操作されるとタグ情報を生成し、生成したタグ情報をカメラコントロールユニット１３のメモリに記録することで、タグの登録を行う。

また、ユーザは、コメントの各項目の情報を入力すると、画像保存メニュー上の保存ボタン１２９を操作して、観察画像の記録を指示する。

ステップＳ１６においてタグが登録されるか、またはステップＳ１５においてタグの登録が指示されなかったと判定された場合、ユーザにより保存ボタン１２９が操作されると、処理はステップＳ１７に進む。

ステップＳ１７において、カメラコントロールユニット１３は、観察画像をリムーバブルメディア２５に記録させ、記録処理は終了する。

すなわち、カメラコントロールユニット１３は、ユーザにより保存ボタン１２９が操作されると、チェックボックス１２７により選択されているコメントの項目について、重畳情報を生成する。そして、カメラコントロールユニット１３は、保持している顕微鏡１１、カメラヘッド１２、およびカメラコントロールユニット１３の設定の重畳情報と、生成した重畳情報により示される情報が、画像表示領域５２に表示されている観察画像に表示される最終的な観察画像を生成する。

そして、カメラコントロールユニット１３は、その観察画像に顕微鏡１１やカメラヘッド１２などの顕微鏡システムの設定情報と、画像保存メニューにおいて入力されたコメントとを付加する。さらに、カメラコントロールユニット１３は、リムーバブルメディア２５を制御して、設定情報およびコメントが付加された観察画像を、リムーバブルメディア２５におけるユーザにより指定されたディレクトリに、指定されたファイル名で記録させる。

さらに、カメラコントロールユニット１３は、表示欄１２０および表示欄１２２乃至表示欄１２５において選択された候補について、コメントデータベースの選択回数を１インクリメントするとともに、最終使用日時を現在日時に更新する。

このようにして、顕微鏡システムは、観察画像とともに、使用用途に応じたコメントの項目を入力させるための入力欄や表示欄を表示する。このように、使用用途に応じて、使用用途に対して定められているコメントの項目を入力させる入力欄や表示欄を表示することで、ユーザに簡単かつ確実に必要なコメントを入力させることができる。しかも、入力され、観察画像に付加されるコメントは、指定された使用用途ごとに定められた項目の情報となるため、その情報を検索キーとして用いることで、所望の観察画像を簡単かつ確実に検索できるようになる。

なお、指定されたコメントの項目の情報や、顕微鏡システムの設定が表示される、最終的な観察画像が生成されると説明したが、重畳情報を観察画像に付加しておくようにしてもよい。そのような場合、観察画像の表示時に、付加された重畳情報に基づいて、その重畳情報により示されるコメントの項目の情報や、顕微鏡システムの設定が観察画像に重畳されて表示される。

次に、図１２は、顕微鏡システムがリムーバブルメディア２５に記録されている観察画像から、所定の条件を満たす観察画像を検索する処理である検索処理を説明するフローチャートである。この検索処理は、図２のメインメニュー上のメニュー項目５４−５が選択され、モニタ２４に図９の検索画面が表示されると開始される。

ステップＳ４１において、カメラコントロールユニット１３は、観察画像の検索の対象となる範囲を選択する。すなわち、図９の検索画面が表示されると、ユーザは入力操作部２３を操作して、表示欄２０１から検索の対象となるディレクトリを指定する。図９の例では、ディレクトリとして、リムーバブルメディア２５上の全てのディレクトリを示す「メディア全体」が選択されているので、カメラコントロールユニット１３は、リムーバブルメディア２５の全てのディレクトリを、検索の範囲として選択する。

ステップＳ４２において、カメラコントロールユニット１３は、検索条件としての顕微鏡システムの設定を選択する。例えば、ユーザは、入力操作部２３を操作して表示欄２０３乃至入力欄２１４について、必要に応じて入力欄に設定を入力したり、表示欄から候補を選択したりして、顕微鏡システムの設定を指定する。また、ユーザは、必要に応じて入力欄２０２に撮像日時を入力する。

すると、カメラコントロールユニット１３は、ユーザの操作に応じて表示欄２０３乃至入力欄２１４において入力された情報または指定されている候補を、観察画像の検索条件として選択する。また、カメラコントロールユニット１３は、入力欄２０２に撮像時刻が入力された場合には、その入力された撮像時刻も検索条件とする。

さらに、ユーザは、顕微鏡システムの設定を検索条件として指定すると、入力操作部２３を操作して、プルダウンボックス２１５に対する操作を行い、検索しようとする観察画像の撮像時の使用用途を指定する。

ステップＳ４３において、カメラコントロールユニット１３は、ユーザのプルダウンボックス２１５に対する操作に応じて、プルダウンボックス２１５により指定された使用用途を選択する。

また、カメラコントロールユニット１３は、図示せぬメモリに記録されているコメントデータベースを参照し、選択した使用用途に対して定められているコメントの項目を指定するための領域を検索画面に表示させる。これにより、例えば、図９の検索画面に入力欄２１７乃至表示欄２２３が表示される。さらにカメラコントロールユニット１３は、メモリに記録されているタグ情報のうち、選択された使用用途を示す情報が含まれているタグ情報を検索し、検索により得られたタグ情報を示すボタン２２４を検索画面に表示させる。

検索画面に、検索条件としてのコメントの項目の情報を指定するための入力欄２１７乃至ボタン２２４が表示されると、ユーザは、入力欄に文字を入力したり、表示欄から候補を選択したり、またはボタン２２４を選択したりして、コメントの各項目について情報を指定する。

ステップＳ４４において、カメラコントロールユニット１３は、ユーザの操作に応じて、検索条件としてのコメントの項目の情報を選択する。例えば、図９では、コメントの項目として、「性別」、「診断方法」、「撮像部位」、「染色法」、および「診断」のそれぞれの項目について、情報が指定されているので、カメラコントロールユニット１３は、それらの指定された情報を検索条件とする。

なお、ユーザが検索条件を指定するときに、撮像日時、顕微鏡システムの設定、およびコメントの項目の全てについて指定する必要はなく、任意の１以上のものを指定すればよい。したがって、例えば、ユーザは、撮像日時および顕微鏡システムの設定を指定せずに、コメントの所望の項目だけを検索条件として指定することが可能である。また、１つの項目について、２以上の情報を指定するようにしてもよい。

ステップＳ４５において、カメラコントロールユニット１３は、リムーバブルメディア２５の選択したディレクトリを参照して、そのディレクトリ内の観察画像のうち、ユーザにより指定された検索条件を満たす観察画像を検索する。

すなわち、カメラコントロールユニット１３は、観察画像に付加された設定情報およびコメントに基づいて、検索条件として指定された設定情報またはコメントの項目の情報により特定される観察画像を検索する。例えば、図９の例では、指定された「照明Ａ」、「男性」、「細胞診」、「胃」、「ＨＥ」、および「異常なし」が検索のキーとされて観察画像が検索される。これにより、付加された設定情報およびコメントに、検索条件（検索のキー）としての設定情報またはコメントの項目の情報（の一部または全部）が含まれる観察画像が検索結果として得られる。

ステップＳ４６において、カメラコントロールユニット１３は、観察画像の検索結果を検索画面に表示させて、検索処理は終了する。すなわち、カメラコントロールユニット１３は、検索により得られた観察画像をリムーバブルメディア２５から読み出して、その観察画像のサムネイル画像を生成する。そして、カメラコントロールユニット１３は、生成したサムネイル画像と、観察画像のファイル名、観察画像に付加されている撮像日時、顕微鏡システムの設定、およびコメントとを検索画面に表示させる。

これにより、例えば図９の検索画面にサムネイル画像２２６が表示される。そしてユーザは、必要に応じて比較ボタン２２７を操作して比較画面を表示させ、所望の観察画像を観察する。

このようにして、顕微鏡システムは、ユーザにより指定されたディレクトリから、指定された撮像日時、顕微鏡システムの設定、コメントの項目の情報などを検索条件として観察画像を検索し、検索結果を表示する。

このように、撮像日時、顕微鏡システムの設定、およびコメントの項目の情報のうちの少なくとも１つを用いて観察画像の検索を行うことで、確実に所望する画像を検索することができる。例えば、コメントの項目は、観察画像の撮像時の使用用途ごとに定められているので、観察画像に付加されるコメントには、使用用途に応じた項目について、何らかの情報が必ず含まれることになる。したがって、検索条件として所定の項目の情報を指定すれば、付加されたコメントに、指定した項目の情報が含まれる観察画像が必ず得られる。

また、撮像日時だけでなく、顕微鏡システムの設定やコメントを検索のキーとして利用することで、より確実に所望の観察画像が得られる。例えば、ユーザは、同じ設定で撮像された観察画像を検索し、見比べることもできる。

なお、上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。上述した一連の処理をソフトウェアにより実行する場合には、一連の処理を行うためにカメラコントロールユニット１３に実行させるプログラムは、予めカメラコントロールユニット１３内のメモリやリムーバブルメディア２５に記録させておくことができる。

なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。

本発明を適用した顕微鏡システムの一実施の形態の構成例を示す図である。メインメニューの表示例を示す図である。顕微鏡制御メニューの表示例を示す図である。顕微鏡制御メニューに各項目を表示させるために記録されている情報の例を示す図である。画像保存メニューの表示例を示す図である。コメントデータベースについて説明する図である。タグ登録画面の表示例を示す図である。タグ情報の例を示す図である。検索画面の表示例を示す図である。比較画面の表示例を示す図である。記録処理を説明するフローチャートである。検索処理を説明するフローチャートである。

符号の説明

１１顕微鏡，１２カメラヘッド，１３カメラコントロールユニット，２３入力操作部，２４モニタ，２５リムーバブルメディア

Claims

観察試料の撮像時における顕微鏡システムの使用用途ごとに定められている項目の情報であるコメント情報を、ユーザの入力操作に応じて選択する選択手段と、
前記撮像された観察試料の観察画像、前記観察試料の撮像時における前記顕微鏡システムの設定を示す設定情報、および選択された前記コメント情報を記録する記録手段と、
前記記録手段に記録されている前記観察画像の中から、前記ユーザにより指定された前記設定情報または前記コメント情報に基づいて特定される観察画像を検索する検索手段と、
前記検索手段による検索結果の表示を制御する表示制御手段と
を備えることを特徴とする顕微鏡用画像の情報処理装置。
前記表示制御手段は、前記観察画像の記録時において、前記コメント情報が外部入力される入力欄、または前記コメント情報の候補が選択可能に並べられて表示される表示欄の表示をさらに制御し、
前記選択手段は、前記入力欄に入力された情報、または前記表示欄において指定された前記候補を、前記コメント情報として選択する
ことを特徴とする請求項１に記載の顕微鏡用画像の情報処理装置。
前記表示制御手段は、前記観察画像の記録時において、前記ユーザにより前記使用用途が指定されると、前記入力欄または前記表示欄の表示を制御する
ことを特徴とする請求項２に記載の顕微鏡用画像の情報処理装置。
前記記録手段は、複数の前記入力欄または前記表示欄において指定される前記コメント情報のそれぞれに関連付けてタグ情報をさらに記録し、
前記表示制御手段は、前記入力欄または前記表示欄とともに、前記タグ情報が表示されるように前記タグ情報の表示を制御し、
前記選択手段は、表示されている前記タグ情報が指定された場合、そのタグ情報により示される前記コメント情報を選択する
ことを特徴とする請求項２または請求項３に記載の顕微鏡用画像の情報処理装置。
前記表示制御手段は、前記観察画像の検索時において、前記コメント情報が前記ユーザにより外部入力される入力欄、または前記コメント情報の候補が選択可能に並べられて表示される表示欄の表示をさらに制御し、
前記検索手段は、前記入力欄に入力された情報、または前記表示欄において指定された前記候補を検索条件として選択する
ことを特徴とする請求項１に記載の顕微鏡用画像の情報処理装置。
前記表示制御手段は、前記観察画像の検索時において、前記ユーザにより前記使用用途が指定されると、前記入力欄または前記表示欄の表示を制御する
ことを特徴とする請求項５に記載の顕微鏡用画像の情報処理装置。
前記記録手段は、複数の前記入力欄または前記表示欄において指定される前記コメント情報のそれぞれに関連付けてタグ情報をさらに記録し、
前記表示制御手段は、前記入力欄または前記表示欄とともに、前記タグ情報が表示されるように前記タグ情報の表示を制御し、
前記検索手段は、表示されている前記タグ情報が指定された場合、そのタグ情報により示される前記項目の情報を前記検索条件として選択する
ことを特徴とする請求項５または請求項６に記載の顕微鏡用画像の情報処理装置。