JP2011048013A - Control device and microscope system using the control device - Google Patents
Control device and microscope system using the control device Download PDFInfo
- Publication number
- JP2011048013A JP2011048013A JP2009194437A JP2009194437A JP2011048013A JP 2011048013 A JP2011048013 A JP 2011048013A JP 2009194437 A JP2009194437 A JP 2009194437A JP 2009194437 A JP2009194437 A JP 2009194437A JP 2011048013 A JP2011048013 A JP 2011048013A
- Authority
- JP
- Japan
- Prior art keywords
- observation
- image
- container
- template
- stage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Abstract
Description
本発明は制御装置および顕微鏡システムに関し、特に、顕微鏡を利用して標本を観察する場合において、無駄な観察画像が撮影されてしまうことを防止できるようにした制御装置および顕微鏡システムに関する。 The present invention relates to a control device and a microscope system, and more particularly to a control device and a microscope system that can prevent useless observation images from being taken when a specimen is observed using a microscope.
従来、ウェルプレートの各ウェルに異なる試薬を添加する等して、複数の標本を異なる条件で観察する場合に、標本の形態的な変化を捉えて、個々の標本にどのような現象が起こっているのかを知りたいという要求がある。ウェル内にある複数の標本が観察対象とされる場合には、１つのウェル内のいくつかの領域が、それぞれ被写体とされて標本ごとに観察画像が撮影される。 Conventionally, when observing multiple specimens under different conditions, for example, by adding different reagents to each well of a well plate, it is possible to detect the morphological changes of specimens and see what phenomenon occurs in each specimen. There is a request to know if there is. When a plurality of specimens in the well are to be observed, several regions in one well are taken as subjects, and an observation image is taken for each specimen.
また、顕微鏡で標本を観察する場合に用いられる技術として、ウェルプレートに光を照射し、ウェルプレートからの反射光の強度を測定することにより、ウェルプレート上のウェルの配列方向を特定する技術もある（例えば、特許文献１参照）。 In addition, as a technique used when observing a specimen with a microscope, there is also a technique for irradiating the well plate with light and measuring the intensity of the reflected light from the well plate to identify the array direction of the wells on the well plate. Yes (see, for example, Patent Document 1).
ところで、顕微鏡の対物レンズとステージとの相対的な位置関係を変化させて、ウェルプレート上の複数の位置において観察画像を撮影する場合、観察者が、対物レンズの観察視野がどこにあるのかを特定することは困難であった。なぜなら、ウェルプレートの大きさに対して、対物レンズの観察視野は狭いためである。例えば、１０倍の対物レンズの視野が直径２ｍｍ程度であるのに対し、ウェルプレートは数１０ｍｍ以上の寸法を持っているためである。そのため、標本の観察に時間がかかるだけでなく、無駄な観察画像が撮影されてしまう恐れがあった。 By the way, when taking observation images at multiple positions on the well plate by changing the relative positional relationship between the objective lens of the microscope and the stage, the observer identifies where the observation field of the objective lens is It was difficult to do. This is because the observation field of the objective lens is narrow with respect to the size of the well plate. This is because, for example, the field of view of a 10 × objective lens is about 2 mm in diameter, whereas the well plate has dimensions of several tens of mm or more. Therefore, not only does it take time to observe the specimen, but there is a possibility that a useless observation image is taken.
例えば、上述した技術では、ウェルプレート上のウェルの配列方向は特定できるが、各ウェルの位置までは特定できないため、観察者はウェルプレートのどの部分を観察しているかを知ることができず、ウェル壁の部分の画像など、標本の含まれていない無駄な観察画像が撮影されてしまうことがあった。 For example, in the technique described above, the arrangement direction of the wells on the well plate can be specified, but the position of each well cannot be specified, so the observer cannot know which part of the well plate is being observed, In some cases, a wasteful observation image that does not include a specimen, such as an image of a well wall portion, is captured.
本発明は、このような状況に鑑みてなされたものであり、顕微鏡を利用して標本を観察する場合において、無駄な観察画像が撮影されてしまうことを防止することができるようにするものである。 The present invention has been made in view of such a situation, and it is possible to prevent a useless observation image from being taken when a specimen is observed using a microscope. is there.
本発明の制御装置は、顕微鏡のステージ上に載置された観察対象に対して、前記観察対象の各領域を、撮影が許可される撮影領域とするか、または撮影が許可されない非撮影領域とするかを設定するためのテンプレート情報を記録する記録手段と、前記顕微鏡の対物レンズと、前記ステージとの相対的な位置関係、および前記テンプレート情報に基づいて、前記対物レンズの観察視野内にある前記観察対象の領域が、前記撮影領域であるか否かを判別する判別手段と、前記判別手段による判別結果に基づいて、前記観察対象の各領域の観察画像の撮影を制限する制限手段とを備えることを特徴とする。 The control device according to the present invention may be configured such that, for an observation target placed on a stage of a microscope, each area of the observation target is a shooting area where shooting is permitted, or a non-shooting area where shooting is not allowed Based on the relative positional relationship between the recording means for recording the template information for setting whether or not, the objective lens of the microscope and the stage, and the template information, it is within the observation field of view of the objective lens A discriminating unit for discriminating whether or not the observation target region is the imaging region; and a limiting unit for limiting the imaging of the observation image in each of the observation target regions based on a discrimination result by the discrimination unit It is characterized by providing.
本発明によれば、顕微鏡を利用して標本を観察する場合において、無駄な観察画像が撮影されてしまうことを防止することができる。 ADVANTAGE OF THE INVENTION According to this invention, when observing a sample using a microscope, it can prevent that a useless observation image is image | photographed.
以下、図面を参照して、本発明を適用した実施の形態について説明する。 Embodiments to which the present invention is applied will be described below with reference to the drawings.
〈第１の実施の形態〉
［顕微鏡観察システムの構成］
図１は、本発明を適用した顕微鏡観察システムの一実施の形態の構成例を示す図である。この顕微鏡観察システムは、顕微鏡１１、パーソナルコンピュータ１２、およびコントローラ１３から構成される。
<First Embodiment>
[Configuration of microscope observation system]
FIG. 1 is a diagram showing a configuration example of an embodiment of a microscope observation system to which the present invention is applied. This microscope observation system includes a microscope 11, a personal computer 12, and a
顕微鏡１１には、観察対象の標本が入れられた容器１４が載置されるステージ２１、照明光を射出する光源２２および光源２３、対物レンズ２４、複数の対物レンズ２４を保持するレボルバ２５、並びにカメラ２６が設けられている。
The microscope 11 includes a stage 21 on which a
光源２２から放射された光束は、図示していない照明光学系により集光され、容器１４に照射される。また、光源２３から放射された光束は、対物レンズ２４からカメラ２６の撮像素子に至る結像光学系の光路中にあるハーフミラー等で、結像光学系に導入され、対物レンズ２４を介して容器１４に照射される。また、結像光学系は、対物レンズ２４と図示しない結像レンズからなり、容器１４中の標本の像を撮像素子に結像する。
The light beam emitted from the light source 22 is collected by an illumination optical system (not shown) and irradiated onto the
ステージ２１は、コントローラ１３の制御に従って電動駆動され、移動する。これにより、ステージ２１と対物レンズ２４との相対的な位置関係が変化する。具体的には、ステージ２１は、対物レンズ２４の光軸と垂直な方向、つまり図中、横方向および奥行き方向（以下、ｘｙ方向とも称する）に移動する。
The stage 21 is electrically driven and moves in accordance with the control of the
また、ステージ２１には、図示せぬリニアエンコーダが設けられており、パーソナルコンピュータ１２は、コントローラ１３を介してリニアエンコーダから供給された信号により、ステージ２１のｘ，ｙの各方向の位置を知ることができる。
Further, the stage 21 is provided with a linear encoder (not shown), and the personal computer 12 knows the position of the stage 21 in each of the x and y directions based on a signal supplied from the linear encoder via the
レボルバ２５は、コントローラ１３の制御に従って電動駆動され、保持している複数の対物レンズ２４のうちの何れかを、結像光学系の光路上に配置する。また、レボルバ２５は、コントローラ１３により駆動され、内蔵されたフォーカシング機構により、対物レンズ２４の光軸と平行な方向、すなわち図中、縦方向（以下、ｚ方向と称する）に移動する。これにより、対物レンズ２４がｚ方向に移動することになる。
The
さらに、光源２２および光源２３は、コントローラ１３の制御に従って照明光を射出し、照明光を容器１４に照射する。例えば、容器１４内の標本が明視野観察される場合、光源２２から照明光が射出され、照明光は図示せぬ照明光学系を通って図中、上側から容器１４に照射される。そして、容器１４内の標本に照射された照明光は、標本を透過して観察光となり、対物レンズ２４を介してカメラ２６に入射する。
Further, the light source 22 and the
また、例えば標本が蛍光観察される場合、光源２３から照明光として励起光が射出され、照明光は図示せぬ光学系および対物レンズ２４を通って図中、下側から容器１４に照射される。容器１４内の標本に照明光が照射されると、標本からは観察光としての蛍光が発現する。標本からの観察光は対物レンズ２４を含む結像光学系を通ってカメラ２６に入射する。
For example, when the specimen is observed with fluorescence, excitation light is emitted as illumination light from the
カメラ２６は、ＣＣＤ（Charge Coupled Devices）等の撮像素子からなり、対物レンズ２４を介して標本の像を撮像することで、標本を被写体とする観察画像を撮影する。撮影により得られた観察画像は、カメラ２６からコントローラ１３に供給される。
The camera 26 is composed of an imaging element such as a CCD (Charge Coupled Devices), and takes an image of the specimen through the objective lens 24, thereby photographing an observation image with the specimen as a subject. An observation image obtained by photographing is supplied from the camera 26 to the
コントローラ１３は、パーソナルコンピュータ１２からの指示に応じて顕微鏡１１の各部の動作を制御したり、カメラ２６から供給された観察画像をパーソナルコンピュータ１２に供給したりする。
The
パーソナルコンピュータ１２は、マウスなどからなる入力部３１、入力部３１からの指示に応じて動作する制御装置３２、および液晶ディスプレイなどからなり、観察画像等の画像を表示する表示部３３から構成される。制御装置３２は、観察者（ユーザ）の入力部３１への操作に応じて、コントローラ１３の動作を制御したり、表示部３３に各種の画像を表示させたりする。
The personal computer 12 includes an
また、図１の制御装置３２は、より詳細には図２に示すように構成される。すなわち、制御装置３２は、記録部６１、観察制御部６２、領域設定部６３、および表示制御部６４から構成される。
Further, the
記録部６１は、カメラ２６で撮影された観察画像や、容器１４の種別ごとに予め得られているテンプレート情報などの各種のデータを記録する。
The
ここで、テンプレート情報とは、ステージ２１に容器１４が載置されたときの、容器１４における標本が入れられる標本収容部の位置を示す情報である。より詳細には、テンプレート情報には、仮想的な容器全体の画像であるテンプレート画像の画像データと、標本収容部の位置を示す標本収容部ごとの観察区域情報とが含まれている。
Here, the template information is information indicating the position of the specimen storage unit in which the specimen is placed in the
例えば、標本の観察に用いる容器１４として、複数のウェルを有するウェルプレートや、複数の区域に仕切られた４分割ディッシュなどが用いられる。これらの仕切られたウェルや区域にはそれぞれ標本が入れられる。さらに、ウェルや区域毎に標本の観察条件を異なるものとするために、各ウェルや区域には、互いに異なる試薬が添加されたり、各ウェルや区域が互いに異なる濃度の溶液で満たされたりする。
For example, as the
なお、以下においては、説明を簡単にするため、容器１４としてウェルプレートが用いられるものとして説明を続ける。容器１４がウェルプレートである場合、テンプレート情報により示される標本収容部は、標本が入れられる各ウェルである。
In the following, the description will be continued assuming that a well plate is used as the
また、容器１４がウェルプレートである場合、ウェルプレートの種別によって、ウェルプレートに設けられたウェルの数、ウェルの形状、ウェルの大きさ、ウェルプレート上における各ウェルの位置の少なくとも何れかが異なる。そのため、記録部６１は、ウェルプレート（容器１４）の種別ごとに、テンプレート情報を記録している。
When the
本実施の形態では、このテンプレート情報に含まれるテンプレート画像は、ステージ２１が移動されていない状態で、ステージ２１上の予め定められた位置（以下、仮想基準位置と称する）に、仮想的な容器を載置し、カメラにより、その仮想的な容器全体を上方から撮影して得られる画像である。なお、カメラにより撮像された画像以外にも、ウェルプレートの製造元が持っている容器１４の寸法図から作成された画像をテンプレート画像としてもよい。
In the present embodiment, the template image included in the template information is a virtual container at a predetermined position on the stage 21 (hereinafter referred to as a virtual reference position) in a state where the stage 21 is not moved. Is an image obtained by photographing the entire virtual container from above with a camera. In addition to the image captured by the camera, an image created from a dimensional drawing of the
なお、ステージ２１が移動されていない状態とは、対物レンズ２４の光軸が、ステージ２１の中心の位置にある状態をいう。また、仮想基準位置は、例えば、ステージ２１が移動されていない状態において、仮想的な容器の中心が、対物レンズ２４の光軸の位置となり、かつ仮想的な容器の長手方向がｘ方向（例えば、図１の奥行き方向）と平行となるような位置である。 The state where the stage 21 is not moved means a state where the optical axis of the objective lens 24 is at the center position of the stage 21. The virtual reference position is, for example, when the stage 21 is not moved, the center of the virtual container is the position of the optical axis of the objective lens 24, and the longitudinal direction of the virtual container is the x direction (for example, , In the depth direction of FIG. 1).
例えば、１２穴のウェルプレートのテンプレート情報に含まれるテンプレート画像は、ステージ２１の仮想基準位置に１２穴のウェルプレートが載置された状態で、その１２穴のウェルプレートを図１中、上側から下方向（ｚ方向）に見たときのウェルプレートの輪郭と、各ウェルの輪郭とを表す画像とされる。 For example, a template image included in the template information of a 12-well well plate is shown in FIG. 1 in a state where the 12-well well plate is placed at the virtual reference position of the stage 21 from the upper side in FIG. The image shows the contour of the well plate and the contour of each well when viewed in the downward direction (z direction).
また、テンプレート情報に含まれるウェルごとの観察区域情報は、テンプレート画像取得時に示すステージ２１の位置を原点とし、仮想的なウェルプレートを仮想基準位置に載置した場合に、対物レンズ２４の光軸と交わる位置を基準位置とし、その基準位置を原点としたときのウェルの位置を示す情報である。 The observation area information for each well included in the template information is based on the optical axis of the objective lens 24 when the virtual well plate is placed at the virtual reference position with the position of the stage 21 shown at the time of obtaining the template image as the origin. Is the information indicating the position of the well when the position intersecting with the reference position is the reference position and the reference position is the origin.
なお、以下、テンプレート画像により表される仮想的なウェルプレートを、仮想ウェルプレート、またはテンプレートと呼ぶこととする。 Hereinafter, a virtual well plate represented by a template image is referred to as a virtual well plate or a template.
また、本実施の形態での説明では、説明を簡単にするために、テンプレート画像の基準位置とステージ２１から出力される位置情報の原点は同一位置に設定した。具体的には、対物レンズ２４の光軸と垂直な平面（ｘｙ平面）上のｘｙ座標を考え、ステージ２１の中心が対物レンズ２４の光軸と交わる状態のステージ２１の位置を、ステージ２１の基準位置とする。また、ステージ２１が基準位置にあるときのステージ２１のｘｙ座標を（０，０）とした。そして、仮想ウェルプレートの各ウェルの形状が、半径ｒの円形状であるものとする。したがって、ウェルの観察区域（ｘ１，ｙ１）は、任意の１つのウェルの中心位置を（ｘφｎ，ｙφｎ）としたときに、（ｘ１−ｘφｎ）２＋（ｙ１−ｙφｎ）２≦ｒ２を満たす領域とされる。 In the description of the present embodiment, the reference position of the template image and the origin of the position information output from the stage 21 are set at the same position in order to simplify the description. Specifically, considering the xy coordinates on a plane (xy plane) perpendicular to the optical axis of the objective lens 24, the position of the stage 21 in a state where the center of the stage 21 intersects the optical axis of the objective lens 24 is determined. The reference position. Further, the xy coordinate of the stage 21 when the stage 21 is at the reference position is (0, 0). The shape of each well of the virtual well plate is assumed to be a circle having a radius r. Therefore, the well observation area (x1, y1) satisfies (x1−xφn) 2 + (y1−yφn) 2 ≦ r 2 when the center position of any one well is (xφn, yφn). It is considered as an area.
したがって、ステージ２１上に載置されたウェルプレートと同じ種別のテンプレート情報を用いれば、対物レンズ２４の光軸、すなわち対物レンズ２４の観察視野の中心の位置が、ウェルプレートのどの領域にあるかを特定することが可能となる。 Therefore, if the same type of template information as that of the well plate placed on the stage 21 is used, in which region of the well plate the optical axis of the objective lens 24, that is, the center position of the observation field of the objective lens 24 is located. Can be specified.
例えば、ウェルプレートをステージ２１上に載置し、ステージ２１を移動させたとする。そのような場合、そのウェルプレートと同じ種別のテンプレートの各ウェルの観察区域情報と、ｘｙ座標により表されるステージ２１の位置とから、対物レンズ２４の観察視野の中心が、ウェルプレート上のどのウェルの領域内にあるかを特定することができる。 For example, it is assumed that the well plate is placed on the stage 21 and the stage 21 is moved. In such a case, from the observation area information of each well of the same type of template as the well plate and the position of the stage 21 represented by the xy coordinates, the center of the observation field of the objective lens 24 is determined on the well plate. It can be specified whether it is in the region of the well.
但し、この場合、実在のウェルプレートが、仮想ウェルプレートと同じ位置、つまり仮想基準位置に配置されることが前提とされる。 However, in this case, it is assumed that the actual well plate is arranged at the same position as the virtual well plate, that is, the virtual reference position.
このように、記録部６１には、テンプレート画像と、ウェルごとの観察区域情報とからなるテンプレート情報が記録されている。
Thus, the
また、図２の観察制御部６２は、入力部３１から供給される信号に応じて、コントローラ１３を制御し、顕微鏡１１で撮像する位置を制御したり、表示部３３で表示される内容を表示制御部６４に指示を与えたりする。観察制御部６２には、カメラ２６による観察画像の撮影を制御する撮影制御部７１が設けられている。
2 controls the
領域設定部６３は、ステージ２１上の容器１４全体に対して、観察画像の撮影が許可される撮影領域と、観察画像の撮影が許可されない非撮影領域とを設定する。また、領域設定部６３は、判別部７２を有しており、判別部７２は、ステージ２１のｘｙ座標と、観察区域情報とに基づいて、対物レンズ２４の観察視野が、ステージ２１上の容器１４の撮影領域内にあるか否かを判別する。
The
なお、以下、ステージ２１に設けられたリニアエンコーダから出力される信号により得られる、ステージ２１のｘ，ｙの各方向の座標を示す情報を単に、位置情報とも称する。 Hereinafter, information indicating coordinates in the x and y directions of the stage 21 obtained from a signal output from a linear encoder provided on the stage 21 is also simply referred to as position information.
表示制御部６４は、観察画像の画像データや、テンプレート情報に含まれるテンプレート画像の画像データを、記録部６１または観察制御部６２から取得して表示部３３に供給し、表示部３３に観察画像やテンプレート画像を表示させる。
The
［顕微鏡観察システムの動作］
ところで、観察者が所定の種別の容器１４をステージ２１上の予め定められた所定の位置に所定の姿勢で載置し、入力部３１を操作して容器１４に入れられた標本の蛍光観察を指示すると、顕微鏡観察システムは、観察者の指示に応じて標本を観察し、観察画像を撮影する処理である観察処理を開始する。
[Operation of microscope observation system]
By the way, an observer places a predetermined type of
以下、図３のフローチャートを参照して、顕微鏡観察システムによる観察処理について説明する。 Hereinafter, the observation process by the microscope observation system will be described with reference to the flowchart of FIG.
ステップＳ１１において、観察制御部６２は、テンプレートを選択する。
In step S11, the
例えば、観察者は、ステージ２１上に標本の入った容器１４を載置すると、入力部３１を操作して、テンプレートの一覧の表示を指示する。すると、観察制御部６２は、入力部３１からの信号に応じて表示制御部６４にテンプレートの一覧の表示を指示し、表示制御部６４は、その指示に従って記録部６１に記録されているテンプレート情報を参照して、表示部３３にテンプレートの一覧を表示させる。
For example, when the observer places the
そして、観察者が入力部３１を操作して、表示された一覧から、ステージ２１に載置した容器１４と同じ種別のテンプレート（仮想ウェルプレート）を指定すると、観察制御部６２は、観察者の操作に応じて指定されたテンプレートを選択する。
Then, when the observer operates the
テンプレートが指定されると、観察制御部６２は、コントローラ１３を制御して、光源２３から照明光を射出させるとともに、カメラ２６に容器１４の一部の領域を被写体とする観察画像を撮影させる。また、コントローラ１３は、カメラ２６から供給された観察画像を、観察制御部６２を介して表示制御部６４に供給する。
When the template is designated, the
ステップＳ１２において、表示制御部６４は、観察制御部６２からの指示に応じて、コントローラ１３から供給された観察画像や、標本の観察時の操作に関するGUI（Graphical User Interface）が表示される観察ウィンドウを表示部３３に表示させる。
In step S <b> 12, the
これにより、表示部３３の表示画面には、例えば、図４に示す観察ウィンドウ１０１が表示される。
Thereby, for example, an
観察ウィンドウ１０１の中央には、カメラ２６により撮影された観察画像が表示される観察画面１１１が設けられている。また、観察画面１１１の図中、右側には、マップウィンドウ１１２、選択操作ウィンドウ１１３、観察条件調整ウィンドウ１１４、およびステージ操作ウィンドウ１１５が設けられている。
In the center of the
マップウィンドウ１１２には、観察者により選択されたテンプレートのテンプレート画像１２１、つまり仮想ウェルプレートの画像が表示される。表示制御部６４は、観察者から指定されたテンプレートのテンプレート画像１２１を記録部６１から取得して、表示部３３にテンプレート画像１２１を表示させる。図４の例では、テンプレート画像１２１として、マップウィンドウ１１２に、図中、縦方向に３個、横方向に４個の合計１２個のウェルが設けられた仮想ウェルプレートが表示されている。
The
さらに、表示制御部６４は、観察制御部６２から供給されたステージ２１の位置情報に基づいて、テンプレート画像１２１上に、現時点における観察視野の中心の位置を示す観察マーク１２２を表示させる。この位置は、対物レンズ２４の光軸との交点の位置と一致している。
Furthermore, the
図４の例では、観察マーク１２２は、仮想ウェルプレートにおける図中、左端から３番目、かつ上から２番目のウェル内に表示されている。したがって、観察画面１１１には、ステージ２１上の容器１４における、先のウェル内にある標本の観察画像が表示されていることになる。
In the example of FIG. 4, the
上述したように、テンプレートは、ステージ２１に実際に載置された容器１４と同じ種別のものが選択される。そのため、容器１４には、マップウィンドウ１１２に表示されている仮想ウェルプレート（テンプレート）と同じ配列でウェルが設けられている。したがって、仮想ウェルプレート上の観察マーク１２２に示される位置に対応する、容器１４上の位置が、実際に顕微鏡１１により観察されていることになる。
As described above, the same template as the
このように、マップウィンドウ１１２に、テンプレート画像１２１および観察マーク１２２を表示することにより、観察者は、ステージ２１にどのような容器１４が載置されており、その容器１４のどの位置を観察しているかを容易に把握することができる。
Thus, by displaying the
また、選択操作ウィンドウ１１３には、顕微鏡１１の光学系中に配置される蛍光フィルタや、標本の観察倍率を選択するためのアイコンが設けられており、観察者は、入力部３１を操作してこれらのアイコンを選択することで、蛍光フィルタや観察倍率を変更できる。
In addition, the selection operation window 113 is provided with a fluorescent filter arranged in the optical system of the microscope 11 and an icon for selecting an observation magnification of the specimen. The observer operates the
例えば、選択操作ウィンドウ１１３内のアイコンが操作されると、コントローラ１３は、観察制御部６２の指示に応じて、顕微鏡１１の蛍光フィルタを変更させたり、レボルバ２５を駆動させて、観察光の光路上に配置される対物レンズ２４を変更させたりする。
For example, when an icon in the selection operation window 113 is operated, the
観察条件調整ウィンドウ１１４には、観察画像の撮影時の露光条件や、標本に照射される照明光の明るさなど、標本の観察条件を調整するためのアイコンが設けられている。観察者は、入力部３１を操作してこれらのアイコンを操作することで、露光条件や照明光の明るさを調整することができる。
The observation
例えば、観察条件調整ウィンドウ１１４内のアイコンに対する操作がなされると、コントローラ１３は、観察制御部６２の指示に応じて顕微鏡１１を制御し、カメラ２６における露光時間や、光源２３からの照明光の明るさ（光量）を変更させる。
For example, when an operation is performed on an icon in the observation
ステージ操作ウィンドウ１１５には、ステージ２１をｘ，ｙの各方向に移動させるときに操作されるアイコン、および対物レンズ２４（レボルバ２５）をｚ方向に移動させるときに操作されるアイコンが設けられている。観察者は、入力部３１を操作してこれらのアイコンを操作することで、ステージ２１や対物レンズ２４を移動させることができる。
The
図３のフローチャートの説明に戻り、表示部３３に観察ウィンドウ１０１が表示されると、ステップＳ１３において、観察制御部６２は、撮影領域の指定を受け付ける。すなわち、観察制御部６２は、マップウィンドウ１１２内のテンプレート画像１２１に撮影位置を設定することで撮影対象のウェルの指定を受け付ける。
Returning to the description of the flowchart of FIG. 3, when the
すると、観察制御部６２は、領域設定部６３に、観察者により指定された仮想ウェルプレート上のウェルと同じ位置にある容器１４上のウェルの領域を撮影領域とするように指示する。
Then, the
ステップＳ１４において、領域設定部６３は、観察制御部６２からの指示に応じて、撮影対象ウェルの領域情報を記録部６１から取得し、撮影領域を設定する。なお、撮影対象ウェルの指定方法は、これだけに限られず、観察者により指定された仮想ウェルプレート（テンプレート）上のウェルを指定してもよい。このように撮影位置に該当するウェル、または指定されたウェルを指定ウェルと呼ぶこととする。領域設定部６３は、取得したテンプレート情報に含まれる、指定ウェルの領域情報により撮影領域を設定し、容器１４上の他の領域を非撮影領域として設定する。つまり、容器１４上において、指定ウェルと同じ位置にある容器１４上のウェルの領域を除く領域が非撮影領域とされる。
In step S <b> 14, the
ここで、指定ウェルと同じ位置にある容器１４上のウェルの領域のみが、観察画像の撮影が許可される撮影領域とされるのは、次のような理由からである。
Here, the reason why only the region of the well on the
指定ウェルに対応する容器１４上のウェルは、観察者がこれから観察しようとするウェルであり、容器１４上の他のウェルは、現時点では観察する意思のないウェルである。つまり、観察者は、指定ウェルに対応するウェル内での観察画像の撮影を希望しており、他の領域で撮影された観察画像は不要なはずである。そこで、領域設定部６３は、容器１４上において、指定ウェルと同じ領域のみを撮影領域とし、その他の領域は非撮影領域とすることで、無駄な観察画像が撮影されることを防止する。
The well on the
ステップＳ１５において、観察制御部６２は、コントローラ１３を制御して、設定された撮影領域の中心に対物レンズ２４の観察視野を移動させる。すなわち、観察制御部６２は、領域設定部６３から、指定ウェルの観察区域情報を取得し、その観察区域情報により示される指定ウェルの中心に対物レンズ２４の観察視野の中心（対物レンズ２４の光軸）が位置するように、ステージ２１の移動を指示する。
In step S15, the
すると、コントローラ１３は、観察制御部６２の指示に応じてステージ２１を移動させる。これにより、観察画面１１１の中心に、指定ウェルと同じ位置にある容器１４のウェルの中心位置の画像が表示されることになる。つまり、観察者が観察しようとする領域の画像が表示される。
Then, the
このように、ステージ２１が移動されると、観察者は、さらにステージ操作ウィンドウ１１５内のアイコンを操作して、観察対象のウェル内から目的とする標本を探索する。
As described above, when the stage 21 is moved, the observer further operates the icon in the
ステップＳ１６において、観察制御部６２は、入力部３１からの信号に基づいて、観察者によりｘｙ方向へのステージ２１の移動が指示されたか否かを判定する。
In step S <b> 16, the
ステップＳ１６において、ステージ２１のｘｙ方向への移動が指示されなかったと判定された場合、ステージ２１を移動させないので、処理はステップＳ２０に進む。 If it is determined in step S16 that the movement of the stage 21 in the xy direction has not been instructed, the stage 21 is not moved, and the process proceeds to step S20.
これに対して、ステップＳ１６において、ステージ２１のｘｙ方向への移動が指示されたと判定された場合、ステップＳ１７において、観察制御部６２は、観察者の指示に応じてコントローラ１３を制御し、ステージ２１をｘｙ方向に移動させる。
On the other hand, when it is determined in step S16 that the movement of the stage 21 in the xy direction is instructed, in step S17, the
ステージ２１が移動されると、コントローラ１３は、リニアエンコーダから出力された信号に基づいて、ステージ２１の位置情報を観察制御部６２に供給する。また、観察制御部６２は、コントローラ１３からの位置情報を領域設定部６３に供給し、ステージ２１の位置を判別させる。
When the stage 21 is moved, the
ステップＳ１８において、判別部７２は、保持している指定ウェルの観察区域情報と、観察制御部６２からの位置情報とに基づいて、対物レンズ２４の観察視野が撮影領域から外れたか否かを判定する。
In step S <b> 18, the
例えば、位置情報により示されるステージ２１のｘｙ座標が、観察区域情報により示される、指定ウェルの中心のｘｙ座標を中心とする、ウェルの半径ｒの円の領域内の座標である場合、観察視野が撮影領域から外れていないと判定される。つまり、観察視野は、撮影領域内であるとされる。 For example, when the xy coordinate of the stage 21 indicated by the position information is a coordinate in a circular region having the radius r of the well centered on the xy coordinate of the designated well indicated by the observation area information, Is determined not to be out of the imaging region. That is, the observation visual field is assumed to be within the imaging region.
ステップＳ１８において、観察視野が撮影領域から外れていないと判定された場合、処理はステップＳ２０に進む。 If it is determined in step S18 that the observation visual field is not out of the imaging region, the process proceeds to step S20.
一方、ステップＳ１８において、観察視野が撮影領域から外れたと判定された場合、ステップＳ１９において、観察制御部６２は、観察ウィンドウ１０１内に観察視野が撮影領域から外れていることを表示し、使用者に警告する。
On the other hand, when it is determined in step S18 that the observation visual field has deviated from the imaging region, in step S19, the
具体的には、判別部７２は、観察視野が撮影領域から外れたか否かの判別結果を観察制御部６２に供給する。この判別結果が、観察視野が撮影領域から外れた旨の結果である場合、観察制御部６２は、表示制御部６４を制御して、使用者に警告を発し、使用者に観察視野の中心が撮影領域内の位置となるようにステージ２１を移動させるように指示することを促す。なお、ステージ２１を移動させるべき移動方向および移動量が、判別部７２によって、ステージ２１の位置情報と、指定ウェルの観察区域情報とから求められ、表示されるようにしてもよいし、ステージ２１が移動前の位置に戻されるようにしてもよい。
Specifically, the
このように、制御装置３２は、設定された撮影領域外に対物レンズ２４の観察視野が移動したら警告してステージ２１の移動を促すことにより、非撮影領域での観察画像の撮影を制限する。これにより、ウェル壁等の標本が含まれない画像や、観察の目的とされていない標本の画像など、無駄な観察画像が撮影されてしまうことを防止することができる。
As described above, the
なお、ステップＳ１６乃至ステップＳ１９の処理では、観察者の指示に応じてステージ２１を移動させ、その移動後の位置が撮影領域外である場合に警告を発して、撮影領域内に観察視野が入るように使用者がステージ２１の位置の変更を促すと説明したが、ステージ２１の移動指示の際に、観察視野が撮影領域を外れるような移動の指示がされた場合、その移動が制限されるようにしてもよい。そのような場合、例えば、ステージ２１の移動が指示されたときに、その指示されたステージ２１の移動先が、撮影領域内であるか否かが判別される。 In the processing from step S16 to step S19, the stage 21 is moved according to the instruction of the observer, and a warning is issued when the position after the movement is outside the imaging region, and the observation field of view enters the imaging region. As described above, the user is urged to change the position of the stage 21, but when the movement of the stage 21 is instructed to move so that the observation field of view deviates from the imaging region, the movement is restricted. You may do it. In such a case, for example, when the movement of the stage 21 is instructed, it is determined whether or not the movement destination of the instructed stage 21 is within the imaging region.
また、ステージ２１の移動を制限することにより、非撮影領域での観察画像の撮影を制限すると説明したが、撮影の制限はどのように行われてもよい。例えば、観察画像の撮影（キャプチャ）が指示された場合に、対物レンズ２４の観察視野が非撮影領域内にあるとき、観察画像のキャプチャが行われないようにしてもよい。さらに、対物レンズ２４の観察視野が非撮影領域内にあるとき、観察画像が供給されなかったり、記録されなかったりするようにしてもよい。 Further, it has been described that the movement of the stage 21 is restricted to restrict the photographing of the observation image in the non-photographing area. However, the photographing restriction may be performed in any manner. For example, when the observation image capturing (capture) is instructed, the observation image may not be captured when the observation field of view of the objective lens 24 is in the non-imaging region. Further, when the observation field of view of the objective lens 24 is in the non-photographing region, the observation image may not be supplied or recorded.
なお、観察制御部６２は、観察者により対物レンズ２４のｚ方向の移動が指示された場合には、コントローラ１３を制御して、対物レンズ２４を移動させる。このようにして、観察者は、対物レンズ２４やステージ２１を移動させながら、撮影領域（ウェル）内から、目的とする標本を見つけ出す。
Note that the
また、観察者は、撮影に適した標本を見つけ出すと、ステージ２１のｘｙ方向の位置および対物レンズ２４のｚ方向の位置の微調整を行い、観察画像の画角やピントを定める。そして、観察者は、入力部３１を操作することで、観察ウィンドウ１０１の観察条件調整ウィンドウ１１４上のアイコンを操作して、露光条件や照明光の明るさを調整し、さらに入力部３１を操作して、観察画像の撮影を指示する。
When the observer finds a specimen suitable for photographing, the observer finely adjusts the position of the stage 21 in the xy direction and the position of the objective lens 24 in the z direction to determine the angle of view and focus of the observation image. The observer operates the
ステップＳ１９において警告が発せられた後、ステージ２１の移動が再び指示され（ステップＳ１６）、その指示に基づきステージ２１が移動し（ステップＳ１７）、ステップＳ１８において観察視野が撮影領域から外れていないと判定されたか、またはステップＳ１７でステージ２１の移動後、観察視野が撮影領域から外れていないか、またはステップＳ１６において、ステージ２１の移動が指示されなかったと判定された場合、ステップＳ２０の処理が行われる。 After the warning is issued in step S19, the movement of the stage 21 is instructed again (step S16), and the stage 21 is moved based on the instruction (step S17). In step S18, the observation visual field is not deviated from the imaging region. If it is determined, or after the movement of the stage 21 in step S17, it is determined that the observation field of view has not deviated from the imaging region, or the movement of the stage 21 has not been instructed in step S16, the process of step S20 is performed. Is called.
すなわち、ステップＳ２０において、撮影制御部７１は、入力部３１からの信号に基づいて、観察画像の撮影が指示されたか否かを判定する。ステップＳ２０において、撮影が指示されなかったと判定された場合、観察画像の撮影は行わないので、処理はステップＳ２３に進む。
That is, in step S <b> 20, the
一方、ステップＳ２０において、撮影が指示されたと判定された場合、ステップＳ２１において、撮影制御部７１は、コントローラ１３に観察画像の撮影を指示し、観察画像を撮影させる。コントローラ１３は、撮影制御部７１の指示に応じてカメラ２６に観察画像を撮影させ、カメラ２６から供給された観察画像を観察制御部６２に供給する。なお、撮影制御部７１からは、静止画像を取得するようにコントローラ１３に指示してもよいし、コントローラ１３から供給されたライブ画像から観察画像の１フレーム分をキャプチャして、観察画像としてもよい。
On the other hand, if it is determined in step S20 that shooting has been instructed, in step S21, the
観察制御部６２は、供給された観察画像を表示制御部６４に供給し、観察画面１１１に表示させる。また、観察制御部６２は、コントローラ１３から供給されるステージ２１の位置情報に基づいて、表示制御部６４へマップウィンドウ１１２の対象位置に撮影マークを表示する指示を行う。
The
表示制御部６４は、観察制御部６２の指示に応じて表示部３３を制御し、マップウィンドウ１１２内のテンプレート画像１２１上における、観察画像が撮影された位置に対応する位置に、撮影マークを表示させる。この撮影マークは、観察画像が撮影された位置を示す画像である。
The
これにより、マップウィンドウ１１２には、例えば、図５に示す撮影マーク１５１−１乃至撮影マーク１５１−３が表示される。なお、図５において、撮影マーク１５１−１乃至撮影マーク１５１−３のそれぞれは、１つの観察画像が撮影された位置を示している。なお、以下、撮影マーク１５１−１乃至撮影マーク１５１−３のそれぞれを個々に区別する必要のない場合、単に撮影マーク１５１とも称する。
Thereby, for example, the shooting marks 151-1 to 151-3 shown in FIG. 5 are displayed in the
図５の例では、図中、左上のウェルに対応する容器１４上のウェル内の３箇所において、少なくとも１枚ずつ観察画像が撮影されたことになる。撮影マーク１５１は、観察画像が撮影されるごとに、その観察画像が撮影された位置に表示されていく。このように、観察画像が撮影された位置に、撮影マーク１５１を表示させることにより、観察者は、容器１４上のどの位置で観察画像を撮影したかを簡単に知ることができる。
In the example of FIG. 5, at least one observation image is taken at three locations in the well on the
なお、以下において、テンプレート（テンプレート画像１２１）上のウェルを特定する場合、図５中、一番上の列の左からｊ番目（但し、１≦ｊ≦４）のウェルを、ウェルＡｊとも称し、そのウェルのウェル番地がＡｊであるとする。同様に、図５中、中央の列の左からｊ番目（但し、１≦ｊ≦４）のウェルを、ウェルＢｊとも称し、そのウェルのウェル番地がＢｊであるとする。さらに、図５中、一番下の列の左からｊ番目（但し、１≦ｊ≦４）のウェルを、ウェルＣｊとも称し、そのウェルのウェル番地がＣｊであるとする。 In the following, when a well on a template (template image 121) is specified, the jth well (where 1 ≦ j ≦ 4) from the left in the top row in FIG. 5 is also referred to as well Aj. Suppose that the well address of the well is Aj. Similarly, in FIG. 5, the j-th well (where 1 ≦ j ≦ 4) from the left in the center column is also referred to as well Bj, and the well address of the well is Bj. Further, in FIG. 5, the j-th well (where 1 ≦ j ≦ 4) from the left in the bottom row is also referred to as well Cj, and the well address of the well is assumed to be Cj.
したがって、例えば、図５中、左上のウェルは、ウェルＡ１であり、中央の列の左から４番目のウェルは、ウェルＢ４である。 Therefore, for example, in FIG. 5, the upper left well is the well A1, and the fourth well from the left in the center row is the well B4.
また、実際の容器１４上のウェルについても、テンプレート上のウェルと同様に、ウェルＡｊ，ウェルＢｊ，ウェルＣｊ（但し、１≦ｊ≦４）などと称することとする。
Further, the wells on the
図３のフローチャートの説明に戻り、撮影マークを表示させると、観察制御部６２は、さらに、供給された観察画像とともに、観察画像が撮影された容器１４のウェルを特定するウェル番地を記録部６１に供給し、観察画像およびウェル番地の記録を指示する。
Returning to the description of the flowchart of FIG. 3, when a shooting mark is displayed, the
ステップＳ２２において、記録部６１は、観察制御部６２から供給された観察画像と、ウェル番地とを関連付けて記録する。
In step S22, the
例えば、観察画像の撮影が行われたウェルが、ウェルＡ１であり、その観察画像の撮影が、ウェルＡ１内での１箇所目の撮影であった場合、観察画像のファイル名が「Ａ１−１」などとされて観察画像が記録される。これにより、各観察画像がどの位置で撮影されたものであるかを観察者に対して提示することができる。また、観察者がいちいち各観察画像の撮影位置を記録したり、入力したりする必要もなくなり、より簡単に、かつ間違いなく観察画像の管理をすることができるようになる。 For example, when the well in which the observation image is captured is the well A1, and the observation image is captured at the first position in the well A1, the file name of the observation image is “A1-1. The observation image is recorded. Thereby, it is possible to present to the observer at which position each observation image was taken. Further, it is not necessary for the observer to record or input the shooting position of each observation image, and the observation image can be managed more easily and definitely.
なお、観察画像には、ウェル番地の他、露光時間などの観察条件や、ステージ２１の位置情報、対物レンズ２４のｚ方向の位置を示す座標なども関連付けられて記録されるようにしてもよい。 Note that, in addition to the well address, observation conditions such as exposure time, stage 21 position information, coordinates indicating the position of the objective lens 24 in the z direction, and the like may be recorded in the observation image in association with each other. .
ステップＳ２２において、観察画像が記録されたか、またはステップＳ２０において撮影が指示されなかったと判定された場合、ステップＳ２３において、観察制御部６２は、撮影領域の再設定を行うか否かを判定する。
If it is determined in step S22 that an observation image has been recorded or that shooting has not been instructed in step S20, the
例えば、観察者は、入力部３１を操作して、指定したウェル内で、いくつかの標本を探し出し、それらの標本の観察画像を撮影させる。そして、観察者は、そのウェル内での観察を終えたと判断した場合、入力部３１を操作して、次のウェルを指定し、その指定したウェル内で標本の観察を行う。この場合、新たに指定されたウェルの領域が撮影領域とされる。
For example, the observer operates the
新たなウェルの指定は、上述した指定ウェルの選択と同様に、マップウィンドウ１１２上のテンプレートの任意のウェルを指定することにより行われる。観察者が新たなウェルを指定ウェルとして指定するように入力部３１を操作し、入力部３１からその操作に応じた信号が供給されると、観察制御部６２は、撮影領域の再設定を行うと判定する。
Designation of a new well is performed by designating an arbitrary well of the template on the
ステップＳ２３において、撮影領域の再設定を行うと判定された場合、処理はステップＳ１４に戻り、上述した処理が繰り返される。すなわち、領域設定部６３は、新たに指定されたウェルの領域が撮影領域となり、新たに指定されたウェルを除く領域が非撮影領域となるように、設定を変更する。そして、その後、新たな撮影領域内での観察画像の撮影が行われる。
If it is determined in step S23 that the imaging area is reset, the process returns to step S14, and the above-described process is repeated. That is, the
このように、撮影領域の再設定を適宜行うことで、観察者は、例えば、ウェルＡ１、ウェルＡ２、・・・ウェルＣ４と順番に各ウェル内を観察していくことができる。 In this way, by appropriately resetting the imaging region, the observer can observe the inside of each well in order, for example, well A1, well A2,... Well C4.
また、ステップＳ２３において、撮影領域の再設定を行わないと判定された場合、ステップＳ２４において、観察制御部６２は処理を終了するか否かを判定する。例えば、観察者が入力部３１を操作して、標本の観察の終了を指示した場合、処理を終了すると判定される。
If it is determined in step S23 that the imaging region is not reset, the
ステップＳ２４において、処理を終了しないと判定された場合、処理はステップＳ１６に戻り、上述した処理が繰り返される。すなわち、現時点で指定ウェルとなっているウェル内での観察が継続して行われる。 If it is determined in step S24 that the process is not terminated, the process returns to step S16, and the above-described process is repeated. That is, the observation in the well that is currently the designated well is continuously performed.
また、ステップＳ２４において、処理を終了すると判定された場合、観察制御部６２は、コントローラ１３を制御して顕微鏡１１での観察を終了させ、観察処理は終了する。
If it is determined in step S24 that the process is to be terminated, the
このようにして、顕微鏡観察システムは、ステージ２１上の容器１４に対して、撮影領域と非撮影領域とを設定し、ステージ２１の移動を制限することで、非撮影領域での観察画像の撮影を制限する。
In this way, the microscope observation system sets an imaging region and a non-imaging region for the
このように非撮影領域での撮影を制限することにより、顕微鏡１１を利用して標本を観察する場合において、無駄な観察画像が撮影されてしまうことを防止することができる。その結果、標本の観察に必要な時間をより短くすることができる。つまり、観察者は、より効率よく所望する観察画像だけを得ることができる。 By restricting the photographing in the non-photographing area as described above, it is possible to prevent a useless observation image from being photographed when the specimen is observed using the microscope 11. As a result, the time required for observation of the specimen can be shortened. That is, the observer can obtain only the desired observation image more efficiently.
また、観察者は、複数のテンプレートのなかから、容器１４と同じ種別のテンプレートを選択し、テンプレート上のウェルを指定するだけで、簡単に所望する観察範囲を撮影領域として指定することができる。さらに、この撮影領域から対物レンズ２４の観察視野が外れてしまうこともないので、より迅速に指定ウェルから目的とする標本を探し出すことができる。
Further, the observer can easily specify a desired observation range as an imaging region simply by selecting a template of the same type as the
〈第２の実施の形態〉
［顕微鏡観察システムの動作］
なお、以上においては、実際にステージ２１に載置される容器１４が、仮想基準位置に配置されることを前提として、各処理が行われると説明した。しかしながら、実際には、容器１４はステージ２１上の図示していない位置決め制限などによって位置決めされて設置されており、そこでの位置決め誤差や、実際の容器１４の寸法についてもばらつきがあるため、容器１４が正確に仮想基準位置に載置されるとは限らず、容器１４の載置位置にずれが生じると、指定したウェル内の一部の領域が非撮影領域とされてしまい、観察できる領域が狭くなってしまう。また、実際にはウェルから外れた位置で観察していても、使用者の勘違いによりウェル内と誤認識してしまう場合がある。
<Second Embodiment>
[Operation of microscope observation system]
In the above description, it has been described that each process is performed on the assumption that the
そこで、顕微鏡観察システムに、ステージ２１上の容器１４と、仮想ウェルプレートとの配置位置のずれを補正する機構を設けるようにしてもよい。そのような場合、顕微鏡観察システムにより、図６に示す観察処理が行われる。
Therefore, a mechanism for correcting displacement of the arrangement position between the
すなわち、ステップＳ５１において、テンプレートが選択され、ステップＳ５２において、表示部３３に観察ウィンドウ１０１が表示される。なお、これらのステップＳ５１およびステップＳ５２の処理は、図３のステップＳ１１およびステップＳ１２の処理と同様であるため、その説明は省略する。
That is, a template is selected in step S51, and the
表示部３３に観察ウィンドウ１０１が表示されると、観察者は入力部３１を操作して、テンプレートの修正を指示する。観察者の操作に応じた信号が入力部３１から観察制御部６２に供給されると、ステップＳ５３において、制御装置３２は、テンプレート修正処理を行って、テンプレートの位置を修正する。
When the
すなわち、マップウィンドウ１１２に表示されるテンプレート画像１２１の表示位置が、実際の容器１４の配置位置と合致するように修正され、その修正結果に基づいて、指定されたテンプレート情報に含まれる各ウェルの観察区域情報も補正される。なお、テンプレート修正処理の詳細は後述する。
That is, the display position of the
このように、テンプレート修正処理において、記録部６１が保持している各ウェルの観察区域情報を補正することにより、容器１４の配置位置によらず、観察者により指定されたテンプレート上の指定ウェルに対応する容器１４上のウェルの位置を、より正確に特定できるようになる。したがって、対物レンズ２４の観察視野が撮影領域内に位置するか否かをより正確に特定できるようになり、その結果、より確実に観察画像の無駄な撮影を制限することができる。
As described above, in the template correction process, the observation area information of each well held by the
ステップＳ５３において、テンプレート修正処理が行われると、その後、ステップＳ５４乃至ステップＳ６５の処理が行われて観察処理は終了するが、これらの処理は図３のステップＳ１３乃至ステップＳ２４の処理と同様であるので、その説明は省略する。 When the template correction process is performed in step S53, the process from step S54 to step S65 is performed thereafter, and the observation process is terminated. These processes are the same as the process from step S13 to step S24 in FIG. Therefore, the description is omitted.
なお、ステップＳ５９における、対物レンズ２４の観察視野が、撮影領域から外れたか否かの判定は、補正後の観察区域情報が用いられて行われる。 In step S59, whether or not the observation field of view of the objective lens 24 is out of the imaging region is determined using the corrected observation area information.
次に、図７のフローチャートを参照して、図６のステップＳ５３の処理に対応するテンプレート修正処理について説明する。 Next, the template correction process corresponding to the process of step S53 of FIG. 6 will be described with reference to the flowchart of FIG.
表示部３３に観察ウィンドウ１０１が表示され、観察者によりテンプレートの修正が指示されると、ステップＳ９１において、撮影制御部７１は、容器１４全体の画像であるマクロ画像を撮影させる。
When the
すなわち、観察制御部６２は、コントローラ１３を制御して、容器１４内の標本の観察を、蛍光観察から明視野観察に切り替えさせる。具体的には、観察制御部６２は、標本からの観察光の光路上に配置される対物レンズ２４を、低倍率のものに変更させるとともに、光源２３の動作を停止させ、光源２２から照明光を射出させる。
That is, the
これにより、光源２２からの照明光が容器１４に照射されて、容器１４からの観察光が、低倍率の対物レンズ２４を通ってカメラ２６に入射することになる。また、この状態で、使用者は、対物レンズ２４の焦点位置が、容器１４の中央付近の所定のウェル内の標本の位置となるように、対物レンズ２４をｚ方向に移動させる。つまり、標本に合焦するように対物レンズ２４が移動される。
Thereby, the illumination light from the light source 22 is applied to the
具体的には、まず、観察制御部６２は、対物レンズ２４の光軸中心が、記録部６１に記録されているテンプレートのウェルＢ２に対応する、容器１４のウェル内に位置するようにステージ２１を移動させる。そして使用者は、ウェル内の任意の標本にピントが合うように対物レンズ２４を移動させる。合焦したら、使用者は不図示のアイコンをクリックするなどにより、観察制御部６２に合焦動作が終了したことを通知する。観察制御部６２は、その標本にピントが合った状態における対物レンズ２４のｚ方向の位置Ｚ０を一時的に保持する。
Specifically, first, the
次に、観察制御部６２は、コントローラ１３を制御して、ステージ２１をｘｙ方向に所定量ずつ移動させるとともに、撮影制御部７１は、ステージ２１の移動に同期させて、コントローラ１３にステージ２１の各位置での観察画像の撮影を指示する。
Next, the
このようにして、ステージ２１の各位置での観察画像を撮影することにより、観察制御部６２は、複数の観察画像を得る。そして、観察制御部６２は、このようにして得られた観察画像を、それらの撮影位置と同じ配置で並べて合成することで１つの画像を生成し、得られた画像をマクロ画像とする。
In this manner, the
これにより、例えば、図８に示すマクロ画像１８１が得られる。なお。マクロ画像１８１において、１つの長方形は、撮影により得られた１つの観察画像を示している。つまり、マクロ画像１８１は、図中、縦方向に１３枚、横方向に１２枚の合計１５６枚の観察画像からなる。
Thereby, for example, a
また、マクロ画像１８１の中央には、ステージ２１上に配置された容器１４の画像が表示されている。この容器１４には、縦方向に３つ、横方向に４つの合計１２個のウェルが設けられており、マクロ画像１８１上において、容器１４は図中、右上方向に傾いている。
In addition, an image of the
なお、マクロ画像を撮影するときに、対物レンズ２４のｚ方向の位置を固定したまま各領域での観察画像を撮影するのは、各位置において、多少、容器１４に焦点が合っていなくても、容器１４全体の画像が得られればよいからである。また、対物レンズ２４の焦点の位置合わせが容器１４のほぼ中央のウェル内で行われるのは、容器１４が傾いていたとしても、他の位置で焦点の位置合わせをする場合と比べて、マクロ画像の各位置でのぼけをより少なくすることができるからである。
It should be noted that when a macro image is captured, the observation image in each region is captured while the position of the objective lens 24 in the z direction is fixed, even if the
また、マクロ画像は、複数枚の観察画像から生成されると説明されたが、ウェルプレート自体がかなり小さい特殊な複数のウェルを持つ容器では、１枚の画像とされてもよい。そのような場合、複数の対物レンズ２４から、観察視野内に容器１４全体が収まるようなものが選択されて、観察光の光路上に配置される。
Further, although it has been described that the macro image is generated from a plurality of observation images, the well plate itself may be a single image in a container having a plurality of special wells that are considerably small. In such a case, the plurality of objective lenses 24 are selected so that the
このようにしてマクロ画像が得られると、観察制御部６２は、生成したマクロ画像を表示制御部６４に供給し、マップウィンドウ１１２に表示させる。
When the macro image is obtained in this way, the
ステップＳ９２において、表示制御部６４は、観察制御部６２からのマクロ画像を表示部３３に供給し、マップウィンドウ１１２にマクロ画像を表示させる。
In step S <b> 92, the
これにより、マップウィンドウ１１２には、例えば、図９に示すように、マクロ画像１８１がテンプレート画像１２１に重畳（スーパーインポーズ）されて表示される。図９の例では、テンプレート画像１２１の仮想ウェルプレートと、マクロ画像１８１上のウェルプレートがずれて表示されている。
As a result, for example, as shown in FIG. 9, the
ステップＳ９３において、観察制御部６２は、観察者の操作に応じて表示制御部６４を制御し、テンプレートの表示位置を修正する。すなわち、観察制御部６２は、入力部３１から供給された信号に基づいて、表示制御部６４にテンプレートの移動方向および移動量を通知し、マップウィンドウ１１２上におけるテンプレートの移動を制御する。表示制御部６４は、観察制御部６２からの通知に基づいてマップウィンドウ１１２上のテンプレートを移動させる。
In step S93, the
例えば、観察者は、図１０に示すように、マップウィンドウ１１２上においてマクロ画像１８１のウェルプレートとテンプレートとが完全に重なるように、テンプレート（仮想ウェルプレート）を任意の方向に平行移動させたり、回転移動させたりする。
For example, as shown in FIG. 10, the observer translates the template (virtual well plate) in an arbitrary direction so that the well plate and the template of the
このとき、マップウィンドウ１１２において、マクロ画像１８１は固定されたままとされ、テンプレート画像１２１（テンプレート）の表示位置だけが移動する。また、図１０に示したように、テンプレートとマクロ画像１８１が重なった状態となると、観察者は、入力部３１を操作して、テンプレートの修正の実行を指示する。
At this time, the
すると、観察制御部６２は、観察者の操作に応じて、テンプレートの移動前の位置と、最終的にテンプレートがマクロ画像１８１に重なった状態となったときのテンプレートの位置とに基づいて、テンプレートの移動方向および移動量を求める。そして、観察制御部６２は、求めた移動方向および移動量を領域設定部６３に供給し、領域設定部６３に各ウェルの観察区域情報の補正を指示する。
Then, in accordance with the operation of the observer, the
なお、より詳細には、テンプレートの移動方向とは、テンプレートを平行移動させた方向と、テンプレートを回転移動させた方向をいい、テンプレートの移動量とは、テンプレートの平行移動および回転移動のそれぞれの移動量をいう。 More specifically, the moving direction of the template refers to the direction in which the template is moved in parallel and the direction in which the template is rotated, and the moving amount of the template refers to each of the parallel movement and rotational movement of the template. The amount of movement.
ステップＳ９４において、領域設定部６３は、観察制御部６２から供給されたテンプレートの移動方向および移動量に基づいて、各ウェルの観察区域情報を補正する。
In step S94, the
例えば、領域設定部６３は、観察区域情報と、テンプレートの移動方向および移動量とから、テンプレートの各ウェルの中心の移動後の位置（ｘｙ座標）を求め、それらの位置を示す情報と、ウェルの半径ｒとからなる情報を、補正後の観察区域情報とする。つまり、ウェルの中心の移動後の位置（ステージ２１のｘｙ座標）と、観察区域情報に含まれる移動前のウェルの位置（ステージ２１のｘｙ座標）との差分が、そのウェルの観察区域情報の補正値となる。
For example, the
このように、観察区域情報を補正することにより、ステージ２１に載置された実際の容器１４の各ウェルの位置と、観察区域情報により示されるウェルの位置とのずれが修正される。なお、テンプレートの位置が、得られたマクロ画像１８１の位置に対してずれていないときには、テンプレートの表示位置の修正および観察区域情報の補正は行われない。
In this way, by correcting the observation area information, the deviation between the position of each well of the
また、テンプレートの表示位置の修正では、テンプレートが平行移動または回転移動されると説明したが、テンプレートが拡大または縮小されるようにしてもよい。そのような場合、観察区域情報の補正は、テンプレートの移動方向、移動量、拡大縮小の倍率に基づいて求められる。例えば、テンプレート上の特徴点を予め複数定めておき、テンプレートの修正前後の特徴点の位置の変化に基づいて方程式を立て、その方程式を解くことにより、補正後の各ウェルの中心の座標が求められる。 In the correction of the display position of the template, it has been described that the template is translated or rotated. However, the template may be enlarged or reduced. In such a case, the correction of the observation area information is obtained based on the moving direction, moving amount, and scaling factor of the template. For example, a plurality of feature points on the template are determined in advance, an equation is established based on the change in the position of the feature point before and after the template correction, and the equation is solved to obtain the coordinates of the center of each well after correction. It is done.
このようにして、観察区域情報が補正されると、テンプレート修正処理は終了し、その後、処理は図６のステップＳ５４に進む。このときステージ２１の位置をマクロ画像取得前と同じ位置に移動させ、標本への照明状態を明視野観察照明から蛍光観察照明に切り替えておく。 When the observation area information is corrected in this way, the template correction process ends, and then the process proceeds to step S54 in FIG. At this time, the position of the stage 21 is moved to the same position as before the macro image acquisition, and the illumination state of the specimen is switched from the bright field observation illumination to the fluorescence observation illumination.
なお、上述したように、図６のステップＳ５９においては、補正後の観察区域情報に基づいて、対物レンズ２４の観察視野が撮影領域から外れたか否かの判定が行われる。また、マップウィンドウ１１２において、観察マークおよび撮影マークの表示が行われる場合、マクロ画像および修正後のテンプレートが表示された状態で、観察マークおよび撮影マークが表示される。
Note that, as described above, in step S59 in FIG. 6, it is determined whether or not the observation field of view of the objective lens 24 is out of the imaging region based on the corrected observation area information. When the observation mark and the shooting mark are displayed in the
以上のようにして、制御装置３２は、マップウィンドウ１１２にテンプレートとマクロ画像を重畳して表示させるとともに、観察者の操作に応じてテンプレートの表示位置を修正する。また、制御装置３２は、テンプレートの修正結果に基づいて、テンプレートの各ウェルの観察区域情報を補正する。
As described above, the
このように、テンプレートの修正結果に基づいて、各ウェルの観察区域情報を補正することにより、テンプレートの各ウェルの位置と、実際にステージ２１上に載置されている容器１４の各ウェルの位置とを一致させることができる。したがって、対物レンズ２４の観察視野の位置をより正確に特定することができ、非撮影領域での観察画像の撮影をより確実に制限することができる。また、観察画像に対して、その観察画像が撮影された正確なウェル番地を関連付けて記録できるようになる。
Thus, by correcting the observation area information of each well based on the correction result of the template, the position of each well of the template and the position of each well of the
なお、以上においては、テンプレート画像１２１の移動方向および移動量に基づいて、観察区域情報が補正されると説明したが、観察区域情報の補正は、実際の容器１４上のウェルの位置と、観察区域情報により示されるウェルの位置とのずれが修正されれば、どのように行われてもよい。
In the above description, it has been described that the observation area information is corrected based on the moving direction and movement amount of the
例えば、ステージ２１上に仮想基準位置を表す線等が予め引かれており、観察者がその線と容器１４とのずれ量を計測し、その計測結果を、入力部３１を操作して入力すると、その入力に基づいて、領域設定部６３が観察区域情報を補正するようにしてもよい。また、例えば、容器１４の配置位置の仮想基準位置に対するずれ量を検出するセンサを、予めステージ２１に設けておき、そのセンサの出力に基づいて、領域設定部６３が観察区域情報を補正するようにしてもよい。
For example, when a line representing a virtual reference position is drawn in advance on the stage 21, the observer measures the amount of deviation between the line and the
さらに、例えば、領域設定部６３が、マクロ画像から容器１４の輪郭を抽出し、抽出した容器１４の輪郭の画像と、テンプレート画像とを用いたパターンマッチングにより、容器１４のずれ量を検出して観察区域情報を補正するようにしてもよい。
Further, for example, the
さらに、以上においては、容器１４としてウェルプレートが用いられる例について説明したが、容器１４として複数の区域に仕切られた４分割ディッシュなどが用いられてもよい。
Furthermore, in the above, an example in which a well plate is used as the
例えば、テンプレートとして、４分割ディッシュが選択された場合、図１１に示すように、マップウィンドウ１１２には、４分割ディッシュを表すテンプレート画像２１１が表示される。この場合、テンプレート情報に含まれる観察区域情報は、４分割ディッシュに設けられた、標本が入れられる各区域の位置を特定するための情報とされる。
For example, when a quadrant dish is selected as a template, a
また、テンプレート画像２１１の表示位置の修正が指示されると、ステージ２１上に載置された４分割ディッシュのマクロ画像の撮影が行われ、その結果、例えば、図１２に示す４分割ディッシュのマクロ画像２４１が得られる。そして、図１３に示すように、マップウィンドウ１１２には、マクロ画像２４１がテンプレート画像２１１に重畳（スーパーインポーズ）されて表示される。
When the correction of the display position of the
さらに、図１４に示すように、観察者の入力部３１への操作により、マップウィンドウ１１２上のテンプレート画像２１１（テンプレート）が、マクロ画像２４１上の容器１４と重なるように、テンプレート画像２１１が移動される。そして、テンプレート画像２１１の移動方向および移動量から、観察区域情報が補正される。
Further, as shown in FIG. 14, the
〈第３の実施の形態〉
［顕微鏡観察システムの動作］
また、以上においては、観察者の操作により観察画像が撮影されると説明したが、観察者が観察画像を撮影する位置（以下、撮影ポイントと称する）を登録しておき、それらの登録された位置でタイムラプス観察が行われるようにしてもよい。
<Third Embodiment>
[Operation of microscope observation system]
Further, in the above description, the observation image is taken by the observer's operation. However, the position where the observer takes the observation image (hereinafter referred to as the photographing point) is registered and registered. Time-lapse observation may be performed at the position.
そのような場合、観察者が容器１４をステージ２１上に載置し、入力部３１を操作してタイムラプス観察時の撮影ポイントの指定の開始を指示すると、顕微鏡観察システムは、その指示に応じて撮影ポイントの登録を行なう処理である登録処理を開始する。
In such a case, when the observer places the
以下、図１５のフローチャートを参照して、顕微鏡観察システムによる登録処理について説明する。なお、図１５において、ステップＳ１２１乃至ステップＳ１３０の処理のそれぞれは、図６のステップＳ５１乃至ステップＳ６０の処理のそれぞれと同様であるので、その説明は省略する。 Hereinafter, registration processing by the microscope observation system will be described with reference to the flowchart of FIG. In FIG. 15, the processes in steps S121 to S130 are the same as the processes in steps S51 to S60 in FIG. 6, and a description thereof will be omitted.
観察者は、撮影に適した標本を見つけ出すと、ステージ２１のｘｙ方向の位置および対物レンズ２４のｚ方向の位置の微調整を行い、観察画像の画角やピントを定める。そして、観察者は、入力部３１を操作することで、ステージ２１のｘｙ方向の位置、および対物レンズ２４のｚ方向の位置を、観察画像を撮影する位置である撮影ポイントとして登録するように指示する。
When the observer finds a specimen suitable for photographing, the observer finely adjusts the position of the stage 21 in the xy direction and the position of the objective lens 24 in the z direction to determine the angle of view and focus of the observation image. Then, the observer operates the
ステップＳ１３１において、観察制御部６２は、撮影ポイントの登録が指示されたか否かを判定する。
In step S131, the
ステップＳ１３１において、登録が指示されなかったと判定された場合、処理はステップＳ１３３に進む。 If it is determined in step S131 that registration has not been instructed, the process proceeds to step S133.
これに対して、ステップＳ１３１において、登録が指示されたと判定された場合、ステップＳ１３２において、観察制御部６２は、指示された撮影ポイントを特定するための撮影位置登録情報を生成する。そして、観察制御部６２は、生成した撮影位置登録情報を記録部６１に供給して記録させる。
On the other hand, when it is determined in step S131 that registration is instructed, in step S132, the
例えば、登録が指示された時点でのステージ２１の位置情報、対物レンズ２４のｚ方向の位置、撮影ポイントを特定する識別番号、および照明光の明るさや露光時間等の現時点での標本の観察条件を示す情報からなる撮影位置登録情報が生成される。 For example, the current specimen observation conditions such as the position information of the stage 21 at the time when the registration is instructed, the position of the objective lens 24 in the z direction, the identification number for specifying the photographing point, and the brightness and exposure time of the illumination light Shooting position registration information including information indicating the above is generated.
ここで、撮影ポイントの識別番号は、撮影ポイントが含まれるウェルのウェル番地と、そのウェル内における何個目の撮影ポイントであるかを示す情報からなる。具体的には、撮影ポイントがウェルＡ１内に位置する２個目の撮影ポイントであるとすると、その撮影ポイントの識別番号は、「Ａ１−２」とされる。 Here, the identification number of the shooting point includes a well address of a well including the shooting point and information indicating the number of shooting points in the well. Specifically, if the shooting point is the second shooting point located in the well A1, the identification number of the shooting point is “A1-2”.
なお、撮影位置登録情報は、登録された順番に並べられて記録される。したがって、制御装置３２は、撮影位置登録情報が並べられている順番から、タイムラプス観察時に、観察画像を撮影していく撮影ポイントの順番を知ることができる。
The shooting position registration information is recorded in the order of registration. Therefore, the
さらに、観察制御部６２は、撮影位置登録情報が記録されて撮影ポイントが登録されると、マップウィンドウ１１２における、その撮影ポイントの位置に、登録された撮影ポイントであることを示す登録マークを表示させるように、表示制御部６４に指示する。すると、表示制御部６４は、観察制御部６２からの指示に応じて、表示部３３を制御し、マップウィンドウ１１２に、登録マークを表示させる。これにより、ウェル内の同じ標本の位置を、観察者が撮影ポイントとして重複して登録してしまうことを防止することができる。
Further, when the shooting position registration information is recorded and the shooting point is registered, the
ステップＳ１３１において、登録が指示されなかったと判定されたか、またはステップＳ１３２において、撮影ポイントが登録されると、ステップＳ１３３において、観察制御部６２は、撮影領域の再設定を行うか否かを判定する。
If it is determined in step S131 that registration has not been instructed, or if a shooting point is registered in step S132, the
ステップＳ１３３において、異なるウェルに移動して撮影するときなどの撮影領域の再設定を行うと判定された場合、処理はステップＳ１２５に戻り、上述した処理が繰り返される。すなわち、領域設定部６３は、新たに指定されたウェルの領域が撮影領域となり、その他の領域が非撮影領域となるように、設定を変更する。そして、新たな撮影領域内での撮影ポイントの登録が行われる。
If it is determined in step S133 that the imaging region is to be reset, such as when moving to a different well for imaging, the process returns to step S125, and the above-described processing is repeated. In other words, the
このように、撮影領域の再設定を適宜行うことで、観察者は、ウェルＡ１、ウェルＡ２、・・・ウェルＣ４と順番に、各ウェル内において任意の数の撮影ポイントを登録していくことができる。 In this way, by appropriately resetting the imaging region, the observer can register an arbitrary number of imaging points in each well in the order of well A1, well A2,... Well C4. Can do.
これに対して、ステップＳ１３３において、撮影領域の再設定を行わないと判定された場合、ステップＳ１３４において、観察制御部６２は、観察動作条件の入力が指示されたか否かを判定する。
On the other hand, when it is determined in step S133 that the imaging region is not reset, the
例えば、観察者は、全ての撮影ポイントの登録を終えると、入力部３１を操作して、タイムラプス観察の撮影時間間隔、撮影回数（ラウンド数）など、タイムラプス観察を行うときの観察動作条件の入力を指示する。観察制御部６２は、入力部３１から、観察動作条件の入力を指示する旨の信号が供給されると、入力が指示されたと判定する。
For example, when the observer finishes registering all the shooting points, the observer operates the
ステップＳ１３４において、観察動作条件の入力が指示されなかったと判定された場合、処理はステップＳ１２７に戻り、上述した処理が繰り返される。 If it is determined in step S134 that the input of the observation operation condition has not been instructed, the process returns to step S127, and the above-described process is repeated.
これに対して、ステップＳ１３４において、観察動作条件の入力が指示されたと判定された場合、ステップＳ１３５において、観察制御部６２は、観察者により入力された観察動作条件を示す観察動作条件情報を記録部６１に供給し、記録させる。
On the other hand, when it is determined in step S134 that the input of the observation operation condition is instructed, in step S135, the
例えば、観察者が、撮影時間間隔として３０分を指定し、撮影回数として４９回を指定したとすると、観察制御部６２は、観察動作条件として、撮影時間間隔「３０分」および撮影回数「４９回」を示す観察動作条件情報を記録部６１に供給して、記録させる。
For example, if the observer designates 30 minutes as the photographing time interval and 49 times as the number of photographing times, the
この場合、登録された全ての撮影ポイントで観察画像を撮影する処理が、３０分間隔で４９回繰り返されることになり、これらの一連の処理が終了するまでに２４時間（＝30×（49−1）＝1440分）かかることになる。 In this case, the process of capturing the observation image at all the registered capturing points is repeated 49 times at 30-minute intervals, and 24 hours (= 30 × (49− 1) = 1440 minutes).
このようにして、記録部６１に観察動作条件情報が記録されると、登録処理は終了する。
In this way, when the observation operation condition information is recorded in the
以上のように、顕微鏡観察システムは、ステージ２１上の容器１４に対して、撮影領域と非撮影領域とを設定し、ステージ２１の移動を制限することで、非撮影領域での撮影ポイントの登録を制限する。これにより、非撮影領域での観察画像の撮影が制限され、無駄な観察画像が撮影されてしまうことを防止することができる。
As described above, the microscope observation system sets the imaging region and the non-imaging region for the
記録部６１に、各撮影ポイントの撮影位置登録情報と、観察動作条件情報とが記録されると、観察者は顕微鏡観察システムに対して、それらの情報に基づくタイムラプス観察をさせることができるようになる。観察者が入力部３１を操作して、タイムラプス観察を指示すると、顕微鏡観察システムは、その指示に応じてタイムラプス観察処理を開始する。
When shooting position registration information and observation operation condition information of each shooting point are recorded in the
以下、図１６のフローチャートを参照して、顕微鏡観察システムによるタイムラプス観察処理について説明する。 Hereinafter, the time-lapse observation process by the microscope observation system will be described with reference to the flowchart of FIG.
ステップＳ１６１において、観察制御部６２は、記録部６１に記録されている観察動作条件情報を参照して、各撮影ポイントにおける観察画像を撮影する時刻となったか否かを判定する。
In step S161, the
ステップＳ１６１において、撮影する時刻となっていないと判定された場合、処理はステップＳ１６１に戻り、撮影する時刻となったと判定されるまで判定の処理が繰り返される。 If it is determined in step S161 that it is not the time for shooting, the process returns to step S161, and the determination process is repeated until it is determined that the time for shooting is reached.
これに対して、ステップＳ１６１において、撮影する時刻となったと判定された場合、ステップＳ１６２において、観察制御部６２は、記録部６１に順番に並べられて記録されている撮影位置登録情報を参照して、撮影ポイントを１つ選択する。
On the other hand, when it is determined in step S161 that it is time to shoot, in step S162, the
ステップＳ１６３において、カメラ２６は、選択された撮影ポイントでの観察画像を撮影する。すなわち、観察制御部６２は、選択した撮影ポイントの撮影位置登録情報に基づいてコントローラ１３を制御し、対物レンズ２４の観察視野の中心が撮影ポイントに位置するようにステージ２１を移動させるとともに、撮影位置登録情報に示される位置に対物レンズ２４を移動させる。また、観察制御部６２は、撮影位置登録情報に基づいてコントローラ１３を制御し、カメラ２６における露光時間や、照明光の明るさも変更させる。さらに、撮影制御部７１は、コントローラ１３を制御して、選択された撮影ポイントにおける観察画像を撮影させる。
In step S163, the camera 26 captures an observation image at the selected capturing point. That is, the
コントローラ１３は、ステージ２１やレボルバ２５を移動させたり、露光時間や照明光の明るさを変更させたりするとともに、カメラ２６に観察画像を撮影させ、撮影により得られた観察画像を観察制御部６２に供給する。
The
また、観察画像の撮影時において、観察制御部６２は、観察画像の撮影位置登録情報を表示制御部６４に供給し、観察画像に関する情報の表示を指示する。すると、表示制御部６４は、観察制御部６２の指示に応じて表示部３３を制御し、現在、どのウェルの何個目の撮影ポイントを撮影しているかを示す文字を観察画面１１１に表示させるとともに、マップウィンドウ１１２に、その撮影ポイントの撮影マークを表示させる。例えば、観察画面１１１に表示される文字は「ウェル番地Ｂ２のポイント２で観察画像を撮影しています」などとされる。
Further, at the time of shooting an observation image, the
ステップＳ１６４において、観察制御部６２は、コントローラ１３から供給された観察画像と、撮影ポイントおよびラウンドを特定する情報とを記録部６１に供給し、関連付けて記録させる。
In step S164, the
例えば、撮影ポイントが、ウェルＢ２内の２個目の撮影ポイントであり、今回の観察画像の撮影が、その撮影ポイントの３回目の撮影である（３ラウンド目である）場合、観察制御部６２は、観察画像のファイル名を「Ｂ２−２−０００３」として記録させる。つまり、撮影ポイントの識別番号にラウンド数が付加された文字列がファイル名とされる。
For example, when the shooting point is the second shooting point in the well B2, and the shooting of the current observation image is the third shooting of the shooting point (the third round), the
ステップＳ１６５において、観察制御部６２は、全ての撮影ポイントで観察画像を撮影したか否かを判定する。ステップＳ１６５において、まだ全ての撮影ポイントで観察画像を撮影していないと判定された場合、処理はステップＳ１６２に戻り、上述した処理が繰り返される。すなわち、次の撮影ポイントの観察画像が撮影される。
In step S165, the
これに対して、ステップＳ１６５において、全ての撮影ポイントで観察画像を撮影したと判定された場合、１つのラウンドが終了したので、ステップＳ１６６において、観察制御部６２は、全てのラウンドが終了したか否かを判定する。
On the other hand, when it is determined in step S165 that the observation images have been captured at all the shooting points, one round is completed. In step S166, the
ステップＳ１６６において、まだ全てのラウンドが終了していないと判定された場合、処理はステップＳ１６１に戻り、上述した処理が繰り返される。すなわち、次のラウンドでの観察画像の撮影が行われる。 If it is determined in step S166 that all the rounds have not been completed yet, the process returns to step S161, and the above-described processes are repeated. That is, the observation image is captured in the next round.
一方、ステップＳ１６６において、全てのラウンドが終了したと判定された場合、タイムラプス観察処理は終了する。 On the other hand, if it is determined in step S166 that all the rounds have been completed, the time lapse observation process ends.
このようにして、顕微鏡観察システムは、記録されている撮影位置登録情報および観察動作条件情報に基づいて、タイムラプス観察を行い、各撮影ポイントの観察画像を記録する。観察画像の記録時に、撮影ポイントとラウンド数とを特定できるようにファイル名を定めることで、より効率的、かつ確実に観察画像の管理を行うことができる。 In this way, the microscope observation system performs time-lapse observation based on the recorded photographing position registration information and observation operation condition information, and records an observation image at each photographing point. By defining the file name so that the shooting point and the number of rounds can be specified when the observation image is recorded, the observation image can be managed more efficiently and reliably.
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。 The embodiment of the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the gist of the present invention.
１１ 顕微鏡， １２ パーソナルコンピュータ， １３ コントローラ， １４ 容器， ２１ ステージ， ２４ 対物レンズ， ２６ カメラ， ３２ 制御装置， ６１ 記録部， ６２ 観察制御部， ６３ 領域設定部， ６４ 表示制御部， ７１ 撮影制御部， ７２ 判別部 11 microscope, 12 personal computer, 13 controller, 14 container, 21 stage, 24 objective lens, 26 camera, 32 control device, 61 recording unit, 62 observation control unit, 63 area setting unit, 64 display control unit, 71 photographing control unit , 72 Discriminator
Claims (12)
前記顕微鏡の対物レンズと、前記ステージとの相対的な位置関係、および前記テンプレート情報に基づいて、前記対物レンズの観察視野内にある前記観察対象の領域が、前記撮影領域であるか否かを判別する判別手段と、
前記判別手段による判別結果に基づいて、前記観察対象の各領域の観察画像の撮影を制限する制限手段と
を備えることを特徴とする制御装置。 For setting whether each region of the observation target is a photographing region where photographing is permitted or a non-photographing region where photographing is not permitted with respect to the observation target placed on the stage of the microscope Recording means for recording template information;
Based on the relative positional relationship between the objective lens of the microscope and the stage and the template information, it is determined whether or not the region to be observed in the observation field of the objective lens is the imaging region. Discriminating means for discriminating;
A control device comprising: a restricting unit that restricts photographing of an observation image of each region of the observation target based on a determination result by the determining unit.
ことを特徴とする請求項１に記載の制御装置。 The restricting means restricts the movement of the stage so that the observation field of view of the objective lens does not move from the photographing region of the observation target to the non-photographing region at the time of photographing the observation image. The control device according to claim 1, wherein the photographing is limited.
前記容器における前記標本収容部とは異なる領域が前記非撮影領域とされる
ことを特徴とする請求項１または請求項２に記載の制御装置。 The observation object is a container having a specimen storage part in which a specimen to be observed is placed,
The control device according to claim 1, wherein an area different from the specimen storage unit in the container is the non-imaging area.
前記観察区域情報に基づいて、前記容器におけるユーザにより指定された１つの前記標本収容部の領域を前記撮影領域とし、前記容器における前記撮影領域を除く領域を前記非撮影領域として設定する領域設定手段をさらに備える
ことを特徴とする請求項３に記載の制御装置。 The observation object is the container having a plurality of specimen storage parts, and the template information includes observation area information indicating the position of the specimen storage part when the container is placed on the stage. Contains
Based on the observation area information, an area setting means for setting one area of the specimen storage unit designated by the user in the container as the imaging area and setting an area excluding the imaging area in the container as the non-imaging area. The control device according to claim 3, further comprising:
前記領域設定手段は、複数の前記テンプレート情報のうち、前記ユーザにより指定された１つの前記テンプレート情報に基づいて、前記撮影領域および前記非撮影領域を設定する
ことを特徴とする請求項４に記載の制御装置。 The recording means records the template information of a plurality of the containers in which at least one of the number, shape, size, or arrangement of the specimen storage portions provided in the container is different from each other,
The area setting means sets the imaging area and the non-imaging area based on one template information designated by the user among the plurality of template information. Control device.
ことを特徴とする請求項４または請求項５に記載の制御装置。 When the resetting of the imaging region is instructed, the region setting means sets the region of the specimen storage unit newly specified by the user as the imaging region, and stores the newly specified sample storage in the container The control apparatus according to claim 4 or 5, wherein an area excluding a portion is set as the non-photographing area.
ことを特徴とする請求項４乃至請求項６の何れかに記載の制御装置。 Correction means for correcting the observation area information so as to correct a deviation between the position of the specimen container in the container placed on the stage and the position of the specimen container indicated by the observation area information The control device according to any one of claims 4 to 6, further comprising:
前記ステージに載置された前記容器全体の画像をマクロ画像として撮影する撮影手段と、
前記テンプレート画像と、前記マクロ画像とを重畳して表示させる表示制御手段と、
前記ユーザの操作に応じて、表示されている前記テンプレート画像の前記容器を、前記マクロ画像の前記容器に対して移動させる移動制御手段と
をさらに備え、
前記補正手段は、前記マクロ画像の前記容器に対する前記テンプレート画像の前記容器の移動方向および移動量に基づいて、前記観察区域情報を補正する
ことを特徴とする請求項７に記載の制御装置。 The template information includes image data of a template image representing the entire virtual container placed on the stage,
A photographing means for photographing an image of the entire container placed on the stage as a macro image;
Display control means for superimposing and displaying the template image and the macro image;
A movement control means for moving the container of the displayed template image relative to the container of the macro image in response to an operation of the user;
The control device according to claim 7, wherein the correction unit corrects the observation area information based on a movement direction and a movement amount of the container of the template image with respect to the container of the macro image.
ことを特徴とする請求項４乃至請求項８の何れかに記載の制御装置。 9. The recording device according to claim 4, wherein the recording unit records the captured observation image in association with information specifying the specimen storage unit in which the observation image in the container is captured. The control apparatus in any one.
前記画像データに基づいて前記テンプレート画像を表示させるとともに、前記テンプレート画像の前記容器上に、前記対物レンズの観察視野の位置を示す画像を表示させる表示制御手段をさらに備える
ことを特徴とする請求項３乃至請求項７の何れかに記載の制御装置。 The template information includes image data of a template image representing the entire virtual container placed on the stage,
The image processing apparatus further comprises display control means for displaying the template image based on the image data and displaying an image indicating the position of the observation field of view of the objective lens on the container of the template image. The control device according to any one of claims 3 to 7.
ことを特徴とする請求項１０に記載の制御装置。 The control device according to claim 10, wherein the display control unit further displays an image indicating a position where the observation image is captured on the container of the template image.
請求項１乃至請求項１１の何れかに記載の制御装置と
を備えることを特徴とする顕微鏡システム。 The microscope having an illumination optical system that irradiates the observation light with illumination light from a light source, and an imaging optical system that focuses the observation light from the observation object and forms an image of the observation object;
A microscope system comprising: the control device according to claim 1.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009194437A JP2011048013A (en) | 2009-08-25 | 2009-08-25 | Control device and microscope system using the control device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009194437A JP2011048013A (en) | 2009-08-25 | 2009-08-25 | Control device and microscope system using the control device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2011048013A true JP2011048013A (en) | 2011-03-10 |
Family
ID=43834428
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009194437A Withdrawn JP2011048013A (en) | 2009-08-25 | 2009-08-25 | Control device and microscope system using the control device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2011048013A (en) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013083743A (en) * | 2011-10-07 | 2013-05-09 | Keyence Corp | Magnifying observation device |
| JP2013145318A (en) * | 2012-01-13 | 2013-07-25 | Sony Corp | Measurement apparatus, program, and measurement method |
| JP2013145326A (en) * | 2012-01-16 | 2013-07-25 | Olympus Corp | Microscope device |
| JP2014157236A (en) * | 2013-02-15 | 2014-08-28 | Olympus Corp | Microscope system, and program |
| JP2017062497A (en) * | 2016-12-05 | 2017-03-30 | ソニー株式会社 | Measuring apparatus, program, and measuring method |
| WO2017154253A1 (en) * | 2016-03-10 | 2017-09-14 | 株式会社Ｓｃｒｅｅｎホールディングス | Imaging arrangement determination method for imaging device and imaging device |
| JP2017223951A (en) * | 2016-06-14 | 2017-12-21 | コリア リサーチ インスティテュート オブ ケミカル テクノロジー | Fine object observation device |
| JP2018116060A (en) * | 2018-02-09 | 2018-07-26 | 日本光電工業株式会社 | Image cytometer |
| WO2019116807A1 (en) * | 2017-12-15 | 2019-06-20 | 富士フイルム株式会社 | Observation device, observation method, and observation program |
| US10436699B2 (en) | 2014-10-20 | 2019-10-08 | Nihon Kohden Corporation | Analyzing system and analyzing apparatus |
-
2009
- 2009-08-25 JP JP2009194437A patent/JP2011048013A/en not_active Withdrawn
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013083743A (en) * | 2011-10-07 | 2013-05-09 | Keyence Corp | Magnifying observation device |
| JP2013145318A (en) * | 2012-01-13 | 2013-07-25 | Sony Corp | Measurement apparatus, program, and measurement method |
| JP2013145326A (en) * | 2012-01-16 | 2013-07-25 | Olympus Corp | Microscope device |
| JP2014157236A (en) * | 2013-02-15 | 2014-08-28 | Olympus Corp | Microscope system, and program |
| US10436699B2 (en) | 2014-10-20 | 2019-10-08 | Nihon Kohden Corporation | Analyzing system and analyzing apparatus |
| JP2017161385A (en) * | 2016-03-10 | 2017-09-14 | 株式会社Ｓｃｒｅｅｎホールディングス | Imaging arrangement determination method in imaging device, and imaging device |
| WO2017154253A1 (en) * | 2016-03-10 | 2017-09-14 | 株式会社Ｓｃｒｅｅｎホールディングス | Imaging arrangement determination method for imaging device and imaging device |
| JP2017223951A (en) * | 2016-06-14 | 2017-12-21 | コリア リサーチ インスティテュート オブ ケミカル テクノロジー | Fine object observation device |
| CN107505457A (en) * | 2016-06-14 | 2017-12-22 | 韩国化学研究院 | Very small items thing observation device |
| CN107505457B (en) * | 2016-06-14 | 2019-06-25 | 韩国化学研究院 | Very small items object observes device |
| US10484614B2 (en) | 2016-06-14 | 2019-11-19 | Korea Research Institute Of Chemical Technology | Apparatus for observing fine object |
| JP2017062497A (en) * | 2016-12-05 | 2017-03-30 | ソニー株式会社 | Measuring apparatus, program, and measuring method |
| WO2019116807A1 (en) * | 2017-12-15 | 2019-06-20 | 富士フイルム株式会社 | Observation device, observation method, and observation program |
| JP2018116060A (en) * | 2018-02-09 | 2018-07-26 | 日本光電工業株式会社 | Image cytometer |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2011048013A (en) | Control device and microscope system using the control device | |
| US10139613B2 (en) | Digital microscope and method of sensing an image of a tissue sample | |
| JP5021254B2 (en) | Control method of microscope apparatus, microscope apparatus | |
| US9959451B2 (en) | Image inspection device, image inspection method and image inspection program | |
| EP1762878B1 (en) | Observation apparatus and observation method | |
| JP5566188B2 (en) | Living body observation device | |
| US9007452B2 (en) | Magnification observation device, magnification observation method, and magnification observation program | |
| JP5547105B2 (en) | Dimension measuring apparatus, dimension measuring method and program for dimension measuring apparatus | |
| US20140313312A1 (en) | Digital microscope and method for optimizing the work process in a digital microscope | |
| JP4831972B2 (en) | Micro manipulation system | |
| JP6001305B2 (en) | Inspection of potential interfering elements in machine vision systems | |
| EP2834832B1 (en) | Integrated optical and charged particle inspection apparatus | |
| JP4156851B2 (en) | Microdissection device | |
| JP6462823B2 (en) | Image inspection device | |
| JP2009204451A (en) | Well-plate and fluorescence imaging system using same | |
| US10186398B2 (en) | Sample positioning method and charged particle beam apparatus | |
| JP5053691B2 (en) | Specimen scanner device and specimen position detection method using the device | |
| JP5343762B2 (en) | Control device and microscope system using the control device | |
| JP2009025349A (en) | Microscope, its control method, and program | |
| US20200302585A1 (en) | Image Measuring Apparatus | |
| WO2016157403A1 (en) | Charged particle beam device, alignment method for charged particle beam device, alignment program, and recording medium | |
| JPWO2016157403A6 (en) | Charged particle beam apparatus, charged particle beam apparatus alignment method, alignment program, and storage medium | |
| JP5718012B2 (en) | Scanning laser microscope | |
| JP2002122552A (en) | Defect inspection device and method | |
| JP4596881B2 (en) | Transmission electron microscope equipment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20121106 |