JPH0675173A - Microscopic system - Google Patents
Microscopic systemInfo
- Publication number
- JPH0675173A JPH0675173A JP22742392A JP22742392A JPH0675173A JP H0675173 A JPH0675173 A JP H0675173A JP 22742392 A JP22742392 A JP 22742392A JP 22742392 A JP22742392 A JP 22742392A JP H0675173 A JPH0675173 A JP H0675173A
- Authority
- JP
- Japan
- Prior art keywords
- image
- parent
- magnification
- observation
- child
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Microscoopes, Condenser (AREA)
Abstract
Description
【0001】[0001]
【産業上の利用分野】本発明は、主に医療、生物系の顕
微鏡観察に利用されるシステムに係り、特に病理分野で
の観察、テレパソロジー、テレコンサルテーション等を
より容易に効率良く行う顕微鏡システムに関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a system mainly used for microscopic observation of medical and biological systems, and particularly to a microscope system for observing in a pathological field, telepathology, teleconsultation, etc. more easily and efficiently. Regarding
【0002】[0002]
【従来の技術】従来、例えば特開昭64−20449号
公報では、「遠隔病理診断回路網」に関する技術が開示
されており、更に親画像からその一部分の拡大を指示し
て子画像を取り込む顕微鏡システムに関する技術につい
ても本出願人により既に提案されている。そして、これ
ら顕微鏡システムでは、静止画像に親子関係を持たせて
管理し観察を行うことが所望されていた。2. Description of the Related Art Conventionally, for example, Japanese Patent Application Laid-Open No. 64-20449 discloses a technique relating to a "remote pathological diagnosis network", and further a microscope for instructing enlargement of a part of a parent image and capturing a child image. The system technology has already been proposed by the applicant. Then, in these microscope systems, it has been desired to manage and observe still images with parent-child relationships.
【0003】ここで、画像の親子関係とは、図21に示
すように、低倍率で取り込んだ広い範囲の画像(a)
と、その一部を拡大して高倍率で取り込んだ画像(b)
の関係をいう。そして、このときの低倍率で取り込まれ
た画像が親画像であり、高倍率で取り込まれた画像が子
画像である。Here, the parent-child relationship of images means, as shown in FIG. 21, a wide range of images (a) captured at a low magnification.
And a part of it enlarged and captured at high magnification (b)
The relationship. The image captured at the low magnification at this time is the parent image, and the image captured at the high magnification is the child image.
【0004】このように親画像から子画像へという手順
による観察は、観察側で見落としなく標本の全てを観察
できる為、組織標本によるテレパソロジーにおいては非
常に有効である。As described above, the observation according to the procedure from the parent image to the child image is very effective in telepathology using a tissue specimen because the entire specimen can be observed on the observation side without oversight.
【0005】[0005]
【発明が解決しようとする課題】しかしながら、親画像
から子画像へといった手順による観察が意味をなさない
場合には、観察の効率を下げてしまう場合もある。即
ち、遠隔細胞診の場合には所望とする部位の高倍率画像
が必要とされ低倍率の全体像は必要とされない為、観察
の効率が低下してしまう。However, if the observation from the parent image to the child image does not make sense, the efficiency of the observation may be reduced. That is, in the case of remote cytodiagnosis, a high-magnification image of a desired site is required and a low-magnification whole image is not required, so that the observation efficiency is reduced.
【0006】また、通信回線を利用しないスタンドアロ
ーンの場合では、通信速度による制約はないので全体像
を静止画で取り込み、徐々に高倍に拡大していく必要は
なく、保存しておきたい画像のみを取り込めば良い。そ
して、コンサルテーションの場合には、必要な画像のみ
を伝送するのが一般的である。Also, in the case of a stand-alone system that does not use a communication line, there is no restriction due to the communication speed, so it is not necessary to capture the whole image as a still image and gradually enlarge it at a high magnification, only the image to be saved. Should be taken in. Then, in the case of consultation, it is general to transmit only necessary images.
【0007】本発明は上記問題に鑑みてなされたもの
で、その目的とするところは、顕微鏡画像の親子関係の
生成を柔軟性をもって行い、観察及び観察後の再生を効
率良く行うことにある。The present invention has been made in view of the above problems, and an object of the present invention is to flexibly generate a parent-child relationship of a microscope image, and to efficiently perform observation and reproduction after observation.
【0008】[0008]
【課題を解決するための手段】上記目的を達成するため
に、本発明の顕微鏡システムでは、所望とする標本の観
察画像を静止画像として取り込む画像取り込み手段と、
上記画像取り込み手段により最低倍率で取り込まれた静
止画像を親画像とし、該親画像中の一部が倍率を上げて
取り込まれた静止画像を子画像として、各画像が取り込
まれた後に、これら静止画像間の親子関係情報を生成す
る親子関係情報生成手段と、上記親子関係情報生成手段
により生成された親子関係情報を記憶する記憶手段と、
上記記憶手段に記憶された親子関係情報に基づいて取り
込まれた静止画像間の親子関係をツリー構造図により表
示する表示手段とを具備することを特徴とする。In order to achieve the above object, in the microscope system of the present invention, image capturing means for capturing an observation image of a desired specimen as a still image,
A still image captured by the image capturing means at the lowest magnification is used as a parent image, and a still image captured by increasing a magnification of a part of the parent image is used as a child image. Parent-child relationship information generating means for generating parent-child relationship information between images, storage means for storing the parent-child relationship information generated by the parent-child relationship information generating means,
Display means for displaying a parent-child relationship between the still images captured based on the parent-child relationship information stored in the storage means in a tree structure diagram.
【0009】[0009]
【作用】即ち、本発明の顕微鏡システムは、画像取り込
み手段が所望とする標本の観察画像を静止画像として取
り込むと、親子関係情報生成手段が、該画像取り込み手
段により最低倍率で取り込まれた静止画像を親画像とし
該親画像中の一部が倍率を上げて取り込まれた静止画像
を子画像として各画像が取り込まれた後にこれら静止画
像間の親子関係情報を生成し、記憶手段が上記生成され
た親子関係情報を記憶し、表示手段がこの記憶手段に記
憶された親子関係情報に基づいて取り込まれた静止画像
間の親子関係をツリー構造図により表示する。That is, in the microscope system of the present invention, when the observation image of the specimen desired by the image capturing means is captured as a still image, the parent-child relationship information generating means captures the still image captured by the image capturing means at the minimum magnification. Is used as a parent image, a still image captured by increasing a magnification of a part of the parent image is used as a child image, and after each image is captured, parent-child relationship information between these still images is generated, and the storage unit is generated as described above. The parent-child relationship information is stored, and the display unit displays the parent-child relationship between the still images captured based on the parent-child relationship information stored in the storage unit by a tree structure diagram.
【0010】[0010]
【実施例】以下、図面を参照して、本発明の実施例につ
いて説明する。Embodiments of the present invention will be described below with reference to the drawings.
【0011】図1は、本発明の第1の実施例に係る顕微
鏡システムの構成を示す図である。同図に示すように、
顕微鏡システム100において、パーソナルコンピュー
タ2には、パーソナルコンピュータ用モニタ1と情報を
入力するためのキーボード3と、マウス4、TVモニタ
5、カメラコントロールユニット6がそれぞれ接続され
ており、該カメラコントロールユニット6には顕微鏡8
に装着されたTVカメラ7が接続されている。そして、
図2は、第1の実施例の一部分の構成を更に詳細に示し
た図であり、TVモニタ5への画像信号の流れを示して
いる。FIG. 1 is a diagram showing the configuration of a microscope system according to a first embodiment of the present invention. As shown in the figure,
In the microscope system 100, a personal computer monitor 1, a keyboard 3 for inputting information, a mouse 4, a TV monitor 5, and a camera control unit 6 are connected to the personal computer 2, respectively. There is a microscope 8
The TV camera 7 attached to is connected. And
FIG. 2 is a diagram showing the configuration of part of the first embodiment in more detail, and shows the flow of image signals to the TV monitor 5.
【0012】同図に示すように、パーソナルコンピュー
タ2はフレームメモリ9を介してTVモニタ5に接続さ
れており、該フレームメモリ9は圧縮伸長ボード10を
介してパーソナルコンピュータ2に接続されている。更
に、フレームメモリ9はTVカメラ7に接続されてい
る。そして、パーソナルコンピュータ2からはマウス表
示信号21がフレームメモリ9に出力される。そして、
パーソナルコンピュータ2と圧縮伸長ボード10間では
画像ファイル信号22のやり取りが行われ、この圧縮伸
長ボード10とフレームメモリ9間では圧縮伸長信号2
3のやり取りが行われる。そして、TVカメラ7からは
ビデオ信号24がフレームメモリ9に出力され、該フレ
ームメモリ9からはビデオ信号25がTVモニタ5に出
力される。さらに、図3は、実施例のスタンドアロンの
顕微鏡システムの代表的なメニュー画面の表示を示す図
であり、同図(a)はパーソナルコンピュータ用モニタ
1に表示されるメニュー画面を示し、同図(b)はTV
モニタ5に表示される観察画像を示す。As shown in FIG. 1, the personal computer 2 is connected to the TV monitor 5 via a frame memory 9, and the frame memory 9 is connected to the personal computer 2 via a compression / expansion board 10. Further, the frame memory 9 is connected to the TV camera 7. Then, the mouse display signal 21 is output from the personal computer 2 to the frame memory 9. And
The image file signal 22 is exchanged between the personal computer 2 and the compression / expansion board 10, and the compression / expansion signal 2 is transmitted between the compression / expansion board 10 and the frame memory 9.
3 exchanges are carried out. Then, the video signal 24 is output from the TV camera 7 to the frame memory 9, and the video signal 25 is output from the frame memory 9 to the TV monitor 5. Further, FIG. 3 is a diagram showing a display of a typical menu screen of the stand-alone microscope system of the embodiment, and FIG. 3A shows a menu screen displayed on the personal computer monitor 1, and FIG. b) is TV
The observation image displayed on the monitor 5 is shown.
【0013】このように、第1の本実施例のスタンドア
ロンの顕微鏡システムでは、遠隔観察の場合と比べて観
察に対する制限が少なく、TVモニタ5だけでなく接眼
レンズによる観察も可能であると共に、観察中の画像が
静止画像ではなく動画である為、ステージを自由自在に
動かして観察することができるといった特徴を有してい
る。よって、低倍率の静止画上で子画像の位置指定をす
るような煩わし操作をする必要がなく、通常のTVモニ
タ5を用いない顕微鏡の使い方と同様に扱うことができ
る。以下、第1の実施例に係る顕微鏡システムの観察手
順について説明する。As described above, in the stand-alone microscope system of the first embodiment, there are less restrictions on observation than in the case of remote observation, and not only the TV monitor 5 but also an eyepiece can be used for observation. Since the image inside is not a still image but a moving image, it has a feature that the stage can be freely moved and observed. Therefore, it is not necessary to perform a troublesome operation such as specifying the position of the child image on the low-magnification still image, and it can be handled in the same way as a normal microscope without the TV monitor 5. The observation procedure of the microscope system according to the first embodiment will be described below.
【0014】まず、顕微鏡の電動ステージを上下左右に
移動させ、所望とする位置に設定する。この電動ステー
ジの移動は、手動、あるいはキーボード3のカーソルキ
ーを押すことにより、そして、マウス4でパソコン画面
上の任意の場所にマウスカーソルを移動させクリックす
ることにより行う。First, the motorized stage of the microscope is moved vertically and horizontally to set it at a desired position. The movement of the electric stage is performed manually or by pressing the cursor key of the keyboard 3, and by moving the mouse cursor to any place on the personal computer screen with the mouse 4 and clicking.
【0015】そして、上記電動ステージを所望とする位
置に移動させた後、低倍率の観察を行う。尚、TVモニ
タ5へのビデオ信号の出力は、前述のようにフレームメ
モリ9を介して行われる為、該TVモニタ5上への上記
マウスカーソルの表示やファイルへの取り込みは随時行
うことができる。After moving the motorized stage to a desired position, observation at low magnification is performed. Since the video signal is output to the TV monitor 5 via the frame memory 9 as described above, the mouse cursor can be displayed on the TV monitor 5 or loaded into a file at any time. .
【0016】さらに、パソコン画面上に表示された「画
像取り込み」にマウスカーソルを移動させ、マウス4で
クリックすることにより、あるいは対応するキー操作に
より観察画像の取り込みを行う。Furthermore, the observation image is captured by moving the mouse cursor to "image capture" displayed on the personal computer screen and clicking with the mouse 4 or by corresponding key operation.
【0017】このパソコン画面上には、画像を取り込む
毎に取り込んだ枚数が表示されると共に、取り込んだ画
像はステージ座標及びレンズ倍率のデータと共に記録さ
れるので、この記録データを用いれば、後から取り込ん
だ画像をロードする代わりに取り込んだ位置にステージ
を移動させることもできる。続いて、高倍率の観察を行
う為、顕微鏡8の対物レンズを手動もしくは自動的に高
倍率のレンズに切り替え、該レンズの倍率をパソコン画
面上に表示する。そして、先に説明した低倍率での観察
と同様に、顕微鏡の電動ステージを所望とする位置に設
定し、標本の高倍率による観察を行う。On the personal computer screen, each time an image is captured, the number of captured images is displayed, and the captured image is recorded together with stage coordinate data and lens magnification data. Instead of loading the captured image, you can move the stage to the captured position. Then, in order to perform high-magnification observation, the objective lens of the microscope 8 is manually or automatically switched to a high-magnification lens, and the magnification of the lens is displayed on the personal computer screen. Then, similarly to the observation at the low magnification described above, the motorized stage of the microscope is set at a desired position, and the observation of the specimen at the high magnification is performed.
【0018】この高倍率の観察の際には、マウスカーソ
ルまたは矢印ボタンで移動するピッチを低倍率の時より
も小さくし、観察者がTV画面から見たい部分を逃すこ
とがないように配慮している。そして、このマウスカー
ソルの移動ピッチは対物レンズの倍率に合わせて変化す
る。At the time of this high-magnification observation, the pitch moved by the mouse cursor or the arrow buttons is made smaller than that at the low-magnification, so that the observer does not miss the part he or she wants to see from the TV screen. ing. Then, the moving pitch of the mouse cursor changes according to the magnification of the objective lens.
【0019】続いて、「画像取り込み」の位置にマウス
カーソルを移動させ、マウス4によりクリックして画像
を取り込み、パーソナルコンピュータ2には、親画像と
なり得る画像があれば自動的に親子関係を生成する。こ
の画像の親子関係は、図4に示すようにパソコン画面上
に樹系図として表示され、親画像を再び画面に表示した
ときには、図5に示すように子画像のある位置に矩形が
表示される。ここで、親子関係が成り立つかどうかの条
件は以下の計算式による。Subsequently, the mouse cursor is moved to the "image capture" position, and the mouse 4 is clicked to capture the image. If the personal computer 2 has an image that can be a parent image, a parent-child relationship is automatically generated. To do. The parent-child relationship of this image is displayed as a tree diagram on the personal computer screen as shown in FIG. 4, and when the parent image is displayed again on the screen, a rectangle is displayed at the position of the child image as shown in FIG. . Here, the condition of whether the parent-child relationship is established is based on the following calculation formula.
【0020】即ち、画像aが画像bよりも低倍率の画像
であるとすると、画像aにおいてX方向の画素数を1x
a、Y方向の画素数を1yaとし、1ドット当たりの実
際の距離をdaとし、中心位置のステージ座標を(Xa
0,Ya0)とすると、左上端のステージ座標(Xa
1,Ya1)と、右下端のステージ座標(Xa2,Ya
2)は次式(1a)乃至(1d)で示される。 Xa1=Xa0−1xa/2*da …(1a) Ya1=Ya0−1ya/2*da …(1b) Xa2=Xa0−1xa/2*da …(1c) Ya2=Ya0−1ya/2*da …(1d) 一方、画像bにおいて、中心座標を(Xb0,Yb0)
とすると、以下の条件(2) が成り立つならば、aはbの
親画像であるとする事ができる。 (Xa≦Xb≦Xa2)かつ(Ya1≦Yb0≦Ya
2) …(2) また、bのa画像上での位置(x,y)は、次式(3a),
(3b)で示される。 x=(Xb0−Xa0)/da …(3a) y=(Yb0−Ya0)/da …(3b)That is, assuming that the image a is an image having a lower magnification than the image b, the number of pixels in the X direction in the image a is 1x.
The number of pixels in the a and Y directions is 1ya, the actual distance per dot is da, and the stage coordinate of the center position is (Xa
0, Ya0), the stage coordinates (Xa
1, Ya1) and the stage coordinates (Xa2, Ya
2) is represented by the following equations (1a) to (1d). Xa1 = Xa0-1xa / 2 * da (1a) Ya1 = Ya0-1ya / 2 * da (1b) Xa2 = Xa0-1xa / 2 * da (1c) Ya2 = Ya0-1ya / 2 * da ((1c)) 1d) On the other hand, in image b, the center coordinates are (Xb0, Yb0)
Then, if the following condition (2) is satisfied, a can be regarded as the parent image of b. (Xa ≦ Xb ≦ Xa2) and (Ya1 ≦ Yb0 ≦ Ya
2) (2) Further, the position (x, y) of b on the a image is calculated by the following equation (3a),
It is shown in (3b). x = (Xb0-Xa0) / da (3a) y = (Yb0-Ya0) / da (3b)
【0021】ところで、観察の順序としては、低倍率か
ら高倍率へと倍率を上げていくのが普通だが、画像を取
り込む順序としては、例えばマッピング用のマクロ画像
を後から取り込むような場合のように、後から低倍率の
画像を取り込むこともあり得る。そして、このときも親
子関係のリンクは生成され、上記式による計算によって
低倍画像の領域内に含まれる高倍率画像を全て求める。By the way, the order of observation is usually to increase the magnification from a low magnification to a high magnification, but the order of capturing images is, for example, to capture a macro image for mapping later. In addition, it is possible that a low-magnification image is captured later. Then, also at this time, the parent-child relationship link is generated, and all high-magnification images included in the low-magnification image area are obtained by the calculation by the above formula.
【0022】このとき、親子関係パソコン画面上の樹系
図と、TVの親画像上の子画像位置を示す矩形によって
示され、それぞれ画像を示している部分をマウス4でク
リックすると、その画像がTVモニタ5に表示される。
尚、前述した一連の観察手順を図17(a)乃至(c)
に示す。At this time, the tree diagram on the parent-child relationship personal computer screen and the rectangle indicating the position of the child image on the parent image of the TV are clicked with the mouse 4, and the image is displayed on the TV. Displayed on the monitor 5.
It should be noted that the series of observation steps described above are shown in FIGS.
Shown in.
【0023】以上説明したように、第1の実施例の顕微
鏡システムでは、顕微鏡8より取り込んだ静止画像ファ
イルに低倍率画像の一部を拡大して高倍で観察するとい
う親子関係をもたせた観察ができ、更に、親子関係をも
たせずに取り込んだ低倍率の画像と高倍率の画像との間
で、後から親子関係を生成することができる。次に、第
2の実施例に係る顕微鏡システムの遠隔細胞診について
説明する。図6は、第2の実施例に係る顕微鏡システム
の構成を示す図である。同図に示すように、本実施例の
顕微鏡システムは、依頼側端末100と観察側端末10
1とが通信回線11により接続された構成となってい
る。As described above, in the microscope system of the first embodiment, it is possible to perform observation with a parent-child relationship in which a part of the low-magnification image is enlarged and observed at high magnification in the still image file captured by the microscope 8. In addition, a parent-child relationship can be generated later between a low-magnification image and a high-magnification image that are captured without having a parent-child relationship. Next, remote cytodiagnosis of the microscope system according to the second embodiment will be described. FIG. 6 is a diagram showing the configuration of the microscope system according to the second embodiment. As shown in the figure, the microscope system of the present embodiment includes a request-side terminal 100 and an observation-side terminal 10.
1 and 1 are connected by a communication line 11.
【0024】上記依頼側端末は上記第1の実施例と同一
構成であり、上記観察側端末101はパーソナルコンピ
ュータ2と、該パーソナルコンピュータ2に接続された
モニタ1、キーボード3、マウス4、TVモニタ5とで
構成されている。The request-side terminal has the same configuration as that of the first embodiment, and the observing-side terminal 101 includes a personal computer 2, a monitor 1, a keyboard 3, a mouse 4, and a TV monitor connected to the personal computer 2. It is composed of 5 and 5.
【0025】本実施例の顕微鏡システムによる細胞診で
は、組織診のように低倍率での観察から高倍率へと倍率
を上げていくような観察は行わない。即ち、対物レンズ
を40倍または60倍あるいは100倍といった高倍率
のレンズにして、標本をスキャンしていく一般的な方法
をとる。また、遠隔操作といっても、依頼側端末100
と観察側端末101が通信回線11により接続されるま
では、上記第1の実施例によるスタンドアロンと同様の
操作をする。以下、第2の実施例に係る顕微鏡システム
の観察手順について説明する。本実施例では、ステージ
を所望とする位置に設定し、注目箇所の取り込みを行
う。このステージの移動方法は手動操作とオートスキャ
ンの2種類がある。In the cytodiagnosis by the microscope system of this embodiment, the observation such as the histological examination which does not increase the magnification from low magnification to high magnification is not performed. That is, a general method of scanning a sample by using an objective lens having a high magnification of 40 times, 60 times, or 100 times is used. Also, even if it is called remote operation, the requesting terminal 100
Until the observation side terminal 101 is connected by the communication line 11, the same operation as the stand-alone according to the first embodiment is performed. The observation procedure of the microscope system according to the second embodiment will be described below. In the present embodiment, the stage is set at a desired position and the attention spot is captured. There are two types of moving methods for this stage: manual operation and automatic scanning.
【0026】まず、手動操作では、キーボード3のカー
ソルキーを押すか、もしくはパーソナルコンピュータ用
モニタ1上の矢印ボタンをマウス4でクリックすること
でステージを動かす。First, in the manual operation, the stage is moved by pressing the cursor key of the keyboard 3 or by clicking the arrow button on the personal computer monitor 1 with the mouse 4.
【0027】一方、オートスキャンでは、図7に示すよ
うに、まず、電動ステージのスキャンする走査範囲を決
定する。この時は低倍率のレンズを用い画面の中央に十
字架を出し、該十字架の中心に走査範囲の左上を合わせ
る。そして、位置が決定したら、キーボード3もしくは
マウス4の走査でその旨をコンピュータに伝える。On the other hand, in the automatic scanning, as shown in FIG. 7, first, the scanning range to be scanned by the electric stage is determined. At this time, a low magnification lens is used to project a cross in the center of the screen, and the upper left of the scanning range is aligned with the center of the cross. Then, when the position is determined, the fact that the keyboard 3 or the mouse 4 is scanned is notified to the computer.
【0028】すると、パーソナルコンピュータ2はその
時の電動ステージの座標を読取り、メモリもしくはファ
イルに記憶する。次に、右下の点を決定する。この時も
右下点を画面中央の十字架に合わせ、マウス4もしくは
キーボード3の操作で決定する。すると、パーソナルコ
ンピュータ2はその時の電動ステージの座標を読取り、
メモリもしくはファイルに記憶する。この2点の座標の
間にあるのが、オートスキャンの走査範囲である。この
走査範囲の指定をせずに、プレパラート全体を走査する
こともできる。Then, the personal computer 2 reads the coordinates of the electric stage at that time and stores them in a memory or a file. Next, determine the lower right point. Also at this time, the lower right point is aligned with the cross in the center of the screen, and the mouse 4 or the keyboard 3 is operated to determine. Then, the personal computer 2 reads the coordinates of the electric stage at that time,
Store in memory or file. Between the coordinates of these two points is the scanning range of the auto scan. It is also possible to scan the entire preparation without specifying the scanning range.
【0029】続いて、注目位置の指定と画像取り込みに
ついては、上記オートスキャンもしくは手動スキャンに
よって、注目すべき位置にステージが移動したらステー
ジの移動を停止する。そして、ピント・絞りなどを再調
節し、画像取り込みボタンを押すことで画像をファイル
に取り込むと、自動的にステージ座標が記録される。そ
して、取り込んだ画像を観察側端末101のある病院に
伝送し、観察側端末101にて低倍率での取り込み指定
を行う。Subsequently, with respect to the designation of the attention position and the image capture, the movement of the stage is stopped when the stage is moved to the attention position by the auto scan or the manual scan. Then, the focus and aperture are readjusted and the image capture button is pressed to capture the image in the file, and the stage coordinates are automatically recorded. Then, the captured image is transmitted to a hospital in which the observation side terminal 101 is located, and the observation side terminal 101 designates capture at a low magnification.
【0030】画像を観察する中で、もっと拡大してみた
い場合、又は低倍率で周辺の画像も見たい場合には、例
えば低倍率での画像取り込み、つまり親画像の取り込み
を指示すると依頼側に操作権が移り、観察側は画像デー
タの受信待ちになる。If the user wants to enlarge the image further while observing the image, or if he / she also wants to see the surrounding image at a low magnification, for example, if an instruction is made to capture an image at a low magnification, that is, to capture the parent image, the request side is given an operation right Then, the observer waits for the image data to be received.
【0031】そして、依頼側端末100は元の画像、即
ち、子画像の座標まで電動ステージが移動し、対物レン
ズが指定された低倍率のものに切り替わり、TVモニタ
5の表示画面上に顕微鏡の画像が表示される。このと
き、TVモニタ5の中央には図8に示すように、子画像
を示す矩形が表示される。子画像が中央に来るように取
り込みたいとは限らないのでステージを移動させること
ができる。そして、電動ステージが移動すると、その動
きに合わせて子画像を示す矩形が移動する。この矩形は
常に子画像の領域を囲んでいる。Then, in the request-side terminal 100, the electric stage moves to the coordinates of the original image, that is, the child image, the objective lens is switched to the designated low-magnification one, and the microscope image is displayed on the display screen of the TV monitor 5. The image is displayed. At this time, a rectangle indicating a child image is displayed in the center of the TV monitor 5, as shown in FIG. Since it is not always necessary to capture the child image so that it is in the center, the stage can be moved. Then, when the electric stage moves, the rectangle indicating the child image moves in accordance with the movement. This rectangle always surrounds the area of the child image.
【0032】こうして、位置の微調整が終了すると画像
を取り込み、取り込んだ画像は観察側に伝送され、この
ような画像取り込みの指定方法は観察をより行い易くす
る。尚、前述した依頼側端末100の一連の観察手順を
図18(a)乃至(c)に、観察側端末101の一連の
観察手順を図19(a),(b)に示す。Thus, when the fine adjustment of the position is completed, the image is captured, and the captured image is transmitted to the observing side, and such an image capturing designation method makes the observation easier. 18A to 18C show a series of observation procedures of the request-side terminal 100, and FIGS. 19A and 19B show a series of observation procedures of the observation-side terminal 101.
【0033】以上説明したように、第2の実施例に係る
顕微鏡システムでは、顕微鏡より取り込んだ静止画像フ
ァイルに低倍率画像の一部を拡大して高倍で観察すると
いう親子関係をもたせた観察ができ、更に、上記の機能
に加え通信回線による遠隔観察を行う顕微鏡遠隔操作シ
ステムにおいて、高倍率の画像からその画像の領域を含
んだ低倍率の画像の取り込みを指示し親子関係を生成す
ることができる。As described above, in the microscope system according to the second embodiment, it is possible to perform observation with a parent-child relationship in which a part of the low-magnification image is enlarged and observed at high magnification in a still image file captured from the microscope. Furthermore, in addition to the above functions, in a microscope remote control system that performs remote observation through a communication line, it is possible to generate a parent-child relationship by instructing the capture of a low-magnification image including the image area from a high-magnification image. it can.
【0034】次に、第3実施例に係る顕微鏡システムに
よるコンサルテーションについて説明する。ここで、コ
ンサルテーションとは、2つの端末に病理医A,Bがい
て、一方の端末側にいる医師Aが解らない症例を他方の
端末側にいる医師Bに相談するような場合をいう。Next, the consultation by the microscope system according to the third embodiment will be explained. Here, the consultation refers to a case in which there are pathologists A and B at two terminals and a doctor A at one terminal side consults a doctor B at the other terminal side with a case that the doctor A cannot understand.
【0035】まず、スタンドアローンでの観察では、観
察側端末の医師Aがスタンドアローンで標本の観察をす
る。ここで自分では判断できないような標本の場合に他
の病理医にコンサルテーションを依頼することになる。First, in the stand-alone observation, the doctor A at the observing side terminal observes the sample in a stand-alone manner. If the specimen cannot be judged by oneself, another pathologist will be requested to consult.
【0036】続いて、依頼側端末の医師Bに解らないと
ころの画像ファイルを送る。即ち、コンサルテーション
を依頼するときは、一般的に相談したい部分だけ画像を
ファイルとして残すことが多いと考えられる。この画像
ファイルを相手側端末に転送する。そして、医師AとB
との間のコンサルテーションを行う。即ち、医師A,B
の都合の良いときに再び回線を接続しコンサルテーショ
ンを行う。この時、医師AとBのモニタには同じ画像が
表示され、お互いのマウスカーソルがTVモニタ5の画
面上に表示され、電話音声とマウスカーソルの動きによ
ってコミュニケーションを取ることができる。Then, the image file which is not understood is sent to the doctor B of the requesting terminal. That is, when requesting a consultation, it is generally considered that in many cases, only the part to be consulted is left as a file. This image file is transferred to the other terminal. And doctors A and B
Consultation with. That is, doctors A and B
At a convenient time, reconnect the line and conduct a consultation. At this time, the same image is displayed on the monitors of the doctors A and B, the mouse cursors of the doctors are displayed on the screen of the TV monitor 5, and communication can be performed by the telephone voice and the movement of the mouse cursor.
【0037】さらに、低倍率画像の取り込みとファイル
転送を行う。即ち、コンサルテーションの最中に、医師
Aが新たに画像の取り込みを要求することがある。その
中には既に送られている画像の周辺を含む低倍率の画像
を要求されることがある。この場合の取り込み方法は、
第2の実施例の親画像取り込み方法と全く同様である。
この機能によってコンサルテーションがより柔軟に行え
るようになる。尚、前述した第3の実施例に係る顕微鏡
システムの依頼側、観察側のコンサルテーションによる
一連の観察手順を図20(a)及び(b)に示す。Further, the low-magnification image is taken in and the file is transferred. That is, during the consultation, the doctor A may request a new image capture. In some cases, a low-magnification image including the periphery of the image already sent may be required. In this case, the import method is
This is exactly the same as the parent image capturing method of the second embodiment.
This feature allows for more flexible consultation. 20A and 20B show a series of observation procedures by consultation on the request side and the observation side of the microscope system according to the third embodiment described above.
【0038】以上説明したように、第3の実施例に係る
顕微鏡システムでは、上記第1及び第2の実施例におい
て、一枚の子画像に対し親画像となり得る画像が複数枚
ある場合に最適な親子関係を生成することができる。次
に、第4の実施例に係る顕微鏡システムによる親子関係
の最適化について説明する。本実施例では、複数の画像
を取り込み、ある画像の親画像になり得る画像ファイル
が複数枚ある場合に、観察に適した自然な親子関係を最
適化する。この複数の親画像候補の関係は、図9に示す
ように倍率が違う場合と、図10に示すように倍率が同
じだがその座標が違う場合の2種類に分けられる。As described above, the microscope system according to the third embodiment is most suitable in the first and second embodiments when there are a plurality of images that can be parent images for one child image. It is possible to create a simple parent-child relationship. Next, optimization of the parent-child relationship by the microscope system according to the fourth embodiment will be described. In this embodiment, a plurality of images are captured, and when there are a plurality of image files that can be parent images of a certain image, a natural parent-child relationship suitable for observation is optimized. The relationship between the plurality of parent image candidates is divided into two types, that is, when the magnification is different as shown in FIG. 9 and when the magnification is the same as shown in FIG. 10 but the coordinates are different.
【0039】そして、図11の樹系図に示すように、倍
率が違う場合、即ち、3枚の画像a,b,cの倍率がa
<b<cの関係にあるときには、高倍率の画像cの直接
の親画像はbとなり、画像aはbの親画像となる。Then, as shown in the tree diagram of FIG. 11, when the magnification is different, that is, the magnification of the three images a, b, c is a.
In the case of <b <c, the direct parent image of the high-magnification image c is b, and the image a is the parent image of b.
【0040】さらに、図12に示すように、倍率が同じ
だが、その座標が違う場合には、倍率の等しい2枚の画
像a,bがあり、そのどちらの子画像ともなり得る画像
cがある時は、画像cの親画像上での位置がより中央に
来るようにする。さらに、画像cはaの中央近くにある
が、画像bの上では端の方に存在する場合、画像cの親
画像はaとなる。Further, as shown in FIG. 12, when the magnification is the same but the coordinates are different, there are two images a and b having the same magnification, and there is an image c which can be either of the child images. At the time, the position of the image c on the parent image is set to be more centered. Further, when the image c is near the center of a, but exists near the end on the image b, the parent image of the image c becomes a.
【0041】以上説明したように、第4の実施例に係る
顕微鏡システムでは、親画像から指定した子画像が複数
枚あり、それらの子画像の倍率が異なり、入れ子状態に
なっている時に、最適な親子関係を生成することができ
る。次に、第5の実施例に係る顕微鏡システムによる親
子関係の最適化について説明する。As described above, in the microscope system according to the fourth embodiment, there are a plurality of child images designated from the parent image, and the magnifications of these child images are different. It is possible to create a simple parent-child relationship. Next, optimization of the parent-child relationship by the microscope system according to the fifth embodiment will be described.
【0042】本実施例は、画像同志の関係は第4の実施
例で説明した図9の場合と同じである。但し、画像aと
bの親子関係、画像aとcの親子関係をユーザーが指定
したという点が異なる。よって、第4の実施例のよう
に、画像a,b,c間の親子関係をシステムが勝手に生
成し、画像a,c間の親子関係を消去することはできな
い。この場合には、図13及び図14の樹系図に示すよ
うにcの親画像はaとbの両方とする。こうすること
で、画像bから画像cという倍率変化の段階に合わせた
観察もでき、ユーザーが指定した通りの観察も可能とな
る。In this embodiment, the relationship between the images is the same as in the case of FIG. 9 described in the fourth embodiment. However, the difference is that the user has specified the parent-child relationship between the images a and b and the parent-child relationship between the images a and c. Therefore, unlike the fourth embodiment, the system cannot arbitrarily generate the parent-child relationship between the images a, b, and c and delete the parent-child relationship between the images a and c. In this case, the parent images of c are both a and b as shown in the tree diagrams of FIGS. 13 and 14. By doing so, it is possible to perform the observation in accordance with the stage of the magnification change from the image b to the image c, and it is possible to perform the observation as specified by the user.
【0043】以上説明したように、第5の実施例に係る
顕微鏡システムでは、親画像から指定した子画像が、別
の画像の子画像ともなり得るときに、最適な親子関係を
生成することができる。次に、第6の実施例に係る顕微
鏡システムの親子関係の表示の区別について説明する。As described above, in the microscope system according to the fifth embodiment, when the child image designated from the parent image can be the child image of another image, the optimum parent-child relationship can be generated. it can. Next, the distinction of the parent-child relationship display of the microscope system according to the sixth embodiment will be described.
【0044】本実施例では、ユーザーが自ら指定した親
画像から子画像の取り込み、あるいは子画像から親画像
の取り込みと、システムが自動的に生成した親子関係は
区別される必要がある。そして、TVモニタ5上の子画
像存在を示す矩形は、図15に示すように、例えばユー
ザー指定のものを赤、自動生成されたものを青といった
違う色で表示する。In this embodiment, it is necessary to distinguish between capturing a child image from a parent image designated by the user or capturing a parent image from a child image and parent-child relationship automatically generated by the system. As shown in FIG. 15, the rectangle indicating the existence of the child image on the TV monitor 5 is displayed in different colors such as red for the user-specified one and blue for the automatically-generated one.
【0045】さらに、パーソナルコンピュータ用モニタ
1上の樹系図は、図16に示すように、TVモニタ5上
のように色を変えて画像間を結ぶ線を表示するか、線の
太さ形状等を変えて表示する。具体的には、ユーザの指
定した親子関係とは、親画像上で子画像の取り込み位置
を指定したもの、即ち、第2、第3の実施例のような子
画像から親画像の指定を指す。Further, as shown in FIG. 16, the tree diagram on the personal computer monitor 1 displays lines connecting images by changing colors as on the TV monitor 5, or a line thickness shape, etc. To be displayed. Specifically, the parent-child relationship designated by the user refers to designation of the capturing position of the child image on the parent image, that is, designation of the parent image from the child image as in the second and third embodiments. .
【0046】一方、システムが自動生成したものとは、
第1及び第4実施例によって最適化されたもの、また第
4及び第5の実施例におけるシステムが新たに派生させ
た親子関係を示す。このように表示を切り替えることに
よって、観察の経過がよりはっきりと残されるようにす
る。On the other hand, what is automatically generated by the system is
The thing optimized by 1st and 4th Example, and the parent-child relationship which the system in 4th and 5th Example newly derived is shown. By switching the display in this way, the progress of the observation is made clearer.
【0047】以上説明したように、第6の実施例に係る
顕微鏡システムでは、第1乃至第5の実施例において、
ユーザーが指定した親子関係とシステムが自動的に生成
した親子関係とを区別して表示することができる。As described above, in the microscope system according to the sixth embodiment, in the first to fifth embodiments,
User-specified parent-child relationships and system-generated parent-child relationships can be displayed separately.
【0048】以上詳述したように、本発明の顕微鏡シス
テムでは、親子関係を持たせずに取り込んだ低倍率の画
像と高倍率の画像との間で、取り込んだ後から親子関係
を生成することができる。As described above in detail, in the microscope system of the present invention, a parent-child relationship is generated after capturing between a low-magnification image and a high-magnification image that are acquired without having a parent-child relationship. You can
【0049】[0049]
【発明の効果】本発明によれば、顕微鏡画像の親子関係
の生成を柔軟性を持って行い、観察及び観察後の再生を
効率良く行う顕微鏡システムを提供することができる。As described above, according to the present invention, it is possible to provide a microscope system that flexibly generates a parent-child relationship of a microscope image and efficiently performs observation and reproduction after the observation.
【図1】本発明の第1の実施例に係る顕微鏡システムの
構成を示す図である。FIG. 1 is a diagram showing a configuration of a microscope system according to a first embodiment of the present invention.
【図2】第1の実施例の一部構成を更に詳細に示した図
である。FIG. 2 is a diagram showing a partial configuration of the first embodiment in more detail.
【図3】(a)及び(b)は、第1の実施例の顕微鏡シ
ステムの代表的なメニュー画面の表示を示す図である。3A and 3B are diagrams showing display of a typical menu screen of the microscope system of the first embodiment.
【図4】パソコン画面上に表示された画像の親子関係を
示す樹系図である。FIG. 4 is a tree diagram showing a parent-child relationship of images displayed on a personal computer screen.
【図5】(a)及び(b)は、親画像を再び画面に表示
したときに子画像のある位置に矩形が表示される様子を
示す図である。5A and 5B are diagrams showing how a rectangle is displayed at a position of a child image when the parent image is displayed again on the screen.
【図6】本発明の第2の実施例に係る顕微鏡システムの
構成を示す図である。FIG. 6 is a diagram showing a configuration of a microscope system according to a second embodiment of the present invention.
【図7】オートスキャンによるステージの移動方法につ
いて説明するための図である。FIG. 7 is a diagram for explaining a method of moving a stage by automatic scanning.
【図8】TVモニタ5の中央に示された子画像領域の矩
形を示す図である。8 is a diagram showing a rectangle of a child image area shown in the center of the TV monitor 5. FIG.
【図9】複数の親画像候補の関係(倍率が異なる場合)
を示す図である。FIG. 9 is a relationship between a plurality of parent image candidates (when magnifications are different)
FIG.
【図10】複数の親画像候補の関係(倍率は同じで座標
が異なる場合)を示す図である。FIG. 10 is a diagram showing a relationship between a plurality of parent image candidates (when the magnification is the same but the coordinates are different).
【図11】倍率が異なる場合の画像間の親子関係を示す
樹系図である。FIG. 11 is a tree diagram showing a parent-child relationship between images at different magnifications.
【図12】倍率が同じで、座標が異なる場合の画像間の
親子関係を示す樹系図である。FIG. 12 is a tree diagram showing a parent-child relationship between images when the magnification is the same and the coordinates are different.
【図13】画像間の親子関係を示す樹系図である。FIG. 13 is a tree diagram showing a parent-child relationship between images.
【図14】画像間の親子関係を示す樹系図である。FIG. 14 is a tree diagram showing a parent-child relationship between images.
【図15】TVモニタ5上の子画像存在を示す矩形を示
す図である。FIG. 15 is a diagram showing a rectangle indicating the presence of a child image on the TV monitor 5.
【図16】画像間の親子関係を示す樹系図である。FIG. 16 is a tree diagram showing a parent-child relationship between images.
【図17】(a)乃至(c)は、第1の実施例の観察手
順を示す図である。17 (a) to (c) are diagrams showing an observation procedure of the first example.
【図18】(a)乃至(c)は、第2の実施例における
依頼側端末の観察手順を示す図である。18 (a) to 18 (c) are diagrams showing an observation procedure of a request-side terminal in the second embodiment.
【図19】(a)乃至(b)は、第2の実施例における
観察側端末の観察手順を示す図である。19 (a) and 19 (b) are diagrams showing an observation procedure of an observation side terminal in the second embodiment.
【図20】(a)及び(b)は、第3の実施例における
依頼側端末、観察側端末の観察手順をそれぞれ示す図で
ある。20 (a) and 20 (b) are diagrams showing the observation procedure of the request-side terminal and the observation-side terminal in the third embodiment, respectively.
【図21】画像の親子関係の定義について説明するため
の図である。FIG. 21 is a diagram illustrating the definition of the parent-child relationship of images.
1…パーソナルコンピュータ用モニタ、2…パーソナル
コンピュータ、3…、4…マウス、5…TVモニタ、6
…カメラコントロールユニット、7…TVカメラ、8…
顕微鏡、9…フレームメモリ、10…圧縮伸長ボード。1 ... Monitor for personal computer, 2 ... Personal computer, 3 ... 4, Mouse, 5 ... TV monitor, 6
... Camera control unit, 7 ... TV camera, 8 ...
Microscope, 9 ... Frame memory, 10 ... Compression / expansion board.
Claims (1)
して取り込む画像取り込み手段と、 上記画像取り込み手段により最低倍率で取り込まれた静
止画像を親画像とし、該親画像中の一部が倍率を上げて
取り込まれた静止画像を子画像として、各画像が取り込
まれた後に、これら静止画像間の親子関係情報を生成す
る親子関係情報生成手段と、 上記親子関係情報生成手段により生成された親子関係情
報を記憶する記憶手段と、 上記記憶手段に記憶された親子関係情報に基づいて取り
込まれた静止画像間の親子関係をツリー構造図により表
示する表示手段と、を具備することを特徴とする顕微鏡
システム。1. An image capturing means for capturing an observation image of a desired specimen as a still image, and a still image captured at a minimum magnification by the image capturing means as a parent image, and a part of the parent image has a magnification. A parent-child relationship information generating unit that generates parent-child relationship information between these still images after the captured still images are taken as child images, and the parent-child relationship generated by the parent-child relationship information generating unit. A microscope comprising: storage means for storing information; and display means for displaying a parent-child relationship between still images captured based on the parent-child relationship information stored in the storage means in a tree structure diagram. system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22742392A JP3366352B2 (en) | 1992-08-26 | 1992-08-26 | Microscope system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP22742392A JP3366352B2 (en) | 1992-08-26 | 1992-08-26 | Microscope system |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH0675173A true JPH0675173A (en) | 1994-03-18 |
JP3366352B2 JP3366352B2 (en) | 2003-01-14 |
Family
ID=16860618
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP22742392A Expired - Lifetime JP3366352B2 (en) | 1992-08-26 | 1992-08-26 | Microscope system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3366352B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003029163A (en) * | 2001-07-16 | 2003-01-29 | Nikon Corp | Microscope system |
-
1992
- 1992-08-26 JP JP22742392A patent/JP3366352B2/en not_active Expired - Lifetime
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003029163A (en) * | 2001-07-16 | 2003-01-29 | Nikon Corp | Microscope system |
JP4670194B2 (en) * | 2001-07-16 | 2011-04-13 | 株式会社ニコン | Microscope system |
Also Published As
Publication number | Publication date |
---|---|
JP3366352B2 (en) | 2003-01-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4937457B2 (en) | Microscope control apparatus, microscope control system, microscope control method, program, and recording medium | |
JP3557246B2 (en) | Microscope image remote observation device and microscope image remote observation method | |
JP4878913B2 (en) | Microscope system, microscope image synthesis method, and program | |
CN101957495A (en) | Virtual telemicroscope | |
EP0293083A2 (en) | Remote transmission diagnostic system | |
US20130265322A1 (en) | Image processing apparatus, image processing system, image processing method, and image processing program | |
WO1999013360A2 (en) | Digital telepathology imaging system with bandwidth optimization and virtual focussing | |
JP2000295462A (en) | Transmission system for microscope image | |
JP2003066339A (en) | Image comparison device | |
JP4637337B2 (en) | Microscope image observation system and control method thereof | |
US20140063072A1 (en) | Information processing apparatus, information processing method, and information processing program | |
US20050157170A1 (en) | Image comparison apparatus, image comparison method, and program to execute image comparison by computer | |
JP3321197B2 (en) | Microscope still image transmission system | |
JP3321198B2 (en) | Microscope still image observation system | |
JP3448847B2 (en) | Microscope still image observation system | |
JP2016038542A (en) | Image processing method and image processing apparatus | |
JP3366352B2 (en) | Microscope system | |
JP3377548B2 (en) | Microscope image observation system | |
JP2005266718A (en) | Microscopic image photographing system | |
JP3698737B2 (en) | Microscope remote observation system and remote observation method | |
JP3325064B2 (en) | Microscope remote observation system and its control method | |
JP3704529B2 (en) | Microscope observation system and display method of microscope image | |
JP4346888B2 (en) | Microscope equipment | |
KR20000057920A (en) | Microscope image transmitting system, method of processing microscope images, and recording medium for use in processing microscope images | |
JP4046161B2 (en) | Sample image data processing method and sample inspection system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20020604 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20021022 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071101 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081101 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091101 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101101 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101101 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111101 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111101 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121101 Year of fee payment: 10 |
|
EXPY | Cancellation because of completion of term |