JP3557246B2 - Telemonitoring process of microscopic image remote observation apparatus and a microscope image - Google Patents

Telemonitoring process of microscopic image remote observation apparatus and a microscope image Download PDF

Info

Publication number
JP3557246B2
JP3557246B2 JP12635794A JP12635794A JP3557246B2 JP 3557246 B2 JP3557246 B2 JP 3557246B2 JP 12635794 A JP12635794 A JP 12635794A JP 12635794 A JP12635794 A JP 12635794A JP 3557246 B2 JP3557246 B2 JP 3557246B2
Authority
JP
Japan
Prior art keywords
image
still
means
side
moving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP12635794A
Other languages
Japanese (ja)
Other versions
JPH07333522A (en
Inventor
清文 渡辺
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to JP12635794A priority Critical patent/JP3557246B2/en
Publication of JPH07333522A publication Critical patent/JPH07333522A/en
Application granted granted Critical
Publication of JP3557246B2 publication Critical patent/JP3557246B2/en
Anticipated expiration legal-status Critical
Application status is Expired - Fee Related legal-status Critical

Links

Images

Description

【0001】 [0001]
【産業上の利用分野】 BACKGROUND OF THE INVENTION
本発明は病院等の現場に設置してある顕微鏡を、遠方のセンタ(大学病院等)より遠隔操作してその顕微鏡画像をセンタにて受けて観察する顕微鏡画像遠隔観察装置に関するものである。 The present invention is a microscope that is installed on site such as a hospital, to a microscopic image remote observation apparatus for observing receiving the microscopic image at the center and remote operation from a remote center (University Hospital, etc.).
【0002】 [0002]
【従来の技術】 BACKGROUND OF THE INVENTION
コンピュータ制御によりステージ位置や対物レンズの倍率を可変制御でき、そして、焦点調整できるようにした光学式電動型顕微鏡装置がある。 It can variably control the magnification of the stage position and the objective lens under computer control, and there is an optical electric microscope apparatus capable of focusing. この顕微鏡装置は遠隔地より通信回線で結び、操作指令情報を伝送することでステージ位置や対物レンズの倍率を可変制御でき、また、焦点調整できるので、この顕微鏡装置にテレビカメラなどの撮像装置を取り付けて標本像を撮像し、これを伝送路を介して伝送することで、遠隔操作しながら得られた標本像の観察を遠方において居ながらにして行える顕微鏡遠隔観察システムが構築できる。 The microscope apparatus is connected by communication from a remote location line, can variably control the magnification of the stage position and the objective lens by transmitting the operation command information, Since it focus adjustment, the imaging apparatus such as a television camera to the microscope apparatus mounting imaging a specimen image, which is being transmitted via a transmission path, the microscope remote observation system capable while staying observation of obtained specimen image obtained with the remote operation in the far can be constructed.
【0003】 [0003]
ところで、医療現場では患者から採取した生体組織を観察して診断を行うことが多いが、これには病理医による診断が必要となる。 By the way, it is often performed a diagnosis by observing the living tissue taken from a patient in the medical field, diagnosis is required by the pathologist to this. しかし、中央の大病院には病理医が常駐していても、地方の病院などでは病理医が在席していないケースも多々ある。 However, the center of the large hospitals also have pathologist resident, there are many cases you do not have pathologist presence in such local hospital. また、権威に診断を仰ぐ必要のあるケースなども生じるが、そのような場合に、中央(センタ;病理医や権威の常駐する大病院や大学、研究機関など)と現場(地方病院や中小病院など)との間を通信回線で結び、顕微鏡遠隔観察システムを設置してこの顕微鏡遠隔観察システムにより生体組織の顕微鏡画像を観察して診断を下すと云ったことが行われる。 In addition, it also occurs such as the need to seek a diagnosis in authority case, in such a case, the center (center; large hospitals and universities resident pathologists and authority, research institutions, etc.) and the field (regional hospitals and small and medium-sized hospital Conclusion between the like) in the communication line, is performed that said that a diagnosis by observing the microscopic image of the living tissue by the microscope remote observation system by installing a microscope telemonitoring system.
【0004】 [0004]
このように病理医のいない病院と、病理医のいる病院とを通信回線で接続し、病理医のいない病院にある顕微鏡を、病理医のいる病院から遠隔操作し、得られた顕微鏡画像を病理医のもとに伝送し、診断に供するというシステムが従来より知られているが、具体的には特開平4‐307028号公報、特開平5‐111029号公報に示されるようなものである。 Pathology This and hospital without a pathologist as to connect the hospital who is the pathologist a communication line, a microscope in a hospital without a pathologist, and remotely from the hospital who is the pathologist, the microscopic image obtained transmitting the original medical, but the system as for diagnosis has been known, particularly those such as shown Japanese Unexamined 4-307028 and JP Hei 5-111029.
【0005】 [0005]
しかし、これらのシステムでは、いずれも現在顕微鏡で覗いている画像を静止画として伝送する方式であり、それのみを表示する方式であることから、顕微鏡の拡大率を増倍してゆくと注目領域の画像は得ることができるものの、その周囲の状況は顕微鏡視野から外れてしまうために、観察できず、従って注目している領域の画像のみの表示となってしまい、その周辺を観察することができなかった。 However, in these systems, either a method of transmitting an image looking through the current microscope as a still image, the region of interest since it is a method of displaying it only, and slide into multiplying the magnification of the microscope although it is possible in the image obtained, for status of the surrounding deviate from the microscope field of view, it can not be observed, therefore becomes of interest to display only the image of the region are, to be observed around the could not. 病理診断する場合、見つけた注目領域の状態はもとより、周辺状況も含めて観察し、それらの状況から総合的に判断して初めて正確な診断が可能になる。 If you want to pathological diagnosis, I found the state of the region of interest as well, observed, including the situation around, it is possible to overall judgment was the first time an accurate diagnosis from those situations. 従って、標本の画像を注目領域についてのみ観察できるような従来のシステムでは、機能として不十分である。 Thus, in conventional systems, such as can only be observed for the target area images of the specimen, it is insufficient as a function.
【0006】 [0006]
また、これらいずれの従来システムも、伝送される画像は静止画であり、リアルタイムでの観察が困難であった。 Also, any of these conventional systems, the image to be transmitted is still image, real-time observation is difficult. これは画像の場合、データ容量が多いことと、伝送路のデータ伝送速度が画像をリアルタイムで伝送できる程、高速でないことに起因する。 This case of the image, and that the data capacity is large, the data transmission rate of the transmission path enough to transmit an image in real time, due to not fast. そのため、静止画として送らざるを得ないことによる。 Therefore, due to the fact that inevitably sent as a still image. しかも、静止画の場合、動画のように顕微鏡がとらえた像をリアルタイムに表示するという訳にいかない。 Moreover, in the case of a still image can not afford to say that to display an image microscope captured as moving in real time. そのため、ピントの調整等が必要な場合に、画像入力し直し、再度伝送することになり、操作性が悪いと云う欠点が残る。 Therefore, when adjustment of focus is required, re-image input, will be transmitted again, leaving a disadvantage referred to as poor operability.
【0007】 [0007]
そこで、動画像を観察できるようにするシステムが必要となる。 Therefore, there is a need for a system to be able to observe a moving image. 動画像観察の要請に応えることのできるシステムとして、特開昭64‐20449号公報に開示された技術がある。 As a system that can meet the demands of moving image observation, there is the technique disclosed in JP-A-64-20449. この公報に開示されたシステムは注目領域を動画として表示することができるので、顕微鏡がとらえた像をリアルタイムに表示して観察を進めることができ、また、ピントの調整等が必要な場合にも画像がリアルタイム像であるので操作し易い。 This is the system disclosed Japanese can be displayed region of interest as a moving, can proceed observation by displaying an image microscope captured in real time, also when adjustment of focus is required easy to operate since the image is real-time image.
【0008】 [0008]
しかし、注目領域の画像をリアルタイムに表示して観察できるものの、診断に必要な注目領域の周辺画像を参照できるようなシステムには、依然、なっていない。 However, although it is possible observing an image of the region of interest displayed in real time, the system can refer to the peripheral image of the region of interest required for diagnosis, still not turned in.
【0009】 [0009]
この公報に開示されたシステムは注目領域を動画として表示し、標本の全体を静止画として表示することができるシステムではある。 The system disclosed in this publication displays the region of interest as a moving, there is a system capable of displaying the entire sample as a still image. しかしながら、この技術は動画像と並列に、標本の全体を静止画として表示するものの、標本の全体を示す静止画は現在の注目領域が標本上のどこであるかを観察者に知らせるマップ程度の意味合いしかなく、注目領域の周辺を、診断の参考になる程度に詳細に観察するには余りにも不十分な精細度の像である。 However, in parallel this technique a moving image, but to display the entire sample as a still image, meaning on the order of map informing the viewer whether the still picture showing the whole is where the current region of interest on the sample of the specimen only without the periphery of the region of interest, to be observed in detail to the extent that would be helpful in the diagnosis is the image of too inadequate definition. 故に、システムとしては不十分であり、診断に必要な注目領域およびその周辺画像を合わせて提供できるシステムが必要である。 Therefore, it is insufficient as a system, there is a need for a system that can provide the combined target region and the surrounding image thereof necessary for diagnosis.
【0010】 [0010]
【発明が解決しようとする課題】 [Problems that the Invention is to Solve
遠隔地の現場(病院)とセンタとを通信回線で繋ぎ、現場にある顕微鏡を、センタより遠隔操作して顕微鏡画像をセンタに送り、センタではこの顕微鏡画像を観察して診断に供すると云ったシステムが従来よりあり、このようなシステムとして特開平4‐307028号公報、特開平5‐111029号公報に示されるような観察画像として静止画を用いるシステムと、特開昭64‐20449号公報に開示されるような動画が観察できるシステムとが知られている。 Connecting site remote and (hospitals) and the center through a communication line, a microscope in the field, send a microscope image to the center by remote control from the center, the center was said that for diagnosis by observing the microscope image system has conventionally, JP-a 4-307028 discloses as such a system, a system using a still image as an observation image as shown in JP-a-5-111029, in JP-a-64-20449 a system video as disclosed can be observed are known.
【0011】 [0011]
そして、静止画を使用するシステムでは、顕微鏡の拡大率を増倍してゆくと注目領域の画像は得ることができるが、その周囲の状況は顕微鏡視野から外れてしまうために、観察できず、従って注目している領域の画像のみの表示となってしまい、その周辺を観察することができないという不便があり、更にはリアルタイムでの観察が困難であるために、例えば、ピントの調整等が必要となるような場合に、更新された画像が表示してから1歩遅れてその調整を遠隔操作により行うことになり、操作性が悪いと云う欠点が残る。 Then, in a system using a still image, it is possible to obtain an image of the region of interest slide into multiply the magnification of the microscope, the status of its surrounding in order to deviate from the microscope field of view, can not be observed, Therefore becomes a display of only the image of a region of interest, there is inconvenience that it is impossible to observe around the, even more because of the difficulty observed in real time, for example, requires adjustment of focus and if comprising such, with a delay of one step from the displayed updated image will be carried out the adjustment by remote control, leaving a disadvantage referred to as poor operability.
【0012】 [0012]
そこで、動画像を観察できると共に、注目画像とその周辺画像を合わせて観察できるようにするシステムが必要となる。 Therefore, it is possible to observe a moving image, the system that allows observation target image and combined the peripheral image is required. しかし、動画像を観察できる上記従来のシステムでは注目領域を動画として表示することができるものの、相変わらず注目領域の周辺画像を観察できる構成とはなっていない。 However, although in the above conventional system for observing a moving image can be displayed region of interest as a moving, not in the configuration capable of still observing the surrounding image of the region of interest. すなわち、注目領域を動画として表示し、標本の全体を静止画として表示するものの、この静止画は現在の注目領域が標本上のどこであるかを観察者に知らせるマップ程度の意味合いしかなく、注目領域の周辺を、診断の参考になる程度に詳細に観察するには余りにも不十分な精細度の像である。 That is, to display a region of interest as a moving, but displays the entire sample as a still picture, the still picture is the current target area has only the meaning of the order of map informing where the either on the specimen to a viewer, attention area the neighborhood, the observed in detail to the extent that can help diagnose is the image of too poor definition.
【0013】 [0013]
そこで、本発明の目的とするところは、注目領域を動画像として表示し、この動画像に関連する像を静止画として表示することにより、操作性の良い顕微鏡画像遠隔観察装置を提供することにある。 Accordingly, it is an object of the present invention is to display a region of interest as a moving image, by displaying an image associated with the moving image as a still image, to provide a good operability microscopic image remote observation apparatus is there.
【0014】 [0014]
【課題を解決するための手段】 In order to solve the problems]
請求項1記載の発明は、顕微鏡と、前記顕微鏡が生成する観察像を撮像し、電気信号に変換して出力する撮像手段と、前記撮像手段からの出力画像信号を送信する送信側と、前記送信側から送信された前記出力画像を受信する受信側とを有し、受信側において前記出力画像を観察する顕微鏡画像遠隔観察装置において、前記受信側は、前記撮像手段から出力され前記送信側から送信される低倍率に対応する静止画像信号を受けて、低倍率の静止観察画像として表示するための第1の表示手段と、前記送信側から送信される高倍率に対応する動画像を受け、この高倍率の動画像を前記第1の倍率の静止観察画像と同時に表示するための第2の表示手段と、を有することを特徴としている。 Invention of claim 1 wherein the microscope images the observation image which the microscope generates an image pickup means for converting into an electric signal, and a transmitting side for transmitting the output image signal from the imaging means, wherein and a receiving side for receiving the output image sent from the sending side, in the microscopic image remote observation apparatus for observing the output image at the receiving side, the receiving side, from said transmission side is output from said image pickup means receiving a still image signal corresponding to the low magnification to be transmitted, a first display means for displaying a low magnification static observation image, a moving image corresponding to the high magnification to be transmitted from the transmitting side receives, It is characterized by having a second display means for displaying a moving image of the high magnification at the same time as a still observation image of the first magnification.
【0015】 [0015]
請求項2記載の発明は、ステージ移動および対物レンズ倍率が制御可能な顕微鏡と、前記顕微鏡が生成する観察像を撮像し、電気信号に変換して出力する撮像手段と、前記撮像手段からの出力画像信号を送信する送信手段とを有する送信側と、前記送信側から送信された前記出力画像信号を受信する受信側とを有し、受信側において前記出力画像を観察する顕微鏡画像遠隔観察装置において、前記受信側は、前記撮像手段から出力され前記送信側から送信される低倍対物レンズに対応する静止画像信号を受けて低倍率画像として格納するための記憶手段と、前記記憶手段に格納された前記低倍率静止画像を表示するための第1の表示手段と、前記選択された静止画像の所定の領域を指示する指示手段と、前記指示手段によって指示された領域 According to a second aspect of the invention, a controllable stage movement and the objective lens magnification microscope captures an observation image which the microscope generates an image pickup means for converting an electrical signal, output from said image pickup means a transmitting side and a transmitting means for transmitting the image signal, and a receiving side for receiving the output image signal transmitted from the transmitting side, the microscopic image remote observation apparatus for observing the output image at the receiving side the receiving side includes a storage means for storing a low-magnification image receiving still image signal corresponding to the low magnification objective lens is transmitted from the transmitting side is output from the imaging means, stored in said storage means the low magnification and a first display means for still image display and a instruction means for instructing a predetermined region of the selected still image, the area designated by said instruction means has 位置と大きさに応じて前記送信側の顕微鏡のステージ位置とレンズの倍率を制御する制御信号を送信側に伝送する制御信号伝送手段と、前記制御信号に応じた位置と倍率の動画像信号を前記送信側から受信し、高倍率動画像として前記低倍率観察画像と同時に表示するための第2の表示手段と、を有することを特徴としている。 A control signal transmitting means for transmitting a control signal according to the position and size to control the magnification of the microscope stage position and the lens of the transmitting side to the transmitting side, a moving image signal of the position and the magnification in accordance with the control signal received from the transmitting side, is characterized in that said comprises a second display means for displaying at the same time as the low magnification observation image, as high magnification video image.
【0016】 [0016]
請求項3記載の発明は、対物レンズ倍率が制御可能な顕微鏡と、前記顕微鏡が生成する観察像を撮像し、電気信号に変換して出力する撮像手段と、前記撮像手段からの出力画像信号を送信する送信手段とを有する送信側と、前記送信側から送信された前記出力画像信号を受信する受信側とを有し、受信側において前記出力画像を観察する顕微鏡画像遠隔観察装置において、前記受信側は、前記撮像手段から出力され前記送信側から送信される静止画像信号を受けて格納するための記憶手段と、前記記憶手段に格納された静止画像から所定の静止画像を選択する選択手段と、前記選択手段によって選択された静止画像を表示するための第1の表示手段と、前記選択された静止画像の所定の領域を指示する指示手段と、前記指示手段によって指示 According to a third aspect of the invention, an objective lens magnification controllable microscope captures an observation image which the microscope generates an image pickup means for converting into an electric signal, an output image signal from said image pickup means a transmitting side and a transmitting means for transmitting, and a receiving side for receiving the output image signal transmitted from the transmitting side, the microscopic image remote observation apparatus for observing the output image at the receiving side, the receiving side, said storage means for output from the image pickup means for receiving and storing the still image signal transmitted from the transmitting side, a selection means for selecting a predetermined still image from the stored still images in the storage means and instruction means for instructing a first display means for displaying the still image selected by said selecting means, a predetermined region of the selected still image, instructed by the instructing means れた領域の位置と大きさに応じて前記送信側の顕微鏡のレンズ倍率を制御する制御信号を送信側に伝送する制御信号伝送手段と、前記制御信号に応じた位置と倍率の動画像信号を前記送信側から受信し、動画像として前記選択された静止画像と同時に表示するための第2の表示手段とを有し、前記選択手段は前記動画像の倍率より小さく、かつ、最も近い倍率を有する静止画像を選択することを特徴としている。 A control signal transmitting means for transmitting to the transmitting side control signal for controlling the lens magnification of the transmission side microscope according to the position and size of the region, the moving image signal of the position and the magnification in accordance with the control signal received from the transmitting side, and a second display means for displaying concurrently with the selected still image as a moving image, the selection means is smaller than the magnification of the moving image, and the nearest magnification It is characterized by selecting a still image having.
請求項8記載の発明は、送信側においてステージ移動および使用する対物レンズ倍率が制御可能な顕微鏡によって生成した観察像を撮像して画像信号に変換し、この画像信号を送信側から受信側へ伝送し、受信側において前記観察像を観察する顕微鏡画像の遠隔観察方法において、前記受信側は、前記送信側で撮像されて伝送される低倍率の第1の対物レンズに対応する静止画像信号を受けて表示するとともに、この静止画像の一部を拡大する高倍率の第2の対物レンズの動画像を前記送信側から受けて前記低倍率の静止観察画像と同時に表示することを特徴としている。 The invention of claim 8, wherein, the transmission by imaging the observation image which the objective lens magnification is generated by a controllable microscope stage movement and use into image signals at the transmitting side, the image signal from the transmitting side to the receiving side and, in a remote observation method of a microscope image observing the observation image at the receiving side, the receiving side receives the still image signal corresponding to the first objective lens of low magnification to be transmitted is captured by the sender and it displays Te is characterized by displaying the said portion of the still image to enlarge the moving image of the second objective lens having a high magnification received from the transmitting side and low magnification still observed image at the same time.
【0017】 [0017]
【作用】 [Action]
第1の構成の場合、送信側から送信された顕微鏡の画像のうち、静止画像信号を受信側では記憶手段に格納し、この格納された静止画像から選択手段により所定の静止画像を選択すると、この選択された静止画像を第1の表示手段に表示する。 For the first configuration, among been microscope images transmitted from the transmitting side, the receiving side the still image signal stored in the storage means, selecting a predetermined still image by the selection means from the stored still images, Show the selected still image to the first display means. そして、更に受信側では前記送信手段から送信される動画像を第2の表示手段に動画像として表示する。 And, in yet receiving side displays the moving picture a moving picture transmitted from the transmitting unit to the second display means.
【0018】 [0018]
従って、以上の構成によれば、動画像とともに、選択された静止画像を併せて表示手段に表示して観察することが可能となり、これによって、動画と所望の静止画を同時に観察できるので、静止画を動画像より低い倍率の画像としておくことで、注目領域の画像は動画像で観察でき、注目領域を含むその周辺領域の画像は静止画で観察することにより、周辺の状況を把握しながら標本の観察ができるようになって、理想的な観察が可能になり、しかも、操作性にも優れると云った効果を有する顕微鏡画像遠隔観察装置を提供できる。 Therefore, according to the above configuration, the moving image, it is possible to observe by displaying on the display means together still image selected, thereby, it is possible to observe moving a desired still image simultaneously, stationary by leaving the image with the image of the lower moving image magnification, image of the region of interest can be observed in a moving image, the image of the peripheral region including the target region by observing a still image, while grasping the surrounding situation so can sample to be observed, it enables an ideal observation, moreover, can provide a microscopic image remote observation apparatus having the effect say with excellent operability.
【0019】 [0019]
また、第2の構成においては、顕微鏡はステージ移動およびレンズ倍率が制御可能なものを用いており、送信側から送信された顕微鏡の画像のうち、静止画像信号を受信側では記憶手段に格納し、この格納された静止画像から選択手段により所定の静止画像を選択すると、この選択された静止画像を第1の表示手段に表示する。 In the second configuration, the microscope is used as controllable stage movement and lens magnification, among been microscope images transmitted from the transmitting side, in a still picture signal receiving side stored in the storage means and selecting a predetermined still image by the selection means from the stored still image and displays the selected still image to the first display means. そして、更に受信側では前記送信手段から送信される動画像を第2の表示手段に動画像として表示する。 And, in yet receiving side displays the moving picture a moving picture transmitted from the transmitting unit to the second display means.
【0020】 [0020]
そして、指示手段により前記選択された静止画像の所定の領域を指示すると、制御信号伝送手段は前記指示手段によって指示された領域の位置と大きさに応じて前記送信側の顕微鏡のステージ位置とレンズの倍率を制御する制御信号を送信側に伝送し、送信側ではこの伝送された制御信号をもとに、顕微鏡のステージ移動およびレンズ倍率の制御が実施される。 When instructing a predetermined area of ​​the selected still image by the instruction means, the control signal transmission means the transmission side of the microscope stage position and the lens depending on the position and size of the area designated by said instruction means transmitting a control signal for controlling the magnification to the sender, on the basis of the control signal transmitted in the transmitting side, control of the stage movement and the lens magnification of the microscope is performed. その結果、撮像手段から得られる画像は前記制御信号に応じた顕微鏡ステージ位置と倍率の動画像信号となり、これが受信側へと送信されることから、第2の表示手段にはこの前記送信側から受信した前記制御信号に対応の顕微鏡ステージ位置と倍率の動画像が表示される。 As a result, an image obtained from the imaging means comprises a moving image signal of the microscope stage position and the magnification in accordance with the control signal, since this is transmitted to the receiving side, the second display means from the said sender moving image of the microscope stage position and the magnification corresponding to the received said control signal is displayed.
【0021】 [0021]
従って、以上の第2の構成によれば、第1の構成の効果に加えて、選択手段によって選択された所定の静止画像とともに、この静止画像の所定の領域の拡大された動画像を表示するので、静止画像で動画像の周辺領域を観察することができると云った効果を有する顕微鏡画像遠隔観察装置を提供できる。 Therefore, according to the second configuration described above, in addition to the effects of the first configuration, the predetermined still image selected by the selecting means, displaying the enlarged video image of a predetermined area of ​​the still image since, it is possible to provide a microscopic image remote observation apparatus having the effect of said that it is possible to observe the surrounding area of ​​the moving image as a still image.
【0022】 [0022]
また、第3の構成においては、顕微鏡はレンズ倍率が制御可能なものを用いており、送信側から送信された顕微鏡の画像のうち、静止画像信号を受信側では記憶手段に格納し、この格納された静止画像から選択手段により所定の静止画像を選択すると、この選択された静止画像を第1の表示手段に表示する。 In the third configuration, the microscope is used as the lens magnification is controllable, among the transmitted microscopic image from the transmitting side, in a still picture signal receiving side stored in the storage means, the storage When selecting a predetermined still image by the selection means from the still image, and displays the selected still image to the first display means. そして、また受信側では前記送信手段から送信される動画像を第2の表示手段に動画像として表示する。 Then, also on the receiving side displays the moving picture a moving picture transmitted from the transmitting unit to the second display means.
【0023】 [0023]
そして、指示手段により前記選択された静止画像の所定の領域を指示すると、制御信号伝送手段は前記指示手段によって指示された領域の位置と大きさに応じて前記送信側の顕微鏡のレンズの倍率を制御する制御信号を送信側に伝送し、送信側ではこの伝送された制御信号をもとに、顕微鏡のレンズ倍率の制御が実施される。 When instructing a predetermined area of ​​the selected still image by the instruction means, the magnification of the control signal transmission means the transmission side of the microscope lens in accordance with the position and size of the area designated by said instruction means transmitting a control signal for controlling the transmission side, the transmission side based on the control signal transmitted is carried out to control the lens magnification of the microscope. その結果、撮像手段から得られる画像は前記制御信号に応じた顕微鏡倍率の動画像信号となり、これが受信側へと送信されることから、第2の表示手段にはこの前記送信側から受信した前記制御信号に対応の顕微鏡倍率の動画像が表示される。 The result, an image obtained from the imaging means comprises a moving image signal of the microscope magnification in accordance with the control signal, which is from being transmitted to the receiving side, the second display unit received from the said sender moving image is displayed in the microscope magnification corresponding to the control signal.
【0024】 [0024]
従って、以上の第3の構成によれば、第1の構成の効果に加えて、選択手段によって動画像の領域を含んだ最も大きい倍率の静止画が自動的に選択、表示されることになるので、さらに操作性の向上を図ることができると云った効果を有する顕微鏡画像遠隔観察装置を提供できる。 Therefore, according to the third configuration described above, in addition to the effects of the first configuration, the largest magnification of the still image that includes the area of ​​the moving image is automatically selected, it is displayed by the selecting means since, it is possible to provide a microscopic image remote observation apparatus having the effect of said that it is possible to further improve the operability.
【0025】 [0025]
【実施例】 【Example】
以下、本発明の実施例について、図面を参照して説明する。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings. 本発明では、顕微鏡画像の観察時に、モニタに標本全体像または低倍率画像と拡大像の2枚の画像を表示するようにする(このとき、参照のために上記以外の複数の画像を表示することも、可能とする)。 In the present invention, when the microscopic image observation monitor so as to display the two images of the enlarged image and the entire specimen image or low magnification image (this time, to display a plurality of images other than the above for reference it is also to enable). 本発明では、標本全体像または低倍率画像(画像A)はすでに取り込まれた静止画像であり、拡大像(画像B)は動画像である。 In the present invention, the entire image or a low-magnification image specimen (image A) it is already captured still image, enlarged image (image B) is a moving image. 画像A上には画像Bがどの部分の映像であるかを示す矩形マーカを表示する。 The on image A displays a rectangular marker indicating whether the video which part image B.
【0026】 [0026]
画像Bを動画または静止画として記録するときには、そのときの顕微鏡ステージの座標の記録され、画像A上の、同一座標の部分と関連付けられるようにする。 When recording an image B as a moving image or a still image is recorded coordinates of a microscope stage at that time, on the image A, to be associated with a portion of the same coordinates. 画像Bを再生するときには、画像Aの上で示されている、画像Bに相当する部分の矩形マーカを選択すれば済むようにする。 When reproducing an image B it is shown on the image A, to avoid by selecting a rectangular marker portion corresponding to the image B.
【0027】 [0027]
このようにすることによって、従来十分でなかった、全体像上での拡大像の観察、記録を行えるように、観察経過対応に静止画像、動画像を再生することを可能にする。 By doing so, a conventional well Not found, observed enlarged image on the entire image, to allow the recording, viewing elapsed corresponding to the still image, makes it possible to reproduce a moving image.
【0028】 [0028]
以下、詳細を説明する(第1実施例) It will be described in detail below (first embodiment)
この実施例は、少なくともステージを自動制御することのできる顕微鏡と、顕微鏡標本像を撮像するための撮像手段と、撮像された画像情報を受け、画像を表示、記録、伝送し、また顕微鏡を制御するための制御手段を送信側と受信側が有し、動画像及び静止画像を表示する表示手段を少なくとも受信側が有し、動画像情報および静止画像情報を送信側の制御手段から受信側の制御手段に伝送する通信手段によって接続された、顕微鏡遠隔観察記録システムにおいて、表示された顕微鏡標本の全体像または低倍率像の静止画像上で、拡大像の表示範囲を示す領域を、マウス等のポインテンィングデバイスの操作で受信側の操作者が動かすことによって、画像上に示された表示領域の位置へ顕微鏡のステージを動かすことができ、その時の動画 This embodiment includes a microscope capable of automatically controlling at least stage receives an imaging means for imaging the microscopic specimen image, the image information captured, displaying an image, recording, transmission, or controlling the microscope control means for receiving side has a transmitting side, moving and still images at least the reception side has a display means for displaying the control means on the receiving side from the control means of the transmission side video information and still picture information connected by a communication means for transmitting, in a microscopic telemonitoring recording system, on the still image of the entire image or a low-magnification image of a microscope specimen displayed, an area indicating the display range of the enlarged image, Pointen such as a mouse by the operation of the I ring device moving the operator of the receiving side, it is possible to move the microscope stage to position of the display area shown on the image, moving at that time を受信側に表示させることができ、表示中の動画像、表示動画像と同じ顕微鏡像の静止画像を、受信側で記録・保存することができ、すでに記録された低倍率静止画像または動画像上で表示領域を指定した、拡大像の静止画像または動画像を記録するときに、顕微鏡標本の観察部位の座標によって、低倍率画像と拡大像とを関連付け、再生時にこの関連付けを追って、静止画像と動画像、また静止画像同士、動画像同士による画像再生を可能とするシステムであり、以下、詳細を説明する。 Can be displayed on the receiving side, the moving image being displayed, a still image of the same microscope image and the display moving image, can be recorded and stored on the receiving side, the low-magnification static image or a moving image that has already been recorded specifying a display area above when recording a still image or a moving image of the enlarged image, the coordinates of the observed region of the microscope specimen, associating the enlarged image with a low magnification image, chasing the association at the time of playback, a still image a moving image, also the still image together, is a system which enables image reproduction by moving images to each other, it will be described in detail below.
【0029】 [0029]
図1に第1実施例のシステムのハードウェア構成をブロック図で示す。 Figure 1 shows the hardware configuration of the system of the first embodiment in a block diagram. 図において、101は画像送信側の制御部、102は画像送信側の表示部、103は撮像部、104は顕微鏡、105は画像送信側の通信部でこれらは画像送信側システムを構成している。 In the figure, 101 control unit of the image transmission side, 102 display unit of the image transmitting side, 103 imaging unit, 104 is a microscope, 105 they constitute an image sending system communication section of the image transmitting side .
【0030】 [0030]
また、106は画像受信側の制御部、107は画像受信側の表示部、108は通信部であり、これらはセンタ側システムを構成している。 The control unit of the image receiving side 106, 107 display unit of the image receiving side, 108 denotes a communication unit, which constitutes a center side system.
【0031】 [0031]
ここで、上記撮像部103は、顕微鏡104の画像を撮像してビデオ信号化して出力するものであり、制御部101は受信した指令に基づいて顕微鏡104の遠隔操作を行ったり、撮像部103の出力するビデオ信号を画像データ化し、これを圧縮して圧縮画像データとして出力したり、静止画として低い圧縮率で圧縮して出力したりする等の制御を司るものであり、表示部102はこの制御部101の出力する圧縮画像データをビデオ信号化してモニタするモニタ装置である。 Here, the imaging unit 103 is for outputting the video signal by being an image of the microscope 104, the control unit 101 based on the received instruction or perform remote control of the microscope 104, the camera 103 the video signal to be output to the image data reduction, and outputs the compressed image data by compressing it, which controls the like and outputs is compressed at a low compression ratio as a still image, the display unit 102 in this the compressed image data output from the control unit 101 is a monitor device for monitoring and video signaling. モニタするために圧縮画像データをビデオ信号化する必要があるが、これはモニタ装置側に持たせても良いし、制御部101側に持たせても良い。 It is necessary to video signal of the compressed image data for monitoring, which may be given to the monitor apparatus may be provided with a control unit 101 side.
【0032】 [0032]
通信部105は通信網を介してセンタ側と通信するための装置であり、制御部101の出力する圧縮画像データをセンタ側に送信すると共に、センタ側からの命令を受信して制御部101に渡す機能を有する。 The communication unit 105 is a device for communicating with the center side through a communication network, the compressed image data output from the control unit 101 transmits to the center side, the control unit 101 receives a command from the center side It has the ability to pass.
【0033】 [0033]
上記撮像部103としては標準のカラーテレビジョン放送方式の一つであるNTSC方式用、高品位テレビジョン方式の一つであるHDTV用などのビデオカメラ、表示部102および107としてはブラウン管式あるいは液晶ディスプレイ式、プラズマディスプレイ式、投射式等のTVモニタ、通信部105および108としては、ISDN(サービス総合ディジタル網)、光ファイバ通信網、衛星通信網などを用いたディジタル通信方式の送受信装置を用いることができる。 For is one NTSC system standard color television broadcast system as the imaging unit 103, a video camera, such as for HDTV, which is one of high definition television system, CRT or liquid crystal as the display unit 102 and 107 display type, a plasma display type, TV monitor projection type or the like, as the communication unit 105 and 108, ISDN (Integrated services digital network), an optical fiber communication network, using the transmission and reception apparatus in a digital communication system using a satellite communication network be able to.
【0034】 [0034]
また、画像送信側に設置する顕微鏡104は、標本を載置するステージの移動を駆動操作用のモータにより、X軸およびY軸方向に制御することができ、画像送信側の制御部101からの命令に従って、ステージをX軸およびY軸方向に移動させることができる。 Further, the microscope 104 to be installed in the image transmission side, by a motor for driving the operation of the movement of the stage for placing a specimen, it is possible to control the X-axis and Y-axis direction, the image transmission side from the control unit 101 in accordance with the instruction, it is possible to move the stage in the X-axis and Y-axis direction.
【0035】 [0035]
センタ側システムを構成する画像受信側の制御部106は画像の取り込みの制御や、取り込んだ画像の外部記憶装置への記憶、圧縮画像データの伸長処理と、この伸長された静止画の画面表示、伸長処理された動画の画面表示、静止画上での指定領域が動画の全画面となるような拡大率に顕微鏡画像の拡大率に制御する制御命令を発生して通信部8に送り出す機能、静止画の切り替え命令を発生する機能、外部記憶装置に記憶された画像の再生機能等を有する。 The image receiving side of the control unit 106 which constitutes a center side system control and image capture, storage in an external storage device of the captured images, and decompression process of the compressed image data, the extended still image screen display, decompression processing moving image of the screen display, the designated area on the still image is sent out to the communication unit 8 to the control command is generated to control the magnification of the microscope image in the entire screen to become such magnification of video features, a still function of generating image switching instruction has a reproduction function of the image stored in the external storage device.
【0036】 [0036]
画像受信側の表示部107はこの制御部106により伸長された静止画や動画を表示したり、外部記憶装置から読み出されて再生された画像を表示する等の画像表示用のモニタであり、通信部108は通信網を介して受信した画像データを制御部106に送ったり、制御部106からの命令を通信網を介して画像送信側に送ったりするための送受信装置である。 Display unit 107 of the image receiving side to view still images and videos is extended by the control unit 106, an image monitor for displaying such displays an image reproduced is read from the external storage device, the communication unit 108 or send image data received via the communication network to the control unit 106, a transceiver for or sent to image transmission side via the communication network an instruction from the control unit 106.
【0037】 [0037]
通信網としてはISDN(サービス総合ディジタル網のINSネット1500,INSネット64,B‐ISDNなど)を用いる。 As communication network using ISDN (such as Integrated Services Digital Network INS-Net 1500, INS Net 64, B-ISDN).
【0038】 [0038]
画像送信側の制御部101と画像受信側端末106は通信部105および108で接続され、遠隔観察中は同期操作によって同じ画像が常に表示される。 Control unit 101 and the image receiving terminal 106 of the image transmitting side are connected by the communication unit 105 and 108, in telemonitoring is always see the same images by the synchronization operation.
【0039】 [0039]
顕微鏡104は上述したように標本を載置したステージの位置を、制御部101の制御によって制御されるが、また、顕微鏡によってはそれ以外の部分、例えば、対物レンズや絞り等も制御部101によって制御される。 The microscope 104 is the position of the stage mounted with the specimen as described above, is controlled by the control of the control unit 101, also other parts of the microscope, for example, by an objective lens and a diaphragm or the like also the control unit 101 It is controlled.
【0040】 [0040]
顕微鏡標本の画像は撮像部103に入力され、制御部101を介して表示部102へ表示される。 Images of a microscope specimen is input to the imaging unit 103, is displayed on the display unit 102 via the control unit 101. また通信部105および108を介してセンタ側制御部106にもその画像データは伝送され、センタ側の表示部107に表示される。 Also the image data to the center side control unit 106 via the communication unit 105 and 108 is transmitted and displayed on the display unit 107 on the center side. このとき伝送される画像データは、通信部の伝送速度によるが、一般に圧縮されている。 Image data to be transmitted this time depends on the transmission speed of the communication unit, which is generally compressed.
【0041】 [0041]
受信側で観察したい画像を指示することが可能であり、そのための命令が、受信側端末106から画像送信側の制御部101へと伝送される。 It is possible to instruct the image to be observed on the receiving side, the instruction for is transmitted from the receiving terminal 106 to the controller 101 of the image transmitting side. その命令によって、前述のように送信側制御部101が顕微鏡104を制御する。 By the instruction, the sending device controller 101 controls the microscope 104 as described above.
【0042】 [0042]
図2に制御部101,106の構成の詳細を示す。 Showing the details of the configuration of the control unit 101 and 106 in FIG. 2.
【0043】 [0043]
制御部101,106としてはパーソナルコンピュータまたはワークステーション等とその周辺機器から構成できる。 The control unit 101, 106 can be configured personal computer or workstation or the like and its peripheral devices. 図2において、201はCPUであり、各種制御や演算処理等を実施するもので、本システムで必要とする各種制御の中枢を担う。 2, reference numeral 201 denotes a CPU, intended to implement the various control and arithmetic processing and the like, responsible for the center of various controls required by the system. 202はメインのメモリであり、CPU201が実行するプログラムを格納したり、プログラム実行にあたり必要なデータの一時保持等に使用される。 202 is a main memory, and stores programs CPU201 executes, used for temporary retention of data required Upon program execution.
【0044】 [0044]
203はフレームメモリであり、表示部102,107に表示するための少なくとも一画面分のデータを保持するためのものである。 203 is a frame memory, is used to hold at least one frame of data to be displayed on the display unit 102, 107. フレームメモリ203にはCPU201により表示画面の画像データが書き込まれる。 The frame memory 203 is image data of a display screen is written by the CPU 201.
【0045】 [0045]
204は通信制御装置であり、外部とのデータ授受を行うためのものであって、例えば、シリアル通信を実施してデータ授受を行う。 204 is a communication control device, provided for the purpose of exchanging data with the outside, for example, exchanges data with out the serial communication. 205は大容量の外部記憶装置であり、ハードディスクや光磁気ディスクなどが用いられる。 205 denotes an external storage device of a large capacity, such as a hard disk or a magneto-optical disk is used. この外部記憶装置205はCPU201によりアクセスされ、前記静止画や動画のデータが逐次記憶される。 The external storage device 205 is accessed by the CPU 201, the still image and moving image data are sequentially stored. これら静止画や動画のデータはその時の顕微鏡ステージの位置データや顕微鏡拡大率、静止画と動画の対応関係の情報、画像の受信時刻情報等、後刻、対応関係を再現しながらトレースをするにあたり、必要となる各種情報と共に格納されるようにしてある。 Position data or a microscope magnification of these data still images and video microscope stage at that time, information of a correspondence between a still image and moving image, reception time information of the image, a later time, when the trace while reproducing the corresponding relationship, It is to be stored together with various information required. これらの情報はCPU201により作成され、画像データと共に外部記憶装置205にファイルされる。 This information is created by the CPU 201, is a file in the external storage device 205 together with the image data.
【0046】 [0046]
206はキーボードであり、CPU201に対してデータやコマンドを入力するためのものである。 206 is a keyboard, it is used to input data and commands to CPU 201. また、207はマウスであり、CPU201に対して表示部208の表示画面上の所望の座標位置の情報を入力するためのものであって、CPU201はこのマウス207により与えられる座標位置情報をもとに、画面上にマーカ(印し)を描いたり、そのマーカの示す領域が全体図となるような拡大率になるように顕微鏡に対する拡大率制御の命令を与えたり、その領域が画面に入るように顕微鏡のステージの位置制御命令を与えたりする機能を有する。 Also, 207 is a mouse, there is for inputting information of a desired coordinate position on the display screen of the display unit 208 with respect to CPU 201, based on the coordinate position information provided is CPU 201 by the mouse 207 to, or draw a marker (mark) on the screen, or provide instructions of magnification control for microscopy as area indicated by the marker is an overall view and composed such magnification, so that the region enters the screen to have the ability or giving the position control command of the microscope stage.
【0047】 [0047]
また、画像送信側の場合、受信した命令を顕微鏡に与えて必要な制御を行い、顕微鏡のステージ位置情報や、対物レンズの情報等を取り込んで画像受信側に送ると云った機能も持たせてある。 Further, if the image transmission side performs the necessary control giving instructions received microscopes, microscopes and stage position information, thereby also have functions say the letter in the image receiving side captures information of the objective lens is there. また、画像送信側の場合、撮像部103の撮像したビデオ信号を動画で送る場合は高圧縮率で画像を圧縮し、静止画で送る場合は低圧縮率で画像を圧縮して通信制御装置に出力し、画像受信側の場合、この圧縮処理された画像データを顕微鏡のステージ位置情報や、対物レンズの情報等を含めて外部記憶装置205に逐次記憶し、また、圧縮画像データを伸長処理して静止画と動画を対比して観察できるように同時に表示部107に表示させるように画面構成してフレームメモリ203上に表示データを描画すると云った機能を有する。 Further, if the image transmission side, the captured video signal of the image pickup unit 103 when sending video compresses image at a high compression ratio, when sending a still image to the communication control device to compress the image with a low compression ratio outputs, when the image receiving side, this or compressed image data to the microscope stage position information sequentially stored in the external storage device 205 including the information such as the objective lens, also the compressed image data decompression process having the function said that renders the display data on the frame memory 203 and screen configuration to simultaneously be displayed on the display unit 107 can be observed by comparing still images and movies Te. フレームメモリ203上に表示データは表示部107の走査に同期して順次走査して読出し、表示部107がアナログ信号入力による画像表示方式の場合はビデオ信号化して表示部107与え、ディジタル信号入力による画像表示方式の場合はそのまま表示部107与えて画像表示に供する。 Frame display data on the memory 203 sequentially scans in synchronism with the scanning of the display unit 107 reads, by a video signal of given display unit 107 when the display unit 107 of the image display system according to the analog signal inputs, by a digital signal input for the image display system provided for image display by applying directly display unit 107.
【0048】 [0048]
つぎに上記構成の本装置の作用を説明する。 Next a description will be given of the operation of the apparatus having the above structure.
【0049】 [0049]
このような構成において、画像送信側では、顕微鏡104の画像は撮像部103により撮像され、画像信号として出力される。 In such a configuration, in the image transmission side, the image of the microscope 104 is imaged by the imaging unit 103, is output as an image signal. この画像信号はディジタルデータ化され、制御部101へ送られる。 The image signal is digital data of, is transmitted to the control unit 101. 撮像部103から制御部101へ送られた画像データは、制御部101を構成要素であるフレームメモリ203に入力される。 Image data sent to the control unit 101 from the imaging unit 103 is input to the frame memory 203 which is a component of the control unit 101.
【0050】 [0050]
画像送信側では、CPU201の制御のもとに、フレームメモリ203の画像データが読出されてモニタ装置208(=表示部102)へ与えられ、ここに表示される。 The image transmission side, under the control of the CPU 201, the image data of the frame memory 203 is read out given to the monitor apparatus 208 (= the display unit 102), it is displayed here.
【0051】 [0051]
さらにフレームメモリ203に入力されたデータは、制御部101内のCPU201の制御のもとに、外部記憶装置205からメインメモリ202へ読み込まれ、メインメモリ202からフレームメモリ203へと入力されることもある。 Further data input to the frame memory 203, based on the CPU201 of the control in the control unit 101, is read from the external storage device 205 to the main memory 202, it may be entered from the main memory 202 to the frame memory 203 is there. このときの画像は、すでに観察に供され、記憶装置205に記録された画像である。 Image at this time, is already subjected to the observation, a recorded image in the storage device 205. モニタ装置208は画像の表示とパーソナルコンピュータのディスプレイの役割を兼ねる。 Monitoring device 208 also serves as a display function of displaying the personal computer of the image.
【0052】 [0052]
画像送信側では、さらにフレームメモリ203に入力されたデータは、制御部101内のCPU201の制御のもとに、外部記憶装置205に記憶させる一方、画像圧縮処理をして通信制御装置204に送り出す。 The image transmission side, further data input to the frame memory 203, based on the CPU201 of the control in the control unit 101, while is stored in the external storage device 205, sends to the communication control apparatus 204 and the image compression processing . そして、通信制御装置204はこれをシリアルデータ化して通信部105を通し、相手側つまり、画像受信側の装置へと送り出す。 And this communication control device 204 is passed through the serial data of to the communication unit 105, it sends to the other party that is, the image receiving device.
【0053】 [0053]
図3にモニタ装置208上に表示された顕微鏡画像と、顕微鏡ステージ上の標本の関係を示す。 And the microscope image displayed on the monitor device 208 in FIG. 3 shows the relationship between the specimen on the microscope stage. この画像はセンタ側の表示部107に表示させる像であるが、画像送信側においても同じものが表示されるようにすることもできる。 This image is an image to be displayed on the display unit 107 on the center side may be also be able to see the same in the image transmitting side.
【0054】 [0054]
図3において、401はモニタ装置であり、402はモニタ装置401の画面の左半分の表示領域に表示された低倍率像、403はモニタ装置401の画面の右半分の表示領域に表示された高倍率・拡大像である。 3, 401 is a monitor device, 402 a low magnification image displayed in the display area of ​​the left half of the screen of the monitor device 401, 403 is high is displayed on the right half of the display area of ​​the screen of the monitor device 401 is the magnification-enlarged image. 低倍率像402は静止画像(画像A)であり、高倍率・拡大像403は動画像(画像B)である。 Low magnification image 402 is a still image (image A), a high-magnification enlarged image 403 is a moving image (image B). また、404は画像Bの位置および領域を示す矩形のマーカである。 Also, 404 is a rectangular marker indicating the position and the area of ​​the image B. 405は顕微鏡ステージであり、406はこの顕微鏡ステージ405上の顕微鏡標本、407は顕微鏡標本406の観察位置をそれぞれ示す。 405 is a microscope stage, 406 microscope specimen on the microscope stage 405, 407 denotes a viewing position of the microscope specimen 406.
【0055】 [0055]
なお、表示される画像の数は、低倍率像402である画像Aおよび高倍率・拡大像403である画像Bだけでなく、以前に記録された複数の画像を表示することも可能とする。 The number of images to be displayed, not only image B is an image A and the high-magnification enlarged image 403 is a low-magnification image 402, also makes it possible to display a plurality of images previously recorded.
【0056】 [0056]
低倍率像402はすでにファイルとして記録された静止画像であり、高倍率・拡大像403は現在顕微鏡104に取り付けられた撮像部(TVカメラ)103から入力されている動画像である。 Low magnification image 402 is already recorded still image as a file, a high-magnification enlarged image 403 is a moving image being input from the current image pickup unit attached to the microscope 104 (TV camera) 103. ここで、低倍率像402の静止画を取り込んだときの対物レンズの倍率に比べ、高倍率・拡大像403の動画像を取り込んでいる対物レンズの倍率はより高倍である。 Here, compared with the magnification of the objective lens when incorporating a still image of low magnification images 402, magnification of the objective lens which captures a moving image of high magnification, magnified image 403 is higher magnification. 通常は静止画像の画面上で所望の領域に所望の大きさの枠(矩形マーカ404)をマウス207などのポインティングデバイスで入力することで、制御部を構成するCPU201が表示中の静止画像上のこの枠の大きさに見合う拡大率で高倍率・拡大像の表示領域を埋めるだけの高倍率・拡大像403が得られるような顕微鏡104の対物レンズの倍率を選ぶように、自動制御する構成としてある。 Normally desired area to a desired size of the frame on the screen of the still image (rectangular marker 404) by entering a pointing device such as a mouse 207, CPU 201 constituting the control unit of the still image in the display to choose the ratio of only a high-magnification microscope 104 as enlarged image 403 can be obtained the objective lens fills the display area of ​​the high magnification and enlarged image in enlargement a rate commensurate with the size of the frame, a structure for automatically controlling is there.
【0057】 [0057]
また、矩形マーカ404の位置をマウス207などのポインティングデバイスで移動させることができ、これにより、矩形マーカ404の位置が観察領域になるようにステージをX軸Y軸移動する制御データを発生して顕微鏡を自動制御する機能を持たせてある。 Also, the position of the rectangular marker 404 can be moved by a pointing device such as a mouse 207, thereby, the stage so that the position of the rectangular marker 404 is observed region by generating a control data for moving the X-axis Y-axis It is provided with a function of automatically controlling the microscope.
【0058】 [0058]
従って、矩形マーカ404は、高倍率・拡大像403として入力されている画像の低倍率像402上での画像領域を表わし、また、現在表示されている画像の位置をあらわすことになる。 Accordingly, the rectangular marker 404 represents an image region on the low magnification image 402 of the image being input as a high-magnification enlarged image 403, also represents the position of the image currently being displayed. すなわち、矩形マーカ404の枠の内部が403に表示されている動画像と等しい領域である。 In other words, an area equal to the moving image inside the frame of the rectangular marker 404 is displayed on the 403.
【0059】 [0059]
このように、本システムでは、静止画上に矩形マーカ404を表示することによりその領域の高倍率・拡大像を動画としてリアルタイムに表示して観察でき、矩形マーカ404の位置をマウス207によって移動操作することにより、その動きに合わせて高倍率・拡大像403として表示される動画も移動して操作性良く観察を進めることができるようにしている。 Thus, in this system, by displaying a rectangular markers 404 on the still image can be observed by displaying in real time a high magnification, magnified image of the area as a moving, moving operation by the mouse 207 to position the rectangular marker 404 by, so that it is possible to advance the moving image displayed also moved with good operability observed as a high-magnification enlarged image 403 in accordance with the movement thereof. そして、矩形マーカ404のマウス操作による移動は、移動後の低倍率像(画像A)402上の座標から顕微鏡ステージの座標へと変換される。 The movement by the mouse operation of the rectangular marker 404 is converted from the low-magnification image (image A) on 402 coordinates after the movement to the coordinates of the microscope stage. そして、そのステージ座標へ顕微鏡ステージ405を動かすように制御手段101から顕微鏡104へ命令が送られる。 The instruction from the control means 101 to move the microscope stage 405 to the microscope 104 is sent to the stage coordinates. その結果、顕微鏡標本406上の観察位置407の位置が動く。 As a result, it is moving the position of the observation position 407 in the microscope specimen 406. その時、撮像部103によって撮像された動画像が、高倍率・拡大像(画像B)403である。 Then, moving images captured by the imaging unit 103 is a high-magnification enlarged image (image B) 403.
【0060】 [0060]
画像送信側と画像受信側の通信中の関係を図4に示す。 The relationship between the communicating of the image transmission side and the image receiving side shown in FIG.
【0061】 [0061]
通信中の操作は、基本的には受信側が行う。 Operation in the communication, the receiving side performs basically. よって、受信側から送信側へと制御命令が送られる。 Therefore, the control instruction is sent from the receiving side to the transmitting side. 制御命令は顕微鏡ステージの移動、画像の保存、倍率の変換などがある。 Control instructions and the like movement of the microscope stage, the image saving, magnification conversion. 顕微鏡ステージの移動は図3で説明したように低倍率像上において拡大像の位置を示す矩形マーカ404の位置をマウスで動かす操作を行うことによって行われる。 The position of the rectangular marker 404 indicating the position of the enlarged image on the low magnification image as the movement of the microscope stage has been described in FIG 3 is performed by performing the operation of moving the mouse. この間、画像送信側から画像受信側へは顕微鏡104の標本像を撮像部103で取り込んだ画像データが送られ続ける。 During this time, from the image transmission side to the image receiving side image data is continuously sent captured by the imaging unit 103 the specimen image of the microscope 104.
【0062】 [0062]
本システムにおけるセンタ側(画像受信側)での操作全体の流れを、図6のフローチャートに示す。 The overall flow of operations in the center side in the system (image receiver) shown in the flowchart of FIG.
【0063】 [0063]
センタ側(画像受信側)においては、まず初めに標本の全体像が取り込まれる(S101)。 In the center side (the image receiving side), the entire image of the first, the sample is captured (S101). すなわち、顕微鏡画像の送信側である画像送信側システムにおいて顕微鏡装着の撮像装置により取り込まれた標本全体像は画像受信側であるセンタ側へと伝送される。 That is, the entire specimen image captured by the imaging device of the microscope mounted in the image transmission side system which is the transmission side of the microscopic image is transmitted to the center side is an image receiving side. センタ側においては、標本の全体像を取り込むと次にこの全体像を図3の静止画像(画像A)402として画像受信側のモニタ(表示部)に表示する(S102)。 In the center side, when taking the whole image of the specimen and then displaying this overview in a still image of FIG. 3 (image A) 402 as the image receiving side of the monitor (display unit) (S102).
【0064】 [0064]
次にセンタ側においては、観察する顕微鏡像の対物レンズの倍率を入力する(S103)。 Next, in the center side, and inputs the magnification of the objective lens of the microscope image observing (S103). これにより、この入力された倍率は当該倍率制御のための制御情報としてセンタ側から画像送信側へと送られる。 Accordingly, the inputted magnification is transmitted from the center side as control information for the magnification control to the image transmitting side. 画像送信側にある遠隔操作顕微鏡104にはレンズ切り替えを自動で行う機能が備わっており、この切り替え制御はセンタ側から送られてきた制御情報に基づいて画像送信側の制御部101が実施する。 The remote operation microscope 104 in the image transmission side are equipped function for lens switching automatically, but this switching control is the control unit 101 of the image transmitting side is carried out based on the control information transmitted from the center side.
【0065】 [0065]
すなわち、制御情報を受けた画像送信側の制御部101はこの制御情報が対物レンズの倍率の指定情報であることを認識してその倍率となるように、遠隔操作顕微鏡104の対物レンズの切り替え駆動部を制御する。 That is, as the control unit 101 of the image transmission side which has received the control information is the control information is recognized by its ratio to be a specification information of the magnification of the objective lens switching driving of the objective lens of the remote operation microscope 104 to control the part.
【0066】 [0066]
このようにして制御情報を受けた画像送信側の制御部101の制御のもとに自動的に遠隔操作顕微鏡104のレンズ倍率切り替え制御が行われる。 In this way, the automatic lens magnification switching control of the remote control microscope 104 under the control of the image transmission side of the control unit 101 which has received the control information.
【0067】 [0067]
画像送信側の撮像部(カメラ)103でとらえた標本の顕微鏡像が伝送されて受信されており、これは顕微鏡の倍率が調整済みとなれば拡大像に相当することになり、従って、センタ側(画像受信側)においては、画像送信側から伝送されたこの拡大像を高倍率・拡大像(画像B)403として表示する(S104)。 The imaging unit of the image transmitting side (camera) and microscopic image of the sample captured by 103 is received is transmitted, which will be equivalent to the enlarged image if the magnification of the microscope and adjusted, therefore, the center side in (the image receiving side), and displays the enlarged image transmitted from the image transmitting side as a high-magnification enlarged image (image B) 403 (S104).
【0068】 [0068]
センタ側においては、顕微鏡像を観察するためにオペレータ(この場合は病理医など)がマウス207を操作して静止画像(画像A)402上の矩形マーカ404の表示位置を動かして標本上の所望の部分の拡大像が表示されるように表示位置調整操作しているので、センタ側においては、静止画像(画像A)402上で矩形マーカ404を動かしているマウス207の位置を検出する(S105)。 In the center side, the desired on the specimen by moving the operator display position of the rectangular markers 404 on (in this case, the pathologist, etc.) still images by operating the mouse 207 (image A) 402 in order to observe the microscopic image since magnified image of part of is the display position adjustment operation to be displayed, in the center side, to detect the position of the mouse 207, which moves the rectangular marker 404 on the still image (image a) 402 (S105 ).
【0069】 [0069]
マウス207の位置を検出すると次にこのマウス207の位置情報を元にして顕微鏡104のステージのとるべき座標位置を計算する。 Based on the position information of the detected then this mouse 207 the position of the mouse 207 calculates the coordinate position to be taken by the stage of the microscope 104. すなわち、マウス207の位置により静止画像(画像A)402上の矩形マーカ404の位置(観察指定領域)が決められるので、当該矩形マーカ404の位置に相当する領域の画像が観察できるように、顕微鏡104のステージ座標を計算する(S106)。 That is, since the position of the still image (image A) on 402 square markers 404 mouse 207 (observe specified area) is determined, so that the image of the region corresponding to the position of the rectangular markers 404 can be observed, a microscope calculating the 104 of the stage coordinate (S106). そして、ステージ座標が求まると、その求めたステージ座標を画像送信側に伝送する(S107)。 When the stage coordinates are obtained, and transmits the determined stage coordinates to the image transmitting side (S107). 画像送信側では、受け取ったステージ座標対応に顕微鏡ステージを移動させる。 In the image transmitting side moves the microscope stage to the stage coordinates corresponding received.
【0070】 [0070]
つぎにセンタ側においては、静止画像の取り込みの指示の有無を判断した上で静止画取り込み(現在の拡大像である画像B(動画)をフリーズして、これを静止画の画像データとして画像送信側より伝送させる)処理、または、低倍率画像へ戻る処理に移る(現在の拡大像である画像B(動画)を取り出すもととなった静止画像(画像A)が拡大像である画像B(動画)であったときの静止画像を静止画像として取り出す処理に移る)(S108)。 Next, in the center side, to freeze the image B (video) is a still-image taking (now enlarged image on it is determined whether the instruction for still image capture, image transmission it as still image data is transmitted from the side) processing, or the image B moves to a process for returning to the low-magnification image still image became Moto retrieving (image B (video is the current enlarged image) (image a) is an enlarged image ( moves to a process for retrieving a still image when was moving) as a still image) (S108).
【0071】 [0071]
すなわち、S108〜S110ではそれぞれ静止画取り込み、または、低倍率画像へ戻り、終了か否かの選択をする。 That takes each in S108~S110 still image, or returns to the low magnification image, the selection of whether or not the end. それぞれの処理の選択は画面上のメニューの選択によって行われる。 Selection of the respective processing is performed by selecting a menu on the screen. これらの処理のいずれをも選択しなかった場合には、動画観察を続行する状態になり、この場合には受信した動画像の記録、すなわち、外部記憶装置205への保存を行う(S111)。 In If you did not select any of these processes, are ready to continue the moving image observation, recording of a moving image received in this case, i.e., conservative to the external storage device 205 (S 111). この記録は観察中は自動的に行われ、動画像データとともにその時の顕微鏡ステージ座標も合わせて記録される。 This recording is under observation made automatically, it is also recorded together microscope stage coordinates at that time together with the video data.
【0072】 [0072]
S112〜S114は静止画像を取り込むときの処理である。 S112~S114 is a process when capturing a still image. すなわち、S108において静止画像取り込みであった場合には、まず初めに動画像表示をフリーズする(S112)。 That is, if it was still image capture in S108 freezes the First moving image display (S112). このとき、画像送信側システムでは静止画像を取り込み、保存している。 At this time, the still image capture in the image transmission side system, are stored. そして、静止画像が送信側から受信側へと伝送され、受信側でそのデータを保存する(S113)。 Then, the still image is transmitted from the transmitting side to the receiving side, it stores the data on the receiving side (S113). このとき、受信し、保存するデータは画像のみではなく、その時のステージ座標等低倍率像と拡大像のリンクを管理するためのデータも含まれる。 In this case, the received data stored is not only the image, also includes data for managing the links of the enlarged image and the stage coordinate and low magnification image at that time.
【0073】 [0073]
取り込んだ画像、すなわち、今まで動画像として観察していた倍率の静止画像を、新たな低倍率像(画像A)として表示する(S114)。 Captured image, i.e., a still image magnification which has been observed as a moving image ever displayed as a new low-magnification image (image A) (S114). 以上の操作の後、S103に戻り、新たな拡大像の観察を続ける。 After the above operations, the process returns to S103, continuing the observation of a new enlarged image.
【0074】 [0074]
低倍率像の観察に戻るときは、S109で低倍率像の観察を選択する。 To return to the observation of low magnification images selects the observation of low magnification image at S109. すると、センタ側システムにおいては画像Bを現在の低倍率像に切り替える(S115)。 Then, in the center-side system switches the image B to the current low magnification image (S115). ただし、現在の低倍率像がはじめの拡大像であれば、切り替えは行わない。 However, current low magnification image if an enlarged image of the first, the switching is not performed. そして次にその画像の低倍率静止画像を再生・表示し(S116)、S103以下の処理に戻る。 And then reproduces and displays the low magnification static image of the image (S116), S103 returns to the following process. これにより、高倍率の動画像観察状態から低倍率の動画像観察に移行して観察を続けることができる。 Thus, it is possible to continue observation shifted from the high magnification video image observation condition of the low magnification of the moving image observation.
【0075】 [0075]
以上がセンタ側システムを中心とする観察時でのシステムの操作と動作例を順を追って説明したものである。 The above is obtained by step-by-step instructions and operations example of the operation of the system at the time of observation around the center side system.
【0076】 [0076]
このような動作を行わせるには、画像送信側システムの制御部101とセンタ側(画像受信側)システムの制御部106につぎのような処理機能を持たせれば良い。 To perform such an operation, the control unit 101 and the center side of the image transmitting side system (the image receiving side) it is sufficient to have a processing function as follows to the controller 106 of the system. 図7は動画像受信中の画像受信側の処理を、図8は同じく動画像受信中の画像送信側の処理を示すフローチャートであり、前者(図7)はセンタ側システムの制御部106の、そして、後者(図8)は画像送信側システムの制御部101の処理および制御機能に対応する。 Figure 7 is the image receiving side in a moving image reception process, FIG 8 is a flow chart similarly illustrating the image transmission side processing in the moving image received, the former (Fig. 7) is the control unit 106 of the center side system, Then, the latter (FIG. 8) corresponds to the processing and control functions of the control unit 101 of the image sending system.
【0077】 [0077]
順を追って説明する。 It will be described in order.
【0078】 [0078]
センタ側(画像受信側)の制御部106では通信回線を介して、画像送信側からの動画像データを受信する(S201)。 Center side via a communication line the control unit 106 of the (image receiver) receives the moving image data from the image transmitting side (S201). このとき、受信するものは圧縮処理された動画像デ−タと、動画像入力時の顕微鏡ステージの座標データである。 At this time, incoming ones compressed moving picture de - data and a coordinate data of the microscope stage when a moving image input.
【0079】 [0079]
センタ側の制御部106では、この受信した動画像データと座標データは制御部106の内蔵する外部記憶装置205に保存する(S202)。 In the center side of the control unit 106, moving image data and the coordinate data the received is stored in the external storage device 205 with a built-in control unit 106 (S202).
【0080】 [0080]
受信した動画像データは画像圧縮処理されているので、制御部106ではCPU201によりこの圧縮されている動画像データを伸長処理し、制御部106を構成する図2のフレームメモリ203へ転送する(S203)。 Since the received moving image data is image compression processing, the moving image data which is the compressed by CPU201 the control unit 106 decompresses, is transferred to the frame memory 203 of FIG. 2 constituting the control unit 106 (S203 ).
【0081】 [0081]
つぎにセンタ側の制御部106ではCPU201によりS204で伸長した画像データをフレームメモリ203に書き込み、さらにテレビ走査(掃引)に同期させながらフレームメモリ203からこれを読出してビデオ信号化した後、ビデオ出力からモニタ装置208(=表示部107)に与えて当該モニタ装置208に表示させる。 Then the CPU201 the control unit 106 of the center-side write the image data expanded in S204 in the frame memory 203, after the video signal of further reads it from the frame memory 203 while synchronizing the television scanning (sweep), video output after applied to the monitor apparatus 208 (= the display unit 107) to be displayed on the monitor device 208.
【0082】 [0082]
表示を行うとつぎにマウス207およびキーボード206からの入力を取り込む(S205)。 When performing display then captures the input from the mouse 207 and keyboard 206 (S205). これらの入力は制御部106のCPU201の制御によって、顕微鏡ステージの移動、静止画像取込命令、観察の終了命令などとして処理される。 The CPU201 of the control of these input control unit 106, the movement of the microscope stage, the still image capture command is processed as such observation end instruction.
【0083】 [0083]
取り込んだ情報からマウス207の移動があったことが判明した場合には(S206)、S207,S208の処理を行う。 If it turns out that there was a movement of the mouse 207 from information taken (S206), it performs the processing of S207, S208. ここでマウスが移動すると、マウスの移動方向とその移動量対応に静止画像上の矩形404を画面上で移動させる(S207)。 Now the mouse is moved, it moves the rectangle 404 in the still image to the moving amount corresponding to the moving direction of the mouse on the screen (S207). これにより、図3で説明したように、拡大領域を示す矩形マーカ404が静止画像(画像A)上で移動する。 Thus, as described in FIG. 3, the rectangular marker 404 showing the enlarged region is moved on the still image (image A).
【0084】 [0084]
つぎにセンタ側の制御部106は低倍率静止画像(画像A)402上での矩形マーカ404の座標をステージ座標へと変換処理し、これをこの座標へのステージ移動命令として通信制御装置204から通信部108を介して画像送信側システムに伝達する(S208)。 Then the control unit 106 of the center side is conversion coordinates of the rectangular marker 404 on the low-magnification static image (image A) 402 to the stage coordinates, from the communication control device 204 the same as a stage movement instruction to the coordinates via the communication unit 108 transmits the image transmission side system (S208). そして、画面上のメニューの選択によって終了が指示されなければS201からの処理に戻り、終了が指示されていれば処理を終了する(S213)。 Then, the process returns to the S201 to be instructed terminated by selecting a menu on the screen, the end of the process ends if it is instructed (S213).
【0085】 [0085]
S210〜S212は静止画像を取り込むときの処理である。 S210~S212 is a process when capturing a still image. すなわち、センタ側の制御部106は静止画取込命令があった場合(S109)、静止画取込命令を画像送信側に伝える(S210)。 That is, the control unit 106 of the center side when there is a still image capture instruction (S109), transmitting the still image capture command to the image transmitting side (S210). そして、静止画像データの受信待ちとなる(S211)。 Then, the reception waiting of the still image data (S211). 画像送信側から静止画像データが送られて来ると、この送られて来た画像データを通信制御装置204を介して取り込み、CPU201の制御のもとに外部記憶装置205に書き込む(S212)。 When the still image data is sent from the image sending side, the sent image data came uptake via the communication control device 204 is written to under the control of the CPU201 in the external storage device 205 (S212).
【0086】 [0086]
このようにして、指定したマクロ領域の像を静止画像として、そして、このマクロ領域上での所望のミクロ領域(注目領域)の拡大像(高倍率像)を動画像として表示することと、マウス操作等による注目領域の設定と移動、現在の注目領域をマクロ領域としてさらにそのマクロ領域中の所望のミクロ領域を観察するための倍率切り替え、これらの画像収集、マクロ領域画像とこのマクロ領域上のミクロ領域画像の関係等の情報収集を実施できる。 Thus, as an image a still image of the specified macro area and, and displaying an enlarged image of the desired micro area in the macro region (region of interest) (high magnification image) as a moving image, the mouse moving and setting of the target area by operation or the like, magnification switching for observing a desired micro area in the macro region the current region of interest as a macro region, collecting these images, a macro area image on the macro area It can be carried out information gathering relationships of micro region image.
【0087】 [0087]
次に画像送信側システムの制御部101の処理および制御機能を説明する。 Next, a description will be given of processing and control functions of the control unit 101 of the image sending system. 画像送信側の制御部101では顕微鏡104にセットされたテレビカメラによる撮像部103から出力される画像データ(顕微鏡画像の画像データ)を、自己の内蔵するフレームメモリ203へ取り込む(S301)。 Image data output from the image transmission side of the control unit 101 in the imaging unit 103 by the television camera set in the microscope 104 (image data of the microscopic image), taking the frame memory 203 to the built-in self (S301).
【0088】 [0088]
また、一方、この画像データを圧縮処理して自己の内蔵する外部記憶装置205に保存する(S302)。 Further, while saving in the external storage device 205 to the built-in self-compressing processes the image data (S302). このとき保存するのは、画像データだけでなく、この画像を取り込んだ際の顕微鏡ステージ座標も含まれるものとする。 To store this time, not only the image data, are also intended to be included microscope stage coordinates when incorporating the image.
【0089】 [0089]
フレームメモリ203上の画像データはテレビ走査に同期して、読み出されてビデオ信号化され、画像送信側システムのモニタ装置(=表示部102)に表示される(S303)。 Image data in the frame memory 203 in synchronism with the television scanning, is read and the video signal of, are displayed on the monitor of the image transmission side system (= the display unit 102) (S303).
【0090】 [0090]
画像送信側の制御部101は画像圧縮処理したこの画像データを、自己の内蔵する通信制御装置204を介して通信部105に出力し、画像受信側であるセンタ側へと送信する(S304)。 The image data control unit 101 has processed the image compression in the image transmission side via the communication control device 204 that incorporates a self output to the communication unit 105, and transmits to the center side is an image receiving side (S304). この結果、送信するデータは、保存したものと同様、圧縮されているのでデータ量が少なくて済み、従って、伝送時間を短くできる。 As a result, data to be transmitted is similar to that stored, it requires less amount of data because it is compressed, thus shortening the transmission time. また、送信するのは画像データとステージ座標のデータである。 Further, the data of the image data and the stage coordinates to transmit.
【0091】 [0091]
次に画像送信側の制御部101は画像受信側であるセンタ側からの命令の受信の有無を調べ(S305)、センタ側から命令があった時にはS306,S308で命令の種類による処理の選択をする。 Then the control unit 101 of the image transmitting side checks for the reception of instructions from the center side is an image receiving side (S305), the selection processing by the type of instruction in S306, S308 is when there is a command from the center side to.
【0092】 [0092]
まず、センタ側から受けた命令が顕微鏡ステージの移動命令であった場合には、制御部101はS306からS307の処理に移る。 First, when the instruction received from the center side has a movement command of the microscope stage, the control unit 101 shifts to the process in S307 from S306. このS307の処理では、移動命令とともにセンタ側システムから送られて来たステージ座標へと、顕微鏡104のステージを移動させるべく駆動制御する。 In the process of S307 is to stage coordinates sent from the center side system with moving instruction, the drive control to move the stage of the microscope 104.
【0093】 [0093]
センタ側システムから受けた命令がステージ移動でなかった場合は、制御部101は受けた命令が静止画像取込命令か否かを判断する(S308)。 If commands received from the center side system is not a stage movement, the control unit 101 instructions received to determine whether the still image capture instruction (S308). その結果、静止画像取込命令であった時は、撮像部103から制御部101内蔵のフレームメモリ203への画像入力を中止する(S309)。 As a result, when a still image capture instruction to stop the image input from the imaging unit 103 to the control unit 101 built-in frame memory 203 (S309).
【0094】 [0094]
このとき、制御部101内蔵のフレームメモリ203上には、入力中止直前の画像データが残っていることになる。 At this time, on the control unit 101 built-in frame memory 203, so that the remaining image data of the previous input discontinuation. 画像送信側の制御部101はこのフレームメモリ203上のデータを自己内蔵の外部記憶装置205に書き込む(S310)。 Control unit 101 of the image transmitting side writes the data on the frame memory 203 to the self-contained in the external storage device 205 (S310). そして、この画像データをセンタ側システムへ伝送すべく制御する(S311)。 Then, it controlled to transmit the image data to the center side system (S311). このときの外部記憶装置205に書き込む画像データは非圧縮であるか、圧縮処理されたものであっても、動画像の圧縮よりも圧縮率が低く画質の良いものである。 Whether the image data to be written to the external storage device 205 at this time is uncompressed, even those that are compressed, to have good image quality lower compression ratio than the compression of moving images.
【0095】 [0095]
それぞれの処理が終了した後に、画像送信側の制御部101は処理を終了させるか否かを決める(S312)。 After each processing is completed, the control unit 101 of the image transmitting side determines whether or not the process is terminated (S312). 終了しなければ、はじめに戻り、撮像部103からの画像入力を続ける。 If completed, the process returns to the beginning, continuing an image input from the imaging unit 103. 終了であれば、ここで画像送信側システムの処理を終わる。 If finished, here it ends the processing of the image sending system.
【0096】 [0096]
図9(a)にこのとき記録された静止画像402・動画像403の関係を示す。 FIG. 9 (a) shows the time recorded relationship still image 402, the moving image 403.
【0097】 [0097]
図9(a)を説明すると、低倍率像(静止画像)402上の矩形マーカ404で、動画像403として得る拡大像(注目領域)の場所が示される。 Figure 9 Referring to the (a), at a low magnification image (still image) on the 402 square markers 404, the location of the magnified image (region of interest) obtained by the moving image 403 is shown. この拡大像の動画ファイル(例えば、1秒あたり30コマ分)は、低倍率静止画像402または隣接する他のコマの動画像403とリンクしており、低倍率像402上に表示される矩形マーカ404の情報によってその画像の位置が示される。 Video file for this enlarged image (e.g., 30 frame of per second) is linked to the moving image 403 of the other frame adjacent or low magnification static image 402, a rectangular marker which is displayed on a low magnification image 402 its position in the image is indicated by 404 information.
【0098】 [0098]
静止画像402、および動画像403の各フレーム(コマ)はそれぞれの顕微鏡ステージ座標データを持っている。 Each frame of the still image 402, and a moving image 403 (frame) has a respective microscope stage coordinate data. このデータは画像ファイル内に記録されている。 The data is recorded in the image file. 画像ファイル内に記録されるデータの構成は図11に示す如きであり、画像ファイルはヘッダと画像データ部分の領域からなる。 Structure of data recorded in the image file is a as shown in FIG. 11, the image file is made from the area of ​​the header and the image data portion. ヘッダには静止画の場合、拡大画像矩形領域座標、拡大動画像ファイル名、動画の場合、低倍率静止画像、同倍率静止画像の情報が入る。 For still image header, the enlarged image rectangle coordinates, enlarged moving image file name, and in a video, the low-magnification static image, information of the same magnification static image enters.
【0099】 [0099]
本システムにおいては、低倍率画像上でマウス207の位置情報に基づいて表示されるマウスカーソルを矩形マーカ404内の領域に移動させてマウス207の操作ボタンをクリックすると、矩形マーカ404内を全領域とする拡大像を呼び出すことができる。 In this system, when a mouse cursor displayed on the basis of the position information of the mouse 207 on a low magnification image is moved to a region within the rectangular marker 404 clicks an operation button of the mouse 207, the inside of the rectangular marker 404 whole area enlarged image to be able to call the. ある倍率で観察した動画像ファイルは、以下の3種類の条件で終了する。 Moving image file observed with some magnification ends at the following three conditions.
【0100】 [0100]
その条件とは、(i) 静止画像取込のためにフリーズしたとき、(ii) 低倍率画像での観察に戻ったとき、(iii) より高倍率の拡大像での観察に移ったときの3種類である。 Of its condition, (i) when frozen for still image capture, when returning to the observations in (ii) low magnification image, when moved to the observation at high magnification enlarged image of from (iii) 3, which is a kind.
【0101】 [0101]
高倍率の拡大像での観察から低倍率の拡大像に移る場合、すなわち、動画像を高倍率の像からそれより低倍率の像に戻す時は、現在の静止画像より低倍率の静止画を画像ファイルから呼び出せばよい。 When moving from the observation at high magnification of the enlarged image in low magnification enlarged image, i.e., when returning than a moving picture high-magnification image of a low magnification image of a low magnification static image than the current still image it can be called from the image file. また、図9(a)の403hに示すように、動画像中に矩形マーカ404を指定することで、拡大像からさらにその中の指定領域の拡大像を得ることも可能である。 Further, as shown in 403h in FIG. 9 (a), by specifying a rectangular marker 404 in a moving image, it is also possible to obtain an enlarged image of the designated region of the further therein from the enlarged image.
【0102】 [0102]
静止画像を取り込んだときは、そのときの動画像と静止画ファイルがリンクしており、静止画像からさらに拡大した高倍率の画像があれば、その画像もまた静止画像とリンクされる。 When captured still images are to moving images and still images file links at that time, if there is a high magnification image of a further enlarged from a still image, the image is also linked with the still image. 動画像の観察から直接、高倍率への拡大を行ったときには、動画像同士がリンクされる。 Directly from the observation of a moving image, when performing an expansion of the high magnification, the moving picture with each other is linked.
【0103】 [0103]
以上のような動画像ファイルおよび静止画像ファイルのリンクによって、観察中の記録が残される。 By the link of the moving image files and still image files as described above, recording under observation it is left. また、このリンクを辿ることによって、観察の手順を再現することができる。 Also, by following this link, it is possible to reproduce the observation procedures.
【0104】 [0104]
また、図9(b)のように、低倍率静止画像402と、その拡大動画像403上で指定した静止画像、あるいは低倍率動画像と、その静止画から拡大指定した動画像を関連付ける。 Further, as in FIG. 9 (b), the low-magnification static image 402, associating the still image specified on the enlarged video image 403 and or low magnification video image, a moving image obtained by enlarging specified from the still image. この関連付けによって、静止画のみ、あるいは動画のみ、による低倍率画像から拡大像へ、また逆に低倍率像へと画像のリンクを追った再生すなわち、観察の変遷をトレースができる。 This association only still images, or moving only, due to the enlarged image from the low-magnification image and reproduced was followed to the low magnification image in the reverse link of the image i.e., can trace the transition of observation.
【0105】 [0105]
つぎに、リンクの方法の詳細を説明する。 Next, a description will be given more information about how to link.
【0106】 [0106]
図10にリンク情報を記録したデータファイルのデータ構成を示す。 It shows the data structure of the recorded data file the link information in Fig.
【0107】 [0107]
データファイルのデータ構成は図10に示すように、一つのレコードは画像ファイル名と、その画像の低倍率像ファイルの情報、その画像から拡大した動画像または静止画像ファイルの情報、同倍率のリンクしているファイル、すなわち静止画像ファイルに対する動画像、または動画像に対する静止画像の情報からなる。 Data structure of the data file as shown in FIG. 10, and one record image file name, the information of the low magnification image files of the image, moving image or information of the still image file is enlarged from the image, links of the same magnification to files, that is, the information of the still image for a moving image or a moving image, for the still image file.
【0108】 [0108]
それぞれの画像に対する情報は、“ファイル名”、“静止画・動画の区別”、拡大像に対しては“拡大像の位置する矩形領域の座標”からなる。 Information for each image is "file name", "still image and video distinction", for the enlarged picture composed of "position of the rectangular area coordinates of the enlarged image".
【0109】 [0109]
例えば、図9(b)における動画Bであれば、低倍率画像は静止画A、同倍率の画像は静止画C、拡大像として動画Dが記録される。 For example, if the video B in FIG. 9 (b), the low-magnification image is a still image A, image of the same magnification video D are recorded still image C, as an enlarged image. また、動画B上での動画Dの領域を示す矩形は両画像データのステージ座標から計算される。 Also, a rectangle indicating an area of ​​the video D on video B are calculated from the stage coordinates of the two image data.
【0110】 [0110]
画像再生時には、このリンクデータファイルをアクセスすることによって、低倍率像から拡大像への観察の流れを追うことができ(トレース機能)、また遡ってゆく、つまり、逆に辿ってゆくこともできる。 At the time of image reproduction, by accessing this link data file, you can follow the flow of observation to magnified image from a low magnification image (trace function), Yuku and again back, that is, it is also possible proceeds down reversed .
【0111】 [0111]
現在表示中の画像の観察を止め、既に取り込まれ、観察している低倍率画像を表示するには、モニタ装置(表示部)に操作メニューを表示し、この操作メニュー上で低倍率像の表示を指定すれば良い。 Stop viewing of the currently displayed image already taken, to view the low-magnification image being viewed, display the operation menu on the monitor (display unit), the display of the low magnification image on this operation menu it is sufficient to specify a. すると、図6のフローチャートS115,S116のように、モニタ装置上での画像表示が切り替わる。 Then, as in the flowchart S115, S116 of FIG. 6, the image display on the monitor device is switched.
【0112】 [0112]
また、画像再生時のメニュー選択で、静止画のみの表示を選択すると、図9(b)で示したような静止画同士の関連付けを追って、静止画のみの再生を行う。 Also, the menu selection at the time of image reproduction, by selecting the display of the still picture only, chasing the association still image together as illustrated in FIG. 9 (b), the reproducing the still picture only. このときは図10のデータファイルの中で、表示画像の低倍率像を表示するときは低倍率静止画像を検索し、拡大像静止画像を表示するときは同様に拡大静止画像を検索して、表示する。 At this time, in the data file in FIG. 10, when displaying a low magnification image of the displayed image to find a low magnification static image, when displaying an enlarged image still image by searching the enlarged still image similarly, indicate.
【0113】 [0113]
つぎに再生時の軌跡表示機能(トレース機能)について説明する。 It will now be described trajectory display function at the time of reproduction (trace function). 再生時の軌跡表示機能とは低倍率画像上に設定した注目領域をどの位置を辿って観察していったか観察ルートを示す軌跡を表示するものである。 The locus display function during reproduction is for displaying a locus indicating observation root began to observe and follow what position the region of interest set on the low magnification image.
【0114】 [0114]
その表示画面の例を図5に示す。 An example of the display screen shown in FIG. 図5に示すように、低倍率画像上に拡大動画像を観察したときの軌跡を表示する。 As shown in FIG. 5, and displays the trajectory when observing an enlarged video image on the low magnification image.
【0115】 [0115]
低倍率画像上に描かれた軌跡は、以下のようにして求める。 Trace drawn on the low magnification image is obtained as follows.
【0116】 [0116]
まず図10のデータファイルを検索し、表示中の低倍率画像に対する、拡大動画像ファイルを検索する。 First it retrieves data file 10, searches for the low magnification image being displayed, the enlarged moving image file. 次にその動画像ファイルから、各フレーム毎のステージ座標を検索する。 Then from the moving image file, it retrieves the stage coordinates for each frame. このステージ座標と、低倍率画像のステージ座標から、画像上での観察位置の座標を求め、求めた座標をプロットして軌跡を描くようにする。 And the stage coordinates, from the stage coordinates of the low magnification image, obtains the coordinates of the observation position on the image, so that a locus by plotting the coordinates calculated.
【0117】 [0117]
以上、説明したように、第1実施例は、与えられる操作情報対応にステージ移動およびレンズ倍率の可変制御が可能な遠隔操作顕微鏡と、この顕微鏡でとらえた標本像を逐次撮像し、画像情報として出力する撮像手段と、この撮像手段により撮像された画像情報を所定の標準圧縮率で画像圧縮処理して出力すると共に、静止画取り込みの指令を受けるとその時点で得られる1画面分の画像情報については標準圧縮率より低い圧縮率で画像圧縮処理し出力する画像送信側制御手段と、この画像送信側制御手段に対する静止画取り込みの指令および前記遠隔操作顕微鏡に対する操作情報の授受および前記撮像手段により撮像された画像情報を伝送する通信手段と、画像受信側に設けられ、静止画取り込みの指令および少なくとも静止画面上の任意 As described above, the first embodiment includes a variable control capable remote operation of the stage moving in the operation information corresponding given and lens magnification microscope, sequentially imaging a specimen image captured by the microscope, as image information imaging means for outputting, and outputs to the image compression processing image information captured at a predetermined standard compression ratio by the image pickup means, when receiving a command of the still-image taking one screen image information obtained at that time and an image transmitting side control means for image compression processing at a lower compression ratio than the standard compression rate output for by exchange and the imaging means of the operation information with respect to the command and the remote operation microscope of the still image capture for the image transmitting controller communication means for transmitting image information captured, provided on the image receiving side, any on command and at least the still picture of the still-image taking 域の指定と静止画取得の指示を与えるための操作手段と、画像受信側に設けられ、画像を表示するための表示手段と、受信した画像情報を個別に逐次記録する画像情報記憶再生手段と、静止画取得の指示が発生されると前記記憶再生手段の記憶した当該変更前の最新静止画像もしくは受信される最新静止画像を取り込んで復元し、前記表示手段に表示するための静止画表示機能、前記通信手段を介して受信される画像情報を復元し、前記表示手段に画像(動画像)表示するための動画表示機能、前記操作手段により指示される前記静止画表示機能による画像(静止画)上の任意領域対応の位置に撮像画像の中心位置を移動するためのステージ移動用の操作情報と前記静止画表示機能による画像(静止画)上の任意領域が前記動画像の表示領 And operating means for providing an indication of a still image acquisition and the specified range, provided on the image receiving side, and a display means for displaying an image, and the image information recording and reproducing means for separately sequentially records the received image information restores capture the latest still image latest still image or received before the stored the changes of the recording and reproducing means and an instruction of a still image acquisition is generated, the still picture display function to be displayed on said display means restores the image information received via said communication means, said display means moving image display function for displaying image (moving image), an image (still image by the still image display function indicated by the operation means ) any area displays territory of the moving image on any area corresponding image and stage operation information for moving to move the center position of the captured image by the still image display function position (still images) on に当て嵌まる(フィットする)ようなレンズ倍率を与えるための操作情報とを発生して通信手段に与える機能とを有する制御手段とより構成したものであり、静止画上に設定した所望領域の画像を動画像として表示し、静止画像と動画像を観察できるようにすると共に、動画像は静止画像の一部領域の像とするよう顕微鏡を制御することから、静止画像は低拡大率の顕微鏡像となってこれにより、動画像の周辺領域を含めた観察が可能になり、また、動画像は静止画像の一部領域が顕微鏡全視野内に収まるように拡大率を高めて得た像であることから、注目領域の拡大像として観察できるようになるものである。 To applies circle serve to more configuration and control means having a function of providing the communication means to generate operation information for providing (fit) such lens magnification, the image of the desired area set on the still image It was displayed as a moving image, as well as to be able to observe a still image and a moving image, the moving image from controlling the microscope to the image of a portion of the still image region, still image of low magnification micrograph This becomes enables observation including peripheral area of ​​a moving image, also the moving image is the image portion region of the still image obtained by increasing the magnification to fit the microscope full field since, it is made to be observed as an enlarged image of the region of interest.
【0118】 [0118]
しかも、画像送信側制御手段は、撮像手段により撮像された画像情報を所定の標準圧縮率で画像圧縮処理して出力すると共に、静止画取り込みの指令を受けるとその時点で得られる1画面分の画像情報については標準圧縮率より低い圧縮率で画像圧縮処理し出力するから、拡大像である注目領域の画像のさらにまた細部を詳しく観察する必要が生じた時に、静止画取り込みの指令を与えることで、この時点における変更前の拡大像を静止画像とし、この静止画像中の所望の領域を指定することでその領域の拡大像を動画像として観察できるもので、従って、操作性が良く、注目領域とその周辺の状態を関連付けて観察を進めることができるようになるものである。 Moreover, the image transmitting controller is adapted to output the image compression processing image information captured at a predetermined standard compression rate by the imaging means, receiving a command for still image capture when one screen obtained at that time since for image compression processing at a lower compression ratio than the standard compression rate output for image data, when necessary to observe Furthermore detail image detail of an enlarged image region of interest has occurred, to give an instruction for still image capture in, an enlarged image before the change at this point as a still image, in which an enlarged image of the area by specifying a desired area in the still image can be observed as a moving image, therefore, good operability, attention in which it is possible to proceed with the observation in association with the state of the region and its surroundings.
【0119】 [0119]
また、本実施例では、動画像と静止画像とを関連付けて記録することにより、診断の経過を容易にトレースすることができると云った効果が得られるようになり、また、静止画同士を関連付けて記録するようにすれば、静止画だけで診断経過を観察することができるようになる。 Further, in this embodiment, by recording in association with still images and moving images, easily become the effect that said that it is possible to trace obtained the course of diagnosis, also associate a still image together if to record Te, it is possible to observe the diagnostic course only still images. そして、静止画同士を関連付けて記録することにより、診断経過を早くレビューできるようになると云った効果も得られる。 Then, by recording in association with still picture together, effect said that will be able to quickly review the diagnostic course also obtained. 更には、動画像の各フレームに、顕微鏡ステージの座標を記録しておくことにより、静止画像上に動画で観察した軌跡を表示させることが可能となり、これによれば、観察部分の確認が容易となると云う効果が得られる。 Furthermore, each frame of the moving image, by recording the coordinates of the microscope stage, it becomes possible to display a trajectory observed by moving on to the still image, according to this facilitates confirmation of the observation portion effect referred to as a can be obtained.
【0120】 [0120]
また、撮像手段により撮像された画像情報を所定の標準圧縮率で画像圧縮処理して出力すると共に、静止画取り込みの指令を受けるとその時点で得られる1画面分の画像情報については標準圧縮率より低い圧縮率で画像圧縮処理し出力する送信側制御手段と、この送信側制御手段に対する静止画取り込みの指令および前記遠隔操作顕微鏡に対する操作情報の授受および前記撮像手段により撮像された画像情報を伝送する通信手段と、 Further, the outputs the image compression processing image information captured at a predetermined standard compression ratio by the image pickup means, when receiving a command of the still-image taking standard compression rate for one screen image information obtained at that time transmission and transmitting controller for image compression process and output at a lower compression rate, the image information captured by the exchange and the imaging means of the operation information with respect to the command and the remote operation microscope of the still-image taking for the transmitting controller communication means for,
受信側に設けられ、静止画取り込みの指令および少なくとも静止画面上の任意領域の指定と静止画取得の指示を与えるための操作手段と、受信側に設けられ、画像を表示するための表示手段と、受信した画像情報を標本全体像における座標位置対応の画像位置情報および対応する静止画とその静止画中の対応領域情報とともに個別に逐次記録する画像情報記憶再生手段と、静止画取得の指示が発生されると前記記憶再生手段の記憶した当該変更前の最新静止画像もしくは受信される最新静止画像を取り込んで復元し、前記表示手段に表示するための静止画表示機能(第1の画像表示機能)、前記通信手段を介して受信される画像情報を復元し、前記表示手段に画像(動画像)表示するための動画表示機能(第2の画像表示機能)、前記操作手 Provided in the receiving side, an operation means for giving an instruction specifies that the still image acquisition in any area on the command and at least the still picture of the still-image taking, provided in the receiving side, and a display means for displaying an image , an image information recording and reproducing means for separately sequentially recorded together with the still picture and the corresponding region information in the still picture coordinate position corresponding image position information and corresponding in the received image information specimen overall picture, an instruction of a still image acquisition restore capture the latest still image latest still image or received before the stored the changes of the generated to the recording and reproducing means, still image display function for displaying on the display unit (first image display function ), the communication means restores the image information received via said display means moving image display function for displaying image (moving image) (second image display function), the operation manual により指示される静止画表示機能(第1の画像表示機能)による画像(静止画)上の任意領域対応の位置に撮像画像の中心位置を移動するためのステージ移動用の操作情報と前記静止画表示機能(第1の画像表示機能)による画像(静止画)上の任意領域が前記第2の所定画素数に収まる画素構成の動画像となるに要する対物レンズ倍率を与えるための操作情報とを発生して通信手段に与える機能、画像情報記憶再生手段に記憶されている静止画とその静止画中の注目領域の動画とを得て、前記表示手段に対応表示する再生制御機能とを有する制御手段とより構成するようにすると、静止画上に設定した所望領域の画像を動画像として表示し、静止画像と動画像を観察できるようにすると共に、動画像は静止画像の一部領域の像とするよう Still image display function (first image display function) of the image (still picture) operation information for the stage movement and the still picture to move the center position of the captured image in an arbitrary area corresponding position on indicated by and an operation information for providing objective lens magnification needed for the display function moving image (the first image display function) of the image (still image) pixels constituting any region falls into the second predetermined number of pixels on the generated by function of giving to the communication means, to obtain image information storage reproducing unit still image stored in and the video region of interest in the still image, the control and a reproduction control function corresponding displayed on the display means When so as to more structure and means, an image of a desired region set on the still image displayed as a moving image, as well as to be able to observe a still image and a moving image, moving image of a portion of the still image region image to the 微鏡を制御することから、静止画像は低拡大率の顕微鏡像となってこれにより、動画像の周辺領域を含めた観察が可能になり、また、動画像は静止画像の一部領域が顕微鏡全視野内に収まるように拡大率を高めて得た像であることから、注目領域の拡大像として観察できるようになる。 Since controlling the microscope, a still image by this become a microscopic image of a low magnification, it becomes possible to observe including peripheral area of ​​a moving image, also the moving image part area of ​​the still image microscopy since an image obtained by increasing the magnification to fit within the full field of view, it becomes possible to observe as an enlarged image of the region of interest.
【0121】 [0121]
しかも、送信側制御手段は、撮像手段により撮像された画像情報を所定の標準圧縮率で画像圧縮処理して出力すると共に、静止画取り込みの指令を受けるとその時点で得られる1画面分の画像情報については標準圧縮率より低い圧縮率で画像圧縮処理し出力するから、拡大像である注目領域の画像のさらにまた細部を詳しく観察する必要が生じた時に、静止画取り込みの指令を与えることで、この時点における変更前の拡大像を静止画像とし、この静止画像中の所望の領域を指定することでその領域の拡大像を動画像として観察できる。 Moreover, the transmitting control unit is adapted to output the image compression processing image information captured at a predetermined standard compression rate by the imaging means, receiving a command for still image capture when one screen obtained at that time image since for image compression processing at a lower compression ratio than the standard compression ratio output information, when necessary to observe Furthermore detail image detail of an enlarged image region of interest has occurred, by giving an instruction of the still-image taking , an enlarged image before the change at this point and still images can be observed magnified image of the area as a moving image by specifying the desired area in the still image.
【0122】 [0122]
従って、操作性が良く、注目領域とその周辺の状態を関連付けて観察を進めることができるようになる。 Accordingly, good operability, it is possible to proceed with the observation in association attention area and the state of the surroundings.
【0123】 [0123]
そして、更には画像記憶再生手段には遠隔操作時点での静止画とその静止画中の指定領域の動画を記憶させてあることにより、遠隔操作時点での表示手段に表示される静止画と動画を対応付けて再生表示することができる。 By are further stores the video specified area in the still image and the still picture remotely point in the image storing and reproducing unit, a still image and moving image displayed on the display means by remote control point it can be reproduced and displayed in association with. そのため、後日の再観察の際には遠隔操作時点での状況を注目領域とその周辺領域の関係を含めて、わかり易く再現できると共に、また、ベテランが標本観察する状況をそのまま再現できるので、初学者などに対する教育実習効果も得られるようになる。 Therefore, including the situation of the region of interest and the relationship of the peripheral area in the remote control point at the time of a later date of re-observation, clearly it is possible to reproduce, also, because the veteran can be directly reproduce a situation in which the sample observation, the first scholar education training effects on such also be obtained.
【0124】 [0124]
ここで、第1実施例ではNTSC方式等のような標準テレビ方式のカメラを用いて顕微鏡像を撮像し、ディジタル通信回線であるISDN(サービス総合ディジタル網)を利用してセンタ側に伝送して観察する方式であるが、本発明は静止画は注目領域の周辺の状況を観察し、注目領域はその注目領域が全視野となるような倍率に対物レンズの倍率を切り替え制御し、その倍率での顕微鏡像をカメラで撮像して拡大像(動画像)としてセンタ側に送るようにしたものであり、顕微鏡像の画像データをディジタル通信回線を利用してセンタ側に伝送して観察する方式であるために、精細画像を動画として伝送することは現状では難しい面が残されている。 In the first embodiment using the camera of the standard television system such as NTSC system capturing a microscopic image, and transmitted to the center side by using the ISDN (Integrated Services Digital Network) is a digital communication line is a observation system, the present invention is a still image by observing the status of the peripheral region of interest, the region of interest controls switching the magnification of the objective lens in the magnification as the attention area is full-field, with the magnification the microscopic image is obtained by the send to the center side as an enlarged image by imaging (moving images) with the camera, in a manner that observed in transmitted to the center side by using the digital communication line the image data of the microscopic image of for some, there remain difficult aspects at present it to transmit definition image as a moving image. そこで、拡大像(動画像)は画質は落ちるがデータ量を小さくできるように圧縮率を高くして伝送することによりリアルタイムで動画像を伝送し、静止画は1枚だけ送るので多少時間を要しても構わないものとして画質重視を第1とした低圧縮率(もしくは非圧縮)で伝送するようにしたものである。 Therefore, essential some time since the enlarged image (moving image) is the image quality falls but transmit a moving image in real time by transmitting by increasing the compression ratio to allow a smaller amount of data, still image and sends only one the image-quality priority as may be those which is adapted to transmit at first and the low compression ratio (or uncompressed).
【0125】 [0125]
しかし、画像は顕微鏡による標本観察において極めて重要であり、カメラで撮像して得た画像の画質を最大限維持した画像データを伝送したいところである。 However, the image is extremely important in the specimen observation with a microscope, the quality of the image imaged by the camera is where you want to transmit image data obtained by maximally maintained. そこで、データ伝送速度のより高速な通信網である例えば、ISDNのINSネット1500等を使用できるシステムであれば、一層画質のよいテレビカメラを使用し、かつ、画質をできるだけ維持して画像伝送することが可能になる。 Therefore, for example, a faster network data rate, a system that can use the ISDN INS-Net 1500 or the like, using a more good television camera image quality, and an image transmission while maintaining as much as possible the image quality it becomes possible.
【0126】 [0126]
つぎにこのような高速伝送可能な通信網を使用し、高画質画像を伝送してより良い画像の観察を可能にする実施例を第2実施例として説明する。 Then using such high-speed transmission possible communication network, an embodiment that allows of better image observation by transmitting a high-quality image as a second embodiment.
【0127】 [0127]
(第2実施例) (Second Embodiment)
本システムでは通信回線はNTT(日本電信電話株式会社)のサービスするディジタル通信網である例えばINSネット1500を使用し、また、顕微鏡像を撮像する撮像部としてNTSC方式のカメラとHDTV(高品位テレビ)方式のカメラの双方を使用できるようにする。 Communication lines in the system using a digital communication network in which for example INS net 1500 to service the NTT (Nippon Telegraph and Telephone Corporation), The camera and HDTV (high definition television of the NTSC system as an imaging unit that captures microscopic image ) so that both the method of the camera can be used. そして、NTSC方式のカメラによる画像を拡大像(動画像)として用い、HDTV方式のカメラによる像を静止画として使用するようにし、できるだけリアルタイムで高画質像を伝送できるようにする。 Then, using an image by the camera of the NTSC system as an enlarged image (moving image), so as to use the image by the camera of the HDTV system as a still image, to be able to transmit high-quality images as much as possible real time.
【0128】 [0128]
拡大像(動画像)は標本の注目領域を拡大したものであり、より精細に観察するために用いるものであるが、拡大像であるために、画面上の精細度はNTSC方式の画像でも十分である。 Enlarged image (moving image) is an enlarged view of a region of interest of the specimen, but is intended to be used to observe more finely, to an enlarged image, resolution of the screen is also an image of the NTSC system sufficiently it is. 一方、静止画像は拡大像(動画像)より倍率の低い画面を表示するものであるから、NTSC方式の画像では細部が余り良く分からない。 On the other hand, still images since it is intended to display a low magnification than the enlarged image (moving picture) screen, do not know much better detail in the image of the NTSC system. そこで、HDTV用のカメラで撮像した画像を静止画用として利用する構成とする。 Therefore, a configuration using the image captured by the camera for HDTV as a still image.
【0129】 [0129]
ディジタル通信網であるINSネット1500を使用した場合、NTSC方式の画像品位を保てる程度の画像データを40分の1程度に圧縮して得たデータ容量の画像ならば、動画像としてリアルタイム伝送することができる。 When using the INS net 1500 is a digital communication network, if the image data volume obtained by compressing to about one 40-minute image data enough to maintain the image quality of the NTSC system, to real-time transmission as a moving image can. そして、40分の1程度の圧縮ならば、伸長した場合に、元の画質に十分再現できる。 Then, if about one compression 40 minutes, when extended, it can be sufficiently reproduced original image quality.
【0130】 [0130]
一方、HDTV画像もその品位を保てる程度の画像データを基準に、それを20分の1程度に圧縮処理した場合のデータ量を1.6秒程度の時間で伝送することができ、静止画像伝送の待ち時間としては、十分実用的な範囲である。 On the other hand, based on the image data to the extent that even HDTV images maintain their quality, it can be a data volume, when compressed to about one 20 minute transmitted in the order of 1.6 seconds, still image transmission the latency is sufficient practical range. そして、20分の1程度の圧縮ならば、伸長した場合に、元の画質を再現できる。 Then, if about one compression 20 minutes, when extended, it can reproduce the original image quality.
【0131】 [0131]
そこで本実施例では通信網としてINSネット1500を使用し、画像送信側の顕微鏡像を得るための撮像部として、HDTV方式のカメラとNTSC方式のカメラを使用し、HDTV方式の画像を静止画像として使用し、NTSC方式の画像を動画像として使用する構成とする。 In this embodiment using the INS net 1500 as a communication network, as an imaging unit for obtaining a microscopic image of an image transmitting side, using a camera of the camera and the NTSC system of the HDTV system, the image of the HDTV system as a still image use, a configuration that uses an image of the NTSC system as a moving image.
【0132】 [0132]
本実施例のハードウェア構成を、図12にブロック図で示す。 The hardware configuration of this embodiment, shown in block diagram in Figure 12.
【0133】 [0133]
基本構成としては、第1実施例と変りない。 The basic configuration, no change to the first embodiment. 図12において、301は画像送信側の制御部であるPC(パーソナルコンピュータ)であり、302は顕微鏡画像を表示するモニタ装置、303はポインティングデバイスであるマウス、304はキーボードである。 12, 301 is a PC (personal computer), a control unit of the image transmitting side, 302 monitor device for displaying the microscopic image, 303 is a mouse as a pointing device, 304 a keyboard. 305は撮像手段となるHDTV用のカメラ、306は当該HDTV用のカメラ305のコントロールユニット(CCU)、307は撮像手段となるNTSC用のカメラ、308は当該NTSC用のカメラ307のコントロールユニット(CCU)である。 305 camera for HDTV as the imaging means, the control unit of the camera 305 for the HDTV 306 (CCU), 307 is a camera for NTSC as the imaging means, the control unit of the camera 307 for the NTSC 308 (CCU ) it is.
【0134】 [0134]
顕微鏡309はステージおよび対物レンズのレボルバをモータにより駆動移動制御することができ、従って、ステージのX軸、Y軸方向移動制御と対物レンズの切り替え制御を行うことができる。 Microscope 309 can be driven movement controlled by the motor a revolver stage and the objective lens, therefore, it is possible to perform the switching control of the X-axis, Y-axis direction movement control and an objective lens of the stage.
【0135】 [0135]
NTSC用のカメラ307とHDTV用のカメラ305は共に顕微鏡309の標本像を写すように顕微鏡309に接続されている。 Camera 307 and camera 305 for HDTV for NTSC are both connected to the microscope 309 so Projecting specimen image of the microscope 309. 顕微鏡標本像を、2系統の撮像手段であるNTSC用のカメラ307と、HDTV用のカメラ305で得られる画像出力のどちらをPC301に取り込み、画像表示と画像伝送に供するかは、PC301からのカメラ切替命令による。 Microscopic specimen image, the camera 307 for NTSC is an imaging means of two systems takes either of the image output obtained by the camera 305 for HDTV to PC 301, or subjected to image display and image transmission, a camera from PC 301 by the switching instruction. PC301はまた、顕微鏡309ステージおよび対物レンズのレボルバを制御する。 PC301 also controls the revolver of the microscope 309 stage and the objective lens.
【0136】 [0136]
画像受信側の制御部であるPC(パーソナルコンピュータ)311と画像送信側を結んでいる通信回線はNTT(日本電信電話株式会社)のサービスするディジタル通信網であるINSネット1500である。 A control unit of the image receiving side PC communication lines have a valid (personal computer) 311 and the image transmitting side is INS Net 1500 is a digital communication network services NTT (Nippon Telegraph and Telephone Corporation). この回線によって伝送された画像は画像受信側のモニタ装置(=表示部)312に表示される。 Images transmitted by this line is displayed on the monitor device (= display) 312 of the image receiving side. 画像受信側の操作は画像受信側の制御部であるPC311に接続されたマウス312とキーボード313によって行われる。 The image receiving side of the operation performed by the mouse 312 and keyboard 313 connected to the PC311 is the control unit of the image receiving side.
【0137】 [0137]
INSネット1500を通信回線として用いれば、NTSC方式の画像品位を保てる程度の画像データを40分の1程度に圧縮して得たデータ容量の画像ならば、動画像としてリアルタイム伝送することができる。 The use of INS Net 1500 as the communication line, if the image data volume obtained by compressing to about one 40-minute image data enough to maintain the image quality of the NTSC system, it is possible to real-time transmission as a moving image.
【0138】 [0138]
一方、HDTV画像もその品位を保てる程度の画像データを基準に、それを20分の1程度に圧縮処理した場合のデータ量を1.6秒程度の時間で伝送することができ、静止画像伝送の待ち時間としては、十分実用的な範囲である。 On the other hand, based on the image data to the extent that even HDTV images maintain their quality, it can be a data volume, when compressed to about one 20 minute transmitted in the order of 1.6 seconds, still image transmission the latency is sufficient practical range.
【0139】 [0139]
そこで本実施例ではHDTV方式の画像を静止画像として使用し、NTSC方式の画像を動画像として使用する構成とする。 In this embodiment uses the image of the HDTV system as a still image, a configuration that uses an image of the NTSC system as a moving image.
【0140】 [0140]
このステムの処理内容は、実施例1の場合とほとんど変わりはない。 Processing content of the stem is not almost the same as in Example 1. 異なる点は、画像入力を行うカメラの切り替えのみである。 Difference is only switching the camera for image input.
【0141】 [0141]
図13は画像送信側の処理で、第1実施例と異なる部分、すなわち、静止画像取込処理(図8のS309〜S311)に対応する部分のフローチャートである。 Figure 13 is a process of image transmission side, portions different from the first embodiment, i.e., a flowchart of a portion corresponding to the still image taking process (S309~S311 in Figure 8).
【0142】 [0142]
図13の処理を説明すると、まずS401で、画像入力をNTSC方式のカメラから、HDTV(高品位テレビ)のカメラへと切り替える。 To describe the process in FIG. 13, at first S401, the image input from the camera of the NTSC system, switching to camera HDTV (high definition television). この時点でフレームメモリにはNTSCサイズの画像でなく、HDTVの画像が入力される。 The frame memory at the time no image of NTSC size, image HDTV is input.
【0143】 [0143]
S402からS404までは、図8のS309からS311の処理に該当する。 S402 from to S404 corresponds to the processing of S311 from S309 in FIG. 8.
【0144】 [0144]
S402ではHDTVカメラからフレームメモリへの入力を停止する。 In S402 to stop the input from the HDTV camera to frame memory. S403ではこのフリーズしたHDTVによる静止画像を外部記憶装置に書き込む。 In S403 and writes the still image by the frozen HDTV in the external storage device. そしてS404では、静止画像データを画像受信側へ伝送する。 Then, at S404, it transmits the still image data to the image receiving side.
【0145】 [0145]
静止画像の取り込と伝送が終わったら、S405で、カメラの入力をHDTVの側からNTSCの側へ戻す。 When finished and transmission take write the still image, in S405, it returns the input of the camera from the side of the HDTV to the side of NTSC.
【0146】 [0146]
以上の第2実施例は、通信回線としてはNTTのサービスする高速なディジタル通信網である例えばINSネット1500を使用し、また、顕微鏡像を撮像する撮像部としてNTSC方式のカメラとHDTV(高品位テレビ)方式のカメラの双方を使用できるようにすると共に、NTSC方式のカメラによる画像を拡大像(動画像)として用い、HDTV方式のカメラによる像を静止画として使用するようにして、できるだけリアルタイムで高画質像を伝送できるようにしたものであった。 Second embodiment described above, the communication line using the high speed for example INS-Net 1500 is a digital communication network services NTT, also the camera and HDTV (high definition NTSC system as an imaging unit that captures microscopic image together to be able to use both cameras of the television) method, using an image by the camera of the NTSC system as an enlarged image (moving image), so as to use the image by the camera of the HDTV system as a still image, as much as possible in real time It was those to allow delivery of high-quality images.
【0147】 [0147]
しかし、これは伝送する画像データの量が多いので、INSネット1500より伝送速度の遅いINSネット64上では実用的でない。 However, this is because the large amount of image data to be transmitted, not practical on a slow INS Net 64 transmission speed than INS-Net 1500. しかも、INSネット64上で使用できる従来のシステムは静止画を用いる方式であり、静止画像上で、顕微鏡の対物レンズを変えて拡大像を取り込む領域を指定すると、画像受信側は画像が送信されてくるまで、どのような画像が送られてくるか、全くわからなかった。 Moreover, conventional systems can be used on INS Net 64 is a system using a still image, on a still image, specifying an area to capture an enlarged image by changing the microscope objective lens, the image receiving side image is transmitted and to come, what kind of image is sent, did not know at all.
【0148】 [0148]
従って、INSネット64上で動作可能であり、これらの欠点を解消して低倍率像の静止画と高倍率像の動画の同時観察を可能にするシステムの実施例を第3実施例としてつぎに説明する。 Therefore, operable on INS Net 64, then an embodiment of a system that to eliminate these drawbacks enable video simultaneous observation of a still image and a high magnification image of a low magnification image as a third embodiment explain.
【0149】 [0149]
INSネット64上での伝送速度は公衆網に比べれば遥かに速いが、データ量の多い高画質画像データを動画像レベルで伝送するには荷が重い。 Transmission speed on INS Net 64 is much faster compared to the public network, to transmit a large high-quality image data having a data amount in the moving picture level heavy loads. そこで、第2実施例のシステムにおける画像データの画素数を減らして画像のデータ量を少なくし、これを動画用とし、高画質データは静止画で送るようにすることで解決するようにした実施例を第3実施例として説明する。 Therefore, implementation by reducing the number of pixels of the image data in the system of the second embodiment to reduce the amount of image data, which was the use moving, high-quality data were to be solved by the send still images It describes an example as the third embodiment.
【0150】 [0150]
(第3実施例) (Third Embodiment)
図14に第3実施例のハードウェアの構成を示す。 Figure 14 shows the hardware configuration of the third embodiment.
【0151】 [0151]
画像送信側の制御部であるパーソナル・コンピュータ(PC)1301は顕微鏡1306により得られる顕微鏡画像の撮像部であるカメラ1305から入力された画像をモニタ1302に表示する。 Personal computer (PC) 1301 is a control unit of the image transmitting side displays the image input from the camera 1305 is capturing part of the microscopic image obtained by the microscope 1306 to monitor 1302. またパーソナル・コンピュータ1301は画像受信側からの命令により顕微鏡1306を制御し、ステージ移動、対物レンズ切り替え、ピント、絞り調節制御などができる。 The personal computer 1301 controls the microscope 1306 by a command from the image receiving side, stage movement, the objective lens switching, focusing, it is like the diaphragm regulatory control. 画像受信側のパーソナル・コンピュータ1310と画像送信側パーソナル・コンピュータ1301は、画像送信側・画像受信側それぞれの通信部(DSU)1307と1308でNTTのサービスするディジタル網であるINSネット64の回線1309と接続している。 Personal computer 1310 and the image transmitting side personal computer 1301 in the image receiving side, the line 1309 of INS Net 64 is a digital network that services of NTT in the image transmission side and the image receiving side respective communication unit (DSU) 1307 and 1308 It is connected to the.
【0152】 [0152]
画像受信側のモニタ(表示部)1311には画像送信側から送られてきた顕微鏡静止画像又は動画像が表示される。 On the image receiving side of the monitor (display unit) 1311 microscope still image or a moving image transmitted from the image transmitting side is displayed.
【0153】 [0153]
操作は画像送信側ではキーボード1303とマウス1304を、また、画像受信側ではキーボード1312とマウス1313を使い、画像受信側のパーソナル・コンピュータからはこの操作入力に応じて画像取込命令と顕微鏡制御命令が送信側へ送られる。 The keyboard 1303 and mouse 1304 operation in the image transmission side, also use the keyboard 1312 and mouse 1313 in the image receiving side, the image capture command and the microscope control instructions in response to the operation input from the image receiving side personal computer There is sent to the sender.
【0154】 [0154]
INSネット64の伝送速度では、診断に耐えるような高画質の動画像をリアルタイムで伝送することはできない。 The transmission rate of the INS net 64, it is impossible to transmit moving pictures of high quality to withstand the diagnosis in real time. そこで、INSネット64上で使用するシステムとしては、従来より静止画を用いる顕微鏡遠隔観察システムが実用化されている。 Therefore, the system used on the INS Net 64, the microscope remote observation system using a still image have conventionally been put to practical use. 静止画伝送のシステムでは、静止画像上で、顕微鏡の対物レンズを変えて拡大像を取り込む領域を指定すると、画像受信側は画像が送信されてくるまで、どのような画像が送られてくるか、全くわからなかった。 Or a still picture transmission system, on a still image, specifying an area to capture an enlarged image by changing the microscope objective lens, the image receiving side until the image is transmitted, any image is sent , I did not know at all.
【0155】 [0155]
しかし低解像度の画像であれば、INSネット64の回線でも動画像の伝送が可能であり、高画質の静止画を伝送する前に、動画像で観察部分の確認を画像受信側でできれば、送られてきた画像を見て、ピント等の問題があって取り直しになるようなことはない。 But if the low-resolution image, it is possible to transmit a moving image in line INS Net 64, before transmitting the high-quality still picture, if the confirmation of the observation portion in a moving image in the image receiving side, transmission viewing an image that has been no problem is such that the retaking there such focus.
【0156】 [0156]
本実施例で拡大静止画像を取り込むときの手順を以下に示す。 The procedure for taking the enlarged still image in this example are shown below.
【0157】 [0157]
図15は画像受信側の処理である。 Figure 15 is a process of the image receiving side.
【0158】 [0158]
S501で、拡大静止画像を取り込むときの対物レンズの倍率を指定する。 In S501, the specifying the magnification of the objective lens when capturing an enlarged still image. これは、画像受信側の制御部にキーボードやマウスにより操作入力を与える事で行う。 This is done by giving the operation input by the keyboard or the mouse to the control section of the image receiving side. S502ではモニタに表示されている画像上に、取込領域を示す矩形マーカを表示する。 On the image displayed on S502 the monitor displays a rectangular marker indicating the receiving area.
【0159】 [0159]
このときの矩形マーカの大きさは、S501で指定した画像の倍率と、表示画像の倍率との比によって決められる。 The size of the rectangular marker at this time, and the magnification of the image specified in S501, is determined by the ratio of the magnification of the displayed image. 例えば対物レンズ10倍で取り込んだ静止画像上で40倍の取り込み指定をすれば、 For example, if a 40-fold uptake designated on the still image captured by the 10 × objective lens,
取り込み指定倍率/静止画像倍率=1/4 Uptake specified magnification / still image magnification = 1/4
となり、画像の4分の1のサイズの矩形マーカが表示されることになる。 Next, so that the rectangular marker one quarter the size of the image is displayed. この矩形マーカの位置は画像受信側でマウスによって動かすことができる。 Position of the rectangular marker can be moved by the mouse in the image receiving side. この矩形マーカが次に取り込む画像の位置を示す取込領域枠となる。 A receiving area frame indicating a position of the image the rectangular marker next capture.
【0160】 [0160]
S503では動画像の受信を開始し、S504で画像送信側から伝送されてくる動画像データを受信する。 S503 starts receiving moving image in, receives the moving image data transmitted from the image transmission side in S504. この動画像は、この第3の実施例のシステムでは静止画像に比べて、サイズ(構成画素数)が半分以下となるように設定してある。 The moving image, in the system of this third embodiment compared to the still image is set so that the size (number of constituent pixels) is equal to or less than half. 例えば、縦横の画素数がそれぞれ半分に設定してあったとすれば、そのデータ量は非圧縮状態にある1フレームの画像データのデータ量に対して、 For example, if the number of pixels vertically and horizontally had been set to half respectively, the amount of data for the data volume of the image data of one frame in a non-compressed state,
0.5×0.5=0.25 0.5 × 0.5 = 0.25
となり、1/4のデータ量である。 Next, a data amount of 1/4. また、画像送信側での動画像データの圧縮率は高く設定する。 The compression ratio of the moving image data in the image transmission side sets high. このように、画像送信側ではその動画像データは圧縮率を高くして送信するのに加え、画像サイズを小さくしているので、1フレーム当たりのデータ量は動画伝送が可能となる量に抑えることができる。 Thus, in the image transmission side in addition to transmit the moving image data by increasing the compression ratio, since the smaller the image size, the amount of data per frame is reduced to an amount that enables the moving image transmission be able to.
【0161】 [0161]
S505では、マウスおよびキーボードからの入力を取得する。 In S505, to obtain the mouse or keyboard input. これらの、画像受信側システムの操作者による操作は、顕微鏡制御または画像取込命令であり、それぞれ画像送信側にその命令が伝送される。 These, operation by the operator of the image receiving system is a microscope control or image capture instruction, the instruction is transmitted to each image transmitting side.
【0162】 [0162]
画像受信側の制御部では、まずS506で、ステージ移動命令か否かの判断をする。 In the control unit of the image receiving side, first S506, the stage movement instruction is determined whether. ステージ移動はマウスを動かすことによって、行われる。 Stage movement by moving the mouse, is performed. マウスが動かされている場合には画像受信側の制御部では、S507でマウスの移動にあわせ、静止画像上の矩形マーカの表示を移動させる。 When the mouse is moved in the control unit of the image receiving side, according to the movement of the mouse in S507, it moves the display of the rectangular markers on the still image. そしてS508では、矩形マーカの移動した部分の画像が伝送されるように、ステージ移動命令を画像送信側に送る。 Then, in S508, so that the image of the moved portion of the rectangular marker is transmitted, and sends the stage movement command to the image transmitting side.
【0163】 [0163]
S509では画像受信側の制御部は顕微鏡操作の命令の判断をする。 Control unit of the image receiving side in S509 to the judgment of the instructions of the microscope operation. 顕微鏡操作とはピント合わせ、絞りの調節等である。 Focusing the microscope operation is the regulation or the like of the diaphragm. これらの命令が入力された場合には画像受信側の制御部は、S510でその命令を画像送信側に伝送する。 The control unit of the image receiving side when these instructions is inputted, transmits the command to the image transmission side in S510.
【0164】 [0164]
S511は静止画像を取り込むか否かの判断である。 S511 is a judgment of whether capture still images. ここで表示されている動画像を見て、取り込みを行わないと判断すれば、S504に戻り、動画像の受信を続ける。 Look at the moving image displayed here, if it is determined not to perform the capture, return to S504, continuing the reception of the moving image.
【0165】 [0165]
静止画像の取り込を実行するならば、まずS512で動画像の受信を終了させる。 If you are running Captures still images, and terminates the reception of the moving image first in S512. 続いてS513で、取込時のパラメータを入力する。 Subsequently, in S513, to enter the parameters at the time of acquisition. パラメータとしては画像データのサイズ(構成画素数)および圧縮率がある。 The parameters have the size (the number of constituent pixels) and the compression ratio of the image data.
【0166】 [0166]
S514で、画像受信側の制御部は、取り込みパラメータとともに、静止画像取込命令を画像送信側に送る。 In S514, the control unit of the image receiving side, together with the acquisition parameters, and sends the still image capture command to the image transmitting side.
【0167】 [0167]
S515で画像受信側の制御部は、画像が送られてくるまで、受信待ちに入り、S516で静止画像を受信し、ハードディスク等の外部記録装置に記録・保存する。 Control unit of the image receiving side at S515 until the image is sent, enters the waiting for receiving a still image in S516, is recorded and stored in the external recording device such as a hard disk. そして、S517でその画像をモニタ装置に表示して、画像取込処理は終了する。 Then, it displays the image on the monitor device in S517, the image capturing process ends.
【0168】 [0168]
図16は画像送信側の処理である。 Figure 16 is a processing of the image transmitting side.
【0169】 [0169]
画像送信側の制御部はS601で画像受信側からの静止画取り込み命令を受けると静止画取り込みと伝送の実施をする。 Control unit of the image transmitting side implementation of the transmission and receiving the still-image taking instruction from the image receiving side and the still-image taking at S601. この静止画取り込み命令には対物レンズの倍率がパラメータとして含まれており、指示にあわせて対物レンズの倍率を変更する。 This still-image taking instruction included magnification of the objective lens as a parameter, to change the magnification of the objective lens in accordance with the instructions. 画像送信側の制御部はS602で、受信側端末のモニタと同様に、静止画像上に取り込み領域の矩形マーカを表示する。 Control unit of the image transmission side in S602, similarly to the monitor of the receiving terminal to display a rectangular marker uptake areas on the still image.
【0170】 [0170]
そして、画像送信側の制御部はS603で、画像受信側への動画送信を開始する。 The control unit of the image transmission side in S603, starts the video transmission to the image receiving side. このときの画像サイズは静止画取り込み時よりも小さい。 Image size at this time is smaller than that at the time of still image capture. 通常、NTSC方式のカメラからの得られる画像データの画素構成は、例えば、縦横640×480ドットであるが、このときは半分の320×240ドットで入力する。 Usually, the pixel structure of image data obtained from the camera of the NTSC system, for example, is a vertical and horizontal 640 × 480 dots, this time entering at half the 320 × 240 dots.
【0171】 [0171]
S604で動画像のデータを送信し、S605で画像送信側からの命令を待つ。 Sends data of the moving image at S604, it waits for a command from the image transmission side in S605. 画像送信側からの命令が、ステージの移動であれば、S606の分岐処理で、S607へと移る。 Command from the image transmission side, if the movement of the stage, the branch processing S606, moves to S607. S607では送信側モニタに表示されている静止画像上の動画像表示領域を示す矩形マーカの位置を変更する。 S607 is displayed in the sender monitor changes the position of the rectangular marker indicating the moving image display area on the still image has. そしてS608で顕微鏡ステージを指定された座標に移動させる。 And S608 in moving to the coordinates to the specified microscope stage.
【0172】 [0172]
ステップS606での判定結果がNOであった場合、すなわち、命令がステージの移動でなかった場合にはS609でその他の顕微鏡操作命令か否かを判断する。 If the determination in step S606 was NO, that determines whether other microscopic manipulation instruction S609 if the instruction is not a movement of the stage. その結果、YESであれば(その他の顕微鏡操作命令であれば)、S610で命令に合わせ顕微鏡を制御する。 As a result, (if other microscopic manipulation instructions) a long if YES, the control microscope fit instruction S610. このときの命令はピントの調節、絞り、コンデンサの調節などである。 Adjusting instruction of focus this time, squeeze, or the like adjusted for the capacitor.
【0173】 [0173]
S611では静止画像を取り込むか否かの判断をする。 In S611 the determination whether capturing still images. センタ側(画像受信側)から取り込み命令が出ていなければ、S604に戻って、動画像の送信を続ける。 If there is no such incorporation instruction from the center side (the image receiving side), the flow returns to S604, continuing the transmission of moving images.
【0174】 [0174]
取り込み命令が出たときは、画像送信側の制御部はS612で動画像送信を終了させる。 When the uptake instruction comes, the control section of the image transmitting side terminates the moving image transmitted in S612.
【0175】 [0175]
次に画像送信側の制御部はS613で、取り込みパラメータとともに、取り込み実行命令を再度受ける。 Then the control unit of the image transmission side in S613, with acquisition parameters, undergo uptake execution command again. S614でその取り込みパラメータ、すなわち画像圧縮率、画像サイズを設定する。 Its acquisition parameters in S614, that is, an image compression rate and sets the image size.
【0176】 [0176]
S615で設定したパラメータに従って静止画像を取り込み、S616で静止画像をモニタ装置(=表示部)に表示する。 S615 the still image capture according to the parameters set in, the still image is displayed on the monitor (= display) in S616. そしてS617で静止画像を画像受信側の制御部(PC)へと伝送する。 And transmitting the still image control section of the image receiving side to (PC) in S617.
【0177】 [0177]
このように、第3実施例は第2実施例のシステムにおける画像データの画素数を減らして画像のデータ量を少なくし、これを動画用とし、高画質データは静止画で送るようにすることで伝送速度の問題を解決するようにし、これによって、INSネット64上でも動作可能であり、低倍率像の静止画と高倍率像の動画の同時観察を可能にするという効果が得られる。 Thus, the third embodiment reduces the number of pixels of the image data to reduce the data amount of the image in the system of the second embodiment, which was a a video quality data to send still images in so as to resolve the transmission rate problem, thereby, it is also operable on INS net 64, the effect of enabling video simultaneous observation of a still image and a high magnification image of a low magnification image is obtained.
【0178】 [0178]
本発明を纏めると、つぎの通りである。 To summarize the present invention is as follows.
【0179】 [0179]
[1]. [1]. 少なくともステージを自動制御することのできる顕微鏡と、顕微鏡標本像を撮像するための撮像手段と、撮像された画像情報を受け、画像を表示、記録、伝送し、また顕微鏡を制御するための制御手段を送信側と受信側が有し、動画像及び静止画像を表示する表示手段を少なくとも受信側が有し、動画像情報および静止画像情報を送信側の制御手段から受信側の制御手段に伝送する通信手段によって接続された、顕微鏡遠隔観察記録システムにおいて、表示された顕微鏡標本の全体像または低倍率像の静止画像上で、拡大像の表示範囲を示す領域を、マウス等の操作で受信側の操作者が動かすことによって、画像上に示された表示領域の位置へ顕微鏡のステージを動かすことができ、その時の動画像を受信側に表示させることができ、表示中 A microscope capable of automatically controlling at least stage receives an imaging means for imaging the microscopic specimen image, the image information captured, displaying an image, recording, transmission, or controlling means for controlling the microscope the receiver includes a transmitting side, at least the receiving side has a display means for displaying a moving image and still images, communication means for transmitting to the control means on the receiving side from the control means of the transmission side video information and still picture information connected by a microscope in the telemonitoring recording system, on the still image of the entire image or a low-magnification image of a microscope specimen displayed, an area indicating the display range of the enlarged image, the receiving side of the operator by operating the mouse or the like by moves, the position of the display region shown in the image can be moved microscope stage, it is possible to display a moving image at that time to the receiving Showing 動画像、表示動画像と同じ顕微鏡像の静止画像を、受信側で記録・保存することができ、すでに記録された低倍率静止画像または動画像上で表示領域を指定した、拡大像の静止画像または動画像を記録するときに、顕微鏡標本の観察部位の座標によって、低倍率画像と拡大像とを関連付け、再生時にこの関連付けを追って、静止画像と動画像、また静止画像同士、動画像同士による画像再生を可能としたシステムとした。 Moving image, a still image of the same microscope image and the display moving image, can be recorded and stored on the receiving side to specify the display area on the already recorded low-magnification static image or a moving image, the enlarged image still image or when recording a moving image, the coordinates of the observed region of the microscope specimen, associating the enlarged image with a low magnification image, chasing the association at the time of playback, still images and moving images, and still images to each other, by moving images to each other It was a system that made it possible to image reproduction.
【0180】 [0180]
画像送信側・画像受信側の制御手段としては、パーソナルコンピュータ、ワークステーション等が用いられる。 The control means of the image transmitting side and the image receiving side, a personal computer, such as a work station is used. 表示手段としてはTVモニタ、あるいはCRTディスプレイが用いられる。 TV monitor as a display device, or CRT display is used.
【0181】 [0181]
表示手段は少なくとも遠隔操作側である画像受信側システムには必要不可欠である。 Display means is essential for the image receiving system is at least a remote operation side. 画像送信側システムの操作者が画像受信側システム同様に顕微鏡像を見る必要がある場合は、画像送信側システムにも表示手段が必要となる。 If the operator of the image sending system need to see micrograph similar image receiving system, it is required the display means in the image transmission side system.
【0182】 [0182]
撮像手段としては、TVカメラが用いられる。 The imaging unit, TV camera is used.
【0183】 [0183]
通信手段としてはISDN(INSネット64、INSネット1500、B‐ISDN)、専用回線、光ファイバー、衛星通信などが用いられる。 ISDN as the communication means (INS Net 64, INS Net 1500, B-ISDN), leased line, fiber optic, satellite communication is used.
【0184】 [0184]
そして、このような構成において、画像送信側の制御手段と画像受信側の制御手段は通信手段および通信回線で接続され、画像送信側に設けられる顕微鏡は画像送信側の制御手段によって、標本の乗るステージのXY位置を駆動移動制御される。 In such a configuration, the control means of the control means and the image receiving side of the image transmitting side is connected with the communication means and the communication line, a microscope provided in the image transmission side by the control means of the image transmitting side, riding the specimen driven movement control the XY position of the stage. 顕微鏡標本の画像は顕微鏡に取り付けられた撮像手段によって、画像送信側の制御手段に入力される。 Images of a microscope specimen by an imaging means mounted on a microscope, is input to the control means of the image transmitting side. 入力された画像データは画像送信側の通信手段および画像受信側の通信手段を介して画像受信側の制御手段に伝送され、画像受信側の表示手段に表示される。 Input image data is transmitted to the control unit of the image receiving side via the communication means of the communication means and the image receiving side of the image transmitting side, is displayed on the display unit of the image receiving side.
【0185】 [0185]
画像受信側で観察したい位置へ顕微鏡を移動させることが可能であり、そのための命令が、画像受信側の制御手段から送信側制御手段へと伝送される。 It is possible to move the microscope to a position to be observed in the image receiving side, the instruction for is transmitted to the transmitting controller from the control means of the image receiving side. その命令に従って、画像送信側の制御手段が顕微鏡を制御する。 In accordance with the command, the control means of the image transmitting side to control the microscope.
【0186】 [0186]
そのため、効果として低倍率画像と、それを拡大した高倍率画像を同時に表示することによって、両者の比較が簡単に行えるようになり、観察が、より行い易くなる。 Therefore, the low magnification image as an effect by displaying a high-magnification image enlarged it simultaneously become both comparisons can be performed easily, observation becomes more facilitated. また、動画像および静止画同士の観察上の繋がりが記録される。 Further, the connection on the viewing between a moving image and a still image is recorded. そのため、観察の流れが再現できるようになる。 Therefore, observation of the flow will be able to reproduce.
【0187】 [0187]
遠隔操作による顕微鏡の顕微鏡画像を撮像手段により撮像して動画像として送り、この動画像をモニタしながら注目領域を観察するシステムにおいては、目的の画像が表示できたとしても、それが標本全体像上でのどこの像であるかは全体像上の現在の観察位置のマーク表示を行うことで従来システムにおいても分かるようにはなっていたが、高倍率画像の周辺の状態がどのようになっているかを把握できるような画像表示ができない。 The microscope microscopic images by remote control sends a moving image captured by the imaging means, in a system for observing a region of interest while monitoring the moving image, even an image of interest could be displayed, it entire specimen picture Although either anywhere within the image of the above had been enabled to be seen also in the conventional systems by performing the mark display of the current viewing position of the whole picture, the state of the periphery of the high magnification image becomes how whether to have the image display can not be such as can be grasped. そのため、より高倍率の対物レンズでの観察中は、標本中の座標位置のみはわかるが、観察部位の周辺の画像を見ることはできなかった。 Therefore, more in the observation at a high magnification objective lens is only seen coordinate positions in the sample, it was not possible to see the image of the periphery of the observation site. またその観察経過を記録し、低倍率から高倍率へと倍率をあげていく観察の流れを後から追うことはできなかった。 Also record the observation progress, it could not be followed later flow of observations is increased the magnification from a low magnification to a high magnification.
【0188】 [0188]
そこで、このシステムのように拡大倍率の高い顕微鏡像を動画として与え、これより拡大倍率の低い像を静止画として与えてそれぞれ表示し、静止画と動画を対比して観察できるようにすると共に、この低倍率画像による静止画上で、領域を指定してその指定領域の画像を顕微鏡でとらえ、高倍率画像として動画表示するようにしたことにより、注目領域とその周辺の状態をそれぞれ観察することができるようになる。 Therefore, the given as videos, high magnification micrograph as in this system, a low image of magnification than that displays each given as a still image, which can be observed by comparing still images and moving images, on the still image by the low magnification image, it captures the image of the specified area in a microscope with a specified region, by which is adapted to moving image display as a high-magnification image, to observe the region of interest and the state around the respective so that it is. また、静止画像と動画像とを関連付けて記憶することにより、観察経過を記録し、低倍率から高倍率へと倍率をあげていく観察の流れを後から追うことができるようになる。 Further, by storing in association with the still images and moving images, the observation progress was recorded, it is possible to follow later flow of observations is increased the magnification from a low magnification to a high magnification.
【0189】 [0189]
[2]. [2]. 上記[1]において、表示され記録される画像の解像度、画素数が静止画像と、動画像とで異なること、または静止画像同士、動画像同士でも異なることを可能とするシステムとした。 In the above-mentioned [1], and a system that allows the resolution of the displayed image to be recorded, and the number of pixels still image, it differs in the moving image or still image with each other, the different in the moving picture with each other.
【0190】 [0190]
具体的には、顕微鏡像を撮像する撮像装置として、画素数の異なる2種類以上のカメラを用い、制御手段には顕微鏡画像を得るカメラの選択切り替えを行える機能を持たせてある。 Specifically, as an imaging device for imaging the microscope image, using two or more different cameras number of pixels, the control means are provided with a function that allows the selection switch of the camera to obtain microscopic images.
【0191】 [0191]
または、画像送信側の制御手段に、撮像手段から入力された画像データの画素数を変更して記録し、伝送する機能を持たせる。 Or, the control means of the image transmitting side, recorded by changing the number of pixels of the image data input from the imaging means, and have the ability to transmit.
【0192】 [0192]
これによれば、画素数の異なる2種類以上のカメラを用いた場合、[1]の作用に加え、更にはつぎのような作用がある。 According to this, when using two or more different cameras number of pixels, in addition to the function of the [1], further has the effect as follows. すなわち、画像の大きさを変えるために、制御手段には顕微鏡画像を入力するカメラの切り替えを行う機能を持たせてある。 That is, in order to vary the size of the image, the control means are provided with a function to switch the camera to enter the microscopic image. そして、動画像を伝送する場合は画素数の少ない方のカメラの画像を取り込み、これを送出し、静止画像を伝送する場合は画素数の多い方のカメラの画像を取り込み、これを送出する。 Then, when transmitting the moving image capture camera images with the smaller number of pixels, which was sent, when transmitting a still image capture camera images with the larger number of pixels, and sends this.
【0193】 [0193]
画像送信側の制御手段において画素数を変更させる場合には、入力時に制御手段がその構成画素サイズを変更処理する。 When changing the number of pixels in the control means of the image transmitting side, the control means changes processing the configuration pixel size at the input. そして、動画像を伝送する場合は画素数を少なくして送出し、静止画像を伝送する場合は画素数を多くして送出する。 Then, when transmitting the moving image is transmitted with less number of pixels, when transmitting a still image is sent to the number of pixels.
【0194】 [0194]
従来のシステムでは画像の取込時に、画像の解像度は常に一定であったため、転送速度を速くしたい場合や、画質を高めたい場合などでは画像の圧縮率を変更することによってのみ可能であった。 When capturing images in the conventional system, for resolution of the image was always constant, and if you want to increase the transfer rate, in a case where desired to increase the image quality was possible only by changing the compression ratio of the image.
【0195】 [0195]
しかし、このシステムによれば、動画像のみの観察では得られない、高画質の顕微鏡画像を、静止画によってみることができるようになるという効果が得られる。 However, according to this system, not available in the moving image only observations, the microscopic images of high quality, an effect that it is possible to view the still image can be obtained. そして、観察する画像に対して、観察過程における画像の重要度に応じて、解像度を変更することを可能となる。 Then, the image to be observed, according to the importance of the image in the observation process, it becomes possible to change the resolution.
【0196】 [0196]
[3]. [3]. 更には上記[1]および[2]において、通信手段の伝送速度が、診断可能な画質の動画像伝送に十分な速度を持たない場合に、静止画像を得るための補助手段として、静止画像取り込み前にその部分の動画像を伝送して、静止画像の確認をできるようにするシステムとした。 Further in the above [1] and [2], when the transmission speed of the communication unit does not have sufficient velocity to the moving picture transmission diagnosable image quality, as an auxiliary means for obtaining a still image, the still image capture and transmitting a moving image of the part before, and a system that allows for confirmation of a still image.
【0197】 [0197]
静止画タイプの顕微鏡遠隔観察システムでは、低倍率の静止画像上で、高倍率の画像の取り込み位置を指定するが、このとき観察側では、画像取込が終了し、伝送されてくるまではどのような画像が送られてくるかわからないという欠点があり、これを解決する手段はいままではなかった。 Microscopic telemonitoring system of the still image type, on a low magnification static image, but specifies the capture position of the high magnification image, in the observation-side this time, the image capture is finished, how until it transmitted thereto an image is there is a drawback that do not know what is sent, means to solve this problem was not until now.
【0198】 [0198]
一方、本発明システムでは、標本全体像または低倍率画像はすでに取り込まれた静止画像であり、拡大像はこれから静止画を取り込む位置の動画像としてある。 On the other hand, in the present invention system, the entire image or a low-magnification image specimens already a captured still image, the enlarged image is a moving image position to capture future still images. そのため、静止画像を受けてから取り込む静止画像の位置、ピント、照明(コンデンサ、カメラの露出等)に問題があると知ってもそれ以後にこれらを調整しなければならず、施行錯誤となって操作性が悪い。 Therefore, the position of the still image capturing after receiving a still image, focus, illumination even knowing that the (condenser, camera exposure, etc.) is a problem not need to adjust them to it after, becomes enforcement mistake operability is bad. そこで事前に受信側で新たに取り込む静止画像の位置、ピント、照明などを決定できるようにする必要がある。 Therefore the position of the newly captures still images at the receiving side in advance, focus, it is necessary to illuminate the like can be determined.
【0199】 [0199]
本システムでは、静止画像取り込み前にその部分の動画像を伝送して、静止画像の確認をできるようにしたことにより、低倍率の静止画像の画像がどのような状態になるかを事前に知ることができるようになる。 In this system, by transmitting the moving image of the part before the still image capture, by which to be able to confirm the still image, know images of low magnification static image will look like state in advance it becomes possible. 静止画像は1枚送れば継続して利用できる画像であるから、度動画像より高画質の像となるように圧縮率等を低くしたり、画素数を多く保つ等、画像データの容量を大きくするのが普通であるから、勢い画像伝送量も多くなり、伝送時間がかかる。 Since the still image is an image that can be used continuously if send one, or to lower the compression rate or the like so that the quality of the image from the degree moving images, etc. keep the number of pixels, the amount of image data increases since it is common to momentum image transmission amount increases, consuming the transmission time. そのため、静止画像の状態が事前に確認できれば、顕微鏡のピント調整など、必要な調整を予め施してから伝送することができるようになり、無駄が抑制される。 Therefore, if confirmation state of the still image in advance, such as focus adjustment of the microscope, can now be transmitted from the pre performs necessary adjustments, waste is prevented.
【0200】 [0200]
[4]. [4]. また、[2]において、静止画像を得るための撮像手段としてHDTV方式のカメラを用い、動画像を得るための撮像手段としてNTSC方式のカメラを用いたシステムとした。 Also, in [2], using the HDTV system of a camera as an imaging means for obtaining a still image, and a system using a camera of the NTSC system as an imaging means for obtaining a moving image.
【0201】 [0201]
従来のシステムでは画像の取込時に、画像の解像度は常に一定であったため、転送速度を速くしたい場合や、画質を高めたい場合などでは画像の圧縮率を変更することによってのみ可能であった。 When capturing images in the conventional system, for resolution of the image was always constant, and if you want to increase the transfer rate, in a case where desired to increase the image quality was possible only by changing the compression ratio of the image.
【0202】 [0202]
しかしながら、[4]の構成とすることにより、[1]の作用に加え、制御手段は、画像を入力する撮像手段をNTSC方式のカメラとHDTV方式のカメラのどちらかに選択することができる。 However, with the configuration of [4], in addition to the function of the [1], the control means may select the imaging means for inputting an image to either the camera of the camera and HDTV system of the NTSC system.
【0203】 [0203]
そのため、効果としては静止画像、動画像それぞれの同一容量の通信手段を使ったときの、最大画素数の差をカメラを変えることによって埋めることができる。 Therefore, the effect can be filled by changing the still image, when using the communication means of the moving image respectively of the same capacity, the camera difference between the maximum pixel number. また、観察する画像に対して、観察過程における画像の重要度に応じて、解像度を変更することを可能とし、また、通信回線の伝送速度によって、高解像度では動画像の伝送が不可能な場合に、静止画を高解像度、動画を低解像度に切り替えることを可能とする。 Further, the image to be observed, according to the importance of the image in the observation process, make it possible to change the resolution, also by the transmission rate of the communication line, when in the high resolution which can not be transmitted in the video image to make it possible to switch the still image high resolution video to low resolution.
【0204】 [0204]
[5]. [5]. [2]において、静止画像を得るための撮像手段と動画像を得るための撮像手段として同じ解像度カメラを用いながら、制御手段へと画像を取り込むときに画像のサイズを変更することができるシステムとした。 In [2], while the same resolution camera used as an imaging means for obtaining an image pickup means and moving images for obtaining a still image, and a system which can change the size of an image when capturing an image to the control unit did.
【0205】 [0205]
従来のシステムでは画像の取込時に、画像の解像度は常に一定であったため、転送速度を速くしたい場合や、画質を高めたい場合などでは画像の圧縮率を変更することによってのみ可能であった。 When capturing images in the conventional system, for resolution of the image was always constant, and if you want to increase the transfer rate, in a case where desired to increase the image quality was possible only by changing the compression ratio of the image. しかし、これではデータ量が多すぎたり、画質が劣化し過ぎたりして問題である。 However, this is or the amount of data is too large, and or image quality is too degraded problem.
【0206】 [0206]
そこで、観察する画像に対して、観察過程における画像の重要度に応じて、解像度を変更することを可能とする必要があり、また、通信回線の伝送速度によって、高解像度では動画像の伝送が不可能な場合に、静止画を高解像度、動画を低解像度に切り替えることを可能とする必要が生じる。 Therefore, for the image to be observed, according to the importance of the image in the observation process, it is necessary to be able to change the resolution, also by the transmission speed of the communication line, the transmission of moving images with high resolution If not possible, a still image high resolution, need to be able to switch a video to low resolution caused.
【0207】 [0207]
この構成によれば、画像取込時に、撮像手段から制御手段内のフレームメモリに入力される画像のサイズを、カメラ本来の画素数と別の値にすることにより、その効果として、[4]と同等の効果を、カメラを1台しか使用せずに実現することができる。 According to this configuration, during image capture, the size of the image input to the frame memory in the control unit from the imaging device, by the number of original pixels camera and another value, as its effect, [4] same effect as the, the camera can be realized without using only one. そのため、HDTVやNTSCの画素数にとらわれずに画像のサイズを自由に決定できるようになる。 Therefore, it becomes possible to freely determine the size of the image regardless of the number of pixels HDTV and NTSC.
【0208】 [0208]
[6]. [6]. [3]における通信手段をINSネット64とし、撮像手段としてNTSC方式のカメラを用いたシステムとした。 Communication means and INS Net 64 in [3], and a system using a camera of the NTSC system as an imaging means.
【0209】 [0209]
この構成によれば、画像送信側の制御手段と画像受信側の制御手段とを、INSネット64で結び画像データを送信側から受信側へと伝送するので、その効果としては、従来の基本的な静止画像顕微鏡遠隔システムと、ほぼ同じ構成で、動画を利用することができるようなるものである。 According to this configuration, and control means of the control means and the image receiving side of the image transmitting side, since the transmission of signed image data from the transmitting side INS Net 64 to the receiving side, as its effect, the conventional basic and Do still image microscope remote system, in which almost the same configuration, so that can utilize video.
【0210】 [0210]
[7]. [7]. [3]において、通信手段がINSネット1500であり、撮像手段として[4]または[5]と同構成のものを用いたシステムとした。 In [3], the communication means it is a INS-Net 1500, and a system using the [4] or [5] with that of the same configuration as the imaging means.
【0211】 [0211]
画像送信側の制御手段と画像受信側の制御手段とを、INSネット1500で結び、画像データを画像送信側から画像受信側へと伝送する構成としたから、その効果としてはINSネット1500を用いることによって、[6]の構成と比較して、高精細の静止画像を無理なく送ることができるようになり、また、圧縮率の低い、従って、画質の良い動画像を伝送して動画像表示することができるようになる。 And control means of the control means and the image receiving side of the image transmitting side, connected by INS Net 1500, since the image data from the image transmitting side configured to transmit to the image receiving side, using the INS net 1500 as the effect by, in comparison with the configuration of [6], now still image with high resolution can be sent without difficulty, also a low compression ratio, therefore, the moving image display by transmitting a good moving image with the image quality so that it is able to.
【0212】 [0212]
[8]. [8]. [1]において観察後に、記録された画像を再生するときに、低倍率画像に拡大動画像観察中のステージ移動の軌跡を表示させることができるシステムとした。 After observed in [1], when reproducing the recorded image, and a system capable of displaying the trajectory of the stage movement in the enlarged video image observation in the low magnification image.
【0213】 [0213]
これによれば、低倍率画像上で、拡大像による観察を行った領域を示すことにより、実際に観察した領域とそうでない領域がはっきりとわかるようになる。 According to this, on a low magnification image, by indicating a region of observation by expanding image actually observed areas otherwise region becomes evident. また、観察後の画像再生時に、低倍率画像上の領域を拡大画像で観察した経緯がわかるようになる。 Further, at the time of image playback after viewing, so it is clear the observed background areas on the low magnification image in the enlarged image.
【0214】 [0214]
なお、本発明は上述した実施例に限定されるものではなく、その要旨を変更しない範囲内で適宜変形して実施し得るものである。 The present invention is not limited to the embodiments described above, it is capable of carried out appropriately modified within a range not changing the gist thereof. 例えば、上記実施例では、ポインティングデバイスとしてマウスを使用したが、トラックボールやジョイスティックを使用することもでき、また、タッチペンなどを使用する方式とすることも可能である。 For example, in the above embodiment, instead of the mouse as a pointing device, it is also possible to use a track ball or a joy stick, it is also possible to scheme using the touch pen.
【0215】 [0215]
【発明の効果】 【Effect of the invention】
以上、本発明によれば、動画像とともに、選択された静止画像を併せて表示手段に表示して観察することが可能となり、これによって、動画と所望の静止画を同時に観察できるので、静止画を動画像より低い倍率の画像としておくことで、注目領域の画像は動画像で観察でき、注目領域を含むその周辺領域の画像は静止画で観察することにより、周辺の状況を把握しながら標本の観察ができるようになって、理想的な観察が可能になり、しかも、操作性にも優れると云った効果を有する顕微鏡画像遠隔観察装置を提供できる。 As described above, according to the present invention, together with the moving picture, it is possible to observe by displaying on the display means together still image selected, thereby, it is possible to observe moving a desired still image simultaneously, still image the by keeping the image of the lower moving image magnification, image of the region of interest can be observed in a moving image, the image of the peripheral region including the target region by observing a still image, while grasping the surrounding situation specimen so it is observed, it allows an ideal observation, moreover, can provide a microscopic image remote observation apparatus having the effect say with excellent operability.
【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS
【図1】本発明の第1実施例の全体構成を示すブロック図。 Block diagram illustrating the overall configuration of a first embodiment of the present invention; FIG.
【図2】図1のシステムにおける制御部101,106の構成例を示すブロック図。 2 is a block diagram showing a configuration example of a control unit 101 and 106 in the system of FIG.
【図3】本発明の実施例を説明するための図であって、モニタ装置208上に表示された顕微鏡画像と、顕微鏡ステージ上の標本の関係を示す図。 [Figure 3] A diagram for explaining an embodiment of the present invention, showing a microscopic image displayed on the monitor device 208, the relationship between the specimen on the microscope stage FIG.
【図4】本発明の実施例を説明するための図であって、画像送信側と画像受信側の通信中の関係を示す図。 [4] A diagram for explaining an embodiment of the present invention, showing the relationship in the communication of image sender and image receiver.
【図5】本発明の実施例を説明するための図であって、再生時の軌跡表示機能(トレース機能)について説明するための図。 [5] A diagram for explaining an embodiment of the present invention, diagram for explaining a locus display function during playback (trace function).
【図6】本発明の実施例を説明するための図であって、第1実施例におけるセンタ側(画像受信側)での操作全体の流れを説明するフローチャート。 [6] A diagram for explaining an embodiment of the present invention, a flow chart for explaining the overall flow of operations in the center side (the image receiving side) in the first embodiment.
【図7】本発明の実施例を説明するための図であって、第1実施例における動画像受信中の画像受信側の処理を説明するフローチャート。 [Figure 7] A diagram for explaining an embodiment of the present invention, a flow chart for explaining the image receiving side processing in the moving image received in the first embodiment.
【図8】本発明の実施例を説明するための図であって、第1実施例における動画像受信中の画像送信側の処理を説明するフローチャート。 [8] A diagram for explaining an embodiment of the present invention, a flow chart for explaining the processing of the image transmission side in a moving picture reception in the first embodiment.
【図9】本発明の実施例を説明するための図であって、静止画像402と動画像403の関係、および低倍率静止画像402と、その拡大動画像403上で指定した静止画像、あるいは低倍率動画像と、その静止画から拡大指定した動画像を関連を示す図。 [9] A diagram for explaining the embodiments of the present invention, the relationship of the still image 402 and the moving image 403, and a low magnification static image 402, a still image designated on the enlarged video image 403, or, shows a relevant and low magnification moving image, the moving image enlarged specified from the still image.
【図10】本発明の実施例を説明するための図であって、リンク情報を記録したデータファイルのデータ構成を示す図。 [Figure 10] A diagram for explaining an embodiment of the present invention, shows the data structure of a data file that records link information.
【図11】本発明の実施例を説明するための図であって、画像ファイルの構成例を示す図。 [Figure 11] A diagram for explaining an embodiment of the present invention, showing a configuration example of an image file.
【図12】本発明の第2実施例の全体構成を示すブロック図。 Block diagram illustrating the overall configuration of a second embodiment of the present invention; FIG.
【図13】本発明の第2実施例を説明するための図であって、画像送信側の処理における第1実施例と異なる部分(静止画像取込処理;図8のS309〜S311)に対応する部分のフローチャートを示す図。 [Figure 13] A diagram for explaining the second embodiment of the present invention, the first embodiment and different portions in the processing of the image transmission side; corresponding to (still image capture processing S309~S311 of FIG. 8) It shows a flowchart of a portion.
【図14】本発明の第3実施例を説明するための図であって、第3実施例のハードウェアの構成を示すブロック図。 [Figure 14] A view for explaining a third embodiment of the present invention, a block diagram showing a hardware configuration of the third embodiment.
【図15】本発明の第3実施例を説明するための図であって、第3実施例における画像受信側の処理を説明するためのフローチャート。 [Figure 15] A diagram for illustrating a third embodiment of the present invention, a flow chart for explaining the processing of the image receiving side according to the third embodiment.
【図16】本発明の第3実施例を説明するための図であって、第3実施例における画像送信側の処理を説明するためのフローチャート。 [Figure 16] A diagram for illustrating a third embodiment of the present invention, a flow chart for explaining a process of image transmission side in the third embodiment.
【符号の説明】 DESCRIPTION OF SYMBOLS
101,106…制御部(パーソナルコンピュータ,ワークステーション) 101, 106 ... control unit (personal computer, workstation)
102,107…表示部105,108…通信部201…CPU 102, 107 ... display unit 105 and 108 ... communication unit 201 ... CPU
202…メモリ203…フレームメモリ204…通信制御装置205…外部記憶装置(ハードディスク、光磁気ディスクなど) 202 ... memory 203 ... frame memory 204 ... communication control unit 205 ... external storage device (hard disk, magneto-optical disk)
206,304…キーボード207,303…マウス301…PC(パーソナルコンピュータ) 206,304 ... keyboard 207,303 ... mouse 301 ... PC (personal computer)
302…モニタ装置305…HDTV用のカメラ306…HDTV用のカメラ305のコントロールユニット(CCU) 302 ... monitor device 305 ... control of the camera 306 ... camera 305 for HDTV for HDTV unit (CCU)
307…NTSC用のカメラ308…NTSC用のカメラ307のコントロールユニット(CCU) 307 ... control of the camera 308 ... camera 307 for NTSC for NTSC unit (CCU)
309…顕微鏡401…モニタ402…低倍率像、静止画像(画像A) 309 ... microscope 401 ... monitor 402 ... low magnification image, a still image (image A)
403…高倍率・拡大像、動画像(画像B) 403 ... high magnification and the enlarged image, the moving image (image B)
404…画像Bの位置を示す矩形のマーカ405…顕微鏡ステージ406…顕微鏡標本407…観察位置 404 ... marker 405 ... microscope stage 406 ... microscope specimen 407 ... observation position of the rectangle indicating the position of the image B

Claims (8)

  1. 顕微鏡と、 And the microscope,
    前記顕微鏡が生成する観察像を撮像し、電気信号に変換して出力する撮像手段と、 Imaging means for the microscope to image the observation image to be generated and outputs the converted electrical signal,
    前記撮像手段からの出力画像信号を送信する送信側と、 A transmitting side for transmitting the output image signal from the imaging means,
    前記送信側から送信された前記出力画像を受信する受信側とを有し、 And a receiving side for receiving the output image transmitted from the transmitting side,
    受信側において前記出力画像を観察する顕微鏡画像遠隔観察装置において、 In the microscopic image remote observation apparatus for observing the output image at the receiving side,
    前記受信側は、 The receiving side,
    前記撮像手段から出力され前記送信側から送信される低倍率に対応する静止画像信号を受けて、 低倍率の静止観察画像として表示するための第1の表示手段と、 Receiving a still image signal corresponding to the low magnification to be transmitted from the transmitting side is output from the imaging unit, a first display means for displaying a low magnification static observation image,
    前記送信側から送信される高倍率に対応する動画像を受け、 この高倍率の動画像を前記低倍率の静止観察画像と同時に表示するための第2の表示手段と、を有することを特徴とする顕微鏡画像遠隔観察装置。 And wherein a, a second display means for receiving the moving image corresponding to the high magnification to be transmitted, and displays the moving image of the high magnification at the same time still observed image of the low magnification from the transmitting side microscopic image remote observation device.
  2. ステージ移動および対物レンズ倍率が制御可能な顕微鏡と、 A microscope stage movement and the objective lens magnification can be controlled,
    前記顕微鏡が生成する観察像を撮像し、電気信号に変換して出力する撮像手段と、 Imaging means for the microscope to image the observation image to be generated and outputs the converted electrical signal,
    前記撮像手段からの出力画像信号を送信する送信手段とを有する送信側と、 A transmitting side and a transmitting means for transmitting the output image signal from the imaging means,
    前記送信側から送信された前記出力画像信号を受信する受信側とを有し、 And a receiving side for receiving the output image signal transmitted from the transmitting side,
    受信側において前記出力画像を観察する顕微鏡画像遠隔観察装置において、 In the microscopic image remote observation apparatus for observing the output image at the receiving side,
    前記受信側は、 The receiving side,
    前記撮像手段から出力され前記送信側から送信される低倍対物レンズに対応する静止画像信号を受けて低倍率画像として格納するための記憶手段と、 Storage means for receiving and storing the still image signal corresponding to the low-magnification objective lens, which is transmitted as a low-magnification image from the transmitting side is output from said image pickup means,
    前記記憶手段に格納された前記低倍率静止画像を表示するための第1の表示手段と前記選択された静止画像の所定の領域を指示する指示手段と、 And instruction means for instructing a predetermined area of the first display means and the selected still images for displaying the low-magnification static image stored in the storage means,
    前記指示手段によって指示された領域の位置と大きさに応じて前記送信側の顕微鏡のステージ位置とレンズの倍率を制御する制御信号を送信側に伝送する制御信号伝送手段と、 A control signal transmitting means for transmitting a control signal for controlling the magnification of the microscope stage position and the lens of the transmitting side according to the position and size of the area designated by said instruction means to the transmitting side,
    前記制御信号に応じた位置と倍率の動画像信号を前記送信側から受信し、 高倍率動画像として前記低倍率観察画像と同時に表示するための第2の表示手段と、を有することを特徴とする顕微鏡画像遠隔観察装置。 And wherein a, a second display means for displaying said moving image signal of the position and the magnification according to the control signal received from the transmitting side, at the same time as the low magnification observation image as a high-magnification video image microscopic image remote observation device.
  3. 対物レンズ倍率が制御可能な顕微鏡と、 A microscope objective lens magnification can be controlled,
    前記顕微鏡が生成する観察像を撮像し、電気信号に変換して出力する撮像手段と、 Imaging means for the microscope to image the observation image to be generated and outputs the converted electrical signal,
    前記撮像手段からの出力画像信号を送信する送信手段とを有する送信側と、 A transmitting side and a transmitting means for transmitting the output image signal from the imaging means,
    前記送信側から送信された前記出力画像信号を受信する受信側とを有し、 And a receiving side for receiving the output image signal transmitted from the transmitting side,
    受信側において前記出力画像を観察する顕微鏡画像遠隔観察装置において、 In the microscopic image remote observation apparatus for observing the output image at the receiving side,
    前記受信側は、 The receiving side,
    前記撮像手段から出力され前記送信側から送信される静止画像信号を受けて格納するための記憶手段と、 Storage means for receiving and storing the still image signal transmitted from the transmitting side is output from said image pickup means,
    前記記憶手段に格納された静止画像から所定の静止画像を選択する選択手段と、 Selection means for selecting a predetermined still image from the stored still images in the storage means,
    前記選択手段によって選択された静止画像を表示するための第1の表示手段と、 A first display means for displaying the still image selected by said selecting means,
    前記選択された静止画像の所定の領域を指示する指示手段と、 And instruction means for instructing a predetermined region of the selected still image,
    前記指示手段によって指示された領域の位置と大きさに応じて前記送信側の顕微鏡のレンズ倍率を制御する制御信号を送信側に伝送する制御信号伝送手段と、 A control signal transmitting means for transmitting to the transmitting side control signal for controlling the lens magnification of the transmission side microscope according to the position and size of the indicated area by said instruction means,
    前記制御信号に応じた位置と倍率の動画像信号を前記送信側から受信し、動画像として前記選択された静止画像と同時に表示するための第2の表示手段とを有し、 A moving image signal of the position and the magnification in accordance with the control signal received from the transmitting side, and a second display means for displaying concurrently with the selected still image as a moving image,
    前記選択手段は前記動画像の倍率より小さく、かつ、最も近い倍率を有する静止画像を選択することを特徴とする顕微鏡画像遠隔観察装置。 It said selection means is smaller than the magnification of the moving image, and the microscopic image remote observation apparatus characterized by selecting a still image having the closest magnification.
  4. 前記送信側は前記撮像手段から動画像の出力画像信号を送信する場合、動画像の画素数を静止画像の画素数より少なくして送信することを特徴とする請求項1,2,3記載の顕微鏡画像遠隔観察装置。 If the transmitting side that transmits an output image signal of the moving image from the imaging unit, according to claim 1, 2, 3, wherein the transmitting and smaller than the number of pixels of a still image the number of pixels of the moving picture microscopic image remote observation apparatus.
  5. 前記送信側は動画像と静止画像の圧縮率を設定できることを特徴とする請求項1,2,3記載の顕微鏡画像遠隔観察装置。 The sender microscopic image remote observation apparatus according to claim 1, 2, 3, wherein the can set the compression rate of the moving images and still images.
  6. 前記撮像手段には、動画像を出力する低画素カメラと、静止画像を出力する高画素カメラとを用いることを特徴とする請求項1,2,3記載の顕微鏡画像遠隔観察装置。 Wherein the imaging means, a low-pixel camera for outputting a moving image, the microscopic image remote observation apparatus according to claim 1, 2, 3, wherein the use of a high-pixel camera which outputs a still image.
  7. 前記撮像手段は、1台のカメラからなり、前記カメラにて動画像と静止画像を異なる画素数で出力できることを特徴とする請求項1,2,3記載の顕微鏡画像遠隔観察装置。 The imaging means comprises a single camera, the microscopic image remote observation apparatus according to claim 1, 2, 3, wherein the moving images and still images can be output with different numbers of pixels in the camera.
  8. 送信側においてステージ移動および使用する対物レンズ倍率が制御可能な顕微鏡によって生成した観察像を撮像して画像信号に変換し、この画像信号を送信側から受信側へ伝送し、受信側において前記観察像を観察する顕微鏡画像の遠隔観察方法において、 Capturing the observation image which the objective lens magnification is generated by a controllable microscope stage moves and using the transmission side is converted into an image signal, transmitted to the receiving side the image signal from the transmitting side, the observation image at the receiving side in telemonitoring method of the microscope image observing,
    前記受信側は、前記送信側で撮像されて伝送される低倍率の第1の対物レンズに対応する静止画像信号を受けて表示するとともに、この静止画像の一部を拡大する高倍率の第2の対物レンズの動画像を前記送信側から受けて前記低倍率の静止観察画像と同時に表示することを特徴とする顕微鏡画像の遠隔観察方法。 The receiving side, and displays by receiving the still image signal corresponding to the first objective lens of low magnification to be transmitted is captured by the transmitting side, a second high-magnification for enlarging a portion of the still image telemonitoring method of the microscope image and displaying a moving image of the objective lens at the same time still observed image of the low magnification received from the transmitting side.
JP12635794A 1994-06-08 1994-06-08 Telemonitoring process of microscopic image remote observation apparatus and a microscope image Expired - Fee Related JP3557246B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP12635794A JP3557246B2 (en) 1994-06-08 1994-06-08 Telemonitoring process of microscopic image remote observation apparatus and a microscope image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP12635794A JP3557246B2 (en) 1994-06-08 1994-06-08 Telemonitoring process of microscopic image remote observation apparatus and a microscope image

Publications (2)

Publication Number Publication Date
JPH07333522A JPH07333522A (en) 1995-12-22
JP3557246B2 true JP3557246B2 (en) 2004-08-25

Family

ID=14933186

Family Applications (1)

Application Number Title Priority Date Filing Date
JP12635794A Expired - Fee Related JP3557246B2 (en) 1994-06-08 1994-06-08 Telemonitoring process of microscopic image remote observation apparatus and a microscope image

Country Status (1)

Country Link
JP (1) JP3557246B2 (en)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6272235B1 (en) * 1997-03-03 2001-08-07 Bacus Research Laboratories, Inc. Method and apparatus for creating a virtual microscope slide
DE69841245D1 (en) * 1997-03-03 2009-11-26 Olympus America Inc Method and apparatus for generating a virtual slide for a microscope
JPH11136487A (en) * 1997-10-30 1999-05-21 Mitsubishi Electric Corp Image communication system
JP2001091840A (en) * 1999-09-20 2001-04-06 Olympus Optical Co Ltd Microscope system
US20030053202A1 (en) * 2001-09-17 2003-03-20 Iekado Sibata Yoshikatsu Seiki Surgical microscope system
CA2436043C (en) 2002-02-22 2006-01-10 Bacus Research Laboratories, Inc. Focusable virtual microscopy apparatus and method
US7792338B2 (en) 2004-08-16 2010-09-07 Olympus America Inc. Method and apparatus of mechanical stage positioning in virtual microscopy image capture
JP4812272B2 (en) * 2004-09-03 2011-11-09 オリンパス株式会社 Observation method and observation device
US7804642B2 (en) 2005-05-16 2010-09-28 Olympus Corporation Scanning examination apparatus
JP4878914B2 (en) 2006-05-24 2012-02-15 オリンパス株式会社 Microscope system, a control method of a microscope, and program
JP4878913B2 (en) 2006-05-24 2012-02-15 オリンパス株式会社 Microscope system, a method of synthesizing microscopic images, and programs
JP2008107645A (en) * 2006-10-26 2008-05-08 Fuji Electric Holdings Co Ltd Image display device
JP2009042462A (en) * 2007-08-08 2009-02-26 Nikon Corp Microscope apparatus, observation method, and observed image processing method
JP5126675B2 (en) * 2007-09-04 2013-01-23 日本精工株式会社 Manipulator system
JP4981648B2 (en) * 2007-12-20 2012-07-25 キヤノン株式会社 Image processing apparatus and control method thereof
JP5059637B2 (en) * 2008-01-18 2012-10-24 オリンパス株式会社 Microscope imaging apparatus
US8583406B2 (en) * 2008-11-06 2013-11-12 Hoya Lens Manufacturing Philippines Inc. Visual simulator for spectacle lens, visual simulation method for spectacle lens, and computer readable recording medium recording computer readable visual simulation program for spectacle lens
JP5532726B2 (en) * 2009-07-31 2014-06-25 ソニー株式会社 Recording medium manufacturing method, reproducing apparatus of a recording medium and a recording medium
JP5589366B2 (en) * 2009-11-27 2014-09-17 ソニー株式会社 The information processing apparatus, information processing method and program
JP6137113B2 (en) * 2014-10-24 2017-05-31 ソニー株式会社 Display device, display method, program

Also Published As

Publication number Publication date
JPH07333522A (en) 1995-12-22

Similar Documents

Publication Publication Date Title
JP3938774B2 (en) The endoscope signal processing apparatus, an endoscope signal monitor and the endoscope system
US5111306A (en) Endoscope image filing system
US6512548B1 (en) Method and apparatus for providing live view and instant review in an image capture device
US7298400B2 (en) Video system for use with video telephone and video conferencing
US8218057B2 (en) Imaging apparatus, user interface, and associated methodology for a co-existent shooting and reproduction mode
US6243095B1 (en) Navigation and display system for digital radiographs
JP3382276B2 (en) Electronic devices and a method of controlling the same
US7543327B1 (en) Video surveillance system based on high resolution network cameras capable of concurrent transmission of multiple image formats at video rates
US6490490B1 (en) Remote operation support system and method
US20030174146A1 (en) Apparatus and method for providing electronic image manipulation in video conferencing applications
US6043837A (en) Method and apparatus for electronically distributing images from a panoptic camera system
US20040201741A1 (en) Image-pickup device
US6266085B1 (en) Camera imaging and magnification device
US6665453B2 (en) Multi-resolution support for video images
CN100544401C (en) Imaging device
US20010012072A1 (en) Image sensing apparatus and method of controlling operation of same
CN1204739C (en) Controlling device and method for camera
DE69838786T2 (en) Apparatus and method for speculative decompression of kompromierten image data in an image recording unit
US6456335B1 (en) Multiple picture composing method and multiple picture composing apparatus
US6545708B1 (en) Camera controlling device and method for predicted viewing
CN100556079C (en) Camera control apparatus and system, electronic conference system and camera control method
US20040239763A1 (en) Method and apparatus for control and processing video images
US20030071904A1 (en) Image capturing apparatus, image reproducing apparatus and program product
US5592237A (en) High resolution image processor with multiple bus architecture
CA2263151C (en) Picture-transmitting remote object inspection system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040203

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040405

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040407

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040517

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080521

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080521

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090521

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100521

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100521

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110521

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees