WO2012128305A1 - 顕微鏡 - Google Patents

顕微鏡 Download PDF

Info

Publication number
WO2012128305A1
WO2012128305A1 PCT/JP2012/057277 JP2012057277W WO2012128305A1 WO 2012128305 A1 WO2012128305 A1 WO 2012128305A1 JP 2012057277 W JP2012057277 W JP 2012057277W WO 2012128305 A1 WO2012128305 A1 WO 2012128305A1
Authority
WO
WIPO (PCT)
Prior art keywords
finger
sample stage
image
touch screen
display
Prior art date
Application number
PCT/JP2012/057277
Other languages
English (en)
French (fr)
Inventor
河田 聡
小林 実
泰輔 太田
知也 内山
直義 久保田
省悟 河野
Original Assignee
ナノフォトン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ナノフォトン株式会社 filed Critical ナノフォトン株式会社
Priority to JP2013505997A priority Critical patent/JP5936008B2/ja
Priority to EP12761333.9A priority patent/EP2690482B1/en
Priority to US14/006,500 priority patent/US9582088B2/en
Publication of WO2012128305A1 publication Critical patent/WO2012128305A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present invention relates to a microscope including a touch screen disposed on a display surface of a display means.
  • a typical example of a microscope such as a Raman microscope includes a sample stage mounted so as to be movable in the X and Y directions, X and Y direction driving means for driving the sample stage in the X and Y directions, and a plurality of objective lenses having different magnifications.
  • a Z direction driving means for moving the sample stage and the revolver relative to each other in the Z direction, and any one of the plurality of objective lenses is selectively positioned at the working position facing the sample stage.
  • Revolver driving means imaging means such as a CCD camera, image projecting optical means for projecting the image of the sample positioned on the sample stage to the imaging means through the objective lens positioned at the working position, and display means such as a liquid crystal panel And control means.
  • control operations such as observation of the sample on the sample stage or selection of the measurement region, selection of observation or measurement magnification, and focusing of the objective lens.
  • control operations are performed through input means such as a joystick or a track ball.
  • input means such as a joystick or a track ball.
  • the control operation using such input means is not always easy due to a time lag or the like existing between the input operation and the output operation such as movement of the sample stage, and requires considerable skill.
  • observation or measurement is performed at a high magnification, the observation or measurement region is set roughly on the low magnification screen, and then the observation or measurement region is set sufficiently accurately at a high magnification. In this case, it is necessary to exchange the objective lens for focusing, and the operation is considerably complicated.
  • Patent Documents 1 and 2 below disclose a microscope in which a touch screen is provided on a display surface of a display unit such as a liquid crystal panel and the touch screen is used as an input unit.
  • the operation control mode in the microscope disclosed in the following Patent Documents 1 and 2 is based on finger contact or simple finger movement with respect to various function switches defined on the touch screen, and the control operation is limited.
  • On the display means an image of the sample on the sample stage projected onto the imaging means via the image projection optical system is displayed, but there is a considerable amount of time between the input operation and the completion of movement of the sample stage. When there is a time lag and the sample stage is moved over a considerable length, it is necessary to repeat the area designation and waiting for the completion of the movement of the sample stage. It is necessary to correct the error at the center of the field of view, but the setting of the measurement area required in the case of a Raman microscope that does not consider such error correction is considered That is not, problems such as exists.
  • the present invention has been made in view of the above-mentioned facts, and the main technical problem thereof is to sufficiently perform various operation controls of the microscope by using a touch screen disposed on the display surface of the display means as an input means. To provide a new and improved microscope that can be easily and precisely performed.
  • the present inventors have made various gestures of the operator's finger applied to the touch screen disposed on the display surface of the display means, for example, contact (tap) with one finger. Touch two times in succession (double tap), move the finger without touching it (drag), touch the finger and keep it for a predetermined time (touch and hold), and touch the two fingers simultaneously Widening the distance between fingers by touching them (pinch out) or narrowing them (pinch in), and making two fingers touch each other at the same time to move them in parallel (double dragging). It has been found that the main technical problem can be achieved.
  • a sample stage mounted so as to be movable in the X and Y directions, and an X and Y direction driving means for driving the sample stage in the X and Y directions
  • a revolver including a plurality of objective lenses having different magnifications, a Z-direction driving means for relatively moving the sample stage and the revolver in the Z direction, and any one of the plurality of objective lenses
  • Revolver driving means for selectively positioning at the working position opposite to the sample stage, imaging means, and projecting the image of the sample positioned on the sample stage to the imaging means through the objective lens positioned at the working position
  • the control means is configured to actuate the X and Y direction driving means, actuate the Z direction driving means, actuate the revolver driving means, and display according to a gesture of an operator's finger applied to the
  • the control device stores the image signal from the imaging unit in a built-in memory, and converts the image signal stored on the display surface of the display unit to the image signal.
  • the memory image is displayed, and when the finger is moved without being detached from the touch screen, the memory image is moved on the display surface of the display means according to the movement of the finger, and the X and Y directions are displayed.
  • the driving means is operated to move the sample stage in the X and / or Y direction.
  • the control means detects the movement of the finger at a predetermined time interval from when the finger touches the touch screen until the finger is released from the touch screen, and updates the memory image based on the position of the finger.
  • the image displayed on the display surface of the display unit is changed to a real-time image projected on the imaging unit. It is preferable to let it lie.
  • the control means When two fingers are brought into contact with the touch screen at the same time, the control means stores the distance between the two fingers, so that the two fingers are not detached from the touch screen.
  • the control unit preferably changes the magnification of the image displayed on the display surface of the display unit in accordance with the change rate of the interval between the two fingers.
  • the control means activates the revolver driving means to change the objective lens located at the working position facing the sample stage.
  • the control means stores the image signal from the imaging means in the built-in memory, and on the display surface of the display means during the operation of the revolver driving means.
  • the control means based on the information on the same focal length and the visual field center position stored in advance in the built-in memory, the X direction and Y direction driving means and / or the Z direction.
  • the driving means is operated to adjust the focus, and then the screen displayed on the display surface of the display means is changed to a real-time image projected on the imaging means.
  • the control unit is configured to display the display unit on the display surface.
  • a wide-field buffer image to which an additional image following the real-time image is added is displayed in a region outside the real-time image. If the additional image is not stored in the built-in memory, the X and Y direction moving means are operated to move the sample stage in the X and Y directions, and the required additional image signal is stored in the built-in memory. After that, it is preferable to return the sample stage to the initial position.
  • the control device In a state where the wide-field buffer image is displayed on the display surface of the display means, when a finger is brought into contact with the touch screen, the control device displays the wide-field buffer image signal.
  • the finger When the finger is moved without being detached from the touch screen, the wide-field buffer image is moved on the display surface of the display unit according to the movement of the finger, and the X and X It is preferable to operate the Y direction driving means to move the sample stage in the X and / or Y direction.
  • control means operates the Z-direction driving means based on the contrast at the same position and the vicinity thereof.
  • the focusing of the objective lens positioned at the working position with respect to the sample on the sample table is performed.
  • the control means when a specific gesture of an operator's finger is applied to the touch screen, the control means is preferably set to a Raman measurement region setting mode.
  • the specific gesture is to keep the finger in contact for a predetermined time, and it is convenient for the control means to set a region where the finger is in contact as a measurement region.
  • the control means sets the measurement area corresponding to the movement of the finger. Is preferred.
  • the control means is configured to move the Z direction driving means according to the parallel movement amount of the two fingers. It is preferable to move the material stage relative to the revolver in the Z direction by actuating.
  • the control means relatively moves the sample stage in a direction approaching the revolver, and the two fingers are parallel in opposite directions. When moved, the control means moves the sample stage in a direction away from the revolver.
  • the control means sets the relative position of the sample stage with respect to the revolver on the display means.
  • a scale for indication and a sample stage indicator are displayed and the sample stage indicator is moved along the scale in response to relative movement of the sample stage relative to the revolver.
  • the scale and the sample stage mark are displayed for a predetermined time, and when the scale and the sample stage mark are displayed, a finger is brought into contact with the sample stage mark and moved along the scale. It is preferable that the sample stage is moved relative to the revolver according to the movement of the finger.
  • the control means actuates the Z direction drive to move the sample stage relative to the revolver to a position separated by a predetermined distance.
  • the laser light source is energized when the wireless connection is disconnected against the user's intention while the touch screen is wirelessly connected to the control means.
  • the control means de-energizes the laser light source.
  • FIG. 1 is a simplified block diagram illustrating a preferred embodiment of a microscope configured in accordance with the present invention.
  • 2 is a flowchart showing a basic operation control mode in the microscope shown in FIG. 1.
  • the flowchart which shows an operation
  • the flowchart which shows the sample stage movement and image update style in the microscope shown in FIG.
  • the flowchart which shows the magnification change mode in the microscope illustrated in FIG.
  • FIG. 2 is a simplified diagram showing an example of a wide-field buffer image displayed on display means in the microscope of FIG. 1.
  • the schematic diagram which shows the scale for showing the raising / lowering position of a sample stage, and a sample stage label
  • FIG. 1 schematically shows the main components of a Raman microscope constructed according to the present invention.
  • the illustrated Raman microscope includes a sample stage 4 on which the sample 2 is placed.
  • the sample stage 4 is mounted so as to be movable in the X direction (left and right direction in FIG. 1), Y direction (direction perpendicular to the paper surface in FIG. 1), and Z direction (up and down direction in FIG. 1).
  • the sample stage 4 is provided with driving means 6, and the operation of the driving means 6 allows the sample stage 4 to be appropriately moved in the X direction, the Y direction, and the Z direction.
  • the driving means 6 constitutes X and Y direction driving means for driving the sample stage 4 in the X direction and Y direction, and also constitutes a Z direction driving means for driving the sample stage 4 in the Z direction.
  • a revolver 10 is rotatably mounted above the sample stage 4.
  • the revolver 10 has a plurality of objective lenses 8 having different magnifications, for example, four objectives having magnifications of 5, 10, 20, and 50.
  • a lens 8 is provided (only one of them is shown in FIG. 1).
  • the revolver 10 is provided with a revolver driving means 12. When the revolver driving means 12 appropriately rotates the revolver 10, a predetermined one of the plurality of objective lenses 8 faces the sample stage 4. Positioned at the working position. In the illustrated embodiment, the sample stage 4 is appropriately moved in the Z direction as described above, and the Z direction interval between the objective lens 8 and the sample 2 on the sample stage 4 is appropriately set. In place of or in addition to moving the sample stage 4 in the Z direction, the revolver 10 is appropriately moved in the Z direction to appropriately set the Z direction interval between the objective lens 8 and the sample 2 on the sample stage 4. You can also.
  • the illustrated Raman microscope includes a laser light source 14, a beam expander 16, a Y direction operation means 18, a lens 20, an aperture 24, a lens 26, a beam splitter 28, an X direction operation mirror 30, a lens 32, a lens 34, a lens 40, A spectroscope 46 having an entrance slit 44 and a Raman signal detector 48 which can be constituted by a CCD camera are arranged.
  • the specific configuration and operation of these components in the illustrated Raman microscope are disclosed in detail in the specification and drawing (especially FIG. 1) of Japanese Patent Application Laid-Open No. 2007-179002. The description is omitted.
  • the beam splitter 50 is disposed between the lens 40 and the revolver 10, and the lens 52 and the imaging unit 54 are disposed in association with the beam splitter 50.
  • the beam splitter 50 and the lens 52 constitute image projection optical means for projecting the image of the sample 2 on the sample stage 4 to the imaging means 54 via the objective lens 8 positioned at the working position.
  • the imaging means 54 can be composed of a CCD camera.
  • the imaging means 54 is connected to the control means 56 together with the Raman signal detector 48.
  • a display means 58 is attached to the control means 56 that can be constituted by a computer with a built-in memory.
  • the display means 58 can be composed of an appropriate display such as a liquid crystal panel. It is important that a touch screen 60 for detecting the contact of the operator's finger is disposed on the display surface of the display means 58.
  • the control means 56 controls various operations of the microscope in accordance with the gesture of the operator's finger applied to the touch screen 60. This is very important. Transmission and reception of signals between the control means 56 and various components of the microscope can be performed via appropriate signal lines. If desired, signals can be transmitted and received wirelessly.
  • the description will be continued with reference to the flowchart shown in FIG. 2 together with FIG. 1.
  • initialization is performed in the turning-on step n-1, and the microscope is set in advance. It will be in the initial state.
  • an image projected on the imaging means 54 in step n-2 that is, a real-time image is displayed on the display surface of the display means 58.
  • step n-3 it is determined whether or not a finger gesture of the operator is applied to the touch screen 60.
  • the process proceeds to step n-4, and the operation control according to the gesture is performed as described in detail below.
  • step n-5 it is determined whether or not the operation control corresponding to the gesture has ended.
  • total magnification which means the magnification at which the sample on the sample stage 4 is displayed on the display surface of the display means 58, is expressed by the following equation.
  • Total magnification (Magnification of objective lens 8) ⁇ (Magnification of image projection optical means)
  • X (digital zoom magnification) x (ratio between the image area size of the image pickup means 54 and the display surface size of the display means 58)
  • digital zoom magnification is the ratio between the entire image from the imaging means 54 and the portion actually displayed on the display surface of the display means 58, and when the magnification is 1, the entire image from the imaging means 54.
  • a part of the image from the imaging unit 54 is enlarged and displayed on the display surface of the display unit 58 when the magnification is larger than 1, and when the magnification is smaller than 1, the display of the display unit 58 is displayed.
  • the image from the imaging means 54 is smaller than the surface.
  • step s-1 a gesture applied to the touch screen 60 is determined. If the gesture is a drag, the process proceeds to step s-2 to move the sample stage 4, and if the gesture is a pinch-in or pinch-out, the process proceeds to step s-3 to change the magnification. If the gesture is a double tap, the process proceeds to step s-4 to perform focusing (autofocus) of the objective lens 8, and if the gesture is a tap and hold, the process proceeds to step s-5 to set a measurement region. If the gesture is a double drag, the process moves to step s-6 and the sample stage is moved up and down.
  • step t-1 the image signal from the imaging unit 54 is the control unit 56 in step t-1.
  • the memory image based on the stored image signal is displayed on the display surface of the display means 58.
  • step t-2 the movement distance of the finger is calculated.
  • step t-3 the memory image displayed on the display surface of the display means 58 is moved by the movement distance of the finger, and the movement of the sample stage 4 is started.
  • step t-4 it is determined whether or not the finger has been removed from the touch screen 60, that is, whether or not the drag has ended.
  • step t-5 it is determined whether or not the sample stage 4 has been moved over a distance corresponding to the movement distance of the finger. If the required movement of the sample stage 4 is not completed, the process returns to step t-2. In this way, without waiting for the completion of the movement of the sample stage 4, the movement distance of the finger is repeatedly detected at predetermined time intervals to update the movement distance of the sample stage 4. Therefore, compared with the case where the next movement is started after waiting for the completion of the movement of the sample stage 4 (as disclosed in Patent Documents 1 and 2), the sample stage 4 is moved continuously without waiting time. The measurement site can be searched quickly.
  • step t-6 the image signal stored in the built-in memory of the control means 56 is updated to the image signal from the imaging means 54. Accordingly, the image signal stored in the internal memory is also updated at predetermined time intervals.
  • step t-7 the process proceeds to step t-7 and waits for the sample stage 4 to move over a distance corresponding to the movement distance of the finger before displaying on the display means 58. The image displayed on the screen is switched from the memory image to the real-time image.
  • the memory image is superimposed on the real-time image, for example, translucent. It can also be displayed in the state.
  • step x-1 the interval between two fingers brought into contact with the touch screen 60 is stored.
  • step x-2 the process proceeds to step x-2, and when the interval between two fingers is changed (pinch-in or pinch-out), a reduction rate or enlargement rate of the interval is calculated, and according to the calculated reduction rate or enlargement rate
  • the image signal from the imaging means 54 is reduced or enlarged and displayed on the display surface of the display means 58.
  • the reduction ratio or the enlargement ratio exceeds the threshold value, the rotation of the revolver 10 is started and the replacement of the objective lens 8 positioned at the operation position is started. As shown in FIG.
  • step x-3 it is determined whether or not replacement of the objective lens 8 has started. If the replacement of the objective lens 8 has not been started, the process proceeds to step x-4, where it is determined whether the pinch-in or pinch-out has been completed and the two fingers have been detached from the touch screen 60.
  • step x-2 determines whether or not the objective lens 8 has been exchanged. If the objective lens 8 has been exchanged, the process proceeds to step x-6, and after the exchange of the objective lens 8 is completed, the image displayed on the display surface of the display means 58 is switched to a real-time image.
  • step x-3 the replacement of the objective lens 8 is started in step x-3, the process proceeds to step x-7, and the image signal from the imaging means 54 at the start of replacement of the objective lens 8 is stored in the built-in memory of the control means 56.
  • step x-8 determine whether or not the replacement of the objective lens 8 is completed. It is determined whether or not the replacement of the objective lens 8 has been completed. If the replacement of the objective lens 8 has not been completed, the process proceeds to step x-4. When the replacement of the objective lens 8 is completed, the process proceeds to step x-9.
  • step x-9 the sample stage 4 is moved in the Z direction and the X and Y directions based on the same focal length error and the visual field center position error stored in advance in the built-in memory of the control means 56.
  • the focus is adjusted, and the image on the display surface of the display means 58 is switched to a real-time image. Thereafter, the process proceeds to step x-4.
  • Magnification change when the digital zoom magnification is smaller than 1 will be described as follows.
  • the image size based on the image signal from the imaging unit 54 becomes smaller than the size of the display surface of the display unit 58.
  • a wide-field buffer image obtained by adding the required additional images B1 to B8 to the outer area of the display image A based on the image signal from the imaging unit 54 on the display surface of the display unit 58. indicate.
  • the real-time image display is stopped, and the image displayed on the display surface of the display means 58 is displayed as a wide-field buffer image (that is, an additional image adjacent thereto is displayed around the real-time image). Switch to the image to be displayed.
  • the memory image is displayed in the center, and the portion where the additional image signal is not acquired in the surrounding area is gray, for example.
  • step y-2 the image reduction rate (or enlargement rate) by pinch-in (or pinch-out when the digital zoom magnification is already smaller than 1) is calculated in the same manner as described above.
  • step y-3 the memory image is reduced at the required reduction ratio (or enlarged at the required enlargement ratio) and displayed.
  • step y-4 it is determined whether there is an unacquired area of an additional image to be displayed around the memory image. If an unacquired area exists, the process proceeds to step y-5.
  • step y-5 the additional image signal from the imaging unit 54 is stored so that the image of the area adjacent to the memory image is projected onto the imaging unit 54 by appropriately moving the sample stage 4, and the stored memory is added.
  • step y-6 the pinch-in (or pinch-out), that is, the two fingers touch the touch screen 60 It is discriminated whether or not the vehicle has been left. If the pinch-in (or pinch-out) has not ended, the process returns to step y-2. When the pinch-in (or pinch-out) is completed, the process proceeds to step y-7.
  • step y-7 the sample stage 4 is returned to the state where the memory image is located at the center of the display surface of the display means 58, and after the completion of the return of the sample stage 4, the image of the central region of the wide-field image is displayed. To the real-time image.
  • step z-1 the image signal from the imaging means 54 is stored in the built-in memory of the control means 56, and real-time image display is performed.
  • the image displayed on the display surface of the display means 58 is stopped and switched to the wide-field buffer image.
  • step z-2 the movement distance of the finger is calculated.
  • step z-3 the wide-field buffer image is moved according to the movement distance of the finger.
  • step z-4 it is determined whether or not there is an unacquired area of an additional image to be displayed around the memory image.
  • step z-5 the additional image signal from the imaging unit 54 is stored so that the image of the region adjacent to the memory image is projected onto the imaging unit 54 by appropriately moving the sample stage 4, and the stored memory is added. The image is displayed on a required part on the display surface of the display means 58. This operation is repeated for all the additional images required around the central memory image, and thus the wide-field buffer image is displayed on the display surface of the display means 58.
  • step z-6 the finger has been removed from the touch screen 60, that is, whether the drag has ended.
  • step z-7 the sample stage 4 is moved so that the image from the imaging means 54 is located at the center of the display surface of the display means 58, and the wide-field image is waited for the movement of the sample stage 4 to be completed. Switch the image in the center area to real-time image.
  • the control means 56 is provided with an objective lens for the sample 2 on the sample stage 4.
  • Perform 8 focusing autofocus. This focusing can be performed on the basis of, for example, detecting the position where the finger is in contact and the contrast in the vicinity thereof, and the contrast.
  • a laser beam can be irradiated to the position where the finger is in contact, and focusing can be performed based on the contrast of a required region of the sample 2 in the state where the laser beam is irradiated.
  • a specific gesture of a finger is applied to the touch screen 60, for example, the finger is brought into contact and maintained for a predetermined time (touch).
  • the control means 56 sets the Raman measurement area setting mode.
  • the Raman measurement region is set according to the finger gesture applied to the touch screen 60.
  • the position where the finger is in contact can be set as the Raman measurement region.
  • the Raman measurement region can be set according to this movement. For example, when a finger that is in contact is dragged, a rectangular region having diagonal points between the initial contact position and the final drag position can be set as the measurement region.
  • the image is moved while updating the wide-field buffer image as described above, and the objective lens with the lowest magnification is moved.
  • An area wider than the visual field can be set as the measurement area.
  • the finger is moved so as to surround the required area, the surrounded required area can be set as the Raman measurement area.
  • step m-1 the distance between the two fingers in contact with the touch screen 60 is stored.
  • step m-2 the distance between the two fingers is moved without being substantially changed (if the distance between the two fingers is changed, the process proceeds to step x-2 shown in FIG. 5).
  • the direction of movement (up or down) and the amount of movement are detected.
  • Step m-3 the scale 62 and the sample stage indicator 64 as shown in FIG. 11 are displayed over a predetermined time on one side of the display means 58, for example.
  • the sample stage indicator 64 indicates the vertical position of the sample stage 4, and the scale 62 indicates the vertical interval between the revolver 10 and the sample stage 4.
  • the driving means 6 is operated in accordance with the parallel movement of the two fingers to move the sample stage 4 up and down. More specifically, when two fingers are translated in a predetermined direction, that is, upward, the sample stage 4 is raised, and when two fingers are translated in the opposite direction, that is, downward, the sample stage 4 is moved. Move down. The vertical position of the sample stage 4 is detected by appropriate detection means (not shown), and the sample stage indicator 64 is moved up and down along the scale 62 as the sample stage 4 is moved up and down.
  • step m-5 it is determined whether or not the parallel movement of the two fingers is completed and the two fingers are detached from the touch screen 60. If the parallel movement has not been completed, the process returns to step m-2. In a state where the scale 62 and the sample stage indicator 64 are displayed on the display means 58, the sample stage 4 may be moved up and down by bringing the sample stage indicator 64 up and down by bringing the finger into contact with the sample stage indicator 64. it can.
  • the touch screen 60 and the control means 56 can be connected wirelessly.
  • the control means 56 automatically moves the sample stage 4 when the revolver 10 and the sample stage 4 are approaching over a predetermined distance when the wireless connection is disconnected against the user's intention. It is desirable that the sample stage 4 is lowered by a predetermined distance from the revolver 10 to ensure safety. If the laser light source 14 is energized, it is desirable to deenergize it.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Microscoopes, Condenser (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

 表示手段の表示面上に配設されたタッチスクリーンを入力手段として利用して、顕微鏡の種々の作動制御を充分容易に且つ精密に遂行することができるようにする。 表示手段の表示面上に配設されたタッチスクリ-ンに適用される操作者の指の種々のジェスチャ、例えば1本の指による当接(タップ)、2回連続して当接(ダブルタップ)、指を当接し離脱することなく移動する(ドラッグ)、指を当接して所定時間以上維持する(タッチアンドホールド)、2本の指を同時に当接せしめて指の間隔を広げる(ピンチアウト)或いは狭める(ピンチイン)、2本の指を同時に当接せしめて平行移動する(ダブルドラッグ)等、に基づいて種々の作動制御を遂行するようになす。

Description

顕微鏡
 本発明は、表示手段の表示面上に配設されたタッチスクリーンを備えた顕微鏡に関する。
 ラマン顕微鏡の如き顕微鏡の典型例は、X及びY方向に移動自在に装着された試料ステージ、試料ステージをX及びY方向に駆動するX及びY方向駆動手段、倍率が異なった複数個の対物レンズを含むレボルバ、試料ステージとレボルバとをZ方向に相対的に移動せしめるためのZ方向駆動手段、複数個の対物レンズのうちの任意の1個を選択的に試料ステージに対向する作用位置に位置付けるためのレボルバ駆動手段、CCDカメラの如き撮像手段、試料ステージ上に位置せしめられた試料の画像を作用位置に位置付けられた対物レンズを通して撮像手段に投射する画像投射光学手段、液晶パネルの如き表示手段、及び制御手段を具備している。かような顕微鏡においては、試料ステージ上の試料の観察乃至測定領域の選定、観察乃至測定倍率の選定、対物レンズの焦点合わせ等の制御操作を適宜に遂行することが必要であるが、通常、これらの制御操作はジョイステック或いはトラックボ-ルの如き入力手段を介して遂行されている。しかしながら、かような入力手段を利用した制御操作には、入力操作と試料ステージの移動の如き出力作動との間に存在するタイムラグ等に起因して制御操作が必ずしも容易ではなく相当な熟練を要する。特に高倍率で観察乃至測定を行う場合、低倍率画面で観察乃至測定領域を概略的に設定し、しかる後に高倍率で観察乃至測定領域を充分精密に設定することになるが、倍率変更の際には対物レンズを交換し焦点合わせを行うことが必要であり、操作が相当煩雑である。
 一方、下記特許文献1及び2には、液晶パネルの如き表示手段の表示面上にタッチスクリーンを配設し、かかるタッチスクリーンを入力手段として利用する顕微鏡が開示されている。しかしながら、下記特許文献1及び2に開示されている顕微鏡における作動制御様式は、タッチスクリーン上に規定された各種機能スイッチに対する指の当接或いは単なる指の移動に基づくものであり、制御操作が限定的である、表示手段上には画像投射光学系を介して撮像手段に投射される試料ステージ上の試料の画像が表示されるが、入力操作と試料ステージの移動完了との間には相当なタイムラグが存在し、試料ステージを相当な長さに渡って移動せしめる場合は領域指定と試料ステージの移動完了待ちと繰り返すことが必要である、対物レンズを交換した場合には同焦点距離の誤差及び視野中心の誤差を修正することが必要であるが、かような誤差修正が考慮されていない、ラマン顕微鏡の場合に必要とされる測定領域の設定が考慮されていない、等の問題が存在する。
特開平9-197287号公報 特開2001-59940号公報
 本発明は上記事実に鑑みてなされたものであり、その主たる技術的課題は、表示手段の表示面上に配設されたタッチスクリーンを入力手段として利用して、顕微鏡の種々の作動制御を充分容易に且つ精密に遂行することができる、新規且つ改良された顕微鏡を提供することである。
 本発明者等は、鋭意検討の結果、表示手段の表示面上に配設されたタッチスクリ-ンに適用される操作者の指の種々のジェスチャ、例えば1本の指による当接(タップ)、2回連続して当接(ダブルタップ)、指を当接し離脱することなく移動する(ドラッグ)、指を当接して所定時間以上維持する(タッチアンドホールド)、2本の指を同時に当接せしめて指の間隔を広げる(ピンチアウト)或いは狭める(ピンチイン)、2本の指を同時に当接せしめて平行移動する(ダブルドラッグ)等、に基づいて種々の作動制御を遂行するようになすことによって、上記主たる技術的課題を達成することができることを見出した。
 即ち、本発明によれば、上記主たる技術的課題を達成する顕微鏡として、X及びY方向に移動自在に装着された試料ステージ、該試料ステージをX及びY方向に駆動するX及びY方向駆動手段、倍率が異なった複数個の対物レンズを含むレボルバ、該試料ステージと該レボルバとをZ方向に相対的移動せしめるためのZ方向駆動手段、該複数個の対物レンズのうちの任意の1個を選択的に該試料ステージに対向する作用位置に位置付けるためのレボルバ駆動手段、撮像手段、該試料ステージ上に位置せしめられた試料の画像を該作用位置に位置付けられた対物レンズを通して該撮像手段に投射する画像投射光学手段、表示手段、該表示手段の表示面上に配設されたタッチスクリーン、及び制御手段を具備する顕微鏡にして、
 該制御手段は、該タッチスクリーンに適用される操作者の指のジェスチャに応じて、該X及びY方向駆動手段の作動、該Z方向駆動手段の作動、該レボルバ駆動手段の作動、及び該表示手段における表示倍率を制御する、ことを特徴とする顕微鏡が提供される。
 好ましくは、該タッチスクリーンに1本の指が当接されると、該制御装置は、該撮像手段からの画像信号を内蔵メモリに保存し、該表示手段の表示面上に保存した画像信号に基づくメモリ画像を表示せしめ、指が該タッチスクリーンから離脱されることなく移動されると、指の移動に応じて該表示手段の表示面上において該メモリ画像を移動せしめると共に、該X及びY方向駆動手段を作動せしめて該試料ステージをX及び/又はY方向に移動せしめる。該制御手段は、該タッチスクリーンに指が当接されてから該タッチスクリーンから指が離脱されるまで、所定時間間隔で指の移動を検出し指の位置に基いて該メモリ画像を更新し、そして指の移動が停止されて指が該タッチスクリーンから離脱され、該試料ステージの移動が終了すると、該表示手段の表示面上に表示される画像を該撮像手段に投射されているリアルタイム画像にせしめるのが好適である。
 該タッチスクリーンに2本の指が同時に当接されると、該制御手段は、2本の指の間隔を記憶し、該タッチスクリーンから2本の指が離脱されることなく2本の指の間隔が変化せしめられると、該制御手段は、2本の指の間隔の変化率に応じて該表示手段の表示面上に表示される画像の倍率を変化せしめるのが好ましい。好適には、2本の指の間隔の変化率が所定閾値を越えると、該制御手段は、該レボルバ駆動手段を作動せしめて該試料ステージに対向する該作用位置に位置する対物レンズを変更する。該レボルバ駆動手段の作動を開始する際には、該制御手段は、該撮像手段からの画像信号を該内蔵メモリに保存し、該レボルバ駆動手段の作動中においては該表示手段の該表示面上には該内臓メモリに保存した画像信号に基づくメモリ画像を2本の指の変化率に応じた倍率で表示せしめるのが好都合である。好ましくは、対物レンズの変更が終了すると、該制御手段は、該内蔵メモリに予め保存した同焦点距離及び視野中心位置に関する情報に基いて、該X方向及びY方向駆動手段及び/又は該Z方向駆動手段を作動せしめてピント調整し、しかる後に該表示手段の表示面上に表示される画面を該撮像手段に投射されているリアルタイム画像にせしめる。
 好ましくは、最低倍率の対物レンズが作用位置に位置せしめられた後に該表示手段の該表示面上に表示される画像が縮小された場合、該制御手段は、該表示手段の該表示面上におけるリアルタイム画像の外側の領域にリアルタイム画像に続く追加画像が付加された広視野バッファ画像を表示せしめる。該追加画像が該内蔵メモリに記憶されていない場合には、該X及びY方向移動手段を作動せしめて該試料ステージをX及びY方向に移動して所要追加画像信号を該内蔵メモリに保存し、しかる後に該試料ステージを初期位置に戻すのが好適である。該表示手段の該表示面上に該広視野バッファ画像が表示せしめられている状態において、該タッチスクリーンに1本の指が当接されると、該制御装置は、該広視野バッファ画像信号を該内蔵メモリに保存し、指が該タッチスクリーンから離脱されることなく移動されると、指の移動に応じて該表示手段の表示面上において該広視野バッファ画像を移動せしめると共に、該X及びY方向駆動手段を作動せしめて該試料ステージをX及び/又はY方向に移動せしめるのが好ましい。
 好適には、該タッチスクリーンの同位置に指が2回続けて当接されると、該制御手段は、該同位置及びその近傍のコントラストに基づいて基いて該Z方向駆動手段を作動せしめて、該試料テーブル上の試料に対して作用位置に位置付けられている対物レンズの焦点合わせを遂行する。
 ラマン顕微鏡である場合、該タッチスクリーンに操作者の指の特定のジェスチャが適用されると、該制御手段は、ラマン測定領域設定モードに設定するのが好ましい。該特定のジェスチャは指を当接せしめて所定時間維持することであり、該制御手段は、指が当接された部位を測定領域として設定するのが好都合である。該測定領域設定モードに設定された後に、該タッチスクリーンに指が当接され該タッチスクリーンから離脱されることなく移動されると、該制御手段は指の移動に対応して測定領域を設定するのが好ましい。
 該タッチスクリーンに2本の指が同時に当接され、該タッチスクリーンから離脱されることなく平行移動せしめられると、該制御手段は、2本の指の平行移動量に応じて該Z方向駆動手段を作動せしめて該レボルバに対して該資料ステージをZ方向に相対的に移動せしめるのが好適である。好ましくは、2本の指が所定方向に平行移動せしめられると、該制御手段は、該レボルバに対して接近する方向に該試料ステージを相対的に移動せしめ、2本の指が反対方向に平行移動せしめられると、該制御手段は、該レボルバに対して離隔する方向に該試料ステージを移動せしめる。該タッチスクリーンに2本の指が同時に当接され、該タッチスクリーンから離脱されることなく平行移動せしめられると、該制御手段は、該表示手段上に該レボルバに対する該試料ステージの相対的位置を示すための尺度と試料ステージ標識とを表示し、該レボルバに対する該試料ステージに相対的移動に応じて該試料ステージ標識を該尺度に沿って移動せしめるのが好都合である。該尺度と該試料ステージ標識とが所定時間に渡って表示され、該尺度と該試料ステージ標識とが表示されている時に、該試料ステージ標識に指を当接せしめて該尺度に沿って移動せしめると、指の移動に応じて該レボルバに対して該試料ステージが相対的に移動せしめられるのが好適である。
 該タッチスクリーンが無線で該制御手段に接続されている状態において、使用者の意図に反して無線接続が切断された時に、該レボルバに対して該試料ステージが所定距離を超えて接近している場合には、該制御手段は、該Z方向駆動を作動せしめて該レボルバに対して該試料ステージを所定距離離隔した位置に相対的に移動せしめるのが好ましい。レーザ光源を備えた顕微鏡においては、該タッチスクリーンが無線で該制御手段に接続されている状態において、使用者の意図に反して無線接続が切断された時に該レーザ光源が付勢されている場合には、該制御手段は、該レーザ光源を除勢するのが好都合である。
 本発明の顕微鏡においては、表示手段の表示面上に配設されたタッチスクリーンに適用される指の種々のジェスチャが検出され、これに応じて種々の作動制御が遂行され、かくして顕微鏡の種々の作動制御を充分容易に且つ精密に遂行される。
本発明に従って構成された顕微鏡の好適実施形態を示す簡略ブロック線図。 図1に図示する顕微鏡における基本作動制御様式を示すフローチャート。 図1に図示する顕微鏡における指のジェスチャに応じて作動制御様式を示すフローチャート。 図1に図示する顕微鏡における試料ステージ移動及び画像更新様式を示すフローチャート。 図1に図示する顕微鏡における倍率変化様式を示すフローチャート。 図1に図示する顕微鏡における倍率変化様式(デジタルズーム倍率が1より小さい場合)を示すフローチャート。 図1に図示する顕微鏡における試料ステージ移動及び画面更新様式(デジタルズーム倍率が1より小さい場合)を示すフローチャート。 図1に図示する顕微鏡における試料ステージ昇降様式を示すフローチャート。 倍率変化と対物レンズ交換との関係を示すグラフ。 図1の顕微鏡における表示手段に表示される広視野バッファ画像の一例を示す簡略線図。 試料ステージの昇降位置を示すための尺度及び試料ステージ標識を示す罐略図。
 図1には、本発明に従って構成されたラマン顕微鏡の主要構成要素が簡略に図示されている。図示のラマン顕微鏡は、試料2を載置するための試料ステージ4を含んでいる。この試料ステージ4はX方向(図1において左右方向)、Y方向(図1において紙面に垂直な方向)及びZ方向(図1において上下方向)に移動自在に装着されている。試料ステージ4には駆動手段6が付設されており、かかる駆動手段6の作動によって試料ステージ4はX方向、Y方向及びZ方向に適宜に移動せしめられる。従って、駆動手段6は試料ステージ4をX方向及びY方向に駆動するためのX及びY方向駆動手段を構成すると共に、試料ステージ4をZ方向に駆動するためのZ方向駆動手段を構成する。
 試料ステージ4の上方にはレボルバ10が回転自在に装着されており、このレボルバ10には倍率が異なった複数個の対物レンズ8、例えば倍率が5、10、20及び50である4個の対物レンズ8、が装備されている(図1にはそのうちの1個のみを図示している)。レボルバ10にはレボルバ駆動手段12が付設されており、レボルバ駆動手段12によってレボルバ10を適宜に回転せしめることによって、複数個の対物レンズ8のうちの所定の1個が試料ステージ4に対向して位置する作用位置に位置付けられる。図示の実施形態においては、上述したとおり試料ステージ4がZ方向に適宜に移動せしめられて対物レンズ8と試料ステージ4上の試料2とのZ方向間隔が適宜に設定されるが、所望ならば試料ステージ4をZ方向に移動することに代えて或いはこれに加えてレボルバ10をZ方向に適宜に移動せしめて対物レンズ8と試料ステージ4上の試料2とのZ方向間隔を適宜に設定することもできる。
 図示のラマン顕微鏡には、レーザ光源14、ビームエキスパンダ16、Y方向操作手段18、レンズ20、絞り24、レンズ26、ビームスプリッタ28、X方向操作ミラー30、レンズ32、レンズ34、レンズ40、入射スリット44を有する分光器46、及びCCDカメラから構成することができるラマン信号検出器48が配設されている。図示のラマン顕微鏡におけるこれらの構成要素の具体的構成及び作用は、特開2007-179002号公報の明細書及び図面(特に図1)に詳細に開示されているので、かかる記載に委ね本明細書においては説明を省略する。
 図1を参照して説明を続けると、レンズ40とレボルバ10との間にはビームスプリッタ50が配設され、このビームスプリッタ50に関連せしめてレンズ52及び撮像手段54が配設されている。ビームスプリッタ50及びレンズ52は、試料ステージ4上の試料2の画像を作用位置に位置付けられている対物レンズ8を介して撮像手段54に投射する画像投射光学手段を構成する。撮像手段54はCCDカメラから構成することができる。撮像手段54は上記ラマン信号検出器48と共に制御手段56に接続されている。メモリを内蔵したコンピュターから構成することができる制御手段56には表示手段58が付設されている。この表示手段58は液晶パネルの如き適宜の表示器から構成することができる。表示手段58の表示面上には、操作者の指の当接を感知するタッチスクリーン60が配設されていることが重要である。
 本発明に従って構成された顕微鏡においては、以下の詳細に説明するとおり、上記タッチスクリ-ン60に適用される操作者の指のジェスチャに応じて、制御手段56が顕微鏡の種々の作動を制御することが重要である。制御手段56と顕微鏡の種々の構成要素との信号の送受信は、適宜の信号線を介して遂行することができる。所望ならば、無線によって信号の送受信を遂行することもできる。図1と共に図2に図示するフローチャートを参照して説明を続けると、電源投入により顕微鏡の作動が開始されると、投入ステップn-1においては初期化が遂行されて、顕微鏡は予め設定された初期状態にせしめられる。次いで、ステップn-2において撮像手段54に投射されている画像、即ちリアルタイム画像が表示手段58の表示面に表示される。ステップn-3においては、タッチスクリーン60に操作者の指のジェスチャが適用されたか否かが判別される。操作者の指のジェスチャが適用された場合には、ステップn-4に移行し、以下に詳述するとおりにしてジェスチャに応じた作動制御が遂行される。ステップn-5においてはジェスチャに応じた作動制御が終了したか否かが判別される。
 次に、ジェスチャに応じた作動制御について詳述するが、試料ステージ4上の試料が表示手段58の表示面に表示される倍率を意味する「総合倍率」は、次の式で示される。
  (総合倍率)=(対物レンズ8の倍率)×(画像投射光学手段の倍率)
         ×(デジタルズーム倍率)×(撮像手段54の画像領
         域寸法と表示手段58の表示面寸法との比)
 尚、語句「デジタルズーム倍率」は撮像手段54からの画像全体と表示手段58の表示面上に実際に表示される部分との比であって、倍率1の場合には撮像手段54からの画像全体が表示され、倍率が1よりも大きい場合には撮像手段54からの画像の一部が拡大されて表示手段58の表示面に表示され、倍率が1よりも小さい場合には表示手段58の表示面よりも撮像手段54からの画像が小さくなる。
 図1と共に図3に図示するフローチャートを参照して説明すると、ステップs-1においては、タッチスクリーン60に適用されたジェスチャが判別される。そして、ジェスチャがドラッグの場合にはステップs-2に移行して試料ステージ4の移動が遂行され、ジェスチャがピンチイン或いはピンチアウトの場合にはステップs-3に移行して倍率変更が遂行され、ジェスチャがダブルタップの場合にはステップs-4に移行して対物レンズ8の焦点合わせ(オートフォーカス)が遂行され、ジェスチャがタップアンドホールドの場合にはステップs-5に移行して測定領域設定が遂行され、ジェスチャがダブルドラッグ場合にはステップs-6に移行して試料ステージ昇降が遂行される。
 図1と共に図4に図示するフローチャートを参照して試料ステージ4の移動について説明すると、デジタルズーム倍率が1以上である状態において、ステップt-1においては、撮像手段54からの画像信号が制御手段56の内蔵メモリに保存され、保存された画像信号に基づくメモリ画像が表示手段58の表示面に表示される。次いで、ステップt-2に移行し、指の移動距離が算出される。ステップt-3においては、表示手段58の表示面に表示されているメモリ画像が指の移動距離だけ移動せしめられると共に、試料ステージ4の移動が開始される。しかる後に、ステップt-4に移行してタッチスクリーン60から指が離脱されたか否か、即ちドラッグが終了したか否か、が判別される。ドラッグが終了していない場合には、ステップt-5に移行して試料ステージ4が指の移動距離に対応した距離に渡って移動されたか否かが判別される。そして、試料ステージ4の所要移動が完了していない場合には上記ステップt-2に戻る。このようにして試料ステージ4の移動完了を待たずに、所定時間間隔で指の移動距離を繰り返し検出して試料ステージ4の移動距離を更新する。従って、試料ステージ4の移動完了を待って次の移動を開始する場合(上記特許文献1及び2に開示の場合)に比べて、待ち時間なくして試料ステージ4を連続して移動せしめて試料の測定部位を迅速に探すことができる。試料ステージ4の所要移動が完了した場合には、ステップt-6に移行して制御手段56の内蔵メモリに保存されている画像信号を撮像手段54からの画像信号に更新する。従って、内臓メモリに保存されている画像信号も所定時間間隔で更新される。上記ステップt-4においてドラッグが終了した場合には、ステップt-7に移行して試料ステージ4が指の移動距離に対応した距離に渡って移動されるのを待って、表示手段58の表示面に表示される画像がメモリ画像からリアルタイム画像に切り替えられる。所望ならば、試料ステージ4の移動の際に、表示手段58の表示面に表示される画像をリアルタイム画像からメモリ画像に変換することに代えて、リアルタイム画像に重ねてメモリ画像を例えば半透明な状態で表示することもできる。
 図1と共に図5を参照して倍率変更様式を説明すると、ステップx-1においては、タッチスクリーン60に当接せしめられた2本の指の間隔を保存する。次いで、ステップx-2に移行して、2本の指の間隔が変化(ピンチイン或いはピンチアウト)せしめられると、間隔の縮小率或いは拡大率を算出し、算出した縮小率或いは拡大率に応じて撮像手段54からの画像信号を縮小或いは拡大して表示手段58の表示面上に表示する。縮小率或いは拡大率が閾値を越えると、レボルバ10の回転が開始されて作用位置に位置付けられる対物レンズ8の交換が開始される。対物レンズ8の交換に関する閾値には、図9に図示する如く、ヒステリシスを持たせて指の振動或いは指の位置の読取りノイズによって対物レンズ8が頻繁に交換されてしまうことを回避するのが望ましい。作用位置にある対物レンズ8が最低倍率のものであってデジタルズーム倍率が1より小さい場合には、図6に図示するフローチャートに従った作動制御が遂行される(これについては後述する)。ステップx-3においては、対物レンズ8の交換が開始されたか否かが判別される。対物レンズ8の交換が開始されていない場合にはステップx-4に移行し、ピンチイン或いはピンチアウトが終了し2本の指がタッチスクリーン60から離脱されたか否かが判別される。ピンチイン或いはピンチアウトが終了していない場合には上記ステップx-2に戻る。ピンチイン或いはピンチアウトが終了し2本の指がタッチスクリーン60から離脱された場合にはステップx-5に移行し、対物レンズ8の交換が実行されているか否かが判別される。対物レンズ8の交換が実行されている場合にはステップx-6に移行し、対物レンズ8の交換終了を待って、表示手段58の表示面に表示される画像をリアルタイム画像に切り替える。上記ステップx-3において対物レンズ8の交換が開始された場合には、ステップx-7に移行して、対物レンズ8の交換開始時における撮像手段54からの画像信号を制御手段56の内蔵メモリに保存し、表示手段58の表示面に表示されている画像がメモリ画像に切り替わっていない場合にはメモリ画像に切り替える。従って、対物レンズ8の交換中においては、表示手段58の表示面にはメモリ画像がデジタルズームされて表示される。次いで、ステップx-8に移行して対物レンズ8の交換が終了したか否かが判別される。対物レンズ8の交換が終了したか否かが判別される。対物レンズ8の交換が終了していない場合には上記ステップx-4に移行する。対物レンズ8の交換が終了した場合にはステップx-9に移行する。ステップx-9においては、制御手段56の内蔵メモリに予め保存されている同焦点距離の誤差及び視野中心位置の誤差に基いて、試料ステージ4がZ方向並びにX及びY方向に移動せしめられてピント調整され、そしてまた表示手段58の表示面上の画像がリアルタイム画像に切り替えられる。しかる後に上記ステップx-4に移行する。
 デジタルズーム倍率が1よりも小さい場合おける倍率変更について説明すると、次のとおりである。ピンチインによる縮小によって最低倍率の対物レンズ8に交換された後に更にピンチインによる縮小が実行された場合、撮像手段54からの画像信号による画像寸法が表示手段58の表示面の寸法よりも小さくなる。この場合には、図10に図示する如く、表示手段58の表示面における、撮像手段54から画像信号に基づく表示画像Aの外側領域に、所要追加画像B1乃至8を付加した広視野バッファ画像を表示する。図1と共に図6に図示するフローチャートを参照して説明すると、最低倍率の対物レンズ8に交換された後に更にピンチインによる縮小が実行された場合、ステップy-1において、撮像手段54からの画像信号を制御手段56の内蔵メモリに保存し、リアルタイム画像表示を中止して表示手段58の表示面に表示される画像を広視野バッファ画像(即ち、リアルタイム画像の周囲にこれに隣接する追加画像が表示される画像)に切り替える。この広視野バッファ画像において、メモリ画像を中央に表示し、その周囲領域における追加画像信号が未取得の部位は例えば灰色にする。次いで、ステップy-2に移行して、上述した様式と同様にしてピンチイン(或いはデジタルズーム倍率が既に1よりも小さい状態でのピンチアウト)による画像の縮小率(或いは拡大率)を算出する。ステップy-3においては、メモリ画像を所要縮小倍率で縮小(或いは所用拡大倍率で拡大)して表示する。ステップy-4においては、メモリ画像の周囲に表示すべき追加画像の未取得領域が存在するか否かが判別される。そして、未取得領域が存在する場合には、ステップy-5に移行する。ステップy-5においては、試料ステージ4を適宜移動せしめてメモリ画像に隣接する領域の画像が撮像手段54に投射されるようにして撮像手段54からの追加画像信号を保存し、保存したメモリ追加画像を表示手段58の表示面上の所要部位に表示する。かかる作動を中心のメモリ画像の周囲に必要な全ての追加画像について繰り返し遂行し、かくして表示手段58の表示面上に広視野バッファ画像を表示する。必要追加画像信号の取得が完了、即ち必要追加画像信号の未取得領域が存在しなくなると、ステップy-6に移行してピンチイン(或いはピンチアウト)が終了、即ち2本の指がタッチスクリーン60から離脱されたか否かが判別される。ピンチイン(或いはピンチアウト)が終了していない場合には上記ステップy-2に戻る。ピンチイン(或いはピンチアウト)が終了した場合にはステップy-7に移行する。ステップy-7においては、メモリ画像が表示手段58の表示面の中央に位置する状態に試料ステ-ジ4を戻し、そして試料ステージ4の戻し完了を待って、広視野画像の中央領域の画像をリアルタイム画像に切り替える。
 次に、図1と共に図7を参照して、デジタルズーム倍率が1より小さい場合における試料ステージの移動様式を説明する。タッチスクリーン60の指が当接されると試料ステージ4の移動手順が開始され、ステップz-1においては、撮像手段54からの画像信号を制御手段56の内蔵メモリに保存し、リアルタイム画像表示を中止して表示手段58の表示面に表示される画像を広視野バッファ画像に切り替える。ステップz-2においては、指の移動距離が算出される。ステップz-3においては、指の移動距離に応じて広視野バッファ画像が移動せしめられる。ステップz-4においては、メモリ画像の周囲に表示すべき追加画像の未取得領域が存在するか否かが判別される。そして、未取得領域が存在する場合には、ステップz-5に移行する。ステップz-5においては、試料ステージ4を適宜移動せしめてメモリ画像に隣接する領域の画像が撮像手段54に投射されるようにして撮像手段54からの追加画像信号を保存し、保存したメモリ追加画像を表示手段58の表示面上の所要部位に表示する。かかる作動を中心のメモリ画像の周囲に必要な全ての追加画像について繰り返し遂行し、かくして表示手段58の表示面上に広視野バッファ画像を表示する。必要追加画像信号の取得が完了、即ち必要追加画像信号の未取得領域が存在しなくなると、ステップz-6に移行して指がタッチスクリーン60から離脱されたか否か、即ちドラッグが終了したか否か、が判別される。ドラッグが終了していない場合には上記ステップz-2に戻る。ドラッグが終了した場合にはステップz-7に移行する。ステップz-7においては、撮像手段54からの画像が表示手段58の表示面の中央に位置する状態に試料ステ-ジ4を移動し、そして試料ステージ4の移動完了を待って、広視野画像の中央領域の画像をリアルタイム画像に切り替える。
 図1及び図3を参照して説明すると、タッチスクリーン60の同位置が指で2回続けて当接(ダブルタップ)されると、制御手段56は、試料ステージ4上の試料2に対する対物レンズ8の焦点合わせ(オートフォーカス)を遂行する。この焦点合わせは、例えば指が当接された位置及びその近傍のコントラストを検出し、かかるコントラストに基いて遂行することができる。所望ならば、指が当接された位置にレーザ光線を照射し、レーザ光線が照射された状態における試料2の所要領域のコントラストに基いて焦点合わせを遂行することもできる。
 図1及び図3を参照して説明を続けると、図示の実施形態においては、タッチスクリーン60に指の特定のジェスチャが適用される、例えば指を当接せしめて所定時間以上維持される(タッチアンホールド)、と制御手段56は、ラマン測定領域設定モードに設定する。そして、このラマン測定モードにおいては、タッチスクリーン60に適用される指のジェスチャに応じてラマン測定領域を設定する。例えば、指が当接された位置自体をラマン測定領域として設定することができる。或いは、当接された指が移動された場合には、この移動に応じてラマン測定領域を設定することができる。例えば、当接された指がドラッグされた場合、当初の当接位置とドラッグ最終位置とを対角点とした矩形領域を測定領域とすることができる。ドラッグ中に表示されているリアルタイム画像ハシに達し或いは端を越えた場合には、上述した広視野バッファ画像に切り換え、広視野バッファ画像を更新しながら画像を移動せしめて、最低倍率の対物レンズの視野よりも広い領域を測定領域に設定することもできる。或いは、指が所要領域を囲むように移動された場合には囲まれた所要領域をラマン測定領域として設定することができる。
 図8を参照して試料ステージ昇降様式を説明すると、ステップm-1においては、タッチスクリーン60に当接された2本の指の間隔を保存する。次いで、ステップm-2に移行し、2本の指の間隔が実質上変動されることなく移動された場合(2本の指の間隔が変化した場合には図5に示すステップx-2に移行する)には、移動方向(上方又は下方)及び移動量が検出される。次いでステップm-3に移行し、表示手段58の例えば片側部に図11に図示する通りの尺度62及び試料ステージ標識64を所定時間に渡って表示する。試料ステージ標識64は試料ステージ4の上下方向位置を示し、尺度62はレボルバ10と試料ステージ4との上下方向間隔を示している。次のステップm-4においては、2本の指の平行移動に応じて駆動手段6を作動せしめて試料ステージ4を昇降動する。更に詳しくは、2本の指が所定方向即ち上方へ平行移動せしめられた場合には試料ステージ4を上昇せしめ、2本の指が反対方向即ち下方に平行移動せしめられた場合には試料ステージ4を下降せしめる。試料ステージ4の上下方向位置は適宜の検出手段(図示していない)によって検出され、試料ステージ4の昇降に応じて試料ステージ標識64が尺度62に沿って昇降せしめられる。次いでステップm-5に移行し、2本の指の平行移動が終了し2本の指がタッチスクリーン60から離脱されたか否かが判別される。平行移動が終了していない場合には、上記ステップm-2に戻る。表示手段58に尺度62及び試料ステージ標識64が表示されている状態においては、試料ステージ標識64に指を当接せしめ、試料ステージ標識64を昇降動することによって試料ステージ4を昇降動せしめることもできる。
 上述したとおり、タッチスクリーン60と制御手段56とは無線で接続することもできる。この場合には、使用者の意図に反して無線接続が切断された時にレボルバト10と試料ステージ4とが所定距離を超えて接近している場合に、制御手段56は自動的に試料ステージ4を下降せしめてレボルバ10から試料ステージ4を所定距離離隔せしめ、かくして安全性を確保することが望ましい。また、レーザ光源14が付勢されている場合にはこれを除勢するのが望ましい。
   2:試料
   4:試料ステージ
   6:駆動手段(X及びY方向駆動手段、Z方向駆動手段)
   8:対物レンズ
  10:レボルバ
  12:レボルバ駆動手段
  54:撮像手段
  56:制御手段
  58:表示手段
  60:タッチスクリーン

Claims (20)

  1.  X及びY方向に移動自在に装着された試料ステージ、該試料ステージをX及びY方向に駆動するX及びY方向駆動手段、倍率が異なった複数個の対物レンズを含むレボルバ、該試料ステージと該レボルバとをZ方向に相対的移動せしめるためのZ方向駆動手段、該複数個の対物レンズのうちの任意の1個を選択的に該試料ステージに対向する作用位置に位置付けるためのレボルバ駆動手段、撮像手段、該試料ステージ上に位置せしめられた試料の画像を該作用位置に位置付けられた対物レンズを通して該撮像手段に投射する画像投射光学手段、表示手段、該表示手段の表示面上に配設されたタッチスクリーン、及び制御手段を具備する顕微鏡にして、
     該制御手段は、該タッチスクリーンに適用される操作者の指のジェスチャに応じて、該X及びY方向駆動手段の作動、該Z方向駆動手段の作動、該レボルバ駆動手段の作動、及び該表示手段における表示倍率を制御する、ことを特徴とする顕微鏡。
  2.  該タッチスクリーンに1本の指が当接されると、該制御装置は、該撮像手段からの画像信号を内蔵メモリに保存し、該表示手段の表示面上に保存した画像信号に基づくメモリ画像を表示せしめ、指が該タッチスクリーンから離脱されることなく移動されると、指の移動に応じて該表示手段の表示面上において該メモリ画像を移動せしめると共に、該X及びY方向駆動手段を作動せしめて該試料ステージをX及び/又はY方向に移動せしめる、請求項1記載の顕微鏡。
  3.  該制御手段は、該タッチスクリーンに指が当接されてから該タッチスクリーンから指が離脱されるまで、所定時間間隔で指の移動を検出し指の位置に基いて該メモリ画像を更新し、そして指の移動が停止されて指が該タッチスクリーンから離脱され、該試料ステージの移動が終了すると、該表示手段の表示面上に表示される画像を該撮像手段に投射されているリアルタイム画像にせしめる、請求項2記載の顕微鏡。
  4.  該タッチスクリーンに2本の指が同時に当接されると、該制御手段は、2本の指の間隔を記憶し、該タッチスクリーンから2本の指が離脱されることなく2本の指の間隔が変化せしめられると、該制御手段は、2本の指の間隔の変化率に応じて該表示手段の表示面上に表示される画像の倍率を変化せしめる、請求項1から3までのいずれかに記載の顕微鏡。
  5.  2本の指の間隔の変化率が所定閾値を越えると、該制御手段は、該レボルバ駆動手段を作動せしめて該試料ステージに対向する該作用位置に位置する対物レンズを変更する、請求項4記載の顕微鏡。
  6.  該レボルバ駆動手段の作動を開始する際には、該制御手段は、該撮像手段からの画像信号を該内蔵メモリに保存し、該レボルバ駆動手段の作動中においては該表示手段の該表示面上には該内臓メモリに保存した画像信号に基づくメモリ画像を2本の指の変化率に応じた倍率で表示せしめる、請求項5記載の顕微鏡。
  7.  対物レンズの変更が終了すると、該制御手段は、該内蔵メモリに予め保存した同焦点距離及び視野中心位置に関する情報に基いて、該X方向及びY方向駆動手段及び/又は該Z方向駆動手段を作動せしめてピント調整し、しかる後に該表示手段の表示面上に表示される画面を該撮像手段に投射されているリアルタイム画像にせしめる、請求項5又は6記載の顕微鏡。
  8.  最低倍率の対物レンズが作用位置に位置せしめられた後に該表示手段の該表示面上に表示される画像が縮小された場合、該制御手段は、該表示手段の該表示面上におけるリアルタイム画像の外側の領域にリアルタイム画像に続く追加画像が付加された広視野バッファ画像を表示せしめる、請求項1から7までのいずれかに記載の顕微鏡。
  9.  該追加画像が該内蔵メモリに記憶されていない場合には、該X及びY方向移動手段を作動せしめて該試料ステージをX及びY方向に移動して所要追加画像信号を該内蔵メモリに保存し、しかる後に該試料ステージを初期位置に戻す、請求項8記載の顕微鏡。
  10.  該表示手段の該表示面上に該広視野バッファ画像が表示せしめられている状態において、該タッチスクリーンに1本の指が当接されると、該制御装置は、該広視野バッファ画像信号を該内蔵メモリに保存し、指が該タッチスクリーンから離脱されることなく移動されると、指の移動に応じて該表示手段の表示面上において該広視野バッファ画像を移動せしめると共に、該X及びY方向駆動手段を作動せしめて該試料ステージをX及び/又はY方向に移動せしめる、請求項8又は9記載の顕微鏡。
  11.  該タッチスクリーンの同位置に指が2回続けて当接されると、該制御手段は、該同位置及びその近傍のコントラストに基づいて該Z方向駆動手段を作動せしめて、該試料テーブル上の試料に対して作用位置に位置付けられている対物レンズの焦点合わせを遂行する、請求項1から10までのいずれかに記載の顕微鏡。
  12.  ラマン顕微鏡であり、該タッチスクリーンに操作者の指の特定のジェスチャが適用されると、該制御手段は、ラマン測定領域設定モードに設定する、請求項1から11までのいずれかに記載の顕微鏡。
  13.  該特定のジェスチャは指を当接せしめて所定時間維持することであり、該制御手段は、指が当接された部位を測定領域として設定する、請求項12記載の顕微鏡。
  14.  該測定領域設定モードに設定された後に、該タッチスクリーンに指が当接され該タッチスクリーンから離脱されることなく移動されると、該制御手段は指の移動に対応して測定領域を設定する、請求項12記載の顕微鏡。
  15.  該タッチスクリーンに2本の指が同時に当接され、該タッチスクリーンから離脱されることなく平行移動せしめられると、該制御手段は、2本の指の平行移動量に応じて該Z方向駆動手段を作動せしめて該レボルバに対して該資料ステージをZ方向に相対的に移動せしめる、請求項1から14までのいずれかに記載の顕微鏡。
  16.  2本の指が所定方向に平行移動せしめられると、該制御手段は、該レボルバに対して接近する方向に該試料ステージを相対的に移動せしめ、2本の指が反対方向に平行移動せしめられると、該制御手段は、該レボルバに対して離隔する方向に該試料ステージを移動せしめる、請求項15記載の顕微鏡。
  17.  該タッチスクリーンに2本の指が同時に当接され、該タッチスクリーンから離脱されることなく平行移動せしめられると、該制御手段は、該表示手段上に該レボルバに対する該試料ステージの相対的位置を示すための尺度と試料ステージ標識とを表示し、該レボルバに対する該試料ステージに相対的移動に応じて該試料ステージ標識を該尺度に沿って移動せしめる、請求項15または16記載の顕微鏡。
  18.  該尺度と該試料ステージ標識とが所定時間に渡って表示され、該尺度と該試料ステージ標識とが表示されている時に、該試料ステージ標識に指を当接せしめて該尺度に沿って移動せしめると、指の移動に応じて該レボルバに対して該試料ステージが相対的に移動せしめられる、請求項15から17までのいずれかに記載の顕微鏡。
  19.  該タッチスクリーンが無線で該制御手段に接続されている状態において、使用者の意図に反して無線接続が切断された時に、該レボルバに対して該試料ステージが所定距離を超えて接近している場合には、該制御手段は、該Z方向駆動を作動せしめて該レボルバに対して該試料ステージを所定距離離隔した位置に相対的に移動せしめる、請求項1から18までのいずれかに記載の顕微鏡。
  20.  レーザ光源を備えており、該タッチスクリーンが無線で該制御手段に接続されている状態において、使用者の意図に反して無線接続が切断された時に該レーザ光源が付勢されている場合には、該制御手段は、該レーザ光源を除勢する、請求項1から19までのいずれかに記載の顕微鏡。
PCT/JP2012/057277 2011-03-23 2012-03-22 顕微鏡 WO2012128305A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2013505997A JP5936008B2 (ja) 2011-03-23 2012-03-22 顕微鏡
EP12761333.9A EP2690482B1 (en) 2011-03-23 2012-03-22 Microscope
US14/006,500 US9582088B2 (en) 2011-03-23 2012-03-22 Microscope

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-064256 2011-03-23
JP2011064256 2011-03-23

Publications (1)

Publication Number Publication Date
WO2012128305A1 true WO2012128305A1 (ja) 2012-09-27

Family

ID=46879446

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/057277 WO2012128305A1 (ja) 2011-03-23 2012-03-22 顕微鏡

Country Status (4)

Country Link
US (1) US9582088B2 (ja)
EP (1) EP2690482B1 (ja)
JP (1) JP5936008B2 (ja)
WO (1) WO2012128305A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018112573A (ja) * 2017-01-06 2018-07-19 オリンパス株式会社 顕微鏡システム
JP2019074669A (ja) * 2017-10-17 2019-05-16 株式会社キーエンス 拡大観察装置
JP2022516855A (ja) * 2018-12-27 2022-03-03 ライカ インストゥルメンツ (シンガポール) プライヴェット リミテッド デジタル顕微鏡システム、デジタル顕微鏡システムを動作させるための方法およびコンピュータプログラム

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130271575A1 (en) * 2012-04-11 2013-10-17 Zspace, Inc. Dynamically Controlling an Imaging Microscopy System
WO2016061563A1 (en) 2014-10-17 2016-04-21 The Regents Of The University Of California Automated hardware and software for mobile microscopy
EP3285107B2 (en) * 2016-08-16 2024-02-28 Leica Instruments (Singapore) Pte. Ltd. Surgical microscope with gesture control and method for a gesture control of a surgical microscope
PL3623798T3 (pl) * 2018-09-13 2022-03-28 Euroimmun Medizinische Labordiagnostika Ag Sposób i urządzenie do wykrywania i przedstawiania obrazu immunofluorescencyjnego próbki biologicznej
EP3674773B1 (en) * 2018-12-27 2023-08-02 Leica Instruments (Singapore) Pte. Ltd. Digital microscope system, method for operating the same and computer program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08223563A (ja) * 1995-02-15 1996-08-30 Meitec Corp 観察装置の試料台制御方式
JPH09197287A (ja) 1996-01-23 1997-07-31 Nikon Corp 電動顕微鏡
JP2001059940A (ja) 1999-08-24 2001-03-06 Nikon Corp 顕微鏡及び記録媒体
JP2007179002A (ja) 2005-12-02 2007-07-12 Nano Photon Kk 光学顕微鏡及びスペクトル測定方法
JP2012108511A (ja) * 2010-11-15 2012-06-07 Leica Microsystems (Schweiz) Ag タッチスクリーンを有する顕微鏡

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5161052B2 (ja) * 2008-12-04 2013-03-13 オリンパス株式会社 顕微鏡システム、標本観察方法およびプログラム
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US20090138800A1 (en) * 2007-11-23 2009-05-28 Mckesson Financial Holdings Limited Apparatus, method and computer-readable storage medium for directing operation of a software application via a touch-sensitive surface
EP2108328B2 (de) * 2008-04-09 2020-08-26 Brainlab AG Bildbasiertes Ansteuerungsverfahren für medizintechnische Geräte
EP2288883B1 (en) * 2008-05-28 2021-08-18 PerkinElmer Health Sciences, Inc. Optical device and method for use in spectroscopy
US8493344B2 (en) * 2009-06-07 2013-07-23 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
JP5306088B2 (ja) * 2009-07-14 2013-10-02 オリンパス株式会社 顕微鏡システム
JP5468892B2 (ja) * 2009-12-22 2014-04-09 オリンパス株式会社 顕微鏡コントローラ及び顕微鏡コントローラを備える顕微鏡システム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08223563A (ja) * 1995-02-15 1996-08-30 Meitec Corp 観察装置の試料台制御方式
JPH09197287A (ja) 1996-01-23 1997-07-31 Nikon Corp 電動顕微鏡
JP2001059940A (ja) 1999-08-24 2001-03-06 Nikon Corp 顕微鏡及び記録媒体
JP2007179002A (ja) 2005-12-02 2007-07-12 Nano Photon Kk 光学顕微鏡及びスペクトル測定方法
JP2012108511A (ja) * 2010-11-15 2012-06-07 Leica Microsystems (Schweiz) Ag タッチスクリーンを有する顕微鏡

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2690482A4

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018112573A (ja) * 2017-01-06 2018-07-19 オリンパス株式会社 顕微鏡システム
JP2019074669A (ja) * 2017-10-17 2019-05-16 株式会社キーエンス 拡大観察装置
JP7023667B2 (ja) 2017-10-17 2022-02-22 株式会社キーエンス 拡大観察装置
JP2022516855A (ja) * 2018-12-27 2022-03-03 ライカ インストゥルメンツ (シンガポール) プライヴェット リミテッド デジタル顕微鏡システム、デジタル顕微鏡システムを動作させるための方法およびコンピュータプログラム
JP7346577B2 (ja) 2018-12-27 2023-09-19 ライカ インストゥルメンツ (シンガポール) プライヴェット リミテッド デジタル顕微鏡システム、デジタル顕微鏡システムを動作させるための方法およびコンピュータプログラム

Also Published As

Publication number Publication date
EP2690482A1 (en) 2014-01-29
EP2690482A4 (en) 2014-10-01
EP2690482B1 (en) 2021-09-08
US20140063226A1 (en) 2014-03-06
JPWO2012128305A1 (ja) 2014-07-24
JP5936008B2 (ja) 2016-06-15
US9582088B2 (en) 2017-02-28

Similar Documents

Publication Publication Date Title
JP5936008B2 (ja) 顕微鏡
JP6576171B2 (ja) 映像処理装置、映像処理方法、及びプログラム
JP5306088B2 (ja) 顕微鏡システム
US8339702B2 (en) Microscope system, storage medium storing control program, and control method
JP6300606B2 (ja) 顕微鏡システム
WO2011125985A1 (ja) 顕微鏡コントローラ及び該顕微鏡コントローラを有する顕微鏡システム
US10473909B2 (en) Microscope system having touch panel and electronic stage driving amount based on pressure detection
JP2007034050A (ja) 観察装置及びその制御方法
JP5192965B2 (ja) 顕微鏡システム、該制御プログラム、及び該制御方法
JP2010079035A5 (ja)
JP4712334B2 (ja) 顕微鏡装置、顕微鏡ユニット、プログラム
JP2006078638A (ja) 光学機器
WO1996018924A1 (fr) Microscope pourvu d'organes d'observation et de prise de vues
JP2012150142A (ja) 顕微鏡制御装置、顕微鏡システム及び該制御方法
JP2004177782A (ja) 拡大観察装置、拡大画像観察方法、拡大観察装置操作プログラムおよびコンピュータで読み取り可能な記録媒体
CN109387933B (zh) 显微镜
JP2009237267A (ja) 顕微鏡システム、顕微鏡システムの制御方法、及びプログラム
JP2010256724A (ja) 観察装置
JP5015736B2 (ja) 顕微鏡の焦準装置
JP2008175896A (ja) 画像表示装置
JP2019078904A (ja) 顕微鏡システム
JP5102081B2 (ja) 顕微鏡装置、その駆動制御装置、プログラム
JP2022139704A (ja) 撮像装置及びそれを有するカメラシステム
JP2019090907A (ja) レンズ装置および撮像装置
JP2008216632A (ja) 投射型表示装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12761333

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013505997

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2012761333

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 14006500

Country of ref document: US