JP2010266278A - Microscope - Google Patents
Microscope Download PDFInfo
- Publication number
- JP2010266278A JP2010266278A JP2009116598A JP2009116598A JP2010266278A JP 2010266278 A JP2010266278 A JP 2010266278A JP 2009116598 A JP2009116598 A JP 2009116598A JP 2009116598 A JP2009116598 A JP 2009116598A JP 2010266278 A JP2010266278 A JP 2010266278A
- Authority
- JP
- Japan
- Prior art keywords
- sensitivity
- unit
- channel
- channels
- group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Microscoopes, Condenser (AREA)
Abstract
Description
本発明は顕微鏡に関するものである。 The present invention relates to a microscope.
従来、試料から発せられた蛍光を分光素子によってスペクトル成分に分割し、分割したスペクトル成分を、複数のチャネルを有する多チャネル光検出器によってそれぞれ検出する顕微鏡が知られている(例えば、特許文献1および2参照)。 Conventionally, a microscope is known in which fluorescence emitted from a sample is divided into spectral components by a spectroscopic element, and the divided spectral components are detected by a multi-channel photodetector having a plurality of channels (for example, Patent Document 1). And 2).
ところで、特許文献1および2に開示されている顕微鏡では、多チャネル光検出器への印加電圧を調整することで、全てのチャネルの感度が一括して調整されるようになっていた。したがって、多重染色観察のように複数種の蛍光を観測する場合には、いずれかの蛍光の強度を高くすると、他の蛍光においてスペクトル成分が飽和してしまうことがある。その結果、他の蛍光におけるスペクトル形状が変化してしまい、精度良く観察を行うことができないという不都合があった。
By the way, in the microscopes disclosed in
一方、各蛍光におけるスペクトル形状を維持したままゲインを調整するためには、各チャネルの感度を1つずつ調整しなければならず、その作業が非常に煩雑となってしまうという不都合があった。 On the other hand, in order to adjust the gain while maintaining the spectrum shape in each fluorescence, the sensitivity of each channel has to be adjusted one by one, which has the disadvantage that the operation becomes very complicated.
本発明は、上記事情に鑑みてなされたもので、複数種の蛍光を検出する場合において、検出する蛍光のスペクトル形状を維持するとともに、各チャネルの感度調整を容易に行うことができる顕微鏡を提供することを目的とする。 The present invention has been made in view of the above circumstances, and provides a microscope capable of maintaining the spectral shape of the fluorescence to be detected and easily adjusting the sensitivity of each channel when detecting multiple types of fluorescence. The purpose is to do.
上記目的を達成するために、本発明は以下の手段を採用する。
本発明は、標本において発生した光を集光する対物レンズと、該対物レンズにより集光された光をスペクトル成分に分光する分光素子と、該分光素子により分光されたスペクトル成分をそれぞれ検出する複数のチャネルを有する光検出器と、該光検出器の各チャネルの感度を調節する感度調節部とを備え、該感度調節部が、検出する光の波長範囲に関する情報に基づいて前記チャネルを複数のグループに分け、グループ内の全ての前記チャネルが同一の感度となるように、前記チャネルの感度をグループ毎に一括して調節する顕微鏡を採用する。
In order to achieve the above object, the present invention employs the following means.
The present invention provides an objective lens that collects light generated in a specimen, a spectroscopic element that splits light collected by the objective lens into spectral components, and a plurality of spectral components that detect spectral components dispersed by the spectroscopic elements. And a sensitivity adjustment unit that adjusts the sensitivity of each channel of the photodetector, and the sensitivity adjustment unit assigns the channels to a plurality of channels based on information on the wavelength range of light to be detected. The microscope is divided into groups, and the sensitivity of the channels is collectively adjusted for each group so that all the channels in the group have the same sensitivity.
本発明によれば、標本において発生して対物レンズにより集光された光が、分光素子によりスペクトル成分に分光され、分光されたスペクトル成分は、複数のチャネルを有する光検出器によりそれぞれ検出される。この場合において、光検出器のチャネルは、感度調節部により、検出する光の波長範囲に関する情報に基づいて複数のグループに分けられ、グループ内の全てのチャネルが同一の感度となるように、その感度がグループ毎に一括して調節される。 According to the present invention, the light generated in the specimen and collected by the objective lens is split into spectral components by the spectroscopic element, and the spectral components that are split are detected by the photodetectors having a plurality of channels, respectively. . In this case, the channels of the photodetector are divided into a plurality of groups based on the information on the wavelength range of the light to be detected by the sensitivity adjustment unit, so that all the channels in the group have the same sensitivity. Sensitivity is collectively adjusted for each group.
これにより、グループ化されたチャネル群毎、すなわち、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。例えば、複数種の蛍光を同時に観察する場合においても、各蛍光のスペクトル成分を飽和させることなく、各蛍光の強度をそれぞれ別個に調整することができ、精度良く観察することができる。また、各チャネルの感度を個別に調節する必要性を排除することができ、その調節作業を容易にすることができる。 Thereby, the intensity | strength can be adjusted, maintaining a spectrum shape for every grouped channel group, ie, for every wavelength range of the light to detect. For example, even when observing a plurality of types of fluorescence at the same time, the intensity of each fluorescence can be individually adjusted without saturating the spectral components of each fluorescence, and can be observed with high accuracy. Further, it is possible to eliminate the necessity of individually adjusting the sensitivity of each channel, and the adjustment work can be facilitated.
上記発明において、前記感度調節部が、前記光検出器に印加される電圧を前記チャネルのグループ毎に調節することとしてもよい。
感度調節部によって、光検出器に印加される電圧をグループ毎に調節することで、チャネルの感度をグループ毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。
In the above invention, the sensitivity adjustment unit may adjust the voltage applied to the photodetector for each group of the channels.
By adjusting the voltage applied to the photodetector for each group by the sensitivity adjustment unit, the sensitivity of the channel can be adjusted for each group, while maintaining the spectral shape for each wavelength range of light to be detected. , Its strength can be adjusted.
上記発明において、前記光検出器により検出する光の輝度情報を積算する積算部を備え、前記感度調節部が、前記積算部の積算時間を前記チャネルのグループ毎に調節することとしてもよい。
感度調節部によって積算部の積算時間をグループ毎に調節することで、各チャネルにより検出した輝度情報をグループ毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。
In the above invention, an integration unit that integrates luminance information of light detected by the photodetector may be provided, and the sensitivity adjustment unit may adjust the integration time of the integration unit for each group of the channels.
By adjusting the integration time of the integration unit for each group by the sensitivity adjustment unit, the luminance information detected by each channel can be adjusted for each group, while maintaining the spectrum shape for each wavelength range of the light to be detected , Its strength can be adjusted.
上記発明において、前記光検出器により検出する光の輝度情報を増幅する増幅部を備え、前記感度調節部が、前記増幅部の増幅率を前記チャネルのグループ毎に調節することとしてもよい。
感度調節部によって増幅部の増幅率をグループ毎に調節することで、各チャネルにより検出した輝度情報をグループ毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。
In the above invention, an amplification unit that amplifies luminance information of light detected by the photodetector may be provided, and the sensitivity adjustment unit may adjust the amplification factor of the amplification unit for each group of the channels.
By adjusting the amplification factor of the amplification unit for each group by the sensitivity adjustment unit, it is possible to adjust the luminance information detected by each channel for each group, while maintaining the spectrum shape for each wavelength range of light to be detected , Its strength can be adjusted.
上記発明において、複数の前記チャネルのグループに対して、グループ毎に前記感度調節部の感度調整値を設定可能な入力部を備えることとしてもよい。
このようにすることで、GUI(Graphical User Interface)等の入力部によって、複数のチャネルのグループに対して、グループ毎に感度調節部の感度調整値を設定し、各チャネルの感度をグループ毎に調節することができる。
The said invention WHEREIN: It is good also as providing the input part which can set the sensitivity adjustment value of the said sensitivity adjustment part for every group with respect to the group of the said several channel.
In this way, the sensitivity adjustment value of the sensitivity adjustment unit is set for each group for a group of a plurality of channels by an input unit such as GUI (Graphical User Interface), and the sensitivity of each channel is set for each group. Can be adjusted.
上記発明において、前記チャネル全体の感度を調節する全体感度調節部と、前記光検出器により検出する光の輝度情報を積算する積算部と、前記積算部により積算された輝度情報が所定値以上となる最大積算時間において、いずれかのスペクトル成分が飽和するような前記チャネル全体の最大感度を記憶する記憶部とを備え、前記感度調節部は、前記チャネル全体の感度が、前記記憶部に記憶されている最大感度よりも下がった場合には、前記チャネルのグループ毎に前記積算部の積算時間を最大化させることとしてもよい。 In the above invention, an overall sensitivity adjustment unit that adjusts sensitivity of the entire channel, an integration unit that integrates luminance information of light detected by the photodetector, and luminance information integrated by the integration unit is equal to or greater than a predetermined value. A storage unit that stores the maximum sensitivity of the entire channel such that any one of the spectral components is saturated at the maximum integration time, and the sensitivity adjustment unit stores the sensitivity of the entire channel in the storage unit. When the sensitivity falls below the maximum sensitivity, the integration time of the integration unit may be maximized for each group of the channels.
感度調節部によって積算部の積算時間をグループ毎に調節することで、各チャネルにより検出した輝度情報をグループ毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。この場合において、チャネル全体の感度が、いずれかのスペクトル成分が飽和する最大感度よりも下がった場合に、チャネルのグループ毎に積算部の積算時間を最大化させることで、積算された輝度情報のS/N比を向上させることができる。 By adjusting the integration time of the integration unit for each group by the sensitivity adjustment unit, the luminance information detected by each channel can be adjusted for each group, while maintaining the spectrum shape for each wavelength range of the light to be detected , Its strength can be adjusted. In this case, when the sensitivity of the entire channel falls below the maximum sensitivity at which one of the spectral components is saturated, the integration time of the integrated luminance information is maximized by maximizing the integration time for each channel group. The S / N ratio can be improved.
上記発明において、前記チャネルにより検出されたスペクトル成分のいずれかが所定の閾値を超えたときに、前記感度調節部が前記チャネルの感度をグループ毎に調節することとしてもよい。
このようにすることで、スペクトル成分のいずれかが所定の閾値を超えたとき、例えばスペクトル成分のいずれかが飽和したときに、チャネルの感度が調節されるので、いずれのスペクトル成分を飽和させることなく、検出される光の強度を調整することができる。
In the above invention, the sensitivity adjustment unit may adjust the sensitivity of the channel for each group when any of the spectral components detected by the channel exceeds a predetermined threshold.
In this way, when one of the spectral components exceeds a predetermined threshold, for example, when one of the spectral components is saturated, the sensitivity of the channel is adjusted, so that any spectral component is saturated. And the intensity of the detected light can be adjusted.
上記発明において、グループ毎の前記チャネルの感度と輝度情報とを対応付けて記憶する記憶部を備えることとしてもよい。
各グループのチャネルの感度と輝度情報とを対応付けて記憶部に記憶させておくことで、検出する光の波長範囲毎にチャネルの感度を再現することができる。また、波長範囲毎の輝度情報とその感度から、全てのチャネルを同一の感度にした場合の標本の画像を生成することができる。
In the above invention, a storage unit that stores the sensitivity and luminance information of the channel for each group in association with each other may be provided.
By storing the sensitivity of each group of channels and the luminance information in the storage unit in association with each other, the sensitivity of the channels can be reproduced for each wavelength range of light to be detected. Further, from the luminance information for each wavelength range and its sensitivity, it is possible to generate a sample image when all channels have the same sensitivity.
上記発明において、前記光検出器により検出された光に基づいて画像を生成する画像生成部と、該画像生成部により生成された画像を表示する表示部と、該表示部に表示された画面において所定の範囲を設定する設定部とを備え、前記感度調節部が、前記設定部により設定された所定の範囲において前記チャネルの感度を調節することとしてもよい。 In the above invention, in the image generation unit that generates an image based on the light detected by the photodetector, the display unit that displays the image generated by the image generation unit, and the screen displayed on the display unit A setting unit configured to set a predetermined range, and the sensitivity adjustment unit may adjust the sensitivity of the channel within a predetermined range set by the setting unit.
このようにすることで、表示部に表示された画面において設定部により注目する領域(所定の範囲)を設定し、この注目する領域(所定の範囲)において、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。一方、表示部に表示された画面中の非注目領域については、強度を調整する必要性を排除することができる。 By doing in this way, a region (predetermined range) to be noted by the setting unit is set on the screen displayed on the display unit, and in this region of interest (predetermined range), for each wavelength range of light to be detected, The intensity can be adjusted while maintaining the spectral shape. On the other hand, it is possible to eliminate the necessity of adjusting the intensity of the non-attention area in the screen displayed on the display unit.
本発明によれば、複数種の蛍光を検出する場合において、検出する蛍光のスペクトル形状を維持するとともに、各チャネルの感度調整を容易に行うことができるという効果を奏する。 According to the present invention, when detecting a plurality of types of fluorescence, the spectral shape of the fluorescence to be detected is maintained, and the sensitivity of each channel can be easily adjusted.
本発明の一実施形態に係る顕微鏡について、図面を参照して説明する。
図1は、本実施形態の顕微鏡1の概略構成図である。図1に示すように、本実施形態の顕微鏡1は、レーザ光を標本115に照射して標本115において発生した蛍光を検出する顕微鏡本体101と、顕微鏡本体101からの信号の強度等を調整する信号調整部201と、各部を制御するとともに顕微鏡本体101からの信号に基づいて画像を生成する制御部(感度調節部、画像生成部)301と、制御部301により生成された標本115の画像を表示する表示部401と、ユーザによる設定条件等が入力される入力部(入力部、設定部)501とを主な構成要素として備えている。
A microscope according to an embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is a schematic configuration diagram of a
顕微鏡本体101は、光源111と、ビームスプリッタ112と、走査系113と、対物レンズ114と、ステージ116と、グレーティング(分光素子)117と、PMT(光検出器)118とを備えている。
The
光源111は、レーザ光を射出するようになっている。このレーザ光は、標本115内の蛍光指示薬を励起させ、蛍光を発生させるようになっている。
The
ビームスプリッタ112は、光源111からのレーザ光を透過する一方、標本115において発生して対物レンズ114により集光された蛍光を反射するようになっている。このような構成を有することで、ビームスプリッタ112は、レーザ光の光路と標本115からの蛍光の光路とを分岐するようになっている。
The
走査系113は、例えばアルミコートされた一対のガルバノミラー(図示略)を有しており、これら一対のガルバノミラーの角度を変化させ、ラスタスキャン方式で駆動されるようになっている。これにより、光源111からのレーザ光を標本115上において2次元的に走査させるようになっている。
The
対物レンズ114は、走査系113により走査されたレーザ光を標本115上に照射する一方、標本115から発生した蛍光を集光するようになっている。
The
グレーティング117は、標本115において発生し、ビームスプリッタ112により分岐された蛍光を波長毎のスペクトル成分に分光し、分光したスペクトル成分をPMT118に入射させるようになっている。
The grating 117 divides the fluorescence generated in the
PMT118は、例えば32チャネルの光電子増倍管(Photo Multiplier Tube)であり、スペクトル成分を検出するチャネルが、グレーティング117により分光される方向に複数配列されている。このような構成を有することで、PMT118は、各チャネルによりグレーティング117により分光されたスペクトル成分をそれぞれ検出し、検出したスペクトル成分の輝度情報を電気信号へ変換して、信号調整部201に出力するようになっている。
The
信号調整部201は、PMT118により検出する蛍光の輝度情報を積算する積算器(積算部)201と、PMT118により検出する蛍光の輝度情報にオフセットを与えて増幅するオフセット増幅器(増幅部)212と、PMT118により検出する蛍光の輝度情報をディジタル信号に変換するA/D変換器213とを備えている。
The
信号調整部201は、図2に示すように、PMT118のチャネル毎に、積算器211、オフセット増幅器212、およびA/D変換器213が設置されており、A/D変換器213により変換されたディジタル信号を制御部301のCPU311に出力するようになっている。
As shown in FIG. 2, the
制御部301は、各種の情報を記憶するメモリ(記憶部)312と、A/D変換器213からのディジタル信号を合算するマルチプレクサ313と、これらを制御するCPU311とを備えており、レーザ光源111、走査系113、積算器211、オフセット増幅器212、A/D変換器213のそれぞれを制御する信号を生成するようになっている。
The
また、制御部301は、PMT118が検出する蛍光の波長範囲に関する情報に基づいて、PMT118のチャネルを複数のグループ(チャネル群)に分け、チャネル群内の全てのチャネルが同一の感度となるように、チャネルの感度をチャネル群毎に一括して調節するようになっている。ここでは、その具体的な調節方法として、制御部301が、積算器211の積算時間をチャネル群毎に調節することとして説明する。
Further, the
また、制御部301は、A/D変換器213から出力されるディジタル信号値が、予め設定された設定値を超えたことをCPU311が認識したとき、積算器211における積算時間と、そのときのPMT118への印加電圧(以下「HV」と表記する。)をCPU311がメモリ312に記憶するようになっている。
In addition, when the
また、制御部301は、CPU311により算出された蛍光強度に基づいてスキャン画像を生成するようになっている。
表示部401は、例えば液晶ディプレイであり、制御部301により生成された標本115の画像を表示するようになっている。
The
The
入力部501は、例えばキーボードやマウスからなり、ユーザが入力した値や動作を取得してCPU311に出力するようになっている。入力部501は、ユーザによって、例えば感度調整、色素選択、閾値設定についての入力が行われるようになっており、その入力情報を制御部301に出力するようになっている。
The
このような構成とすることで、入力部501によりユーザがPMT118の感度調整を行うと、制御部301を介してPMT118の感度が調整されるようになっている。また、入力部501によりユーザが色素選択についての入力を行うと、その設定が制御部301内のCPU311に送られ、CPU311では選択した色素に対応する合算チャネル(チャネル群)を決定し、決定したチャネルにより検出されたスペクトル成分の合算処理が行われるようになっている。
With this configuration, when the user adjusts the sensitivity of the
また、入力部501によりユーザが閾値設定についての入力を行うと、その設定が制御部301内のCPU311に送られ、CPU311では設定した閾値と、PMT118の各チャネルにより検出されたスペクトル成分の強度との比較が行われるようになっている。
Further, when the user inputs the threshold setting by the
上記構成を有する顕微鏡1において、蛍光画像を取得する際の動作について以下に説明する。
顕微鏡本体101において、レーザ光源111から出射された光は、ビームスプリッタ112を通過してレーザ走査系113に入射する。レーザ走査系113は、対物レンズ114を通してレーザ光を、ステージ116上に載置された標本115の平面上においてX方向およびY方向に走査する。
In the
In the
標本115の焦点面においては、レーザ光により標本115内の蛍光物質が励起されて蛍光が発生する。標本115からの蛍光は、対物レンズ114により集光され、レーザ走査系113を経て、ビームスプリッタ112によりレーザ光の光路から分岐される。
On the focal plane of the
分岐された蛍光は、グレーティング117により分光され、分光されたスペクトル成分は波長ごとにPMT118の各チャネルに入射する。このとき、PMT118には少なくとも二つの蛍光色素からの蛍光が入射する。
The branched fluorescence is split by the
PMT118の各チャネルでは、検出したスペクトル成分の強度に応じて、その輝度情報が電気信号へ変換され、信号調整部201にそれぞれ出力される。信号調整部201では、PMT118のチャネル毎に、積算器211によりスペクトル成分の輝度情報が積算されるとともに、オフセット増幅器212によりスペクトル成分の輝度情報が増幅される。そして、このような処理が行われた輝度情報は、A/D変換器213によりディジタル信号に変換され、CPU311に出力される。
In each channel of the
CPU311が受け取ったディジタル信号は、CPU311内部のマルチプレクサ313により、蛍光色素に対応したチャネル群分が合算される。合算された信号は、蛍光色素ごとに生じるため複数存在し、それぞれ表示部401に表示される1ピクセル分の輝度信号となる。
以上を繰返し、レーザ走査系113により走査することで、表示部401において蛍光画像が生成される。
The digital signal received by the
By repeating the above and scanning with the
上記の蛍光画像の取得動作において、信号調整部201および制御部301により実行される詳細な制御について以下に説明する。
PMT118の各チャネルから出力される全ての信号は、標本115上にレーザ光を照射して1ピクセルの信号を取得する時間中、それぞれ積算器211により積算され続ける。その積算時間は、CPU311により生成されているクロック信号(以下、「PCLK信号」と表記する。)により決定する。例えば、PCLK信号がLowである間は積算され、PCLK信号がHighとなったときには積算器211の値を0とする。
Detailed control executed by the
All signals output from the respective channels of the
積算器211の後にはオフセット増幅器212が接続されており、積算後の信号にオフセットが与えられる。オフセットを与えられた信号は、A/D変換器213によりディジタル信号に変換される。
An offset
また、積算されている間も、積算器211からの信号は、オフセット増幅器212およびA/D変換器213を通過して、CPU311へと出力され続ける。ここで、A/D変換器213では、CPU311にて生成されるPCLK信号よりも短い周期をもつ変換クロックで、オフセット増幅器212からのアナログ信号がディジタル信号に変換されており、変換クロックごとにCPU311へとディジタル信号を出力する。
During integration, the signal from the
このときのCPU311の処理について図3に示すフローチャートを用いて説明する。
まず、ステップS1において、PCLK信号がLowであるか否かが判断される。
PCLK信号がLowであれば、ステップS2において、CPU311によりディジタル信号値が取得される。
The processing of the
First, in step S1, it is determined whether or not the PCLK signal is low.
If the PCLK signal is low, a digital signal value is acquired by the
次に、ステップS3において、各チャネルのそれぞれについてディジタル信号値が設定値以下であるか否かが判断される。この際、図5に示すように、ディジタル信号値が設定値以下である場合には、PCLK信号がHighになったとき、つまり積算時間がtmaxになったときのディジタル信号値がCPU311へ出力される(ステップS4)。
Next, in step S3, it is determined whether or not the digital signal value is less than or equal to the set value for each channel. At this time, as shown in FIG. 5, when the digital signal value is equal to or smaller than the set value, the digital signal value when the PCLK signal becomes High, that is, when the integration time becomes t max is output to the
ここで、この設定値は、ディジタル信号がA/D変換器213の変換範囲外となっているとCPU311が判断する値であり、走査開始前にユーザが入力部501を介して、変換範囲の何%とするかを入力して設定した値である。
Here, this set value is a value that the
このディジタル信号は、ステップS5において、CPU311内部のマルチプレクサ313により合算される。その際の詳細な手順について図4に示すフローチャートを用いて説明する。
まず、蛍光色素に対応したチャネル群が決定されるように、その対応表(以下、「LUT」と表記する。)をメモリ312に保存しておく。
The digital signals are summed by the
First, a correspondence table (hereinafter referred to as “LUT”) is stored in the
表示部401に表示されている蛍光色素をユーザが入力部501を介して選択すると、CPU311が使用する蛍光色素が認識され(ステップS5−1)、LUTを参照することで合算するチャネル群が決定される(ステップS5−2)。
When the user selects a fluorescent dye displayed on the
次に、ステップS5−3において、このチャネル群からの各信号が加算され、表示部401に表示される1ピクセル分の輝度信号となる。このとき、蛍光色素ごとに輝度信号が生じるため、これら輝度信号が表示部401へ同時に伝送されるが、重ねて表示しても蛍光色素ごとに分けて表示してもよい。
Next, in step S5-3, the signals from the channel group are added to form a luminance signal for one pixel displayed on the
また、図3のステップS3において、図6に示すように、PCLK信号がLowのうちに設定値以上のディジタル信号値がCPU311に出力されてきた場合には、A/D変換器213の変換範囲外になったとCPU311が判断し、そのときの積算時間tsとHVの値がメモリ312に記憶される(ステップS6)。
In step S3 of FIG. 3, when a digital signal value equal to or higher than the set value is output to the
そして、設定値以上のディジタル信号値が、表示部401に表示される1ライン中、つまり標本115上を走査するY軸の値が一定の間に、3ピクセル続いた場合には(ステップS7)、CPU211により取得された3ピクセル分の積算時間の平均が算出される(ステップS8)。
If a digital signal value equal to or larger than the set value continues for 3 pixels in one line displayed on the
そして、次のピクセルから合算するチャネル群に対応する各積算器211に対して、PCLK信号を分周して適用することで、ステップS8において算出された平均積算時間が、次のピクセル以降の1ピクセル積算時間に設定される(ステップS9)。このとき、チャネル群からの各信号のうち、輝度信号が最大となるチャネルの積算器211に適用した積算時間を、チャネル群の各積算器211に適用する。
Then, by dividing and applying the PCLK signal to each
ステップS10では、PCLK信号がHighになるまで待機することで、積算器211において積算されている値を0とする。
これにより、チャネル群の各チャネルからの信号強度により形成されるスペクトルの形状を保ったまま、輝度信号の強度を調整することができる。
In step S10, the value accumulated in the
Thereby, the intensity | strength of a luminance signal can be adjusted, maintaining the shape of the spectrum formed with the signal intensity | strength from each channel of a channel group.
以上の処理を、ユーザが入力部501を介して制御条件(HV値、オフセット値、蛍光色素の選択)の入力を終了した後、少なくとも1フレーム分走査する。
なお、表示部401には、図3のステップS6からステップS10を行うための制御機能をON/OFFするボタンを表示し、入力部501を介してユーザが切り替えることができることとしてもよい。
After the user finishes inputting the control conditions (selection of HV value, offset value, fluorescent dye) via the
The
以上のように、本実施形態に係る顕微鏡1によれば、標本115において発生して対物レンズ114により集光された蛍光が、グレーティング117によりスペクトル成分に分光され、分光されたスペクトル成分は、複数のチャネルを有するPMT118によりそれぞれ検出される。この場合において、PMT118のチャネルは、制御部301により、検出する光の波長範囲に関する情報に基づいて複数のグループ(チャネル群)に分けられ、チャネル群内の全てのチャネルが同一の感度となるように、その感度がチャネル群毎に一括して調節される。
As described above, according to the
これにより、グループ化されたチャネル群毎、すなわち、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。例えば、複数種の蛍光を同時に観察する場合においても、各蛍光のスペクトル成分を飽和させることなく、各蛍光の強度をそれぞれ別個に調整することができ、精度良く観察することができる。また、各チャネルの感度を個別に調節する必要性を排除することができ、その調節作業を容易にすることができる。 Thereby, the intensity | strength can be adjusted, maintaining a spectrum shape for every grouped channel group, ie, for every wavelength range of the light to detect. For example, even when observing a plurality of types of fluorescence at the same time, the intensity of each fluorescence can be individually adjusted without saturating the spectral components of each fluorescence, and can be observed with high accuracy. Further, it is possible to eliminate the necessity of individually adjusting the sensitivity of each channel, and the adjustment work can be facilitated.
また、制御部301によって積算器211の積算時間をグループ毎に調節することで、PMT118の各チャネルにより検出した輝度情報をグループ毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。
Also, by adjusting the integration time of the
また、スペクトル成分のいずれかが設定値を超えたとき、例えばスペクトル成分のいずれかが飽和したときに、PMT118のチャネルの感度を調節することで、いずれのスペクトル成分を飽和させることなく、検出される蛍光の強度を調整することができる。
Also, when any of the spectral components exceeds the set value, for example, when any of the spectral components is saturated, it is detected without saturating any of the spectral components by adjusting the sensitivity of the
なお、制御部301によって、PMT118に印加される電圧をチャネル群毎に調節することとしてもよい。このようにすることで、PMT118のチャネルの感度をチャネル群毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。
Note that the
また、制御部301によって、オフセット増幅器212の増幅率をチャネル群毎に調節することとしてもよい。このようにすることで、PMT118の各チャネルにより検出した輝度情報をチャネル群毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。
Further, the
また、各グループのチャネルの感度と輝度情報とを対応付けてメモリ312に記憶させておくこととしてもよい。このようにすることで、検出する光の波長範囲毎にチャネルの感度を再現することができる。また、波長範囲毎の輝度情報とその感度から、全てのチャネルを同一の感度にした場合の標本115の画像を生成することができる。
Further, the sensitivity of each group of channels and the luminance information may be stored in the
[第1の変形例]
以下に、本実施形態の第1の変形例について図7を用いて説明する。
本変形例の顕微鏡1は、積算器211の積算時間が変更されている場合には、そのことをユーザに認識させる手段を有している。
本変形例におけるCPU311の処理手順について、図7に示すフローチャートを用いて以下に説明する。
[First Modification]
Below, the 1st modification of this embodiment is demonstrated using FIG.
The
The processing procedure of the
まず、ステップS8において、CPU311により3ピクセル分の積算時間の平均を算出する。
そして、その平均積算時間が次のピクセルに適用されると同時に(ステップS9)、表示部401に表示される積算時間を適応して得られた輝度情報に基づいて生成された1フレーム分の画像の周辺部について色を変えて表示する(ステップS11)。
このようにすることで、積算時間が調整されている輝度信号によって画像を生成していることを、ユーザが認識することができる。
First, in step S8, the
The average accumulated time is applied to the next pixel (step S9), and at the same time, an image for one frame generated based on the luminance information obtained by adapting the accumulated time displayed on the
By doing in this way, the user can recognize that the image is generated by the luminance signal whose integration time is adjusted.
[第2の変形例]
以下に、本実施形態の第2の変形例について図8を用いて説明する。
本変形例の顕微鏡1は、積算器211の積算時間をユーザが任意に変更することを可能とし、入力した積算時間を、蛍光色素に対応した範囲のチャネルに接続される各積算器に適用するように制御している。
[Second Modification]
Below, the 2nd modification of this embodiment is demonstrated using FIG.
The
具体的には、例えば、積算時間に対応したスライドを蛍光色素ごとに表示部401に表示し、そのスライドを入力部501を介してユーザが変更することで、スライドの位置に対応して積算時間が決定されることとする。
Specifically, for example, a slide corresponding to the integration time is displayed on the
本変形例におけるCPU311の処理について図8に示すフローチャートを用いて説明する。
表示部401に表示されている蛍光色素をユーザが入力部501を介して選択すると、CPU311が使用する蛍光色素を認識し(ステップS5−1)、LUTを参照することで合算するチャネル群が決定される(ステップS5−2)。
そして、スライドの位置から積算時間を取得し(ステップS12)、この積算時間を決定されたチャネル群に対応する各積算器211に対して適用する(ステップS13)。
このようにすることで、ユーザが任意に調整した信号強度から画像を生成することが可能となる。
The processing of the
When the user selects the fluorescent dye displayed on the
Then, the integration time is acquired from the position of the slide (step S12), and this integration time is applied to each
In this way, it is possible to generate an image from the signal intensity arbitrarily adjusted by the user.
[第3の変形例]
以下に、本実施形態の第3の変形例について図9を用いて説明する。
本変形例の顕微鏡1は、PCLK信号に基づいた最大の積算時間、つまり積算時間がtmaxとなっているときにCPU311が受け取るディジタル信号が、初めて設定値以上となったときのHVを保存し、レーザ走査途中でHVを変更した場合には、記憶したHVよりも下げられたときに積算時間をtmaxに戻すようになっている。
[Third Modification]
Below, the 3rd modification of this embodiment is demonstrated using FIG.
The
本変形例の顕微鏡1は、制御部301により、チャネル全体の感度を調節することができるようになっている(全体感度調節部)。
メモリ312には、積算器211により積算された輝度情報が所定値以上となる最大積算時間において、いずれかのスペクトル成分が飽和するようなチャネル全体の最大感度が記憶されるようになっている。
The
The
制御部301は、チャネル全体の感度が、メモリ312に記憶されている最大感度よりも下がった場合には、チャネルのグループ毎に積算器211の積算時間を最大化させるようになっている。
When the sensitivity of the entire channel is lower than the maximum sensitivity stored in the
HVの値は、表示部401に表示されているHVの値をユーザが入力部501を介して変更することで調整することができる。
PCLK信号に基づいた最大の積算時間、つまり積算時間がtmaxとなっているときに、CPU311が受け取るディジタル信号が、初めて設定値以上となったときのHVをメモリ312に記憶しておく。
The HV value can be adjusted by the user changing the HV value displayed on the
When the maximum integration time based on the PCLK signal, that is, the integration time is t max , the HV when the digital signal received by the
その後のCPU311による処理手順について、図9に示すフローチャートに従って説明する。
HVが変化したときにはその値を取得し(ステップS14)、記憶したHVの値と比較する(ステップS15)。記憶したHVの値よりも大きくなる場合には、図3のステップS6からステップS10により積算時間の調整が行われる。記憶したHVの値よりも小さい場合には、積算時間をtmaxにすることで元の積算時間に戻される(ステップS16)。
The subsequent processing procedure by the
When HV changes, the value is acquired (step S14) and compared with the stored HV value (step S15). If the value is larger than the stored HV value, the integration time is adjusted in steps S6 to S10 in FIG. If the value is smaller than the stored HV value, the original integrated time is restored by setting the integrated time to t max (step S16).
このようにすることで、HVを微動させたときには積算時間の変動が無いため、微小量の感度調整の場合に有効となる。
また、制御部301によって積算器211の積算時間をグループ毎に調節することで、各チャネルにより検出した輝度情報をグループ毎に調節することができ、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。この場合において、チャネル全体の感度が、いずれかのスペクトル成分が飽和する最大感度よりも下がった場合に、チャネルのグループ毎に積算器211の積算時間を最大化させることで、積算された輝度情報のS/N比を向上させることができる。
By doing so, there is no change in the integration time when the HV is finely moved, and this is effective in the case of a small amount of sensitivity adjustment.
Moreover, the luminance information detected by each channel can be adjusted for each group by adjusting the integration time of the
[第4の変形例]
以下に、本実施形態の第4変形例について図10および図11を用いて説明する。
本変形例の顕微鏡1は、ユーザが選択した範囲においてのみ、図3のステップS6からステップS10の処理により、積算時間の調整を行うようになっている。
本変形例におけるCPU311による処理手順について、図10のフローチャートを用いて説明する。
[Fourth Modification]
Below, the 4th modification of this embodiment is demonstrated using FIG. 10 and FIG.
The
A processing procedure performed by the
図11に示すように、表示部401に表示された標本画像においてユーザが任意に選択した選択範囲をCPU311が認識し(ステップS17)、選択範囲内のピクセルに相当するスキャンポイントであるかを判別する(ステップS18)。
As shown in FIG. 11, the
選択範囲内である場合には、図3のステップS6からステップS10と同様の処理によって積算時間が決定されるように、イネーブル信号をCPU311に対して出力する(ステップS19)。一方、選択範囲外である場合は、イネーブル信号は出力されず、前ピクセルと同じ積算時間が適用され、CPU311によりディジタル信号値が取得される(ステップS2)。これにより積算時間の決定は選択範囲内でのみ行われるが、決定された積算時間はレーザ走査範囲全体に適用されることとなる。
If it is within the selection range, an enable signal is output to the
このようにすることで、ユーザが着目したい範囲だけ信号調整手段のダイナミックレンジ内で輝度信号を取得することができる。
また、表示部401に表示された画面において入力部501により注目する領域(選択範囲)を設定し、この選択範囲において、検出する光の波長範囲毎に、スペクトル形状を維持しつつ、その強度を調整することができる。一方、表示部401に表示された画面中の非注目領域については、強度を調整する必要性を排除することができる。
By doing in this way, a luminance signal can be acquired within the dynamic range of the signal adjusting means for the range that the user wants to focus on.
Further, a region of interest (selection range) is set by the
以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
例えば、本実施形態において、積算器211の積算時間、あるいはオフセット増幅器212の増幅率、あるいはHVをチャネル群毎に調節することとして説明したが、これらを任意に組み合わせてPMT118のチャネルの感度を調節することとしてもよい。
As mentioned above, although embodiment of this invention was explained in full detail with reference to drawings, the specific structure is not restricted to this embodiment, The design change etc. of the range which does not deviate from the summary of this invention are included.
For example, in the present embodiment, the integration time of the
また、図3に示すフローチャートのステップS7において、積算器211の積算時間を、設定値以上のディジタル信号値が3ピクセル続いた場合に変更することとして説明したが、1〜2ピクセルまたは4ピクセル以上続いた場合に変更することとしてもよい。
Also, in step S7 of the flowchart shown in FIG. 3, the integration time of the
1 顕微鏡
101 顕微鏡本体
111 光源
112 ビームスプリッタ
113 走査系
114 対物レンズ
115 標本
116 ステージ
117 グレーティング(分光素子)
118 PMT(光検出器)
201 信号調整部
211 積算器(積算部)
212 オフセット増幅器(増幅部)
213 A/D変換器
301 制御部(感度調節部、画像生成部)
311 CPU
312 メモリ(記憶部)
313 マルチプレクサ
401 表示部
501 入力部(入力部、設定部)
DESCRIPTION OF
118 PMT (photodetector)
201
212 Offset amplifier (amplifier)
213 A /
311 CPU
312 Memory (storage unit)
Claims (9)
該対物レンズにより集光された光をスペクトル成分に分光する分光素子と、
該分光素子により分光されたスペクトル成分をそれぞれ検出する複数のチャネルを有する光検出器と、
該光検出器の各チャネルの感度を調節する感度調節部とを備え、
該感度調節部が、検出する光の波長範囲に関する情報に基づいて前記チャネルを複数のグループに分け、グループ内の全ての前記チャネルが同一の感度となるように、前記チャネルの感度をグループ毎に一括して調節する顕微鏡。 An objective lens for collecting the light generated in the specimen;
A spectroscopic element that splits light collected by the objective lens into spectral components;
A photodetector having a plurality of channels that respectively detect spectral components dispersed by the spectroscopic element;
A sensitivity adjuster for adjusting the sensitivity of each channel of the photodetector;
The sensitivity adjustment unit divides the channels into a plurality of groups based on information on the wavelength range of light to be detected, and sets the channel sensitivity for each group so that all the channels in the group have the same sensitivity. A microscope that adjusts all at once.
前記感度調節部が、前記積算部の積算時間を前記チャネルのグループ毎に調節する請求項1に記載の顕微鏡。 An integrating unit that integrates luminance information of light detected by the photodetector;
The microscope according to claim 1, wherein the sensitivity adjustment unit adjusts an integration time of the integration unit for each group of the channels.
前記感度調節部が、前記増幅部の増幅率を前記チャネルのグループ毎に調節する請求項1に記載の顕微鏡。 An amplifying unit that amplifies luminance information of light detected by the photodetector;
The microscope according to claim 1, wherein the sensitivity adjustment unit adjusts an amplification factor of the amplification unit for each group of the channels.
前記光検出器により検出する光の輝度情報を積算する積算部と、
前記積算部により積算された輝度情報が所定値以上となる最大積算時間において、いずれかのスペクトル成分が飽和するような前記チャネル全体の最大感度を記憶する記憶部とを備え、
前記感度調節部は、前記チャネル全体の感度が、前記記憶部に記憶されている最大感度よりも下がった場合には、前記チャネルのグループ毎に前記積算部の積算時間を最大化させる請求項1に記載の顕微鏡。 An overall sensitivity adjuster for adjusting the sensitivity of the entire channel;
An integration unit for integrating luminance information of light detected by the photodetector;
A storage unit that stores the maximum sensitivity of the entire channel such that any spectral component is saturated in a maximum integration time in which the luminance information integrated by the integration unit is equal to or greater than a predetermined value;
The sensitivity adjustment unit maximizes the integration time of the integration unit for each group of channels when the sensitivity of the entire channel is lower than the maximum sensitivity stored in the storage unit. Microscope.
該画像生成部により生成された画像を表示する表示部と、
該表示部に表示された画面において所定の範囲を設定する設定部とを備え、
前記感度調節部が、前記設定部により設定された所定の範囲において前記チャネルの感度を調節する請求項1から請求項8のいずれかに記載の顕微鏡。
An image generator that generates an image based on the light detected by the photodetector;
A display unit for displaying an image generated by the image generation unit;
A setting unit for setting a predetermined range on the screen displayed on the display unit,
The microscope according to any one of claims 1 to 8, wherein the sensitivity adjustment unit adjusts the sensitivity of the channel within a predetermined range set by the setting unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009116598A JP5371538B2 (en) | 2009-05-13 | 2009-05-13 | microscope |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009116598A JP5371538B2 (en) | 2009-05-13 | 2009-05-13 | microscope |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2010266278A true JP2010266278A (en) | 2010-11-25 |
JP2010266278A5 JP2010266278A5 (en) | 2013-02-28 |
JP5371538B2 JP5371538B2 (en) | 2013-12-18 |
Family
ID=43363386
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009116598A Active JP5371538B2 (en) | 2009-05-13 | 2009-05-13 | microscope |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5371538B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012122882A (en) * | 2010-12-09 | 2012-06-28 | Olympus Corp | Light detection device and observation device |
JP2014170105A (en) * | 2013-03-04 | 2014-09-18 | Olympus Corp | Microscope device |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH043492B2 (en) * | 1981-02-02 | 1992-01-23 | ||
JP2002168695A (en) * | 2000-06-13 | 2002-06-14 | Jobin Yvon Sa | Imaging apparatus, spectroscopic analysis system and imaging method |
JP2005084029A (en) * | 2003-09-11 | 2005-03-31 | Olympus Corp | Spectrooptical apparatus |
JP2006195076A (en) * | 2005-01-12 | 2006-07-27 | Olympus Corp | Scanning type optical apparatus |
JP2008070274A (en) * | 2006-09-15 | 2008-03-27 | Shimadzu Corp | Spectrophotometer |
-
2009
- 2009-05-13 JP JP2009116598A patent/JP5371538B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH043492B2 (en) * | 1981-02-02 | 1992-01-23 | ||
JP2002168695A (en) * | 2000-06-13 | 2002-06-14 | Jobin Yvon Sa | Imaging apparatus, spectroscopic analysis system and imaging method |
JP2005084029A (en) * | 2003-09-11 | 2005-03-31 | Olympus Corp | Spectrooptical apparatus |
JP2006195076A (en) * | 2005-01-12 | 2006-07-27 | Olympus Corp | Scanning type optical apparatus |
JP2008070274A (en) * | 2006-09-15 | 2008-03-27 | Shimadzu Corp | Spectrophotometer |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012122882A (en) * | 2010-12-09 | 2012-06-28 | Olympus Corp | Light detection device and observation device |
JP2014170105A (en) * | 2013-03-04 | 2014-09-18 | Olympus Corp | Microscope device |
Also Published As
Publication number | Publication date |
---|---|
JP5371538B2 (en) | 2013-12-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6086948B2 (en) | Method for generating an image with an extended dynamic range, control unit (34) or computer program for implementing such a method, and optical system | |
US20130126755A1 (en) | Method and device for simultaneous multi-channel and multi-method acquisition of synchronized parameters in cross-system fluorescence lifetime applications | |
US10371574B2 (en) | Detector device for detection of a spectral portion for a microscope | |
JP6253266B2 (en) | Confocal image generator | |
JP6375239B2 (en) | Laser microscope equipment | |
US8879072B2 (en) | Laser scanning microscope and method for operation thereof | |
US20100053743A1 (en) | Apparatus for real-time three-dimensional laser scanning microscopy, with detection of single- and multi-photon fluorescence and of higher order harmonics | |
JP2009204408A (en) | Spectral detector and laser scanning microscopic system | |
JP5616588B2 (en) | microscope | |
JP2007114764A (en) | Apparatus and method for detection with scanning microscope | |
JP5371538B2 (en) | microscope | |
JP2005140981A (en) | Microscope | |
JP2003043369A (en) | Laser scanning microscope | |
JP6257156B2 (en) | Microscope equipment | |
US11994469B2 (en) | Spectroscopic imaging apparatus and fluorescence observation apparatus | |
JP2006058237A (en) | Spectrograph and spectral laser microscope | |
JP5394893B2 (en) | Laser scanning microscope | |
JP5591088B2 (en) | Photodetection device and observation device | |
JP4564266B2 (en) | Scanning laser microscope | |
JP2003295064A (en) | Laser scanning microscope system, system control method, and control program for making computer execute system control | |
JP4493453B2 (en) | Photodetection circuit and scanning confocal microscope provided with the photodetection circuit | |
JP2023008411A (en) | Fluorescence microscope device, observation condition optimization method and program | |
JP6898729B2 (en) | Detection device, microscope system and detection method | |
JP2006195076A (en) | Scanning type optical apparatus | |
JP2004219513A (en) | Laser microscope |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120424 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130109 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130611 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130612 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130809 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130903 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130917 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5371538 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |