JP4146310B2 - Method for evaluating composition uniformity and apparatus for evaluating composition uniformity - Google Patents

Method for evaluating composition uniformity and apparatus for evaluating composition uniformity Download PDF

Info

Publication number
JP4146310B2
JP4146310B2 JP2003276152A JP2003276152A JP4146310B2 JP 4146310 B2 JP4146310 B2 JP 4146310B2 JP 2003276152 A JP2003276152 A JP 2003276152A JP 2003276152 A JP2003276152 A JP 2003276152A JP 4146310 B2 JP4146310 B2 JP 4146310B2
Authority
JP
Japan
Prior art keywords
mixed
droplet
mixed droplet
raw material
uniformity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003276152A
Other languages
Japanese (ja)
Other versions
JP2005037299A (en
Inventor
修 與儀
友則 川上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hamamatsu Photonics KK
Original Assignee
Hamamatsu Photonics KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hamamatsu Photonics KK filed Critical Hamamatsu Photonics KK
Priority to JP2003276152A priority Critical patent/JP4146310B2/en
Publication of JP2005037299A publication Critical patent/JP2005037299A/en
Application granted granted Critical
Publication of JP4146310B2 publication Critical patent/JP4146310B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

本発明は、互いに組成が異なる複数の原料液同士を混合することにより形成された混合液滴における組成の均一度の評価方法及び評価装置に関する。   The present invention relates to an evaluation method and an evaluation apparatus for composition uniformity in mixed droplets formed by mixing a plurality of raw material liquids having different compositions.

従来より、例えば、特許文献1に記載されているように、複数のキャピラリ毎に蓄えられた原料液と、各キャピラリの先端と対向して配置された基板と、の間にパルス電圧を印加して、各キャピラリの先端から微量な原料液のジェット流をそれぞれ吐出させて混合させ、基板上に混合液滴を形成する方法が知られている。ここで、ジェット流とは、パルス電圧印加によってキャピラリ先端から原料液界面が引出される直径の小さい噴流である。   Conventionally, for example, as described in Patent Document 1, a pulse voltage is applied between a raw material liquid stored for each of a plurality of capillaries and a substrate disposed facing the tip of each capillary. A method of forming a mixed droplet on a substrate by discharging and mixing a small amount of a raw material jet from the tip of each capillary is known. Here, the jet flow is a jet having a small diameter in which the raw material liquid interface is drawn from the capillary tip by applying a pulse voltage.

そして、例えば、特許文献2に記載されているように、このような微少な混合液滴を光学的に分析する装置が知られている。
国際公開第WO03/020418号パンフレット 特開2002−055051号公報
For example, as described in Patent Document 2, an apparatus that optically analyzes such a minute mixed droplet is known.
International Publication No. WO03 / 020418 Pamphlet JP 2002-055051 A

上述のような微少な混合液滴を形成するに当たり、形成された混合液滴において各原料液が均一に混合されているか否か、すなわち、混合液滴の組成の均一度を評価する必要がある。   In forming the minute mixed droplets as described above, it is necessary to evaluate whether or not each raw material liquid is uniformly mixed in the formed mixed droplets, that is, the uniformity of the composition of the mixed droplets. .

しかしながら、このような微少な混合液滴の組成の均一度を評価する方法及び装置は知られていない。   However, a method and an apparatus for evaluating the uniformity of the composition of such minute mixed droplets are not known.

本発明は、上記課題に鑑みてなされたものであり、微少な混合液滴の組成の均一度を評価することが可能な組成の均一度の評価方法及び評価装置を提供することを目的とする。   The present invention has been made in view of the above problems, and an object of the present invention is to provide a composition uniformity evaluation method and an evaluation apparatus capable of evaluating the composition uniformity of minute mixed droplets. .

本発明にかかる組成の均一度の評価方法は、互いに組成が異なる複数の原料液同士を混合することにより形成された混合液滴における組成の均一度の評価方法において、混合液滴から混合液滴の何れかの成分の量に応じた強度で到達する光を集光して結像させ混合液滴についての画像情報を取得する画像取得工程と、画像情報における混合液滴の中心位置を取得する中心取得工程と、画像情報において、混合液滴の中心位置に対する光の強度の対称性に関する情報を取得する対称性取得工程と、を含む。   The method for evaluating the uniformity of composition according to the present invention is the method for evaluating the uniformity of composition in a mixed droplet formed by mixing a plurality of raw material liquids having different compositions. An image acquisition step of collecting and image-forming light that reaches at an intensity corresponding to the amount of any one of the components to acquire image information about the mixed droplet, and acquiring the center position of the mixed droplet in the image information A center acquisition step, and a symmetry acquisition step of acquiring, in the image information, information relating to the symmetry of the intensity of light with respect to the center position of the mixed droplet.

また、本発明にかかる組成の均一度の評価装置は、互いに組成が異なる複数の原料液同士を混合することにより形成された混合液滴から混合液滴における何れかの成分の量に応じた強度で到達する光を集光して結像させ混合液滴についての画像情報を取得する画像取得手段と、画像情報における混合液滴の中心位置を取得する中心取得手段と、画像情報において、混合液滴の中心位置に対する光の強度の対称性に関する情報を取得する対称性取得手段と、を有する。   In addition, the apparatus for evaluating the uniformity of the composition according to the present invention provides a strength corresponding to the amount of any component in a mixed droplet formed from a mixed droplet formed by mixing a plurality of raw material liquids having different compositions. In the image information, the liquid mixture is obtained by condensing and merging the light arriving at the image acquisition means for acquiring the image information about the mixed droplet, the center acquisition means for acquiring the center position of the mixed droplet in the image information, Symmetry acquisition means for acquiring information on the symmetry of the intensity of light with respect to the center position of the droplet.

これらの発明によれば、上述の成分の量に応じた光の強度分布の中心位置に対する対称性に関する情報が取得され、この情報は、混合液滴の中心周りにおける上記成分の分布量と考えることができる。そして、混合液滴において上記成分が中心周りに高い対称性で分布していれば、混合液滴における組成の均一度が高いと考えられるので、この中心周りの対称性に関する情報に基づいて、混合液滴における組成の均一度を簡易かつ迅速に評価することができる。   According to these inventions, information on symmetry with respect to the center position of the light intensity distribution according to the amount of the above-mentioned component is acquired, and this information is considered as the distribution amount of the above-mentioned component around the center of the mixed droplet. Can do. If the above components are distributed with high symmetry around the center in the mixed droplet, it is considered that the composition uniformity in the mixed droplet is high. Therefore, based on the information about the symmetry around the center, mixing is performed. It is possible to easily and quickly evaluate the composition uniformity in the droplet.

ここで、原料液は、所定の波長の光を吸収する成分を含み、画像取得工程では、混合液滴に対して所定の波長の光を照射し、混合液滴を透過した透過光を集光して結像させて画像情報を取得することが好ましい。   Here, the raw material liquid includes a component that absorbs light of a predetermined wavelength, and in the image acquisition process, the mixed droplet is irradiated with light of a predetermined wavelength, and the transmitted light that has passed through the mixed droplet is collected. It is preferable to form an image and acquire image information.

これによれば、画像情報において、混合液滴における所定の波長を吸収する成分の量が多い部分ほど、光の強度が弱くなるので、この成分の分布量が画像情報において好適に把握され、混合液滴における組成の均一度をより精度よく取得できる。   According to this, in the image information, as the amount of the component that absorbs the predetermined wavelength in the mixed droplet is larger, the intensity of the light becomes weaker. The uniformity of composition in the droplet can be obtained with higher accuracy.

また、原料液は、励起光が照射されると蛍光を発する蛍光色素を含み、画像取得工程では、混合液滴に対して励起光を照射し、励起光の照射により発生して到達する蛍光を集光して結像させて画像情報を取得してもよい。   In addition, the raw material liquid contains a fluorescent dye that emits fluorescence when irradiated with excitation light. In the image acquisition process, the mixed droplets are irradiated with excitation light, and the fluorescence generated and reached by irradiation of the excitation light is emitted. Image information may be acquired by focusing and forming an image.

これによれば、画像情報において、混合液滴における蛍光色素の量が多い部分ほど、光の強度が強くなるので、この蛍光色素の分布量が画像情報において好適に把握され、混合液滴における組成の均一度をより精度よく取得できる。   According to this, in the image information, as the amount of the fluorescent dye in the mixed droplet is larger, the intensity of light becomes stronger. Therefore, the distribution amount of the fluorescent dye is appropriately grasped in the image information, and the composition in the mixed droplet is determined. Can be obtained more accurately.

また、蛍光によって画像情報を取得する場合に、さらに、混合液滴に対して光を照射し、混合液滴を透過した透過光を集光して結像させ混合液滴についての透過光画像情報を取得し、対称性取得工程を行う前に、透過光画像情報に基づいて蛍光画像情報を補正する補正工程を含むことが好ましく、これにより、さらに精度よく、均一度を取得することができる。   In addition, when acquiring image information by fluorescence, light is further applied to the mixed droplet, and the transmitted light transmitted through the mixed droplet is condensed to form an image. Before performing the symmetry acquisition step, it is preferable to include a correction step of correcting the fluorescence image information based on the transmitted light image information, whereby the uniformity can be acquired with higher accuracy.

また、中心取得工程は、画像情報において混合液滴の外縁形状を取得し、外縁形状を真円を含む楕円に近似し、真円を含む楕円の中心位置を混合液滴の中心位置として取得することが好ましい。   The center acquisition step acquires the outer edge shape of the mixed droplet in the image information, approximates the outer edge shape to an ellipse including a perfect circle, and acquires the center position of the ellipse including the perfect circle as the center position of the mixed droplet. It is preferable.

また、中心取得工程は、画像情報において混合液滴が占める領域を取得し、混合液滴の領域の重心を混合液滴の中心位置として取得してもよい。   The center acquisition step may acquire a region occupied by the mixed droplet in the image information, and acquire the center of gravity of the mixed droplet region as the center position of the mixed droplet.

また、中心取得工程は、画像情報において光の強度分布の重心を取得し、光強度分布の重心位置を混合液滴の中心位置としてとして取得してもよい。   In the center acquisition step, the center of gravity of the light intensity distribution may be acquired in the image information, and the center of gravity position of the light intensity distribution may be acquired as the center position of the mixed droplet.

これらによれば、画像情報における混合液滴の中心位置を簡易かつ好適に取得できる。   According to these, the center position of the mixed droplet in the image information can be acquired easily and suitably.

また、上記の組成の均一度の評価方法において、混合液滴は、複数のキャピラリ毎に蓄えられた原料液とキャピラリの先端と対向して配置された基板との間にパルス電圧を印加し、各キャピラリの先端から原料液をそれぞれ射出させることにより基板上に形成されることが好ましい。   Further, in the evaluation method of the uniformity of the composition described above, the mixed droplet applies a pulse voltage between the raw material liquid stored for each of the plurality of capillaries and the substrate disposed facing the tip of the capillary, It is preferably formed on the substrate by injecting the raw material liquid from the tip of each capillary.

また、上記の組成の均一度の評価装置において、混合液滴を形成するための原料液がそれぞれ蓄えられた複数のキャピラリを有する原料液射出部と、キャピラリの先端と対向して配置され、該各キャピラリの先端からそれぞれ射出される原料液から形成される混合液滴が載置される基板と、各キャピラリに蓄えられた原料液のそれぞれと基板との間にパルス電圧を印加する電圧印加装置と、をさらに有することが好ましい。   Further, in the apparatus for evaluating the uniformity of the composition, a raw material liquid injection section having a plurality of capillaries each storing a raw material liquid for forming mixed droplets is disposed opposite the tip of the capillary, A voltage applying device for applying a pulse voltage between a substrate on which a mixed droplet formed from a raw material liquid ejected from the tip of each capillary is placed, and each of the raw material liquid stored in each capillary and the substrate It is preferable to further include

これらによれば、微少な混合液滴を好適に形成することができ、このようにして形成された混合液滴の組成の均一度を迅速に測定できる。   According to these, minute mixed droplets can be suitably formed, and the uniformity of the composition of the mixed droplets thus formed can be measured quickly.

また、上記の組成の均一度の評価装置において、複数のキャピラリうち、少なくとも1つのキャピラリの外周に電極が設置されており、この評価装置は、さらに、電極に原料液の電位以上の電位を付与するように電圧印加装置を制御する制御装置を備えることが好ましい。   Moreover, in the evaluation apparatus for the uniformity of the composition, an electrode is provided on the outer periphery of at least one capillary out of a plurality of capillaries, and this evaluation apparatus further applies a potential higher than the potential of the raw material liquid to the electrode. It is preferable to include a control device that controls the voltage application device.

この場合、制御装置により、電極に原料液の電位以上の電位を付与するように電圧印加装置を制御すると、ノズルの直下に電気力線がより集中する。このため、原料液を被液滴形成物上の所望の位置に的確に配置することが可能となる。このため、その後に原料液を被液滴形成物に向けて吐出する場合に、原料液からなる液滴に的確に混合させることができる。また原料液同士の混合がノズルから吐出される前ではなく吐出後被液滴形成物上で行われるため、各ノズルで原料液の品質が変わることはない。   In this case, if the voltage application device is controlled by the control device so that a potential equal to or higher than the potential of the raw material liquid is applied to the electrode, the lines of electric force are more concentrated immediately below the nozzle. For this reason, it is possible to accurately arrange the raw material liquid at a desired position on the droplet formation object. For this reason, when discharging a raw material liquid toward a to-be-droplet formation object after that, it can be made to mix with the droplet consisting of a raw material liquid exactly. Further, since the mixing of the raw material liquids is not performed before being discharged from the nozzles but after the discharge, the quality of the raw material liquids does not change at each nozzle.

本発明により、微少な混合液滴の組成の均一度を簡易かつ迅速に評価することができる。これによって、様々な条件で混合液滴を形成し、各々の混合液滴の均一度を評価することにより、良好に混合がなされるために必要な液滴形成条件を容易に把握することができる。   According to the present invention, the uniformity of the composition of minute mixed droplets can be easily and quickly evaluated. As a result, by forming mixed droplets under various conditions and evaluating the uniformity of each mixed droplet, it is possible to easily grasp the droplet formation conditions necessary for good mixing. .

以下、添付図面を参照しながら、本発明に係る混合液滴の組成の均一度の評価方法及び評価装置の好適な実施形態について詳細に説明する。なお、図面の説明において、同一または相当要素には同一の符号を付し、重複する説明は省略する。
(第1実施形態)
まず、図1を参照して、本実施形態に係る組成の均一度の評価装置について説明する。この混合液滴の組成の均一度の評価装置100は、大きく分けて、混合液滴形成部110と、混合液滴均一度評価部120と、を有している。
Hereinafter, preferred embodiments of a method and an apparatus for evaluating the uniformity of composition of mixed droplets according to the present invention will be described in detail with reference to the accompanying drawings. In the description of the drawings, the same or corresponding elements are denoted by the same reference numerals, and redundant description is omitted.
(First embodiment)
First, the composition uniformity evaluation apparatus according to the present embodiment will be described with reference to FIG. The composition evaluation device 100 for the composition uniformity of mixed droplets is roughly divided into a mixed droplet formation unit 110 and a mixed droplet uniformity evaluation unit 120.

混合液滴形成部110は、互いに異なる原料液がそれぞれ蓄えられた複数のキャピラリ101,102,103を有する原料液射出部105と、キャピラリ101、102,103内の原料液の各々と電動ステージ3上に載置された光透過性の基板2との間に電圧を印加する電圧印加装置107と、を有している。   The mixed droplet forming unit 110 includes a raw material liquid injection unit 105 having a plurality of capillaries 101, 102, and 103 each storing different raw material liquids, and each of the raw material liquids in the capillaries 101, 102, and 103 and the electric stage 3. And a voltage applying device 107 that applies a voltage to the light-transmitting substrate 2 placed thereon.

原料液射出部105のキャピラリ101,102、103の先端は、電動ステージ3上に載置される基板2と対向するようにされている。また、原料液射出部105は、ガラス製等の各キャピラリ101,102,103内に図2に示すように、電極104を備えており、この電極104がキャピラリ101〜103内の原料液8aと各々接触するようになっている。   The tips of the capillaries 101, 102, 103 of the raw material liquid injection unit 105 are made to face the substrate 2 placed on the electric stage 3. The raw material liquid injection unit 105 includes an electrode 104 in each capillary 101, 102, 103 made of glass or the like as shown in FIG. 2, and this electrode 104 is connected to the raw material liquid 8a in the capillaries 101 to 103. Each comes into contact.

そして、電圧印加装置107は、基板2が載置される電動ステージ3と各電極104との間に所定のパルス電圧を印加する。これにより、電動ステージ3上の基板2と各電極液8aとの間にパルス電圧が印加され、キャピラリ101〜103内の原料液8aが各々任意のタイミングで、原料液ジェット流Rとして基板2に向かって射出される。射出された原料液ジェット流Rは、空中で互いに合体して、あるいは、基板上で互いに合体して、混合液滴Mとなる。   The voltage application device 107 applies a predetermined pulse voltage between the electric stage 3 on which the substrate 2 is placed and each electrode 104. Thereby, a pulse voltage is applied between the substrate 2 on the electric stage 3 and each electrode liquid 8a, and the raw material liquid 8a in the capillaries 101 to 103 is respectively supplied to the substrate 2 as a raw material liquid jet flow R at an arbitrary timing. It is injected towards. The injected raw material liquid jet streams R merge with each other in the air or merge with each other on the substrate to form mixed droplets M.

ここで、あらかじめ各原料液ジェット流Rを形成する各原料液は、励起光が照射されると互いに異なる波長の蛍光を発する蛍光物質を含んでいる。   Here, each raw material liquid that forms each raw material liquid jet stream R in advance contains fluorescent substances that emit fluorescence having different wavelengths when irradiated with excitation light.

一方、図1に戻って、混合液滴均一度評価部120は、基板2を載置する電動ステージ3と、電動ステージ3の移動を制御する電動ステージ制御部108と、基板2の下方から透過照明用の白色光を混合液滴Mに対して照射する透過光用光源4と、ハーフミラー6を有し基板2上の混合液滴Mに対して上方から蛍光発光用の励起光を照射する蛍光励起用光源7と、基板2の混合液滴Mから上方に放射される光を集光して結像させる対物レンズ5と、対物レンズ5によって集光された光のうち所望の波長の光を選択的に透過させる可変電動フィルタ8と、可変電動フィルタ8によって結像される混合液滴Mを含む視野の画像を検出してこの光の強さを含む画像データ(画像情報)を取得するカメラ9と、カメラ9で取得された画像データを画像処理する画像処理装置10と、混合液滴均一度評価部120を制御する制御装置12とを備えている。ここで、対物レンズ5、蛍光励起用光源7、可変電動フィルタ8、カメラ9が画像取得手段115を構成している。   On the other hand, referring back to FIG. 1, the mixed droplet uniformity evaluation unit 120 transmits the electric stage 3 on which the substrate 2 is placed, the electric stage control unit 108 that controls the movement of the electric stage 3, and the transmission from below the substrate 2. A transmitted light source 4 for irradiating white light for illumination to the mixed droplet M and a mixed mirror M on the substrate 2 having a half mirror 6 are irradiated with excitation light for fluorescence emission from above. A light source for fluorescence excitation 7, an objective lens 5 that focuses and radiates light emitted upward from the mixed droplet M of the substrate 2, and light of a desired wavelength among the light condensed by the objective lens 5 Is selectively transmitted, and a field image including the mixed droplet M imaged by the variable motor filter 8 is detected to obtain image data (image information) including the intensity of the light. Camera 9 and image data acquired by camera 9 An image processing apparatus 10 to sense, and a control unit 12 for controlling the mixture droplets uniformity evaluation unit 120. Here, the objective lens 5, the fluorescence excitation light source 7, the variable electric filter 8, and the camera 9 constitute the image acquisition means 115.

電動ステージ3は、基板2を水平方向に動かして、基板2上に形成された混合液滴Mを、混合液滴均一度評価部120で観察可能な位置、具体的には、対物レンズ5の光軸上の同一位置に移動させる。   The electric stage 3 moves the substrate 2 in the horizontal direction, and the position where the mixed droplet M formed on the substrate 2 can be observed by the mixed droplet uniformity evaluation unit 120, specifically, the objective lens 5. Move to the same position on the optical axis.

透過光用光源4は、透過照明用の白色光を混合液滴Mの裏側から照射し、混合液滴Mや基板2を透過して上方に向かう透過光を生じさせる。   The transmitted light source 4 emits white light for transmitted illumination from the back side of the mixed droplet M, and transmits the mixed droplet M and the substrate 2 to generate upward transmitted light.

蛍光励起用光源7は、ハーフミラー6及び対物レンズ5を介して基板2上の混合液滴Mに対して励起光を照射する。この励起光は、混合液滴Mが含む原料液の各蛍光成分を励起させるための波長の光である。混合液滴Mに励起光が照射されると、混合液滴Mにおいては、蛍光成分の量に応じた強度の蛍光を発生する。すなわち、蛍光成分の量が多い部分からは高い強度で蛍光が発生する。ここで、蛍光励起用光源7は、原料液の各蛍光物質を励起させるための波長を個別に照射可能となっている。   The fluorescence excitation light source 7 irradiates the mixed droplet M on the substrate 2 with excitation light via the half mirror 6 and the objective lens 5. This excitation light is light having a wavelength for exciting each fluorescent component of the raw material liquid included in the mixed droplet M. When the mixed droplet M is irradiated with excitation light, the mixed droplet M generates fluorescence having an intensity corresponding to the amount of the fluorescent component. That is, fluorescence is generated at a high intensity from a portion where the amount of the fluorescent component is large. Here, the fluorescence excitation light source 7 can individually irradiate wavelengths for exciting each fluorescent substance in the raw material liquid.

対物レンズ5は、混合液滴Mや基板2を透過した透過光や、混合液滴Mから発生した蛍光を集光し、ハーフミラー6及び可変電動フィルタ8を介してカメラ9の撮像素子上にこの透過光画像や蛍光画像を結像させる。   The objective lens 5 collects the transmitted light transmitted through the mixed droplet M and the substrate 2 and the fluorescence generated from the mixed droplet M, and passes on the image sensor of the camera 9 via the half mirror 6 and the variable electric filter 8. This transmitted light image or fluorescent image is formed.

可変電動フィルタ8は、対物レンズ5から入射された光から所定の波長の光を選択的に透過させるものであり、この所定の光は、制御装置12によって適宜選択可能となっている。選択可能な波長は、蛍光成分の蛍光波長や、透過光用光源4の白色光源の波長に対応するようにされている。   The variable electric filter 8 selectively transmits light having a predetermined wavelength from light incident from the objective lens 5, and the predetermined light can be appropriately selected by the control device 12. The selectable wavelength corresponds to the fluorescence wavelength of the fluorescence component and the wavelength of the white light source of the transmitted light source 4.

カメラ9は、対物レンズ5によって集光され、ハーフミラー6及び可変電動フィルタ8を透過して結像する透過光画像や蛍光画像を撮像素子で検出して、混合液滴M及びこの周りの基板2を含む所定の視野の透過光画像データや蛍光画像データを生成する。これらの画像データは、混合液滴Mや基板2等を含む視野内を撮影した画像データであり、各画像データにおける各画素は、視野内の各部から到達した透過光又は蛍光の強度の情報を含んでいる。   The camera 9 collects the mixed droplet M and its surrounding substrate by detecting a transmitted light image or a fluorescent image focused by the objective lens 5 and transmitted through the half mirror 6 and the variable electric filter 8 to form an image. 2 and transmitted light image data and fluorescence image data of a predetermined field of view. These image data are image data obtained by photographing the inside of the field of view including the mixed droplet M, the substrate 2 and the like, and each pixel in each image data includes information on the intensity of transmitted light or fluorescence reached from each part in the field of view. Contains.

ここで、カメラ9は、透過照明用の白色光のみを混合液滴Mに照射したときに得られる透過光画像データと、励起光のみを混合液滴Mに照射したときに得られる蛍光画像データとを、一つの混合液滴Mについて別々に取得する。   Here, the camera 9 transmits transmitted light image data obtained when the mixed droplet M is irradiated with only white light for transmitted illumination, and fluorescent image data obtained when the mixed droplet M is irradiated with only the excitation light. Are obtained separately for one mixed droplet M.

次に画像処理装置10の詳細な構成を、図3にブロック図として示す。画像処理装置10は、カメラ9から蛍光画像データ及び透過光画像データを取得する画像データ取得部50と、透過光画像データから混合液滴Mの輪郭線を抽出する輪郭線抽出部52と、抽出された輪郭線に基づいて、蛍光画像データからバックグランドノイズを除去するバックグランドノイズ除去部54と、バックグランドノイズが除去された蛍光画像データから漏れ蛍光を除去する漏れ蛍光除去部56と、漏れ蛍光が除去された蛍光画像データにおける混合液滴Mの中心位置を取得する中心取得部58と、蛍光画像データにおける、取得された中心位置周りの蛍光強度の対称性に関する指標を取得する対称性取得部60と、得られた結果を表示する表示部70と同様の機能を発揮するコンピュータ装置である。ここで、画像処理は、一つの混合液滴Mについて取得された透過光画像データ及び蛍光画像データの組み合わせ毎に行われる。   Next, a detailed configuration of the image processing apparatus 10 is shown as a block diagram in FIG. The image processing apparatus 10 includes an image data acquisition unit 50 that acquires fluorescent image data and transmitted light image data from the camera 9, an outline extraction unit 52 that extracts an outline of the mixed droplet M from the transmitted light image data, and an extraction A background noise removing unit 54 for removing background noise from the fluorescence image data, a leakage fluorescence removing unit 56 for removing leakage fluorescence from the fluorescence image data from which the background noise has been removed, and a leakage A center acquisition unit 58 for acquiring the center position of the mixed droplet M in the fluorescence image data from which fluorescence has been removed, and symmetry acquisition for acquiring an index relating to the symmetry of the fluorescence intensity around the acquired center position in the fluorescence image data. This is a computer device that exhibits the same functions as the unit 60 and the display unit 70 that displays the obtained results. Here, the image processing is performed for each combination of transmitted light image data and fluorescence image data acquired for one mixed droplet M.

輪郭抽出部52は、透過光画像データに基づいて、混合液滴Mの輪郭線を抽出する。ここでは、例えば、透過光画像データを2値化し、画素間での微分を取ることにより輪郭線を取得できる。   The contour extraction unit 52 extracts the contour line of the mixed droplet M based on the transmitted light image data. Here, for example, the contour line can be acquired by binarizing the transmitted light image data and taking differentiation between pixels.

バックグランドノイズ除去部54は、輪郭抽出部52によって抽出された輪郭線を参照し、蛍光画像データにおいて輪郭線の外側には蛍光を発する物質が存在しないとみなして蛍光画像データのバックグランドノイズを除去する。具体的には、蛍光画像データにおける輪郭線上の画素の蛍光強度を取得し、輪郭線上の画素の蛍光強度を基準にして蛍光画像のバックグランドノイズを除去する。例えば、輪郭線上の画素の蛍光強度の平均値を取得し、蛍光画像データの全画素の光強度のデータからこの平均値を引き算することによって、バックグランドノイズの除去ができる。   The background noise removing unit 54 refers to the contour line extracted by the contour extracting unit 52 and regards the fluorescence image data as background noise in the fluorescence image data by assuming that there is no fluorescent substance outside the contour line. Remove. Specifically, the fluorescence intensity of the pixels on the contour line in the fluorescence image data is acquired, and background noise of the fluorescence image is removed based on the fluorescence intensity of the pixels on the contour line. For example, the background noise can be removed by obtaining the average value of the fluorescence intensity of the pixels on the contour line and subtracting this average value from the data of the light intensity of all the pixels of the fluorescence image data.

漏れ蛍光除去部56は、バックグランドノイズが除去された蛍光画像データに対して漏れ蛍光の除去を行う。通常、蛍光は幅の広いスペクトルを有するため、可変電動フィルタ8の透過波長域とは異なる中心波長を持つ他の蛍光であっても、スペクトルの裾の部分がわずかに可変電動フィルタ8を透過して漏れる場合があるので、このような漏れ蛍光の除去による蛍光画像データの補正が必要となる。代表的な補正方法は、以下の通りである。例えば、2種類の蛍光色素溶液を混合する場合、各蛍光に対するフィルタを透過して取得された蛍光強度の測定値をそれぞれf、gとする。このとき、各蛍光に対する真の蛍光強度をF、Gとすると、f、gは、f = F + aG、g = G + bFであらわすことができる。これらの2式を用い、連立方程式を解いてF、G求めることによって漏れ蛍光補正を行うことができる。ここで、aG、bFは漏れ蛍光を表し、a、bは異なる蛍光に対するフィルタの透過率である。なお、a、bは、実験前に予め測定されている定数である。   The leakage fluorescence removing unit 56 removes leakage fluorescence from the fluorescence image data from which background noise has been removed. Usually, since the fluorescence has a wide spectrum, even if it is other fluorescence having a center wavelength different from the transmission wavelength range of the variable electric filter 8, the bottom part of the spectrum is slightly transmitted through the variable electric filter 8. Therefore, it is necessary to correct the fluorescence image data by removing such leakage fluorescence. A typical correction method is as follows. For example, when two kinds of fluorescent dye solutions are mixed, the measured values of the fluorescence intensity acquired through the filter for each fluorescence are set as f and g, respectively. At this time, if the true fluorescence intensity for each fluorescence is F and G, f and g can be expressed as f = F + aG and g = G + bF. Leakage fluorescence correction can be performed by solving these simultaneous equations and obtaining F and G using these two equations. Here, aG and bF represent leaking fluorescence, and a and b are the transmittances of the filters for different fluorescence. Here, a and b are constants measured in advance before the experiment.

中心取得部(中心取得手段)58は、漏れ蛍光が補正された蛍光画像データにおける、混合液滴Mの中心座標を取得する。具体的には、例えば、以下の3つの方法をとることができる。   The center acquisition unit (center acquisition means) 58 acquires the center coordinates of the mixed droplet M in the fluorescence image data in which leakage fluorescence is corrected. Specifically, for example, the following three methods can be taken.

第1の方法は、蛍光画像データにおける混合液滴Mの外縁形状を取得し、この外縁形状を真円を含む楕円に近似し、その真円を含む楕円の中心位置を混合液滴Mの中心座標とするものである。第2の方法は、蛍光画像データにおいて、蛍光強度分布の重心位置を求めて、この重心を混合液滴Mの中心座標とするものである。第3の方法は、蛍光画像データにおいて混合液滴Mの外縁形状を取得し、この外縁形状の領域の面積重心を取得し、この面積重心を混合液滴Mの中心座標とするものである。   The first method acquires the outer edge shape of the mixed droplet M in the fluorescence image data, approximates the outer edge shape to an ellipse including a perfect circle, and sets the center position of the ellipse including the true circle as the center of the mixed droplet M. It is a coordinate. The second method is to obtain the centroid position of the fluorescence intensity distribution in the fluorescence image data and use this centroid as the center coordinate of the mixed droplet M. In the third method, the outer edge shape of the mixed droplet M is acquired in the fluorescence image data, the area centroid of the region of the outer edge shape is acquired, and the area centroid is used as the center coordinate of the mixed droplet M.

対称性取得部(対称性取得手段)60は、蛍光画像データにおける混合液滴Mの中心座標周りにおける蛍光の強度の対称性を評価する。   The symmetry acquisition unit (symmetry acquisition means) 60 evaluates the symmetry of the fluorescence intensity around the center coordinates of the mixed droplet M in the fluorescence image data.

具体的には、図4(a)に示すように、得られた蛍光画像において、混合液滴Mの中心座標を原点とする極座標(r,θ)を設定すると、任意のθに対するr軸上の蛍光強度分布曲線は、図4(b)のようになる。すなわち、混合液滴Mは通常中心部分が一番厚いので、中心部分から到達する蛍光の強度がもっとも強くなる場合が多く、この場合上に凸の曲線状の分布曲線となる。ここで、r=0である垂直軸線によって分布曲線を2つの領域に分け、一方側の分布曲線とX軸とによって形成される面積をSR、他方側の分布曲線とX軸とによって形成される面積をSLとする。SLとSRとの差もしくは比の値は蛍光強度分布の中心軸回りの対称性を示す。ここで、θ(0≦θ<π)に対して、均一度としての関数δ(θ)[%]を(1)式のように定義する。 Specifically, as shown in FIG. 4A, when polar coordinates (r, θ) having the origin at the center coordinate of the mixed liquid droplet M are set in the obtained fluorescent image, on the r-axis with respect to an arbitrary θ. The fluorescence intensity distribution curve is as shown in FIG. That is, since the mixed droplet M is usually thickest at the central portion, the intensity of fluorescence reaching from the central portion is often the strongest, and in this case, a convex convex distribution curve is obtained. Here, the distribution curve is divided into two regions by a vertical axis line where r = 0, the area formed by the distribution curve on one side and the X axis is formed by S R , and the distribution curve on the other side and the X axis are formed. Let S L be the area. The difference or ratio between S L and S R indicates symmetry about the central axis of the fluorescence intensity distribution. Here, with respect to θ (0 ≦ θ <π), a function δ (θ) [%] as a degree of uniformity is defined as in equation (1).

Figure 0004146310
(1)
そして、このδを、θ=0〜πにおいて積分して平均することにより、(2)式のように均一度の指標となる対称度Δをそれぞれの蛍光画像データに対して求めることができる。
Figure 0004146310
(1)
Then, by integrating and averaging δ at θ = 0 to π, a symmetry Δ that is an index of uniformity can be obtained for each fluorescent image data as shown in equation (2).

Figure 0004146310
(2)
ここで、対称度Δ=0であれば、中心座標周りに対称な濃度分布が混合液滴M内に形成されていることを示しており、これは、混合度が極めて高くほぼ完全に混合されていることを示す。一方、対称度Δ>0であれば、中心周りに非対称な濃度分布が混合液滴M内に形成されていることを示し、特に、対称度Δが大きくなればなるほど不均一度が高い、すなわち、混合が不十分であることを示している。
Figure 0004146310
(2)
Here, if the degree of symmetry Δ = 0, it indicates that a symmetric concentration distribution around the center coordinate is formed in the mixed droplet M, which is extremely high in mixing and almost completely mixed. Indicates that On the other hand, if the degree of symmetry Δ> 0, this indicates that an asymmetric concentration distribution around the center is formed in the mixed droplet M, and in particular, the higher the degree of symmetry Δ, the higher the degree of non-uniformity. , Indicating insufficient mixing.

表示部70は、画像データ取得部50が取得した画像データや、対称性取得部60で取得された対称度Δをディスプレイ等によりオペレータに表示する。   The display unit 70 displays the image data acquired by the image data acquisition unit 50 and the symmetry degree Δ acquired by the symmetry acquisition unit 60 to the operator using a display or the like.

続いて、図1に戻って、制御装置12は、良好な透過光画像データ・蛍光画像データを得るべく、透過光用光源4、蛍光励起用光源7、可変電動フィルタ8、カメラ9、電動ステージ制御部108、画像処理装置10、及び、電圧印加装置107を制御している。   Subsequently, returning to FIG. 1, the control device 12 obtains good transmitted light image data / fluorescence image data, the transmitted light source 4, the fluorescence excitation light source 7, the variable electric filter 8, the camera 9, and the electric stage. The control unit 108, the image processing device 10, and the voltage application device 107 are controlled.

次に、図5のフローチャートを参照して、本実施形態に係る組成の均一度の評価装置100の動作を説明する。   Next, the operation of the composition uniformity evaluation apparatus 100 according to the present embodiment will be described with reference to the flowchart of FIG.

あらかじめ、可変電動フィルタ8を、すべての波長の光を透過可能な状態としておく。   In advance, the variable electric filter 8 is set in a state capable of transmitting light of all wavelengths.

まず、基板2上に混合液滴Mを形成する(ステップS201)。具体的には、電圧印加装置107によってキャピラリ101、102,103内の各原料液8aと、基板2との間にパルス電圧を印加し、キャピラリ101〜103から各原料液の原料液ジェット流Rを基板2に対して射出させて、基板2上に原料液ジェット流Rが混合された混合液滴Mを形成する。詳述すると、図2に示すように、パルス電圧の印加により、キャピラリ101,102,103から原料液8aが静電吸引力により引き出されてテイラーコーン(Taylor Cone)16が形成された後、所定量の原料液がジェット流Rとして吐出され、結果として、基板2上に混合液滴Mが形成される。ここで、キャピラリ101〜103から各原料液ジェット流Rをほぼ同時に射出して基板2に到達する前に空中で原料液ジェット流R同士の混合を行ってもよく、また、キャピラリ101〜103から、順次基板2に向かって各原料液ジェット流Rを個別に射出して、基板2上で混合を行ってもよい。また、ここでは、基板2上に複数の混合液滴Mを形成する。このとき、各原料液は、各々励起光が照射されることにより互いに異なる波長の蛍光を発する蛍光物質を含んでいる。   First, the mixed droplet M is formed on the substrate 2 (step S201). Specifically, the voltage application device 107 applies a pulse voltage between each raw material liquid 8a in the capillaries 101, 102, and 103 and the substrate 2, and the raw material liquid jet flow R of each raw material liquid from the capillaries 101 to 103. Are ejected onto the substrate 2 to form a mixed droplet M in which the raw material liquid jet stream R is mixed on the substrate 2. More specifically, as shown in FIG. 2, after application of a pulse voltage, the raw material liquid 8a is drawn out from the capillaries 101, 102, and 103 by electrostatic attraction, and a Taylor Cone 16 is formed. A fixed amount of raw material liquid is discharged as a jet stream R, and as a result, mixed droplets M are formed on the substrate 2. Here, the raw material liquid jet streams R may be injected almost simultaneously from the capillaries 101 to 103 and mixed with each other in the air before reaching the substrate 2. Alternatively, each raw material liquid jet stream R may be individually injected toward the substrate 2 and mixed on the substrate 2. Here, a plurality of mixed droplets M are formed on the substrate 2. At this time, each raw material liquid contains fluorescent substances that emit fluorescence having different wavelengths when irradiated with excitation light.

次に、基板2上の一つの混合液滴Mが対物レンズ5の視野内の所定の位置に入るように電動ステージ3を移動させる(ステップ202)。次に、透過光用光源4を用いて、基板2の背面からその混合液滴Mに対して白色光を照射し(ステップS203)、混合液滴Mからの透過光をカメラ9で検出することにより透過光画像データを取得する(ステップS204)。   Next, the electric stage 3 is moved so that one mixed droplet M on the substrate 2 enters a predetermined position in the field of view of the objective lens 5 (step 202). Next, using the transmitted light source 4, the mixed droplet M is irradiated with white light from the back surface of the substrate 2 (step S 203), and the transmitted light from the mixed droplet M is detected by the camera 9. Thus, transmitted light image data is acquired (step S204).

続いて、透過光用光源4を消光した後、蛍光励起用光源7から、混合液滴Mに含まれる各原料液の蛍光物質を励起させるための波長の光を出射すると共に、可変電動フィルタ8を当該励起光のみが透過するようにセットする(ステップS205)。そして、混合液滴Mから各々の部分の蛍光成分の量に応じた強さで発光する蛍光をカメラ9で検出して蛍光画像データを取得する(ステップS206)。   Subsequently, after the transmitted light source 4 is quenched, the fluorescence excitation light source 7 emits light of a wavelength for exciting the fluorescent material of each raw material liquid contained in the mixed droplet M, and the variable electric filter 8. Is set so that only the excitation light is transmitted (step S205). Then, fluorescence emitted from the mixed droplet M with an intensity corresponding to the amount of the fluorescent component in each portion is detected by the camera 9 to acquire fluorescent image data (step S206).

つぎに、ステップS207において、一つの混合液滴Mにおけるすべての原料液に対応する蛍光物質に対して蛍光画像データを取得したかどうかを判断し、未取得の蛍光物質に係る蛍光画像データが有れば、再び、ステップS205に戻って、蛍光励起用光源7から異なる励起光を発生すると共に、可変電動フィルタ8を等該励起光に対応する蛍光のみが透過するように再セットし、再びステップS206において、他の蛍光画像データを取得する。なお、このように、一つの混合液滴Mについて透過光画像データや各蛍光画像データを取得している間、混合液滴Mはカメラ9の視野内において固定されているので、透過光画像データ及び蛍光画像データ内における混合液滴Mの位置は、同一となっている。   Next, in step S207, it is determined whether or not fluorescent image data has been acquired for the fluorescent substances corresponding to all the raw material liquids in one mixed droplet M, and there is fluorescent image data relating to unacquired fluorescent substances. Then, returning to step S205 again, different excitation light is generated from the fluorescence excitation light source 7, and the variable electric filter 8 is reset so that only the fluorescence corresponding to the excitation light is transmitted, and the step again. In S206, other fluorescent image data is acquired. In this way, while the transmitted light image data and each fluorescence image data are acquired for one mixed droplet M, the mixed droplet M is fixed in the field of view of the camera 9, so that the transmitted light image data And the position of the mixed droplet M in the fluorescence image data is the same.

一方、蛍光画像データが、一つの混合液滴Mにおけるすべての蛍光成分について取得されると、ステップS208において、基板2上のすべての混合液滴Mについて透過光画像データ及び蛍光画像データの組み合わせが取得されたか否かが判断され、データ未取得の混合液滴Mが有れば、ステップS202に戻って、再び他の混合液滴Mの各画像データの取得を行う。   On the other hand, when the fluorescence image data is acquired for all the fluorescence components in one mixed droplet M, in step S208, the combination of the transmitted light image data and the fluorescence image data is obtained for all the mixed droplets M on the substrate 2. It is determined whether or not it has been acquired, and if there is a mixed droplet M for which data has not been acquired, the process returns to step S202 to acquire each image data of another mixed droplet M again.

一方、ステップS208において、基板2上のすべての混合液滴Mの透過光画像データ及び蛍光画像データの組み合わせが取得されたと判断された場合には、ステップS209以下の画像処理工程に進む。   On the other hand, if it is determined in step S208 that a combination of transmitted light image data and fluorescence image data of all the mixed droplets M on the substrate 2 has been acquired, the process proceeds to an image processing step after step S209.

まず、ステップS209では、一つの混合液滴Mにかかる画像データの組み合わせにおいて、透過光画像データから混合液滴Mの輪郭線を抽出する。次に、ステップS210へ進んで、当該一つの混合液滴Mに係る各蛍光画像データについて、ステップS209で得られた輪郭線を利用して、バックグランドノイズの除去を行う。続いて、ステップS211において、バックグランドノイズが除去された各蛍光画像データに対して、漏れ蛍光の除去を各々行う。   First, in step S209, the contour line of the mixed droplet M is extracted from the transmitted light image data in the combination of the image data concerning one mixed droplet M. Next, the process proceeds to step S210, and background noise is removed from each fluorescent image data related to the single mixed droplet M by using the contour line obtained in step S209. Subsequently, in step S211, leakage fluorescence is removed for each fluorescence image data from which background noise has been removed.

そして、ステップS212に進んで、すべての混合液滴Mについて蛍光画像データについて補正がなされたか否かを判断し、未補正の蛍光画像データが有れば、ステップS209に戻って、再び蛍光画像データの補整を行う。   Then, the process proceeds to step S212, where it is determined whether or not the fluorescence image data has been corrected for all the mixed droplets M. If there is uncorrected fluorescence image data, the process returns to step S209, and again the fluorescence image data. Compensate for.

一方、すべての混合液滴Mについて蛍光画像の補正がなされたならば、ステップS213に進んで、オペレータから蛍光画像データにおける混合液滴Mの中心の決定方法の選択を入力させる。ここでは、オペレータは、前述の3つの、混合液滴Mの中心位置の決定方法から一つを選択できる。   On the other hand, if the fluorescence image has been corrected for all the mixed droplets M, the process proceeds to step S213, and the selection of the method for determining the center of the mixed droplet M in the fluorescence image data is input from the operator. Here, the operator can select one of the three methods for determining the center position of the mixed droplet M described above.

そして、蛍光画像データにおける混合液滴Mの中心位置の決定方法が選択されると、ステップS214において、選択された混合液滴Mの中心位置の決定方法に従って、一つの混合液滴Mに関して、蛍光画像データにおける混合液滴Mの中心座標を求める。   Then, when the determination method of the center position of the mixed droplet M in the fluorescence image data is selected, in step S214, the fluorescence of one mixed droplet M is determined according to the determination method of the center position of the selected mixed droplet M. The center coordinates of the mixed droplet M in the image data are obtained.

続いて、ステップS215では、当該一つの混合液滴Mに関する各蛍光画像データについて、ステップS214で取得された中心座標を参照し、中心座標周りの画素の蛍光の強度データについて、中心周りの対称度Δを求める。そして、ステップS216において、すべての混合液滴Mに係る蛍光画像データについて、対称度Δを求めたか否かを判定し、対称度Δが取得されていない混合液滴Mにかかる蛍光画像データが有れば、ステップS214に戻って、各混合液滴Mの各蛍光画像データについて対称度Δを取得する。一方、すべての混合液滴Mについて、各蛍光画像における対称度Δを取得したならば、ステップS217に進んで、このようにして得られた各混合液滴Mに係る対称度Δの統計的処理を行う。例えば、蛍光成分毎に対称度Δの平均値を取得したり、全蛍光成分の対称度Δの平均値を取得したりすることができる。この対称度Δは上述のように、数字が大きくなるほど不均一である、すなわち、混合状態が悪いことを示している。   Subsequently, in step S215, the center coordinates acquired in step S214 are referred to for each fluorescent image data relating to the single mixed droplet M, and the symmetry degree around the center is determined for the fluorescence intensity data of the pixels around the center coordinates. Find Δ. In step S216, it is determined whether or not the degree of symmetry Δ has been obtained for the fluorescence image data relating to all the mixed droplets M, and there is fluorescence image data relating to the mixed droplets M for which the degree of symmetry Δ has not been acquired. Then, the process returns to step S214, and the degree of symmetry Δ is acquired for each fluorescence image data of each mixed droplet M. On the other hand, when the symmetry Δ in each fluorescence image is acquired for all the mixed droplets M, the process proceeds to step S217, and statistical processing of the symmetry Δ related to each mixed droplet M obtained in this way is performed. I do. For example, it is possible to acquire the average value of the symmetry Δ for each fluorescent component or to acquire the average value of the symmetry Δ of all the fluorescent components. As described above, the degree of symmetry Δ indicates that the larger the number is, the more nonuniformity is, that is, the mixed state is poor.

このように、本実施形態に係る組成の均一度の評価装置及び方法によれば、混合液滴Mの成分の量に応じた強度で混合液滴Mから到達する光を集光して結像させ混合液滴Mについての蛍光画像データを取得し、さらに、蛍光画像データにおける混合液滴Mの中心位置を取得し、蛍光画像データにおける混合液滴の中心位置周りにおける光強度の対称度Δを取得している。   As described above, according to the apparatus and method for evaluating the uniformity of the composition according to the present embodiment, the light reaching the mixed droplet M with the intensity corresponding to the amount of the component of the mixed droplet M is condensed to form an image. The fluorescence image data for the mixed droplet M is acquired, the center position of the mixed droplet M in the fluorescence image data is further acquired, and the symmetry Δ of the light intensity around the center position of the mixed droplet in the fluorescence image data is obtained. Have acquired.

この対称度Δは、混合液滴における中心周りの蛍光物質の分布量の対称性と考えることができる。そして、混合液滴において各蛍光物質が中心周りに高い対称性で分布していれば、混合液滴における組成の均一度が高いと考えられるので、この対称度Δに基づいて、混合液滴における組成の均一度を簡易かつ迅速に評価することができる。とくに、本実施形態のようにして形成される混合液滴Mは非常に体積が小さいために蒸発の影響を受けやすく、形成後の短時間において混合液滴Mの組成の均一度を評価できるので、高精度に均一度を測定できる。   This degree of symmetry Δ can be considered as the symmetry of the distribution amount of the fluorescent substance around the center in the mixed droplet. If each fluorescent substance is distributed with high symmetry around the center in the mixed droplet, it is considered that the composition uniformity in the mixed droplet is high. Therefore, based on this symmetry Δ, The uniformity of composition can be easily and quickly evaluated. In particular, since the mixed droplet M formed as in the present embodiment has a very small volume, it is easily affected by evaporation, and the uniformity of the composition of the mixed droplet M can be evaluated in a short time after formation. The uniformity can be measured with high accuracy.

また、混合液滴Mに供給された各原料液は、励起光が照射されると蛍光を発する蛍光色素を含んでおり、混合液滴Mに対して励起光を照射し、励起光の照射により発生した蛍光を検出して混合液滴を含む視野の蛍光画像データを取得している。   Each raw material liquid supplied to the mixed droplet M includes a fluorescent dye that emits fluorescence when irradiated with excitation light. The mixed droplet M is irradiated with excitation light and irradiated with excitation light. Fluorescence image data of a visual field including mixed droplets is acquired by detecting the generated fluorescence.

これにより、混合液滴Mにおける蛍光色素の量が多い部分ほど、光の強度が強くなるので、混合液滴Mにおける各蛍光成分の分布度が蛍光画像情報において好適に把握され、混合液滴Mにおける組成の均一度がより精度よく取得される。   As a result, the intensity of light increases as the amount of the fluorescent dye in the mixed droplet M increases. Therefore, the distribution degree of each fluorescent component in the mixed droplet M is suitably grasped in the fluorescence image information, and the mixed droplet M The uniformity of the composition is obtained with higher accuracy.

また、混合液滴Mに対して光を照射し、混合液滴Mを透過した透過光を検出して混合液滴Mを含む視野の透過光画像データを取得し、対称度Δを取得する前に、透過光画像データに基づいて、蛍光画像情報を補正している。このため、さらに精度よく、蛍光画像データに基づいて対称度Δを取得することができる。   Further, before the mixed droplet M is irradiated with light, the transmitted light transmitted through the mixed droplet M is detected to obtain transmitted light image data of the visual field including the mixed droplet M, and before the degree of symmetry Δ is acquired. In addition, the fluorescence image information is corrected based on the transmitted light image data. Therefore, the degree of symmetry Δ can be acquired with higher accuracy based on the fluorescence image data.

また、画像データにおいて混合液滴Mの外縁形状を取得し、外縁形状を真円を含む楕円に近似し、真円を含む楕円の中心位置を混合液滴Mの中心位置とし、または、画像データにおいて混合液滴Mが占める領域を取得し、混合液滴Mの領域の重心を混合液滴Mの中心位置として取得し、または、画像データにおいて光の強度分布の重心を混合液滴Mの中心位置としてとして取得しているので、画像データにおける混合液滴Mの中心位置を簡易かつ好適に取得できる。このため、さらに精度よく、混合液滴の対称度Δが取得されている。   Further, the outer edge shape of the mixed droplet M is acquired in the image data, the outer edge shape is approximated to an ellipse including a perfect circle, and the center position of the ellipse including the perfect circle is set as the center position of the mixed droplet M, or the image data The area occupied by the mixed droplet M is acquired as the center position of the mixed droplet M as the center position of the mixed droplet M, or the center of the intensity distribution of light in the image data is the center of the mixed droplet M. Since it is acquired as the position, the center position of the mixed droplet M in the image data can be acquired easily and suitably. For this reason, the symmetry degree Δ of the mixed droplet is obtained with higher accuracy.

そして、このような技術は、たとえば、微少な混合液滴を用いるコンビナトリアルケミストリーやドラッグスクリーニング等の分野において特に有効である。   Such a technique is particularly effective in fields such as combinatorial chemistry and drug screening using minute mixed droplets.

次に、本実施形態にかかる均一度の測定についての実施例について説明する。   Next, an example of uniformity measurement according to the present embodiment will be described.

まず、フルオレセインを含む第1溶液と、ローダミンを含む第2溶液とを準備した。ここで、第1溶液は、溶媒内に、フルオレセインを1.25×10-4mol/L、塩化ナトリウムを1.1×10-2mol/Lの濃度で含有するものである。この溶媒は、95wt%のグリセリン、2.5wt%の水、2.5wt%のエタノールからなる。このとき、第1溶液の粘性係数は、906×10-3Pa・sであった。 First, a first solution containing fluorescein and a second solution containing rhodamine were prepared. Here, the first solution contains fluorescein at a concentration of 1.25 × 10 −4 mol / L and sodium chloride at a concentration of 1.1 × 10 −2 mol / L in the solvent. This solvent consists of 95 wt% glycerin, 2.5 wt% water, 2.5 wt% ethanol. At this time, the viscosity coefficient of the first solution was 906 × 10 −3 Pa · s.

一方、第2溶液は、溶媒内に、ローダミンBを1.25×10-4mol/L、塩化ナトリウムを1.1×10-2mol/Lの濃度で含むものである。ここで、溶媒は、95wt%のグリセリン、5wt%の水からなる。また、第2溶液の粘性係数は、616×10-3Pa・sであった。 On the other hand, the second solution, in a solvent, but at a concentration of Rhodamine B 1.25 × 10 -4 mol / L , sodium chloride 1.1 × 10 -2 mol / L. Here, the solvent is composed of 95 wt% glycerin and 5 wt% water. The viscosity coefficient of the second solution was 616 × 10 −3 Pa · s.

なお、このような第1溶液や第2溶液は、粘性係数が1×10-3Pa・s程度である水と比べると明らかなように、きわめて粘度が高く、均一に混合することはかなり困難であると予想された。なお、このようにグリセリンを主成分とする第1および第2溶液は蒸発速度がきわめて遅いため、混合液滴が蒸発してその形状や濃度分布等が変化することは考えにくい。 In addition, such a 1st solution and a 2nd solution are very high in viscosity so that it is clear compared with the water whose viscosity coefficient is about 1 * 10 < -3 > Pa * s, and it is quite difficult to mix uniformly. Was expected. Since the first and second solutions mainly composed of glycerin have a very low evaporation rate, it is unlikely that the mixed droplets evaporate and the shape, concentration distribution, and the like change.

続いて、第1溶液および第2溶液をキャピラリ101,102内に別々に導入し、基板2とキャピラリ101内の第1溶液との間に電圧を印加して、第1溶液を静電引力によって原料液ジェット流Rとして基板2に向かって射出して、基板2上に第1溶液の原料液滴を形成させた。さらに、キャピラリ102内の第2溶液と基板2との間に電圧を印加して、第2溶液を原料液ジェット流Rとして基板2上の第1溶液の原料液滴に対して射出した。これにより、基板2上で第1溶液と第2溶液とが混合された混合液滴MAが形成された。   Subsequently, the first solution and the second solution are separately introduced into the capillaries 101 and 102, a voltage is applied between the substrate 2 and the first solution in the capillary 101, and the first solution is electrostatically attracted. A raw material liquid jet stream R was ejected toward the substrate 2 to form a raw material droplet of the first solution on the substrate 2. Further, a voltage was applied between the second solution in the capillary 102 and the substrate 2, and the second solution was injected as a raw material liquid jet stream R onto the raw material droplets of the first solution on the substrate 2. As a result, a mixed droplet MA in which the first solution and the second solution were mixed on the substrate 2 was formed.

具体的には、キャピラリ101内から射出した第1溶液の液滴の体積を14pLとし、第2溶液の体積を2.7pLとした混合液滴MAを形成した。さらに、第1溶液の液滴の体積を14pLとし、第2溶液の体積を0.7pLとした混合液滴MBを形成した。このとき、基板2としては、ITO (Indium-Tin Oxide)薄膜付きの石英基板を用いた。ITOは、液滴を静電吸引するときの電極として働く。   Specifically, a mixed droplet MA having a volume of the first solution droplet ejected from the capillary 101 of 14 pL and a volume of the second solution of 2.7 pL was formed. Furthermore, a mixed droplet MB was formed in which the volume of the first solution droplet was 14 pL and the volume of the second solution was 0.7 pL. At this time, a quartz substrate with an ITO (Indium-Tin Oxide) thin film was used as the substrate 2. ITO functions as an electrode when electrostatically attracting droplets.

そして、このようにして得られた混合液滴MA,MBについて、上述の組成の均一度の評価装置によって組成の均一度の評価を行った。   The mixed droplets MA and MB thus obtained were evaluated for composition uniformity using the above-described composition uniformity evaluation apparatus.

このようにして得られた、混合液滴MAの透過光画像を図6(a)に、フルオレセインの蛍光画像を図6(b)に、ローダミンBの蛍光画像を図6(c)に各々示す。また、図6(b)の蛍光画像における水平線に沿った蛍光強度のプロファイルを図6(d)に、図6(c)の蛍光画像の水平線に沿った蛍光強度のプロファイルを図6(e)に示す。   The transmitted light image of the mixed droplet MA thus obtained is shown in FIG. 6 (a), the fluorescence image of fluorescein is shown in FIG. 6 (b), and the fluorescence image of rhodamine B is shown in FIG. 6 (c). . 6 (d) shows a fluorescence intensity profile along the horizontal line in the fluorescence image of FIG. 6 (b), and FIG. 6 (e) shows a fluorescence intensity profile along the horizontal line of the fluorescence image of FIG. 6 (c). Shown in

また、このようにして得られた、混合液滴MBの透過光画像を図7(a)に、フルオレセインの蛍光画像を図7(b)に、ローダミンBの蛍光画像を図7(c)に各々示す。また、図7(b)の蛍光画像における水平線に沿った蛍光強度のプロファイルを図7(d)に、図7(c)の蛍光画像の水平線に沿った蛍光強度のプロファイルを図7(e)に示す。なお、図6および図7において、蛍光像および蛍光強度プロファイルは、漏れ蛍光補正後の混合液滴MAおよびMBをそれぞれ示している。   Also, the transmitted light image of the mixed droplet MB thus obtained is shown in FIG. 7A, the fluorescence image of fluorescein in FIG. 7B, and the fluorescence image of rhodamine B in FIG. 7C. Each is shown. 7 (d) shows a fluorescence intensity profile along the horizontal line in the fluorescence image of FIG. 7 (b), and FIG. 7 (e) shows a fluorescence intensity profile along the horizontal line of the fluorescence image of FIG. 7 (c). Shown in In FIGS. 6 and 7, the fluorescence image and the fluorescence intensity profile indicate the mixed droplets MA and MB after the leakage fluorescence correction, respectively.

ここでは、各蛍光画像における混合液滴MA,MBの重心は、フルオレセインの蛍光画像の蛍光分布の重心位置とした。   Here, the center of gravity of the mixed droplets MA and MB in each fluorescence image is the center of gravity of the fluorescence distribution of the fluorescence image of fluorescein.

混合液滴MAについては、ローダミンBのプロファイルおよびフルオレセインのプロファイルとも良好な対象性を示し、ローダミンB及及びフルオレセインとも、中心周りの蛍光強度の分布はほぼ対称であり、フルオレセインの対称度Δ=0.015であり、また、ローダミンBの対称度Δ=0.015であった。混合状態は比較的よいものと判断された。   Regarding the mixed droplet MA, both the rhodamine B profile and the fluorescein profile show good objectivity, and both rhodamine B and fluorescein have almost symmetrical fluorescence intensity distributions around the center, and the fluorescein symmetry Δ = 0. The degree of symmetry of Rhodamine B was Δ = 0.015. The mixed state was judged to be relatively good.

一方、混合液滴MBについて、特に、ローダミンBについての対称性が悪く、フルオレセインの対称度Δ=0.015であるのに対し、ローダミンBの対称度Δ=0.045となった。このことは、混合液滴MBにおいて、混合液滴MAよりもローダミンBの成分が中心周りに不均一に存在している、すなわち、混合液滴MBの方が組成の均一度が悪いことを示しており、混合液滴の組成の均一度を簡易かつ好適に定量化することができることが確認された。
(第2実施形態)
次に、第2実施形態に係る混合液滴の組成の均一度の評価装置200について図8を参照して説明する。本実施形態に係る組成の均一度の評価装置200が、第1実施形態に係る組成の均一度の評価装置と異なる点は、蛍光画像データを取得するための、蛍光励起用光源7、ハーフミラー6、及び、可変電動フィルタ8に代えて、透過光用白色光源21と、透過光用白色光源21からの白色光の内、所定の波長範囲の光のみを透過させて当該波長範囲の光を基板2の裏面から混合液滴Mに照射する透過光用分光器22と、を備えている点である。ここで、対物レンズ5、カメラ9、透過光用分光器22、および透過光用白色光源21が、画像取得手段115を構成している。
On the other hand, with respect to the mixed droplet MB, in particular, the symmetry with respect to rhodamine B was poor, and the symmetry of fluorescein Δ = 0.015, whereas the symmetry of rhodamine B was Δ = 0.045. This indicates that in the mixed droplet MB, the component of rhodamine B is present more unevenly around the center than in the mixed droplet MA, that is, the mixed droplet MB has a lower uniformity of composition. It was confirmed that the uniformity of the composition of the mixed droplets can be easily and suitably quantified.
(Second Embodiment)
Next, an evaluation apparatus 200 for the composition uniformity of mixed droplets according to a second embodiment will be described with reference to FIG. The composition uniformity evaluation apparatus 200 according to the present embodiment is different from the composition uniformity evaluation apparatus according to the first embodiment in that a fluorescence excitation light source 7 and a half mirror for acquiring fluorescence image data are used. 6 and instead of the variable electric filter 8, the transmitted white light source 21 and the white light from the transmitted white light source 21 transmit only light in a predetermined wavelength range to transmit light in the wavelength range. And a transmitted light spectroscope 22 that irradiates the mixed droplet M from the back surface of the substrate 2. Here, the objective lens 5, the camera 9, the transmitted light spectroscope 22, and the transmitted light white light source 21 constitute an image acquisition unit 115.

ここで、所定の波長範囲の光とは、混合液滴Mに含まれる各原料液成分の吸収波長に対応する単色光である。   Here, the light in the predetermined wavelength range is monochromatic light corresponding to the absorption wavelength of each raw material liquid component contained in the mixed droplet M.

これに対応して、カメラ9は、混合液滴Mを透過して対物レンズ5によって集光され結像された透過光の画像を検出して混合液滴Mを含む視野の透過光画像データを取得する。   Corresponding to this, the camera 9 detects the transmitted light image data including the mixed droplet M by detecting the transmitted light image that is transmitted through the mixed droplet M and collected by the objective lens 5 and formed. get.

さらに、これに対応して、図9に示すように、画像処理装置10において、画像データ取得部50はカメラ9から透過光画像データを取得し、輪郭線抽出部52は透過光画像データから画像内の混合液滴Mの輪郭を取得し、吸光度分布取得部150は混合液滴Mの輪郭よりも外側の領域の透過光強度を参照光(混合液滴Mなしの場合のベースライン)として吸光度分布画像データを取得する。さらに、画像処理装置10においては、このように取得された吸光度分布データに対して、上述の中心取得部58によって混合液滴Mにおける中心を決定し、対称性取得部60によって対称度Δを求めて組成の均一度の定量化を行って、表示部70で結果を表示する。   Further, in response to this, as shown in FIG. 9, in the image processing apparatus 10, the image data acquisition unit 50 acquires the transmitted light image data from the camera 9, and the contour line extraction unit 52 determines the image from the transmitted light image data. The contour of the mixed droplet M is acquired, and the absorbance distribution acquisition unit 150 uses the transmitted light intensity in the region outside the contour of the mixed droplet M as the reference light (baseline when there is no mixed droplet M). Obtain distribution image data. Further, in the image processing apparatus 10, the center of the mixed droplet M is determined by the above-described center acquisition unit 58 with respect to the absorbance distribution data acquired in this way, and the symmetry Δ is obtained by the symmetry acquisition unit 60. The composition uniformity is quantified, and the result is displayed on the display unit 70.

ここで、中心取得部58では、各単色光における透過光画像データにおける、混合液滴Mの中心座標を取得する。具体的には、例えば、以下の3つの方法をとることができる。   Here, the center acquisition unit 58 acquires the center coordinates of the mixed droplet M in the transmitted light image data of each monochromatic light. Specifically, for example, the following three methods can be taken.

第1には、輪郭線抽出部52で取得された輪郭線を、真円を含む楕円に近似し、その真円を含む楕円の中心位置を混合液滴Mの中心座標とすることができる。第2には、輪郭線で囲まれる領域を取得し、この領域の面積重心を取得し、この面積重心を混合液滴Mの中心座標とすることができる。第3には、吸光分布データにおいて、吸収度分布の重心を求めて、この重心を液滴の中心座標とすることができる。   First, the contour line acquired by the contour line extraction unit 52 can be approximated to an ellipse including a perfect circle, and the center position of the ellipse including the true circle can be used as the center coordinates of the mixed droplet M. Second, the area surrounded by the contour line can be acquired, the area centroid of this area can be acquired, and the area centroid can be used as the center coordinates of the mixed droplet M. Third, in the absorption distribution data, the center of gravity of the absorbance distribution can be obtained, and this center of gravity can be used as the center coordinates of the droplet.

なお、良好な透過画像データを得るため、透過光用白色光源21、透過光用分光器22、カメラ9、及び、画像処理装置10は、制御装置12によってコントロールされている。   Note that the transmitted light white light source 21, the transmitted light spectroscope 22, the camera 9, and the image processing device 10 are controlled by the control device 12 in order to obtain good transmitted image data.

次に、図10のフローチャートを参照して、混合液滴Mの組成の均一度の評価装置の動作を説明する。   Next, the operation of the apparatus for evaluating the uniformity of the composition of the mixed droplet M will be described with reference to the flowchart of FIG.

最初に、第1実施形態と同様にして基板2上に混合液滴Mを複数形成する(ステップS201)。ここでは、原料液射出部105の各キャピラリに蓄えられ、原料液ジェット流Rとして混合液滴Mに供給される各原料液は、各々互いに異なる波長の光を吸収する物質を各々含んでいる。   First, a plurality of mixed droplets M are formed on the substrate 2 as in the first embodiment (step S201). Here, each raw material liquid stored in each capillary of the raw material liquid injection unit 105 and supplied to the mixed droplet M as the raw material liquid jet stream R includes substances that absorb light of different wavelengths.

次に、混合液滴Mにおいて、混合液滴Mの成分の分布を吸光度によって識別するために、各原料液毎の固有の吸収波長を、オペレータが指定する(ステップS401)。次に、基板2の内の混合液滴Mが対物レンズ5の視野内の所定の位置に入るように電動ステージ3を移動させる(ステップS202)。次に、透過光用白色光源21からの光を透過光用分光器22によって上述の固有の吸収波長に対応する単色光とした後(ステップS404)、基板2の背面から混合液滴Mに対してその波長の単色光を照射し(ステップS405)、混合液滴Mからの透過光をカメラ9で検出し、透過光画像データを取得する(ステップS406)。   Next, in the mixed droplet M, in order to identify the distribution of the components of the mixed droplet M by the absorbance, the operator designates a specific absorption wavelength for each raw material liquid (step S401). Next, the electric stage 3 is moved so that the mixed droplet M in the substrate 2 enters a predetermined position in the field of view of the objective lens 5 (step S202). Next, after the light from the white light source for transmitted light 21 is converted into monochromatic light corresponding to the above-described intrinsic absorption wavelength by the transmitted light spectroscope 22 (step S404), the mixed droplet M is applied to the mixed droplet M from the back surface of the substrate 2. Then, the monochromatic light of that wavelength is irradiated (step S405), the transmitted light from the mixed droplet M is detected by the camera 9, and transmitted light image data is acquired (step S406).

そして、ステップS407において、当該混合液滴Mに関してすべての原料液の吸光成分に対応する波長による透過光画像データを取得したかどうかを判断し、未取得の波長に係る透過光画像データが有れば、再び、ステップS404に戻って、透過光用分光器22によって異なる波長の単色光を選択して、再びステップS405において、透過光画像データを取得する。なお、このように、一つの混合液滴Mについて各波長の単色光で透過光画像データを取得している間、混合液滴Mはカメラ9の視野内において固定されているので、各波長についての透過光画像データにおける混合液滴Mの位置は、同一となる。   In step S407, it is determined whether or not transmitted light image data having a wavelength corresponding to the light absorption component of all raw material liquids has been acquired for the mixed droplet M, and there is transmitted light image data relating to an unacquired wavelength. For example, the process returns to step S404 again, monochromatic light having a different wavelength is selected by the transmitted light spectroscope 22, and transmitted light image data is acquired again in step S405. In this way, while acquiring the transmitted light image data with monochromatic light of each wavelength for one mixed droplet M, the mixed droplet M is fixed in the field of view of the camera 9, so that for each wavelength. The positions of the mixed droplets M in the transmitted light image data are the same.

一方、透過光画像データが、一つの混合液滴Mにおけるすべての波長について取得されると、ステップS408において、基板2上のすべての混合液滴Mについて透過光画像データが取得されたか否かが判断され、データ未取得の混合液滴Mが有れば、ステップ202に戻って、再び他の混合液滴Mのデータの取得を行う。   On the other hand, when the transmitted light image data is acquired for all the wavelengths in one mixed droplet M, it is determined in step S408 whether the transmitted light image data is acquired for all the mixed droplets M on the substrate 2. If it is determined that there is a mixed droplet M for which data has not been acquired, the process returns to step 202 to acquire data for another mixed droplet M again.

一方、ステップS408において、すべての混合液滴Mの画像データが取得されたと判断された場合には、ステップS409以下の画像処理工程に進む。   On the other hand, if it is determined in step S408 that the image data of all the mixed droplets M has been acquired, the process proceeds to an image processing process in step S409 and subsequent steps.

まず、ステップS409では、一つの混合液滴Mに係る各々の波長の透過光画像データの内から、混合液滴Mの輪郭線がもっとも明瞭である透過光画像データに対応する波長の種類をオペレータが選択する(ステップS409)。次に、一つの混合液滴Mに係る各波長の透過光画像データを選択し(ステップS410)、当該各波長の透過光画像データからステップS409で選択された波長に係る透過光画像データを選択し、混合液滴Mの輪郭線を取得する(ステップS411)。次に、各波長に係る透過光画像データから一つの透過光画像データを選択し(ステップS412)、当該透過光画像データのうちの混合液滴Mの輪郭外の部分の光の強度を参照光として、吸光度分布画像データを作成する(ステップS413)。   First, in step S409, the type of wavelength corresponding to the transmitted light image data having the clearest outline of the mixed droplet M is selected from the transmitted light image data of each wavelength related to one mixed droplet M. Is selected (step S409). Next, transmitted light image data of each wavelength related to one mixed droplet M is selected (step S410), and transmitted light image data related to the wavelength selected in step S409 is selected from the transmitted light image data of each wavelength. Then, the outline of the mixed droplet M is acquired (step S411). Next, one transmitted light image data is selected from the transmitted light image data corresponding to each wavelength (step S412), and the intensity of the light outside the outline of the mixed droplet M in the transmitted light image data is referred to as the reference light. As described above, absorbance distribution image data is created (step S413).

そして、ステップS414に進んで、すべての波長の透過光画像データについて吸光度分布画像データが形成されたか否かを判断し、未取得の波長に係る透過光画像データが有れば、ステップS412に戻って、各波長ごとに吸光度分布画像データを作成する。   Then, the process proceeds to step S414, where it is determined whether or not the absorbance distribution image data has been formed for the transmitted light image data of all wavelengths. If there is transmitted light image data relating to unacquired wavelengths, the process returns to step S412. Thus, absorbance distribution image data is created for each wavelength.

一方、すべての波長について吸光度分布画像データが取得されていれば、ステップS415に進んで、すべての混合液滴Mについて、吸光度分布画像が取得されているか否かを判断し、未取得に係る混合液滴Mが有れば、ステップS410に戻って、残りの混合液滴Mについて、各波長毎に吸光度分布画像データを取得する。   On the other hand, if the absorbance distribution image data has been acquired for all wavelengths, the process proceeds to step S415, and it is determined whether or not the absorbance distribution image has been acquired for all the mixed droplets M, and the unacquired mixing is performed. If there is a droplet M, the process returns to step S410 to acquire absorbance distribution image data for each wavelength for the remaining mixed droplet M.

一方、すべての混合液滴Mについて、吸光度分布画像データが得られている場合には、ステップS416に進んで、オペレータから混合液滴Mの中心の決定方法の選択を入力させる。ここでは、オペレータは、上述の3つの、液滴の中心位置の決定方法から一つを選択できる。   On the other hand, if the absorbance distribution image data is obtained for all the mixed droplets M, the process proceeds to step S416, and selection of a method for determining the center of the mixed droplet M is input from the operator. Here, the operator can select one of the three methods for determining the center position of the droplet.

続いて、ステップS417において、選択された方法を用いて、各混合液滴M毎に吸光度分布画像データの中心座標を取得し(ステップS417)、続いて、各混合液滴M毎の各吸光度分布画像データ毎に、中心周りの吸光度の均一性に係る対称度Δを求める(ステップS418)。そして、ステップS419において、すべての混合液滴Mについてこの対称度Δが取得されたか否かを判定し、未取得の混合液滴Mが有れば、ステップS417に戻って、他の混合液滴について対称度Δを算出する一方、すべての混合液滴について対称度Δが算出されていた場合には、ステップS420に進んで、全混合液滴Mについて、混合状態評価の対称度Δを統計処理して(ステップ420)、混合液滴M内の組成が均一であるかどうかの総合的な評価を行う。   Subsequently, in step S417, using the selected method, the central coordinates of the absorbance distribution image data are obtained for each mixed droplet M (step S417), and then each absorbance distribution for each mixed droplet M is obtained. For each image data, a degree of symmetry Δ related to the uniformity of absorbance around the center is obtained (step S418). In step S419, it is determined whether or not this degree of symmetry Δ has been acquired for all the mixed droplets M. If there is an unacquired mixed droplet M, the process returns to step S417 to return to another mixed droplet. On the other hand, if the symmetry degree Δ is calculated for all the mixed droplets, the process proceeds to step S420, and the mixed state evaluation symmetry degree Δ is statistically processed for all the mixed droplets M. Then (step 420), a comprehensive evaluation is made as to whether or not the composition in the mixed droplet M is uniform.

本実施形態によれば、原料液が、所定の波長の光を吸収する成分を含み、混合液滴Mに対してこの所定の波長の光を照射し、混合液滴Mを透過した透過光を検出して混合液滴Mを含む視野の吸収画像データ(画像情報に対応)を取得している。そして、吸収画像データにおいて、混合液滴Mにおける所定の波長を吸収する成分の量が多い部分ほど、光の強度が弱くなるので、この成分の分布量が吸収画像データにおいて好適に把握され、混合液滴Mにおける組成の均一度を第1実施形態と同様に精度よく取得でき、上記第1実施形態と同様の作用効果を奏する。
(第3実施形態)
次に、第3実施形態に係る混合液滴の組成の均一度の評価装置について説明する。本実施形態に係る組成の均一度の評価装値が、第一実施形態と異なる点は、混合液滴形成部110における原料液射出部105のキャピラリ101,102,103及び制御装置12のみであるので、他の説明は省略する。
According to the present embodiment, the raw material liquid includes a component that absorbs light having a predetermined wavelength, and the mixed droplet M is irradiated with light having the predetermined wavelength, and the transmitted light transmitted through the mixed droplet M is transmitted. Absorption image data (corresponding to image information) of the visual field including the mixed droplet M is detected and acquired. In the absorption image data, the intensity of light becomes weaker as the amount of the component that absorbs the predetermined wavelength in the mixed droplet M becomes larger. Therefore, the distribution amount of this component is suitably grasped in the absorption image data and mixed. The uniformity of the composition in the droplet M can be obtained with high accuracy as in the first embodiment, and the same effects as in the first embodiment can be achieved.
(Third embodiment)
Next, an apparatus for evaluating the uniformity of the composition of mixed droplets according to the third embodiment will be described. The evaluation value of the uniformity of composition according to this embodiment is different from that of the first embodiment only in the capillaries 101, 102, 103 and the control device 12 of the raw material liquid injection unit 105 in the mixed droplet forming unit 110. Therefore, other explanation is omitted.

図11に示すように、本実施形態において、キャピラリ101,102,103は、外周にさらに外部電極320を備えている。   As shown in FIG. 11, in this embodiment, the capillaries 101, 102, and 103 further include external electrodes 320 on the outer periphery.

ここで、外部電極320の構成材料は、導電性を有するものであれば特に制限されないが、かかる構成材料としては、腐食の防止という理由から、金や白金が好ましい。また外部電極320は、例えばキャピラリ102等の先端に上記構成材料を蒸着することにより形成することができる。   Here, the constituent material of the external electrode 320 is not particularly limited as long as it has conductivity, but as such a constituent material, gold or platinum is preferable for the purpose of preventing corrosion. The external electrode 320 can be formed by evaporating the above constituent material on the tip of the capillary 102, for example.

また、本実施形態において、制御装置12は、混合液滴Mを形成するにあたり、例えば原料液8aと基板2との間に印加したパルス電圧以上の電圧を電極320と電動ステージ3との間に印加するように、電圧印加装置107を制御する。   Further, in the present embodiment, the control device 12 forms, for example, a voltage higher than the pulse voltage applied between the raw material liquid 8 a and the substrate 2 between the electrode 320 and the electric stage 3 when forming the mixed droplet M. The voltage application device 107 is controlled to apply the voltage.

すると、外部電極320の先端に現われた静電誘導電荷321は、希釈液表面の静電誘導電荷361の電荷分布をノズル中心部で最も高くなるように偏らせるため、その電荷密度の高い部分、つまり原料液表面の中心部と電動ステージ3との間に大きな静電力が作用する。その結果、テイラーコーン16はノズル端面の内径部分にとどまり、かつその形状はより先鋭的に変形する。これは、電気力線がノズル中心部により集中した結果である。このため、液滴Mが形成される位置を極めて安定なものにすることができる。言い換えるならば、基板2上の所望の位置に、液滴Mをより的確に形成することができる。   Then, the electrostatic induction charge 321 appearing at the tip of the external electrode 320 biases the charge distribution of the electrostatic induction charge 361 on the surface of the diluent so as to be the highest at the center of the nozzle. That is, a large electrostatic force acts between the center of the raw material liquid surface and the electric stage 3. As a result, the Taylor cone 16 remains in the inner diameter portion of the nozzle end surface, and its shape is deformed more sharply. This is a result of the electric lines of force being concentrated at the center of the nozzle. For this reason, the position where the droplet M is formed can be made extremely stable. In other words, the droplet M can be more accurately formed at a desired position on the substrate 2.

そして、一旦液滴Mを基板2上に形成すれば、本実施形態では液滴Mに他のキャピラリから原料液を的確に打ち込むことができるため、例えば、所望の濃度の混合液滴Mを所望の位置に的確に形成できることになる。   Then, once the droplet M is formed on the substrate 2, in this embodiment, the raw material liquid can be accurately injected into the droplet M from another capillary. For example, the mixed droplet M having a desired concentration is desired. It can be accurately formed at the position.

また本実施形態によれば、テイラーコーン16が形成されるものの、それはキャピラリ102等の内径部分にとどまるため、その先端部分が鋭くなり、吐出時の液体の切れがよくなる。このため、原料液8aと電動ステージ3との距離を小さくでき、比較的小さな電圧でも駆動することができる。その効果により、原料液8aと電動ステージ3との間において放電の心配がなくなり、混合液滴形成部110の信頼性を向上させることができる。またキャピラリ102等の先端と電動ステージ3との間隔を狭めることにより、混合液滴形成部110の小型化も可能となる。   In addition, according to the present embodiment, although the Taylor cone 16 is formed, it remains at the inner diameter portion of the capillary 102 and the like, so that the tip end portion becomes sharp, and the liquid is easily cut off during ejection. For this reason, the distance between the raw material liquid 8a and the electric stage 3 can be reduced, and it can be driven with a relatively small voltage. Due to this effect, there is no fear of discharge between the raw material liquid 8a and the electric stage 3, and the reliability of the mixed droplet formation unit 110 can be improved. Further, by reducing the distance between the tip of the capillary 102 and the like and the electric stage 3, the mixed droplet forming unit 110 can be downsized.

ここで、液滴の形成に際して、原料液8aと電動ステージ3との間に印加したパルス電圧より大きな電圧を外部電極320と電動ステージ3との間に印加することが好ましい。この場合、外部電極320の先端に現われた静電誘導電荷321は、原料液表面の静電誘導電荷361の電荷分布をノズル中心部で最も高くなるように偏らせるため、その電荷密度の高い部分、つまり原料液表面の中心部と電動ステージ3との間に大きな静電力が作用する。このため、混合液滴Mが形成される位置を一層安定なものにすることができる。また、外部電極320は、キャピラリ101,102,103のすべてに設けることが好ましいが、何れかに設けられていればよい。   Here, when forming the droplet, it is preferable to apply a voltage larger than the pulse voltage applied between the raw material liquid 8 a and the electric stage 3 between the external electrode 320 and the electric stage 3. In this case, since the electrostatic induction charge 321 appearing at the tip of the external electrode 320 biases the charge distribution of the electrostatic induction charge 361 on the surface of the raw material liquid so as to be the highest at the nozzle center portion, That is, a large electrostatic force acts between the central portion of the raw material liquid surface and the electric stage 3. For this reason, the position where the mixed droplet M is formed can be made more stable. In addition, the external electrode 320 is preferably provided in all of the capillaries 101, 102, and 103, but may be provided in any one of them.

なお、本発明は、上記実施形態に限定されるものではなく、種々の変形態様をとることが可能である。例えば、上記実施形態では、光の強度の対称性に関する情報として、対称度Δを取得しているがこれに限られない。   In addition, this invention is not limited to the said embodiment, It can take a various deformation | transformation aspect. For example, in the above-described embodiment, the degree of symmetry Δ is acquired as information regarding the symmetry of light intensity, but the present invention is not limited to this.

また、第3実施形態に係る外部電極320や制御装置12を第二実施形態に適用しても良いことはいうまでもない。   Needless to say, the external electrode 320 and the control device 12 according to the third embodiment may be applied to the second embodiment.

第1実施形態に係る組成の均一度の評価装置を示す概略構成図である。It is a schematic block diagram which shows the evaluation apparatus of the uniformity of the composition which concerns on 1st Embodiment. 図1のキャピラリ及び基板2の拡大図である。FIG. 2 is an enlarged view of the capillary and the substrate 2 in FIG. 1. 図1の画像処理装置を示すブロック図である。It is a block diagram which shows the image processing apparatus of FIG. 図4(a)は、対称性取得部において混合液滴に対して適用する座標を示す概念図、図4(b)は、図4(a)におけるr軸に沿った光強度のプロファイルを示す概念図である。4A is a conceptual diagram showing coordinates applied to the mixed droplets in the symmetry acquisition unit, and FIG. 4B shows a light intensity profile along the r-axis in FIG. 4A. It is a conceptual diagram. 第1実施形態に係る組成の均一度の評価を行う場合のフロー図である。It is a flowchart in the case of evaluating the uniformity of the composition according to the first embodiment. 図6(a)は、混合液滴MAの透過光画像データ、図6(b)は混合液滴MAのフルオロセインに由来する蛍光画像データ、図6(c)は、混合液滴MAのローダミンBに由来する蛍光画像データ、図6(d)は、図6(b)の水平線に沿った蛍光強度のプロファイルを示す図、図6(e)は、図6(c)の水平線に沿った蛍光強度のプロファイルを示す図である。6A shows the transmitted light image data of the mixed droplet MA, FIG. 6B shows the fluorescence image data derived from the fluorescein of the mixed droplet MA, and FIG. 6C shows the rhodamine of the mixed droplet MA. Fluorescence image data derived from B, FIG. 6 (d) is a diagram showing a fluorescence intensity profile along the horizontal line of FIG. 6 (b), and FIG. 6 (e) is along the horizontal line of FIG. 6 (c). It is a figure which shows the profile of fluorescence intensity. 図7(a)は、混合液滴MBの透過光画像データ、図7(b)は混合液滴MBのフルオロセインに由来する蛍光画像データ、図7(c)は、混合液滴MBのローダミンBに由来する蛍光画像データ、図7(d)は、図7(b)の水平線に沿った蛍光強度のプロファイルを示す図、図7(e)は、図7(c)の水平線に沿った蛍光強度のプロファイルを示す図である。FIG. 7A shows the transmitted light image data of the mixed droplet MB, FIG. 7B shows the fluorescence image data derived from the fluorescein of the mixed droplet MB, and FIG. 7C shows the rhodamine of the mixed droplet MB. Fluorescence image data derived from B, FIG. 7D is a diagram showing a fluorescence intensity profile along the horizontal line in FIG. 7B, and FIG. 7E is along the horizontal line in FIG. 7C. It is a figure which shows the profile of fluorescence intensity. 第2実施形態に係る組成の均一度の評価装置を示す概略構成図である。It is a schematic block diagram which shows the evaluation apparatus of the uniformity of the composition which concerns on 2nd Embodiment. 図7の画像処理装置を示すブロック図である。It is a block diagram which shows the image processing apparatus of FIG. 第2実施形態に係る組成の均一度の評価を行う場合のフロー図である。It is a flowchart in the case of evaluating the uniformity of the composition concerning a 2nd embodiment. 第3実施形態に係る組成の均一度の評価装置におけるキャピラリ及び基板2の拡大図である。It is an enlarged view of the capillary and the board | substrate 2 in the evaluation apparatus of the uniformity of the composition which concerns on 3rd Embodiment.

符号の説明Explanation of symbols

2…基板、9…カメラ、104…電極、320…外部電極、12…制御装置、58…中心取得部(中心取得手段)、60…対称性取得部(対称性取得手段)、R…原料液滴ジェット流、M…混合液滴、100,200…組成の均一度の評価装置、105…原料液射出部、107…電圧印加装置、115…画像取得手段。
DESCRIPTION OF SYMBOLS 2 ... Board | substrate, 9 ... Camera, 104 ... Electrode, 320 ... External electrode, 12 ... Control apparatus, 58 ... Center acquisition part (center acquisition means), 60 ... Symmetry acquisition part (symmetry acquisition means), R ... Raw material liquid Drop jet flow, M ... Mixed droplet, 100,200 ... Evaluation device for composition uniformity, 105 ... Raw material injection unit, 107 ... Voltage application device, 115 ... Image acquisition means.

Claims (11)

互いに組成が異なる複数の原料液同士を混合することにより形成された混合液滴における組成の均一度の評価方法において、
前記混合液滴から前記混合液滴の何れかの成分の量に応じた強度で到達する光を集光して結像させ前記混合液滴についての画像情報を取得する画像取得工程と、
前記画像情報における前記混合液滴の中心位置を取得する中心取得工程と、
前記画像情報において、前記混合液滴の中心位置に対する前記光の強度の対称性に関する情報を取得する対称性取得工程と、
を含む組成の均一度の評価方法。
In the method for evaluating the uniformity of the composition in the mixed droplet formed by mixing a plurality of raw material liquids having different compositions from each other,
An image acquisition step of collecting and imaging light that reaches from the mixed droplet with an intensity corresponding to the amount of any component of the mixed droplet, and acquiring image information about the mixed droplet;
A center acquisition step of acquiring a center position of the mixed droplet in the image information;
In the image information, a symmetry acquisition step of acquiring information on the symmetry of the light intensity with respect to the center position of the mixed droplet;
The evaluation method of the uniformity of the composition containing this.
前記原料液は、所定の波長の光を吸収する成分を含み、
前記画像取得工程では、前記混合液滴に対して前記所定の波長の光を照射し、前記混合液滴を透過して到達する透過光を集光して結像させて前記画像情報を取得する請求項1に記載の組成の均一度の評価方法。
The raw material liquid includes a component that absorbs light of a predetermined wavelength,
In the image acquisition step, the mixed droplets are irradiated with light of the predetermined wavelength, and the transmitted light that reaches through the mixed droplets is collected and imaged to acquire the image information. The method for evaluating the uniformity of the composition according to claim 1.
前記原料液は、励起光が照射されると蛍光を発する蛍光色素を含み、
前記画像取得工程では、前記混合液滴に対して前記励起光を照射し、前記励起光の照射により発生して到達する蛍光を集光して結像させて前記画像情報を取得する請求項1の組成の均一度の評価方法。
The raw material liquid includes a fluorescent dye that emits fluorescence when irradiated with excitation light,
2. The image acquisition step acquires the image information by irradiating the mixed droplet with the excitation light and condensing and imaging the fluorescence generated and reached by the excitation light irradiation. Evaluation method of uniformity of composition.
さらに、前記混合液滴に対して光を照射し、前記混合液滴を透過した透過光を集光して結像させ前記混合液滴についての透過光画像情報を取得する行程を含み、
前記対称性取得工程を行う前に、前記透過光画像情報に基づいて、前記画像情報を補正する補正工程を含む請求項3に記載の組成の均一度の評価方法。
Further, the step of irradiating the mixed droplets with light, condensing the transmitted light transmitted through the mixed droplets to form an image, and acquiring transmitted light image information about the mixed droplets,
The composition uniformity evaluation method according to claim 3, further comprising a correction step of correcting the image information based on the transmitted light image information before performing the symmetry acquisition step.
前記中心取得工程は、前記画像情報において前記混合液滴の外縁形状を取得し、前記外縁形状を真円を含む楕円に近似し、前記真円を含む楕円の中心位置を前記混合液滴の中心位置として取得する請求項1〜4の何れか一項に記載の均一度の評価方法。 The center acquisition step acquires the outer edge shape of the mixed droplet in the image information, approximates the outer edge shape to an ellipse including a perfect circle, and sets the center position of the ellipse including the perfect circle as the center of the mixed droplet The uniformity evaluation method according to any one of claims 1 to 4, which is acquired as a position. 前記中心取得工程は、前記画像情報において前記混合液滴が占める領域を取得し、前記混合液滴の領域の重心を前記混合液滴の中心位置として取得する請求項1〜4の何れか一項に記載の組成の均一度の評価方法。 The center acquisition step acquires an area occupied by the mixed droplet in the image information, and acquires a center of gravity of the mixed droplet area as a center position of the mixed droplet. The evaluation method of the uniformity of the composition as described in 1. 前記中心取得工程は、前記画像情報において前記光の強度分布の重心を取得し、前記光の強度分布の重心位置を前記混合液滴の中心位置として取得する請求項1〜4の何れか一項に記載の組成の均一度の評価方法。 5. The center acquisition step acquires the center of gravity of the light intensity distribution in the image information, and acquires the position of the center of gravity of the light intensity distribution as the center position of the mixed droplet. The evaluation method of the uniformity of the composition as described in 1. 前記混合液滴は、複数のキャピラリ毎に蓄えられた前記原料液と前記キャピラリの先端と対向して配置された基板との間にパルス電圧を印加し、前記各キャピラリの先端から前記原料液をそれぞれ射出させることにより、前記基板上に形成される、請求項1〜7の何れか一項に記載の組成の均一度の評価方法。 The mixed droplets apply a pulse voltage between the raw material liquid stored for each of the plurality of capillaries and a substrate disposed opposite to the tip of the capillary, and the raw material liquid is discharged from the tip of each capillary. The method for evaluating the uniformity of the composition according to claim 1, wherein the composition is formed on the substrate by being injected. 互いに組成が異なる複数の原料液同士を混合することにより形成された混合液滴から前記混合液滴における何れかの成分の量に応じた強度で到達する光を集光して結像させ前記混合液滴についての画像情報を取得する画像情報取得手段と、
前記画像情報における前記混合液滴の中心位置を取得する中心取得手段と、
前記画像情報において、前記混合液滴の中心位置に対する前記光の強度の対称性に関する情報を取得する対称性取得手段と、
を有する組成の均一度の評価装置。
The light that reaches from the mixed droplets formed by mixing a plurality of raw material liquids having different compositions to each other with the intensity corresponding to the amount of any component in the mixed droplets is condensed to form an image. Image information acquisition means for acquiring image information about the droplet;
Center acquisition means for acquiring a center position of the mixed droplet in the image information;
In the image information, symmetry acquisition means for acquiring information on symmetry of the intensity of the light with respect to the center position of the mixed droplet;
An apparatus for evaluating the uniformity of a composition.
前記混合液滴を形成するための前記原料液がそれぞれ蓄えられた複数のキャピラリを有する原料液射出部と、
前記キャピラリの先端と対向して配置され、該各キャピラリの先端からそれぞれ射出される前記原料液から形成される前記混合液滴が載置される基板と、
前記各キャピラリに蓄えられた前記原料液のそれぞれと前記基板との間にパルス電圧を印加する電圧印加装置と、
をさらに有する、請求項9に記載の組成の均一度の評価装置。
A raw material liquid injection section having a plurality of capillaries each storing the raw material liquid for forming the mixed droplet;
A substrate on which the mixed liquid droplets formed from the raw material liquid, which is arranged facing the tip of the capillary and ejected from the tip of each capillary, is placed;
A voltage applying device that applies a pulse voltage between each of the raw material liquids stored in the capillaries and the substrate;
The apparatus for evaluating uniformity of composition according to claim 9, further comprising:
前記複数のキャピラリうち、少なくとも1つのキャピラリの外周に電極が設置されており、
前記組成の均一度の評価装置は、さらに、前記電極に前記原料液の電位以上の電位を付与するように前記電圧印加装置を制御する制御装置を有する請求項10に記載の組成の均一度の評価装置。
Wherein among the plurality of capillaries are installed electrodes on the outer periphery of the at least one capillary,
The composition uniformity evaluation device according to claim 10, further comprising a control device that controls the voltage application device so that a potential equal to or higher than the potential of the raw material liquid is applied to the electrode . evaluation device.
JP2003276152A 2003-07-17 2003-07-17 Method for evaluating composition uniformity and apparatus for evaluating composition uniformity Expired - Fee Related JP4146310B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003276152A JP4146310B2 (en) 2003-07-17 2003-07-17 Method for evaluating composition uniformity and apparatus for evaluating composition uniformity

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003276152A JP4146310B2 (en) 2003-07-17 2003-07-17 Method for evaluating composition uniformity and apparatus for evaluating composition uniformity

Publications (2)

Publication Number Publication Date
JP2005037299A JP2005037299A (en) 2005-02-10
JP4146310B2 true JP4146310B2 (en) 2008-09-10

Family

ID=34212568

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003276152A Expired - Fee Related JP4146310B2 (en) 2003-07-17 2003-07-17 Method for evaluating composition uniformity and apparatus for evaluating composition uniformity

Country Status (1)

Country Link
JP (1) JP4146310B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007010340A (en) * 2005-06-28 2007-01-18 Olympus Corp Camera device
CN104204778A (en) * 2012-03-12 2014-12-10 三菱丽阳株式会社 Fluorescence detection device and fluorescence detection method
WO2017014196A1 (en) * 2015-07-17 2017-01-26 コニカミノルタ株式会社 Target biological substance analysis method and analysis system
JP7155681B2 (en) * 2018-07-10 2022-10-19 ソニーグループ株式会社 Information processing device, information processing method, and program

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3852125B2 (en) * 1996-03-14 2006-11-29 コニカミノルタホールディングス株式会社 Pattern detection method and apparatus for two-dimensional multi-tone image
EP0983498B1 (en) * 1997-02-27 2004-05-26 Cellomics, Inc. A system for cell-based screening
GB9816088D0 (en) * 1998-07-23 1998-09-23 Axis Biochemicals Asa System
JP4494606B2 (en) * 2000-08-11 2010-06-30 浜松ホトニクス株式会社 Liquid-containing substance analysis apparatus and liquid-containing substance analysis method
JP2001133398A (en) * 2000-10-10 2001-05-18 Olympus Optical Co Ltd Cohesion image determining method and device
JP4093338B2 (en) * 2000-12-26 2008-06-04 住友化学株式会社 Automatic evaluation equipment for printed matter
DE60224218T2 (en) * 2001-08-30 2008-12-04 Hamamatsu Photonics K.K., Hamamatsu METHOD AND DEVICE FOR PRODUCING LIQUID CANDLES FROM A MIXING LIQUID
JP4749637B2 (en) * 2001-09-28 2011-08-17 オリンパス株式会社 Image analysis method, apparatus, and recording medium

Also Published As

Publication number Publication date
JP2005037299A (en) 2005-02-10

Similar Documents

Publication Publication Date Title
US20230117082A1 (en) Analysis devices, analysis kits, and analysis systems
CN110066857B (en) Digital PCR quantitative detection method
US20140353522A1 (en) Apparatus and methodology for flow fluorescence microscopic imaging
EP2721442B1 (en) Method and apparatus for imaging a structure marked with a fluorescent dye
US20080285879A1 (en) Methods, Software, and Apparatus for Focusing an Optical System Using Computer Image Analysis
US10451553B2 (en) Fluorescence spectrometer
EP3270097B1 (en) Measurement system, measurement method, and measurement program
US20170221675A1 (en) Method for inspecting a sample using an assembly comprising a scanning electron microscope and a light microscope
US10605716B2 (en) Particle counting apparatus, particle counting method, and particle containing sample
JP2015535593A (en) Container and system for optical analysis of sample without using optical lens
JP6888289B2 (en) Droplet forming device, droplet forming method, and dispensing device
JP4679375B2 (en) Capillary electrophoresis device
KR100894128B1 (en) Microinjection device and microinjection method
JP4146310B2 (en) Method for evaluating composition uniformity and apparatus for evaluating composition uniformity
JP4074136B2 (en) Fluorescence lifetime distribution image measuring apparatus and measuring method thereof
JP2021025866A (en) Particles sorting device and particles sorting method
JP7172212B2 (en) Particle counting device, particle counting method, and particle-containing sample
TW201036710A (en) Method for evaluating discharge amount of liquid droplet discharging device
US20210239589A1 (en) Method for examining a liquid which contains at least one cell and/or at least one particle
CN113155791A (en) Method and device for high-resolution imaging of structures marked with fluorescent markings of a sample
JP2008039747A (en) Droplet discharge device and droplet discharge method
JP2013079833A (en) Nozzle device
US20230398538A1 (en) Device with a dispenser for dispensing a liquid sample
JP2007212449A (en) Capillary electrophoresis apparatus and electrophoresis method
JP5272633B2 (en) Injection device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060323

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080325

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080416

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080617

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080619

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110627

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120627

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120627

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130627

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130627

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140627

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees