WO2004097366A2 - 蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出プログラム - Google Patents

蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出プログラム Download PDF

Info

Publication number
WO2004097366A2
WO2004097366A2 PCT/JP2004/006160 JP2004006160W WO2004097366A2 WO 2004097366 A2 WO2004097366 A2 WO 2004097366A2 JP 2004006160 W JP2004006160 W JP 2004006160W WO 2004097366 A2 WO2004097366 A2 WO 2004097366A2
Authority
WO
WIPO (PCT)
Prior art keywords
image
noise
protein
line
luminance change
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2004/006160
Other languages
English (en)
French (fr)
Other versions
WO2004097366A3 (ja
Inventor
Hirofumi Matsuzaki
Hideyuki Miyatake
Seong Hoon Kim
Kunio Miki
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
RIKEN
Original Assignee
Matsushita Electric Industrial Co Ltd
RIKEN
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd, RIKEN filed Critical Matsushita Electric Industrial Co Ltd
Priority to US10/554,579 priority Critical patent/US20060276630A1/en
Publication of WO2004097366A2 publication Critical patent/WO2004097366A2/ja
Publication of WO2004097366A3 publication Critical patent/WO2004097366A3/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • CCHEMISTRY; METALLURGY
    • C30CRYSTAL GROWTH
    • C30BSINGLE-CRYSTAL GROWTH; UNIDIRECTIONAL SOLIDIFICATION OF EUTECTIC MATERIAL OR UNIDIRECTIONAL DEMIXING OF EUTECTOID MATERIAL; REFINING BY ZONE-MELTING OF MATERIAL; PRODUCTION OF A HOMOGENEOUS POLYCRYSTALLINE MATERIAL WITH DEFINED STRUCTURE; SINGLE CRYSTALS OR HOMOGENEOUS POLYCRYSTALLINE MATERIAL WITH DEFINED STRUCTURE; AFTER-TREATMENT OF SINGLE CRYSTALS OR A HOMOGENEOUS POLYCRYSTALLINE MATERIAL WITH DEFINED STRUCTURE; APPARATUS THEREFOR
    • C30B29/00Single crystals or homogeneous polycrystalline material with defined structure characterised by the material or by their shape
    • C30B29/54Organic compounds
    • C30B29/58Macromolecular compounds
    • CCHEMISTRY; METALLURGY
    • C30CRYSTAL GROWTH
    • C30BSINGLE-CRYSTAL GROWTH; UNIDIRECTIONAL SOLIDIFICATION OF EUTECTIC MATERIAL OR UNIDIRECTIONAL DEMIXING OF EUTECTOID MATERIAL; REFINING BY ZONE-MELTING OF MATERIAL; PRODUCTION OF A HOMOGENEOUS POLYCRYSTALLINE MATERIAL WITH DEFINED STRUCTURE; SINGLE CRYSTALS OR HOMOGENEOUS POLYCRYSTALLINE MATERIAL WITH DEFINED STRUCTURE; AFTER-TREATMENT OF SINGLE CRYSTALS OR A HOMOGENEOUS POLYCRYSTALLINE MATERIAL WITH DEFINED STRUCTURE; APPARATUS THEREFOR
    • C30B7/00Single-crystal growth from solutions using solvents which are liquid at normal temperature, e.g. aqueous solutions

Definitions

  • Protein crystal detection method Protein crystal detection device, and protein crystal detection program
  • the present invention relates to a protein crystal detection method, a protein crystal detection device, and a protein crystal detection program for detecting a protein crystal in a protein solution held in a crystallization container.
  • a crystallization vessel such as a crystallization microplate containing a protein solution and a crystallization solution is stored in a thermostatic chamber set to a specific temperature, and the presence or absence of crystallization and the degree of progress are determined over time. This was done by observation. Conventionally, the observation work for protein crystal detection relies exclusively on humans, and the tester removes the crystallization vessel from the constant temperature chamber and visually observes the protein solution within the visual field of the microscope. He was working to digitize and record the progress. Disclosure of the invention
  • an object of the present invention is to provide a protein crystal detection method, a protein crystal detection device, and a protein crystal detection program which can be performed.
  • a protein crystal detection method of the present invention for detecting a protein crystal includes a luminance change information indicating a magnitude of a luminance change by differentiating an observation image obtained by observing a protein solution.
  • a differential processing step of generating a differential image composed of: a binary value obtained by binarizing the differential image with a threshold for extracting a characteristic portion, thereby leaving a portion of the luminance change information indicating a large luminance change as a characteristic portion
  • a protein crystal detection device of the present invention for detecting a protein crystal comprises: an observation image storage unit for storing an observation image obtained by observing a protein solution; A differential processing section for generating a differential image composed of luminance change information indicating the magnitude of the luminance change by differentiating the observed image of the section, and a differential section for extracting the differential image generated by the differential processing section for extracting a characteristic section.
  • a binarization processing unit that obtains a binarized image in which luminance change information indicating a large luminance change among the luminance change information is left as a characteristic portion by binarizing with a threshold value;
  • a binarized image storage unit for storing the obtained binarized image; and determining at least one of the presence or absence of protein crystals and the progress of crystallization from the characteristic portion of the binarized image in the binarized image storage unit.
  • a protein crystal detection program of the present invention which causes a computer to execute a process of detecting a protein crystal generated in a protein solution, comprises: The magnitude of the luminance change is indicated by differentiating the observed image obtained by observation.
  • the detection of protein crystals can be automated and can be performed efficiently and with high reliability.
  • the protein crystal detection method of the present invention can be used for, for example, a screening method for protein crystallization conditions by a vapor diffusion method or the like.
  • the protein crystal detection device of the present invention can be used for, for example, a protein crystallization condition by a vapor diffusion method or the like. It can be used for screening devices and protein crystal manufacturing devices.
  • FIG. 1 is a perspective view of a protein crystal detection device according to one embodiment of the present invention.
  • FIG. 2 is a perspective view of a crystallization plate used in the protein crystal detection device according to one embodiment of the present invention.
  • 3 and 5 are partial cross-sectional views of a crystallization plate used in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 4 is a partial cross-sectional view of an observation unit of the protein crystal detection device according to one embodiment of the present invention.
  • FIG. 6 is a block diagram showing a configuration of a control system of the protein crystal detection device according to one embodiment of the present invention.
  • FIG. 7 is a functional block diagram showing a processing mechanism of the protein crystal detection device according to one embodiment of the present invention.
  • FIG. 8 is a flowchart showing a protein crystal detection method according to one embodiment of the present invention.
  • 9A and 9B are partial cross-sectional views of a crystallization plate used in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 10 is a view showing an observed image in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 11 is a view showing a differential image in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 12 is a diagram showing a differential image (mask processing) in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 13 is a diagram showing a thinned image in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 14 is a view showing a differential image (noise removal) in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 15 is a diagram showing a binarized image in the protein crystal detection method according to one embodiment of the present invention.
  • FIGS. 16A and 16B are explanatory diagrams of the noise recognition processing in the protein crystal detection method according to one embodiment of the present invention.
  • FIG. 17 is an explanatory diagram of a noise recognition process in the protein crystal detection method according to one embodiment of the present invention.
  • FIGS. 18A and 18B are explanatory diagrams of a recognition process in the protein crystal detection method according to one embodiment of the present invention.
  • the method for detecting a protein crystal of the present invention further comprises: information on luminance change derived from the crystallization container holding the protein solution to be crystallized; It is preferable to include a container noise removing step of removing at least one from at least one of the differential image and the binarized image.
  • the container noise removing step at least one of luminance change information and a characteristic portion of a predetermined region is removed based on information taught in advance.
  • the protein crystal detection method of the present invention further comprises a thinned image generating step of obtaining a thinned image composed of a plurality of lines by binarizing the differential image with a noise extraction threshold and then performing a thinning process.
  • a noise recognition step of individually recognizing the shapes of a plurality of lines included in the thinned image to detect a line regarded as noise; and a line corresponding to a line detected as noise in the noise recognition step. It is preferable to include a noise removing step of removing at least one of the luminance change information and the characteristic portion from at least one of the differential image and the binarized image.
  • a line length and the number of branches are obtained, and a line whose length exceeds a predetermined value and whose number of branches is smaller than a predetermined value is regarded as noise. It preferably includes a step.
  • the line length and linearity are recognized, and a line whose length exceeds a predetermined value and whose linearity is higher than a predetermined value is regarded as noise. It is preferable to include a process that considers.
  • the noise recognition step a length of a line and a degree of dispersion of the line with respect to an approximate straight line are obtained, and the length exceeds a predetermined value and the degree of dispersion is a predetermined value. It is preferable to include the step of regarding smaller lines as noise.
  • the method for detecting protein crystals of the present invention further comprises the steps of: An observation step of capturing an image of the white matter solution with a camera; and a storage step of storing an observation image captured by the camera in an observation image storage unit, wherein the differentiation processing step is stored in the observation image storage unit. It is preferable to do this for images.
  • the method for detecting protein crystals of the present invention can be used as a method for detecting generated protein crystals in a screening method for protein crystallization conditions.
  • the screening method is not particularly limited except for using the detection method of the present invention, and a conventionally known technique can be used.
  • the protein crystal detection device of the present invention further comprises: at least one of the luminance change information and the characteristic portion derived from the crystallization container holding the protein solution; It is preferable to include a container noise removing unit for removing from at least one of the binarized images in the digitized image storage unit.
  • the protein crystal detection device of the present invention further includes a mask information storage unit for storing mask information, and the container noise removing unit stores at least one of the luminance change information and the characteristic portion based on the mask information. It is preferable to remove at least one of the differential image in the differential image storage unit and the binary image in the binary image storage unit.
  • the protein crystal detection device of the present invention further includes: a thinned image generating unit that obtains a thinned image including a plurality of lines by performing a thinning process after binarizing the differential image with a threshold for noise extraction; A thinned image storage unit that stores the thinned image generated by the thinned image generation unit, and noise by individually recognizing the shapes of a plurality of lines included in the thinned image in the thinned image storage unit.
  • a noise recognition processing unit that detects a line regarded as a noise, and at least one of a differential image of the differential image storage unit and a binary image of the binary image storage unit
  • the apparatus further comprises a noise removal processing section for removing at least one of the luminance change information and the characteristic portion corresponding to the line detected as noise by the noise detection processing section.
  • the noise recognition processing unit obtains a length of a line and a number of branches, and determines a line whose length exceeds a predetermined value and whose number of branches is less than a predetermined value as noise. It is preferable to consider it.
  • the noise recognition processing unit recognizes the length and linearity of the line, and generates a line whose length exceeds a predetermined value and whose linearity is higher than a predetermined value.
  • the noise recognition processing unit obtains a length of the line and a degree of dispersion of the line with respect to an approximate straight line, and the length exceeds a predetermined value and the degree of dispersion is a predetermined value.
  • smaller lines are considered noise.
  • the protein crystal detection device of the present invention further includes: an observation stage on which a crystallization container holding the protein solution to be crystallized is set; and an image obtained by imaging the protein solution in the crystallization container set on the observation stage.
  • a camera for capturing an image is provided, and an image of the protein solution captured by the camera is stored in the observation image storage unit.
  • the protein crystal detection device of the present invention can be used for detecting protein crystals generated in a protein crystallization condition screening device ( further, the protein crystal detection device of the present invention can be used for the production of protein crystals).
  • the screening device and the crystal production device can be used for monitoring and detecting protein crystals in the device, except that the screening device and the crystal production device are not limited to those using the detection device of the present invention.
  • the protein crystal detection program of the present invention provides the following: A container for removing at least one of the luminance change information and the characteristic portion derived from the crystallization container holding the protein solution to be crystallized from at least one of the differential image and the binarized image; It is preferable to include a noise removing step.
  • the noise removing step removes at least one of luminance change information and a characteristic portion of a predetermined region based on information taught in advance.
  • the processing for detecting the protein crystal may further include: a thinning image including a plurality of lines by binarizing the differential image with a threshold for noise extraction and then performing a thinning processing.
  • the noise recognition step the length of a line and the number of branches are obtained, and the length exceeds a predetermined value and the number of branches is determined in advance. It is preferable to regard lines having less than the calculated value as noise.
  • the noise recognition step recognizes a line length and linearity, and regards a line whose length exceeds a predetermined value and whose linearity is higher than a predetermined value as noise. It is preferable to consider it.
  • the length of the line and the degree of dispersion of the line with respect to the approximate straight line are obtained, and the length exceeds a predetermined value and the degree of dispersion is a predetermined value.
  • smaller lines are considered noise.
  • the protein crystal detection program according to the present invention comprises: The observation step of observing the protein solution held in the crystallization container and taking an observation image with a camera; and the storage step of storing the observation image taken with the force camera in an observation image storage unit.
  • the differential processing step is preferably performed on an image stored in the observation image storage unit.
  • the protein crystal detection device 1 is a dedicated observation device used for observation for detecting a protein crystal generated in a protein solution by, for example, a vapor diffusion method.
  • an observation unit 3 a display device 8, and a keyboard 9 for operation input are arranged on a base 2.
  • the observation unit 3 has a configuration in which an observation stage 4 is mounted on a frame 3 a in a horizontal posture, and a camera 7 is arranged above the observation stage 4.
  • a microplate 6 for crystallization (hereinafter simply referred to as “crystallization plate 6”) is set.
  • the crystallization plate 6 is a crystallization vessel used to crystallize the protein in the protein solution.
  • the crystallization plate 6 moves in the X, ,, and Z directions.
  • FIGS An example of the crystallization plate 6 will be described with reference to FIGS. As shown in FIG. 2, the crystallization plate 6 has a plurality of wells 6a formed in a lattice.
  • the well 6a is a so-called caldera-like liquid storage recess in which a cylindrical liquid holding portion 6b is provided at the center of the circular recess, and the inside of the well 6a is to be crystallized.
  • a sample that is, a protein solution 13 containing a protein to be crystallized, and a crystallization solution 12 used for crystallization are dispensed.
  • the size of the crystallization plate 6 is not particularly limited. For example, standardized sizes can be used. Examples of the standard include the SBS standard and the like.
  • the size of the well 6a is not particularly limited, but is, for example, 10 mm to 20 mm in diameter, and the size of the liquid holding part 6b is not particularly limited. For example, the well 6a It is half the size of the diameter.
  • FIG. 3 shows an example of a cross section of one well 6a containing these samples.
  • a droplet-like protein solution 13 is placed and held in a pocket provided at the top of the liquid holding section 6b, and a ring-shaped liquid solution surrounding the liquid holding section 6b.
  • the crystallization solution 12 is stored in the section 6c.
  • the well 6a is a liquid storage section having a liquid holding section 6b for holding the protein solution to be crystallized from below in a mounted state and a liquid storage section 6c for storing the crystallization solution 12. ing.
  • a predetermined amount of the crystallization solution 12 is taken out of the storage unit 6c and mixed with the protein solution 13 held in the liquid holding unit 6b.
  • a sealing seal 14 is attached to the upper surface of each well 6a (for example, see FIG. 2).
  • the solvent component in the protein solution 13 is evaporated, thereby increasing the protein concentration of the protein solution 13 to a supersaturated state, and Generate At this time, the solvent evaporating from the protein solution 13 and the vapor absorbed in the crystallization solution 12 keep the equilibrium state, and the evaporation of the solvent from the protein solution 13 progresses slowly. Crystal formation is performed.
  • the observation unit 3 in FIG. 1 observes the crystallization plate 6 in such a crystal formation process to detect the presence or absence of the protein crystal and the degree of crystallization in each well 6a. That is, as shown in FIG. 4, for example, the crystallization plate 6 set on the observation stage 4 is moved below the camera 7, and the liquid holding part 6 b in the observation target well 6 a is imaged by the camera 7. Align to axis I do. Then, an image of the crystallization plate 6 is captured by the camera 7 while the illumination light is radiated from the lower illumination device 5, whereby an observation image of the protein solution held on the crystallization plate 6 is captured (for example, FIG. 1). 0).
  • FIG. 2 and 3 show an example of the crystallization plate 6 used in the vapor diffusion method using the sitting drop method in which the protein solution 13 is supported from below in the crystallization process.
  • a jewel-shaped crystallization plate 60 as shown in FIG. 5 may be used.
  • the crystallization plate 60 is used in a hanging-top method in which droplets of the protein solution 13 are held in a hanging state.
  • the well 6 OA has only a liquid storage part for storing the crystallization solution 12 and no liquid holding part is formed, and a droplet of the protein solution 13 to be crystallized (a predetermined amount)
  • the crystallization solution 12 is mixed with the crystallization solution 12) and is held in a hanging state on the back surface of the glass plate 14A closing the well 60a. That is, the glass plate 14 A on which the protein solution 13 is dropped is inverted, and the crystallization solution 12 is adhered so as to cover the well 60 A into which the dispense solution 12 has been dispensed, thereby sealing the well 6 OA.
  • a processing unit 20 executes various processing programs stored in a program storage unit 22 based on various data stored in a data storage unit 21 to execute various operations and processing functions described below. Is realized.
  • a crystal detection program 22 a and an observation operation program 22 b are stored in the program storage section 22. By executing these programs, the observation operation of the protein solution and the protein A process for detecting protein crystals in the solution is performed.
  • the data storage unit 21 includes a processed image storage unit 21a, an observation image storage unit 21b, The crystallization information storage unit 21c is provided.
  • the processed image storage unit 21a stores the processed image after various processes are performed in the protein crystal detection process.
  • the observation image of the protein solution 13 captured by the camera 7 is stored (for example, see FIG. 10).
  • the observation image stored in the observation image storage unit 2 lb is a processing target.
  • the crystallization information storage unit 21c stores the crystallization information, that is, the image data of the observation image in which crystallization was detected in the protein crystal detection process, the information specifying the plate / well from which the observation image was obtained, and the plate Information such as the observation time at which the is observed is stored. Further, a display processing unit 23, an operation / input processing unit 24, a camera 7, a lighting device 5, and an observation stage 4 are connected to the processing unit 20.
  • the processing unit 20 controls the observation stage 4, the illumination device 5, and the camera 7, so that the crystallization plate 6 held on the observation stage 4 is moved and the crystallization plate by the illumination device 5 is moved.
  • Illumination 6 and camera 7 capture an image of the protein solution.
  • the display processing unit 23 displays an observation image captured by the camera 7 and various processed images, and also performs a process of displaying a draft image at the time of data input on the display 8. Operation ⁇
  • the input processing unit 24 inputs an operation command and data to the processing unit 20 by operating an input device such as the keyboard 9.
  • a differentiation processing unit 30 performs differentiation processing on the observation image (for example, see FIG.
  • the luminance change information indicates a numerical value (a luminance change value) of a luminance change rate of each pixel constituting the observation image.
  • the change in luminance is small in a region where the observation target does not exist, such as a background region or a portion through which illumination light is transmitted, and the change in luminance is large in a portion corresponding to the contour of the protein crystal to be detected. Therefore, in the above-described differential image, the contour of the observation object captured in the image is extracted as a portion having a large luminance change.
  • the differential image storage unit 31 in FIG. 7 stores the differential image generated by the differential processing unit 30.
  • the binarization processing unit 32 binarizes the differential image in the differential image storage unit 31 with a threshold value for extracting a special part, so that luminance change information indicating a large luminance change among the luminance change information is a characteristic part. ( Figure 15). Then, the binarized image storage unit 33 stores the binarized image obtained by the binarization processing unit 32. The crystallization determination unit 34 determines the presence or absence of a protein crystal from the characteristic portion of the binarized image stored in the binarized image storage unit 33. The method of setting the threshold value for extracting the characteristic portion is not particularly limited. And the like.
  • the mask information storage unit 36 stores the mask information, that is, the shape of the crystallization plate 6, which is a crystallization container that holds the protein solution in the observation image (the shape of the liquid holding unit 6b, for example, see FIGS. 2 and 3).
  • the mask processing unit 35 performs a mask process for removing container noise from the differential image based on the mask information stored in the mask information storage unit 36. As a result, a differential image from which the container noise has been removed can be obtained (for example, see Fig. 12).
  • the noise removal processing performed here is for noise that cannot be removed by the mask processing described above, for example, noise that cannot be taught in advance, such as the outline of a droplet of a protein solution that appears in the pocket at the top of the liquid holding unit 6b. It was done. Therefore, here, the noise recognition processing unit 38 recognizes which part is noise from the information in the differential image, and the noise removal processing unit 37 performs noise removal in the differential image based on the noise recognition result. Do. As a result, a differential image from which noise has been removed can be obtained (for example, see Fig. 14).
  • the binarization processing unit 39 the differential image stored in the differential image storage unit 31 is binarized using a threshold for noise extraction. Then, the thinning processing section 40 thins the binarized image that has been subjected to the binarization processing. That is, each line element in the binarized image is replaced with a thin line having a width of one pixel. As a result, a thinned image composed of a plurality of thinned lines in a range indicating a portion where the luminance change is large in the differential image is generated (for example, see FIG. 13).
  • the method of setting the threshold value for noise extraction is not particularly limited.
  • the luminance change information of the protein crystal to be detected and the information other than the crystal may be used. And a method of appropriately setting the value to a value that can be distinguished from the luminance change information of the precipitates, droplets, and the like.
  • the binarization processing unit 39 and the thinning processing unit 40 perform thinning processing after binarizing the differential image with a threshold for noise extraction to obtain a thinned image composed of a plurality of lines.
  • An image generation unit is configured.
  • the thinned image storage unit 41 stores the thinned image generated by the thinned image generation unit.
  • the noise recognition processing unit 38 detects a line regarded as noise
  • a plurality of algorithms are used as described later. That is, the first algorithm that determines the length of a line and the number of branches, and that regards a line whose length exceeds a predetermined value and has a small number of branches as noise, recognizes the length and linearity of the line, and sets the length to a predetermined value.
  • the second algorithm that regards lines that exceed The rhythm, the length of the line, and the degree of dispersion of the line with respect to the approximate straight line are obtained. Use them properly or use them together.
  • the container noise elimination processing by the mask processing unit 35 and the noise elimination processing by the noise elimination processing unit 37 show an example in which the differential image stored in the differential image storage unit 31 is executed as a processing target.
  • the binarized image stored in the binarized image storage unit 33 is subjected to container noise removal processing by the mask processing unit 35 and noise removal processing by the noise removal processing unit 37. May be.
  • a protein crystal detection method will be described.
  • the observation operation is executed by the processing unit 20 of FIG. 6 executing the observation operation program 22b. That is, an image of the protein solution 13 held in the liquid holding portion 6b of each well 6a of the crystallization plate 6 is captured by the camera 7 (observation process), and the captured image is stored in the observation image storage portion 21b.
  • the observation image to be processed is stored in the observation image storage unit 21b.
  • the change with time of the protein solution 13 to be observed will be described with reference to FIG.
  • Fig. 9A shows an example of a cross section of the liquid holding part 6b at the beginning of crystallization generation.At this stage, the droplet of the protein solution 13 almost fills the pocket of the liquid holding part 6b. No protein crystals can be seen inside the droplet.
  • FIG. 9B shows an example of a cross section of the liquid holding portion 6b in a state where crystallization has progressed to some extent.
  • the outline of the droplet (indicated by the arrow B) decreases as the droplet shrinks in the pocket of the liquid holding portion 6b. It has moved to the inside of the pocket.
  • a protein crystal 13a in which the protein contained in the droplet has crystallized remains. Furthermore, crystallization proceeds inside the droplet, and protein crystal 13a is generated.
  • FIG. 10 shows an example of an observation image in the state shown in FIG. 9B.
  • a low-brightness background image (indicated by a densely hatched portion) has an annular portion A (indicated by a sparsely-elongated portion) indicating the top of the liquid holding portion 6b. ) Appear at relatively high brightness.
  • a droplet of the protein solution 13 appears as an image whose luminance varies depending on the portion.
  • the portion where no droplet is present inside the annular portion A becomes a high-brightness portion due to the transmission of illumination light (see FIG. 9B) from below, and the outline of the droplet of the protein solution 13 is formed.
  • B clearly appears in the observed image due to the contrast with the high brightness part.
  • a partially linear high brightness portion C appears along the inner periphery of the annular portion A.
  • the protein crystal 13a to be detected exists in the region inside the circular portion A. That is, of the protein crystals 13 a existing inside the droplet of the protein solution 13, the protein crystals 13 a existing near the focus level f of the camera 7 (see FIG. 9B) are shown in FIG. In the observation image of 10, the degree of focus is high and clearly appears, and the protein crystal 13a located at a position outside the focus level f is the degree of focus. Appear with low and blurry contours. Similarly, protein crystals 13a outside the liquid droplets remaining on the surface of the pocket also appear with a low focus degree and a blurred outline. In addition, solid foreign substances such as precipitates that did not lead to crystallization exist in the observed image.
  • the processing unit 20 executes the crystal detection program 22a stored in the program storage unit 22 in FIG. It performs crystal detection processing to automatically identify protein crystals.
  • a differentiation process is performed on the observed image (ST 1). That is, a differential image composed of luminance change information indicating the magnitude of the luminance change is generated by differentiating the observation image of the protein solution stored in the observation image storage unit 21b in advance (differential processing step).
  • the shape line indicating the outer shape of the protein crystal 13a appearing in the observation image of Fig. 10 the outline B of the droplet, and the inner circumference of the annular portion A
  • High-brightness areas such as the high-brightness area C, appear with high brightness.
  • the differential image is a multi-valued image in which each pixel originally appears with a brightness corresponding to the luminance change value, but is shown in FIG. 11 as a black and white binary image for convenience of illustration.
  • the luminance change information derived from the liquid holding part 6b of the crystallization plate 6 holding the protein solution 13 is removed from the differential image (vessel noise removing step).
  • the protein solution 13 is held based on mask information previously taught as the shape of the liquid holding portion 6b of the crystallization plate 6. This is performed by removing the luminance change information of the predetermined region that is unlikely to be present.
  • the luminance change information in the differential image shown in FIG. 11 exists outside the range in which the protein solution 13 is held.
  • the part where the change in luminance is large that is, the part that includes the inner peripheral part of the annular part A shown in FIG.
  • a differential image (mask processing) including only a region where the protein crystal may exist may be obtained.
  • the differential image subjected to the mask processing in this way is binarized by using a threshold for noise extraction, and further thinned (ST 3).
  • Figure 13 shows the thinned image obtained by this thinning process.
  • the high-brightness part in the differential image that is, the shape line of the protein crystal 13a and the outline of the droplet are all wide. Has been replaced by a one-pixel line.
  • noise extraction is performed based on the thinned image thus created. That is, the noise contained in the thinned image is recognized (ST4).
  • multiple lines in the thinned image are labeled as a unit, and among the individual labels, if the length of the line exceeds the predetermined value, it is determined whether or not the label corresponds to noise by the algorithm described below. To recognize. In this case, since the labeling is performed on the thinned image, the label area itself indicates the length of the line in each label.
  • Figures 16A and 16B illustrate this first algorithm for noise recognition.
  • a branch point at which the line constituting the label branches is determined, and based on the obtained number of branch points, It is determined whether it is noise.
  • the length of the line n is equal to or longer than a predetermined value, but is not regarded as noise because the number of branch points P is large.
  • the length of the line n is equal to or more than the predetermined value, and there is only one branch point P, and the determination value for determining that “the number of branches is small” is Since it does not exceed it, it is regarded as noise. That is, in the first algorithm example, in the noise recognition step, the length of the line and the number of branches are obtained, and a line whose length exceeds a predetermined value and whose number of branches is small is regarded as noise.
  • FIG. 17 shows the second algorithm.
  • a label whose line length exceeds a predetermined value it is determined whether or not the label is a noise by determining the linearity of the line constituting the label. For example, at label L3 shown in Fig. 17, a search is made for the line n that constitutes the label, and the line n starting the search from the search starting point PS is within the range of the search allowable width V defined at the search end point PE.
  • this line n is determined to be noise. That is, in the example of the second algorithm, in the noise recognition step, the length and linearity of the line are recognized, and a line having a length exceeding a predetermined value and having high linearity is regarded as noise.
  • FIG. 18 shows a third algorithm.
  • an approximate straight line AN that approximates the entire plurality of lines n forming the label is obtained.
  • the degree of dispersion of the line n with respect to the approximate straight line AN is obtained.
  • multiple lines n The degree of dispersion is large because it is in a comprehensive state, and is not regarded as noise.
  • the line n is substantially along the approximate line A N and the degree of dispersion with respect to the approximate line A N is small, so that it is regarded as noise. That is, in the example of the third algorithm, in the noise recognition step, the length of the line and the degree of dispersion of the line with respect to the approximate straight line are obtained, and a line whose length exceeds a predetermined value and whose degree of dispersion is small is regarded as noise. I have to.
  • the setting method of each parameter in such a noise recognition method is not particularly limited. For example, using a previously prepared noise and a crystal image sample, the value is appropriately set to a value for detecting the noise to be removed. Method and the like. '
  • noise removal processing is performed to remove the line detected as noise from the binarized differential image (ST 5). That is, in (ST 3), (ST 4), and (ST 5), the differentiated image is binarized by a threshold value for noise extraction and then thinned to obtain a thinned image composed of a plurality of lines. (Thinned image generation step). Then, by individually recognizing the shapes of a plurality of lines included in the generated thinned image, a line regarded as noise is detected (noise recognition step), and a line detected as noise is detected in the noise recognition step. The corresponding luminance change information is removed from the differential image (noise removal step).
  • Figure 14 shows the differential image (noise removed) from which noise has been removed in this way.
  • the differential image (noise removal) is binarized using a threshold for feature extraction (ST6). That is, by binarizing the differential image with a threshold for extracting a characteristic portion, a binary image in which luminance change information indicating a large luminance change is left as a characteristic portion is obtained (a binarization processing step).
  • the threshold used here is It is set to a value higher than the threshold for extracting noises.
  • FIG. 15 shows a binarized image obtained in this manner. In this image, only a characteristic portion likely to be a protein crystal appears. Then, it is stored in the obtained binarized image storage unit 33.
  • the container noise removing step and the noise removing step may be performed on the binarized image stored in the binarized image storage unit 33.
  • the feature portions left in the binarized image those corresponding to the lines detected as being regarded as noise are removed from the binarized image.
  • crystallization determination is performed on the obtained binarized image (ST7). For example, if there are few features in the binarized image, it is judged that there is no possibility of crystallization or crystallization, and if there are many features, there is a possibility of crystallization or crystallization.
  • the number of characteristic parts is determined by comparing the total area corresponding to the characteristic parts with a predetermined value.
  • the predetermined value is not particularly limited, but can be appropriately set using, for example, an area corresponding to a characteristic portion calculated using a crystal sample, an image sample, or the like prepared in advance. That is, here, at least one of the presence or absence of the protein crystal and the progress of the protein crystallization is determined from the characteristic portion of the binarized image (crystallization determination step).
  • crystallization plate information, level information, and observation indicate the crystallization plate 6 from which the observation image targeted in the processing was obtained. Crystallization information such as images and observation times The information is stored in the crystallization information storage unit 21c (ST9), and the protein detection processing for the observed image is terminated.
  • a portion corresponding to the contour of the protein crystal to be detected is first extracted as a portion having a large luminance change by differentiating the image of the protein solution.
  • the mask processing unit 35 and the noise removal processing unit 37 perform the processing so that the characteristic portion of the binarized image does not include noise.
  • the shape of the container, the lighting conditions, etc. In the case where an observation image containing almost no noise can be obtained, the processing in the mask processing unit 35 and the noise removal processing unit 37 can be omitted.
  • the detection of protein crystals has relied solely on visual observation by the observer.
  • the detection of protein crystals can be automated, and can be performed efficiently and with high reliability.
  • the protein crystal detection method of the present invention can be used for, for example, a screening method for protein crystallization conditions such as a vapor diffusion method, and the protein crystal detection device of the present invention can be used for a protein crystallization condition such as a vapor diffusion method. It can be used for screening equipment and protein crystal production equipment.

Landscapes

  • Chemical & Material Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Materials Engineering (AREA)
  • Metallurgy (AREA)
  • Organic Chemistry (AREA)
  • Crystals, And After-Treatments Of Crystals (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Peptides Or Proteins (AREA)
  • Investigating Or Analysing Biological Materials (AREA)

Abstract

本発明は、蛋白質結晶検出を効率よく高い信頼性で行うことができる蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出プログラムを提供することを目的とする。 本発明の蛋白質結晶検出は、まず蒸気拡散法による結晶化中の蛋白質溶液を観察して得られた観察画像を微分処理することにより輝度変化の大きさを示す輝度変化情報からなる微分画像を生成する。次いでこの微分画像からノイズを除去した後に、特徴部抽出用の閾値で二値化することにより大きな輝度変化を示す部分を特徴部分として残した二値化画像を求める。そしてこの二値化画像の特徴部分から蛋白質結晶の有無を判断する結晶化判定を行う。これにより、従来は専ら観察担当者の目視観察に依存していた蛋白質結晶の検出を効率よく高い信頼性で行うことができる。

Description

蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出 プログラム
技術分野
本発明は、 結晶化容器に保持された蛋白質溶液中の蛋白質結晶を検出 する蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶 検出プログラムに関する。 書
背景技術
近年遺伝子情報を医療などの分野に有効に利用するための取り組みが 活発化しており、 その基礎技術として、 遺伝子の発現の結果得られる蛋 白質の構造を解析する努力が行われている。この蛋白質の構造解析とは、 蛋白質の 3次元立体構造を特定するものであり、 X線回析などの方法に よって行われる。 結 このような X線回析により、 蛋白質の構造解析を行うためには、 まず 解析対象の蛋白質を結晶化することが求められ、 この蛋白質結晶化の方 法として蒸気拡散法が知られている。 この方法では、 結晶化対象の蛋白 質を含む蛋白質溶液から蒸発する溶媒成分を同一容器内に収容された翁 晶化溶液によって吸収させることにより、 蛋白質溶液を過飽和状態に保 つて結晶を徐々に生成させる。 従来より、 この蒸気拡散法を用いて蛋白 質の結晶化を行うための専用の容器や装置が提案されている (例えば、 特開 20 0 2 - 2 3 3 7 0 2号公報および特開 2 0 0 2— 1 7 9 5 00 号公報参照)。 しかしながら、 現状では結晶化を促進させるための結晶生育条件を理 論的に特定することができず、 各種の条件を変えながら多数の試験を系 統的に実行した結果から最良の条件を求めるスクリーニングの手法を用 いざるを得ない。 このため、 従来より対象となる蛋白質溶液を各種の結 晶生育条件、 すなわち前述の結晶化溶液の種類 ·濃度や生育温度を変化 させた幾通りもの条件下で、 試験を反復実行する必要があった。
このような試験は、 蛋白質溶液および結晶化溶液を収容した結晶化用 のマイクロプレートなどの結晶化容器を特定温度に設定された恒温室内 に保管し、 結晶化の有無や進行度合いを時間経過に伴って観察すること によって行われていた。 そして蛋白質結晶検出のための観察作業は従来 は専ら人手に依存しており、 試験担当者が恒温室から結晶化容器を取り 出して顕微鏡視野内で蛋白質溶液を目視観察することによって、 結晶化 の進行状況をデータ化し記録する作業を行っていた。 発明の開示
ところがこのような観察作業は、 蛋白質溶液中の微細な結晶を目視で 判断しながら検出する作業であることから、 効率よく正確な蛋白質結晶 を検出することが困難であった。 例えば、 蛋白質溶液を撮り込んだ観察 画像中には、 検出目的である蛋白質結晶以外にも、 沈殿物などの固形異 物や結晶化容器の形状に由来する陰影部、 液滴の輪郭などのノイズ部分 が存在しており、 これらのノイズ部分と検出対象との識別は、 専ら試験 担当者の熟練や勘に依存していた。 このため、 試験担当者の個人差によ る作業効率や信頼性のばらつきが避けられず、 従来の結晶検出作業の作 業効率や検出結果の信頼性は必ずしも満足のゆくものではなかった。 そこで本発明は、 蛋白質結晶検出を効率よく高い信頼性で行うことが できる蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結 晶検出プログラムを提供することを目的とする。 前記目的を達成するために、 蛋白質結晶を検出する本発明の蛋白質結 晶検出方法は、 蛋白質溶液を観察して得られた観察画像を微分処理する ことにより輝度変化の大きさを示す輝度変化情報からなる微分画像を生 成する微分処理工程と、 前記微分画像を特徴部抽出用の閾値で二値化す ることにより前記輝度変化情報のうち大きな輝度変化を示す部分を特徴 部分として残した二値化画像を得る二値化処理工程と、 前記二値化画像 の特徴部分より蛋白質結晶の有無および結晶化の進行の有無の少なくと も一方を判断する結晶化判定工程とを含むことを特徴とする。
また、 前記目的を達成するために、 蛋白質結晶を検出する本発明の蛋 白質結晶検出装置は、 蛋白質溶液を観察して得られた観察画像を記憶す る観察画像記憶部と、 前記観察画像記憶部の観察画像を微分処理するこ とにより輝度変化の大きさを示す輝度変化情報からなる微分画像を生成 する微分処理部と、 前記微分処理部で生成された前記微分画像を特徴部 抽出用の閾値で二値化することにより前記輝度変化情報のうち大きな輝 度変化を示す輝度変化情報を特徴部分として残した二値化画像を得る二 値化処理部と、 前記二値化処理部で得られた二値化画像を記憶する二値 化画像記憶部と、 前記二値化画像記憶部の二値化画像の特徴部分より蛋 白質結晶の有無および結晶化の進行の有無の少なくとも一方を判断する 結晶化判定部とを備えたことを特徴とする。
さらにまた、 前記目的を達成するために、 蛋白質溶液内で生成した蛋 白質結晶を検出する処理をコンピュータに実行させる本発明の蛋白質結 晶検出プログラムは、 前記蛋白質結晶の検出処理が、 蛋白質溶液を観察 して得られた観察画像を微分処理することにより輝度変化の大きさを示 す輝度変化情報からなる微分画像を生成する微分処理工程と、 前記微分 画像を特徴部抽出用の閾値で二値化することにより前記輝度変化情報の うち大きな輝度変化を示す輝度変化情報を特徴部分として残した二値化 画像を得る二値化処理工程と、 前記二値化画像の特徴部分より蛋白質結 晶の有無および結晶化の進行の有無の少なくとも一方を判断する結晶化 判定工程とを含むことを特徴とする。 従来は専ら観察担当者の目視観察に依存していたが、本発明によれば、 蛋白質結晶の検出を自動化でき、 かつ、 効率よく高い信頼性で行うこと ができる。 また、 本発明の蛋白質結晶検出方法は、 例えば、 蒸気拡散法 等による蛋白質結晶化条件のスクリーニング方法に使用でき、 本発明の 蛋白質結晶検出装置は、 例えば、 蒸気拡散法等による蛋白質結晶化条件 のスクリーニング装置や蛋白質結晶の製造装置に使用できる。 図面の簡単な説明
図 1は、 本発明の一実施形態の蛋白質結晶検出装置の斜視図である。 図 2は、 本発明の一実施形態の蛋白質結晶検出装置に使用される結晶 化プレートの斜視図である。
図 3および図 5は、 本発明の一実施形態の蛋白質結晶検出方法におい て使用される結晶化プレートの部分断面図である。
図 4は、 本発明の一実施形態の蛋白質結晶検出装置の観察部の部分断 面図である。
図 6は、 本発明の一実施形態の蛋白質結晶検出装置の制御系の構成を 示すブロック図である。
図 7は、 本発明の一実施形態の蛋白質結晶検出装置の処理機構を示す 機能ブロック図である。 図 8は、 本発明の一実施形態の蛋白質結晶検出方法を示すフロー図で ある。
図 9 Aおよび Bは、 本発明の一実施形態の蛋白質結晶検出方法におい て使用される結晶化プレートの部分断面図である。
図 1 0は、 本発明の一実施形態の蛋白質結晶検出方法における観察画 像を示す図である。
図 1 1は、 本発明の一実施形態の蛋白質結晶検出方法における微分画 像を示す図である。
図 1 2は、 本発明の一実施形態の蛋白質結晶検出方法における微分画 像 (マスク処理) を示す図である。
図 1 3は、 本発明の一実施形態の蛋白質結晶検出方法における細線化 画像を示す図である。
図 1 4は、 本発明の一実施形態の蛋白質結晶検出方法における微分画 像 (ノイズ除去) を示す図である。
図 1 5は、 本発明の一実施形態の蛋白質結晶検出方法における二値化 画像を示す図である。
図 1 6 Aおよび Bは、 本発明の一実施形態の蛋白質結晶検出方法にお けるノィズ認識処理の説明図である。
図 1 7は、 本発明の一実施形態の蛋白質結晶検出方法におけるノイズ 認識処理の説明図である。
図 1 8 Aおよび Bは、 本発明の一実施形態の蛋白質結晶検出方法にお 認識処理の説明図である。 発明を実施するための最良の形態
本発明の蛋白質結晶検出方法は、 さらに、 結晶化対象の蛋白質溶液を 保持している結晶化容器に由来する輝度変化情報および特徴部分の少な くとも一方を前記微分画像および前記二値化画像の少なくとも一方から 除去する容器ノイズ除去工程を含むことが好ましい。
本発明の蛋白質結晶検出方法において、 前記容器ノイズ除去工程は、 予め教示されている情報に基づいて所定領域の輝度変化情報および特徴 部分の少なくとも一方を除去することが好ましい。
本発明の蛋白質結晶検出方法は、 さらに、 前記微分画像をノイズ抽出 用の閾値で二値化した後に細線化処理することにより、 複数の線からな る細線化画像を得る細線化画像生成工程と、 前記細線化画像に含まれる 複数の線の形状を個々に認識することにより、 ノイズとみなす線を検出 するノイズ認識工程と、 前記ノイズ認識工程でノイズとみなされて検出 された線に該当する輝度変化情報および特徴部分の少なくとも一方を前 記微分画像および前記二値化画像の少なくとも一方から除去するノィズ 除去工程を含むことが好ましい。
本発明の蛋白質結晶検出方法において、 前記ノイズ認識工程は、 線の 長さおよび分岐数を求め、 長さが予め決定した所定値を超え且つ分岐数 が予め決定した値より少ない線をノイズとみなす工程を含むことが好ま しい。
本発明の蛋白質結晶検出方法において、 前記ノイズ認識工程は、 線の 長さおよび直線性を認識し、 長さが予め決定した所定値を超え且つ直線 性が予め決定した値より高い線をノイズとみなす工程を含むことが好ま しい。
本発明の蛋白質結晶検出方法において、 前記ノイズ認識工程は、 線の 長さおよび当該線の近似直線に対する分散度合いを求め、 長さが予め決 定した所定値を超え且つ分散度合いが予め決定した値より小さい線をノ ィズとみなす工程を含むことが好ましい。
本発明の蛋白質結晶検出方法は、 さらに、 結晶化容器に保持された蛋 白質溶液の画像をカメラで撮り込む観察工程と、 前記カメラで撮り込ん だ観察画像を観察画像記憶部に記憶する記憶工程とを含み、 前記微分処 理工程は、 前記観察画像記憶部に記憶した画像に対して行うことが好ま しい。
また、 本発明の蛋白質結晶検出方法は、 蛋白質結晶化条件のスクリー エング方法における発生した蛋白質結晶検出の方法として使用すること ができる。 なお、 前記スクリーニング方法は、 本発明の検出方法を利用 する以外については、 特に制限されず、 従来公知の技術を利用できる。 次に、 本発明の蛋白質結晶検出装置は、 さらに、 蛋白質溶液を保持し ている結晶化容器に由来する輝度変化情報および特徴部分の少なくとも 一方を、 前記微分画像記憶部の微分画像および前記二値化画像記憶部の 二値化画像の少なくとも一方から除去する容器ノィズ除去部を備えるこ とが好ましい。
本発明の蛋白質結晶検出装置は、 さらに、 マスク情報を記憶するマス ク情報記憶部を備え、 前記容器ノイズ除去部は、 前記マスク情報に基づ いて前記輝度変化情報および特徴部分の少なくとも一方を前記微分画像 記憶部の微分画像および前記二値化画像記憶部の二値化画像の少なくと も一方から除去することが好ましい。
本発明の蛋白質結晶検出装置は、 さらに、 前記微分画像をノイズ抽出 用の閾値で二値化した後に細線化処理することにより複数の線からなる 細線化画像を得る細線化画像生成部と、 前記細線化画像生成部で生成さ れた細線化画像を記憶する細線化画像記憶部と、 前記細線化画像記憶部 の細線化画像に含まれる複数の線の形状を個々に認識することによりノ ィズとみなす線を検出するノイズ認識処理部と、 前記微分画像記憶部の 微分画像および前記二値化画像記憶部の二値化画像の少なくとも一方か ら前記ノイズ検出処理部によってノイズとみなされて検出された線に該 当する輝度変化情報および特徴部分の少なくとも一方を除去するノィズ 除去処理部を備えることが好ましい。
本発明の蛋白質結晶検出装置において、 前記ノイズ認識処理部が、 線 の長さおよび分岐数を求め、 長さが予め決定した所定値を超え且つ分岐 数が予め決定した値より少ない線をノイズとみなすことが好ましい。 本発明の蛋白質結晶検出装置において、 前記ノイズ認識処理部が、 線 の長さおよび直線性を認識し、 長さが予め決定した所定値を超え且つ直 線性が予め決定した値より高い線をノイズとみなすことが好ましい。 本発明の蛋白質結晶検出装置において、 前記ノイズ認識処理部が、 線 の長さおよび当該線の近似直線に対する分散度合いを求め、 長さが予め 決定した所定値を超え且つ分散度合いが予め決定した値より小さい線を ノイズとみなすことが好ましい。
本発明の蛋白質結晶検出装置は、 さらに、 結晶化対象の蛋白質溶液を 保持する結晶化容器がセットされる観察ステージと、 前記観察ステージ にセットされた結晶化容器の蛋白質溶液を撮像して画像を撮り込むカメ ラとを備え、 前記カメラで撮り込んだ蛋白質溶液の画像を前記観察画像 記憶部に記憶することが好ましい。
また、 本発明の蛋白質結晶検出装置は、 蛋白質結晶化条件のスクリ一 ニング装置における発生した蛋白質結晶の検出に使用することができる ( さらにまた、 本発明の蛋白質結晶検出装置は、 蛋白質結晶の製造装置に おける蛋白質結晶のモニターや検出に使用することができる。 なお、 前 記スクリーニング装置および結晶製造装置は、 本発明の検出装置を利用 する以外については、 特に制限されず、 従来公知の技術を利用できる。 次に、 本発明の蛋白質結晶検出プログラムは、 前記タンパク質結晶の 検出処理が、 さらに、 結晶化対象の蛋白質溶液を保持している結晶化容 器に由来する輝度変化情報および特徴部分の少なくとも一方を前記微分 画像および前記二値化画像の少なくとも一方から除去する容器ノイズ除 去工程を含むことが好ましい。
本発明の蛋白質結晶検出プログラムにおいて、前記ノイズ除去工程は、 予め教示されている情報に基づいて所定領域の輝度変化情報および特徴 部分の少なくとも一方を除去することが好ましい。
本発明の蛋白質結晶検出プログラムは、 前記タンパク質結晶の検出処 理が、 さらに、 前記微分画像をノイズ抽出用の閾値で二値化した後に細 線化処理することにより複数の線からなる細線化画像を得る細線化画像 生成工程と、 前記細線化画像に含まれる複数の線の形状を個々に認識す ることにより、 ノイズとみなす線を検出するノイズ認識工程と、 前記ノ ィズ検出工程でノイズとみなされて検出された線に該当する輝度変化情 報および特徴部分の少なくとも一方を前記微分画像および前記二値化画 像の少なくとも一方より除去するノィズ除去工程を含むことが好ましい < 本発明の蛋白質結晶検出プログラムにおいて、前記ノイズ認識工程は、 線の長さおよび分岐数を求め、 長さが予め決定した所定値を超え且つ分 岐数が予め決定した値より少ない線をノイズとみなすことが好ましい。 本発明の蛋白質結晶検出プログラムにおいて、前記ノイズ認識工程は、 線の長さおよび直線性を認識し、 長さが予め決定した所定値を超え且つ 直線性が予め決定した値より高い線をノイズとみなすことが好ましい。 本発明の蛋白質結晶検出プログラムにおいて、前記ノイズ認識工程は、 線の長さおよび当該線の近似直線に対する分散度合いを求め、 長さが予 め決定した所定値を超え且つ分散度合いが予め決定した値より小さい線 をノイズとみなすことが好ましい。
本発明の蛋白質結晶検出プログラムは、 前記タンパク質結晶の検出処 理が、 さらに、 結晶化容器に保持された蛋白質溶液を観察してカメラに より観察画像を撮り込む観察工程と、 前記力メラで撮り込んだ観察画像 を観察画像記憶部に記憶する記憶工程とを含み、 前記微分処理工程は、 前記観察画像記憶部に記憶した画像に対して行うことが好ましい。 次に本発明の実施の形態の一例を図面を参照して説明する。
まず、 蛋白質結晶検出装置の全体構造の一例を、 図 1を参照して説明 する。 蛋白質結晶検出装置 1は、 例えば、 蒸気拡散法等により蛋白質溶 液内に生成した蛋白質結晶を検出するための観察に使用される専用の観 察装置である。 図 1において、 基台 2上には、 観察部 3、 ディスプレイ 装置 8および操作入力用のキーポード 9が配設されている。
観察部 3は、 フレーム 3 aに観察ステージ 4を水平姿勢で装着し、 観 察ステージ 4の上方にカメラ 7を配置した構成となっている。 観察ステ ージ 4には結晶化用のマイクロプレート 6 (以下、 単に 「結晶化プレー ト 6」 と略記する) がセットされている。 結晶化プレート 6は、 蛋白質 溶液中の蛋白質を結晶化させるために用いられる結晶化容器である。 観 察ステージ 4に備えられた X Y Z移動機構を駆動することにより、 結晶 化プレート 6は X, Υ , Z方向に移動する。 図 2, 図 3を参照して、 結晶化プレート 6の一例について説明する。 図 2に示すように、 結晶化プレート 6には複数のゥエル 6 aが格子状に 形成されている。 ゥエル 6 aは、 円形の凹部の中心に円柱状の液保持部 6 bが設けられたいわゆるカルデラ状の液体収納用の凹部であり、 ゥェ ル 6 a内には、 結晶化の対象となる試料、 すなわち結晶化対象の蛋白質 を含んだ蛋白質溶液 1 3と、 結晶化に用いられる結晶化溶液 1 2とが分 注される。 前記結晶化プレート 6の大きさは、 特に制限されないが、 例 えば、 規格化されたサイズのものを使用できる。 前記規格としては、 例 えば、 S B S規格等があげられる。 前記ゥエル 6 aの大きさは、 特に制 限されないが、 例えば、 直径 1 0 mm〜 2 0 mmであり、 前記液保持部 6 bの大きさは、 特に制限されないが、 例えば、 前記ゥエル 6 aの半分 の直径の大きさである。
図 3はこれらの試料を収容した 1つのゥエル 6 aの断面の一例を示し ている。 ゥエル 6 a内では、 液保持部 6 bの頂部に設けられたポケット 内に液滴状の蛋白質溶液 1 3が載置状態で保持されており、 液保持部 6 bを囲むリング状の貯液部 6 cには、結晶化溶液 1 2が貯溜されている。 ゥエル 6 aは、 結晶化の対象となる蛋白質溶液を載置状態で下方から保 持する液保持部 6 bと結晶化溶液 1 2を貯溜する貯液部 6 cとを有する 液体収容部となっている。 後述するように結晶化の開始に際しては、 液 保持部 6 bに保持された蛋白質溶液 1 3に所定量の結晶化溶液 1 2を貯 液部 6 cから取り出して分注して混合した後、 各ゥエル 6 a上面に密封 用のシール 1 4が貼着される (例えば、 図 2参照)。
この状態の結晶化プレート 6を所定の温度雰囲気下で保管することに より、 蛋白質溶液 1 3中の溶媒成分を蒸発させ、 これにより蛋白質溶液 1 3の蛋白質濃度を過飽和状態にまで高めて蛋白質結晶を生成する。 こ のとき、 蛋白質溶液 1 3から蒸発する溶媒と結晶化溶液 1 2に吸収され る蒸気とが平衡状態を保ちながら蛋白質溶液 1 3からの溶媒の蒸発が緩 やかに進行することにより、 安定した結晶生成が行われる。
図 1の観察部 3はこのような結晶生成過程の結晶化プレート 6を観察 することにより、 各ゥエル 6 aにおける蛋白質結晶の有無や結晶化の度 合いを検出する。 すなわち、 図 4に示すように、 例えば、 観察ステージ 4にセットされた結晶化プレート 6をカメラ 7の下方に移動させ、 観察 対象のゥエル 6 a内の液保持部 6 bをカメラ 7の撮像光軸に位置合わせ する。 そして下方の照明装置 5から照明光を照射した状態で、 カメラ 7 によって結晶化プレート 6を撮像することにより、 結晶化プレート 6に 保持された蛋白質溶液の観察画像が撮り込まれる(例えば、図 1 0参照)。 なお、 図 2 , 図 3は、 結晶生成過程において蛋白質溶液 1 3を載置状 態で下方から支持するシッティングドロップ法を用いた蒸気拡散法にお いて用いられる結晶化プレート 6の一例を示しているが、これ以外にも、 例えば、 図 5に示すようなゥエル形状の結晶化プレート 6 0を使用して もよい。 この結晶化プレート 6 0は、 蛋白質溶液 1 3の液滴を垂下状態 で保持するハンギングド口ップ法において用いられる。
図 5に示す例では、 ゥエル 6 O Aは結晶化溶液 1 2を貯溜する貯液部 を有するのみで液保持部は形成されておらず、 結晶化対象の蛋白質溶液 1 3の液滴 (所定量の結晶化溶液 1 2が混合されたもの) は、 ゥエル 6 0 aを閉塞するガラス板 1 4 Aの裏面に垂下状態で保持される。 すなわ ち蛋白質溶液 1 3が滴下されたガラス板 1 4 Aを反転して、 結晶化溶液 1 2が分注されたゥエル 6 0 Aを塞ぐように貼着してゥエル 6 O Aを密 封する。 次に、 蛋白質結晶検出装置の制御系の構成の一例を図 6を参照して、 説明する。 図 6において、 処理部 2 0は、 データ記憶部 2 1に記憶され た各種データに基づいて、 プログラム記憶部 2 2に記憶された各種処理 プログラムを実行することにより、 後述する各種動作および処理機能を 実現する。 ここでは、 プログラム記憶部 2 2には、 結晶検出プログラム 2 2 a、 観察動作プログラム 2 2 bが記憶されており、 これらのプログ ラムを実行することにより、 後述する蛋白質溶液の観察動作および蛋白 質溶液中の蛋白質結晶検出処理が行われる。
データ記憶部 2 1は、処理画像記憶部 2 1 a、観察画像記憶部 2 1 b、 結晶化情報記憶部 2 1 cを備えており、 処理画像記憶部 2 1 aは、 蛋白 質結晶検出処理において各種の処理が行われた後の処理画像を記憶する 観察画像記憶部 2 1 bは、 カメラ 7によって撮り込まれた蛋白質溶液 1 3の観察画像を記憶する (例えば、 図 1 0参照)。
後述する蛋白質結晶検出処理においては、 観察画像記憶部 2 l bに記 憶された観察画像が処理対象となる。 結晶化情報記憶部 2 1 cは、 結晶 化情報、 すなわち蛋白質結晶検出処理において結晶化が検出された観察 画像の画像データや、 観察画像が取得されたプレート · ゥエルを特定す る情報および当該プレートを観察した観察時刻などの情報を記憶する。 また処理部 2 0には、 表示処理部 2 3、 操作 ·入力処理部 2 4、 カメ ラ 7、 照明装置 5、 観察ステージ 4が接続されている。 観察動作におい て、 処理部 2 0が観察ステ一ジ 4、 照明装置 5、 カメラ 7を制御するこ とにより、 観察ステージ 4に保持された結晶化プレート 6の移動、 照明 装置 5による結晶化ブレート 6の照明、 カメラ 7による蛋白質溶液の画 像の撮り込みが実行される。 表示処理部 2 3は、 カメラ 7によって撮り 込まれた観察画像や各種の処理画像を表示するほか、 データ入力時の案 内画像などを表示ディスプレイ装置 8に表示させる処理を行う。 操作 · 入力処理部 2 4は、 キーボード 9等の入力装置を操作することにより、 処理部 2 0に対して操作指令やデータ入力を行う。 次に、 蛋白質結晶検出処理機能の一例について、 図 7の機能ブロック 図を参照して説明する。 同図において、 微分処理部 3 0は、 観察画像記 憶部 2 1 bに記憶されている観察画像(例えば、 図 1 0参照)、 すなわち カメラ 7によって撮り込まれた蛋白質溶液の画像を微分処理することに より、 輝度変化の大きさを示す輝度変化情報から成る微分画像を生成す る (例えば、 図 1 1参照)。 ここで輝度変化情報とは、 観察画像を構成する各画素における輝度の変 化率を数値 (輝度変化値) で示すものである。
観察画像中では、 背景領域や照明光が透過した部分など観察対象が存 在しない領域では輝度変化は小さく、 検出対象の蛋白質結晶の輪郭に該 当する部分では輝度変化は大きい。 したがって上述の微分画像において は、 画像に撮り込まれた観察対象物の輪郭が輝度変化の大きい部分とし て抽出される。
但し、 この微分画像においては、 検出目標である蛋白質結晶のみにな らず、 蛋白質溶液内に存在する結晶以外の沈殿物などの固形異物や、 ゥ エル 6 a内の液保持部 6 bの形状や液滴の輪郭なども同様に輝度変化の 大きい部分として抽出されるため、 これらの検出目標以外の輝度変化の 大きい部分をノイズとして除去するノィズ除去処理(後述)が行われる。 図 7の微分画像記憶部 3 1は、 微分処理部 3 0で生成された微分画像 を記憶する。 二値化処理部 3 2は、 微分画像記憶部 3 1の微分画像を特 徵部抽出用の閾値で二値化することにより、 輝度変化情報のうち大きな 輝度変化を示す輝度変化情報を特徴部分として残した二値化画像を得る (例えば、 図 1 5参照)。 そして二値化画像記憶部 3 3は、 二値化処理部 3 2で得られた二値化画像を記憶する。 結晶化判定部 3 4は、 二値化画 像記憶部 3 3に記憶された二値化画像の特徴部分より、 蛋白質結晶の有 無を判断する。 なお、 前記特徴部抽出用の閾値の設定方法は、 特に制限 されないが、 例えば、 予め準備した結晶のサンプルや画像サンプル等を 用いて、 検出目標の結晶の特徴部が抽出可能な値に適宜設定する方法等 があげられる。
ここで、 二値化処理部 3 2による二値化処理の対象となる微分画像に は、 以下に説明するマスク処理、 ノイズ除去処理が実行される。 そして 除去の対象となるノィズを認識することを目的として、 ノィズ除去処理 に先立ってノイズ抽出用の二値化処理および細線化処理が実行される。 まずマスク処理について説明する。 マスク情報記憶部 3 6は、 マスク 情報、 すなわち観察画像内において蛋白質溶液を保持する結晶化容器で ある結晶化プレート 6の形状 (液保持部 6 bの形状、 例えば、 図 2およ び 3参照) に由来して微分画像に現れる輝度変化情報、 すなわち本来観 察対象とする蛋白質溶液の観察画像中に含まれるノイズのうち、 容器で ある結晶化プレー卜 6の形状に由来して現れる容器ノイズを微分画像か ら除去するためのマスク情報 (ここでは、 液保持部 6 bに設けられたポ ケットの径寸法) を記憶する。 マスク処理部 3 5は、 マスク情報記憶部 3 6に記憶されたマスク情報に基づき、 微分画像から容器ノイズを除去 するマスク処理を行う。 これにより、 容器ノイズが除去された微分画像 が得られる (例えば、 図 1 2参照)。
次にノイズ除去処理について説明する。 ここで行われるノイズ除去処 理は、 上述のマスク処理では除去できないノイズ、 例えば液保持部 6 b 頂部のポケット内に現れる蛋白質溶液の液滴の輪郭など、 予め教示する ことができないノイズを対象としたものである。 このため、 ここでは微 分画像中の情報からどの部分がノイズであるかをノィズ認識処理部 3 8 によって認識し、 このノイズ認識結果に基づきノイズ除去処理部 3 7が 微分画像中のノイズ除去を行う。 これにより、 ノイズが除去された微分 画像が得られる (例えば、 図 1 4参照)。
ここでは、 ノイズ認識の手法として、 微分画像を細線化した細線化画 像中の線の形状的特徴に基づき、 これらの線が蛋白質結晶を示す図形の 輪郭などの形状を示す形状線であるか、 もしくは液滴の輪郭など明らか に蛋白質結晶を示す図形とは異なる線であるかを識別するようにしてい る。
すなわちここに示すノイズ認識においては、 まず二値化処理部 3 9に より、 微分画像記憶部 3 1に記憶された微分画像をノイズ抽出用の閾値 で二値化処理する。 そして細線化処理部 4 0は、 二値化処理された二値 化画像を細線化処理する。 すなわち、 二値化画像中の各線要素を 1画素 幅の細い線に置き換える。 これにより、 微分画像中の輝度変化が大きい 部分を示す範囲が細線化された複数の線から成る細線化画像が生成され る(例えば、図 1 3参照)。なお、前記ノイズ抽出用の閾値の設定方法は、 特に制限されないが、 例えば、 予め準備した結晶のサンプルや画像サン' プル等を用い、 検出目標である蛋白質結晶の輝度変化情報と前記結晶以 外の沈殿物や液滴等の輝度変化情報とを区別できる値に適宜設定する方 法等があげられる。
したがって、 二値化処理部 3 9および細線化処理部 4 0は、 微分画像 をノィズ抽出用の閾値で二値化した後細線化処理することにより複数の 線から成る細線化画像を得る細線化画像生成部を構成する。 そして細線 化画像記憶部 4 1は、 細線化画像生成部で生成された細線化画像を記憶 する。
ノイズ認識処理部 3 8は、 細線化画像記憶部 4 1の細線化画像に含ま れる複数の線の形状を個々に認識することにより、· ノイズとみなす線を 検出する。 ノイズ除去処理部 3 7は、 微分画像記憶部 3 1に記憶された 微分画像から、 ノイズ認識処理部 3 8でノイズとみなされて検出された 線に該当する輝度変化情報を微分画像記憶部 3 1の微分画像より除去す る。
ここで、 ノイズ認識処理部 3 8がノイズとみなす線を検出するに際し ては、 後述するように複数のアルゴリズムを用いている。 すなわち、 線 の長さおよび分岐数を求め、 長さが所定値を超え且つ分岐数が少ない線 をノイズとみなす第 1のアルゴリズム、線の長さおよび直線性を認識し、 長さが所定値を超え且つ直線性が高い線をノイズとみなす第 2のアルゴ リズム、 さらには線の長さおよび当該線の近似直線に対する分散度合い を求め、 長さが所定値を超え且つ分散度合いが小さい線をノイズとみな す第 3のアルゴリズムの 3つを必要に応じて使い分け、 または併用する ようにしている。
なお、 マスク処理部 3 5による容器ノイズ除去処理、 ノイズ除去処理 部 3 7によるノイズ除去処理においては、 上記例では微分画像記憶部 3 1に記憶された微分画像を処理対象として実行する例を示しているが、 二値化画像記憶部 3 3に記憶された二値化画像を対象としてマスク処理 部 3 5による容器ノイズ除去処理、 ノイズ除去処理部 3 7によるノイズ 除去処理を実行するように構成してもよい。 次に蛋白質結晶検出方法について説明する。 まず、 図 6の処理部 2 0 が観察動作プログラム 2 2 bを実行することにより、 観察動作が実行さ れる。 すなわち結晶化プレート 6の各ゥエル 6 aの液保持部 6 bに保持 された蛋白質溶液 1 3の画像をカメラ 7によって撮り込み (観察工程)、 撮り込んだ画像を観察画像記憶部 2 1 bに記憶する (記憶工程)。 これに より、 観察画像記憶部 2 1 bには処理対象の観察画像が記憶される。 ここで、 観察対象の蛋白質溶液 1 3の経時変化について、 図 9を参照 して説明する。 前述のように結晶化生成の開始に際しては、 ゥエル 6 a の液保持部 6 bには、 所定割合の結晶化溶液 1 2が加えられた蛋白質溶 液 1 3の液滴が載置される (図 3参照)。 図 9 Aは、 結晶化生成の初期に おける液保持部 6 bの断面の一例を示しており、 この段階では蛋白質溶 液 1 3の液滴は液保持部 6 bのポケットをほぼ満たした状態にあり、 液 滴内部には未だ蛋白質結晶が見られない。
ここで結晶生育条件、 すなわち結晶化溶液 1 2の組成 ·濃度や保管温 度が望ましい条件に適っている場合には、 蛋白質溶液 1 3内では時間の 経過とともに結晶化が進行する。 図 9 Bは、 結晶化がある程度進行した 状態における液保持部 6 bの断面の一例を示している。 この状態では、 蛋白質溶液 1 3中の溶媒成分が徐々に蒸発することにより、 液保持部 6 bのポケット内で液滴が縮小するにつれて液滴の輪郭が(矢印 Bで示す)、 図 9 Aの状態よりも.ポケット内部側に移動している。 そして液滴の縮小 によって露呈したポケット底面には、 液滴内に含まれていた蛋白質が結 晶化した蛋白質結晶 1 3 aが残留している。 さらに液滴内部においても 結晶化が進行し、 蛋白質結晶 1 3 aが生成されている。
図 1 0は、 図 9 Bに示す状態における観察画像の一例を示しており、 液保持部 6 bのポケット内で溶媒の蒸発がある程度進行し体積が縮小し た状態の液滴を上方から撮り込んだ画像が含まれている。 この観察画像 中では、 図 1 0に示すように、 低輝度の背景画像 (密ハッチング部で示 す) 中に、 液保持部 6 bの頂部を示す環状部分 A (疎八ツチング部で示 す) が比較的高い輝度で現れている。
そしてこの環状部分 Aの内側のポケット内には、 蛋白質溶液 1 3の液 滴が輝度が部分によって異なる画像として現れている。 ここで、 環状部 分 Aの内側で液滴が存在しない部分は下方からの照明光 (図 9 B参照) が透過することによって高輝度部分となっており、 蛋白質溶液 1 3の液 滴の輪郭 Bはこの高輝度部分とのコントラストによって観察画像中で明 瞭に現れている。 また環状部分 Aの内周に沿って、 部分的に線状の高輝 度部分 Cが現れている。
そして検出対象の蛋白質結晶 1 3 aは、 環状部分 Aの内側の領域に存 在している。 すなわち、 蛋 質溶液 1 3の液滴内部に存在する蛋白質結 晶 1 3 aのうち、 カメラ 7による合焦レベル : f (図 9 B参照) の近傍に 存在する蛋白質結晶 1 3 aは、 図 1 0の観察画像中で合焦度が高く明瞭 に現れ、 合焦レベル f から外れた位置にある蛋白質結晶 1 3 aは合焦度 が低くぼやけた輪郭で現れる。 またポケットの表面に残置された形で存 在する液滴外の蛋白質結晶 1 3 aも同様に、 合焦度が低くぼやけた輪郭 で現れる。 さらにこれ以外にも、 観察画像中には結晶化に至らなかった 沈殿物などの固形異物が存在する。 蛋白質結晶の検出において、 観察画像中に現れるこれらの図形を目視 観察によって正確に識別することは困難であり、 検出対象の蛋白質結晶 を高い信頼度で効率よく検出することができないため、 本実施の形態に 示す蛋白質結晶検出方法では、 図 6のプログラム記憶部 2 2に記憶され た結晶検出プログラム 2 2 aを処理部 2 0が実行することにより、 観察 画像に対して図 8のフローに示す蛋白質結晶検出処理を行い、 蛋白質結 晶の識別を自動的に行わせるようにしている。
図 8における蛋白質結晶検出処理は、 まず、 観察画像に対して微分処 理を行う (S T 1 )。 すなわち、 予め観察画像記憶部 2 1 bに記憶された 蛋白質溶液の観察画像を微分処理することにより、 輝度変化の大きさを 示す輝度変化情報からなる微分画像を生成する (微分処理工程)。 これに より、 図 1 1に示すように、 図 1 0の観察画像中に現れている蛋白質結 晶 1 3 aの外形を示す形状線や、 液滴の輪郭 B、 環状部分 Aの内周の高 輝度部分 Cなど、 輝度変化が大きい部分が高輝度で現れる。 なお、 微分 画像は本来各画素が輝度変化値に応じた明るさで現れる多値画像である が、 図 1 1では図示の便宜のため白黒 2値画像で表している。
次いで、 この微分画像に対して、 マスク処理を行う (S T 2 )。 ここで は、 蛋白質溶液 1 3を保持している結晶化プレート 6の液保持部 6 bに 由来する輝度変化情報を微分画像から除去する (容器ノイズ除去工程)。 容器ノイズ除去は、 結晶化プレート 6の液保持部 6 bの形状として予め 教示されているマスク情報に基づいて、 蛋白質溶液 1 3が保持されてい る可能性のない所定領域の輝度変化情報を除去することにより行われる ここでは、 図 1 1に示す微分画像中の輝度変化情報のうち、 蛋白質溶 液 1 3が保持されている範囲以外に存在する輝度変化が大きい部分、 す なわち図 1 0に示す環状部分 Aの内周部を含んでこれらよりも外側の領 域に現れる輝度変化が大きい部分をノイズとして除去する。これにより、 図 1 2に示すように、 蛋白質結晶が存在する可能性がある領域のみを含 んだ微分画像 (マスク処理) が得られる。
このようにしてマスク処理が行われた微分画像をノイズ抽出用の閾値 で二値化処理し、 さらに細線化処理を行う (S T 3 )。 図 1 3は、 この細 線化処理によって得られた細線化画像を示しており、 微分画像中の高輝 度部分、 すなわちタンパク質結晶 1 3 aの形状線や液滴の輪郭などは、 いずれも幅が 1画素の線に置き換えられている。 そしてこのようにして 作成された細線化画像に基づいて、 ノイズ抽出を行う。 すなわち、 細線 化画像に含まれるノイズを認識する (S T 4 )。
ここで、 ノイズ認識方法の例を図 1 6〜 1 8を参照して説明する。 図 1 6〜 1 8に示す例はいずれも、 上述の輪郭 Bに該当する線など、 ある 程度の連続した長さを有ししかも蛋白質結晶の特徴的形状に合致しない ものをノイズとみなして検出するものである。 ここでは、 細線化画像中 の複数の線をまとまりごとにラベリングし、 個々のラベルのうち、 線の 長さが所定値を超えるラベルについて以下に説明するアルゴリズムでノ ィズに該当するか否かを認識するようにしている。 この場合、 細線化処 理された画像を対象としてラベリングを行っていることから、 ラベル面 積そのものが各ラベルにおける線の長さを示している。
図 1 6 Aおよび 1 6 Bは、 このノイズ認識の第 1のアルゴリズムを示 している。 まず、 線の長さが所定値を超えるラベルについて、 ラベルを 構成する線が分岐する分岐点を求め、 求められた分岐点の数に基づいて ノイズであるか否かを判定する。 例えば図 1 6 Aに示すラベル L 1の例 では、 線 nの長さは所定値以上であるものの、 分岐点 Pが多いことから ノイズとはみなされない。
これに対し図 1 6 Bに示すラベル L 2の例では、 線 nの長さは所定値 以上であり、 しかも分岐点 Pが 1つしかなく、 「分岐数が少ない」 と判断 する判定値を超えていないことからノイズとみなされる。 すなわち第 1 のアルゴリズムの例では、 ノイズ認識工程において、 線の長さおよび分 岐数を求め、 長さが所定値を超え且つ分岐数が少ない線をノイズとみな すようにしている。 なお、 分岐点の数に基づいてノイズであるか否かを 判断する別の方法として、 線の長さを分岐数で割った値が所定の長さを 超えていなければ分岐数が少ない線と判断するようにしてもよい。 図 1 7は、 第 2のアルゴリズムを示している。 ここでは、 線の長さが 所定値を超えるラベルについて、 ラベルを構成する線の直線性を判定す ることによってノイズであるか否かを判定する。 例えば図 1 7に示すラ ベル L 3において、 ラベルを構成する線 nの探索を行い、 探索起点 P S から探索を開始した線 nが、 探索終点 P Eにおいて予め規定された探索 許容幅 Vの範囲内に収まっている場合に直線性が高いと判断し、 この線 nをノイズと判定する。 すなわち第 2のアルゴリズムの例では、 ノイズ 認識工程において、 線の長さおよび直線性を認識し、 長さが所定値を超 え且つ直線性が高い線をノイズとみなすようにしている。
さらに図 1 8は第 3のアルゴリズムを示している。 ここでは、 ラベル を構成する複数の線の近似直線に対する分散度合いを求めることによつ てノイズであるか否かを判定する。 例えば図 1 8 Aに示すラベル L 4に おいて、 ラベルを構成する複数の線 n全体を近似する近似直線 A Nを求 める。 そしてこの近所直線 A Nを挟む所定枠 M内において、 線 nの近似 直線 A Nに対する分散度合いを求める。 この場合には、 複数の線 nが錯 綜して状態にあることから分散度合いは大きく、 ノイズとはみなされな い。
これに対し、 図 1 8 Bに示すラベル L 5の例では、 線 nは近似直線 A Nにほぼ沿つており近似直線 A Nに対する分散度合いが小さいことから ノイズとみなされる。 すなわち第 3のアルゴリズムの例では、 ノイズ認 識工程において、 線の長さおよび当該線の近似直線に対する分散度合い を求め、 長さが所定値を超え且つ分散度合いが小さい線をノイズとみな すようにしている。 なお、 このようなノイズの認識方法における各パラ メータの設定方法は、 特に制限されないが、 例えば、 予め準備したノィ ズおよび結晶の画像サンプル等を用い、 除去したいノイズを検出する値 に適宜設定する方法等があげられる。 '
そしてこのようにしてノイズが認識されたならば、 ノイズとみなされ て検出された線を二値化処理された微分画像から除去するノイズ除去処 理を行う (S T 5 )。 すなわち、 (S T 3 )、 (S T 4 )、 ( S T 5 ) におい ては、 微分画像をノイズ抽出用の閾値で二値化した後細線化処理するこ とにより、 複数の線からなる細線化画像を得る (細線化画像生成工程)。 そして生成された細線化画像に含まれる複数の線の形状を個々に認識 することにより、 ノイズとみなす線を検出し (ノイズ認識工程)、 ノイズ 認識工程でノイズとみなされて検出された線に該当する輝度変化情報を 微分画像より除去する (ノイズ除去工程)。 図 1 4は、 このようにしてノ ィズが除去された微分画像 (ノイズ除去) を示している。
この後、 蛋白質結晶に該当する可能性が高い特徴部分の抽出を行う。 まず、 微分画像 (ノイズ除去) を特徴部抽出用の閾値で二値化処理する ( S T 6 )。すなわち、微分画像を特徴部抽出用の閾値で二値化すること により、 大きな輝度変化を示す輝度変化情報を特徴部分として残した二 値化画像を得る (二値化処理工程)。 ここで用いられる閾値は、 前述のノ ィズ抽出用の閾値よりも高い値に設定される。
また、 二値化処理工程においては、 特徴部分についてラベリングを行 レ 、 面積が所定値よりも大きいラベルのみを残してその他を消去する処 理を行う。 これにより、 蛋白質結晶である可能性が少ない小さな特徴部 分がノイズとみなされて除去される。 図 1 5は、 このようにして得られ た二値化画像を示しており、 この画像中には、 蛋白質結晶である可能性 が高い特徴部分のみが現れている。 そして得られた二値化画像記憶部 3 3に記憶される。
なお、 前述の容器ノイズ除去工程、 ノイズ除去工程を、 二値化画像記 憶部 3 3に記憶された二値化画像を対象として行うようにしてもよい。 この場合には、 二値化画像中に残された特徴部分のうち、 ノイズとみな されて検出された線に該当するものを二値化画像から除去する。
この後、得られた二値化画像を対象として結晶化判定を行う(S T 7 )。 例えば、 二値化画像中の特徴部分が少ない場合には、 結晶化や結晶化の 進行の可能性無しと判断し、 特徴部分が多い場合には、 結晶化や結晶化 の進行の可能性ありと判断する。 特徴部分の多い少ないは、 特徴部分に 相当する面積の合計を所定値と比較することによって決定される。 前記 所定値は、 特に制限されないが、 例えば、 予め準備した結晶サンプルや 画像サンプル等を用いて算出された特徴部分に相当する面積を用いて適 宜設定することができる。 すなわちここでは、 二値化画像の特徴部分よ り蛋白質結晶の有無および蛋白質結晶化の進行の有無の少なくとも一方 を判断する (結晶化判定工程)。
そしてここで結晶化の可能性がなしと判定されたならば、 処理を終了 する。 また (S T 8 ) にて結晶化の可能性ありと判定されたならば、 当 該処理において対象とした観察画像が得られた結晶化プレ一ト 6を示す 結晶化プレート情報、 ゥエル情報、 観察画像、 観察時刻などの結晶化情 報を結晶化情報記憶部 2 1 cに記憶し (S T 9 )、 当該観察画像を対象と した蛋白質検出処理を終了する。 上記説明したように、本実施の形態に示す蛋白質結晶検出においては、 蛋白質溶液の画像を微分処理することにより、 検出対象の蛋白質結晶の 輪郭に相当する部分を輝度変化が大きい部分としてとしてまず抽出する そしてこの輝度変化が大きい部分を特徴部抽出用の閾値で切り分けるこ とにより、 大きな輝度変化を示す部分を特徴部分として残した二値化画 像を求める。 そして蛋白質結晶の有無の判断を、 この二値化画像の特徴 部分より行うようにしている。 これにより、 個人的な熟練度の相違によ る結晶検出作業の効率や検出結果の信頼性のばらつきを排除することが でき、 蛋白質結晶の検出を効率よく高い信頼性で行うことができる。 なお、 本実施の形態では、 二値化画像の特徴部分にノイズを含まない ようにマスク処理部 3 5ゃノィズ除去処理部 3 7で処理を行っているが、 容器の形状や照明の条件等によりノイズを殆ど含まない観察画像が得ら れる場合には、 マスク処理部 3 5やノイズ除去処理部 3 7での処理を省 略する とができる。 産業上の利用の可能性
従来は、 蛋白質結晶の検出は、 専ら観察担当者の目視観察に依存して いたが、 本発明によれば、 蛋白質結晶の検出を自動化でき、 かつ、 効率 よく高い信頼性で行うことができる。 また、 本発明の蛋白質結晶検出方 法は、 例えば、 蒸気拡散法等の蛋白質結晶化条件のスクリーニング方法 に使用でき、 本発明の蛋白質結晶検出装置は、 例えば、 蒸気拡散法等の 蛋白質結晶化条件のスクリーニング装置や蛋白質結晶の製造装置に使用 できる。

Claims

請 求 の 範 囲
1 . 蛋白質結晶を検出する蛋白質結晶検出方法であって、
蛋白質溶液を観察して得られた観察画像を微分処理することにより輝度 変化の大きさを示す輝度変化情報からなる微分画像を生成する微分処理 工程と、
前記微分画像を特徴部抽出用の閾値で二値化することにより前記輝度変 化情報のうち大きな輝度変化を示す部分を特徴部分として残した二値化 画像を得る二値化処理工程と、
前記二値化画像の特徴部分より蛋白質結晶の有無および結晶化の進行の 有無の少なくとも一方を判断する結晶化判定工程とを含むことを特徴と する蛋白質結晶検出方法。
2 . さらに、 結晶化対象の蛋白質溶液を保持している結晶化容器に由 来する輝度変化情報および特徴部分の少なくとも一方を前記微分画像お よび前記二値化画像の少なくとも一方から除去する容器ノイズ除去工程 を含むことを特徴とする請求の範囲第 1項に記載の蛋白質結晶検出方法 (
3 . 前記容器ノイズ除去工程は、 予め教示されている情報に基づいて 所定領域の輝度変化情報および特徴部分の少なくとも一方を除去するこ とを特徴とする請求の範囲第 2項に記載の蛋白質結晶検出方法。
4 . さらに、 前記微分画像をノイズ抽出用の閾値で二値化した後に細 線化処理することにより、 複数の線からなる細線化画像を得る細線化画 像生成工程と、 前記細線化画像に含まれる複数の線の形状を個々に認識 することにより、 ノイズとみなす線を検出するノイズ認識工程と、 前記 ノイズ認識工程でノイズとみなされて検出された線に該当する輝度変化 情報および特徴部分の少なくとも一方を前記微分画像および前記二値化 画像の少なくとも一方から除去するノィズ除去工程を含むことを特徴と する請求の範囲第 1項に記載の蛋白質結晶検出方法。
5 . 前記ノイズ認識工程において、 ^の長さおよび分岐数を求め、 長 さが予め決定した所定値を超え且つ分岐数が予め決定した値より少ない 線をノイズとみなすことを特徴とする請求の範囲第 4項に記載の蛋白質 結晶検出方法。
6 . 前記ノイズ認識工程において、 線の長さおよび直線性を認識し、 長さが予め決定した所定値を超え且つ直線性が予め決定した値より高い 線をノイズとみなすことを特徴とする請求の範囲第 4項に記載の蛋白質 結晶検出方法。
7 . 前記ノイズ認識工程において、 線の長さおよび当該線の近似直線 に対する分散度合いを求め、 長さが予め決定した所定値を超え且つ分散 度合いが予め決定した値より小さい線をノイズとみなすことを特徴とす る請求の範囲第 4項に記載の蛋白質結晶検出方法。
8 . さらに、 結晶化容器に保持された蛋白質溶液の画像をカメラで撮 り込む観察工程と、 前記力メラで撮り込んだ観察画像を観察画像記憶部 に記憶する記憶工程とを含み、 前記微分処理工程は、 前記観察画像記憶 部に記憶した画像に対して行うことを特徴とする請求の範囲第 1項に記 載の蛋白質結晶検出方法。 .
9 . 蛋白質結晶を検出する蛋白質結晶検出装置であって、
蛋白質溶液を観察して得られた観察画像を記憶する観察画像記憶部と、 前記観察画像記憶部の観察画像を微分処理することにより輝度変化の大 きさを示す輝度変化情報からなる微分画像を生成する微分処理部と、 前記微分処理部で生成された前記微分画像を特徴部抽出用の閾値で二値 化することにより前記輝度変化情報のうち大きな輝度変化を示す輝度変 化情報を特徴部分として残した二値化画像を得る二値化処理部と、 前記二値化処理部で得られた二値化画像を記憶する二値化画像記憶部と、 前記二値化画像記憶部の二値化画像の特徴部分より蛋白質結晶の有無お よび結晶化の進行の有無の少なくとも一方を判断する結晶化判定部とを 備えたことを特徴とする蛋白質結晶検出装置。
1 0 . さらに、 蛋白質溶液を保持している結晶化容器に由来する輝度 変化情報および特徴部分の少なくとも一方を、 前記微分画像記憶部の微 分画像および前記二値化画像記憶部の二値化画像の少なくとも一方から 除去する容器ノイズ除去部を備えたことを特徴とする請求の範囲第 9項 に記載の蛋白質結晶検出装置。
1 1 . さらに、 マスク情報を記憶するマスク情報記憶部を備え、 前記 容器ノイズ除去部は、 前記マスク情報に基づいて前記輝度変化情報およ び特徴部分の少なくとも一方を前記微分画像記憶部の微分画像および前 記二値化画像記憶部の二値化画像の少なくとも一方から除去することを 特徴とする請求の範囲第 1 0項に記載の蛋白質結晶検出装置。
1 2 . さらに、 前記微分画像をノイズ抽出用の閾値で二値化した後に 細線化処理することにより複数の線からなる細線化画像を得る細線化画 像生成部と、 前記細線化画像生成部で生成された細線化画像を記憶する 細線化画像記憶部と、 前記細線化画像記憶部の細線化画像に含まれる複 数の線の形状を個々に認識することによりノイズとみなす線を検出する ノイズ認識処理部と、 前記微分画像記憶部の微分画像および前記二値化 画像記憶部の二値化画像の少なくとも一方から前記ノイズ検出処理部に よってノイズとみなされて検出された線に該当する輝度変化情報および 特徴部分の少なくとも一方を除去するノィズ除去処理部を備えたことを 特徴とする請求の範囲第 9項に記載の蛋白質結晶検出装置。
1 3 . 前記ノイズ認識処理部が、 線の長さおよび分岐数を求め、 長さ が予め決定した所定値を超え且つ分岐数が予め決定した値より少ない線 をノイズとみなすことを特徴とする請求の範囲第 1 2項に記載の蛋白質 結晶検出装置。
1 4 . 前記ノイズ認識処理部が、 線の長さおよび直線性を認識し、 長 さが予め決定した所定値を超え且つ直線性が予め決定した値より高い線 をノイズとみなすことを特徴とする請求の範囲第 1 2項に記載の蛋白質 結晶検出装置。
1 5 . 前記ノイズ認識処理部が、 線の長さおよび当該線の近似直線に 対する分散度合いを求め、 長さが予め決定した所定値を超え且つ分散度 合いが予め決定した値より小さい線をノイズとみなすことを特徴とする 請求の範囲第 1 2項に記載の蛋白質結晶検出装置。
1 6 . さらに、 結晶化対象の蛋白質溶液を保持する結晶化容器がセッ 卜される観察ステージと、 前記観察ステージにセッ卜された結晶化容器 の蛋白質溶液を撮像して画像を撮り込むカメラとを備え、 前記カメラで 撮り込んだ蛋白質溶液の画像を前記観察画像記憶部に記憶することを特 徴とする請求の範囲第 9項に記載の蛋白質結晶検出装置。
1 7 . 蛋白質溶液内で生成した蛋白質結晶を検出する処理をコンピュ —夕に実行させる蛋白質結晶検出プログラムであって、 前記タンパク質 結晶の検出処理が、 蛋白.質溶液を観察して得られた観察画像を微分処理 することにより輝度変化の大きさを示す輝度変化情報からなる微分画像 を生成する微分処理工程と、 前記微分画像を特徴部抽出用の閾値で二値 化することにより前記輝度変化情報のうち大きな輝度変化を示す輝度変 化情報を特徴部分として残した二値化画像を得る二値化処理工程と、 前 記二値化画像の特徴部分より蛋白質結晶の有無および結晶化の進行の有 無の少なくとも一方を判断する結晶化判定工程とを含むことを特徴とす る蛋白質結晶検出プログラム。
1 8 . さらに、 前記タンパク質結晶の検出処理が、 結晶化対象の蛋白 質溶液を保持している結晶化容器に由来する輝度変化情報および特徴部 分の少なくとも一方を前記微分画像および前記二値化画像の少なくとも 一方から除去する容器ノイズ除去工程を含むことを特徴とする請求の範 囲第 1 7項に記載の蛋白質結晶検出プログラム。
1 9 . 前記ノイズ除去工程は、 予め教示されている情報に基づいて所 定領域の輝度変化情報および特徴部分の少なくとも一方を除去すること を特徴とする請求の範囲第 1 8項に記載の蛋白質結晶検出プログラム。
2 0 . さらに、 前記タンパク質結晶の検出処理が、 前記微分画像をノ ィズ抽出用の閾値で二値化した後に細線化処理することにより複数の線 からなる細線化画像を得る細線化画像生成工程と、 前記細線化画像に含 まれる複数の線の形状を個々に認識することにより、 ノイズとみなす線 を検出するノィズ認識工程と、 前記ノイズ検出工程でノイズとみなされ て検出された線に該当する輝度変化情報および特徴部分の少なくとも一 方を前記微分画像および前記二値化画像の少なくとも一方より除去する ノイズ除去工程を含むことを特徴とする請求の範囲第 1 7項に記載の蛋 白質結晶検出プログラム。
2 1 . 前記ノイズ認識工程において、 線の長さおよび分岐数を求め、 長さが予め決定した所定値を超え且つ分岐数が予め決定した値より少な い線をノイズとみなすことを特徴とする請求の範囲第 2 0項に記載の蛋 白質結晶検出プログラム。
2 2 . 前記ノィズ認識工程において、線の長さおよび直線性を認識し、 長さが予め決定した所定値を超え且つ直線性が予め決定した値より高い 線をノイズとみなすことを特徴とする請求の範囲第 2 0項に記載の蛋白 質結晶検出プログラム。
2 3 . 前記ノイズ認識工程において、 線の長さおよび当該線の近似直 線に対する分散度合いを求め、 長さが予め決定した所定値を超え且つ分 散度合いが予め決定した値より小さい線をノイズとみなすことを特徴と する請求の範囲第 2 0項に記載の蛋白質結晶検出プログラム。
2 4 . さらに、 前記タンパク質結晶の検出処理が、 結晶化容器に保持 された蛋白質溶液を観察して力メラにより観察画像を撮り込む観察工程 と、 前記カメラで撮り込んだ観察画像を観察画像記憶部に記憶する記憶 工程とを含み、 前記微分処理工程は、 前記観察画像記憶部に記憶した画 像に対して行うことを特徴とする請求の範囲第 2 0項に記載の蛋白質結 晶検出プログラム。
PCT/JP2004/006160 2003-04-28 2004-04-28 蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出プログラム Ceased WO2004097366A2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US10/554,579 US20060276630A1 (en) 2003-04-28 2004-04-28 Method for detecting protein crystal, apparatus for detecting protein crystal and program for detecting protein crystal

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003-123984 2003-04-28
JP2003123984A JP3898667B2 (ja) 2003-04-28 2003-04-28 蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出プログラム

Publications (2)

Publication Number Publication Date
WO2004097366A2 true WO2004097366A2 (ja) 2004-11-11
WO2004097366A3 WO2004097366A3 (ja) 2005-02-24

Family

ID=33410145

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2004/006160 Ceased WO2004097366A2 (ja) 2003-04-28 2004-04-28 蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出プログラム

Country Status (3)

Country Link
US (1) US20060276630A1 (ja)
JP (1) JP3898667B2 (ja)
WO (1) WO2004097366A2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4761838B2 (ja) * 2005-02-15 2011-08-31 独立行政法人理化学研究所 タンパク質溶液の析出物を判定する方法及びシステム
JP4740686B2 (ja) * 2005-08-10 2011-08-03 独立行政法人理化学研究所 タンパク質結晶化状態判別システムおよびその方法
JP4875591B2 (ja) * 2007-11-06 2012-02-15 古河機械金属株式会社 結晶観察装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6529612B1 (en) * 1997-07-16 2003-03-04 Diversified Scientific, Inc. Method for acquiring, storing and analyzing crystal images
JP3576523B2 (ja) * 2000-12-26 2004-10-13 オリンパス株式会社 蛍光輝度測定方法及び装置

Also Published As

Publication number Publication date
US20060276630A1 (en) 2006-12-07
JP3898667B2 (ja) 2007-03-28
JP2004345867A (ja) 2004-12-09
WO2004097366A3 (ja) 2005-02-24

Similar Documents

Publication Publication Date Title
TWI590193B (zh) 昆蟲影像檢測方法以及昆蟲分類流程
EP3375859B1 (en) Method for constructing classifier, and method for determining life or death of cells using same
JP5355275B2 (ja) 細胞画像解析装置
JP2022037000A (ja) 蛍光画像分析装置および蛍光画像分析方法
US8135203B2 (en) Cell image processor and cell image processing method
US10533931B2 (en) Method and examination system for examining and processing a microscopic sample
JP6395251B2 (ja) 光学顕微鏡システムおよびスクリーニング装置
CN105190690A (zh) 显微图像的图像质量评估
CN103329027A (zh) 观察程序和观察装置
JP2011501205A (ja) 粒子を同定及び操作するための方法及び装置
JP2008212017A (ja) 細胞状態判定装置、および細胞状態判定方法
US20130309710A1 (en) Observation system, recording medium, and control method of observation system
US10007835B2 (en) Cell region display control device, method, and program
CN103487437B (zh) 一种航空施药雾滴分布指标的检测方法及系统
JP2014203038A (ja) 分析装置、分析プログラム及び分析システム
JP2022512292A (ja) 半導体試料の欠陥の分類
JP2010151566A (ja) 粒子画像解析方法及び装置
WO2004097366A2 (ja) 蛋白質結晶検出方法および蛋白質結晶検出装置ならびに蛋白質結晶検出プログラム
EP4137795A1 (en) Fluorescence image analysis method, fluorescence image analyser, fluoresence image analysis program
JPH11228283A (ja) 石英ルツボの光学的非破壊検査方法とその装置
JP3966220B2 (ja) 蛋白質結晶観察装置
TWI625394B (zh) 圖像處理方法、控制程式、記錄媒體及圖像處理裝置
WO2006093077A1 (ja) 蛋白質結晶検出装置および蛋白質結晶検出方法
JP2004163201A (ja) 細胞突起抽出装置および細胞突起抽出方法
WO2023053104A1 (en) Method and system for tracking and analysis of particles due to thermal variations

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A2

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A2

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2006276630

Country of ref document: US

Ref document number: 10554579

Country of ref document: US

122 Ep: pct application non-entry in european phase
WWP Wipo information: published in national office

Ref document number: 10554579

Country of ref document: US