JP2006507579A - Histological evaluation of nuclear polymorphism - Google Patents

Histological evaluation of nuclear polymorphism Download PDF

Info

Publication number
JP2006507579A
JP2006507579A JP2004552851A JP2004552851A JP2006507579A JP 2006507579 A JP2006507579 A JP 2006507579A JP 2004552851 A JP2004552851 A JP 2004552851A JP 2004552851 A JP2004552851 A JP 2004552851A JP 2006507579 A JP2006507579 A JP 2006507579A
Authority
JP
Japan
Prior art keywords
image
image data
area
sub
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004552851A
Other languages
Japanese (ja)
Other versions
JP4383352B2 (en
Inventor
ペトロ,マリア
ケシデイス,アナスタシオス
バーガ,マーガレツト・ジヤイ
ダツクスバリー,ポール・ジエラード
Original Assignee
キネテイツク・リミテツド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by キネテイツク・リミテツド filed Critical キネテイツク・リミテツド
Publication of JP2006507579A publication Critical patent/JP2006507579A/en
Application granted granted Critical
Publication of JP4383352B2 publication Critical patent/JP4383352B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695Preprocessing, e.g. image segmentation

Abstract

A method of histological assessment of nuclear pleomorphism to identify potential cell nuclei divides image data into overlapping sub-images. It uses principal component analysis to derive monochromatic image data, followed by Otsu thresholding to produce a binary image. It removes image regions at sub-image boundaries, unsuitably small image regions and holes in relatively large image regions. It then reassembles the resulting sub-images into a single image. Perimeters (P) and areas (A) of image regions which are potential cell nuclei are determined and used in calculating nuclear shape factors P2/A. Nuclear pleomorphism is assessed as relatively low, moderate or high according to whether predetermined shape factor thresholds indicate a mean cell nucleus shape factor for an image is relatively low, moderate or high.

Description

本発明は、核多形性の組織学的評価の方法、装置およびコンピュータプログラムに関し、詳細には(これに限定されないが)乳癌などの癌に関する臨床情報を提供する組織学的画像評価に関する。本発明の方法はまた、乳癌だけでなく、例えば結腸癌や子宮頸癌などの他の癌にも関連する。   The present invention relates to a method, apparatus and computer program for histological evaluation of nuclear polymorphism, and in particular to (but not limited to) histological image evaluation that provides clinical information regarding cancer such as breast cancer. The method of the present invention is also relevant not only to breast cancer but also to other cancers such as colon cancer and cervical cancer.

乳癌は女性の癌の一般的種類であり、より少ない程度ではあるが、男性にも発生する。乳癌を示す病変が検出されると、組織病理医によって組織のサンプルが採取および検査され、診断、予後および治療の計画が立てられる。しかし、組織サンプルの病理学的分析は時間を要し、主観的な手法である。この分析は人間の目による画像の解釈を伴い、別の観察者によって、また同一観察者であっても時間が異なると、同一サンプルを観察しても一致しないという特徴を有する。例えば、同一組織サンプルの画像を評価する2人の異なる観察者は、多数の画像に関して異なる見解を有する可能性がある。30%もの画像についての見解が異なることもある。問題点は異質性によって、すなわち特定の組織サンプルの特徴の複雑性によって、悪化する。   Breast cancer is a common type of cancer in women and occurs to a lesser extent in men. When a lesion indicative of breast cancer is detected, a tissue sample is taken and examined by a histopathologist to plan for diagnosis, prognosis and treatment. However, pathological analysis of tissue samples is time consuming and a subjective technique. This analysis involves interpretation of an image by the human eye, and has the feature that even if the time is different even by the same observer, even if the same sample is observed, they do not agree. For example, two different observers that evaluate images of the same tissue sample may have different views on multiple images. Opinions about as much as 30% of images may vary. The problem is exacerbated by heterogeneity, i.e., by the complexity of the characteristics of a particular tissue sample.

核多形性の度合いの客観的測定を実現することにより、病理医の診断と患者の治療を支援する必要がある。   There is a need to support pathologists' diagnosis and patient treatment by realizing objective measurements of the degree of nuclear polymorphism.

本発明は、組織画像データの細胞核に潜在的に対応する画像領域を特定することによって核多形性の組織学的評価の方法を実現するものであり、この方法は、画像データを2値化するためにしきい値処理することと、特定された画像領域の周辺長と面積を求めることと、周辺長と面積から画像領域の形状因子(shape factor)を計算することと、形状因子の統計的パラメータから多形性を評価すること、をさらに含むことを特徴とする。   The present invention realizes a method of histological evaluation of nuclear polymorphism by specifying an image region potentially corresponding to a cell nucleus of tissue image data, and this method binarizes image data. Threshold processing, determining the peripheral length and area of the identified image region, calculating the shape factor of the image region from the peripheral length and area, and statistical of the shape factor Evaluating polymorphism from the parameters.

本発明の利点は、多形性の客観的測定を実現することにより、病理医の診断と患者の治療に情報を提供することである。   An advantage of the present invention is that it provides information for pathologist diagnosis and patient treatment by providing objective measurements of polymorphism.

形状因子の統計的パラメータは、それらの平均、加重平均、中央値、最頻値、最大および最小のうちの少なくとも1つで構成できる。画像化されたデータをしきい値処理するステップは、大津しきい値処理法であってもよい。   The statistical parameters of the form factor can consist of at least one of their average, weighted average, median, mode, maximum and minimum. The step of thresholding the imaged data may be an Otsu threshold processing method.

多形性を評価するステップは、形状因子の平均または中央値がそれぞれ、相対的に低いか、中間か、または高いかどうかによって、相対的に低い、中間、または高いとして多形性を決定することができる。細胞核に潜在的に対応する画像領域の形状因子Sは、

Figure 2006507579
によって与えられる。ここで、kは定数、Pは画像領域の周辺長、Aは画像領域の面積であり、細胞核に潜在的に対応する一連の画像領域に対する平均形状因子Sは、S≦30k(低い)、30k<S≦35k(中間)およびS>35k(高い)として区分でき、それぞれ相対的に低い、中間、または高い多形性に対応する。 The step of assessing polymorphism determines the polymorphism as relatively low, medium or high depending on whether the mean or median of the form factor is relatively low, medium or high, respectively. be able to. The shape factor S of the image area potentially corresponding to the cell nucleus is
Figure 2006507579
Given by. Here, k is a constant, P is the peripheral length of the image region, A is the area of the image region, and the average shape factor S m for a series of image regions potentially corresponding to cell nuclei is S m ≦ 30k (low) , 30k <S m ≦ 35k (intermediate) and S m > 35k (high), each corresponding to a relatively low, intermediate, or high polymorphism.

画像データをしきい値処理して2値化するステップの前に、カラー画像データの個々の赤、緑または青色平面と比較して改良された画像定義を用いて、カラー画像データをグレースケール画像データに変換し、その後、画像データをしきい値処理するステップがグレースケールの画像データについて実行される。カラー画像データをグレースケール画像データに変換するステップは、主成分分析(PCA)によって実行でき、この分析ではグレースケール画像データが第1主成分である。   Prior to the thresholding and binarization of the image data, the color image data is converted to a grayscale image using an improved image definition compared to the individual red, green or blue planes of the color image data. The step of converting to data and then thresholding the image data is performed on the grayscale image data. The step of converting color image data into grayscale image data can be performed by principal component analysis (PCA), in which grayscale image data is the first principal component.

組織画像データ内の細胞核に潜在的に対応する画像領域を特定するステップは、画像データのフィルタリングを含み、画像領域の周辺に感知できるほどの影響を与えないフィルタリング処理を用いて対象としない領域を上書きする。上書きステップは、相対的に小さい画像領域を背景画素値に設定し、相対的に大きな画像領域の穴画素を穴でない画像領域の画素値に設定することを含むことができる。   The step of identifying image regions that potentially correspond to cell nuclei in tissue image data includes filtering of the image data and includes regions that are not targeted using a filtering process that does not appreciably affect the periphery of the image region. Overwrite. The overwriting step can include setting a relatively small image region to a background pixel value and setting a relatively large image region hole pixel to a pixel value of a non-hole image region.

組織画像データ内の細胞核に潜在的に対応する画像領域は以下を含む手順により特定できる。すなわち、
a)画像データを重複するサブ画像に分割することと、
b)PCAを各サブ画像に適用して、それぞれグレースケールのサブ画像を生成することと、
c)グレースケールのサブ画像から、
i)サブ画像境界線に接触または交差する画像領域と、
ii)不適当な小さい画像領域と、
iii)相対的に大きい画像領域内の穴と、を除去することと、
d)サブ画像を2値画像に再構築することと、である。
Image regions that potentially correspond to cell nuclei in tissue image data can be identified by a procedure that includes: That is,
a) dividing the image data into overlapping sub-images;
b) applying PCA to each sub-image to generate a respective grayscale sub-image;
c) From the grayscale sub-image,
i) an image area that touches or intersects the sub-image boundary;
ii) an inappropriate small image area;
iii) removing holes in a relatively large image area;
d) Reconstructing the sub-image into a binary image.

別の態様においては、本発明は、組織画像データ内の細胞核に潜在的に対応する画像領域を特定することによって核多形性の組織学的評価をする装置を実現し、この装置はプログラムされたコンピュータを組み込むことにより、画像データをしきい値処理して2値化し、特定された画像領域の周辺長と面積とを決定し、周辺長と面積とから画像領域の形状因子を計算し、形状因子の統計的パラメータから多形性を評価することを特徴とする。   In another aspect, the present invention provides an apparatus for histological assessment of nuclear polymorphism by identifying image regions that potentially correspond to cell nuclei in tissue image data, the apparatus being programmed. By incorporating a computer, the image data is thresholded and binarized, the peripheral length and area of the specified image region are determined, the shape factor of the image region is calculated from the peripheral length and area, It is characterized by evaluating polymorphism from statistical parameters of form factors.

別の態様においては、本発明は、核多形性の組織学的評価において使用され、かつ組織画像データの細胞核に潜在的に対応する画像領域を特定するようにコンピュータを制御する命令を有するコンピュータソフトウェアを実現し、このソフトウェアはさらに、画像データをしきい値処理して2値化し、特定された画像領域の周辺長と面積とを決定し、周辺長と面積とから画像領域の形状因子を計算し、形状因子の統計的パラメータから多形性を評価するようにコンピュータを制御する命令を有することを特徴とする。   In another aspect, the present invention is a computer having instructions for controlling a computer to identify an image region that is used in histological assessment of nuclear polymorphism and that potentially corresponds to a cell nucleus of tissue image data. The software implements and binarizes the image data by threshold processing, determines the peripheral length and area of the specified image region, and determines the shape factor of the image region from the peripheral length and area. It is characterized by having instructions for controlling the computer to calculate and evaluate polymorphism from the statistical parameters of the form factor.

本発明のコンピュータ装置およびコンピュータソフトウェアの態様は、本発明の対応する方法の態様と等価の好ましい特徴を有することもできる。   The computer apparatus and computer software aspects of the invention may have preferred features equivalent to the corresponding method aspects of the invention.

本発明をより十分に理解するために、本発明の実施形態を、単に例示の目的で、添付の図面を参照して以下に述べる。   For a more complete understanding of the present invention, embodiments of the invention are described below, by way of example only, with reference to the accompanying drawings.

図1には乳癌の組織病理スライドの形態の組織サンプルを評価する手順10が示されている。この図は、患者の状態を評価するのに用いられる多形性の度合いを測定するプロセスを示している。   FIG. 1 shows a procedure 10 for evaluating a tissue sample in the form of a histopathology slide of breast cancer. This figure illustrates the process of measuring the degree of polymorphism used to assess patient status.

手順10は、後述するように、組織スライドから得られたディジタル化画像データを保持するデータベース12を使用する。切片標本が胸の組織サンプル(生体組織)から取り出され(切り取られ)、それぞれのスライド上に置かれる。スライドは、染色剤ヘモトキシリンおよびエオシン(H&E)を用いて染色される。H&Eは組織と細胞構造の輪郭を描写するのに広く普及している染色液である。H&Eで染色された組織を用いて多形性を評価する。   Procedure 10 uses a database 12 that holds digitized image data obtained from tissue slides, as described below. A section specimen is removed (cut) from a breast tissue sample (living tissue) and placed on each slide. Slides are stained with the stains hemotoxylin and eosin (H & E). H & E is a staining solution that is widely used to delineate tissue and cellular structures. Polymorphism is assessed using tissues stained with H & E.

核多形性は、組織内の腫瘍細胞の核の形状可変性の度合いを測定する。通常の組織では、細胞核は形状と大きさの点で規則的な構造を有するが、癌細胞の核はより大きく不規則な形状となり、形状と大きさに著しい変動がある。   Nuclear polymorphism measures the degree of shape variability of the nuclei of tumor cells within a tissue. In normal tissues, cell nuclei have a regular structure in terms of shape and size, but cancer cell nuclei have larger and irregular shapes, with significant variations in shape and size.

従来技術の手動操作では、臨床医は40倍の倍率の顕微鏡の下にスライドを置き、その領域(タイルと称されることが多い)での多形性の度合い表示を検査する。この手動操作では、病理医は、組織サンプルの細胞核の大きさと形状の異常性を主観的に評価する必要がある。この方法で得られた値を組み合わせて、診断で用いる単一測定結果を生成する。本発明のプロセスは従来技術の主観的な手順を客観的な手順に置き替える。   In the prior art manual operation, the clinician places the slide under a 40 × magnification microscope and examines the polymorphism indication in that area (often referred to as a tile). This manual operation requires a pathologist to subjectively evaluate the abnormalities in the size and shape of the cell nuclei of the tissue sample. The values obtained in this way are combined to produce a single measurement result for use in diagnosis. The process of the present invention replaces the subjective procedure of the prior art with an objective procedure.

本発明の実施例においては、画像データはJenoptiks Progres 3012ディジタルカメラ付きのZeiss Axioskop顕微鏡を用いて、病理医により組織スライドから得た。各スライドからの画像データは長さ倍率が40倍(すなわち、長さ40倍、面積1600倍)で得られた一連のディジタル画像であり、各画像はタイルと電子的に等価である。他の顕微鏡およびカメラによって得られる画像を用いてもよい。   In an embodiment of the present invention, image data was obtained from a tissue slide by a pathologist using a Zeiss Axioskop microscope with a Jenoptiks Progress 3030 digital camera. The image data from each slide is a series of digital images obtained with a length magnification of 40 times (i.e., length 40 times, area 1600 times), and each image is electronically equivalent to a tile. Images obtained with other microscopes and cameras may be used.

画像を得るために、病理医はスライド全体を顕微鏡で走査し、40倍の倍率で多形性評価の点で最も有効であると思われるスライドの領域を選択する。次にそれらの領域のそれぞれが上述の顕微鏡およびカメラを用いて撮影し、これによって各領域に対して、3色、すなわち赤、緑および青色(R、G&B)のそれぞれのディジタル化画像を生成する。画素アレイの各画素に対して3つの強度値を得ることにより、R、GおよびB画像面の組み合わせとして画像を生成する。この画像は12で一時的に保管され、後に使用される。プロセス16による多形性測定には2つのタイルが必要とされる。プロセス16の結果は20での測定に変換され、22における診断レポートの入力となる。   To obtain an image, the pathologist scans the entire slide with a microscope and selects the area of the slide that appears to be the most effective in terms of polymorphism assessment at 40x magnification. Each of these areas is then photographed using the microscope and camera described above, thereby producing a digitized image of each of the three colors, red, green and blue (R, G & B). . An image is generated as a combination of the R, G, and B image planes by obtaining three intensity values for each pixel in the pixel array. This image is temporarily stored at 12 for later use. The polymorphism measurement by process 16 requires two tiles. The result of process 16 is converted to a measurement at 20 and becomes the input of a diagnostic report at 22.

次に図2を参照すると、多形性特徴検出プロセス16がより詳細に示されている。多形性検出プロセス16は、上述の2つのタイルまたはディジタル化画像(生の(RGB)入力画像)のそれぞれについて実行される。このような画像の1つについて説明する。第1段階30で、生の(RGB)入力画像が、128×128画素サイズの重複したウィンドウに分割される。各ウィンドウにおいて、64画素が、水平と垂直の両方の方向においてそれぞれ隣接するウィンドウの64画素と重複する。例えば、256×256の画像は、128×128の重複ウィンドウを3×3組与える。したがって、各ウィンドウは、その行と列の隣接ウィンドウのそれぞれの半分と重複する。各ウィンドウに対して、「主成分分析」(PCA、Karhunen−Loeve Transform)と呼ばれる技法が適用される。PCAは、Jollie I.T.による「主成分分析(Principal Component Analysis」」(Springer series in statistics,Springer Verlag,1986)で記載された標準的な数学的技法である。これは、Jackson J.E.による「主成分のためのユーザガイド(A User Guide to Principal Components)」(John Wiley & Sons,1991,pp1−25)でも記載されている。   Referring now to FIG. 2, the polymorphic feature detection process 16 is shown in more detail. The polymorphism detection process 16 is performed for each of the two tiles or digitized images described above (raw (RGB) input images). One such image will be described. In a first stage 30, the raw (RGB) input image is divided into overlapping windows of 128 × 128 pixel size. In each window, 64 pixels overlap with 64 pixels in adjacent windows in both horizontal and vertical directions. For example, a 256 × 256 image gives 3 × 3 sets of 128 × 128 overlapping windows. Thus, each window overlaps with each half of its row and column adjacent windows. A technique called “principal component analysis” (PCA, Karhunen-Loeve Transform) is applied to each window. PCA is a Jolly I. T.A. This is a standard mathematical technique described in “Principal Component Analysis” by Springer series in statics, Springer Verlag, 1986. This is “for the principal component” by Jackson JE. It is also described in “User Guide to Principal Components” (John Wiley & Sons, 1991, pp1-25).

PCAは、データがより簡単に利用または理解されるドメインまたは表示への変換である(例えば、異なるクラスまたはカテゴリに分離可能もしくは分類される)。PCAは、一連の相関変数(可能な限り)を主成分と呼ばれるより少数の無相関な変数に変換するための標準的な数学的技法である。主成分はそれぞれの固有値に関連付けされる。第1主成分は最も大きい固有値を有し、他の主成分と比較して可能な限り多くの変数の変動性の原因となる。この第1主成分において、画像定義、コントラストおよび特性が、カラー画像データのR、GまたはB画像平面と比べて改良される。第1主成分のみがこの例で用いられたが、別の方法では、それらの固定値が大きく異ならない場合、全ての主成分の線形結合を用いてもよく、また線形結合が適切であることもある。   PCA is a transformation into a domain or display where data is more easily utilized or understood (eg, separable or classified into different classes or categories). PCA is a standard mathematical technique for converting a series of correlated variables (as much as possible) into a smaller number of uncorrelated variables called principal components. A principal component is associated with each eigenvalue. The first principal component has the largest eigenvalue and causes as much variable variability as possible compared to the other principal components. In this first principal component, the image definition, contrast and properties are improved compared to the R, G or B image plane of the color image data. Only the first principal component was used in this example, but in another method, if their fixed values are not significantly different, a linear combination of all principal components may be used and the linear combination is appropriate. There is also.

同様に使用することができ、特定の特性(例えば、様々な様式における、線形または非線形、利用データ特性、平均、分散等)を有する他の変換(分析方法またはフィルタ)がある。ニューラル回路網/適応回路網および関連技法を用いて、そのような変換を実行することも可能である。   There are other transforms (analytical methods or filters) that can be used as well and that have specific characteristics (eg, linear or non-linear, utilization data characteristics, mean, variance, etc. in various ways). Such transformations can also be performed using neural / adaptive circuitry and related techniques.

PCAは、共分散行列を計算し、その固定値および固有ベクトルを求めることを含む。ここで、画像はN×3行列として配列されるよう、すなわち、N個の画素と3つの平面(R、GおよびB)を有するものとして扱われる。共分散行列は、その行列要素Ci,jに対して以下の式を用いて計算される。

Figure 2006507579
PCA involves calculating a covariance matrix and determining its fixed values and eigenvectors. Here, the image is treated as having an N × 3 matrix, that is, having N pixels and three planes (R, G and B). The covariance matrix is calculated for the matrix element C i, j using the following equation:
Figure 2006507579

ここで、Ci,jは変数jに対する変数iの共分散であり、xおよびyはk番目のオブジェクトのi番目およびj番目の特徴値であり、μはxの全てのN個の値の平均であり、μはyの全てのN個の値の平均である。分散行列は3×3であり、PCAは3つの固有ベクトルを導き出す。固有ベクトルは3×3の行列として扱われ、この行列を用いて、N×3の画像行列の転置行列を乗算し、積行列を生成する。積行列は、第1主成分であるN×1の第1列を有し、最も重要な成分と見なすことができる。積行列は最大固有値を有する成分であり、グレースケールのサブ画像(N個の画素それぞれに対して1つの画素値)に、他の成分に対応する同値と比べて最大範囲の情報を提供する。したがって、PCAはモノクロまたはグレースケールの画像データを生成する。PCAは上で定義された重複ウィンドウのそれぞれに対して実行され、それぞれが各第1主成分と128×128画素サイズのグレースケールのサブ画像を生成する。 Here, C i, j is the covariance of variable i with respect to variable j, x k and y k are the i th and j th feature values of the k th object, and μ x is all N of x k. Is the average of the values, and μ y is the average of all N values of y k . The variance matrix is 3x3, and PCA derives three eigenvectors. The eigenvector is treated as a 3 × 3 matrix, and this matrix is used to multiply a transposed matrix of an N × 3 image matrix to generate a product matrix. The product matrix has N × 1 first columns as the first principal component, and can be regarded as the most important component. The product matrix is the component with the largest eigenvalue and provides the grayscale sub-image (one pixel value for each of the N pixels) with the largest range of information compared to the same value corresponding to the other components. Accordingly, the PCA generates monochrome or gray scale image data. PCA is performed on each of the overlapping windows defined above, each generating a first principal component and a grayscale sub-image of 128 × 128 pixel size.

32において、「大津」と呼ばれるしきい値処理技法が30から得られる各サブ画像に適用されて、各サブ画像を各々2値サブ画像に変換する。大津とは、Otsu N.による「グレーレベルのヒストグラムからのしきい値処理選択法(A thresholding selection method from grey level histograms)」(IEEE Trans Systems,Man & Cybernetics,vol. 9,1979,pp62−66)で公開された標準的なしきい値処理技法である。大津しきい値選択方法は、2つのクラスに対して、クラス間分散に対するクラス内分散の比を最小限にすることを目的とする。すなわち、クラス間の分散が大きい程、より大きく分離する。大津技法は特に好ましいしきい値処理方法である。本発明の実施例においては、2つのクラスとは、しきい値以下クラス(画素値0)としきい値超過クラス(画素値1)であり、したがって、大津しきい値処理は、各グレースケールのサブ画像を、一連のブロブ(blob)を含む2値サブ画像に変換する。ここでブロブとは画像領域(画像内のオブジェクト)であって、この画像領域のそれぞれは、全てが値1を有し、細胞核に対応すると考えられる、相互に接触する画素の各グループである。ブロブはそれらの中に穴(画素値0)を有することもある。   At 32, a thresholding technique called “Otsu” is applied to each sub-image obtained from 30 to convert each sub-image into a binary sub-image. Otsu is Otsu N. "A thresholding selection from gray level histogram" by IEEE Trans Systems, Man & Cybernetics, vol. 9, 1979, pp 62-66. Threshold processing technique. The Otsu threshold selection method aims to minimize the ratio of intraclass variance to interclass variance for two classes. That is, the greater the variance between classes, the greater the separation. The Otsu technique is a particularly preferred threshold processing method. In the embodiment of the present invention, the two classes are the sub-threshold class (pixel value 0) and the over-threshold class (pixel value 1). Therefore, the Otsu threshold processing is performed for each gray scale. The sub-image is converted into a binary sub-image that includes a series of blobs. Here, a blob is an image region (an object in the image), and each of the image regions is a group of pixels that are in contact with each other and all have a value of 1 and are considered to correspond to cell nuclei. Blobs may have holes (pixel value 0) in them.

34において、サブ画像境界線に接触するかまたは交差する全てのブロブが除去される。これにより、いずれかの画素でブロブが境界に接触する場合、ブロブはその画素を背景画素値に設定することによって除去される。この理由は、ブロブと接触する境界線が、後で誤認される結果を招く見かけ上の直線ブロブエッジを生成するからである。サブ画像が重複するため、1つの画像で部分的に現われるブロブは別のサブ画像で全体に現われる可能性があり、したがって、必ずしも失われない。   At 34, all blobs that touch or intersect the sub-image boundary are removed. Thus, if a blob touches the boundary at any pixel, the blob is removed by setting that pixel to the background pixel value. This is because the boundary line in contact with the blob produces an apparent straight blob edge that can result in a later misunderstanding. Because sub-images overlap, blobs that partially appear in one image may appear entirely in another sub-image and are therefore not necessarily lost.

36においては、34からのサブ画像は反転され(画素値0は1に変化し、その逆も同様)、連結成分ラベル付け(CCL)を適用してブロブの穴を取り除く。CCLは、Klette R.およびZamperoniu P.による「画像処理オペレータのハンドブック(Handbook of Image Processing Operators)」(John Wiley & Sons,1996)並びにRosenfeld A.およびKak A.C.による「ディジタル画像処理(Digital Picture Processing)」(vols.1&2,Academic Press,New York,1982)で開示された、公知の画像処理技法である(時には「ブロブ着色」と称される)。CCLは、画素値1の連続した画素の各グループに対して、各々ラベルを与える。画像反転の理由から、CCLでラベル付けされた画素値1の面積は、ここでは背景画素と共にブロブ内にある穴である。次に、各ブロブ内にある穴は、それらの画素をブロブの他の画素の値に設定することによって除去(充填)される。背景画素は変化しないままである。   At 36, the sub-image from 34 is inverted (pixel value 0 changes to 1 and vice versa) and connected component labeling (CCL) is applied to remove the blob holes. CCL is a Klette R.C. And Zamperoniu P. et al. "Handbook of Image Processing Operators" by John Wiley & Sons, 1996, and Rosenfeld A. et al. And Kak A. C. (Digital Picture Processing) (vols. 1 & 2, Academic Press, New York, 1982), a known image processing technique (sometimes referred to as “blob coloring”). The CCL gives a label to each group of consecutive pixels having a pixel value of 1. For reasons of image inversion, the area of pixel value 1 labeled with CCL is here a hole in the blob with the background pixels. The holes in each blob are then removed (filled) by setting those pixels to the values of the other pixels in the blob. The background pixels remain unchanged.

38において、36からのサブ画像がもう一度反転され、CCLが再度適用される。この第2の反転によって、次にCCLでラベル付けされた面積は各サブ画像内の充填ブロブとなる。CCLは、ユーザ定義された最小面積しきい値よりも小さい面積のブロブを除去する機能を有する。この例において、40倍の倍率を用いると、この例における、最小面積しきい値は400画素である。したがって、400画素未満の面積を有する全ブロブが除去されて、それらの画素を背景値(0)に設定することによって背景に同化される。最低限400画素の面積を有する残りのブロブは、一連のラベル付けされたブロブとしてさらに処理するために受け入れられる。CCLはさらに、残りの各ブロブに対して、それぞれの場合における多数の画素の周辺長Pと面積Aを与える。   At 38, the sub-image from 36 is inverted again and CCL is applied again. Due to this second inversion, the area labeled next with CCL becomes the filled blob in each sub-image. The CCL has a function of removing blobs having an area smaller than a user-defined minimum area threshold. In this example, if a 40 × magnification is used, the minimum area threshold in this example is 400 pixels. Thus, all blobs having an area of less than 400 pixels are removed and assimilated into the background by setting those pixels to the background value (0). The remaining blobs with a minimum area of 400 pixels are accepted for further processing as a series of labeled blobs. The CCL further provides a perimeter length P and an area A for a number of pixels in each case for each remaining blob.

段階30から38の後、各サブ画像は不必要な小さいブロブを取り除き、残りの全ブロブは充填されて、それらの中の穴が除去され、その結果、残りのブロブは全て同一値の画素で構成されることになる。段階30から38の利点は、それらが空間フィルタリングを実現するが、ブロブの周辺形状に感知できるほどの影響を与えないことである。これは後続の処理にとって重要である。このようなフィルタリングは本質的なものではないが処理の負担を減らすのに役に立つ。   After steps 30 to 38, each sub-image removes unnecessary small blobs and all remaining blobs are filled and the holes in them are removed, so that all the remaining blobs are all the same value pixels. Will be composed. The advantage of steps 30-38 is that they provide spatial filtering but do not appreciably affect the peripheral shape of the blob. This is important for subsequent processing. Such filtering is not essential, but helps reduce the processing burden.

40において、ステップ38から出力されたサブ画像は、新しい2値画像に再構築される。新しい2値画像はオリジナルの生の(RGB)入力画像と同一サイズを有し、後続の多形性処理で評価されるブロブだけを含む。   At 40, the sub-image output from step 38 is reconstructed into a new binary image. The new binary image has the same size as the original raw (RGB) input image and contains only blobs that are evaluated in a subsequent polymorphic process.

ステップ30から40は、オリジナルの生の(RGB)入力画像内の一連のブロブを特定する前処理ステップである。これらのブロブのそれぞれはここで細胞核と対応しているはずである。42では、統計学的分析が適用される。形状因子

Figure 2006507579
は、各ブロブに対して、38においてCCLで得られたブロブの周辺長Pと面積Aから計算される。適切であれば、Sは
Figure 2006507579
の倍数または分数(fraction)であってもよく、PおよびAの他の関数を用いて、形状を特定することもできる。Sの値はブロブ形状の不規則性が増すにつれて増加し、完全な円形に対しては4π(〜12.57)である。Sの平均値Sは、画像の全ブロブのS値を合わせて加えて、それらの数で割ることによって完全な画像に対して計算される。Sをしきい値処理して、オリジナルの生の(RGB)入力画像の多形性の測定値を導き出す。Sしきい値は200の多形性画像のテスト群の分析から導き出された。以下で表すように、多形性スコア1、2および3のそれぞれに対して3つの区分、S≦30(低い)、30<S≦35(中間)およびS>35(高い)がある。これらのしきい値は
Figure 2006507579
に対してであって、他の形状因子表現は別のしきい値を必要とすることもある。 Steps 30 through 40 are pre-processing steps that identify a series of blobs in the original raw (RGB) input image. Each of these blobs should now correspond to the cell nucleus. At 42, statistical analysis is applied. Form factor
Figure 2006507579
Is calculated for each blob from the peripheral length P and area A of the blob obtained in CCL at 38. If appropriate, S
Figure 2006507579
Multiples or fractions, and other functions of P and A can be used to identify the shape. The value of S increases with increasing blob shape irregularity and is 4π (˜12.57) for a perfect circle. The average value S m of S is calculated for the complete image by adding the S values of all blobs of the image together and dividing by their number. S m is thresholded to derive a measure of polymorphism of the original raw (RGB) input image. The Sm threshold was derived from analysis of a test group of 200 polymorphic images. As shown below, for each of the polymorphic scores 1, 2 and 3, there are three categories, S m ≦ 30 (low), 30 <S m ≦ 35 (middle) and S m > 35 (high). is there. These thresholds are
Figure 2006507579
Other form factor representations may require different thresholds.

Figure 2006507579
Figure 2006507579
においてkは一定であり、3つの区分はS≦30k(低い)、30k<S≦35k(中間)およびS>35k(高い)となる。
Figure 2006507579
Figure 2006507579
K is constant, and the three sections are S m ≦ 30 k (low), 30 k <S m ≦ 35 k (middle) and S m > 35 k (high).

は別の手順によって計算することもできる。Sは、単に、奇数個のSの値の中央値または偶数個のSの値の2つの中心値の平均であってもよい。Sは、Sの一連の値の最大値もしくは最小値、またはSの値のほぼ単一最頻値での分布であれば、最頻値を用いることもできる。ただし、これはしきい値に影響を与える。加重平均Swmは、Sの各値に加重因子Wを掛け、加重値を加え、それらの合計を加重の合計で割ることによって計算できる。各加重は、関連するブロブまたは細胞核の確率を表し、多形性の高信頼表示を与える。すなわち、

Figure 2006507579
S m can also be calculated by another procedure. S m may simply be the median of an odd number of S values or the average of two median values of an even number of S values. For S m , a mode value can be used as long as it is a distribution with the maximum value or the minimum value of a series of values of S, or with a substantially single mode value of S values. However, this affects the threshold. The weighted average S wm can be calculated by multiplying each value of S by the weighting factor W i , adding the weight values, and dividing their sum by the sum of the weights. Each weight represents the probability of the associated blob or cell nucleus and gives a reliable indication of polymorphism. That is,
Figure 2006507579

上記の説明は、全体の形状因子を一連の形状因子の統計学的特性から決定する複数の方法があることを示し、例えば、これらの平均、加重平均、中央値、最頻値、最大値および最小値はすべて個別に使用できることを示す。   The above description shows that there are multiple ways to determine the overall form factor from a set of statistical characteristics of the form factor, for example, their average, weighted average, median, mode, maximum, and All minimum values indicate that they can be used individually.

20においては、核多形性を測定するスコアは値1、2または3を有し、各スコアはそれぞれの入力タイルについて得られる。これら2つのスコアの最大は全体の多形性スコアとして採用される。

Figure 2006507579
At 20, the score measuring nuclear polymorphism has the value 1, 2 or 3, and each score is obtained for each input tile. The maximum of these two scores is taken as the overall polymorphic score.
Figure 2006507579

核多形性の測定結果は、さまざまな方法を用いて有糸分裂および細管に対して得られた他の測定結果と組み合わせて、医学で「Bloom and Richardson grading」と称される全体の格付け、またはこの格付けの修正されたバージョンを得る。この結果は癌の状態の尺度として臨床医に用いられる。   Nuclear polymorphism measurements are combined with other measurements obtained for mitosis and tubules using a variety of methods, and the overall rating referred to in medicine as “Bloom and Richardson grading” Or get a modified version of this rating. This result is used by clinicians as a measure of cancer status.

計算結果に関する上述の説明で与えられた例は、キャリア媒体に関する適正なコンピュータプログラムおよび従来のコンピュータシステム上での実行によって明確に評価することができる。このようなプログラムは、手順が公知であるため、熟練したプログラマにとっては本発明を必要とせずに実現することは簡単であり、それについては詳細に述べない。   The examples given in the above description of the calculation results can be clearly evaluated by the appropriate computer program for the carrier medium and execution on a conventional computer system. Since such a program has a known procedure, it is easy for an experienced programmer to implement without requiring the present invention, and will not be described in detail.

診断と治療の方針決定を支援するために多形性を測定する手順のブロック図である。FIG. 5 is a block diagram of a procedure for measuring polymorphism to assist in diagnosis and treatment policy decisions. 本発明による、図1の手順で用いる多形性の特徴検出をより詳細に示すブロック図である。FIG. 2 is a block diagram illustrating in more detail the polymorphic feature detection used in the procedure of FIG. 1 according to the present invention.

Claims (29)

組織画像データ内の細胞核に潜在的に対応する画像領域を特定することによって核多形性を組織学的に評価する方法であって、画像データをしきい値処理して2値化することと、特定された画像領域の周辺長と面積を決定することと、周辺長と面積から画像領域形状因子を計算することと、形状因子の統計的パラメータから多形性を評価することと、を含むことを特徴とする、方法。   A method for histologically evaluating nuclear polymorphism by identifying an image region potentially corresponding to a cell nucleus in tissue image data, the image data being thresholded and binarized; Determining the perimeter length and area of the identified image region, calculating the image region shape factor from the perimeter length and area, and evaluating polymorphism from the statistical parameters of the shape factor A method characterized by that. 形状因子の統計的パラメータは、それらの平均、加重平均、中央値、最頻値、最大値および最小値のうち少なくとも1つを備えることを特徴とする、請求項1に記載の方法。   The method of claim 1, wherein the statistical parameters of the form factor comprise at least one of their average, weighted average, median, mode, maximum and minimum values. 画像化されたデータをしきい値処理するステップは大津しきい値処理法であることを特徴とする、請求項1に記載の方法。   The method of claim 1, wherein the thresholding of the imaged data is an Otsu thresholding method. 多形性を評価するステップは、形状因子の平均または中央値がそれぞれ相対的に低いか、中間かまたは高いかどうかによって、多形性を相対的に低いか、中間かまたは高いと決定することを特徴とする、請求項1に記載の方法。   The step of assessing polymorphism is to determine that polymorphism is relatively low, medium or high, depending on whether the mean or median form factor is relatively low, medium or high, respectively. The method of claim 1, wherein: 細胞核に潜在的に対応する画像領域の形状因子Sが、
Figure 2006507579
(kは定数、Pは画像領域周辺長、Aは画像領域面積)によって与えられ、細胞核に潜在的に対応する一連の画像領域についての平均形状因子Sが、それぞれ相対的に低いか、中間または高い多形性に応じて、S≦30k(低い)、30k<S≦35k(中間)およびS>35k(高い)として区分されることを特徴とする、請求項4に記載の方法。
The shape factor S of the image area potentially corresponding to the cell nucleus is
Figure 2006507579
(K is a constant, P is an image region peripheral length, and A is an image region area), and the average shape factor S m for a series of image regions potentially corresponding to cell nuclei is relatively low or intermediate, respectively. Or according to high polymorphism, classified as S m ≦ 30k (low), 30k <S m ≦ 35k (intermediate) and S m > 35k (high). Method.
画像データをしきい値処理して2値化するステップの前に、カラー画像データにおける個々の赤、緑または青色平面に比べて改良された画像定義を用いて、カラー画像データをグレースケール画像データに変換するステップが実行され、画像データをしきい値処理するステップは、グレースケール画像データについて実行されることを特徴とする、請求項1に記載の方法。   Prior to the thresholding and binarization of the image data, the color image data is converted to grayscale image data using an improved image definition compared to the individual red, green or blue planes in the color image data. The method of claim 1, wherein the step of converting to: is performed and the step of thresholding the image data is performed on grayscale image data. カラー画像データをグレースケール画像データに変換するステップは、グレースケール画像データが第1主成分である主成分分析(PCA)によって実行されることを特徴とする、請求項6に記載の方法。   7. The method of claim 6, wherein the step of converting color image data to grayscale image data is performed by principal component analysis (PCA), wherein the grayscale image data is a first principal component. カラー画像データをグレースケール画像データに変換するステップは、カラー画像データを、各々が隣接画像のそれぞれの半分と重複する一連のサブ画像に分解し、各サブ画像に対してPCAが実行されることによって行われることを特徴とする請求項7に記載の方法であって、さらに、細胞核に潜在的に対応する各サブ画像領域からサブ画像端部を取り除くことを含む、方法。   The step of converting the color image data to grayscale image data is to decompose the color image data into a series of sub-images, each overlapping with a respective half of the adjacent image, and PCA is performed on each sub-image. The method of claim 7, further comprising removing a sub-image edge from each sub-image region potentially corresponding to a cell nucleus. 組織画像データ内の細胞核に潜在的に対応する画像領域を特定するステップは、画像領域の周辺長に感知できるほどの影響を与えないフィルタリング処理を用いて、画像データをフィルタリングして、対象としない領域を上書きすることを含むことを特徴とする、請求項1に記載の方法。   The step of identifying image regions that potentially correspond to cell nuclei in tissue image data is not targeted by filtering the image data using a filtering process that does not appreciably affect the perimeter of the image region. The method of claim 1, comprising overwriting the region. 対象としない領域を上書きするステップは、相対的に小さい画像領域を背景画素値に設定し、相対的に大きい画像領域内の穴画素を穴のない画像領域の画素値に設定することを含むことを特徴とする、請求項9に記載の方法。   Overwriting the non-target area includes setting a relatively small image area to the background pixel value and setting a hole pixel in the relatively large image area to a pixel value of the image area without a hole. The method according to claim 9, wherein: 組織画像データ内の細胞核に潜在的に対応する画像領域を特定するステップは、画像データを重複するサブ画像に分割することと、PCAを各サブ画像に適用してそれぞれグレースケールのサブ画像を生成することと、グレースケールのサブ画像から、
a)サブ画像境界線と接触または交差する画像領域と、
b)不適当に小さい画像領域と、
c)相対的に大きな画像領域内の穴と、を取り除くことと、
サブ画像を2値画像に再構築することと、を含むことを特徴とする、請求項1に記載の方法。
Identifying image regions that potentially correspond to cell nuclei in tissue image data involves dividing the image data into overlapping sub-images and applying PCA to each sub-image to generate a respective gray-scale sub-image. And from a grayscale sub-image,
a) an image area that touches or intersects the sub-image boundary;
b) an inappropriately small image area;
c) removing holes in a relatively large image area;
The method of claim 1, comprising reconstructing a sub-image into a binary image.
組織画像データ内の細胞核に潜在的に対応する画像領域を特定することによって核多形性を組織学的に評価する装置であって、この装置は、画像データをしきい値処理して2値化し、特定された画像領域の周辺長と面積を決定し、周辺長と面積から画像領域形状因子を計算し、形状因子の統計的パラメータから多形性を評価するようにプログラムされたコンピュータを備えていることを特徴とする、装置。   An apparatus for histologically evaluating nuclear polymorphism by identifying an image region that potentially corresponds to a cell nucleus in tissue image data, the apparatus thresholding the image data to perform binary processing Equipped with a computer programmed to determine the perimeter length and area of the identified image region, calculate the image region shape factor from the perimeter length and area, and evaluate polymorphism from the statistical parameters of the shape factor A device, characterized in that 形状因子の統計的パラメータは、それらの平均、加重平均、中央値、最頻値、最大値および最小値の少なくとも1つを備えることを特徴とする、請求項12に記載の装置。   The apparatus according to claim 12, characterized in that the statistical parameters of the form factors comprise at least one of their average, weighted average, median, mode, maximum and minimum values. コンピュータは大津しきい値処理を用いて画像データをしきい値処理するようプログラムされていることを特徴とする、請求項12に記載の装置。   13. The apparatus of claim 12, wherein the computer is programmed to threshold image data using Otsu threshold processing. コンピュータは、形状因子の平均または中央値がそれぞれ相対的に低いか、中間かまたは高いかどうかによって、多形性を相対的に低いか、中間かまたは高いと決定するようにプログラムされていることを特徴とする、請求項12に記載の装置。   The computer is programmed to determine the polymorphism as relatively low, medium or high, depending on whether the mean or median form factor is relatively low, medium or high, respectively. The device according to claim 12, characterized in that: コンピュータは、細胞核に潜在的に対応する画像領域の形状因子Sを、
Figure 2006507579
(kは定数、Pは画像領域周辺長、Aは画像領域面積)で求めるようプログラムされ、さらにコンピュータは、細胞核に潜在的に対応する一連の画像領域についての平均形状因子Sを決定し、平均形状因子をS≦30k(低い)、30k<S≦35k(中間)およびS>35k(高い)として区分し、多形性をそれぞれ相対的に低い、中間または高いと表示するようにプログラムされていることを特徴とする、請求項15に記載の装置。
The computer calculates the shape factor S of the image area potentially corresponding to the cell nucleus,
Figure 2006507579
(K is a constant, P is the image region perimeter, A is the image region area), and the computer further determines an average shape factor S m for a series of image regions potentially corresponding to the cell nucleus, Classify the average form factor as S m ≦ 30k (low), 30k <S m ≦ 35k (middle) and S m > 35k (high) and display polymorphism as relatively low, medium or high, respectively The device according to claim 15, wherein the device is programmed.
画像データをしきい値処理して2値化する前に、コンピュータは、カラー画像データにおける個々の赤、緑または青色平面と比較して改良された画像定義を用いて、カラー画像データをグレースケール画像データに変換するようにプログラムされ、さらにコンピュータは、グレースケール画像データを用いて画像データのしきい値処理を実行するようプログラムされていることを特徴とする、請求項12に記載の装置。   Prior to thresholding and binarizing the image data, the computer grayscales the color image data using an improved image definition compared to the individual red, green or blue planes in the color image data. The apparatus of claim 12, wherein the apparatus is programmed to convert to image data, and wherein the computer is programmed to perform thresholding of the image data using grayscale image data. コンピュータは、グレースケールの画像データが第1主成分であるPCAを用いて、カラー画像データをグレースケール画像データに変換するようにプログラムされていることを特徴とする、請求項17に記載の装置。   18. The apparatus of claim 17, wherein the computer is programmed to convert color image data to grayscale image data using a PCA in which grayscale image data is the first principal component. . コンピュータは、
a)画像データを重複するサブ画像に分割し、
b)各サブ画像にPCAを適用して、それぞれグレースケールのサブ画像を生成し、
c)グレースケールのサブ画像から、
i)サブ画像境界線と接触または交差する画像領域と、
ii)不適当な小さい画像領域と、
iii)相対的に大きな画像領域内の穴と、を取り除き、
d)サブ画像を2値化画像に再構築する、ようにプログラムされていることを特徴とする、請求項18に記載の装置。
Computer
a) dividing the image data into overlapping sub-images;
b) applying PCA to each sub-image to generate a gray-scale sub-image,
c) From the grayscale sub-image,
i) an image area that touches or intersects the sub-image boundary;
ii) an inappropriate small image area;
iii) remove the holes in the relatively large image area,
The apparatus according to claim 18, wherein the apparatus is programmed to reconstruct a sub-image into a binarized image.
コンピュータは、相対的に小さい画像領域を背景画素値に設定し、相対的に大きい画像領域内の穴画素を穴のない画像領域の画素値に設定するようにプログラムされていることを特徴とする、請求項12に記載の装置。   The computer is programmed to set a relatively small image area to a background pixel value and to set a hole pixel in a relatively large image area to a pixel value of an image area without a hole. The apparatus according to claim 12. 核多形性の組織学的評価において使用し、および組織画像データ内の細胞核に潜在的に対応する画像領域を特定するようにコンピュータを制御する命令を有する、コンピュータソフトウェアであって、ソフトウェアはさらに、画像データをしきい値処理して2値化し、特定された画像領域の周辺長と面積を決定し、周辺長と面積から画像領域形状因子を計算し、形状因子の統計的パラメータから多形性を評価するようにコンピュータを制御する命令を有することを特徴とする、コンピュータソフトウェア。   Computer software for use in histological evaluation of nuclear polymorphism and having instructions for controlling a computer to identify image regions that potentially correspond to cell nuclei in tissue image data, the software further comprising: , Binarize the image data by threshold processing, determine the perimeter length and area of the specified image area, calculate the image area shape factor from the perimeter length and area, and polymorph from the shape factor statistical parameters Computer software comprising instructions for controlling a computer to evaluate sex. 形状因子の統計的パラメータは、それらの平均、加重平均、中央値、最頻値、最大値および最小値の少なくとも1つを備えることを特徴とする、請求項21に記載のコンピュータソフトウェア。   The computer software of claim 21, wherein the statistical parameters of the form factor comprise at least one of their average, weighted average, median, mode, maximum and minimum values. 大津しきい値処理法を用いて画像化されたデータをしきい値処理するようにコンピュータを制御する命令を有していることを特徴とする、請求項21に記載のコンピュータソフトウェア。   22. Computer software according to claim 21, comprising instructions for controlling the computer to threshold data imaged using the Otsu thresholding method. 形状因子の平均または中央値がそれぞれ相対的に低いか、中間かまたは高いかどうかによって、多形性が相対的に低いか、中間かまたは高いと決定するようコンピュータを制御する命令を有していることを特徴とする、請求項21に記載のコンピュータソフトウェア。   Has instructions to control the computer to determine that the polymorphism is relatively low, medium or high, depending on whether the mean or median of the form factor is relatively low, medium or high, respectively The computer software of claim 21, wherein: a)
Figure 2006507579
(kは定数、Pは画像領域周辺長、Aは画像領域面積)によって与えられた細胞核に潜在的に対応する画像領域について形状因子Sを決定し、
b)細胞核に潜在的に対応する画像領域群について平均形状因子Sを、S≦30k(低い)、30k<S≦35k(中間)およびS>35k(高い)と区分し、
c)多形性をそれぞれ相対的に低いか中間かまたは高いとして表示する、ようにコンピュータを制御する命令を有することを特徴とする、請求項24に記載のコンピュータソフトウェア。
a)
Figure 2006507579
Determine the shape factor S for the image region potentially corresponding to the cell nucleus given by (k is a constant, P is the image region perimeter, A is the image region area),
b) dividing the mean form factor S m for image regions potentially corresponding to cell nuclei as S m ≦ 30k (low), 30k <S m ≦ 35k (middle) and S m > 35k (high);
25. Computer software according to claim 24, comprising instructions to control the computer to c) display polymorphism as relatively low, medium or high respectively.
画像データをしきい値処理して2値化する前に、コンピュータが、カラー画像データにおける個々の赤、緑または青色平面と比較して改良された画像定義を用いて、カラー画像データをグレースケール画像データに変換し、次いで、コンピュータが、グレースケール画像データを用いて画像データのしきい値処理を実行する、ようにコンピュータを制御する命令を有していることを特徴とする、請求項21に記載のコンピュータソフトウェア。   Prior to thresholding and binarizing the image data, the computer grayscales the color image data using an improved image definition compared to the individual red, green or blue planes in the color image data. 24. The method of claim 21, further comprising instructions for controlling the computer to convert to image data and then the computer performs thresholding of the image data using the grayscale image data. Computer software described in グレースケールの画像データが第1主成分であるPCAによって、カラー画像データをグレースケール画像データに変換するようコンピュータを制御する命令を有することを特徴とする、請求項26に記載のコンピュータソフトウェア。   27. Computer software according to claim 26, comprising instructions for controlling the computer to convert color image data into grayscale image data by PCA, wherein the grayscale image data is the first principal component. a)カラー画像データを各々が隣接画像のそれぞれの半分と重複する一連のサブ画像に分解することによって、カラー画像データをグレースケール画像データに変換し、
b)各サブ画像にPCAを実行し、
c)各サブ画像から、
i)サブ画像境界と接触または交差する画像領域と、
ii)不適当に小さい画像領域と、
iii)相対的に大きな画像領域内の穴と、を取り除き、
d)サブ画像を2値化画像に再構築する、ようにコンピュータを制御する命令を有することを特徴とする、請求項27に記載のコンピュータソフトウェア。
a) converting the color image data into grayscale image data by separating the color image data into a series of sub-images, each overlapping with a respective half of the adjacent image;
b) Perform PCA on each sub-image,
c) From each sub-image,
i) an image area that touches or intersects the sub-image boundary;
ii) an inappropriately small image area;
iii) remove the holes in the relatively large image area,
28. Computer software according to claim 27, characterized in that it has instructions to control the computer to d) reconstruct the sub-image into a binarized image.
相対的に小さい画像領域を背景画素値に設定し、相対的に大きい画像領域内の穴画素を穴のない画像領域の画素値に設定する命令を含むことを特徴とする、請求項21に記載のコンピュータソフトウェア。   The method of claim 21, further comprising: an instruction for setting a relatively small image area as a background pixel value and setting a hole pixel in a relatively large image area as a pixel value of an image area without a hole. Computer software.
JP2004552851A 2002-11-21 2003-11-13 Histological evaluation of nuclear polymorphism Expired - Fee Related JP4383352B2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GBGB0227160.9A GB0227160D0 (en) 2002-11-21 2002-11-21 Histological assessment of pleomorphism
PCT/GB2003/004910 WO2004046994A1 (en) 2002-11-21 2003-11-13 Histological assessment of nuclear pleomorphism

Publications (2)

Publication Number Publication Date
JP2006507579A true JP2006507579A (en) 2006-03-02
JP4383352B2 JP4383352B2 (en) 2009-12-16

Family

ID=9948243

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004552851A Expired - Fee Related JP4383352B2 (en) 2002-11-21 2003-11-13 Histological evaluation of nuclear polymorphism

Country Status (8)

Country Link
US (1) US7616790B2 (en)
EP (1) EP1579366B1 (en)
JP (1) JP4383352B2 (en)
AT (1) ATE361507T1 (en)
AU (1) AU2003302053A1 (en)
DE (1) DE60313662T2 (en)
GB (1) GB0227160D0 (en)
WO (1) WO2004046994A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008216077A (en) * 2007-03-05 2008-09-18 Juntendo Automatic detection method for positive cell of dyeing tissue sample
JP2010117175A (en) * 2008-11-11 2010-05-27 National Institute Of Advanced Industrial Science & Technology Image processing system, image processing method, program, and recording medium
JP2014197243A (en) * 2012-05-22 2014-10-16 株式会社リコー Pattern processor, pattern processing method and pattern processing program

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2430026A (en) 2005-09-09 2007-03-14 Qinetiq Ltd Automated selection of image regions
WO2010003041A2 (en) * 2008-07-03 2010-01-07 Nec Laboratories America, Inc. Mitotic figure detector and counter system and method for detecting and counting mitotic figures
JP5058962B2 (en) 2008-12-22 2012-10-24 オリンパス株式会社 Cell image analysis apparatus, cell image analysis method, and program
US9196047B2 (en) * 2010-11-08 2015-11-24 Manipal Institute Of Technology Automated tuberculosis screening
CA2833258A1 (en) * 2011-04-15 2012-10-18 Constitution Medical, Inc. Measuring volume and constituents of cells
JP5768877B2 (en) * 2011-05-18 2015-08-26 日本電気株式会社 Information processing system, information processing method, information processing apparatus, control method thereof, and control program
US9459196B2 (en) 2011-07-22 2016-10-04 Roche Diagnostics Hematology, Inc. Blood analyzer calibration and assessment
CN103827658B (en) 2011-07-22 2016-04-13 罗氏血液诊断股份有限公司 Identify and measure desmacyte
US20180253590A1 (en) * 2015-03-20 2018-09-06 Inspirata, Inc. Systems, methods, and apparatuses for digital histopathological imaging for prescreened detection of cancer and other abnormalities
US9928403B2 (en) * 2016-02-09 2018-03-27 Molecular Devices, Llc System and method for image analysis of multi-dimensional data
CA3025822A1 (en) * 2016-06-03 2017-12-07 Koninklijke Philips N.V. Biological object detection
EP3255583A1 (en) * 2016-06-08 2017-12-13 Inspace Co., Ltd. Method of automated tuberculosis examination of a sputum smear image
CN106447673A (en) * 2016-09-30 2017-02-22 哈尔滨工业大学 Chip pin extraction method under non-uniform illumination condition
CN109632820A (en) * 2018-11-19 2019-04-16 温州大学 Cleaning machine cleans detection method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5235522A (en) * 1990-10-10 1993-08-10 Cell Analysis Systems, Inc. Method and apparatus for automated analysis of biological specimens
US5991028A (en) * 1991-02-22 1999-11-23 Applied Spectral Imaging Ltd. Spectral bio-imaging methods for cell classification
US6026174A (en) 1992-10-14 2000-02-15 Accumed International, Inc. System and method for automatically detecting malignant cells and cells having malignancy-associated changes
US5978497A (en) * 1994-09-20 1999-11-02 Neopath, Inc. Apparatus for the identification of free-lying cells
US6165734A (en) * 1995-12-12 2000-12-26 Applied Spectral Imaging Ltd. In-situ method of analyzing cells
US6930175B1 (en) * 1997-12-12 2005-08-16 The Johns Hopkins University School Of Medicine Gene family with transformation modulating activity
US6605432B1 (en) * 1999-02-05 2003-08-12 Curators Of The University Of Missouri High-throughput methods for detecting DNA methylation
US7050620B2 (en) 2001-03-30 2006-05-23 Heckman Carol A Method of assaying shape and structural features in cells

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008216077A (en) * 2007-03-05 2008-09-18 Juntendo Automatic detection method for positive cell of dyeing tissue sample
JP2010117175A (en) * 2008-11-11 2010-05-27 National Institute Of Advanced Industrial Science & Technology Image processing system, image processing method, program, and recording medium
JP2014197243A (en) * 2012-05-22 2014-10-16 株式会社リコー Pattern processor, pattern processing method and pattern processing program

Also Published As

Publication number Publication date
JP4383352B2 (en) 2009-12-16
AU2003302053A1 (en) 2004-06-15
GB0227160D0 (en) 2002-12-24
DE60313662D1 (en) 2007-06-14
ATE361507T1 (en) 2007-05-15
DE60313662T2 (en) 2008-01-03
US20060050947A1 (en) 2006-03-09
US7616790B2 (en) 2009-11-10
EP1579366A1 (en) 2005-09-28
EP1579366B1 (en) 2007-05-02
WO2004046994A1 (en) 2004-06-03

Similar Documents

Publication Publication Date Title
JP7422825B2 (en) Focus-weighted machine learning classifier error prediction for microscope slide images
JP4383352B2 (en) Histological evaluation of nuclear polymorphism
JP4864857B2 (en) Measurement of mitotic activity
Agarwal et al. Automatic glaucoma detection using adaptive threshold based technique in fundus image
Garnavi et al. Automatic segmentation of dermoscopy images using histogram thresholding on optimal color channels
WO2014021175A1 (en) Device and method for detecting necrotic cell region and storage medium for storing computer processable program for detecting necrotic cell region
JP6168426B2 (en) Disease analysis apparatus, control method, and program
KR20170128577A (en) Tissue sample analysis technology
Florindo et al. Morphological classification of odontogenic keratocysts using Bouligand–Minkowski fractal descriptors
Razzak Malarial parasite classification using recurrent neural network
Huang et al. An automated computational framework for retinal vascular network labeling and branching order analysis
CN110838094A (en) Pathological section staining style conversion method and electronic equipment
Maheswari et al. A novel approach for retinal lesion detection in diabetic retinopathy images
Oprisescu et al. Automatic pap smear nuclei detection using mean-shift and region growing
RU2295297C2 (en) Method for studying and predicting the state of biological object or its part
JP4452624B2 (en) Automatic histological categorization of tubules
JP5210571B2 (en) Image processing apparatus, image processing program, and image processing method
Parvaze et al. Extraction of multiple cellular objects in HEp-2 images using LS segmentation
Amitha et al. Developement of computer aided system for detection and classification of mitosis using SVM
CN113450383A (en) Quantitative analysis method, device, equipment and medium for immunochromatographic test paper
Nagpal et al. Performance analysis of diabetic retinopathy using diverse image enhancement techniques
RU2105351C1 (en) Method for analysis of object texture image
Eitel et al. Feature visualization for convolutional neural network models trained on neuroimaging data
CN110378949B (en) Starch granule distribution analysis device and method thereof
RU136612U1 (en) BREAST CANCER TYPE &#34;BREAST CANCER&#34; TYPE DIAGNOSTICS DEVICE ON MAMMOGRAPHIC PICTURES

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080709

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080722

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20081009

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20081017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090122

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090624

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20090812

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090901

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090918

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121002

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131002

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees