JP2016212412A - 被写体構造のコントラスト画像を生成する方法およびそれに関連する装置 - Google Patents
被写体構造のコントラスト画像を生成する方法およびそれに関連する装置 Download PDFInfo
- Publication number
- JP2016212412A JP2016212412A JP2016091060A JP2016091060A JP2016212412A JP 2016212412 A JP2016212412 A JP 2016212412A JP 2016091060 A JP2016091060 A JP 2016091060A JP 2016091060 A JP2016091060 A JP 2016091060A JP 2016212412 A JP2016212412 A JP 2016212412A
- Authority
- JP
- Japan
- Prior art keywords
- image
- axis
- contrast
- color
- color space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 128
- 238000005286 illumination Methods 0.000 claims abstract description 143
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 41
- 238000003384 imaging method Methods 0.000 claims description 36
- 238000004590 computer program Methods 0.000 claims description 15
- 239000000654 additive Substances 0.000 claims description 11
- 230000000996 additive effect Effects 0.000 claims description 11
- 238000001000 micrograph Methods 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 5
- 238000000399 optical microscopy Methods 0.000 claims description 5
- 229920006395 saturated elastomer Polymers 0.000 claims description 5
- 230000009466 transformation Effects 0.000 claims description 3
- 230000001131 transforming effect Effects 0.000 abstract 1
- 230000008901 benefit Effects 0.000 description 32
- 238000010586 diagram Methods 0.000 description 22
- 238000012545 processing Methods 0.000 description 18
- 230000001419 dependent effect Effects 0.000 description 14
- 238000006243 chemical reaction Methods 0.000 description 10
- 238000007792 addition Methods 0.000 description 8
- 238000002156 mixing Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 239000003086 colorant Substances 0.000 description 6
- 239000000463 material Substances 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000000386 microscopy Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000001149 cognitive effect Effects 0.000 description 2
- 230000004456 color vision Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000010348 incorporation Methods 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 238000010183 spectrum analysis Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 1
- 238000002135 phase contrast microscopy Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/0052—Optical details of the image generation
- G02B21/0056—Optical details of the image generation based on optical coherence, e.g. phase-contrast arrangements, interference arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
- G06T2207/10061—Microscopic image from scanning electron microscope
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10152—Varying illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Optics & Photonics (AREA)
- Image Processing (AREA)
- Microscoopes, Condenser (AREA)
Abstract
【解決手段】コントラスト形成方法は、多数の照明源111により被写体を照明する工程10、各照明12の被写体の照明画像21を生成する工程20、第1の軸に対して互いに隣接する2つの照明画像を重畳して第1の軸の第1の全体軸画像31を形成し、第2の軸に対して互いに隣接する2つの照明画像を重畳して第2の軸の第2の全体軸画像32を形成する工程30、第1の全体軸画像31に基づき第1の色勾配画像41を生成し、第2の全体軸画像32に基づき第2の色勾配画像42を生成する工程40、第1の色勾配画像と第2の色勾配画像とを色空間51に変換する工程50、第1の色勾配画像41と第2の色勾配画像42とに基づきコントラスト画像61を色空間51に生成する工程60を含む。
【選択図】図1
Description
ここでの主請求項の主題は、好ましくは顕微鏡画像からコントラスト画像を生成するための、特には被写体構造の高さプロファイルおよび/または位相プロファイル情報を読み取るためのコントラスト形成方法に関する。コントラスト形成方法は以下の工程を含む:1つまたは複数(2つ以上)の照明源に基づき照明系列により被写体を照明する工程、照明系列内の各照明の被写体の照明画像を生成する工程、第1の軸の第1の全体軸画像を形成するために第1の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳する工程、第2の軸の第2の全体軸画像を形成するために第2の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳する工程、第1の全体軸画像に基づき第1の色勾配画像を生成する工程、第2の全体軸画像に基づき第2の色勾配画像を生成する工程、第1の色勾配画像と第2の色勾配画像とを色空間に変換する工程、被写体の構造の位相または高さプロファイルの4つの方向情報がカラーコーディング式に表されるように、変換された第1の色勾配画像と第2の色勾配画像とに基づきコントラスト画像を色空間に生成する工程。
本発明の意味の範囲内の被写体構造の高さプロファイル情報は、本明細書では、3つの空間次元すべてにおける被写体構造に関係する手掛かりを提供する情報を含む。
本発明の意味の範囲内の2つの隣接照明画像を重畳する工程は、それぞれの場合に2つの画像の同一画像比率が強化または弱化される処理であり得る。これは、例えば画素式に行われ得る。
本発明による教示は、コントラスト形成方法が自動的な方法でこのように動作可能であり、本発明による対応する様々な装置のための簡単かつ費用効率の高い方法で提供され得、装置の場所において本方法を本発明による対応する装置へ直接ポーティングするように容易に搬送され得るという利点を実現する。
第1の例示的実施形態によると、コントラスト形成方法において、第1の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳して第1の軸の第1の全体軸画像を形成する工程と、第2の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳して第2の軸の第2の全体軸画像を形成する工程とは、それぞれの場合に、同様に以下の工程を含む:対応する第1の軸または第2の軸に対して互いに隣接する2つのそれぞれの照明画像を計算して対応する第1の軸または第2の軸に対して対応する中間画像を形成する工程、対応する中間画像を計算して対応する第1の全体軸画像または第2の全体軸画像を形成する工程。それぞれの計算は、それぞれの場合に加算または減算を含む。しかし、スケーリングすることに加えて、画像フィルタ処理または様々なタイプの画像処理もまた、加算または減算の前および/または後に個々の像に対して行われ得る。この実施形態は、方法部分が全体軸画像を取得するために繰り返し使用され得るという利点を有する。これにより本方法を簡単にすることが可能である。
別の例示的実施形態によると、コントラスト形成方法では、第1の色勾配画像と第2の色勾配画像との色空間への変換は、輝度情報と色空間の第3の撮像チャネルとを関連付ける工程を含む。
この実施形態は、中間調画像が画像を正規化するために使用され得る、または画像を使用して、色空間中の被写体構造に関する別の情報を表すために使用され得るという利点を有する。
本発明の意味の範囲内のCIELAB色空間はすべての知覚可能色を記述し得る。CIELAB色モデルの最も重要な特性の中には、装置独立性および認知関係がある。このことは、色が標準的光条件下で正常な観察者により感知されるため、その生成または再生技術のタイプとは独立に定義されることを意味する。色モデルはEN ISO11664−4に定義されている。
別の例示的実施形態によると、コントラスト形成方法はさらに、コントラスト画像の生成が色空間に基づいて発生することを含む。この実施形態は、どの被写体情報が表され何の色でコード化されるかに関する判断が色空間に基づいてなされ得るという利点を有する。
コントラスト形成方法はさらに、照明系列の終了後、各照明源が被写体を正確に一回照明することを含む。
別の例示的実施形態によると、コントラスト形成方法はさらに、照明系列内の各照明源が被写体を個々に照明することを含む。
したがって、本発明は方法および関連装置の提供を可能にし、その結果、角度選択照明により被写体の様々な特性を表すことが可能になる。これは、例えば以下のものにより行われ得る。
・SEC 合計強調コントラスト:すべての個別画像の和+絶対値(DPCx − x方向の対向画像の差)+絶対値(DPCy − y方向の対向画像の差)→増分の絶対値と重畳されたPK画像との和→いかなる直接的な個々の情報も読み取られ得ないが、様々な効果を同時に可視化する。
使用される略称SEC、DECおよびMSCは本出願において定義されたものであり、専門語としては知られていない。
・HSV色コントラスト:特に、DIC/DPCコントラストが材料色に関する情報を表さないことは問題である。このため、以下の組み合わせが可能である。
それをRGBからHSV色空間に変換する。
Vチャネル(値)を所望の個々のコントラスト(例えば、DICx)の中間調画像で置換する。
必要に応じ、輝度適応化を行う。
今や結果は元のものと同じ色を有するが、輝度中には個々のコントラストの情報(例えば、x方向の増分)を含む。
PK画像を使用する。
aおよびbチャネルを所望の個々のコントラスト(例えば、DPCx、DPCy)で置換する。
結果は原画像(PK)と同じ輝度値を有するが、2つの個々のコントラストの情報はaおよびb中に格納される。
・RGB色コントラスト:
3つの異なる個々のコントラスト(例えば、PK、DPCx、DPCy)をRGB色チャネル中に書き込む。
これは、個々の画像内の個々のコントラストの簡単かつ迅速な組み合わせが可能にされ得るという利点を生じる。さらに、本方法はHSVおよびLAB中に情報(色/輝度)を含む。
ここで、図1は、好ましくは顕微鏡画像からコントラスト画像を生成するための、特には被写体構造の高さプロファイル情報を読み取るためのコントラスト形成方法の概略図を示す。本明細書では、コントラスト形成方法は以下の工程を含む:多数の照明源111に基づき照明系列11により被写体を照明する工程(10)、照明系列11内の各照明12の被写体の照明画像21を生成する工程(20)、第1の軸35(図1に図示せず)に対して互いに隣接する2つのそれぞれの照明画像21を重畳して第1の軸35の第1の全体軸画像31を形成する工程(30)、第2の軸36(図1に図示せず)に対して互いに隣接する2つのそれぞれの照明画像21を重畳して第2の軸36の第2の全体軸画像32を形成する工程(30)、第1の全体軸画像31に基づき第1の色勾配画像41を生成する工程(40)、第2の全体軸画像32に基づき第2の色勾配画像42を生成する工程(40)、第1の色勾配画像41と第2の色勾配画像42とを色空間51に変換する工程(50)、被写体の構造の高さプロファイルの4つの方向情報351、352、361、362がカラーコーディング式に表されるように、変換された(50)第1の色勾配画像41と第2の色勾配画像42とに基づきコントラスト画像61を色空間51に生成する工程(60)。
ここで、図2は、第1の軸35に対して互いに隣接する2つのそれぞれの照明画像21を重畳して第1の軸35の第1の全体軸画像31を形成する工程(30)を示す。この処理では、対応する第1の軸35に対して互いに隣接する2つのそれぞれの照明画像21が、対応する第1の軸35に対する対応する中間画像(intermediate image)23を形成するために計算される(33)。さらに、対応する中間画像23は対応する第1の全体軸画像31を形成するために計算される(34)。
図4は、本発明の別の例示的実施形態による提案方法の概略図を示す。
図4は、図1の方法に対して拡張された方法の概略図を示す。
図5は、好ましくは顕微鏡画像からコントラスト画像を生成するための、特には光学顕微鏡検査に特に好ましい被写体構造の高さプロファイル情報を読み取るためのコントラスト形成用装置100の概略図を示す。ここでのコントラスト形成用装置100は画像記録装置110とコントラスト形成装置120とを含む。画像記録装置110は、被写体の画像を光学的に捕捉し、かつそれをコントラスト形成装置120に送信するように構成される。ここで、コントラスト形成用装置100は本発明によるコントラスト形成方法を行うように構成される。
11 照明系列
12 照明系列内の照明
20 照明画像を生成する工程
21 照明画像
23 第1の軸に対する中間画像
24 第2の軸に対する中間画像
30 2つの照明画像を重畳する工程
31 第1の全体軸画像
32 第2の全体軸画像
33 中間画像を形成するために2つの照明画像を計算する工程
34 全体軸画像を形成するために2つの中間画像を計算する工程
35 第1の軸
36 第2の軸
40 色勾配画像を生成する工程
41 第1の色勾配画像
42 第2の色勾配画像
50 色勾配画像を色空間に変換する工程
51 色空間
52 色勾配画像と色空間の撮像チャネルとを関連付ける工程
53 別の情報と色空間の第3の撮像チャネルとを関連付ける工程
60 コントラスト画像を生成する工程
61 コントラスト画像
100 コントラスト形成用装置
110 画像記録装置
111 照明源
120 コントラスト形成装置
351 高さプロファイルの第1の方向情報
352 高さプロファイルの第2の方向情報
361 高さプロファイルの第3の方向情報
362 高さプロファイルの第4の方向情報
511 色空間の第1の撮像チャネル
512 色空間の第2の撮像チャネル
513 色空間の第3の撮像チャネル
ここでの主請求項の主題は、好ましくは顕微鏡画像からコントラスト画像を生成するための、特には被写体構造の高さプロファイルおよび/または位相プロファイル情報を読み取るためのコントラスト形成方法に関する。コントラスト形成方法は以下の工程を含む:1つまたは複数(2つ以上)の照明源に基づき照明系列により被写体を照明する工程、照明系列内の各照明の被写体の照明画像を生成する工程、第1の軸の第1の全体軸画像を形成するために第1の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳する工程、第2の軸の第2の全体軸画像を形成するために第2の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳する工程、第1の全体軸画像に基づき第1の色勾配画像を生成する工程、第2の全体軸画像に基づき第2の色勾配画像を生成する工程、第1の色勾配画像と第2の色勾配画像とを色空間に変換する工程、被写体の構造の位相または高さプロファイルの4つの方向情報がカラーコーディング式に表されるように、変換された第1の色勾配画像と第2の色勾配画像とに基づきコントラスト画像を色空間に生成する工程。
本発明の意味の範囲内の被写体構造の高さプロファイル情報は、本明細書では、3つの空間次元すべてにおける被写体構造に関係する手掛かりを提供する情報を含む。
本発明の意味の範囲内の2つの隣接照明画像を重畳する工程は、それぞれの場合に2つの画像の同一画像比率が強化または弱化される処理であり得る。これは、例えば画素式に行われ得る。
本発明による教示は、コントラスト形成方法が自動的な方法でこのように動作可能であり、本発明による対応する様々な装置のための簡単かつ費用効率の高い方法で提供され得、装置の場所において本方法を本発明による対応する装置へ直接ポーティングするように容易に搬送され得るという利点を実現する。
第1の例示的実施形態によると、コントラスト形成方法において、第1の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳して第1の軸の第1の全体軸画像を形成する工程と、第2の軸に対して互いに隣接する2つのそれぞれの照明画像を重畳して第2の軸の第2の全体軸画像を形成する工程とは、それぞれの場合に、同様に以下の工程を含む:対応する第1の軸または第2の軸に対して互いに隣接する2つのそれぞれの照明画像を計算して対応する第1の軸または第2の軸に対して対応する中間画像を形成する工程、対応する中間画像を計算して対応する第1の全体軸画像または第2の全体軸画像を形成する工程。それぞれの計算は、それぞれの場合に加算または減算を含む。しかし、スケーリングすることに加えて、画像フィルタ処理または様々なタイプの画像処理もまた、加算または減算の前および/または後に個々の像に対して行われ得る。この実施形態は、方法部分が全体軸画像を取得するために繰り返し使用され得るという利点を有する。これにより本方法を簡単にすることが可能である。
別の例示的実施形態によると、コントラスト形成方法では、第1の色勾配画像と第2の色勾配画像との色空間への変換は、輝度情報と色空間の第3の撮像チャネルとを関連付ける工程を含む。
この実施形態は、中間調画像が画像を正規化するために使用され得る、または画像を使用して、色空間中の被写体構造に関する別の情報を表すために使用され得るという利点を有する。
本発明の意味の範囲内のCIELAB色空間はすべての知覚可能色を記述し得る。CIELAB色モデルの最も重要な特性の中には、装置独立性および認知関係がある。このことは、色が標準的光条件下で正常な観察者により感知されるため、その生成または再生技術のタイプとは独立に定義されることを意味する。色モデルはEN ISO11664−4に定義されている。
別の例示的実施形態によると、コントラスト形成方法はさらに、コントラスト画像の生成が色空間に基づいて発生することを含む。この実施形態は、どの被写体情報が表され何の色でコード化されるかに関する判断が色空間に基づいてなされ得るという利点を有する。
コントラスト形成方法はさらに、照明系列の終了後、各照明源が被写体を正確に一回照明することを含む。
別の例示的実施形態によると、コントラスト形成方法はさらに、照明系列内の各照明源が被写体を個々に照明することを含む。
したがって、本発明は方法および関連装置の提供を可能にし、その結果、角度選択照明により被写体の様々な特性を表すことが可能になる。これは、例えば以下のものにより行われ得る。
・SEC 合計強調コントラスト:すべての個別画像の和+絶対値(DPCx − x方向の対向画像の差)+絶対値(DPCy − y方向の対向画像の差)→増分の絶対値と重畳されたPK画像との和→いかなる直接的な個々の情報も読み取られ得ないが、様々な効果を同時に可視化する。
使用される略称SEC、DECおよびMSCは本出願において定義されたものであり、専門語としては知られていない。
・HSV色コントラスト:特に、DIC/DPCコントラストが材料色に関する情報を表さないことは問題である。このため、以下の組み合わせが可能である。
それをRGBからHSV色空間に変換する。
Vチャネル(値)を所望の個々のコントラスト(例えば、DICx)の中間調画像で置換する。
必要に応じ、輝度適応化を行う。
今や結果は元のものと同じ色を有するが、輝度中には個々のコントラストの情報(例えば、x方向の増分)を含む。
PK画像を使用する。
aおよびbチャネルを所望の個々のコントラスト(例えば、DPCx、DPCy)で置換する。
結果は原画像(PK)と同じ輝度値を有するが、2つの個々のコントラストの情報はaおよびb中に格納される。
・RGB色コントラスト:
3つの異なる個々のコントラスト(例えば、PK、DPCx、DPCy)をRGB色チャネル中に書き込む。
これは、個々の画像内の個々のコントラストの簡単かつ迅速な組み合わせが可能にされ得るという利点を生じる。さらに、本方法はHSVおよびLAB中に情報(色/輝度)を含む。
ここで、図1は、好ましくは顕微鏡画像からコントラスト画像を生成するための、特には被写体構造の高さプロファイル情報を読み取るためのコントラスト形成方法の概略図を示す。本明細書では、コントラスト形成方法は以下の工程を含む:多数の照明源111に基づき照明系列11により被写体を照明する工程(10)、照明系列11内の各照明12の被写体の照明画像21を生成する工程(20)、第1の軸35(図1に図示せず)に対して互いに隣接する2つのそれぞれの照明画像21を重畳して第1の軸35の第1の全体軸画像31を形成する工程(30)、第2の軸36(図1に図示せず)に対して互いに隣接する2つのそれぞれの照明画像21を重畳して第2の軸36の第2の全体軸画像32を形成する工程(30)、第1の全体軸画像31に基づき第1の色勾配画像41を生成する工程(40)、第2の全体軸画像32に基づき第2の色勾配画像42を生成する工程(40)、第1の色勾配画像41と第2の色勾配画像42とを色空間51に変換する工程(50)、被写体の構造の高さプロファイルの4つの方向情報351、352、361、362がカラーコーディング式に表されるように、変換された(50)第1の色勾配画像41と第2の色勾配画像42とに基づきコントラスト画像61を色空間51に生成する工程(60)。
ここで、図2は、第1の軸35に対して互いに隣接する2つのそれぞれの照明画像21を重畳して第1の軸35の第1の全体軸画像31を形成する工程(30)を示す。この処理では、対応する第1の軸35に対して互いに隣接する2つのそれぞれの照明画像21が、対応する第1の軸35に対する対応する中間画像(intermediate image)23を形成するために計算される(33)。さらに、対応する中間画像23は対応する第1の全体軸画像31を形成するために計算される(34)。
図4は、本発明の別の例示的実施形態による提案方法の概略図を示す。
図4は、図1の方法に対して拡張された方法の概略図を示す。
図5は、好ましくは顕微鏡画像からコントラスト画像を生成するための、特には光学顕微鏡検査に特に好ましい被写体構造の高さプロファイル情報を読み取るためのコントラスト形成用装置100の概略図を示す。ここでのコントラスト形成用装置100は画像記録装置110とコントラスト形成装置120とを含む。画像記録装置110は、被写体の画像を光学的に捕捉し、かつそれをコントラスト形成装置120に送信するように構成される。ここで、コントラスト形成用装置100は本発明によるコントラスト形成方法を行うように構成される。
11 照明系列
12 照明系列内の照明
20 照明画像を生成する工程
21 照明画像
23 第1の軸に対する中間画像
24 第2の軸に対する中間画像
30 2つの照明画像を重畳する工程
31 第1の全体軸画像
32 第2の全体軸画像
33 中間画像を形成するために2つの照明画像を計算する工程
34 全体軸画像を形成するために2つの中間画像を計算する工程
35 第1の軸
36 第2の軸
40 色勾配画像を生成する工程
41 第1の色勾配画像
42 第2の色勾配画像
50 色勾配画像を色空間に変換する工程
51 色空間
52 色勾配画像と色空間の撮像チャネルとを関連付ける工程
53 別の情報と色空間の第3の撮像チャネルとを関連付ける工程
60 コントラスト画像を生成する工程
61 コントラスト画像
100 コントラスト形成用装置
110 画像記録装置
111 照明源
120 コントラスト形成装置
351 高さプロファイルの第1の方向情報
352 高さプロファイルの第2の方向情報
361 高さプロファイルの第3の方向情報
362 高さプロファイルの第4の方向情報
511 色空間の第1の撮像チャネル
512 色空間の第2の撮像チャネル
513 色空間の第3の撮像チャネル
Claims (14)
- 好ましくは顕微鏡画像からコントラスト画像を生成するための、特には前記コントラスト画像から被写体構造の高さプロファイル情報を読み取るためのコントラスト形成方法であって、
1つまたは複数の照明源(111)に基づき照明系列(11)により被写体を照明する工程(10)と、
前記照明系列(11)内の各照明(12)の前記被写体の照明画像(21)を生成する工程(20)と、
第1の軸(35)に対して互いに隣接する2つのそれぞれの照明画像(21)を重畳して前記第1の軸(35)の第1の全体軸画像(31)を形成する工程(30)と、
第2の軸(36)に対して互いに隣接する2つのそれぞれの照明画像(21)を重畳して前記第2の軸(36)の第2の全体軸画像(32)を形成する工程(30)と、
前記第1の全体軸画像(31)に基づき第1の色勾配画像(41)を生成する工程(40)と、
前記第2の全体軸画像(32)に基づき第2の色勾配画像(42)を生成する工程(40)と、
前記第1の色勾配画像(41)と前記第2の色勾配画像(42)とを色空間(51)に変換する工程(50)と、
前記被写体の構造の高さまたは位相プロファイルの4つの方向情報(351、352、361、362)がカラーコーディング式に表されるように、変換された(50)第1の色勾配画像(41)と前記第2の色勾配画像(42)とに基づきコントラスト画像(61)を前記色空間(51)に生成する工程(60)と、を備えるコントラスト形成方法。 - 前記第1の軸(35)に対して互いに隣接する2つのそれぞれの照明画像(21)を重畳して前記第1の軸(35)の第1の全体軸画像(31)を形成する工程(30)と、前記第2の軸(36)に対して互いに隣接する2つのそれぞれの照明画像(21)を重畳して前記第2の軸(36)の第2の全体軸画像(32)を形成する工程(30)とは、それぞれの場合に、同様に、
対応する第1の軸(35)または第2の軸(36)に対して互いに隣接する2つのそれぞれの照明画像(21)を計算して前記対応する第1の軸(35)または第2の軸(36)に対して対応する中間画像(23、24)を形成する工程(33)と、
前記対応する中間画像(23、24)を計算して前記対応する第1の全体軸画像(31)または前記第2の全体軸画像(32)を形成する工程(34)とを含み、
それぞれの計算工程(33、34)は、加算または減算により行われる、請求項1に記載のコントラスト形成方法。 - 対応する照明画像(21)を重畳して前記第1の軸(35)の第1の全体軸画像(31)を形成するかまたは前記第2の軸(36)の第2の全体軸画像(32)を形成する工程(30)は、それぞれの場合に、対応する中間調変換を含む、請求項1または2に記載のコントラスト形成方法。
- 前記第1の色勾配画像(41)と前記第2の色勾配画像(42)とを前記色空間(51)に変換する工程(50)は、
前記第1の色勾配画像(41)と前記色空間(51)の第1の撮像チャネル(511)とを関連付ける工程(52)と、
前記第2の色勾配画像(42)と前記色空間(51)の第2の撮像チャネル(512)とを関連付ける工程(52)とを含む、請求項1〜3のいずれか一項に記載のコントラスト形成方法。 - 前記第1の色勾配画像(41)と前記第2の色勾配画像(42)とを前記色空間(51)に変換する工程(50)は、
輝度情報と前記色空間(51)の第3の撮像チャネル(513)とを関連付ける工程(53)を含む、請求項1〜4のいずれか一項に記載のコントラスト形成方法。 - 前記第1の色勾配画像(41)と前記第2の色勾配画像(42)とを前記色空間(51)に変換する工程(50)は、
中間調画像と前記色空間(51)の第3の撮像チャネル(513)とを関連付ける工程(53)を含む、請求項1〜4のいずれか一項に記載のコントラスト形成方法。 - 前記4つの方向情報(351、352、361、362)のうちの2つの方向情報(351、352)は、それぞれの場合に前記第1の軸(35)に沿った一方向を示し、および前記4つの方向情報(351、352、361、362)のうちの別の2つの方向情報(361、362)は、それぞれの場合に第2の軸(36)に沿った一方向を示す、請求項1〜6のいずれか一項に記載のコントラスト形成方法。
- 前記色空間(51)は、CIELAB色空間、加法色空間、減法色空間または色相飽和色空間である、請求項1〜7のいずれか一項に記載のコントラスト形成方法。
- 前記コントラスト画像(61)を生成する工程(60)は、前記色空間(51)に基づいて実行される、請求項1〜8のいずれか一項に記載のコントラスト形成方法。
- 前記照明系列(11)の終了後、各照明源(111)は前記被写体を一回照明する、請求項1〜9のいずれか一項に記載のコントラスト形成方法。
- 前記照明系列(11)内の各照明源(111)は、前記被写体を個々に照明する、請求項1〜10のいずれか一項に記載のコントラスト形成方法。
- 好ましくは顕微鏡画像からコントラスト画像を生成するための、特には光学顕微鏡検査に特に好ましい被写体構造の高さプロファイル情報を読み取るためのコントラスト形成用装置(100)であって、
画像記録装置(110)と、
コントラスト形成装置(120)と、を備え、
前記画像記録装置(110)は、被写体の画像を捕捉し、かつ前記捕捉の結果をコントラスト形成装置(120)へ送信するように構成され、
前記コントラスト形成用装置(100)は、請求項1〜11のいずれか一項に記載のコントラスト形成方法を行うように構成される、コントラスト形成用装置。 - 請求項12に記載のコントラスト形成用装置(100)のためのプログラムコード手段を有するコンピュータプログラム製品であって、前記プログラムコード手段は、請求項1〜11のいずれか一項に記載のコントラスト形成方法を備える、コンピュータプログラム製品。
- 請求項13に記載のコンピュータプログラム製品を含むデータ媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015208084.6A DE102015208084A1 (de) | 2015-04-30 | 2015-04-30 | Verfahren zum Generieren eines Kontrastbildes einer Objektbeschaffenheit und diesbezügliche Vorrichtungen |
DE102015208084.6 | 2015-04-30 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2016212412A true JP2016212412A (ja) | 2016-12-15 |
Family
ID=56068636
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016091060A Pending JP2016212412A (ja) | 2015-04-30 | 2016-04-28 | 被写体構造のコントラスト画像を生成する方法およびそれに関連する装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10175468B2 (ja) |
EP (1) | EP3089105A1 (ja) |
JP (1) | JP2016212412A (ja) |
CN (1) | CN106097288B (ja) |
DE (1) | DE102015208084A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10365465B2 (en) * | 2015-05-04 | 2019-07-30 | Versitech Limited | Apparatus and method for quantitative phase-gradient chirped-wavelength-encoded optical imaging |
DE102018114005A1 (de) | 2018-06-12 | 2019-12-12 | Carl Zeiss Jena Gmbh | Materialprüfung von optischen Prüflingen |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB0606788D0 (en) * | 2006-04-03 | 2006-05-10 | Ind Co Ltd | Confocal microscopy |
US8794072B2 (en) * | 2007-10-10 | 2014-08-05 | Sonoscan, Inc. | Scanning acoustic microscope with profilometer function |
US8150125B2 (en) * | 2007-10-29 | 2012-04-03 | Siemens Medical Solutions Usa, Inc. | System for visualizing regions of interest in medical images |
JP5646906B2 (ja) * | 2010-08-06 | 2014-12-24 | キヤノン株式会社 | X線装置およびx線測定方法 |
DE102011052721A1 (de) * | 2011-08-16 | 2013-02-21 | Hseb Dresden Gmbh | Messverfahren für Höhenprofile von Oberflächen |
US8885941B2 (en) * | 2011-09-16 | 2014-11-11 | Adobe Systems Incorporated | System and method for estimating spatially varying defocus blur in a digital image |
DE102013003900A1 (de) * | 2012-03-28 | 2013-10-02 | Carl Zeiss Microscopy Gmbh | Lichtmikroskop und Verfahren zur Bildaufnahme mit einem Lichtmikroskop |
US9001399B2 (en) * | 2013-03-13 | 2015-04-07 | Xerox Corporation | Automatically compensating for color differences from side 1 to side 2 of a document scanning device |
-
2015
- 2015-04-30 DE DE102015208084.6A patent/DE102015208084A1/de active Pending
-
2016
- 2016-04-27 EP EP16167216.7A patent/EP3089105A1/de not_active Ceased
- 2016-04-28 JP JP2016091060A patent/JP2016212412A/ja active Pending
- 2016-04-28 CN CN201610277879.3A patent/CN106097288B/zh active Active
- 2016-04-29 US US15/142,269 patent/US10175468B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20160320603A1 (en) | 2016-11-03 |
US10175468B2 (en) | 2019-01-08 |
CN106097288B (zh) | 2020-12-04 |
EP3089105A1 (de) | 2016-11-02 |
DE102015208084A1 (de) | 2016-11-03 |
CN106097288A (zh) | 2016-11-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Tremeau et al. | Color in image and video processing: most recent trends and future research directions | |
JP6783895B2 (ja) | 反射を低減したコントラスト画像を生成するための方法およびこれに関連する装置 | |
US10269103B2 (en) | Image processing apparatus, image processing method, and image processing system | |
KR102335899B1 (ko) | 3d 스캔이 수행 중인 물체에 관한 색상 정보를 수집하기 위한 시스템, 방법, 장치 및 컴퓨터 판독가능 저장 매체 | |
US20130016885A1 (en) | Image processing apparatus, imaging system, and image processing system | |
CN102663741B (zh) | 对彩色数字图像进行视觉立体感知增强的方法及系统 | |
US20120050309A1 (en) | Display control apparatus and display control method | |
CN110463197A (zh) | 增强立体相机成像系统中的空间分辨率 | |
JP2010166363A (ja) | 擬似濃淡画像生成装置及びプログラム | |
JP2016212412A (ja) | 被写体構造のコントラスト画像を生成する方法およびそれに関連する装置 | |
CN108648144B (zh) | 一种基于深度学习算法的fpm高分辨率彩色图像重建方法 | |
CN104010134B (zh) | 用于形成具有宽动态范围的系统和方法 | |
JP6004354B2 (ja) | 画像データ処理装置及び画像データ処理方法 | |
KR101958263B1 (ko) | Vr 콘텐츠와 ui 템플릿의 제어방법 | |
JP5218634B2 (ja) | 擬似濃淡画像生成装置及びプログラム | |
JP3572304B2 (ja) | 医療分野におけるフォトレタッチソフトウェアを用いた画像解析方法 | |
JP2011151454A (ja) | 画像処理装置、撮像機器及び画像処理方法 | |
Gadia et al. | Tuning Retinex for HDR images visualization | |
JP5598185B2 (ja) | 目立ち画像生成装置及び目立ち画像生成プログラム | |
JP2011002336A (ja) | 目立ち画像生成装置及び目立ち画像生成プログラム | |
US10911731B2 (en) | Image-capturing device | |
Gaiani et al. | Under the lens of ISLe: Leonardo da Vinci’s" Landscape" drawing analysed by colourimetry | |
JP5752011B2 (ja) | 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体 | |
KR100539940B1 (ko) | 휴대용 단말기에서 촬영된 영상을 스케치효과로 표시하는방법 | |
Robert-Inacio et al. | Visual attention simulation in rgb and hsv color spaces |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170418 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170714 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170919 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171016 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180403 |