JP4702404B2 - カメラシステム - Google Patents
カメラシステム Download PDFInfo
- Publication number
- JP4702404B2 JP4702404B2 JP2008165523A JP2008165523A JP4702404B2 JP 4702404 B2 JP4702404 B2 JP 4702404B2 JP 2008165523 A JP2008165523 A JP 2008165523A JP 2008165523 A JP2008165523 A JP 2008165523A JP 4702404 B2 JP4702404 B2 JP 4702404B2
- Authority
- JP
- Japan
- Prior art keywords
- frame
- camera
- image
- focus
- exposure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000004458 analytical method Methods 0.000 claims description 13
- 230000006835 compression Effects 0.000 claims description 13
- 238000007906 compression Methods 0.000 claims description 13
- 230000007246 mechanism Effects 0.000 claims description 5
- 238000000034 method Methods 0.000 description 43
- 239000000758 substrate Substances 0.000 description 11
- 238000005457 optimization Methods 0.000 description 6
- 238000012804 iterative process Methods 0.000 description 5
- 238000012935 Averaging Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 235000019580 granularity Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/32—Means for focusing
- G03B13/34—Power focusing
- G03B13/36—Autofocus systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/95—Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
- G01N21/956—Inspecting patterns on the surface of objects
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/34—Systems for automatic generation of focusing signals using different areas in a pupil plane
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8887—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Biochemistry (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
Description
像内の1フレームの写真を取り込むカメラ・システム向けに商店および露出設定を効率的
に決定することに関する。
題である。これらのカメラ・システムの解像度要件は用途毎に変わるかもしれない。例え
ば、半導体基板上に加工されたパターンを分析するために微視的解像度が必要かもしれな
い。基板のサイズ、画像の解像度要件、およびカメラに対する基板の傾斜のため微視的解
像度の完全な画像を得ることは難しい。
メラの視野は通常比較的小さいのでカメラは基板全体を視野に入れることができない。こ
のような場合、基板の高解像度画像は基板を複数のフレームに分割し各フレームの写真を
撮ることにより得られる。一旦、すべてのフレームの写真が撮られると、フレーム画像す
べてを組み合わせまたは縫い合わせて基板の1つの画像が実現される。しかし、各フレー
ム間の変動により、各フレームにわたり十分な画質を維持することはしばしば達成が難し
い。
された代表的なソース画像を示す。図示されるように、ソース画像110はセグメント(
1)120、およびセグメント(2)130からセグメント(N)140までを含み均等
なフレームに分割されている。図1ではフレームが同じ形状および面積を有しているよう
に示されるが、ソース画像110は不均等なフレームに分割されていても良い。さらに、
セグメントのいくつかまたはすべては重なり部分を有することができ、その後セグメント
をソース画像110の写真に組み合わせまたは縫い合わせる際、改良を要する。
る。この劣化は1つのフレームと別のフレームとで光が一貫していないことに由来し得る
。さらに、パターンまたは基板の表面が完全に滑らかでなく、その結果パターン表面およ
びカメラ間の距離に変動があるかもしれない。またさらに、パターン密度およびデザイン
が1つのフレームと別のフレームとで実質的に異なっているかもしれず、これもフレーム
画像間の画質に影響を与える可能性がある。
例えば、フレームの画質はコントラストおよび鮮明さ双方で測ることができる。画像のコ
ントラストを定義する1つの要素はカメラの露出設定である。露出設定が最適化されてい
ないと、画像のコントラストはとかく質がより悪くなる。画像の鮮明さを定義する1つの
要素はカメラの焦点設定である。焦点設定が最適化されていないと、画像の鮮明さはぼや
け、画像内のエッジは定義されない。
場合に良く理解できる。あるフレーム画像の焦点が外れ、またはコントラストが悪いと、
縫い合わせた画像は不適当で分析が難しいかもしれない。大型なマルチフレームの画像は
多数のフレーム画像を撮る必要があるかもしれないので、カメラを最適化するプロセスは
わずらわしく、時間がかかるかもしれない。
のある実施形態で、撮られたフレームの圧縮画像の分析に基づき焦点および露出設定双方
が決定される。この分析に基づき、カメラの焦点および露出設定はその特定フレームの好
ましい画質を提供するよう設定される。この焦点および露出設定の最適化はマルチフレー
ムのソース画像内の各フレームにおいて実施される。その結果、各フレーム画像は独立し
て最適化され、マルチフレームのソース画像にわたり光および表面の不整合などの変動に
対応している。
画像ファイルのサイズを分析することにより焦点および露出設定双方が最適化される。例
えば、複数の焦点設定各々において複数の写真を撮ることにより焦点設定が特定される。
複数の写真各々は圧縮され平均ファイル・サイズが特定される。最も大きい圧縮画像ファ
イル・サイズを生成する写真が特定され、対応する焦点設定が選択される。その後、同様
の手順を実施して最適化された露出設定が特定される。双方の場合、圧縮画像ファイルと
画質(鮮明さおよびコントラスト双方)とに間の関係を用いて効率的に好ましいカメラの
焦点および露出設定が選択される。一旦、フレームに対し設定が選択されると、カメラは
マルチフレームのソース画像内の次のフレームに進む。
、カメラ・システム内の低メモリ要求を可能にする。発明のある実施形態で、画像圧縮は
ハードウェア実装によりカメラ内で実施できるため、システムは付随コンピュータまたは
内部メモリ内でかなりのメモリ・リソースを必要とすることがない。このメモリ低減は分
析手順の際、格納される圧縮画像ならびに焦点および露出インジケータの量を制限するこ
とによりさらに低減することができる。発明のある実施形態で、自動焦点および/あるい
は自動露出方法の最適化の目的で一時に1つしか画像が保存されない。
述の反復プロセスを含み各種の分析手法を用いることができることを理解しよう。さらに
、マルチフレームのソース画像ファイルにおける進行は当業者の知る多数の要素により変
動する可能性がある。
る。カメラ・システムはカメラ、コントロール・アーム、およびソース画像内の各フレー
ムに対しカメラを較正/最適化するために用いられるコンピュータなどの処理手段を含む
。処理手段はカメラの外部でも、カメラまたはコントローラ・アーム内に一体化されてい
ても良い。さらに、カメラ・システムは写真を圧縮画像ファイルに変換する画像圧縮機構
を含む。この画像圧縮機構はカメラ自体を含みシステム内のどこに存在しても良く、ハー
ドウェア、ソフトウェア、またはファームウェアとして実現することができる。
メラを較正する方法は、カメラの第1の焦点設定を用いて第1フレームの第1の複数の写
真を撮ることと、第1の複数の写真を第1の複数の圧縮画像ファイルに圧縮することと、
第1の複数の圧縮画像ファイルの第1の平均サイズを計算することと、カメラの第2の焦
点設定を用いて第1フレームの第2の複数の写真を撮ることと、第2の複数の写真を第2
の複数の圧縮画像ファイルに圧縮することと、第2の複数の圧縮画像ファイルの第2の平
均サイズを計算することと、第1の平均サイズを第2の平均サイズと比較することにより
好ましい焦点設定を選択することとを含むことをその要旨とする。
メラを較正する方法は、さらに、カメラの第3の焦点設定を用いて第1フレームの第3の
複数の写真を撮ることと、第3の複数の写真を第3の複数の圧縮画像ファイルに圧縮する
ことと、前記第3の複数の圧縮画像ファイルの第3の平均サイズを計算することと、第3
の平均サイズを前の好ましい焦点設定に対応する平均圧縮画像ファイルと比較することに
より好ましい焦点設定を更新することと、の工程を含むことをその要旨とする。
メラを較正する方法は、第1の複数の圧縮画像ファイルおよび第2の複数の圧縮画像ファ
イルはJPEGフォーマットおよびTIFFフォーマットを含むグループから選択される
フォーマットを用いて生成されることをその要旨とする。
メラを較正する方法は、さらにマルチフレームのソース画像内の第2フレームにカメラを
進め第2フレームに対し較正する工程を含む、適用例1に記載される方法。
メラを較正する方法は、第1の複数の写真および第2の複数の写真を圧縮する工程はカメ
ラ内で実施されることをその要旨とする。
メラを較正する方法は、第1の複数の写真および第2の複数の写真を圧縮する工程をカメ
ラ内のハードウェアが実施することをその要旨とする。
る命令を有することをその要旨とする。
メラを較正する方法は、第1の複数の写真、第2の複数の写真、第1の複数の圧縮画像フ
ァイル、および第2の複数の圧縮画像ファイルはカメラに外付きのメモリ装置内に格納さ
れることをその要旨とする。
メラを較正する方法は、ソース画像は半導体基板上のエッチ・パターンであることをその
要旨とする。
ステムは、複数のフレームの上に位置付けることができ、調節可能な焦点および露出設定
を有するカメラと、カメラに連結され、カメラをマルチフレームのソース画像の上にある
二次元空間内で動かす制御構造と、カメラで撮られた写真を受信するようシステム内で連
結され、写真を複数の圧縮画像ファイルに圧縮する画像圧縮機構と、システム内で連結さ
れ、複数の圧縮画像ファイルを格納するメモリと、メモリに連結され、複数の圧縮画像フ
ァイルの分析に基づき好ましい焦点設定および好ましい露出設定を特定するプロセッサと
、を含むことをその要旨とする。
ステムは、画像圧縮機構はハードウェア装置としてカメラ内に存在することをその要旨と
する。
ステムは、制御構造はカメラがxおよびy座標双方に動くことを可能にするピボットを有
する制御アームであることをその要旨とする。
ステムは、制御アームはz座標での動きを提供することによりカメラを三次元空間で動か
すことをその要旨とする。
ステムは、好ましい焦点設定はカメラの第1の焦点設定により生成された圧縮画像ファイ
ルの第1の平均サイズをカメラの第2の焦点設定により生成された圧縮画像ファイルの第
2の平均サイズと比較することにより特定されることをその要旨とする。
ステムは、好ましい焦点設定は第1の平均サイズが第2の平均サイズより大きい場合第1
の焦点設定であることをその要旨とする。
ステムは、好ましい露出設定はカメラの好ましい焦点設定および第1の露出設定により生
成された圧縮画像ファイルの第3の平均サイズをカメラの好ましい焦点設定および第2の
露出設定により生成された圧縮画像ファイルの第4の平均サイズと比較することにより特
定されることをその要旨とする。
ステムは、好ましい露出設定は第3の平均サイズが第4の平均サイズより大きい場合第1
の露出設定であることをその要旨とする。
カメラを較正する方法は、カメラの第1の露出設定を用いて第1フレームの第1の複数の
写真を撮ることと、第1の複数の写真を第1の複数の圧縮画像ファイルに圧縮することと
、第1の複数の圧縮画像ファイルの第1の平均サイズを計算することと、カメラの第2の
露出設定を用いて第1フレームの第2の複数の写真を撮ることと、第2の複数の写真を第
2の複数の圧縮画像ファイルに圧縮することと、第2の複数の圧縮画像ファイルの第2の
平均サイズを計算することと、第1の平均サイズを第2の平均サイズと比較することによ
り好ましい焦点設定を選択することと、を含むことをその要旨とする。
カメラを較正する方法は、適用例18に記載される方法で、さらに、カメラの第3の露出
設定を用いて第1フレームの第3の複数の写真を撮ることと、第3の複数の写真を第3の
複数の圧縮画像ファイルに圧縮することと、前記第3の複数の圧縮画像ファイルの第3の
平均サイズを計算することと、第3の平均サイズを前の好ましい露出設定に対応する平均
圧縮画像ファイルと比較することにより好ましい露出設定を更新することと、の工程を含
むことをその要旨とする。
カメラを較正する方法は、第1の複数の圧縮画像ファイルおよび第2の複数の圧縮画像フ
ァイルはJPEGフォーマットおよびTIFFフォーマットを含むグループから選択され
るフォーマットを用いて生成されることをその要旨とする。
施する命令を有することをその要旨とする。
るであろう。
は例示的であることが意図され、限定するものではない。発明はこれらの実施形態との関
連で全般的に説明されるが、発明の範囲をこれら特定の実施形態に限定する意図ではない
ことが理解されよう。
のある実施形態で、撮られたフレームの圧縮画像の分析に基づき焦点および露出設定双方
が決定される。この分析に基づき、カメラの焦点および露出設定はその特定フレームの好
ましい画質を提供するよう設定される。この焦点および露出設定の最適化はマルチフレー
ムのソース画像内の各フレームにおいて実施される。その結果、各フレーム画像は独立し
て最適化され、マルチフレームのソース画像にわたり光および表面の不整合などの変動に
対応している。
される。しかし当業者であれば、発明はこれらの詳細なしで実施できることが明らかであ
ろう。当業者は以下にいくつか説明される本発明の実施形態はカメラ・システム、カメラ
、パソコン、および他の類似した装置を含め、いくつかの異なった装置に組み入れ得るこ
とを理解しよう。本発明の実施形態はまたソフトウェア、ハードウェア、またはファーム
ウェアとして存在することもできる。以下ブロック図で示される構造および装置は発明の
代表的な実施形態を図示するもので、発明を分かりにくくすることを避けることを意図し
ている。さらに、図内のコンポーネントおよび/あるいはモジュール間の接続は直接接続
に限定されることは意図されない。逆にこれらのコンポーネントおよびモジュール間のデ
ータは中間コンポーネントおよびモジュールにより変更、再フォーマット化、または別途
変えることができる。
連して説明したある特徴、構造、特性、または機能が発明の少なくとも1つの実施形態に
含まれることを意味する。本明細書の様々な個所において「一実施形態で」といった言い
回しが現れる場合、必ずしもすべて同じ実施形態について言及しているのではない。
システムを図示する。カメラ・システム200は制御アーム220により制御され位置づ
けられるカメラ210を含む。制御アーム220はカメラ210をソース画像240の上
の二次元空間内に位置付けることができる。他の実施形態で、制御アーム220はカメラ
210をソース画像240の上の三次元空間内に位置付けることができる。当業者であれ
ばソース画像240に対しカメラ210の位置を制御するのに他の制御構造を用いること
を理解し、これらの制御構造はすべて本発明の範囲に入ることが意図される。ことよう。
さらに、ソース画像240内のフレームの画像を取り込むために多数の異なった種類のカ
メラを用いることができる。ある実施形態で、カメラ210の位置は制御アーム220に
より固定され、ソース画像240が二次元空間内で移動可能である。例えば、ソース画像
240を通して光を提供し異なったセグメントを撮影できるようソース画像を移動させる
バックライト台にソース画像240を置くことができる。
の下にある(図示せず)ことができる。しかし、ソース画像240固有の光源のない場合
もあり得る。いずれにせよ、カメラ210がソース画像240の画像を撮るのに充分な光
はあるべきである。
30も含む。コンピュータ230はカメラ210の焦点および露出設定双方を最適化する
ために用いられる特定の処理機能を提供することができる。他の実施形態で、カメラ・シ
ステム200は処理機能をカメラ210またはカメラの制御アーム220内に一体化して
いる。
撮られる画像の画質を向上させるために較正される。発明の各種実施形態で、カメラ21
0は各フレームにおいて焦点設定および露出設定を最適化することにより較正される。こ
の高画質画像取り込み調節手順の意図は各フレームにおいて撮られた画像の画質が好まし
い画質閾値を満足することを保証するにある。この高画質画像取り込み調節は各フレーム
において独立して起こるので、フレーム間の変動はカメラ210により補正され、マルチ
フレームのソース画像240全体にわたりより一貫した画質を提供する。
に対するリソース要求を最小限にして焦点および露出設定双方を最適化する効率的な方法
を提供することが意図される。特に、画像圧縮の特性を利用して各フレームの圧縮画像フ
ァイルに対しこれらの設定を最適化する。発明のある実施形態で、圧縮操作はカメラ21
0のハードウェアまたはファームウェアで実施されることができ、特定のフレームで画像
を圧縮する迅速かつ効率的な方法を提供する。他の実施形態で、圧縮はコンピュータ23
0上でソフトウェア、ハードウェア、またはファームウェアにより実施される。
ことを理解しよう。さらに、本発明は圧縮画像の特性に対し画質の定量化を可能にする多
数の異なった圧縮手法を用いることができる。
に従う。この進行はシステムおよび/あるいはカメラ210に取り込まれるソース画像に
よって変化し得る。図3(a)〜図3(d)はマルチフレームのソース画像240上のカ
メラ210の代表的な進行パターンである。当業者であれば他の進行パターンを用いてソ
ース画像240またはその一部を取り込み得ることを理解しよう。
ス画像240の上にある二次元グリッドの右上の角にある第1フレーム320で始まる。
カメラ210は右から左に移動して最上行の各フレームの画像を撮る。その後カメラ21
0は1行下に移り左から右に進行しこの第2行における各フレームの写真を撮る。各種実
施形態で、カメラ210の進行はソース画像240の最終フレーム325に到達するまで
このパターンに従う。発明の他の実施形態で、カメラ210はソース画像240の最終フ
レーム325の前のあるフレームで止まり、画像の一部のみ取り込まれる。
はフレームが行毎に画像化されるという点で第1の進行パターンに類似している。この例
で、ソース画像240の左上の角にある第1フレーム340が開始点として用いられる。
カメラ210は右下の角にある最終フレーム345で終了するまでソース画像240中を
進行する。ある実施形態では、進行が最終フレーム345で終了する必要はなく、この最
終フレーム345の前のあるフレームで完了する。
0はソース画像240にわたり列毎に基づいて進む。この例で、カメラ210は最初左下
の角にある第1フレーム360の上に位置される。カメラ210は第1フレーム360の
写真を撮り、ソース画像240の上端に到達するまで第1列を上がる。カメラ210は次
に第2行に移り下に進む。カメラ210は右下の角にある最終フレーム365に到達する
までこのパターンを通って進む。前と同じように、他の実施形態ではカメラ210が最終
フレーム365に到達するまえに止まり、ソース画像240の一部のみ取り込み得る。
は右下の角にある第1フレーム380で開始し左下の角にある最終フレーム385で終了
する。他の実施形態では、カメラ210が最終フレーム385に到達する前に終了する。
毎)またはソース画像240の一部(同様にフレーム毎)を取り込み得ることを理解しよ
う。これらの進行はフレーム毎に連続的に画像を通って進行することに限定されず、他の
非連続的な進行パターンを用いてソース画像240内の特定フレームを取り込むこともで
きる。
れる。図4はこれらの設定がどのようにフレームの画質に影響し得るかを示すことを意図
している。カメラ410はソース画像240のフレーム440の上に位置している。レン
ズを微細に調節できるハウジング420内にカメラ・レンズが存在する。この調節はレン
ズを動かしてカメラ410内のレンズおよびフレーム440の表面間の焦点距離(f)4
30を変更することを含む。
ッターも含む。時間の長さまたは露出時間はフレーム440を撮った画像の画質に影響す
る。カメラの焦点および露出設定は双方ともフレーム440を撮った写真により生成され
る複数の圧縮画像ファイルを分析することにより最適化される。特に、画像における高周
波数成分はより大きい圧縮画像のファイルをもたらすため、圧縮画像ファイルのもたらさ
れるサイズを分析することにより焦点および露出設定は最適化される。これらの高周波数
成分は撮られた画像のより高いコントラストと鮮明さを示す。圧縮ファイルのサイズおよ
びカメラ設定間のこの関係を利用してカメラ410を較正する特定の方法を後述する。
適化されていないソース画像とを比較した図示を提供する。図5(a)は質の悪いコント
ラストおよび鮮明さを有する半導体基板の典型的なパターンを示す。特に、パターン内の
エッジはぼやけ、画像内の前景および背景間で鮮明なエッジが得られない。
トを有する典型的なパターンを示す。パターンは画像内の前景および背景間の対比を提供
するはるかに鮮明なエッジを含む。この場合のようにソース画像がエッチ・パターンであ
る場合、画像が充分な画質を提供し、パターン上のトレースやコンポーネントの分析が正
しく実施されることが重要である。カメラ・システムを用いて図5(b)のパターンの一
部のみを提供することができる。さらに、カメラ・システムにおけるカメラを調節して異
なった粒状度における画像を提供することができる。例えば、技術者がパターン内の特定
トレースまたはコンポーネントの詳細な分析を実施したい場合、カメラ・システムはパタ
ーン内のその特定トレースまたはコンポーネントに関連する特定フレームの微細な画像を
取り込むよう設定されることができる。
的データから引き出されたのではない例示的なグラフである。前述のとおり、圧縮画像フ
ァイルのサイズは画像の鮮明さの質に直接関係している。この関係を用いてカメラの焦点
設定を選択および/あるいは最適化することができる。そうする際、あるフレームに対し
複数の写真を撮り、これらの写真各々が圧縮される。分析を行ない、最大の圧縮ファイル
または最も大きい圧縮ファイルの1つが特定され、この圧縮ファイルを生成した画像を撮
るために用いられた焦点設定が選択される。この特定された圧縮ファイルは高画質の鮮明
な画像を示す高周波数成分を比較的大量に含む。
が示される。この曲線620上に鮮明さの質が特定の基準を満足する個所が1つまたは複
数存在する。一例において、曲線の頂点に対応する焦点設定630が選択される。別の例
において、水平閾値(図示せず)が曲線に適用され、閾値を越える複数の焦点設定の1つ
が選択される。このように、取り込まれた画像に対し鮮明さの閾値要件が満足される。当
業者であれば曲線620上の1つ以上の好ましい焦点設定を特定するために後述する反復
プロセスを含み多数の方法を適用できることを理解しよう。
から引き出されたのではない例示的なグラフである。圧縮画像ファイルのサイズも画像の
コントラストの質に直接関係している。この関係を用いてカメラの露出設定も選択および
/あるいは最適化することができる。ここでも、選択された露出設定を用いてあるフレー
ムに対し複数の写真を撮り、これらの写真各々が圧縮される。分析を行ない、最大の圧縮
ファイルまたは最も大きい圧縮ファイルの1つが特定され、この圧縮ファイルを生成した
画像を撮るために用いられた露出設定が選択される。
が示される。この曲線650上にコントラストの質が特定の基準を満足する個所が1つま
たは複数存在する。一例において、曲線の頂点に対応する露出設定660が選択される。
別の例において、水平閾値(図示せず)が曲線に適用され、閾値を越える複数の露出設定
の1つが選択される。このように、取り込まれた画像に対しコントラストの閾値要件が満
足される。ここでも、当業者であれば曲線650上の1つ以上の好ましい露出設定を特定
するために後述する反復プロセスを含み多数の方法を適用できることを理解しよう。
しカメラの焦点設定および露出設定を選択する方法を図示するフローチャートである。マ
ルチフレームのソース画像における第1フレームの上にカメラが位置付けられる(ステッ
プS710)。この第1フレームはマルチフレームのソース画像内の任意のフレームであ
って良い。カメラの好ましい焦点設定を特定するために自動焦点操作が実施される(ステ
ップS720)。発明の各種実施形態により、この自動焦点操作は画像の鮮明さおよび圧
縮画像ファイル間の関係を用いてこの好ましい焦点設定を特定する。
れる(ステップS730)。発明の各種実施形態により、この自動露出操作は画像のコン
トラストおよび圧縮画像ファイル間の関係を用いて好ましい露出設定を特定する。一旦、
好ましい焦点および露出設定が特定されると、対応する取り込み画像の第1フレームが格
納される(ステップS740)。次にマルチフレームのソース画像内に写真を撮るべき追
加フレームが存在するかの判定がなされる。追加フレームが存在しない場合方法は完了す
る(ステップS750)。追加フレームが存在する場合、カメラはマルチフレームのソー
ス画像における次のフレームの上に位置付けられ(ステップS760)、次のフレームに
対し自動焦点および自動露出操作が実施される。この次のフレームはしばしば前のフレー
ムに連続している。しかし次のフレームが非連続フレームである場合もあり得る。
分析方法を説明する例をいくつか以下に提供する。これらの例では反復が用いられるが、
限定的な意図はなく、これらの設定を特定する他の各種の方法が存在する点に留意するこ
とが重要である。
定する方法を図示する。第1の焦点設定をしたカメラがマルチフレームのソース画像にお
ける第1フレームの上に位置付けられる(ステップS810)。前述のとおり、この第1
フレームはソース画像内の任意のフレームであって良い。カメラにより第1フレームの複
数の画像が撮られる。複数の画像を用いて平均焦点インジケータ値(f0)が計算される
(ステップS820)。発明の各種実施形態で、この平均焦点インジケータ値は同じ個所
におけるセグメントの複数の写真にわたる圧縮画像ファイルの平均サイズを演算すること
により計算される。前述のとおり、光の変動などあるパラメータにより画像の画質が影響
される可能性がある。第1フレームの写真を複数撮り、これらの写真を圧縮し圧縮ファイ
ルのサイズを平均化することにより、第1の焦点設定を用いた写真のより予測可能な表現
が得られる。JPEGおよびTIFFファイル・フォーマットならびにこれらの変形を含
み各種の圧縮手法を用いることができるが、これらに限定されることはない。この平均焦
点インジケータはシステム内に配置されるメモリに保存される。平均焦点インジケータに
対応する平均写真(I0)もメモリに保存される。
テストする。この新しい設定を用い、フレームの画像を複数撮り、圧縮する。別の平均焦
点インジケータ(f)が計算され(ステップS840)、対応する平均写真(I)が特定
される。この他方の平均焦点インジケータ(f)およびそれに対応する平均写真(I)は
メモリ内に保存される。
行なわれ、どちらの焦点設定がより大きい平均圧縮画像ファイルを生成したか判定される
。発明の各種実施形態で、この比較は高周波成分をより大量に含む画像を有効に特定し、
これは画像内の鮮明なエッジを示すものである。
場合、手順は完了し(ステップS850)、第1の平均焦点インジケータ(f0)に対応
する焦点設定が選択される。しかし、第1の平均焦点インジケータ(f0)が他方の平均
焦点インジケータ(f)より小さい場合、第1の平均焦点インジケータの値が他方の平均
焦点インジケータ(f)の値により置き換えられる(ステップS860)。さらに第1の
平均写真(I0)が他方の平均写真(I)により置き換えられる。
線620に沿って頂点またはその付近の値を特定すべく反復的進行を可能にする。当業者
であれば複数の前以て計算された平均焦点インジケータを平均化することにより曲線62
0における軽度の落下を補正するという、より複雑な反復プロセスを実施し得ることを理
解しよう。
定する方法を図示する。先に特定された最適焦点設定を用い、かつ第1の露出設定をした
カメラが第1フレームの上に位置付けられる(ステップS910)。カメラにより第1フ
レームの複数の画像が撮られる。複数の画像を用いて平均露出インジケータ値(E0)が
計算される(ステップS920)。発明の各種実施形態で、この平均露出インジケータ値
は複数の写真にわたる圧縮画像ファイルの平均サイズを演算することにより計算される。
第1フレームの写真を複数撮り、これらの写真を圧縮し圧縮ファイルのサイズを平均化す
ることにより、第1の露出設定を用いた写真のより予測可能な表現が得られる。ここでも
、JPEGおよびTIFFファイル・フォーマットならびにこれらの変形を含み各種の圧
縮手法を用いることができるが、これらに限定されることはない。この平均露出インジケ
ータはシステム内に配置されるメモリに保存される。平均露出インジケータに対応する平
均写真(I0)もメモリに保存される。
に対しテストする。この新しい設定を用い、フレームの画像を複数撮り、圧縮する。別の
平均露出インジケータ(E)が計算され(ステップS940)、対応する平均写真(I)
が特定される。この他方の平均露出インジケータ(E)およびそれに対応する平均写真(
I)はメモリ内に保存される。
行なわれ、どちらの露出設定がより大きい平均圧縮画像ファイルを生成したか判定される
。発明の各種実施形態で、この比較は高周波成分をより大量に含む画像を有効に特定し、
これは画像内の質の高いコントラストを示すものである。
場合、手順は完了し(ステップS950)、第1の平均露出インジケータ(E0)に対応
する露出設定が選択される。しかし、第1の平均露出インジケータ(E0)が他方の平均
露出インジケータ(E)より小さい場合、第1の平均露出インジケータ(E0)の値が他
方の平均焦点インジケータ(E)の値により置き換えられる(ステップS960)。さら
に第1の平均写真(I0)が他方の平均写真(I)により置き換えられる。
同様、この手順により曲線650に沿って頂点またはその付近の値を特定すべく反復的進
行を可能にする。ここでも、当業者であれば複数の前以て計算された平均露出インジケー
タを平均化することにより曲線650における軽度の落下を補正するという、より複雑な
反復プロセスを実施し得ることを理解しよう。
供し得ることを理解しよう。従って発明の範囲は以下の特許請求の範囲によってのみ限定
される。
コンピュータ、240…ソース画像、310,330,350,370…進行、320,
340,360,380…第1フレーム、325,345,365,385…最終フレー
ム、420…ハウジング、430…焦点距離(f)、440…フレーム、610,640
…グラフ、620,650…曲線、630…焦点設定、660…露出設定。
Claims (1)
- ソース画像を複数のフレームに分割し、各フレームの写真を撮るカメラシステムであって、
前記フレームの上に位置付けることができ、焦点設定および露出設定を調整可能なカメラと、
前記カメラを前記ソース画像の上にある二次元空間内で動かす制御構造と、
前記カメラで撮られた写真から圧縮画像ファイルを生成する画像圧縮機構と、
前記圧縮画像ファイルを格納するメモリと、
前記圧縮画像ファイルの分析に基づき好ましい焦点設定および好ましい露出設定を特定するプロセッサと、を含み、
前記各フレームの写真を撮る工程が、焦点設定および露出設定を変更した複数の写真を撮影し、前記複数の写真から生成した複数の圧縮画像ファイルのファイルサイズを比較して、前記ファイルサイズが最大となる圧縮画像ファイルを前記フレームの圧縮画像ファイルとして、前記メモリに格納することを特徴とするカメラシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/778,968 | 2007-07-17 | ||
US11/778,968 US7969475B2 (en) | 2007-07-17 | 2007-07-17 | Low memory auto-focus and exposure system for large multi-frame image acquisition |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009027702A JP2009027702A (ja) | 2009-02-05 |
JP4702404B2 true JP4702404B2 (ja) | 2011-06-15 |
Family
ID=40264507
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008165523A Expired - Fee Related JP4702404B2 (ja) | 2007-07-17 | 2008-06-25 | カメラシステム |
Country Status (2)
Country | Link |
---|---|
US (1) | US7969475B2 (ja) |
JP (1) | JP4702404B2 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7969475B2 (en) * | 2007-07-17 | 2011-06-28 | Seiko Epson Corporation | Low memory auto-focus and exposure system for large multi-frame image acquisition |
JP4896852B2 (ja) | 2007-10-26 | 2012-03-14 | ルネサスエレクトロニクス株式会社 | オートフォーカス制御回路、オートフォーカス制御方法及び撮像装置 |
US8073199B2 (en) * | 2008-05-30 | 2011-12-06 | Drs Rsta, Inc. | Method for minimizing scintillation in dynamic images |
JP5793716B2 (ja) * | 2010-05-28 | 2015-10-14 | パナソニックIpマネジメント株式会社 | 撮像装置 |
US8760537B2 (en) | 2010-07-05 | 2014-06-24 | Apple Inc. | Capturing and rendering high dynamic range images |
US9161026B2 (en) | 2011-06-23 | 2015-10-13 | Hewlett-Packard Development Company, L.P. | Systems and methods for calibrating an imager |
JP5783953B2 (ja) * | 2012-05-30 | 2015-09-24 | 株式会社日立ハイテクノロジーズ | パターン評価装置およびパターン評価方法 |
AT514106A1 (de) * | 2013-04-10 | 2014-10-15 | Emco Test Prüfmaschinen Gmbh | Verfahren zum Fokussieren von kontrastbehafteten Bilddetails |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03128581A (ja) * | 1989-07-24 | 1991-05-31 | Ricoh Co Ltd | 画像入力装置 |
JPH03183148A (ja) * | 1989-12-12 | 1991-08-09 | Ngk Spark Plug Co Ltd | Icパッケージ検査システム |
JPH04373369A (ja) * | 1991-06-24 | 1992-12-25 | Canon Inc | 撮像装置 |
JPH0690396A (ja) * | 1992-06-29 | 1994-03-29 | Canon Inc | 撮像装置 |
JPH11264937A (ja) * | 1998-03-18 | 1999-09-28 | Olympus Optical Co Ltd | 顕微鏡 |
JP2000187165A (ja) * | 1998-12-22 | 2000-07-04 | Sony Corp | 顕微鏡装置 |
JP2001285857A (ja) * | 2000-03-29 | 2001-10-12 | Sony Corp | 撮像画像表示装置、撮像画像表示方法および角度/位置制御装置 |
JP2003153068A (ja) * | 2001-11-14 | 2003-05-23 | Konica Corp | 電子機器 |
JP2003219416A (ja) * | 2002-01-18 | 2003-07-31 | Hitachi Ltd | ビデオカメラ装置 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0622239B1 (en) | 1993-04-30 | 1998-08-26 | Hewlett-Packard Company | Multiple ink jet print cartridge alignment system |
JP3183148B2 (ja) | 1996-02-23 | 2001-07-03 | 日産自動車株式会社 | 無段変速機用vベルトの隙間測定方法 |
US5835108A (en) | 1996-09-25 | 1998-11-10 | Hewlett-Packard Company | Calibration technique for mis-directed inkjet printhead nozzles |
US6196652B1 (en) | 1998-03-04 | 2001-03-06 | Hewlett-Packard Company | Scanning an inkjet test pattern for different calibration adjustments |
JP3372494B2 (ja) | 1998-12-17 | 2003-02-04 | オリンパス光学工業株式会社 | 電子的撮像装置 |
US6347856B1 (en) | 1999-03-05 | 2002-02-19 | Hewlett-Packard Company | Test pattern implementation for ink-jet printhead alignment |
GB2359953B (en) * | 2000-03-03 | 2004-02-11 | Hewlett Packard Co | Improvements relating to image capture systems |
JP2002023044A (ja) * | 2000-07-12 | 2002-01-23 | Canon Inc | 焦点検出装置、測距装置及びカメラ |
US6485124B1 (en) | 2001-07-02 | 2002-11-26 | Lexmark International, Inc. | Optical alignment method and detector |
US7280149B2 (en) * | 2001-12-21 | 2007-10-09 | Flextronics Sales & Marketing (A-P) Ltd. | Method and apparatus for detecting optimum lens focus position |
US7075577B2 (en) | 2002-07-10 | 2006-07-11 | Altek Corporation | Auto-exposure power-saving device |
US6883892B2 (en) | 2002-10-31 | 2005-04-26 | Hewlett-Packard Development Company, L.P. | Printing apparatus calibration |
KR100547998B1 (ko) * | 2003-02-10 | 2006-02-01 | 삼성테크윈 주식회사 | 촬영 상태가 부적절하였음을 알려주는 디지털 카메라의제어방법 |
US7495695B2 (en) | 2003-07-18 | 2009-02-24 | Honda Giken Kogyo K.K. | Image processing device and method capable of emphasizing the contrast of an image taken by an image sensor |
US7030351B2 (en) | 2003-11-24 | 2006-04-18 | Mitutoyo Corporation | Systems and methods for rapidly automatically focusing a machine vision inspection system |
JP4407379B2 (ja) * | 2004-05-21 | 2010-02-03 | 株式会社ニコン | 電子カメラおよび画像処理システム |
JP4251650B2 (ja) | 2005-03-28 | 2009-04-08 | 株式会社カシオ日立モバイルコミュニケーションズ | 画像処理装置及びプログラム |
US7693304B2 (en) * | 2005-05-12 | 2010-04-06 | Hewlett-Packard Development Company, L.P. | Method and system for image quality calculation |
US7969475B2 (en) * | 2007-07-17 | 2011-06-28 | Seiko Epson Corporation | Low memory auto-focus and exposure system for large multi-frame image acquisition |
-
2007
- 2007-07-17 US US11/778,968 patent/US7969475B2/en not_active Expired - Fee Related
-
2008
- 2008-06-25 JP JP2008165523A patent/JP4702404B2/ja not_active Expired - Fee Related
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03128581A (ja) * | 1989-07-24 | 1991-05-31 | Ricoh Co Ltd | 画像入力装置 |
JPH03183148A (ja) * | 1989-12-12 | 1991-08-09 | Ngk Spark Plug Co Ltd | Icパッケージ検査システム |
JPH04373369A (ja) * | 1991-06-24 | 1992-12-25 | Canon Inc | 撮像装置 |
JPH0690396A (ja) * | 1992-06-29 | 1994-03-29 | Canon Inc | 撮像装置 |
JPH11264937A (ja) * | 1998-03-18 | 1999-09-28 | Olympus Optical Co Ltd | 顕微鏡 |
JP2000187165A (ja) * | 1998-12-22 | 2000-07-04 | Sony Corp | 顕微鏡装置 |
JP2001285857A (ja) * | 2000-03-29 | 2001-10-12 | Sony Corp | 撮像画像表示装置、撮像画像表示方法および角度/位置制御装置 |
JP2003153068A (ja) * | 2001-11-14 | 2003-05-23 | Konica Corp | 電子機器 |
JP2003219416A (ja) * | 2002-01-18 | 2003-07-31 | Hitachi Ltd | ビデオカメラ装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2009027702A (ja) | 2009-02-05 |
US20090021595A1 (en) | 2009-01-22 |
US7969475B2 (en) | 2011-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4702404B2 (ja) | カメラシステム | |
CN108335279B (zh) | 图像融合和hdr成像 | |
KR101803712B1 (ko) | 화상처리장치, 제어 방법, 프로그램 및 기록 매체 | |
US9426359B2 (en) | Digital image signal processing method, medium for recording the method, and digital image signal processing apparatus | |
US9992478B2 (en) | Image processing apparatus, image pickup apparatus, image processing method, and non-transitory computer-readable storage medium for synthesizing images | |
CN115052104B (zh) | 图像处理方法、电子装置及非易失性计算机可读存储介质 | |
WO2007049634A1 (ja) | 撮影装置、画像処理装置およびプログラム | |
JP2019505148A (ja) | パノラマ画像を生成する装置及び方法 | |
US20150373258A1 (en) | Systems and Methods for Automatically Capturing Digital Images Based on Adaptive Image-Capturing Templates | |
JP6755787B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
US10109036B2 (en) | Image processing apparatus, control method for same, and program that performs image processing for image data having a focus state that is changeable | |
JP6355315B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2018037857A5 (ja) | 画像処理装置、画像処理方法、コンピュータプログラムおよび記憶媒体 | |
GB2553447A (en) | Image processing apparatus, control method thereof, and storage medium | |
WO2018196854A1 (zh) | 一种拍照方法、拍照装置及移动终端 | |
JP2022083913A (ja) | 画像処理装置、画像処理方法及びプログラム | |
US9350892B2 (en) | Image processing apparatus and image processing method | |
US10362213B2 (en) | Imaging apparatus and imaging method | |
US20170034423A1 (en) | Image capturing apparatus | |
JP2012222465A (ja) | 画像処理装置及び画像処理方法、並びにコンピューター・プログラム | |
JP2004310504A (ja) | 画像処理方法 | |
JP2017229025A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2020035051A (ja) | レシート等帳票画像自動取得・読取方法、プログラム、及び携帯端末装置 | |
JP7020387B2 (ja) | 撮像制御装置、撮像装置及び撮像制御プログラム | |
JP2016162376A (ja) | 画像処理装置、撮像装置、および画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100520 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100706 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100902 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110221 |
|
LAPS | Cancellation because of no payment of annual fees |