JP2004336751A - 画像ぼけを改善する方法及びシステム並びにカメラ - Google Patents
画像ぼけを改善する方法及びシステム並びにカメラ Download PDFInfo
- Publication number
- JP2004336751A JP2004336751A JP2004131482A JP2004131482A JP2004336751A JP 2004336751 A JP2004336751 A JP 2004336751A JP 2004131482 A JP2004131482 A JP 2004131482A JP 2004131482 A JP2004131482 A JP 2004131482A JP 2004336751 A JP2004336751 A JP 2004336751A
- Authority
- JP
- Japan
- Prior art keywords
- camera
- message
- stability measure
- image
- blur
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00132—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
- H04N1/00183—Photography assistance, e.g. displaying suggestions to the user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/21—Intermediate information storage
- H04N1/2104—Intermediate information storage for one or a few pictures
- H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2101/00—Still video cameras
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
Abstract
【課題】 画像ぼけの問題に対する解決策を提供する。
【解決手段】 デジタル画像データから安定性測度を計算するステップ(902)と、安定性測度を所定値と比較するステップ(904)と、安定性測度と所定値との比較が、ぼけが発生する可能性があることを示す場合に、撮影パラメータに基づいてメッセージを選択するステップ(908)を含む。
【選択図】 図9
【解決手段】 デジタル画像データから安定性測度を計算するステップ(902)と、安定性測度を所定値と比較するステップ(904)と、安定性測度と所定値との比較が、ぼけが発生する可能性があることを示す場合に、撮影パラメータに基づいてメッセージを選択するステップ(908)を含む。
【選択図】 図9
Description
本発明は、概して写真撮影に関し、さらに詳しくは、画像ぼけを改善する方法及びシステム並びにカメラに関する。すなわち、本発明は、撮影者に教示するカメラぶれ警告及びフィードバックシステムに関する。
写真撮影において、画像ぼけ(image blur)は、一般的な問題である。写真におけるぼけの一般的な原因には、被写体の動き、カメラの動き(ぶれ)及び焦点合せの誤りがある。ぼけは、ぼけの原因をいかに診断するか、及び撮影の結果を改善するために自身の写真技術をいかに変更するかを知らない可能性のある、無頓着な又は素人の撮影者に対する特定の問題である。新しいコンシューマカメラモデルは、非常に長い焦点距離が実現可能なズームレンズを備えるように製作されているため、カメラのぶれによるぼけは特に厄介である。
カメラぶれによる画像ぼけの問題に対処する助けとなる様々な装置及び技術が提案されてきた。例えば、Murakoshi(米国特許第4,448,510号)は、加速度計を用いてカメラぶれを検出し、加速度が閾値レベルを越えた場合にカメラのユーザに対して指示を提供する。
Satoh(米国特許第6,101,332号)もまた、カメラぶれを検知し、ぶれ情報を他のカメラパラメータと結合することによりどれくらいの画像ぼけがもたらされる可能性があるかを推定する。この場合、発光ダイオードのセットが、撮影者に対して推定値を知らせる。
別の手法は、カメラ動作を自動化し、カメラに対しぼけを最小化する設定を選択させるというものであった。例えば、Bolle他(米国特許第6,301,440号)は、写真のいくつかの様相を改善する目的で様々な画像分析技術を適用する。
これらの手法は、各々欠点を有する。上記技術には、カメラに対して高価な電気機械コンポーネントを追加する必要のある可能性があり、それによりカメラコストが増大する。これらの技術は、画像ぼけの1つのあり得る原因にしか対処しない。これらの技術は、カメラユーザに対し、ユーザの写真の質をいかにして向上させるかに関するガイダンスをほとんど与えず、実際に、撮影者によるカメラの制御を低減する自動化を追加することにより、特定の写真がぼける理由に関する謎がさらに拡大する可能性がある。
これらの問題点にも対処する、画像ぼけの問題に対する解決法が必要である。
カメラは、シーンの連続したデジタル画像を作成し、シーンの最終写真におけるぼけを推定するための安定性測度を計算する。カメラは、レンズ焦点距離,フォーカス距離,シーン明度値,及びシャッタースピード等の情報を結合して、ぼけを低減する可能性がある代替のカメラ設定を確定する。カメラは、ぼけを低減する可能性がある提案されたカメラ設定変更を、撮影者に伝達する。この伝達は、任意選択(オプション)で、最終写真が撮影される前に行われても後に行われてもよく、いくつかの形態のうちの1つをとってもよい。カメラは、任意選択でデジタルカメラであってもよい。設定変更の提案を、任意選択で、最終デジタル写真と共に画像ファイルに格納してもよい。
この出願は、同じくHewlett-Packard Development Company, L.P.に譲渡された「Method and apparatus for computing an image stability measure」と題され、2003年4月30日に出願された、係属中の米国特許出願第10/427,300号に関連する。
図1は、カメラのブロック図を示している。レンズ101が、シーン(図示せず)から光を収集する。収集された光は、向きが変えられて(符号102参照)、電子アレイ光センサ103上にシーンの画像を形成する。センサは、CCD素子,CMOSセンサ等のアレイであってもよい。レンズ101の動作を、論理ユニット110からの制御信号113によって制御してもよい。論理ユニット110は、マイクロプロセッサシステム,デジタル信号プロセッサ,専用ハードウェア,又はこれらの組合せから成ってもよい。同様に、センサの動作も、論理ユニット110からの制御信号105によって制御してもよい。画像情報信号104は、センサ103から論理ユニット110に流れる。フラッシュ又はストロボ106を利用して、シーンに追加の光107を供給してもよい。ストロボ106は、ストロボ電子機器108によって操作され、ストロボ電子機器108は、論理ユニット110によって制御される。カメラは、画像データ又は他の情報を表示し得るディスプレイ109を備えてもよい。カメラは、画像データの格納及び再現とともに他の装置(図示せず)とのデータ交換のために記憶装置111を備えてもよい。記憶装置111は、揮発性及び不揮発性の両方の形態のデータ記憶域を備えてもよい。カメラのユーザは、様々なユーザコントロール112を通してカメラを操作してもよい。
カメラがデジタルカメラである場合には、センサ103は、最終写真自体を撮影するとともに、最終写真が撮影される前にカメラぶれを検出するため,出レベルを確定するため,フォーカスフィードバックを提供するため,及び他の機能のために使用する、カメラの主デジタルセンサであってもよい。カメラがフィルムカメラである場合には、最終写真自体がフィルムに記録されている間に、センサ103を使用して、最終写真が撮影される前の露出確定,ぶれ検出,又は他の機能のために、デジタル画像を収集してもよい。
レンズ101は、センサ103上に画像を形成する。すなわち、シーンの各位置からの光をセンサ103上の特定の位置に投影する。センサ103は、受光素子のアレイを備えてもよい。通常は、各受光素子は、素子上に入る光の強度に比例して電荷を蓄積する。時々、各受光素子が「光を集積する」と言う。
通常の動作時、以下のステップにより撮影露光を行ってもよい。第1に、受光素子の電荷を空にする。そして、測定された露出時間にわたり、光がセンサ103に入るのを可能にする。レンズ101によりシーン画像がセンサ103上に投影されるため、幾何学的にシーンの明るい部分に対応する受光素子が、それより暗いシーンの位置に対応する受光素子より強度の光を受取り、それにより明るいシーンの部分に対応する素子がより多くの電荷を蓄積する。露出時間の最後に、シャッターを使用してセンサ103に入る光を遮ることにより、又は電荷をセンサ103の記憶素子にシフトさせることにより、電荷蓄積を停止する。通常では、電荷は、次いで、センサ103から読み出され、各位置に蓄積された電荷の量を測定して、通常はアナログ・デジタル(A/D)変換器を使用して数に変換する。しばしば、数が大きいほど明るいシーン位置を表すが、反対の構成も可能である。
電荷が定量化されると、数のアレイがもたらされる。各数は、特定のシーン位置に対応し、そのシーン位置の明度を表す。このアレイを、デジタル画像,デジタル写真,又は単に画像と呼んでもよい。
しばしば、特定のシーン位置,その対応する受光素子,及び受光素子の電荷を測定することからもたらされる数値を指すのに、「ピクセル(pixel)」という用語を使用する。「ピクセル」は、シーン位置に関連する数値のセットを指してもよく、それら値の各々が、後述するように異なる色を表す。「ピクセル」は、「ピクチャエレメント(picture element)」という用語の短縮語である。「ピクセル」という用語がシーン位置を指しているか、センサ素子を指しているか、或いは数値又は数値のセットを指しているかは、概して言及部分の文脈から明らかである。
多くのカメラでは、いくつかのセンサピクセルに光学フィルタを適用してもよく、それにより、各ピクセルが可視スペクトルのサブセットのみからの光を集積する。例えば、簡単に言うと、ピクセルには、赤色光に対応する波長のみを透過させるフィルタを有するものがあってもよく、緑色光に対応する波長のみを透過させるフィルタを有するものがあってもよく、青色光に対応する波長のみを透過させるフィルタを有するものがあってもよい。それらピクセルを、夫々「赤ピクセル」、「緑ピクセル」及び「青ピクセル」と呼んでもよい。かかるセンサを使用して、カラー写真を撮影することが可能である。当業者は、本発明を、しばしば「白黒」カメラと呼ぶカラーフィルタの無いカメラで容易に具体化してもよい。
図2は、ベイヤパターンと呼ばれる一般的な配列の赤,緑,及び青ピクセルを備えた電子アレイ光センサの簡略化した概略図を示す。実際のセンサは、非常に多くのピクセルを有してもよいが、図2の簡略化した図は、本発明の例示的な実施形態を説明する役割を果たす。カラーフィルタの他の多くの配列が可能であり、当業者は、本発明を他のカラーフィルタ配列を備えたカメラで具体化してもよい、ということを認めるであろう。
図2のアレイを、各々がセンサピクセルに対応する、デジタル画像における数値のアレイを表すものと考えてもよい。図2においてアレイの左縁と上縁とに示す数は、特定のピクセルを参照する便宜上のものである。例えば、行0において、列0は「R」とマークされたピクセルであり、その特定のピクセルの上に赤色フィルタがあることを示す。このピクセルの数値を、R0,0と呼んでもよい。行0において、列1は「G」とマークされた緑ピクセルであり、数値G0,1を有する。
数値的なピクセル値を使用して、特定のデジタル画像に対するエッジ検出性能指数(figure of merit(FOM))を計算してもよい。エッジ検出FOMは、画像における互いに比較的近いピクセル間の明度変化を測定し、画像における高周波数成分を示すものである。例えば、図2の例示的なアレイにおいて、エッジ検出FOMを計算する1つの方法は、同様の色の水平方向に隣接するピクセル間の差の絶対値を合計することである。この公式では、FOMの赤成分は次のようになる。
Red_sum=|R0,0−R0,2|+|R0,2−R0,4|+|R0,4−R0,6|+
|R2,0−R2,2|+|R2,2−R2,4|+|R2,4−R2,6|+
|R4,0−R4,2|+|R4,2−R4,4|+|R4,4−R4,6|
Red_sum=|R0,0−R0,2|+|R0,2−R0,4|+|R0,4−R0,6|+
|R2,0−R2,2|+|R2,2−R2,4|+|R2,4−R2,6|+
|R4,0−R4,2|+|R4,2−R4,4|+|R4,4−R4,6|
青成分は次のようになる。
Blue_sum=|B1,1−B1,3|+|B1,3−B1,5|+|B1,5−B1,7|+
|B3,1−B3,3|+|B3,3−B3,5|+|B3,5−B3,7|+
|B5,1−B5,3|+|B5,3−B5,5|+|B5,5−B5,7|
Blue_sum=|B1,1−B1,3|+|B1,3−B1,5|+|B1,5−B1,7|+
|B3,1−B3,3|+|B3,3−B3,5|+|B3,5−B3,7|+
|B5,1−B5,3|+|B5,3−B5,5|+|B5,5−B5,7|
緑成分は次のようになる。
Green_sum=|G0,1−G0,3|+|G0,3−G0,5|+|G0,5−G0,7|+
|G1,0−G1,2|+|G1,2−G1,4|+|G1,4−G1,6|+
|G2,1−G2,3|+|G2,3−G2,5|+|G2,5−G2,7|+
|G3,0−G3,2|+|G3,2−G3,4|+|G3,4−G3,6|+
|G4,1−G4,3|+|G4,3−G4,5|+|G4,5−G4,7|+
|G5,0−G5,2|+|G5,2−G5,4|+|G5,4−G5,6|
Green_sum=|G0,1−G0,3|+|G0,3−G0,5|+|G0,5−G0,7|+
|G1,0−G1,2|+|G1,2−G1,4|+|G1,4−G1,6|+
|G2,1−G2,3|+|G2,3−G2,5|+|G2,5−G2,7|+
|G3,0−G3,2|+|G3,2−G3,4|+|G3,4−G3,6|+
|G4,1−G4,3|+|G4,3−G4,5|+|G4,5−G4,7|+
|G5,0−G5,2|+|G5,2−G5,4|+|G5,4−G5,6|
そして、エッジ検出FOMは、Red_sum+Green_sum+Blue_sumである。
高周波数成分とも呼ばれる、画像における詳細な部分は、FOMの値を増大させる傾向にあるため、詳細な画像ほど、詳細でない画像より高いFOMを有することになる。このため、エッジ検出FOMのみでは、画像におけるぼけの指示(indication)が与えられない。
しかしながら、画像のぼけは、高周波数成分を低減する傾向にある。ぼけの少なくとも2つの一般的な原因、すなわちカメラぶれ及び被写体の動きは、しばしば、周期的であり、又は往復するため、それらの原因は、様々な量のぼけをもたらす傾向にある。ある程度の時間にわたってエッジ検出FOMの変化を追跡することにより、画像安定性測度を計算することができる。
通常、カメラは、最終写真の撮影に備えてシーンのいくつかの予備デジタル画像を撮影する。これらの予備デジタル画像を使用して、ユーザに対し、露出確定のため、焦点合せのため、又は他の目的のために写真のプレビュー(しばしばディスプレイ109にリアルタイムに表示される)を提供してもよい。各予備デジタル画像は、上述した方法で撮影される。すなわち、センサを初期化し、光がセンサに入り電荷が蓄積するのを可能にし、露光を停止し、センサピクセルにおける電荷量を定量化して数値アレイに編成する。これらの予備写真を、間断なく撮影してもよい。予備画像は、センサ103において利用可能なピクセルの全てを使用しても、或いは利用可能なピクセルの任意のサブセットを使用してもよい。本発明の例示的な実施形態によれば、カメラは、その画像ぼけの推定においてあらゆる目的のために撮影された予備写真を使用してもよく、或いは画像ぼけの推定という目的のみのために予備写真を撮影してもよく、或いはそれらの両方の組合せであってもよい。
最終写真は、予備写真がカメラを準備するのに役立つ、その対象となる写真であり、通常はカメラの記憶装置111に格納される。
カメラぶれ又は被写体の動きによる画像ぼけを、ある程度の時間にわたってエッジ検出FOMの変動を検査することにより推定してもよい。データの変動の都合のよい測度は、標準偏差である。本発明の例示的な実施形態によれば、画像ぼけを、最近のいくつかの予備デジタル写真から計算されるエッジ検出FOM値の標準偏差を使用して推定してもよい。
このため、n枚の連続した予備写真からのエッジ検出FOM値をFOM1、FOM2、……FOMnとして指定することにより、安定性測度S1を次のように計算することができる。
S1=SDDEV(FOM1,FOM2,……FOMn)
S1=SDDEV(FOM1,FOM2,……FOMn)
別の予備写真が撮影された後、そのエッジ検出FOMをFOMn+1と指定してもよい。そして、最新のn個のFOM読取値は、FOM2,FOM3,……FOMn+1となり、新たな安定性測度S2を、最新のn個のFOM読取値の標準偏差として計算してもよい。
S2=SDDEV(FOM2,FOM3,……FOMn+1)
S2=SDDEV(FOM2,FOM3,……FOMn+1)
下記の表1は、カメラを手で持った場合と三脚で支持した場合とのシーンからの20個の連続したエッジ検出FOM読取値を示している。また、安定性測度を、標準偏差を計算するために十分なFOM読取値が累積された時に開始するようにも示している。各安定性測度は、先の6つのFOM読取値の標準偏差である。
図3A及び図3Bは、表1からのデータをグラフ形式で示している。図3Aは、三脚に取付けた場合と手で持った場合との両方に対するエッジ検出FOM読取値を示している。図3Bは、図3AのFOM読取値から計算した安定性測度Sを示している。三脚の場合と手持ちの場合とに対するFOM読取値が概して同様の大きさであっても、安定性測度Sは、撮影される可能性のある写真におけるあり得るぼけを定量化する手段を提供する。表1のデータは、カメラが三脚で使用される場合(この場合、カメラぶれは最小である可能性が高い)、安定性測度Sは低い、ということを示している。カメラが手で持たれる場合(この場合、カメラぶれは三脚の場合より著しい可能性が高い)、安定性測度Sはより高くなる。
添付の特許請求の範囲内で他の技術を使用することにより、エッジ検出FOM,安定性測度S,又は両方を計算してもよい。例えば、エッジ検出FOMを、同じ色の水平に隣接するピクセルではなく垂直に隣接するピクセル間の差の絶対値を合計することによって計算してもよい。対角線上に隣接するピクセルを使用してもよく、或いはこれらの全ての何らかの組合せを使用してもよい。同様に、絶対値の代りにピクセル値の差の平方を使用してもよい。或いは、必ずしも隣接せず単に近接するピクセルを使用してもよい。近接ピクセルを、僅かな数の他のピクセルによって分離してもよい。複数の多色ピクセルを結合することによりスーパーピクセルを作成してもよく、それをその後、他のスーパーピクセルから減じることによりFOMを形成する。
安定性測度Sを、標準偏差の代りに過去のいくつかのFOM測定値の分散を使用して計算してもよい。分散は、標準偏差の平方である。ある程度の時間にわたるエッジ検出FOMの変動を定量化する他の技術を想定してもよい。上述した方法により、値が高いほどよりぼけがあることを示す安定性測度がもたらされるが、安定性測度の値が高いほどぼけのないことを示す方法も想定することができる。
図4は、本発明の例示的な実施形態による安定性測度を計算する方法を説明するフローチャートを示している。ステップ402において、予備写真を撮影する。ステップ404において、予備写真からエッジ検出性能指数を計算して格納する。判断ブロック406では、N枚の予備写真が撮影されたか否かを検査する。撮影されていない場合には、制御はステップ402に戻り、別の予備写真を撮影して分析する。N枚の予備写真が撮影された場合には、制御はステップ408に進み、最新のN個の性能指数の変動を計算する。この変動が、安定性測度Sである。
カメラは、安定性測度Sを、撮影者のために様々な方法で使用することができる。カメラは、安定性情報を使用して、撮影者に対し画像ぶれの危険を警告し、結果としての写真の質を向上させる可能性の高いカメラ設定変更を提案し、又は写真が撮影された後のその写真におけるぼけを説明するのを助けてもよい。例えば、カメラは、図3A及び図3Bに示すぼけ推定方法を使用して、所定値を下回る安定性測度が安定した画像を示すが、所定値を上回る読取値が最終写真にぼけのある可能性が高いことを示す、と判断してもよい。図3A及び図3Bの例では、安定性読取値Sが10を超過した場合、カメラは、画像の質を向上させる技術を提案することにより、ユーザに警告してもよい。例えば、図5は、本発明の例示的な実施形態によるカメラユーザインタフェースの一部を示す。カメラは、最終写真においてぼけがある可能性が高いと判断し、カメラのディスプレイ109を使用して、結果としての質を向上させるためにカメラを三脚の上に配置するよう提案する。この例では、カメラは、単純に、ディスプレイ109においてプレビュー画像の上に提案「三脚を使用」を重ね合わせる。図5はカメラの外側に組込まれたフラットパネルディスプレイを示すが、ディスプレイ109は、カメラにおいてビューファインダーのような入口を通して見られるマイクロディスプレイであってもよく、必ずしも、カメラを何気なく見た時に見えなくてもよい。
カメラは、写真の質を向上させるために何れの設定変更を推奨するかを判断する際に他のパラメータ(撮影パラメータ;写真パラメータ)を考慮してもよい。例えば、カメラの自動露出システムが非常に高速のシャッタースピードを選択した場合には、カメラ又は被写体が相当に移動している場合であってもぼけの無い写真を撮影することができる可能性が高くなる。この場合、カメラは、高品質写真である可能性が高いことを認知してもよく、ユーザに対していかなる差し迫った問題も警告しない。カメラは、シャッタースピードの関数として、警告をトリガするSについての閾値を変更してもよい。
多くのカメラは、ズームレンズを有しており、撮影者が特定の状況に対して適当なレンズ焦点距離を選択するのを可能にする。焦点距離の長いレンズほどカメラセンサ103上に大きい画像を投影し、そのためカメラぶれの影響が拡大する。最近の多くのカメラでは、カメラロジック110がレンズ焦点距離を制御しかつ監視することができる。相当の画像ぶれが検出され、カメラが、レンズが長焦点距離に設定されていると認知する場合には、カメラは、画像ぼけがカメラぶれによってもたらされる可能性が高いとの結論を下し、カメラを三脚に取付けるか又は他の方法で静止させた状態に保持するように推奨する。
カメラのフラッシュ又はストロボ設定を考慮してもよい。ストロボを使用してシーンに光を追加することにより、カメラがより高速なシャッタースピードで写真を撮ることができ、それによりカメラぶれ又は被写体動きの影響が低減される。ストロボが写真に対して優勢な光源である場合には、ストロボによって発せられる光の持続時間が、有効なシャッターとして作用し、非常に高速な有効シャッタースピードをもたらす。しばしば、ストロボを使用して、いかなるカメラ又は被写体の動きも「凍結させる」ことができる。相当なぼけが検出される場合には、カメラは、撮影者がカメラのストロボを使用可能にするように推奨してもよい。自動モード等において、カメラのストロボが既に使用可能とされている場合には、カメラは、ストロボを使用しなくても適当に露光された写真を撮影することができる可能性がある場合であっても、あり得るぼけが検出されるときにストロボを使用するように選択してもよい。
しかしながら、カメラストロボは、通常は能力が限られており、カメラに比較的近い物体しか十分に照明することができない。カメラの有効なストロボ範囲は、ストロボの光放射能力と、カメラのISOスピード設定と、レンズ絞りとを含むいくつかの要素によって決まるが、通常は、数フィート以下である。写真の被写体がカメラの有効ストロボ範囲を超える場合には、ストロボの効果は殆どなくなる。
多くのカメラが、適当な焦点が得られるようにカメラロジック110がレンズを制御する、自動焦点合せ機能を有する。従って、カメラロジック110は、カメラから写真の焦点の合った写真の被写体までの距離に関する情報を有する。カメラは、いかなる設定変更を推奨するか確定する際にこの情報を使用してもよい。被写体がカメラの有効ストロボ範囲を超える場合には、カメラは、ストロボが結果としての写真に対して殆ど効果を与えない可能性が高いため、ストロボを使用するように推奨しなくてもよい。同様に、カメラの自動露出確定によって測定される際に、シーンが非常に明るい場合には、ストロボを使用することは殆ど効果がない可能性があり、カメラは、画像ぼけを最小限にするためにストロボを使用するように推奨しなくてもよい。
下記の表2は、本発明の例示的な実施形態による実行可能な意思決定方法を示している。いかなる潜在的なぼけも検出されない場合には、カメラは、ユーザに対し、画像が安定していることを指示してもよく、或いは、単にいかなる指示も行わなくてよい。潜在的なぼけが検出されると、カメラは、表2又は同様の意思決定ツールに基づいて行うメッセージの表示又は指示を選択してもよい。
当然ながら、添付の特許請求の範囲内で他の決定表も可能である。さらに、カメラは、その提案を伝達するために文字メッセージではなくアイコン又は他の記号を使用してもよい。図6は、アイコン601を使用して撮影者に対してカメラを三脚上に載置するよう提案するカメラディスプレイを示している。アイコン601は、三脚上のカメラの図案化表現であり、それを、ディスプレイ109において画像の上に重ね合せてもよい。
カメラを、撮影者が写真の構図を決めている間に又は他の時に、その警告メッセージをディスプレイ109に表示するように構成してもよい。例えば、多くのカメラは、ディスプレイ109上でプレビュー画像を使用せずに写真の構図を決める代替方法を撮影者に提供する光学ビューファインダーを有する。撮影者は、しばしば、カメラバッテリ電源を節約するために、構図決めのためにライブプレビューディスプレイではなく光学ビューファインダーを使用する。しかしながら、多くのカメラは、ディスプレイ109を構図決めに使用しなかった場合でも、撮影される各写真を一時的に表示する。本発明の例示的な実施形態によるカメラは、撮影者に対して撮影されたばかりの写真がぼけている可能性があることを知らせ、質の向上した写真を撮影し直すための代替カメラ設定を提案するために、この一時的な表示においてその警告メッセージを表示してもよい。
本発明の例示的な実施形態によるフィルムカメラは、ディスプレイ109等のデジタルディスプレイを有していない可能性があるが、光学ビューファインダーの視野の周囲に撮影情報を表示してもよい。図7は、本発明の例示的な実施形態による追加の情報を表示する光学ビューファインダーを示している。かかるビューファインダーでは、画像領域701は、光学系のセットを通して撮影者に直接可視であるシーンの像である。情報領域702は、画像領域701におけるシーンに隣接して現れるように配置された、照明されたインジケータをしばしば使用して、カメラの構成に関するあらゆる信号及び情報を提示する。情報領域702に提示されるデータは、現時点において選択されているシャッタースピード及び絞り、焦点指示等を含んでもよい。アイコン703は、三脚に取付けたカメラの図案化表現であり、可視にすることによって、撮影者に対し、潜在的なぼけが検出されたということ及びカメラを安定化することによりこれから撮影する写真の質を向上させることができるということを示してもよい。
カメラは、また、代替設定を提案するそのメッセージを、カメラ記憶装置111に格納されたデジタル写真のコピーと関連付けてもよい。例えば、メッセージを、タグ付き画像ファイルフォーマット(Tagged Imaged File Format(TIFF))等のファイルフォーマットでカスタムタグとして格納してもよく、或いは、別の種類の画像フォーマットと関連付けてもよい。そして、撮影者が後にカメラのディスプレイ109において写真を見ている間にメッセージにアクセスして表示してもよい。メッセージが画像ファイルに関連する場合には、そのメッセージは、また、デジタル写真を別の装置に転送した後にも利用可能である。例えば、多くの撮影者は、自身のデジタル画像を、格納するため、さらに処理するため、又は他人に送信するため、コンピュータにアップロードする。コンピュータ上で実行している画像編集及び閲覧ソフトウェアは、メッセージの表示を可能にしてもよい。デジタル画像と関連するメッセージとを転送することは、適当なインタフェースを備えたケーブルを通して、無線リンクを通して、或いはフロッピーディスク又はメモリモジュール等の記憶媒体を物理的に移動することにより、達成してもよい。
図8は、本発明の例示的な実施形態によるシステムを示している。コンピュータ800は、リンク803を介してカメラ802に接続され、カメラ802から画像データを受取る。画像がディスプレイ801に表示され、コンピュータ上のソフトウェアによって、ユーザがデジタル画像を編集し、管理し、分配することができるようになっている。図8に示すように、ソフトウェアは、カメラにより画像ファイルに関連付けられた診断メッセージを抽出し、ユーザが写真におけるぼけについてのあり得る原因を理解することができるように、そのメッセージ又はそれのバージョンを表示してもよい。
図9は、本発明の例示的な実施形態による安定性測度を使用する方法のフローチャートを示している。図9の方法を、カメラロジック110により、通常は格納されたプログラムを実行するマイクロプロセッサにより、実行してもよい。方法の一部を、カメラの外部、例えばコンピュータにおいて実行してもよい。ステップ902において、安定性測度Sを計算する。ステップ904において、測度を所定値と比較することにより、写真にぼけが現れる可能性が高いか否かを確かめる。判断ブロック906は、その比較の結果に応じて異なる2つの実行(execution)を行う。Sが所定値より大きい場合には、ステップ908において、メッセージを選択する。このメッセージを、様々な撮影パラメータ(カメラパラメータ)に基づいて選択する。オプションのステップ910では、最終写真が撮影される前にメッセージを表示してもよい。
判断ステップ912において、最終写真が撮影されるべきとの指示を何ら受取っていなかった場合には、実行はステップ902に戻ってもよい。ステップ902に戻ることは、プレビューモードにおいて予備写真を使用して安定性測度を繰返し計算して使用するカメラには通常であり得る。カメラは、S1及びS2としばしば呼ばれる2つ以上の位置を有するシャッターリリーススイッチを使用してもよい。プレビューモードを、シャッターリリーススイッチをS1位置に押下することにより開始してもよい。最終写真の撮影を、シャッターリリーススイッチを完全にS2位置まで押下することによって開始してもよい。撮影者が写真撮影を開始するために使用するコントロールは、カメラが完全に電子式であって実際のシャッターを有していない場合であっても、シャッターリリーススイッチ又はボタンとしばしば呼ばれる。
かかる指示を受取った場合には、例えば撮影者がカメラのシャッターリリースを完全に押下したときに、カメラはオプションのステップ914〜920に進んでもよい。ステップ914において、Sを所定値と比較してもよい。オプションのステップ916において、カメラ上にメッセージを表示してもよく(最終写真が撮影された後)、ステップ918において、メッセージを画像ファイルに関連付けてもよく、或いはステップ920において、コンピュータ上にメッセージを表示してもよい。通常、ステップ920は、写真をコンピュータに転送した後に遂行する。オプションのステップ910,916,918及び920は、相互に排他的ではない。それらのいかなる組合せを実行してもよい。
本発明の上述した説明は、例示及び説明の目的で提示したものである。それは、網羅的であるようにも、開示した厳密な形態に発明を限定するようにも、意図されておらず、上記教示に鑑みて他の変更及び変形が可能であってもよい。本発明の原理とその実用的な適用とをもっともよく説明することにより、当業者が、企図された特定の使用に適するよう、本発明をあらゆる実施形態において及びあらゆる変更形態でもっともよく利用することができるように、実施形態を選択し説明した。添付の特許請求の範囲は、従来技術によって限定されることを除き、本発明の他の代替実施形態を包含するように解釈される、ということが意図されている。
101 レンズ
103 電子アレイ光センサ
108 ストロボ電子機器
109 ディスプレイ
110 論理ユニット
111 記憶装置
112 ユーザコントロール
601,703 アイコン
800 コンピュータ
801 ディスプレイ
802 カメラ
103 電子アレイ光センサ
108 ストロボ電子機器
109 ディスプレイ
110 論理ユニット
111 記憶装置
112 ユーザコントロール
601,703 アイコン
800 コンピュータ
801 ディスプレイ
802 カメラ
Claims (10)
- (A) デジタル画像データから安定性測度を計算するステップと、
(B) 前記安定性測度を所定値と比較するステップと、
(C) 前記安定性測度と前記所定値との比較が、ぼけが発生する可能性があることを示す場合に、撮影パラメータに基づいてメッセージを選択するステップと、
を含むことを特徴とする画像ぼけを改善する方法。 - 前記メッセージをカメラのユーザに伝達するステップをさらに含むことを特徴とする請求項1に記載の画像ぼけを改善する方法。
- 前記メッセージをカメラのユーザに伝達するステップは、最終写真が撮影される前に行われることを特徴とする請求項2に記載の画像ぼけを改善する方法。
- 前記メッセージをカメラのユーザに伝達するステップは、最終写真が撮影された後に行われることを特徴とする請求項2に記載の画像ぼけを改善する方法。
- 前記安定性測度は、最終写真におけるぼけを推定することを特徴とする請求項2に記載の画像ぼけを改善する方法。
- 前記メッセージを画像ファイルに関連付けるステップをさらに含むことを特徴とする請求項1に記載の画像ぼけを改善する方法。
- 前記メッセージは、前記ユーザが前記カメラを三脚上に載置するように提案することを特徴とする請求項1に記載の画像ぼけを改善する方法。
- (A) 電子アレイ光センサと、
(B) 前記電子アレイ光センサからのデータを制御して受取り、
〈a〉 デジタル画像データから安定性測度を計算すること、
〈b〉 前記安定性測度を所定値と比較すること、
〈c〉 前記安定性測度が前記所定値を超える場合に、撮影パラメータに基づいてメッセージを選択すること、
を実行するようにプログラムされた論理ユニットと、
を具備することを特徴とするカメラ。 - 前記メッセージをカメラのユーザに伝達する手段をさらに含むことを特徴とする請求項8に記載のカメラ。
- (A) 安定性測度を計算し、前記安定性測度と撮影パラメータとに基づいてメッセージを選択し、前記メッセージを画像ファイルに関連付けるカメラと、
(B) コンピュータと、
を具備し、
前記画像ファイル及びこれに関連するメッセージは、前記カメラから前記コンピュータに転送され、前記メッセージは、前記コンピュータ上で表示されることを特徴とするシステム。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US10/427,264 US7397500B2 (en) | 2003-04-30 | 2003-04-30 | Camera shake warning and feedback system that teaches the photographer |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2004336751A true JP2004336751A (ja) | 2004-11-25 |
Family
ID=33310091
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004131482A Pending JP2004336751A (ja) | 2003-04-30 | 2004-04-27 | 画像ぼけを改善する方法及びシステム並びにカメラ |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US7397500B2 (ja) |
| JP (1) | JP2004336751A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015040965A (ja) * | 2013-08-21 | 2015-03-02 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、並びに記憶媒体 |
Families Citing this family (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004361486A (ja) * | 2003-06-02 | 2004-12-24 | Nikon Corp | デジタルスチルカメラ |
| JP4599920B2 (ja) * | 2003-09-02 | 2010-12-15 | セイコーエプソン株式会社 | 画像生成装置、および画像生成方法 |
| US10721405B2 (en) | 2004-03-25 | 2020-07-21 | Clear Imaging Research, Llc | Method and apparatus for implementing a digital graduated filter for an imaging apparatus |
| WO2005093654A2 (en) | 2004-03-25 | 2005-10-06 | Fatih Ozluturk | Method and apparatus to correct digital image blur due to motion of subject or imaging device |
| US9826159B2 (en) | 2004-03-25 | 2017-11-21 | Clear Imaging Research, Llc | Method and apparatus for implementing a digital graduated filter for an imaging apparatus |
| FI20045340A0 (fi) * | 2004-09-14 | 2004-09-14 | Nokia Corp | Menetelmä, laite ja ohjelmisto video-otoksien laadun parantamiseksi |
| US8537224B2 (en) * | 2005-01-31 | 2013-09-17 | Hewlett-Packard Development Company, L.P. | Image capture device having a shake metter |
| US20060215042A1 (en) * | 2005-03-24 | 2006-09-28 | Motorola, Inc. | Image processing method and apparatus with provision of status information to a user |
| EP1944575A4 (en) * | 2005-10-11 | 2012-11-28 | Panasonic Corp | INERTIAL STRENGTH SENSOR OF THE VIBRATION TYPE AND ELECTRONIC APPARATUS USING THE SAME |
| JP5161435B2 (ja) * | 2006-06-26 | 2013-03-13 | 株式会社ソニー・コンピュータエンタテインメント | 画像処理装置、画像処理システム、コンピュータの制御方法及びプログラム |
| US7668454B2 (en) * | 2006-08-29 | 2010-02-23 | Hewlett-Packard Development Company, L.P. | Photography advice based on captured image attributes and camera settings |
| TW200922290A (en) * | 2007-11-02 | 2009-05-16 | Altek Corp | Image capturing apparatus and method for providing image blur information |
| JP2010062853A (ja) * | 2008-09-03 | 2010-03-18 | Fujifilm Corp | 情報処理装置、方法およびプログラム |
| US8948513B2 (en) * | 2009-01-27 | 2015-02-03 | Apple Inc. | Blurring based content recognizer |
| US9300834B2 (en) | 2009-05-20 | 2016-03-29 | Dacuda Ag | Image processing for handheld scanner |
| US20110069179A1 (en) * | 2009-09-24 | 2011-03-24 | Microsoft Corporation | Network coordinated event capture and image storage |
| US8905314B2 (en) | 2010-09-30 | 2014-12-09 | Apple Inc. | Barcode recognition using data-driven classifier |
| US9338352B2 (en) * | 2011-12-30 | 2016-05-10 | Flir Systems Ab | Image stabilization systems and methods |
| EP2645700A1 (en) * | 2012-03-27 | 2013-10-02 | BlackBerry Limited | Method and device for motion enhanced image capture |
| EP3039617B1 (en) | 2013-08-31 | 2020-05-20 | ML Netherlands C.V. | User feedback for real-time checking and improving quality of scanned image |
| WO2015082572A2 (en) | 2013-12-03 | 2015-06-11 | Dacuda Ag | User feedback for real-time checking and improving quality of scanned image |
| WO2015104235A1 (en) | 2014-01-07 | 2015-07-16 | Dacuda Ag | Dynamic updating of composite images |
| EP3092790B1 (en) | 2014-01-07 | 2020-07-29 | ML Netherlands C.V. | Adaptive camera control for reducing motion blur during real-time image capture |
| WO2015173173A1 (en) | 2014-05-12 | 2015-11-19 | Dacuda Ag | Method and apparatus for scanning and printing a 3d object |
| US10148883B2 (en) * | 2016-05-02 | 2018-12-04 | Kyocera Document Solutions Inc. | Method and program for image-based status resolution services |
| US10606457B2 (en) | 2016-10-11 | 2020-03-31 | Google Llc | Shake event detection system |
| EP4150519A4 (en) | 2020-05-11 | 2024-06-26 | Magic Leap, Inc. | COMPUTATIONALLY EFFICIENT METHOD FOR CALCULATION OF A COMPOSITE REPRESENTATION OF A 3D ENVIRONMENT |
| WO2024196688A1 (en) * | 2023-03-17 | 2024-09-26 | Hover Inc. | Methods, storage media, and systems for detecting a persisting or sustained blur condition |
| US20240314432A1 (en) * | 2023-03-17 | 2024-09-19 | Hover Inc. | Methods, storage media, and systems for detecting a persisting or sustained blur condition |
Family Cites Families (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5870217A (ja) | 1981-10-23 | 1983-04-26 | Fuji Photo Film Co Ltd | カメラブレ検出装置 |
| US5060007A (en) | 1986-11-20 | 1991-10-22 | Canon Kabushiki Kaisha | Image blur display device |
| US5712474A (en) * | 1993-09-29 | 1998-01-27 | Canon Kabushiki Kaisha | Image processing apparatus for correcting blurring of an image photographed by a video camera |
| JPH07281275A (ja) * | 1994-04-04 | 1995-10-27 | Nikon Corp | カメラ |
| JP3339191B2 (ja) | 1994-08-08 | 2002-10-28 | ミノルタ株式会社 | ブレ補正機能付カメラ |
| JP3612801B2 (ja) | 1995-07-03 | 2005-01-19 | ソニー株式会社 | 電子機器 |
| KR100215448B1 (ko) | 1996-04-27 | 1999-08-16 | 윤종용 | 캠코더의 손떨림/이동속도 디스플레이장치 |
| JPH10148858A (ja) * | 1996-11-19 | 1998-06-02 | Canon Inc | 防振制御装置 |
| US5978016A (en) * | 1997-02-20 | 1999-11-02 | Eastman Kodak Company | Electronic camera with internal fixed album memory |
| US6603508B1 (en) * | 1997-11-19 | 2003-08-05 | Ricoh Company, Ltd. | Method, system, and computer readable medium for controlling a digital camera to avoid blurring of a photograph |
| US6504575B1 (en) | 1998-02-27 | 2003-01-07 | Flashpoint Technology, Inc. | Method and system for displaying overlay bars in a digital imaging device |
| JPH11249212A (ja) | 1998-03-02 | 1999-09-17 | Olympus Optical Co Ltd | ブレ警告機能付カメラ |
| JP4245699B2 (ja) * | 1998-09-16 | 2009-03-25 | オリンパス株式会社 | 撮像装置 |
| JP3607509B2 (ja) * | 1998-10-08 | 2005-01-05 | 株式会社リコー | オートフォーカス装置 |
| JP2000305126A (ja) | 1999-04-26 | 2000-11-02 | Olympus Optical Co Ltd | ブレ軽減機能付きカメラ |
| US6487369B1 (en) | 1999-04-26 | 2002-11-26 | Olympus Optical Co., Ltd. | Camera with blur reducing function |
| JP2000305123A (ja) | 1999-04-26 | 2000-11-02 | Olympus Optical Co Ltd | ブレ軽減機能付きカメラ |
| JP4307648B2 (ja) | 1999-09-01 | 2009-08-05 | オリンパス株式会社 | カメラ |
| US6510283B1 (en) | 1999-11-22 | 2003-01-21 | Canon Kabushiki Kaisha | Photo-taking apparatus, control method adapted for the photo-taking apparatus, and computer program product supplying control program adapted for the photo-taking apparatus |
| JP2001346081A (ja) | 2000-05-31 | 2001-12-14 | Sony Corp | デジタルカメラ |
| JP4511766B2 (ja) | 2000-07-10 | 2010-07-28 | 株式会社リコー | 撮影装置および撮影装置における振れ補正方法 |
| US6747690B2 (en) | 2000-07-11 | 2004-06-08 | Phase One A/S | Digital camera with integrated accelerometers |
| US6505000B2 (en) | 2000-07-13 | 2003-01-07 | Canon Kabushiki Kaisha | Camera including electronic flash, camera shake detecting system, and power supply control function for same |
| US6987530B2 (en) | 2001-05-29 | 2006-01-17 | Hewlett-Packard Development Company, L.P. | Method for reducing motion blur in a digital image |
-
2003
- 2003-04-30 US US10/427,264 patent/US7397500B2/en not_active Expired - Fee Related
-
2004
- 2004-04-27 JP JP2004131482A patent/JP2004336751A/ja active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015040965A (ja) * | 2013-08-21 | 2015-03-02 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、並びに記憶媒体 |
Also Published As
| Publication number | Publication date |
|---|---|
| US7397500B2 (en) | 2008-07-08 |
| US20040218055A1 (en) | 2004-11-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2004336751A (ja) | 画像ぼけを改善する方法及びシステム並びにカメラ | |
| JP2004336752A (ja) | 画像安定性測度を計算する方法及びカメラ | |
| US7403710B2 (en) | Image processing apparatus and image processing method | |
| US7796177B2 (en) | Digital camera and controlling method for digital camera | |
| JP3635282B2 (ja) | ブレ補正カメラ | |
| KR100875940B1 (ko) | 촬상장치 및 그 제어방법 | |
| US8125535B2 (en) | Imaging apparatus, continuous shooting control method, and program therefor | |
| US7978254B2 (en) | Image capturing apparatus, its controlling method, and program | |
| KR20090098197A (ko) | 플래시 발광량 조절가능한 디지털 촬영 장치, 이의 제어방법 및 상기 방법을 실행하기 위한 프로그램을 기록한기록매체 | |
| JP2006227613A (ja) | 画像安定化機能に結び付けられたカメラ露光プログラム | |
| JP6537288B2 (ja) | 焦点調節装置および焦点調節方法 | |
| WO2007119819A1 (ja) | 画像記録再生装置 | |
| JP2003101862A (ja) | 撮像装置および撮像方法 | |
| JP4931769B2 (ja) | 撮像装置および撮像制御方法 | |
| JP2008053843A (ja) | 動画記録可能なデジタルカメラ | |
| JP5239687B2 (ja) | 撮像装置 | |
| JP2000125204A (ja) | 電子カメラ | |
| CN117434542A (zh) | 测距装置、测距装置的控制方法和计算机可读介质 | |
| JP2006313978A (ja) | 撮像装置、制御方法及びコンピュータプログラム | |
| JP5747595B2 (ja) | 露出制御装置及びカメラ | |
| JP2000152097A (ja) | 電子カメラ | |
| JP2012239079A (ja) | 撮影装置 | |
| JP2003029137A (ja) | 自動焦点検出装置 | |
| JP2004356734A (ja) | カメラ | |
| JP2011044803A (ja) | 撮像装置及び撮像装置の制御方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20061006 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061020 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070313 |
