JP2008516501A

JP2008516501A - デジタル画像のフレーミング及び鮮明さを検査するためのシステム及び方法

Info

Publication number: JP2008516501A
Application number: JP2007535263A
Authority: JP
Inventors: ニコポルヨ; トリメシェメイディ
Original assignee: Nokia Oyj
Current assignee: Nokia Oyj
Priority date: 2004-10-05
Filing date: 2005-10-04
Publication date: 2008-05-15
Also published as: US20060072820A1; KR100967855B1; KR20090109594A; WO2006038092A1; EP1797712A1; CN101065959B; CN101065959A; KR20070058003A

Abstract

【課題】デジタル画像の品質を判断するためのシステム及び方法を提供する。
【解決手段】デジタル画像の鮮明さ及びフレーミングの両方の情報をユーザに提供するためのシステム及び方法。オリジナル画像は、電子装置によって取り込まれて処理される。同時に、最終ズーム画像を作成するために、オリジナル画像の一部分が選択され、トリミングされ、かつ処理される。最終ズーム画像及び処理されたオリジナル画像は、ユーザに同時に表示され、ユーザが最終ズーム画像を使用してオリジナル画像の相対的鮮明さを判断することを可能にする。
【選択図】図５

Description

本発明は、一般的に、デジタル写真に関する。より詳細には、本発明は、デジタル画像の品質を判断するためのシステム及び方法に関する。

近年、デジタルカメラは、独立型製品として、及びセルラー電話、携帯情報端末、及び他の装置のような他の装置の一部として、その両方で人気が高まってきている。

デジタル画像がデジタルカメラによって撮られる場合、画像のフレーミング及び鮮明さを検査する必要がある。「フレーミング」とは、意図されたターゲットが画像に失敗なく取り込まれたことを保証することを指す。「鮮明さ」は、取り込まれた画像の形式及び詳細のレベルを指す。フレーミングは、通常は、カメラのディスプレイ上に示すプレビュー又はサムネイル画像を調べることによってユーザによる検査が容易である。

しかし、フレーミングの問題とは異なり、デジタル画像の鮮明さは、通常は、小さなプレビュー画像では注意深く観察して調べることができない。残念ながら、画像の鮮明さを簡単に劣化させることができると考えられるいくつかの要因がある。長い露出時間、大きな光学ズーム、自動焦点距離の選択、写真撮影処理中のカメラの動き、大きな口径、及び／又はこれらの要因の組合せの全てが、画像又は画像の一部を不鮮明にする可能性がある。画像がひどく不鮮明でない限り、ユーザが鮮明さの点でサムネイル画像を調べたいと思う場合には、ユーザは、個々のピクセルがディスプレイのピクセルに１対１で表示されるように画像にズームインしなくてはならない。

しかし、光景にズームインするには非常に時間がかかる。実際に、この処理は非常に時間がかかるので、鮮明さの問題が起こり得ることを認識している人でさえ、通常は画像にズームインしない。代わりに、このようなユーザは、いくつかの画像を撮影し、一部が満足のいく鮮明さの程度を有することを期待する。他方、いくつかの異なるページが文書カメラ用途で撮像される場合、ズーミングを使用することは実際的でなく（上述の時間の問題のために）、又はページ当たりいくつかの画像を撮影することも実際的でないことが多く、これは、頻繁に起こるメモリ限界及び不必要な画像を削除することに通常伴う余分な作業のためである。

複数の画像が撮影されて、写真品質の決定が通常のプレビュー画像から行われる場合、ユーザがより鮮明な画像を廃棄することになる可能性が非常に高い。例えば、図１では、２つの１１５２ピクセル幅画像は、一般的な従来のソフトウエアプログラムを使用して２０８ピクセル幅画像にサイズ変更されている。図から明確に観察することができるように、左の画像は、左の画像のオリジナル版が実際には右の画像よりも遙かに鮮明であるにも関わらず、右の画像よりも遙かに不鮮明であるように見える。この事例では、品質の違いは、ソフトウエアプログラムに使用された悪いアルゴリズムのためである。同様な種類の歪みも起こる場合があるいくつかの他の潜在的なシナリオが存在する。

本発明は、プレビュー画像のフレーミング及び鮮明さの両方をユーザが容易かつ迅速に調べることを可能にするためのシステム及び方法に関する。本発明では、フレーミング及び鮮明さは、同じ画像に示される。これは、オリジナル画像と選択された部分の両方をユーザによって検討かつ調べることができるように、画像の一部分を拡大し、これをオリジナル画像に埋め込むことによって達成される。画像の鮮明さがユーザによって容易に分析されるように、様々な種類のインテリジェンスソフトウエアを使用して拡大する画像の適切な部分を選択することができる。

本発明は、従来のシステムを超えたいくつかの利点を提供する。本発明では、ユーザは、鮮明さを判断するために画像の一部分に手動でズームインする必要はない。本発明により、ユーザは、画像が満足できる品質のものであるか否かを「予想」する必要なしに対象物の単一の画像を撮影するだけでよく、その後の写真のための付加的なファイルスペースの可能性を開く。これは、画像のサイズが極端に大きい可能性があり、かつテキストの鮮明さが特に重要である、画像がテキストを包含する文書から取られる時に特に重要である可能性がある。

本発明のこれら及び他の目的、利点、及び特徴は、その編成及作動方法と共に、同じ要素が以下に説明するいくつかの図面を通して同じ番号を有する添付図面に関連して以下の詳細説明から明らかになるであろう。

本発明により、デジタルカメラは、取り込まれたデジタル画像のフレーミング及び鮮明さの両方を単一のプレビュー画像に示すことができる。これは、画像の小さな部分を拡大し、これをオリジナルの画像に埋め込むことによって達成される。最適な結果のために、拡大される画像の部分を選択する時にインテリジェンスソフトウエアが使用される。例えば、テキスト文書が撮像される場合、テキスト認識アルゴリズムを使用することができる。他の場合には、鮮明さの分析が容易な場所を見つけるためにエッジ検出アルゴリズムを使用することができる。他の適切な方法を使用することもでき、一部の用途では、使用される的確な方法は、ユーザによって選択可能である。

本発明の原理に従う汎用デジタルカメラが図２の１０で示されている。デジタルカメラ１０は、独立型装置とするか、又は携帯式電話のような別の電子装置に組み込むことができる。デジタルカメラ１０は、少なくとも１つの集束要素１２、主メモリユニット１４、プロセッサ１６、及び少なくとも１つの画像センサ１８を収容するハウジング１１を含む。本発明の一実施形態では、集束要素１２は、レンズを含む。しかし、レンズを全く含まず、代わりにピンホール（図示せず）のような他の種類の集光及び集束装置を使用するデジタルカメラ１０も可能である。主メモリユニット１４は、デジタル画像及びデジタルカメラの様々な機能を実行するためのコンピュータソフトウエアを記憶し、並びに本発明を実施するために使用することができる。メモリカードの形式での取外し可能な２次的メモリユニット２０も本発明の一実施形態に従ってデジタルカメラに含めることができ、特別なメモリスペースを提供することができる。「ＢｌｕｅＴｏｏｔｈ」技術を有するような一部のカメラは、フレームサイズメモリを持たないことがある点に注意すべきである。画像センサ１８は、電荷結合素子（ＣＣＤ）、相補形金属酸化膜半導体（ＣＭＯＳ）、又は別のシステムとすることができる。

デジタル写真が撮られる場合、少なくとも１つの集束要素１２は、画像の焦点を少なくとも１つの画像センサ１８に合わせ、電子的に又は何らかの他の機構によって光を記録する。次に、プロセッサ１６は、主メモリユニット１４及び／又は２次的メモリユニット２０に記憶することができるデジタルデータにこの電子情報を分解する。デジタルカメラ１０はまた、データ通信ポート２２を含み、デジタルカメラ１０からパーソナルコンピュータ２４のような遠隔端末へのデジタル画像の送信を可能にする。データ通信は、有線又は無線形式のいずれかにすることができ、ＵＳＢ、「ＢｌｕｅＴｏｏｔｈ」、赤外線、又は他の接続用に構成することができる。デジタルカメラ１０は、情報入力及び／又は写真撮影のための１つ又はそれよりも多くの入力ボタン２６を含むが、入力ボタン２６は、デジタルカメラ１０から遠隔にすることもできる。デジタルカメラ１０はまた、ユーザがプレビュー又はサムネイル画像を表示し、メニューオプションを表示して変更し、更に他の機能を実行することができるユーザインタフェース２８を含む。本発明の一実施形態では、ユーザインタフェース２８は、液晶ディスプレイの形式を取る。

図３は、本発明の一実施形態に従って同じプレビュー画像内で鮮明さとフレーミング情報の両方をユーザに同時に供給するための処理を示している。段階１００では、オリジナル画像がデジタルカメラ１０によって取り込まれる。本発明のこの特定的な実施形態では、データがデジタルカメラ１０から来るが、データがいずれかの互換性のあるデータ構造から来ることもある。例えば、画像は、電子メール、インスタントメッセージ、又は別のシステムを通じてユーザに送信される。段階１００では、オリジナル画像は、「ｘｙ」のファイルサイズを有する。本発明の一実施形態では、これは、オリジナルファイルサイズとして１０ビット未加工層「ｘｙ」に対応する。これは、文書カメラ及びバーコード用途には特に重要になる。

段階１１０では、オリジナル画像は、「ａｂ」の分散サイズまで縮小される。画像がユーザによって閲覧される前に、画像サイズをユーザインタフェース２８で使用可能なサイズに縮小しなくてはならない。段階１２０では、画像の「軽」処理が行われる。デジタルカメラ１０が、職業用デジタルカメラの場合のように十分な処理機能を有する場合には、「軽」処理は、全ての画像に対して使用されるのと同じ処理になる点にも注意すべきである。未加工層データは、サムネイル画像で表示できない場合が多く、従って、何らかの処理が画像に対して要求される。シヤッター開放から第１画像までの遅延をできるだけ短くするために、本発明の一実施形態に従って処理が最小にされる。また、縮小された後に画像を処理することにより、処理時間が短くなる。段階１３０では、縮小及び処理の結果通りにオリジナルプレビュー画像が形成される。

縮小及び処理段階が行われている間に、段階１４０では、オリジナル画像のズームエリアが選択される。異なる計算の複雑さを有する多種多様な方法をこの段階のために使用することができる。高速方法選択は、各画像についてコンピュータソフトウエアによって固定された位置及びサイズを自動的に選択させる段階を伴っている。例えば、ソフトウエアは、ズーミングのためにオリジナル画像の上方の右側部分を自動的に含めるプログラム命令を含むことができる。鮮明さ判断の結果を得るために、様々なインテリジェンスを使用することができる。例えば、テキスト認識アルゴリズムをテキスト文書に対して使用することができる。図６及び７は、デジタルカメラ１０の内側のコンピュータソフトウエアが、ズーミングされるテキストを自動的に探す本発明の一実施形態を示している。代替的に、他の画像について、鮮明さの判断が易しい場所を見つけるためにエッジ検出アルゴリズムを使用することができる。例えば、図４及び５は、定められた特徴を有するそれぞれの画像の部分がズーミングのために使用される画像を示している。本発明の他の実施形態では、いくつかの潜在的な位置を選択することができ、それによってユーザは、ズーミングのための潜在的な位置を閲覧することができる。

段階１５０では、オリジナル画像は、選択されたエリアまでトリミングされる。サイズ「ｃｄ」を有する新しい画像が次に形成される。本発明の一実施形態では、この新しい画像は、数十ピクセルの幅及び高さの範囲の寸法を有する。段階１６０では、「重」画像処理が行われ、新しい画像ができるだけ十分に処理される。画像の小さなサイズのために、「重」処理時間がこの段階では短い。段階１７０では、最終ズーム画像が形成される。オリジナル画像の鮮明さは、最終ズーム画像で見ることができる。更に、画像がテキストを包含する文書を取り込んだ場合、鮮明さが満足できるものである場合、テキストを最終ズーム画像で読むことができるはずである。

段階１８０では、最終ズーム画像は、オリジナルプレビュー画像に組み合わされ、ユーザにどれが最終ズーム画像か及び最終ズーム画像がオリジナル画像のどの部分から来ているかを示すためにグラフィックが付加される。図４−７の全ては、最終マージ画像の例を示している。最終ズーム画像が発した場所を示すために使用されるグラフィックは、多種多様な形式を取ることができる。例えば、簡単な黒及び／又は白の点線がテキスト文書では好ましいが、カラー画像には十分ではない。更に、最終ズーム画像が位置決めされている位置も事前に判断することができ、又は画像の極めて重要な部分を曖昧にしないようにソフトウエアインテリジェンスアルゴリズムを使用することができる。次に、最終マージ画像が段階１９０でユーザインタフェース２８上に表示されるように準備される。上述で特定された段階の全ては、主ユニット１４及び／又は２次的メモリユニット２０に記憶されたコンピュータソフトウエアプログラムによって達成することができる。

最終マージ画像がユーザインタフェース２８上に表示された状態で、ユーザは、画像の鮮明さに関する判断を行うことができる。図６及び７は、テキスト文字を含む１対の最終マージ画像を示している。図６では、オリジナル画像のテキストが読めない最終ズーム画像が見られる。この特定の場合には、最終ズーム画像のための画像処理は、「ＡｄｏｂｅＰｈｏｔｏｓｈｏｐ７．０．１」の「自動レベル」の使用を伴っており、一方、オリジナル画像は、「ＣａｎｏｎＰＣ」ソフトウエアで処理する「Ｃａｎｏｎ１０ＤデジタルＳＬＲ」からの６．１メガピクセル画像である。オリジナル画像は、１１５２ピクセルの幅に縮小されていた。この画像は、その中間画像からサイズ変更されたものである。全ての縮小は、「Ｐｈｏｔｏｓｈｏｐ」の「Ｂｉｃｕｂｉｃ」法を使用して行われた。図７は、最終ズーム画像で容易に観察される大いに改良された鮮明さを有する同じ画像を示している。

本発明のシステム及び方法により、ユーザは、取り込まれた画像に手動で入ることなく、取り込まれた画像の鮮明さを迅速かつ容易に判断することができる。同じ対象物の複数の画像を取り込む必要性が大いに低減されるか又は排除され、その結果、ユーザによる時間の節約及びデジタルカメラ内のファイルスペースの節約をもたらす。本発明は、独立型デジタルカメラ及び他の種類の電子装置の両方にその特定の装置が写真撮影機能を含むか否かさえも関わらず組み込むことができる。

いくつかの実施形態を本明細書に示して説明したが、本発明のより広い態様において本発明から逸脱することなく、変更及び修正を本発明に対して行うことができることを理解すべきである。例えば、以下に限定されるものではないが、最終ズーム画像のサイズは、自動又は手動で変更又は選択することができると考えられ、ズーミングされるオリジナル画像の部分は、多種多様なアルゴリズムによって選択することができる。更に、ズームエリアの選択が代表的なアルゴリズムを使用して行われる時に、類似の条件（類似の鮮明さなど）が画像の他の領域に存在するかを判断するために、システムがプレビュー画像の残りを分析することも可能である。更に、本発明を実施するために本明細書に説明した多くの段階は、ソフトウエア又はハードウエアアプリケーションのいずれかの使用を通して完了することができる。本発明の様々な特徴は、特許請求の範囲に規定されている。

２０８ピクセル幅画像にサイズ変更されて、より高品質の左の画像を右の画像に比べて低品質に見せる１対の１１５２ピクセル幅画像を示す図である。本発明の原理に従う汎用デジタルカメラの側面断面図である。本発明の一実施形態の実施に伴う段階を示す流れ図である。プレビュー画像の一部分がユーザによる検査のために選択されて拡大された、本発明の原理に従うプレビュー画像を示す図である。プレビュー画像の内側の写真がユーザによる検査のために選択されて拡大された、本発明の原理に従うプレビュー画像を示す図である。一部分がユーザのために拡大され、文書が読めないことを拡大された部分が示している、テキスト文書のプレビュー画像を図である。一部分がユーザのために拡大され、文書が読めることを拡大された部分が示している、テキスト文書のプレビュー画像を示す図である。

Claims

画像から鮮明さ及びフレーミング情報をユーザに提供する方法であって、
オリジナル画像を準備する段階と、
前記オリジナル画像を処理する段階と、
前記オリジナル画像の一部分を選択する段階と、
前記選択された部分をトリミングする段階と、
最終ズーム画像を作成するために、前記選択された部分を処理する段階と、
前記処理されたオリジナル画像及び前記最終ズーム画像をユーザインタフェース上に同時に表示する段階と、
を含むことを特徴とする方法。
選択された画像が取られた前記オリジナル画像上の位置に関するグラフィック情報を提供する段階を更に含むことを特徴とする請求項１に記載の方法。
前記オリジナル画像の全体が、前記最終ズーム画像を上に重ね合わせて前記ユーザインタフェース上で表示可能になるように該オリジナル画像を縮小する段階を更に含むことを特徴とする請求項１に記載の方法。
前記オリジナル画像の前記選択された部分は、エッジ検出アルゴリズムの使用を通して判断されることを特徴とする請求項１に記載の方法。
前記オリジナル画像の前記選択された部分は、テキスト認識アルゴリズムの使用を通して判断されることを特徴とする請求項１に記載の方法。
前記オリジナル画像の前記選択された部分は、該オリジナル画像が提供される前に事前に判断されることを特徴とする請求項１に記載の方法。
前記オリジナル画像の前記選択された部分は、前記ユーザによって判断可能であることを特徴とする請求項１に記載の方法。
前記最終ズーム画像は、前記処理されたオリジナル画像の一部分上に重ね合わされることを特徴とする請求項１に記載の方法。
画像から鮮明さ及びフレーミング情報をユーザに提供するためのコンピュータプログラム製品であって、
オリジナル画像を準備するためのコンピュータコードと、
前記オリジナル画像を処理するためのコンピュータコードと、
前記オリジナル画像の一部分を選択するためのコンピュータコードと、
前記選択された部分をトリミングするためのコンピュータコードと、
最終ズーム画像を作成するために、前記選択された部分を処理するためのコンピュータコードと、
前記処理されたオリジナル画像及び前記最終ズーム画像をユーザインタフェース上に同時に表示するためのコンピュータコードと、
を含むことを特徴とする製品。
選択された画像が取られた前記オリジナル画像上の位置に関するグラフィック情報を提供するためのコンピュータコードを更に含むことを特徴とする請求項９に記載のコンピュータプログラム製品。
前記オリジナル画像の全体が、前記最終ズーム画像を上に重ね合わせて前記ユーザインタフェース上で表示可能になるように該オリジナル画像を縮小するためのコンピュータコードを更に含むことを特徴とする請求項９に記載のコンピュータプログラム製品。
前記オリジナル画像の前記選択された部分は、エッジ検出アルゴリズムの使用を通して判断されることを特徴とする請求項９に記載のコンピュータプログラム製品。
前記オリジナル画像の前記選択された部分は、テキスト認識アルゴリズムの使用を通して判断されることを特徴とする請求項９に記載のコンピュータプログラム製品。
前記オリジナル画像の前記選択された部分は、該オリジナル画像が提供される前に事前に判断されることを特徴とする請求項９に記載のコンピュータプログラム製品。
前記オリジナル画像の前記選択された部分は、前記ユーザによって判断可能であることを特徴とする請求項９に記載のコンピュータプログラム製品。
前記最終ズーム画像は、前記処理されたオリジナル画像の一部分上に重ね合わされることを特徴とする請求項９に記載のコンピュータプログラム製品。
画像情報を処理するためのプロセッサと、
ユーザインタフェースと、
コンピュータプログラム製品を含み、前記プロセッサと作動的に接続したメモリユニットと、
を含み、
前記コンピュータプログラム製品は、
オリジナル画像を準備するためのコンピュータコードと、
前記オリジナル画像を処理するためのコンピュータコードと、
前記オリジナル画像の一部分を選択するためのコンピュータコードと、
前記選択された部分をトリミングするためのコンピュータコードと、
最終ズーム画像を作成するために、前記選択された部分を処理するためのコンピュータコードと、
前記処理されたオリジナル画像及び前記最終ズーム画像をユーザインタフェース上に同時に表示するためのコンピュータコードと、
を含む、
ことを特徴とする電子装置。
前記オリジナル画像を取り込むための集束システムを更に含むことを特徴とする請求項１７に記載の電子装置。
前記メモリユニットは、選択された画像が取られた前記オリジナル画像上の位置に関するグラフィック情報を提供するためのコンピュータコードを更に含むことを特徴とする請求項１７に記載の電子装置。
前記メモリユニットは、前記オリジナル画像の全体が前記最終ズーム画像と共にユーザインタフェース上に表示可能になるように該オリジナル画像を縮小するためのコンピュータコードを更に含むことを特徴とする請求項１７に記載の電子装置。
前記オリジナル画像の前記選択された部分は、エッジ検出アルゴリズムの使用を通して判断されることを特徴とする請求項１７に記載の電子装置。
前記オリジナル画像の前記選択された部分は、テキスト認識アルゴリズムの使用を通して判断されることを特徴とする請求項１７に記載の電子装置。
前記オリジナル画像の前記選択された部分は、該オリジナル画像が提供される前に事前に判断されることを特徴とする請求項１７に記載の電子装置。
前記オリジナル画像の前記選択された部分は、前記ユーザによって判断可能であることを特徴とする請求項１７に記載の電子装置。
前記最終ズーム画像は、前記ユーザインタフェース上で前記処理されたオリジナル画像の一部分上に重ね合わされることを特徴とする請求項１７に記載の電子装置。
画像から鮮明さ及びフレーミング情報をユーザに提供するのに使用されるモジュールであって、
画像情報を処理するためのプロセッサと、
コンピュータプログラム製品を含み、前記プロセッサと作動的に接続したメモリユニットと、
を含み、
前記コンピュータプログラム製品は、
オリジナル画像を準備するためのコンピュータコードと、
前記オリジナル画像を処理するためのコンピュータコードと、
前記オリジナル画像の一部分を選択するためのコンピュータコードと、
前記選択された部分をトリミングするためのコンピュータコードと、
最終ズーム画像を作成するために、前記選択された部分を処理するためのコンピュータコードと、
前記処理されたオリジナル画像及び前記最終ズーム画像をユーザインタフェース上に同時に表示するためのコンピュータコードと、
を含む、
ことを特徴とするモジュール。
前記メモリユニットは、選択された画像が取られた前記オリジナル画像上の位置に関するグラフィック情報を提供するためのコンピュータコードを更に含むことを特徴とする請求項２６に記載のモジュール。
前記メモリユニットは、前記オリジナル画像の全体がそこに重ね合わされた前記最終ズーム画像と共に前記ユーザインタフェース上に表示可能になるように該オリジナル画像を縮小するためのコンピュータコードを更に含むことを特徴とする請求項２６に記載のモジュール。
前記オリジナル画像の前記選択された部分は、エッジ検出アルゴリズムの使用を通して判断されることを特徴とする請求項２６に記載のモジュール。
前記オリジナル画像の前記選択された部分は、テキスト認識アルゴリズムの使用を通して判断されることを特徴とする請求項２６に記載のモジュール。
前記オリジナル画像の前記選択された部分は、該オリジナル画像が提供される前に事前に判断されることを特徴とする請求項２６に記載のモジュール。
前記オリジナル画像の前記選択された部分は、前記ユーザによって判断可能であることを特徴とする請求項２６に記載のモジュール。
前記最終ズーム画像は、前記ユーザインタフェース上で前記処理されたオリジナル画像の一部分上に重ね合わされることを特徴とする請求項２６に記載のモジュール。