JP4388367B2 - 電子画像の傾きを修正する方法及び画像処理システム、画像取り込みシステム、並びに、カメラ - Google Patents

電子画像の傾きを修正する方法及び画像処理システム、画像取り込みシステム、並びに、カメラ Download PDF

Info

Publication number
JP4388367B2
JP4388367B2 JP2003511531A JP2003511531A JP4388367B2 JP 4388367 B2 JP4388367 B2 JP 4388367B2 JP 2003511531 A JP2003511531 A JP 2003511531A JP 2003511531 A JP2003511531 A JP 2003511531A JP 4388367 B2 JP4388367 B2 JP 4388367B2
Authority
JP
Japan
Prior art keywords
image
trimming frame
interest
rotation angle
brightness
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003511531A
Other languages
English (en)
Other versions
JP2004534334A (ja
Inventor
チートル,スティーヴン・フィリップ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HP Inc
Original Assignee
Hewlett Packard Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Co filed Critical Hewlett Packard Co
Publication of JP2004534334A publication Critical patent/JP2004534334A/ja
Application granted granted Critical
Publication of JP4388367B2 publication Critical patent/JP4388367B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3877Image rotation
    • H04N1/3878Skew detection or correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/60Rotation of whole images or parts thereof
    • G06T3/608Rotation of whole images or parts thereof by skew deformation, e.g. two-pass or three-pass rotation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872Repositioning or masking
    • H04N1/3873Repositioning or masking defined only by a limited number of coordinate points or parameters, e.g. corners, centre; for trimming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details
    • G06T2207/20132Image cropping

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Description

本発明は、予め定められた画像構図(画像合成)規則のセットに従って原画像を回転させたものをトリミング(クロッピング)することによって、電子画像の傾き又は回転を修正する方法に関する。また、本発明は、この方法を採用した画像処理システム及び上記画像処理システムを組み込んだ画像取り込みシステムにも関する。
写真撮影者があまり注意を払うことなく写真を撮影するときは、カメラが水平線に関して正しい向きではない場合がある。これにより、傾いた、或いは回転した画像が生成されることになる。傾きは、カメラが当初保持されていた水平線に対する角度に等しい角度分、電子画像を回転させることによって修正することが可能である。しかし、回転した画像に対しては、通常、トリミングを行って水平エッジ及び垂直エッジを有する最終的な画像矩形を生成しなければならない。そして、このトリミング後の画像の位置を最良に選択する方法について問題が生じる。
上記の問題は、ビデオカメラによる画像の録画にも当てはまり、これは、動画が録画媒体に連続して録画されるためであり、動画が録画される前にカメラの傾きを修正することが有益である。
傾きの問題に対処した画像処理システムが提案されてきた。
欧州特許第949802号は、文書を走査するスキャナを開示している。ここでは、スキャナ内に組み込まれた給紙機構によって文書が破損しないように保護するために、文書が文書キャリア、すなわち通常は透明エンベロープに提示されるようになっている。スキャナは、文書キャリアによる、又はスキャナの撮像部品に起因する走査画像中の成分を自動的に無視する。スキャナは、走査文書のエッジを識別して、スキャナに関する文書のスキュー(skew)を決定しようとする。デスキュープロセス(de-skew process)は、文書の内容を考慮に入れない。従って、デスキューは、写真を走査した場合の画像がスキューしている場合には機能することができない。
英国特許第2124055号は、写真処理システムに関する。このシステムは、ユーザが複数の入力画像のどの部分を出力画像に配するかを示すラフスケッチパターン(rough sketch pattern)をセットアップできるようにする。この情報は、走査及び書き込みヘッドの位置及び速度の制御に使用されるため、スケッチは、走査及び書き込みサイクルを開始する前に決定する必要がある。従って、ピクチャの自動デスキューはない。
英国特許第2350251号は、2つ以上の画像を統合するシステムに関する。画像の1つは、ユーザ生成画像を受け取るための穴を内に有する予め記憶されているテンプレートである。画像は2つの異なる解像度で記憶され、解像度の低い画像は2つの画像相対的な位置を表示するために使用され、解像度の高い画像はプリンタを駆動するために使用される。このシステムでは、ユーザ生成画像を自動的にスキューさせて、テンプレート内に存在する「フレーム」の全体のスキューと合致させることができる。しかし、スキュー化は、ユーザ生成画像のエッジに関して行われる。スキュー化は、画像の内容の解析に基づいて行われない。
特開昭60−59430号は、ユーザがトリミングフレームを画定することができ、従ってユーザが「切り取り」、回転するように設計を指示することのできる「レイアウトスキャナ」を開示している。
傾きセンサを備え、傾いた画像を電子的な回転により自動的に修正することのできるカメラが知られている。ある場合においては、傾きセンサは、肖像画の向き(縦方向;portrait orientation)で画像を記録するか、又は風景画の向き(横方向;landscape orientation)で画像を記録するかを単純に切り換えるために適用される。このようなシステムの一例は、米国特許第5,900,909号に開示されているものである。この特許は、カメラが縦の「肖像画」の向きに保持されているときを検出する方法、及び、画像が常に「風景画」横位置で記録されるように画像を自動的に回転させるシステムを開示している。これにより、その後において画像を見ることが容易になる。このシステムの更なる例が国際出願WO99/03264号に開示されており、これは、風景画画像及び肖像画画像の両方について取り込まれた画像のアスペクト比を維持する方法を開示している。他のより高度なシステム、例えば、意図的ではない任意の傾きを修正する技法を採用した、米国特許第5,227,889号に開示されているビデオカメラも既知である。しかし、米国特許第5,227,889号に開示されているシステムからの、又は他の既知のシステムにおける重要な抜けは、回転した画像のどこにトリミング矩形を配置するかを選択する知的な方法がないことである。この欠点は、図1a〜図1dを参照することによって最も容易に理解することができる。
図1aは、スキューした角度のカメラで記録した画像を概略的に表している。画像1とともに示す矢印2は本来の垂直線を表し、従って、画像1がX度分スキューしていることが見て取れる。次いで、図1bは、画像1がX度分だけ回転され、それによって矢印2がここでは垂直な向きを有していることを示している。矩形3(鎖線で示す)は、回転した画像1に適用して正しい向きを有する矩形画像を生成することができる可能な1つのトリミング枠を示している。図1cは、回転した画像1に適用することができる代替のトリミング枠4を示している。図1bに示すトリミング枠3及び図1cに示すトリミング枠4は両方とも、回転した画像1内に収めることが可能な中で最大の矩形トリミング枠を表している。米国特許第5,227,889号において適用されている、典型的な従来技術による解決策は、トリミング枠の中心が原画像の中心と一致するように保証するというものである。これは図1dに示されており、原画像の2つの対向する対角線5’及び5’’の交点によって定められる原画像の中心が点7で表され、原画像の中心に一致する中心を有する、対角線6’及び6’’によって定められる、傾いた原画像内に収まる最大のトリミング枠を示している。
この選択又は他の任意の選択は、画像の主題(対象)を考慮に入れていないため、可能な限り最良に再構成された画像を生成しない場合がある。従って、画像の主題を考慮に入れたトリミング枠を生成することによって画像の傾きを修正する方法を生み出すことは有益である。
本発明の第1の態様によれば、電子画像の傾きを修正する方法が提供され、この方法は、傾いている原画像を修正回転角度分だけ回転させるステップと、トリミング枠が原画像に含まれるように予め定義されている画像構図規則(画像合成規則)のセットから選択された少なくとも1つの規則に従って、前記原画像の主題を考慮に入れて、結果として得られた回転後の画像を自動的にトリミングするステップとを含む。
従って、トリミングした画像の中心が原画像の中心と同軸になるように、単にトリミングした画像の中心を合わせるのではなく、画像内の特徴の解析に基づいてトリミング枠を選択する方法を提供することが可能である。
好ましくは、画像構図規則は、画像内の1つ又は複数の関心のある要素を識別するステップと、上記識別された要素の中から、トリミング後の画像内に含める1つ又は複数の要素を選択するステップと、上記選択された関心のある要素を含むように少なくとも1つのトリミング枠を生成するステップとを含む。
有益なことに、傾いている原画像は、予め定められたアスペクト比を有し、得られる回転した画像は、トリミング後の画像が同じ予め定められたアスペクト比を有するようにトリミングされる。
アスペクト比は、画像の取り込みに使用される装置のアスペクト比に対応し得る。しかし、コンピュータモニタ,ワイドスクリーン又は通常スクリーンのテレビ,プリンタ又は写真に一般的な用紙サイズ,又はユーザが定めた比等、他のアスペクト比も選択することができる。しかし、複数のアスペクト比を利用することが可能であり、本発明を実施するイメージプロセッサは、自由にアスペクト比を選択して、関心のあるエリアに収まる最良のトリミングを選択することができる。
好ましくは、トリミング枠は、原画像と実質的に同じ向きを有するものに制限されない。従って、例えば、経験のないユーザが肖像画フォーマットの傾いた写真を撮影する場合がある。しかし、構図を考慮に入れると、実際には画像の構図上関心のある部分のみを風景画枠で区切るほうが自然な場合がある。実際には、トリミング枠は必ずしも矩形である必要はない。ユーザは、他の形状の枠を、例えば所定の形状リストから選択することができる。
好ましくは、生成されるトリミング枠は、傾いた原画像内に収まることができる最大のトリミング枠よりも小さい。
修正回転角度は、例えば、元のカメラ装置に取り付けられた傾きセンサを使用して、原画像を取り込むときに決定することができる。代替として、修正回転角度は、修正を施すときに手動で入力することができる。回転角度を決定する更なる代替は、原画像の解析によるものである。このような解析は、既知の向きを有する、傾いている原画像の1つ又は複数の特徴を識別するステップと、及びそれぞれの既知の向きに関して上記識別された特徴の回転角度を決定するステップとを含む。従って、例えば、画像解析は、建造物のエッジを識別しようとし、エッジが平行している場合は、壁がほぼ垂直であるという仮定の下で、これらエッジを使用して垂直方向を定義することができる。垂直線は、画像内で収束し得るが、これは画像解析において考慮に入れることができる。
本発明の第2の態様によれば、電子画像の回転を修正する画像処理システムが更に提供され、この画像処理システムは、回転した原画像を受け取るように構成された画像入力と、上記原画像に関連する回転角度を示す信号を受け取るように構成された回転角度入力と、上記画像入力及び上記回転角度入力に応答するイメージプロセッサであって、上記原画像を上記回転角度分だけ回転させ、そして得られた回転画像を、トリミング枠が原画像内に含まれるように、予め定められた画像構図規則のセットから選択された少なくとも1つの規則に従ってトリミングするように構成されたイメージプロセッサとを備える。
本発明の第3の態様によれば、画像を電子的に取り込む画像取り込みシステムが更に提供され、この画像取り込みシステムは、上記画像に焦点を合わせる光学画像合焦手段(光学式イメージフォーカシング手段)と、上記光学的に焦点の合った画像を電子画像に変換するように構成された電子画像変換アレイと、上記画像取り込みシステムの回転角度を決定し、上記回転角度を示す信号を生成する回転算出器と、電子画像の傾きを修正する画像処理システムとを備え、
この画像処理システムは、
回転した原画像を受け取るように構成された画像入力と、
上記原画像に関連する上記回転角度を示す信号を受け取るように構成された回転角度入力と、
上記電子画像及び上記回転角度を受け取るイメージプロセッサであって、上記原画像を上記回転角度分回転させて修正し、そして得られた回転画像を、予め定められた画像構図規則のセットに従ってトリミングするように構成されたイメージプロセッサと、
を備える。
本発明の第4の態様によれば、電子カメラが提供され、上記電子カメラは、回転センサに応答して、画像の向きを変え、次いで画像解析を実行して目立った特徴を識別し、また、所定の画像構図規則に従ってこれら特徴の周囲にトリミング枠を生成するように、カメラによって取り込まれた画像に修正を施すデータプロセッサを更に備える。
ここで、本発明について添付図面を参照して例として述べる。
図2は、カメラが傾いて保持されている間に取り込まれた画像を示している。カメラがある角度に保持される理由としては、写真が急いで撮影されたり、撮影者が写真撮影に不慣れであったり、或いは特定のカメラの使用に不慣れであったりすることが挙げられ得る。画像が傾きを生じ得る更なる理由としては、画像の取り込みに使用されているカメラが、ユーザが写真の向きをチェックすることが可能なビューファインダを備えていなかったことが原因となる場合もある。このようなビューファインダなしのカメラの一例は、ラップトップコンピュータ内に一体化されたカメラである。図2に示す画像には、画像の本来の垂直向きを示す矢印10が記されている。
図3は、回転された図2の画像を示し、画像はここでは正しい向きを有する。画像上に記された実線の対角線は、原画像の中心点を定め、破線のトリミング枠15は、原画像の中心と一致した中心を有する最大矩形トリミング枠を表している。得られるトリミング後の画像を図4に示す。トリミング枠を選択して傾いた原画像の傾きを修正するこの方法は、従来技術から既知である。
本発明の実施形態によれば、トリミング枠は、既知の構図規則に従って、原画像の主題を考慮に入れて生成される。このような構図規則は、プロ又は経験豊富なアマチュアの写真撮影者によく知られており、画像を2本の等間隔の水平線と2本の等間隔の垂直線とでできる格子に分け(三目並べ盤のように)、関心のある要素がこれらラインの交点或いは実質的にラインに沿っての何れかで配置される「3分の1の法則(rule of thirds)」を含む。例えば、画像の水平線は上部水平線又は下部水平線の何れか一方に配置されることになる。「3分の1の法則」に従って関心のある要素を配置すると、構図的に満足のいく画像が生成される。適用し得る他の構図規則としては、関心のある要素を画像のかなり際に配置することを避ける、又は画像のエッジで関心のある要素を分割することを可能にすることが挙げられる。更なる構図規則は、関心の非常に少ない前景或いは背景の何れかが大きく広がることを避けることであることができる。このような規則は「厳重」なものではなく、実際にはヒューリスティック(heuristic:発見的,思考的)な性質のものである。
不確かさを回避するために、従来技術から既知のように、回転した画像内に収まる最大のトリミング枠を単純に選択するということは、画像の主題又は構図を考慮に入れないため、構図規則であるとはみなされない。
従って、本発明の方法では、原画像内の関心のある要素を識別する必要がある。
構図上重要な、及び/又は関心のあるエリアを、電子的に取り込まれた画像から選択する様々な方式が知られている。このような既知の方式の1つは、本出願と同時に係属中の、「電子画像の自動トリミング(automatic cropping of electronic images)」と題された英国特許出願第0031423.7号、及びこれに基づくPCT出願に記載されている。完全を期すために、これより、英国特許出願第0031423.7号に開示されている方式の要約について述べる。
図3に示す原画像を参照すると、画像は、まず、色,輝度,及びテクスチャの類似するエリアが一様の色及び輝度を有するエリアに統合されるように処理される。これは、図5を参照して見て取れる。空20の主な部分が、2つのテント21及び22と同様に、色の一様なエリアに統合されている。背景の広いエリアもまた色の一様なエリア、例えば画像の右側の芝生エリア24及び斜めのエリア25に統合されている。色の類似するエリアを統合する技法は周知である。例えば、画像を、圧縮された色の変動を有するフォーマットに変換することができ、次いで類似する色又は輝度の隣接領域を統合することができる。同様に、色又は輝度が類似する相対的に大きなエリアで囲まれた相対的に小さなエリアも、相対的に大きなエリアに統合することができる。
次いで、結果として得られた画像は、画像の隣接する部分を互いに比較し、画像の隣接部分間の違いを示す「関心度(interest rating)」を画像の各部分に割り振ることによって、更に処理される。「関心度」を使用して、画像のエリアの明度が、隣接エリアの平均化された色及び輝度の違いに比例する、注目領域画像(saliency image)と呼ばれる最終画像が生成される。代替として、注目領域は、色の付いた領域が画像の背景を形成する領域とどのぐらい違うかを比較することによって判定することができる。図3の画像写真の注目領域画像を図6に示す。画像の解析では、顔等の重要な形状を探すこともできる。
関心度の高いエリアは、最も明るいエリアで示される。従って、図6からは、関心のある主な要素は、走っている人物、特に30と記された人物であり、画像の右側にあるテント31とともにあることが見て取れる。前景及び背景の広いエリアが関心の殆どないものと判定されることも見て取れる。
既知の写真構図規則に従って図6に示す注目領域画像にヒューリスティックな規則を適用することにより、適切なトリミング枠を画定することができる。例えば、図6では、線I−I’で表された下部トリミング枠を、その下に関心のある領域がないように画定することができる。同様に、線II−II’で表された左側のトリミング枠も、また、この線よりも左側に関心のあるエリアが殆どないか、或いは全くないように画定することができる。更に、2つのトリミング枠III−III’及びIV−IV’を画定することにより、矩形のトリミング枠が画定され、回転後の原画像に適用される。自動的に生成される、結果として得られた画像が図7に示されており、これは、図4に示す従来技術によって生成される画像よりも満足のいく構図を有する。
構図規則及び関心のある要素に適用される重み付け(weighting)を変えることにより、生成されるトリミング枠を変更することができる。例えば、人々又は顔を含む画像のエリアが最終トリミングに含まれる可能性が高くなるように、関心のあるエリアを肌の色合いに関連する色及び/又は輝度を含むエリアに偏重することが可能である。
使用することのできる他の構図規則としては、トリミング矩形に接する、又はトリミング矩形のエッジに非常に近い、関心のあるエリアの量を最小化すること、大きな背景エリアがないように保証すること、並びに、支配的な水平線をトリミング矩形の中心付近又はエッジ付近に配置することを避けることが挙げられる。
図8は、本発明により動作する画像処理システム及び画像取り込みシステムを概略的に示している。画像40が光学レンズ系42を使用して取り込まれ、光学レンズ系42が光学画像を画像アレイ44上に結像する。画像アレイ44は画像を表す電子信号を生成する。電子信号は、イメージプロセッサ52の画像入力50に提供される。カメラシステムには傾きセンサ46も含まれ、この傾きセンサ46は、カメラが保持されていた角度についての表示並びにカメラの回転を示す信号を、イメージプロセッサ52の角度入力48に提供する。イメージプロセッサ52は、上述の本発明の方法に従って1つ又は複数のトリミング枠を生成して、原画像の傾きを修正するように構成される。修正出力は、ハードディスク,RAMカード,又は他の記憶手段等の画像記録手段54に記憶しても、或いは代替として、又は追加として、表示手段56上に表示してもよい。表示手段56は、例えば、カメラシステムのビューファインダであっても、又は代替として画像閲覧システムの表示画面であってもよい。
イメージプロセッサ52は、画像内の関心エリアを自由に識別することが可能である。しかし、代替の処理モードでは、イメージプロセッサ52は、ユーザの介入に応答することができる。従って、ユーザは、カーソルキー又は他のあるポインティングデバイスを用いて、画像に含められるべきオブジェクトを識別することができる。その場合、イメージプロセッサ52は、画像を解析して、そのオブジェクトの枠及び/又は空間範囲を識別することができる。更なる代替として、ユーザは、おそらく、含められるべきオブジェクトが画像の中心付近にあるように画像を枠取りするであろうと仮定することが可能である。その場合、イメージプロセッサ52は、画像の中心付近にあるオブジェクトに重みを置き(重み付けを行い)、それによってこういったオブジェクトが関心度の高いものであるとみなされる。従って、実際には、カメラをポインタとして使用することができる。
更なるオプションとして、イメージプロセッサ52は、トリミング後の最終画像に含める主題に配置されたタグ又はマーカーに優先して応答することができる。このようなタグ又はマーカーは、人間の目には不可視であるが、適宜使用可能なカメラで識別可能なように赤外線波長又はUV波長を反射することができる。
傾きセンサ46を省いてもよく、「垂直」又は「水平」方向を画像解析から、又はユーザ入力から判断してもよいことが認められよう。システムをカメラに限定する必要はなく、システムは、イメージスキャナ及び電子画像の取り込みに使用される他の装置にも適用し得る。
図9は、トリミング枠の向きを原画像の向きから変更するために本発明の方法をどのように使用することができるかを概略的に示している。図9に示す画像は、名目上の肖像画の向き(公称の縦方向)から傾いている。大きく見ると、画像は、空のエリア70及び陸のエリア72を含んでいる。近い場所に一緒にいる2人の人物が画像の領域70にあり、車両の隣にいる更なる人物が画像の領域72にある。画像の構図上重要なエリアを構成するのは、領域78及び76のみである。領域70及び72の大部分が、注目領域解析で識別される背景のエリアを形成している。
領域78は、画像の中心寄り配置されているため、鎖線78で示され線引きされるように、肖像画フォーマット(縦方向フォーマット)或いは風景画フォーマット(横方向フォーマット)の何れかでトリミングすることができる。しかし、領域76は画像の角の方に配置されており、肖像画フォーマットのトリミングを用いてこの領域76を賢明にトリミングすることは難しいだろう。しかし、鎖線80で線引きされる風景画フォーマットのトリミングでは、トリミング領域が中にある関心エリアの大まかな形状に従うことができるとともに、同時にトリミング枠を画像のエッジに近づけることもできる。従って、トリミングアルゴリズムが風景画フォーマットと肖像画フォーマットとを切り換えることができ、特に、原画像とは異なるフォーマットを選択できることに利点がある。図示のように、エリア76及び78は異なるアスペクト比でもトリミングされる。
従って、画像を自動的に解析して適切なトリミング枠を画定する方法及び装置を提供することが可能である。
従来技術による回転した画像の傾きを修正する方法を概略的に示す図である。 従来技術による回転した画像の傾きを修正する方法を概略的に示す図である。 従来技術による回転した画像の傾きを修正する方法を概略的に示す図である。 従来技術による回転した画像の傾きを修正する方法を概略的に示す図である。 傾きの修正が必要な傾いた原画像を示す図である。 回転させて傾きが修正された図2の画像を示すと共に、図1a〜図1dの従来技術による方法によりトリミングされた画像の位置を示す図である。 結果として得られた図3のトリミング後の画像を示す図である。 同様の色及び輝度の領域が一緒に統合された図3の回転後の画像を示す図である。 図5の統合後の画像の注目領域画像を示す図である。 本発明の方法による図2のトリミング後の画像を示す図である。 本発明の一実施形態に係る画像取り込みシステム及び画像処理システムを示す図である。 トリミング後の画像を風景画フォーマットと肖像画フォーマットとの間で変更することができる方法を示す図である。

Claims (16)

  1. 電子画像の傾きを修正する方法であって、
    傾いている原画像を修正回転角度分だけ回転させるステップと、
    (a)類似する色又は輝度を有するエリアを識別し、かつ、これらを一様の色又は輝度のエリアに統合し、
    (b)前記一様の色又は輝度を有するエリアに統合された画像において、隣接するエリア同士を色又は輝度をもって互いに比較し、かつ、各部分に関心度を割り振って注目領域画像を生成し、
    (c)トリミング枠に前記注目領域画像が含まれるように、前記注目領域画像に対して、予め定められている画像構図規則のセットから選択された少なくとも1つの規則を適用することによって、
    結果として得られた回転後の画像を自動的にトリミングするステップと
    を含み、
    前記画像構図規則は、
    前記画像内の1つ又は複数の関心のある要素を識別することと、
    前記識別された要素の中から、前記トリミング後の画像内に含める1つ又は複数の要素を選択することと、
    前記選択された関心のある要素を含むように少なくとも1つのトリミング枠を生成することであって、前記トリミング枠が、前記注目領域画像の位置に基づいて縦長のフォーマット又は横長のフォーマットから選択されることと
    を含むことを特徴とする電子画像の傾きを修正する方法。
  2. 前記トリミング枠は、矩形であり、観念上の垂直方向に1つの軸を有することを特徴とする請求項1に記載の方法。
  3. 前記電子画像は、予め定められたアスペクト比を有し、前記回転後の画像は、前記トリミング後の画像が前記予め定められたアスペクト比を有するようにトリミングされることを特徴とする請求項1に記載の方法。
  4. 前記トリミング枠は、前記傾いている原画像内に収めることができる最大のトリミング枠よりも小さいことを特徴とする請求項1に記載の方法。
  5. 前記トリミング枠は、前記枠によって画定されるエリアが前記画像の特徴に基づいて決定されるように算出されることを特徴とする請求項に記載の方法。
  6. 前記修正回転角度は、前記原画像を取り込むときに決定されることを特徴とする請求項1に記載の方法。
  7. 前記修正回転角度は、手動入力によって定められることを特徴とする請求項1に記載の方法。
  8. 前記修正回転角度は、前記画像の解析によって決定されることを特徴とする請求項1に記載の方法。
  9. 前記解析は、既知の又は予測された向きの1つを有する前記傾いている原画像の1つ又は複数の特徴を識別するステップと、及び前記既知又は予測された向きに関して前記識別された特徴の前記回転角度を決定するステップとを含むことを特徴とする請求項に記載の方法。
  10. 前記トリミング枠は、前記原画像の観念上の構成に関わりなく、肖像画フォーマット及び風景画フォーマットのうちの一方であり得ることを特徴とする請求項1に記載の方法。
  11. 前記トリミング後の画像は、矩形であり、アスペクト比は、画像の内容に基づいてイメージプロセッサによって自動的に選択されることを特徴とする請求項1に記載の方法。
  12. 電子画像の傾きを修正する画像処理システムであって、
    回転した原画像を受け取るように構成された画像入力と、
    前記原画像に関する回転角度を示す信号を受け取るように構成された回転角度入力と、
    前記画像入力及び前記回転角度入力に接続されたイメージプロセッサであって、修正角度又は回転によって前記原画像を回転し、かつ、
    (a)類似する色又は輝度を有するエリアを識別し、かつ、これらを一様の色又は輝
    度のエリアに統合し、
    (b)前記一様の色又は輝度を有するエリアに統合された画像において、隣接するエリア同士を色又は輝度をもって互いに比較し、かつ、各部分に関心度を割り振って注目領域画像を生成し、
    (c)トリミング枠に前記注目領域画像が含まれるように、前記注目領域画像に対して、予め定められている画像構図規則のセットから選択された少なくとも1つの規則を適用することによって、
    結果として得られた回転画像を自動的にトリミングするように構成されたイメージプロセッサとを備え、
    前記画像構図規則は、
    前記画像内の1つ又は複数の関心のある要素を識別することと、
    前記識別された要素の中から、前記トリミング後の画像内に含める1つ又は複数の要素を選択することと、
    前記選択された関心のある要素を含むように少なくとも1つのトリミング枠を生成することであって、前記トリミング枠が、前記注目領域画像の位置に基づいて縦長のフォーマット又は横長のフォーマットから選択されることと
    を含むことを特徴とする画像処理システム。
  13. 少なくとも1つの前記トリミング後の画像は、前記回転した原画像と同軸ではないことを特徴とする請求項12に記載の画像処理システム。
  14. 前記少なくとも1つのトリミング枠は、前記回転した原画像内に含めることのできる最大の傾き修正後のトリミングよりも小さいことを特徴とする請求項12に記載の画像処理システム。
  15. 前記システムは、画像取り込みアレイの向きを検出するセンサを備えることを特徴とする請求項12に記載の画像処理システム。
  16. 請求項12に記載の画像処理システムを備えることを特徴とするカメラ。
JP2003511531A 2001-06-30 2002-05-20 電子画像の傾きを修正する方法及び画像処理システム、画像取り込みシステム、並びに、カメラ Expired - Fee Related JP4388367B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GBGB0116113.2A GB0116113D0 (en) 2001-06-30 2001-06-30 Tilt correction of electronic images
PCT/GB2002/002327 WO2003005702A1 (en) 2001-06-30 2002-05-20 Tilt correction of electronic images

Publications (2)

Publication Number Publication Date
JP2004534334A JP2004534334A (ja) 2004-11-11
JP4388367B2 true JP4388367B2 (ja) 2009-12-24

Family

ID=9917750

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003511531A Expired - Fee Related JP4388367B2 (ja) 2001-06-30 2002-05-20 電子画像の傾きを修正する方法及び画像処理システム、画像取り込みシステム、並びに、カメラ

Country Status (5)

Country Link
US (1) US7305146B2 (ja)
EP (1) EP1402717A1 (ja)
JP (1) JP4388367B2 (ja)
GB (1) GB0116113D0 (ja)
WO (1) WO2003005702A1 (ja)

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0116113D0 (en) * 2001-06-30 2001-08-22 Hewlett Packard Co Tilt correction of electronic images
GB2378340A (en) * 2001-07-31 2003-02-05 Hewlett Packard Co Generation of an image bounded by a frame or of overlapping images
JP2004153691A (ja) * 2002-10-31 2004-05-27 Casio Comput Co Ltd 撮像装置、撮像方法及びプログラム
JP4346925B2 (ja) * 2003-02-25 2009-10-21 キヤノン株式会社 表示装置、表示装置の制御方法、プログラム及びコンピュータ読み取り可能な記録媒体
EP1599036A1 (en) * 2003-02-25 2005-11-23 Matsushita Electric Industrial Co., Ltd. Image pickup processing method and image pickup apparatus
US20040245334A1 (en) * 2003-06-06 2004-12-09 Sikorski Steven Maurice Inverted terminal presentation scanner and holder
US7532753B2 (en) 2003-09-29 2009-05-12 Lipsky Scott E Method and system for specifying color of a fill area
US8739060B2 (en) * 2003-09-29 2014-05-27 Eqapez Foundation, L.L.C. Method and system for displaying multiple aspect ratios of a viewport
JP4281498B2 (ja) * 2003-09-30 2009-06-17 カシオ計算機株式会社 画像撮影装置およびプログラム
US6956587B1 (en) * 2003-10-30 2005-10-18 Microsoft Corporation Method of automatically cropping and adjusting scanned images
US20050222801A1 (en) 2004-04-06 2005-10-06 Thomas Wulff System and method for monitoring a mobile computing product/arrangement
US7386190B2 (en) * 2004-04-30 2008-06-10 Corel Tw Corp. Method for image cropping
US20050285948A1 (en) * 2004-06-22 2005-12-29 Harvey Weinberg System and method for processing a digital camera image
KR100774479B1 (ko) * 2004-07-06 2007-11-08 엘지전자 주식회사 휴대단말기의 영상신호 기울기 보정장치 및 방법
EP1774478A1 (en) * 2004-07-27 2007-04-18 Hewlett-Packard Development Company, L.P. Document creation system and related methods
GB2422738B (en) * 2005-01-31 2011-03-16 Hewlett Packard Development Co Document creation system and related methods
WO2006083563A2 (en) 2005-02-01 2006-08-10 Analog Devices, Inc. Camera with acceleration sensor
US7528846B2 (en) * 2005-02-23 2009-05-05 Microsoft Corporation Systems and methods to adjust a source image aspect ratio to match a different target display aspect ratio
JP2006245726A (ja) * 2005-03-01 2006-09-14 Fuji Photo Film Co Ltd デジタルカメラ
JP2006287917A (ja) * 2005-03-08 2006-10-19 Fuji Photo Film Co Ltd 画像出力装置、画像出力方法、および画像出力プログラム
JP2006304265A (ja) * 2005-03-25 2006-11-02 Fuji Photo Film Co Ltd 画像出力装置、画像出力方法、および画像出力プログラム
JP2007028180A (ja) * 2005-07-15 2007-02-01 Casio Comput Co Ltd 撮像装置、撮像方法及びプログラム
US7822513B2 (en) * 2005-07-27 2010-10-26 Symbol Technologies, Inc. System and method for monitoring a mobile computing product/arrangement
US8305478B2 (en) * 2006-01-30 2012-11-06 Panasonic Corporation Imaging device, display control device, image display system, and imaging system for displaying reduced images based on aspect ratio
US8594742B2 (en) 2006-06-21 2013-11-26 Symbol Technologies, Inc. System and method for monitoring a mobile device
US20070297028A1 (en) * 2006-06-21 2007-12-27 Thomas Wulff System and device for monitoring a computing device
JP4683228B2 (ja) * 2006-07-25 2011-05-18 富士フイルム株式会社 画像表示装置、撮影装置、画像表示方法およびプログラム
US20080099433A1 (en) * 2006-10-30 2008-05-01 Great Computer Corporation Automatic positioning/engraving method for laser engraving machine
TW200828988A (en) * 2006-12-22 2008-07-01 Altek Corp System and method for image evaluation
JP5141014B2 (ja) * 2006-12-28 2013-02-13 富士ゼロックス株式会社 画像形成装置、画像処理装置及びプログラム
US8139897B2 (en) * 2007-03-15 2012-03-20 Ricoh Company, Limited Detecting tilt in an image having different resolutions in different directions
US8180176B2 (en) 2007-07-12 2012-05-15 Panasonic Corporation Image processing device, image processing method, image processing program, recording medium with image processing program recorded therein, and image processing processor
JP5450984B2 (ja) * 2008-06-02 2014-03-26 キヤノン株式会社 情報処理装置、撮像装置、制御方法、及びプログラム
US9313359B1 (en) * 2011-04-26 2016-04-12 Gracenote, Inc. Media content identification on mobile devices
US8161379B2 (en) * 2008-06-20 2012-04-17 Microsoft Corporation Fit and fill techniques for pictures
US9547799B2 (en) * 2008-07-17 2017-01-17 Sharp Laboratories Of America, Inc. Methods and systems for content-boundary detection
KR20100070060A (ko) * 2008-12-17 2010-06-25 삼성전자주식회사 촬상 장치, 촬상 방법 및 프로그램
JP5525757B2 (ja) * 2009-05-18 2014-06-18 オリンパス株式会社 画像処理装置、電子機器、及びプログラム
US8665375B2 (en) * 2009-06-22 2014-03-04 Wsi Corporation Apparatus and method for tracking the location of a pointing element in a cropped video field
US8463074B2 (en) * 2009-11-11 2013-06-11 General Dynamics Advanced Information Systems System and method for rotating images
US8873864B2 (en) * 2009-12-16 2014-10-28 Sharp Laboratories Of America, Inc. Methods and systems for automatic content-boundary detection
JP2011188225A (ja) * 2010-03-09 2011-09-22 Sanyo Electric Co Ltd 電子カメラ
US8571313B2 (en) * 2010-03-22 2013-10-29 Sharp Laboratories Of America, Inc. Methods and systems for estimation of document skew in an image
US9176748B2 (en) * 2010-03-25 2015-11-03 Apple Inc. Creating presentations using digital media content
CA2829290C (en) * 2011-03-10 2017-10-17 Vidyo, Inc. Render-orientation information in video bitstream
US10986399B2 (en) 2012-02-21 2021-04-20 Gracenote, Inc. Media content identification on mobile devices
US9843729B2 (en) * 2012-08-23 2017-12-12 Smugmug, Inc. Rotation stabilization
US9280804B2 (en) * 2012-11-16 2016-03-08 Google Inc. Rotation of an image based on image content to correct image orientation
US9516229B2 (en) * 2012-11-27 2016-12-06 Qualcomm Incorporated System and method for adjusting orientation of captured video
RU2632215C2 (ru) * 2013-03-08 2017-10-03 Томсон Лайсенсинг Способ и система для стабилизации и центрирования изображения
US9282244B2 (en) 2013-03-14 2016-03-08 Microsoft Technology Licensing, Llc Camera non-touch switch
US10057498B1 (en) 2013-03-15 2018-08-21 Cognex Corporation Light field vision system camera and methods for using the same
US9066007B2 (en) 2013-04-26 2015-06-23 Skype Camera tap switch
US9667860B2 (en) * 2014-02-13 2017-05-30 Google Inc. Photo composition and position guidance in a camera or augmented reality system
US9503644B2 (en) 2014-05-22 2016-11-22 Microsoft Technology Licensing, Llc Using image properties for processing and editing of multiple resolution images
US9451178B2 (en) 2014-05-22 2016-09-20 Microsoft Technology Licensing, Llc Automatic insertion of video into a photo story
US11184580B2 (en) 2014-05-22 2021-11-23 Microsoft Technology Licensing, Llc Automatically curating video to fit display time
US20150348325A1 (en) * 2014-05-27 2015-12-03 Thomson Licensing Method and system for stabilization and reframing
US9864925B2 (en) * 2016-02-15 2018-01-09 Ebay Inc. Digital image presentation
US12008034B2 (en) 2016-02-15 2024-06-11 Ebay Inc. Digital image presentation
GB2553103B (en) * 2016-08-19 2022-04-27 Apical Ltd Method of angle detection
WO2018106213A1 (en) * 2016-12-05 2018-06-14 Google Llc Method for converting landscape video to portrait mobile layout
CN108268488B (zh) 2016-12-30 2022-04-19 百度在线网络技术(北京)有限公司 网页主图识别方法和装置
WO2019112642A1 (en) * 2017-12-05 2019-06-13 Google Llc Method for converting landscape video to portrait mobile layout using a selection interface
JP7094733B2 (ja) * 2018-03-13 2022-07-04 キヤノン株式会社 画像処理装置、プログラム、画像処理方法
US10896012B2 (en) 2018-03-13 2021-01-19 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
US10699413B1 (en) * 2018-03-23 2020-06-30 Carmax Business Services, Llc Automatic image cropping systems and methods
JP7092619B2 (ja) * 2018-08-30 2022-06-28 株式会社キーエンス 拡大観察装置
CN111145305A (zh) * 2019-12-04 2020-05-12 宁波华高信息科技有限公司 一种文档图像处理方法
US11980807B2 (en) * 2021-09-16 2024-05-14 Sony Interactive Entertainment Inc. Adaptive rendering of game to capabilities of device
WO2023229270A1 (en) * 2022-05-27 2023-11-30 Samsung Electronics Co., Ltd. Method and electronic device for tilt correction of video

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5840172B2 (ja) * 1973-07-28 1983-09-03 沖電気工業株式会社 カメラ ノ ケイコクヒヨウジソウチ
US4317620A (en) * 1980-01-17 1982-03-02 Polaroid Corporation Variable proportional fill flash
US4384336A (en) * 1980-08-29 1983-05-17 Polaroid Corporation Method and apparatus for lightness imaging
US4423936A (en) * 1982-07-26 1984-01-03 Polaroid Corporation Photographic exposure control system and method
US4541704A (en) * 1984-09-10 1985-09-17 Polaroid Corporation Photographic camera with electronic image enhancement
US4605970A (en) * 1984-10-01 1986-08-12 Tektronix, Inc. Method and apparatus for calibrating an optical document digitizer
US4724330A (en) * 1986-09-24 1988-02-09 Xerox Corporation Self aligning raster input scanner
JPH0514271Y2 (ja) * 1990-02-16 1993-04-16
EP0456414A3 (en) * 1990-05-11 1992-05-20 Matsushita Electric Industrial Co., Ltd Slant correction for a video camera apparatus
US5091654A (en) * 1990-08-28 1992-02-25 Xerox Corporation Method of automatically setting document registration and locating calibration strip
JP3139028B2 (ja) * 1991-02-04 2001-02-26 株式会社ニコン 撮影装置
JP3074967B2 (ja) 1992-10-27 2000-08-07 松下電器産業株式会社 高ダイナミックレンジ撮像・合成方法及び高ダイナミックレンジ撮像装置
DE69430967T2 (de) * 1993-04-30 2002-11-07 Xerox Corp Interaktives Kopiersystem
US5384615A (en) * 1993-06-08 1995-01-24 Industrial Technology Research Institute Ambient depth-of-field simulation exposuring method
US5517242A (en) * 1993-06-29 1996-05-14 Kabushiki Kaisha Toyota Chuo Kenkyusho Image sensing device having expanded dynamic range
JPH07219017A (ja) * 1994-02-04 1995-08-18 Nikon Corp 警告機能を有するカメラ
US5656186A (en) * 1994-04-08 1997-08-12 The Regents Of The University Of Michigan Method for controlling configuration of laser induced breakdown and ablation
WO1995032581A1 (en) 1994-05-23 1995-11-30 Out-Takes, Inc. Seamless composite photography system
US5666186A (en) 1994-07-20 1997-09-09 Eastman Kodak Company Text interface for still photographic camera with data recording capability
JPH08336069A (ja) * 1995-04-13 1996-12-17 Eastman Kodak Co 電子スチルカメラ
US5838836A (en) * 1995-11-06 1998-11-17 Agfa Division-Bayer Corporation Method and apparatus for rough cropping images
US5901253A (en) * 1996-04-04 1999-05-04 Hewlett-Packard Company Image processing system with image cropping and skew correction
GB9614837D0 (en) * 1996-07-12 1996-09-04 Rank Xerox Ltd Interactive desktop system with multiple image capture and display modes
US5978519A (en) * 1996-08-06 1999-11-02 Xerox Corporation Automatic image cropping
US5973734A (en) * 1997-07-09 1999-10-26 Flashpoint Technology, Inc. Method and apparatus for correcting aspect ratio in a camera graphical user interface
AU741337B2 (en) 1997-08-28 2001-11-29 Qualia Computing, Inc. Method and system for automated detection of clustered microcalcifications from digital mammograms
AUPO960197A0 (en) * 1997-10-03 1997-10-30 Canon Information Systems Research Australia Pty Ltd Multi-media editing method and apparatus
DE69822958T2 (de) 1997-10-23 2005-03-10 Olympus Corporation Bildaufnahmevorrichtung mit Mitteln zur Erweiterung des Dynamikbereichs
KR100253203B1 (ko) * 1997-10-29 2000-04-15 구자홍 동영상을 이용한 객체 추출방법
US5987270A (en) 1997-12-17 1999-11-16 Hewlett-Packard Company Digital copying machine that automasks data for small originals if a document feeder is present
JPH11250272A (ja) * 1998-01-08 1999-09-17 Xerox Corp 自動イメ―ジレイアウト方法及びシステム
US6310984B2 (en) * 1998-04-09 2001-10-30 Hewlett-Packard Company Image processing system with image cropping and skew correction
JP2000036032A (ja) * 1998-07-17 2000-02-02 Fujitsu Ltd 前景画像抽出方法、画像処理装置、自動トリミング装置、記録媒体及び肖像写真装置
DE69939814D1 (de) 1998-12-22 2008-12-11 Koninkl Philips Electronics Nv Vorrichtung und verfahren zur erzeugung des bildes eines gegenstandes aus einer mehrzahl von bildern
JP2000244800A (ja) 1999-02-22 2000-09-08 Victor Co Of Japan Ltd 撮像装置
JP2000331156A (ja) * 1999-05-17 2000-11-30 Internatl Business Mach Corp <Ibm> 輪郭に沿うトラッカを自動的に決定するための方法、及び該方法を実施するプログラムを記憶した記憶媒体
US6813395B1 (en) * 1999-07-14 2004-11-02 Fuji Photo Film Co., Ltd. Image searching method and image processing method
JP2001148843A (ja) 1999-11-18 2001-05-29 Mega Chips Corp 撮影装置及びこの撮影装置を用いた防犯システム
US6671405B1 (en) * 1999-12-14 2003-12-30 Eastman Kodak Company Method for automatic assessment of emphasis and appeal in consumer images
US6556721B1 (en) * 2000-01-07 2003-04-29 Mustek Systems Inc. Method for image auto-cropping
US6545743B1 (en) * 2000-05-22 2003-04-08 Eastman Kodak Company Producing an image of a portion of a photographic image onto a receiver using a digital image of the photographic image
US6747690B2 (en) * 2000-07-11 2004-06-08 Phase One A/S Digital camera with integrated accelerometers
US6654507B2 (en) * 2000-12-14 2003-11-25 Eastman Kodak Company Automatically producing an image of a portion of a photographic image
GB2370438A (en) * 2000-12-22 2002-06-26 Hewlett Packard Co Automated image cropping using selected compositional rules.
US7035477B2 (en) * 2000-12-22 2006-04-25 Hewlett-Packard Development Comapny, L.P. Image composition evaluation
US20020152291A1 (en) * 2001-02-16 2002-10-17 Fernandez Karin Henriette Hackin Universal customization tool for providing customized computer programs
GB0116113D0 (en) * 2001-06-30 2001-08-22 Hewlett Packard Co Tilt correction of electronic images
GB2378340A (en) * 2001-07-31 2003-02-05 Hewlett Packard Co Generation of an image bounded by a frame or of overlapping images
US7068856B2 (en) * 2002-09-17 2006-06-27 Lockheed Martin Corporation Method and system for determining and correcting image orientation angle
US7269292B2 (en) * 2003-06-26 2007-09-11 Fotonation Vision Limited Digital image adjustable compression and resolution using face detection information
US7616233B2 (en) * 2003-06-26 2009-11-10 Fotonation Vision Limited Perfecting of digital image capture parameters within acquisition devices using face detection

Also Published As

Publication number Publication date
GB0116113D0 (en) 2001-08-22
WO2003005702A1 (en) 2003-01-16
JP2004534334A (ja) 2004-11-11
EP1402717A1 (en) 2004-03-31
US20030152291A1 (en) 2003-08-14
US7305146B2 (en) 2007-12-04

Similar Documents

Publication Publication Date Title
JP4388367B2 (ja) 電子画像の傾きを修正する方法及び画像処理システム、画像取り込みシステム、並びに、カメラ
JP4605458B2 (ja) 画像処理装置及び画像処理プログラム
US7893963B2 (en) Digital camera which estimates and corrects small camera rotations
US7502493B2 (en) Image processing apparatus and method and program storage medium
US7486310B2 (en) Imaging apparatus and image processing method therefor
US7460782B2 (en) Picture composition guide
US8009929B2 (en) Image-capturing apparatus, method, and program which correct distortion of a captured image based on an angle formed between a direction of an image-capturing apparatus and a gravitational direction
US7734098B2 (en) Face detecting apparatus and method
JP3983469B2 (ja) 画像処理装置、方法及び記録媒体
US7848588B2 (en) Method and apparatus for judging direction of blur and computer-readable recording medium storing a program therefor
JP2006293783A (ja) 画像処理装置及び画像処理プログラム
JP2007074578A (ja) 画像処理装置、撮影装置、及びプログラム
JP2007074579A (ja) 画像処理装置、及びプログラム
JP2006293782A (ja) 画像処理装置及び画像処理プログラム
JP3913604B2 (ja) 証明写真の作成方法
US7633654B2 (en) Camera, computer and projector for use in sensed image projection system for projecting the image of a projection target onto a screen, and image processing method
JPH09197564A (ja) 写真ネガストリップからインデックスプリントを作成するためのシステム及び製品
US20050041103A1 (en) Image processing method, image processing apparatus and image processing program
JP4844353B2 (ja) 撮像装置
US7542074B2 (en) Photographed image projection device which sets a frame frequency of photographing by a camera based on movement in a photographed image
JP2006279460A (ja) 画像処理装置、印刷装置、画像処理方法、および、画像処理プログラム
JP2003187257A (ja) 画像作成システム
JP2002010066A (ja) 画像再生装置
JP2006059162A (ja) 歯画像補正方法及び装置
JP2006293784A (ja) 画像処理装置及び画像処理プログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070405

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070413

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20070710

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20070718

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070731

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080117

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080204

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20080222

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090702

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090707

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090831

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091002

R150 Certificate of patent or registration of utility model

Ref document number: 4388367

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121009

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121009

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131009

Year of fee payment: 4

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131009

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131009

Year of fee payment: 4

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees