JP2009071375A - 撮像装置および画像処理プログラム - Google Patents

撮像装置および画像処理プログラム Download PDF

Info

Publication number
JP2009071375A
JP2009071375A JP2007234558A JP2007234558A JP2009071375A JP 2009071375 A JP2009071375 A JP 2009071375A JP 2007234558 A JP2007234558 A JP 2007234558A JP 2007234558 A JP2007234558 A JP 2007234558A JP 2009071375 A JP2009071375 A JP 2009071375A
Authority
JP
Japan
Prior art keywords
image
data
imaging device
unit
angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007234558A
Other languages
English (en)
Other versions
JP2009071375A5 (ja
JP4930297B2 (ja
Inventor
Toru Ochiai
透 落合
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2007234558A priority Critical patent/JP4930297B2/ja
Priority to PCT/JP2008/002218 priority patent/WO2009034678A1/ja
Priority to US12/674,616 priority patent/US20110187879A1/en
Publication of JP2009071375A publication Critical patent/JP2009071375A/ja
Publication of JP2009071375A5 publication Critical patent/JP2009071375A5/ja
Application granted granted Critical
Publication of JP4930297B2 publication Critical patent/JP4930297B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

【課題】 画像編集に好適な画像を記録することを目的とする。
【解決手段】 被写体を撮像してユーザが所望する画角の第1画像のデータと前記第1画像に外接する第2画像のデータとを生成する撮像部と、前記第1画像のデータを記録するとともに、前記第1画像のデータの付加情報として前記第2画像のデータを記録する記録部とを備えることを特徴とする撮像装置。
【選択図】 図1

Description

本発明は、撮像装置および画像処理プログラムに関する。
撮像装置を手で構えて被写体を撮像する場合には、ユーザが意図せず撮像装置を傾けた状態で撮像してしまう場合が多い。そこで、特許文献1の発明では、撮像時にビデオカメラが傾いた場合には、回転処理によって画像を水平に補正している。
特開平6−178190号公報
ところで、画像を回転した場合には、回転後の画像の四辺に三角形の余白が生じる。このような問題を回避するために、上級者は、回転処理に備えて、所望する画像の画角より広い画角の画像を予め撮像している。このような撮像を行うことにより、回転後の画像から余白部分を含まない領域を切り出す処理が可能である。しかし、初級者にとって予め広い画角の画像を撮像することは難度が高い。また、予め広い画角の画像を撮像した場合には、ユーザが撮像時に決定した構図と回転処理後の画像の構図とに差異が生じて、ユーザが違和感を感じることがあった。
そこで、本発明の撮像装置および画像処理プログラムは、画像編集に好適な画像を記録することを目的とする。
本発明の撮像装置は、被写体を撮像してユーザが所望する画角の第1画像のデータと前記第1画像に外接する第2画像のデータとを生成する撮像部と、前記第1画像のデータを記録するとともに、前記第1画像のデータの付加情報として前記第2画像のデータを記録する記録部とを備えることを特徴とする。
なお、好ましくは、前記撮像部は、前記第1画像のデータと前記第2画像のデータとを別々に読み出す撮像素子を備えても良い。
また、前記撮像部は、被写体を撮像して生成した画像のデータを分割して前記第1画像のデータと前記第2画像のデータとを生成しても良い。
また、好ましくは、前記撮像装置の水平状態に対する回転角度を検出する回転角度検出部と、前記回転角度検出部により検出された前記回転角度に基づいて、前記撮像装置が水平状態か否かを判定する角度判定部とをさらに備え、前記記録部は、前記撮像装置が前記水平状態でないときにのみ、前記第2画像のデータを記録しても良い。
また、好ましくは、前記記録部から前記第1画像のデータと前記第2画像のデータとを読み出すとともに、前記第1画像と前記第2画像とを合わせて第3画像を生成する画像処理部と、前記第1画像を表示する表示部と、前記第1画像の回転指示をユーザから受け付ける操作部とをさらに備え、前記画像処理部は、前記回転指示に応じて、前記第3画像を回転するとともに、前記回転後の前記第3画像から前記第1画像の大きさに相当する画像を切り出しても良い。
また、好ましくは、前記記録部から前記第1画像のデータと前記第2画像のデータとを読み出すとともに、前記第1画像と前記第2画像とを合わせて第3画像を生成する画像処理部と、前記第1画像を表示する表示部と、前記第1画像の画角をシフトする指示をユーザから受け付ける操作部とをさらに備え、前記画像処理部は、前記指示に応じて、前記第1画像の画角をシフトするとともに、前記第3画像から前記シフト後の前記第1画像の画角に対応する画像を切り出すか、または、前記画像処理部は、前記指示に応じて、前記第3画像をシフトするとともに、前記シフト後の前記第3画像から前記第1画像と同じ位置、かつ、同じ大きさに相当する画像を切り出しても良い。
また、好ましくは、前記記録部から前記第1画像のデータと前記第2画像のデータを読み出すとともに、前記第1画像と前記第2画像とを合わせて第3画像を生成する画像処理部と、前記第1画像を表示する表示部と、前記第1画像をズームアウトする倍率をユーザから受け付ける操作部とをさらに備え、前記画像処理部は、前記倍率に応じて、前記第3画像を縮小するとともに、前記縮小した前記第3画像から前記第1画像の大きさに相当する画像を切り出すか、または、前記画像処理部は、前記倍率に応じて、前記第1画像の画角を拡大して、前記第3画像から前記拡大した前記第1画像の画角に対応する画像を切り出すとともに、前記切り出した画像を前記第1画像の大きさに縮小しても良い。
また、好ましくは、前記撮像素子は、前記第1画像に対応する画素の領域を変更可能であっても良い。
また、好ましくは、前記撮像部は、前記画像のデータを分割する領域を変更して、前記第1画像の大きさを変更可能であっても良い。
なお、上記発明に関する構成を、処理対象の画像のデータに対する画像処理を実現するための画像処理プログラムに変換して表現したものも本発明の具体的様態として有効である。
本発明の撮像装置および画像処理プログラムは、画像編集に好適な画像を記録することができる。
(第1実施形態)
以下、図面を用いて本発明の第1実施形態について説明する。図1は、本発明の第1実施形態における撮像装置1の構成を示すブロック図である。図1に示すように、撮像装置1は、撮像レンズ2、撮像素子3、A/D変換部4、画像処理部5、フレームメモリ6、作業メモリ7、撮像装置制御部8、記録I/F部9、記録媒体10、表示部11、操作部12、水平センサ13を備える。
撮像レンズ2は、撮像素子3の撮像面に被写体像を結像させる。撮像素子3は、撮像レンズ2を通過した光束による被写体像を光電変換し、アナログの画像の信号を出力する。なお、撮像素子3はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサであり、撮像装置制御部8の制御に基づいて、予め設定した画素範囲ごとに画像の信号を読み出す。撮像素子3の出力は、A/D変換部4に接続される。A/D変換部4は、撮像素子3の出力信号のA/D変換を行う。画像処理部5は、A/D変換部4から出力されたデータに各種の画像処理(色補間、階調変換処理、輪郭強調処理、ホワイトバランス調整など)を施す。また、画像処理部5は、記録媒体10に画像のデータを記録する前にJPEG形式などで圧縮する処理や、圧縮された上記のデータを伸長復元する処理をも実行する。さらに、画像処理部5は、公知のアフィン変換などにより画像編集(回転、シフト、ズームアウト、ズームイン)を行う。また、画像処理部5は、画像の一部領域を切り出すこともできる。フレームメモリ6は、画像処理部5による画像処理の前工程や後工程で画像のデータを一時的に記録する。作業メモリ7は、画像処理部5が各種の画像処理を行う際などに一時的なメモリとして使用される。撮像装置制御部8は、所定のシーケンスプログラムにしたがって、電子カメラの統括的な制御を行うプロセッサである。
記録I/F部9は、記録媒体10を接続するためのコネクタが形成される。そして、記録I/F部9は、コネクタに接続された記録媒体10に対してデータの書き込み/読み込みを実行する。表示部11は、撮像装置制御部8の制御により各種の画像を表示する。また、表示部11には、撮像装置制御部8の制御によりGUI(Graphical User Interface)形式の入力が可能なメニュー画面なども表示することができる。操作部12は、レリーズ釦や操作釦などを有している。操作部12のレリーズ釦は、撮像動作の指示をユーザから受け付ける。操作部12の操作釦は、上記のメニュー画面等での入力をユーザから受け付ける。水平センサ13は、撮像装置1の回転角度を検出して、画像処理部5に出力する。
図2は、撮像装置1における撮像時の撮像装置制御部8の動作を示すフローチャートである。
ステップS1で、撮像装置制御部8は、レリーズ釦が全押しされたか否かを判定する。レリーズ釦が全押しされた場合(YES)には、S2に移行する。一方、レリーズ釦が全押しされていない場合(NO)には、撮像装置制御部8は、レリーズ釦が全押しされるまで待機する。
ステップS2で、撮像装置制御部8は、撮像素子3を駆動させてA領域の画像の信号を読み出す。ここで、撮像素子3の画素範囲について説明する。図3は、撮像素子3の概略図である。図3に示すように、撮像素子3の有効画素範囲のうち、ユーザが所望する画角の画像に対応する画素の領域をA領域とし、A領域に外接する画素の領域をB領域とする。例えば、全体の有効画素数を約1200万画素(4000×3000画素)とし、A領域を約1000万画素(3648×2736画素)とする。なお、撮像素子3は、上述した通りCMOSイメージセンサであるため、A領域の画像の信号とB領域の画像の信号とを別々に読み出すことができる。撮像装置制御部8は、A領域の画像の信号を読み出して、ステップS3に移行する。
ステップS3で、撮像装置制御部8は、画像処理部5を制御して、A/D変換部4から出力されたA領域の画像のデータに各種の画像処理を施すとともに、A領域の画像のデータをJPEG形式で圧縮する。
ステップS4で、撮像装置制御部8は、A領域の画像のデータをフレームメモリ6に記録後、作業メモリ7に記録する。
ステップS5で、撮像装置制御部8は、撮像素子3を駆動させてステップS2で説明したB領域の画像の信号を読み出す。
ステップS6で、撮像装置制御部8は、画像処理部5を制御して、A/D変換部4から出力されたB領域の画像のデータに各種の画像処理を施す。なお、B領域の画像のデータは非圧縮のデータとする。
ステップS7で、撮像装置制御部8は、B領域の画像のデータをフレームメモリ6に記録後、作業メモリ7に記録する。
ステップS8で、撮像装置制御部8は、図4に示す画像のファイルを作成するとともに、作業メモリ7に記録する。
図4は、画像のファイルの内容を示す図である。図4に示すように、画像のファイルは、A領域のJPEG画像と付加情報とで構成される。付加情報は、B領域の画像のデータ、A領域のJPEG画像の情報(A領域のサイズ、階調など)、撮像装置1固有の情報(撮像装置1の機種名、撮像レンズ2の型名など)、撮像時の情報(水平センサ13に基づく撮像装置1の回転角度、絞り値、感度など)、A領域のサムネイル画像などである。すなわち、B領域の画像のデータは、各種情報とともにA領域の画像の付加情報として画像のファイル内に記録される。そのため、ユーザは、後述の画像編集時以外には、B領域の画像のデータが画像のファイル内に記録されていることを意識しない。つまり、ユーザは、通常、画像のファイルを従来の画像のファイルと同様に、A領域の画像のファイルとして取り扱うことができる。
ステップS9で、撮像装置制御部8は、記録I/F部9を介して、ステップS8で作業メモリ7に記録した画像のファイルを記録媒体10に記録する。
次に、画像編集について説明する。図5,7,9,11は、撮像装置1における画像編集時の撮像装置制御部8の動作を示すフローチャートである。なお、撮像装置制御部8は、操作部12を介してユーザから予め画像編集の対象となる画像の指定を受け付けることを前提として説明とする。
ステップS11で、撮像装置制御部8は、表示部11にA領域の画像を表示する。
ステップS12で、撮像装置制御部8は、操作部12を介してユーザからA領域の画像の回転指示があるか否かを判定する。回転指示がある場合(YES)には、ステップS13に移行する。一方、回転指示がない場合(NO)には、後述するステップS21に移行する。
ステップS13で、撮像装置制御部8は、A領域の画像を作業メモリ7に展開する。
ステップS14で、撮像装置制御部8は、B領域の画像を作業メモリ7に展開する。撮像装置制御部8は、ステップS13で展開したA領域の画像とB領域の画像とを合わせて、撮像素子3の有効画素範囲に相当する画像を生成する。この画像をC領域の画像と称する。なお、撮像装置制御部8は、B領域の画像を展開するときに、A領域の画像の解像度に合うようにB領域の画像のデータの解像度を変換する処理も行っても良い。
ステップS15で、撮像装置制御部8は、操作部12を介してユーザからA領域の画像の回転角度を受け付ける。例えば、撮像装置制御部8は、ユーザから回転角度の数値を受け付ける。また、撮像装置制御部8は、表示部11にメニュー画面や回転を示すアイコンを表示することにより、ユーザから回転角度を受け付けても良い。
ステップS16で、撮像装置制御部8は、画像処理部5を制御して、ステップS15で受け付けた回転角度に基づいて、C領域の画像を回転する。
ステップS17で、撮像装置制御部8は、画像処理部5を制御して、回転後のC領域の画像からA領域の大きさに相当する画像を切り出す。A領域の画像の例を図6(a)に示し、回転後のC領域の画像から切り出す画像の例を図6(b)に示す。
ステップS18で、撮像装置制御部8は、ステップS17で切り出した画像を表示部11に表示する。
ステップS12で、回転指示がない場合(NO)には、ステップS21で、撮像装置制御部8は、操作部12を介してユーザからシフト指示があるか否かを判定する。シフト指示がある場合(YES)には、ステップS22に移行する。一方、シフト指示がない場合(NO)には、後述するステップS31に移行する。
ステップS22〜S23は、図5のステップS13〜S14にそれぞれ対応するため、重複説明を省略する。
ステップS24で、撮像装置制御部8は、操作部12を介してユーザからA領域の画像の画角をシフトする位置を受け付ける。例えば、撮像装置制御部8は、ユーザからシフト後の画像の座標を表す数値を受け付ける。また、撮像装置制御部8は、表示部11にメニュー画面やシフトを示す枠などを表示することにより、ユーザからA領域の画像の画角の移動を受け付けても良い。
ステップS25で、撮像装置制御部8は、画像処理部5を制御して、C領域の画像からシフト後のA領域の画像の画角に対応する画像を切り出す。A領域の画像の例を図8(a)に示し、C領域の画像から切り出す画像の例を図8(b)に示す。
ステップS26で、撮像装置制御部8は、ステップS25で切り出した画像を表示部11に表示する。
ステップS21で、シフト指示がない場合(NO)には、ステップS31で、撮像装置制御部8は、操作部12を介してユーザからズームアウト指示があるか否かを判定する。ズームアウト指示がある場合(YES)には、ステップS32に移行する。一方、ズームアウト指示がない場合(NO)には、後述するステップS41に移行する。
ステップS32〜S33は、図5のステップS13〜S14にそれぞれ対応するため、重複説明を省略する。
ステップS34で、撮像装置制御部8は、操作部12を介してユーザからA領域の画像をズームアウトする倍率を受け付ける。例えば、撮像装置制御部8は、ユーザからズームアウトする倍率の数値を受け付ける。また、撮像装置制御部8は、表示部11にメニュー画面やズームアウトを示す枠などを表示することにより、ユーザからA領域の画像の画角の縮小を受け付けても良い。
ステップS35で、撮像装置制御部8は、画像処理部5を制御して、ステップS34で受け付けた倍率に基づいて、C領域の画像を縮小する。
ステップS36で、撮像装置制御部8は、画像処理部5を制御して、縮小後のC領域の画像からA領域の大きさに相当する画像を切り出す。A領域の画像の例を図10(a)に示し、縮小後のC領域の画像から切り出す画像の例を図10(b)に示す。
ステップS37で、撮像装置制御部8は、ステップS36で切り出した画像を表示部11に表示する。
ステップS31で、ズームアウト指示がない場合(NO)には、ステップS41で、撮像装置制御部8は、操作部12を介してユーザからズームイン指示があるか否かを判定する。ズームイン指示がある場合(YES)には、ステップS42に移行する。一方、ズームアウト指示がない場合(NO)には、ステップS12に戻る。
ステップS42は、図5のステップS13に対応するため、重複説明を省略する。
ステップS43で、撮像装置制御部8は、操作部12を介してユーザからA領域の画像をズームインする倍率と位置とを受け付ける。例えば、撮像装置制御部8は、ユーザからズームインする倍率の数値を受け付ける。また、撮像装置制御部8は、表示部11にメニュー画面やズームインを示す枠などを表示することにより、ユーザからA領域の画像の画角の縮小を受け付けても良い。
ステップS44で、撮像装置制御部8は、画像処理部5を制御して、ステップS43で受け付けた倍率と位置とに基づいて、A領域の画像の画角を縮小する。
ステップS45で、撮像装置制御部8は、画像処理部5を制御して、A領域の画像から縮小したA領域の画角に対応する画像を切り出すとともに、切り出した画像をA領域の大きさに拡大する。A領域の画像の例を図12(a)に示し、A領域の大きさに拡大した画像の例を図12(b)に示す。
ステップS46で、撮像装置制御部8は、ステップS45で拡大した画像を表示部11に表示する。
以下、第1実施形態の作用効果を説明する。第1実施形態の撮像装置1は、ユーザが所望する画角の画像より大きい画角の画像を記録するため、画像編集に好適な画像を記録することができる。
また、第1実施形態の撮像装置1によれば、ユーザが所望する画角外の画像のデータを付加情報として記録するため、ユーザは通常、所望する画角外の画像のデータが画像のファイル内に記録されていることを意識しない。したがって、ユーザは、通常、画像のファイルを従来の画像のファイルと同様に、所望する画角の画像の画像のファイルとして取り扱うことができる。
(第2実施形態)
以下、本発明の第2実施形態について説明する。ここで、以下の実施形態における撮像装置の構成は、図1に示す第1実施形態の撮像装置1と共通するので重複説明は省略する。図13は、第2実施形態の撮像装置1における撮像時の撮像装置制御部8の動作を示すフローチャートである。
ステップS51で、撮像装置制御部8は、図2のステップS1と同様に、レリーズ釦が全押しされたか否かを判定する。レリーズ釦が全押しされた場合(YES)には、S52に移行する。一方、レリーズ釦が全押しされていない場合(NO)には、撮像装置制御部8は、レリーズ釦が全押しされるまで待機する。
ステップS52で、撮像装置制御部8は、水平センサ13を制御して、撮像装置1の回転角度を検出して、画像処理部5に出力する。
ステップS53で、撮像装置制御部8は、ステップS52で検出した回転角度が水平状態か否かを判定する。水平状態である場合(YES)には、ステップS54に移行する。一方、水平状態でない場合(NO)には、ステップS57に移行する。
ステップS54〜ステップS56は、図2のステップS2〜ステップS4にそれぞれ対応するため、重複説明を省略する。
ステップS57で、撮像装置制御部8は、A領域の画像のファイルを作成するとともに、作業メモリ7に記録する。なお、A領域の画像のファイルは、図4に示す画像のファイルのうち、B領域の画像のデータを除くものと同様の画像のファイルとする。
ステップS58〜S65は、図2のステップS2〜ステップS9にそれぞれ対応するため、重複説明を省略する。
なお、第2実施形態の撮像装置1は、上記の流れで生成した画像のファイルを、第1実施形態の撮像装置1と同様に回転処理することができる。
以下、第2実施形態の作用効果を説明する。第2実施形態の撮像装置1は、撮像装置1が水平状態でないと判定した場合には、画像の回転処理に備えて、ユーザが所望する画角より広い画角の画像を記録する。したがって、第1実施形態と同様に、回転処理に好適な画像を記録することができる。
また、第2実施形態の撮像装置1は、撮像装置1が水平状態でないと判定した場合、すなわち、画像の回転処理に備える必要があると判定した場合のみ、ユーザが所望する画角より広い画角の画像を記録する。したがって、画像の回転処理に備える必要がない場合には、ユーザが所望する画角より広い画角の画像を記録しない。そのため、記録媒体10の記録領域を無駄遣いすることなく、より多くの画像のデータを記録媒体10に記録することができる。
なお、第1実施形態および第2実施形態では、撮像装置1に水平センサ13を備え、水平センサ13により撮像装置1の回転角度を検出する例を示したが、スルー画像から画像解析を行って、撮像装置1の回転角度を検出しても良い。
(第3実施形態)
以下、本発明の第3実施形態について説明する。本発明の第3実施形態では、第1実施形態または第2実施形態で生成した画像のファイルに対する画像編集をコンピュータで実現する。図14は、本発明の第3実施形態におけるコンピュータ21の構成を示すブロック図である。
コンピュータ21は、コンピュータ制御部22、画像処理部23、表示部24、キーボードやマウスなどを含む操作部25、記録部26、第1実施形態または第2実施形態の撮像装置1と相互に接続可能な外部I/F部27を備え、操作部25を介してユーザから指示を受け付けるとともに、第1実施形態または第2実施形態の撮像装置1から取得した画像や、記録部26に記録した画像を表示部24に表示する。画像処理部23は、画像処理プログラムにより第1実施形態または第2実施形態の撮像装置1の画像処理部5と同様の画像処理(図5,7,9,11のフローチャート参照)を行う。
第3実施形態のコンピュータ21によれば、第1実施形態または第2実施形態と同様の処理を実施することができ、好適な画像編集を行うことができる。
(実施形態の補足)
なお、第1実施形態の回転処理において、ユーザからの回転角度の指示に応じて、C領域の画像を回転する例を示したが、回転処理の流れはこれに限らない。例えば、図5の例では、撮像装置制御部8は、ステップS15のユーザ指示に代えて、水平センサ13が出力した回転角度に基づいて、撮像装置1が水平状態か否かを判定する。そして、撮像装置制御部8は、画像処理部5を制御して、撮像装置1が水平状態でないと判定された場合には、C領域の画像を自動で水平状態に回転する構成としても良い。また、第3実施形態の回転処理においても同様の構成としても良い。なお、第3実施形態においては、水平センサ13が出力した回転角度に代えて、画像から画像解析を行って撮像装置1の回転角度を検出しても良い。
また、第1実施形態のシフト処理において、A領域の画像の画角をシフトするとともに、C領域の画像からシフト後のA領域の画像の画角に対応する画像を切り出す例を示したが、シフト処理の流れはこれに限らない。例えば、ステップS24で、撮像装置制御部8は、操作部12を介してユーザからC領域の画像をシフトする位置を受け付ける。そして、ステップS25で、撮像装置制御部8は、画像処理部5を制御して、シフト後のC領域の画像からA領域の画像と同じ位置、かつ、同じ大きさに相当する画像を切り出す構成としても良い。また、第3実施形態のシフト処理においても同様の構成としても良い。
また、第1実施形態のズームアウト処理において、C領域の画像を縮小するとともに、縮小したC領域の画像からA領域の大きさに相当する画像を切り出す例を示したが、ズームアウト処理の流れはこれに限らない。例えば、ステップS35で、撮像装置制御部8は、画像処理部5を制御して、ステップS34で受け付けた倍率に基づいて、A領域の画像の画角を拡大する。そして、ステップS36で、撮像装置制御部8は、画像処理部5を制御して、C領域の画像から拡大後のA領域の画像の画角に対応する画像を切り出すとともに、切り出した画像をA領域の大きさに縮小する構成としても良い。また、第3実施形態のズームアウト処理においても同様の構成としても良い。
また、第1実施形態のズームイン処理において、A領域の画像の画角を縮小するとともに、A領域の画像から縮小したA領域の画角に対応する画像を切り出す。そして、切り出した画像をA領域の大きさに拡大する例を示したが、ズームイン処理の流れはこれに限らない。例えば、ステップS44で、撮像装置制御部8は、画像処理部5を制御して、ステップS43で受け付けた倍率に基づいて、C領域の画像を拡大する。そして、ステップS45で、撮像装置制御部8は、画像処理部5を制御して、ステップS43で受け付けた倍率に基づいて、拡大後のC領域の画像からA領域の大きさに相当する画像を切り出す構成としても良い。また、第3実施形態のズームイン処理においても同様の構成としても良い。
また、第1実施形態または第3実施形態において、回転処理、シフト処理、ズームアウト処理、ズームイン処理を別々に処理する例を示したが、画像編集処理の流れはこれに限らない。例えば、図5の例において、撮像装置制御部8は、ステップS11の後で、上記の画像編集のうち、何れか任意の処理の組み合わせをユーザから受け付ける。そして、撮像装置制御部8は、ユーザからの指示に応じて、順次画像処理を行っても良い。
また、第1実施形態および第2実施形態において、A領域の大きさは限定されない。例えば、図2のステップS1の前において、撮像装置制御部8は、撮像装置1の操作部を介してユーザからA領域の大きさを受け付ける構成としても良い。
また、第2実施形態において、撮像条件に応じてA領域の大きさを変更しても良い。例えば、初級者が撮像する場合には、上級者が撮像する場合や三脚などを用いて撮像する場合と比較して、撮像装置をより傾けた状態で撮像しやすい。そのため、初級者が撮像する場合には、撮像装置の回転角度が大きくなっても回転後の領域Cから領域Aの大きさに相当する画像を切り出せるように、領域Bの範囲を大きく設定しても良い。すなわち、図13の例では、撮像装置制御部8は、ステップS51の前に、ユーザから初級者が撮像する、上級者が撮像するまたは三脚を用いて撮像するのいずれかを受け付ければ良い。そして、撮像装置制御部8は、初級者が撮像する場合には、領域Bの範囲を大きく設定すれば良い。
また、初級者が撮像する場合には、上級者が撮像する場合と比較して、構図が決まらない状態で撮像するなど、撮像時の画像を修正する可能性が高い。そのため、初級者が撮像する場合には、領域Cからシフトした画角の画像またはズームアウトした画角の画像を切り出せるように、領域Bの範囲を大きく設定しても良い。すなわち、図2の例では、第1実施形態の撮像装置1の撮像素子3がCMOSイメージセンサである場合に、撮像装置制御部8は、ステップS1の前に、ユーザから初級者が撮像する、上級者が撮像するのいずれかを受け付ければ良い。
また、第1実施形態および第2実施形態において、撮像素子3は、CMOSイメージセンサに限らない。例えば、撮像素子3は、CCD(Charge Coupled Device)イメージセンサでも良い。このとき、撮像装置1の画像処理部5は、図2のステップS2〜ステップS6において、被写体を撮像して生成した画像のデータを分割して、A領域の画像のデータとB領域の画像のデータとに相当する画像のデータを生成すれば良い。
また、第1実施形態および第2実施形態において、撮像装置1が撮像する画像は静止画像に限らない。例えば、撮像装置1は、動画像を撮像する構成にしても良い。
また、第1実施形態および第2実施形態において、B領域の画像のデータがA領域の画像のデータの付加情報であれば、画像のファイルの内容は、上記の実施形態以外の構成であっても良い。
また、第1実施形態および第2実施形態において、B領域の画像のデータを非圧縮のデータとしたが、データの形式はこれに限らない。例えば、B領域の画像のデータをJPEG形式で圧縮しても良い。また、A領域の画像のデータを非圧縮のデータとしても良い。
第1実施形態の撮像装置1の構成を示すブロック図である。 第1実施形態の撮像装置1における撮像時の撮像装置制御部8の動作を示す図である。 撮像素子3の概略図である。 画像のファイルの一例を示す図である。 撮像装置1における画像編集時のコンピュータ制御部21の動作を示す図である。 回転処理における画像の一例を示す図である。 撮像装置1におけるシフト処理時のコンピュータ制御部21の動作を示す図である。 シフト処理時における画像の一例を示す図である。 撮像装置12におけるズームアウト処理時のコンピュータ制御部21の動作を示す図である。 ズームアウト処理時における画像の一例を示す図である。 撮像装置1におけるズームイン処理時のコンピュータ制御部21の動作を示す図である。 ズームイン処理時における画像の一例を示す図である。 第2実施形態の撮像装置1における撮像時の撮像装置制御部8の動作を示す図である。 第3実施形態のコンピュータ21の構成を示すブロック図である。
符号の説明
1…撮像装置、2…撮像レンズ、3…撮像素子、4…A/D変換部、5…画像処理部、8…撮像装置制御部、11…表示部、12…操作部、13…水平センサ、21…コンピュータ、22…コンピュータ制御部、23…画像処理部、24…表示部、25…操作部

Claims (13)

  1. 被写体を撮像してユーザが所望する画角の第1画像のデータと前記第1画像に外接する第2画像のデータとを生成する撮像部と、
    前記第1画像のデータを記録するとともに、前記第1画像のデータの付加情報として前記第2画像のデータを記録する記録部と
    を備えることを特徴とする撮像装置。
  2. 請求項1に記載の撮像装置において、
    前記撮像部は、前記第1画像のデータと前記第2画像のデータとを別々に読み出す撮像素子を備える
    ことを特徴とする撮像装置。
  3. 請求項1に記載の撮像装置において、
    前記撮像部は、被写体を撮像して生成した画像のデータを分割して前記第1画像のデータと前記第2画像のデータとを生成する
    ことを特徴とする撮像装置。
  4. 請求項1に記載の撮像装置において、
    前記撮像装置の水平状態に対する回転角度を検出する回転角度検出部と、
    前記回転角度検出部により検出された前記回転角度に基づいて、前記撮像装置が水平状態か否かを判定する角度判定部とをさらに備え、
    前記記録部は、前記撮像装置が前記水平状態でないときにのみ、前記第2画像のデータを記録する
    ことを特徴とする撮像装置。
  5. 請求項1に記載の撮像装置において、
    前記記録部から前記第1画像のデータと前記第2画像のデータとを読み出すとともに、前記第1画像と前記第2画像とを合わせて第3画像を生成する画像処理部と、
    前記第1画像を表示する表示部と、
    前記第1画像の回転指示をユーザから受け付ける操作部とをさらに備え、
    前記画像処理部は、前記回転指示に応じて、前記第3画像を回転するとともに、前記回転後の前記第3画像から前記第1画像の大きさに相当する画像を切り出す
    ことを特徴とする撮像装置。
  6. 請求項1に記載の撮像装置において、
    前記記録部から前記第1画像のデータと前記第2画像のデータとを読み出すとともに、前記第1画像と前記第2画像とを合わせて第3画像を生成する画像処理部と、
    前記第1画像を表示する表示部と、
    前記第1画像の画角をシフトする指示をユーザから受け付ける操作部とをさらに備え、
    前記画像処理部は、前記指示に応じて、前記第1画像の画角をシフトするとともに、前記第3画像から前記シフト後の前記第1画像の画角に対応する画像を切り出すか、または、前記画像処理部は、前記指示に応じて、前記第3画像をシフトするとともに、前記シフト後の前記第3画像から前記第1画像と同じ位置、かつ、同じ大きさに相当する画像を切り出す
    ことを特徴とする撮像装置。
  7. 請求項1に記載の撮像装置において、
    前記記録部から前記第1画像のデータと前記第2画像のデータを読み出すとともに、前記第1画像と前記第2画像とを合わせて第3画像を生成する画像処理部と、
    前記第1画像を表示する表示部と、
    前記第1画像をズームアウトする倍率をユーザから受け付ける操作部とをさらに備え、
    前記画像処理部は、前記倍率に応じて、前記第3画像を縮小するとともに、前記縮小した前記第3画像から前記第1画像の大きさに相当する画像を切り出すか、または、前記画像処理部は、前記倍率に応じて、前記第1画像の画角を拡大して、前記第3画像から前記拡大した前記第1画像の画角に対応する画像を切り出すとともに、前記切り出した画像を前記第1画像の大きさに縮小する
    ことを特徴とする撮像装置。
  8. 請求項2に記載の撮像装置において、
    前記撮像素子は、前記第1画像に対応する画素の領域を変更可能である
    ことを特徴とする撮像装置。
  9. 請求項3に記載の撮像装置において、
    前記撮像部は、前記画像のデータを分割する領域を変更して、前記第1画像の大きさを変更可能である
    ことを特徴とする撮像装置。
  10. 処理対象の画像データに対する画像処理をコンピュータで実現するための画像処理プログラムであって、
    前記記録部から前記第1画像のデータと前記第2画像のデータとを読み出すとともに、前記第1画像と前記第2画像とを合わせて第3画像を生成する画像生成ステップと、
    前記第1画像を表示する表示ステップと、
    前記第1画像の画像編集指示をユーザから受け付ける編集指示受付ステップと、
    前記第3画像を画像編集する画像編集ステップと
    をコンピュータで実現することを特徴とする画像処理プログラム。
  11. 請求項10に記載の画像処理プログラムにおいて、
    前記編集指示受付ステップでは、前記第1画像の回転指示を受け付け、
    前記画像編集ステップでは、前記回転指示にしたがって、前記第3画像を回転するとともに、前記回転後の前記第3画像から前記第1画像の大きさに相当する領域を切り出す
    ことを特徴とする画像処理プログラム。
  12. 請求項10に記載の画像処理プログラムにおいて、
    前記編集指示受付ステップでは、前記第1画像の画角をシフトする指示を受け付け、
    前記画像編集ステップでは、前記指示にしたがって、前記第1画像の画角をシフトするとともに、前記第3画像から前記シフト後の前記第1画像の画角に対応する画像を切り出すか、または、前記画像編集ステップでは、前記指示に応じて、前記第3画像をシフトするとともに、前記シフト後の前記第3画像から前記第1画像と同じ位置、かつ、同じ大きさに相当する画像を切り出す
    ことを特徴とする画像処理プログラム。
  13. 請求項10に記載の画像処理プログラムにおいて、
    前記編集指示受付ステップでは、前記第1画像をズームアウトする倍率を受け付け、
    前記画像編集ステップでは、前記倍率にしたがって、前記第3画像を縮小するとともに、前記縮小した前記第3画像から前記第1画像の大きさに相当する画像を切り出すか、または、前記画像編集ステップでは、前記倍率にしたがって、前記第1画像の画角を拡大して、前記第3画像から前記拡大した前記第1画像の画角に対応する画像を切り出すとともに、前記切り出した画像を前記第1画像の大きさに縮小する
    ことを特徴とする画像処理プログラム。
JP2007234558A 2007-09-10 2007-09-10 撮像装置 Expired - Fee Related JP4930297B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2007234558A JP4930297B2 (ja) 2007-09-10 2007-09-10 撮像装置
PCT/JP2008/002218 WO2009034678A1 (ja) 2007-09-10 2008-08-15 撮像装置および画像処理プログラム
US12/674,616 US20110187879A1 (en) 2007-09-10 2008-08-15 Imaging device and image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007234558A JP4930297B2 (ja) 2007-09-10 2007-09-10 撮像装置

Publications (3)

Publication Number Publication Date
JP2009071375A true JP2009071375A (ja) 2009-04-02
JP2009071375A5 JP2009071375A5 (ja) 2011-08-25
JP4930297B2 JP4930297B2 (ja) 2012-05-16

Family

ID=40451699

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007234558A Expired - Fee Related JP4930297B2 (ja) 2007-09-10 2007-09-10 撮像装置

Country Status (3)

Country Link
US (1) US20110187879A1 (ja)
JP (1) JP4930297B2 (ja)
WO (1) WO2009034678A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016502346A (ja) * 2012-11-27 2016-01-21 クゥアルコム・インコーポレイテッドQualcomm Incorporated キャプチャされたビデオの向きを調節するためのシステムおよび方法

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130092213A (ko) * 2012-02-10 2013-08-20 삼성전자주식회사 디지털 촬영 장치 및 이의 제어 방법
US10306128B2 (en) * 2014-06-12 2019-05-28 Ebay Inc. Synchronized media capturing for an interactive scene
EP3286915B1 (en) 2015-04-23 2021-12-08 Apple Inc. Digital viewfinder user interface for multiple cameras
US9716825B1 (en) 2016-06-12 2017-07-25 Apple Inc. User interface for camera effects
US9939647B2 (en) * 2016-06-20 2018-04-10 Microsoft Technology Licensing, Llc Extended field of view in near-eye display using optically stitched imaging
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002314868A (ja) * 2001-04-13 2002-10-25 Olympus Optical Co Ltd 撮像装置
JP2004072677A (ja) * 2002-08-09 2004-03-04 Sharp Corp 画像合成装置、画像合成方法、画像合成プログラム、および画像合成プログラムを記録した記録媒体
JP2006270187A (ja) * 2005-03-22 2006-10-05 Sony Corp 撮影装置、情報処理装置、情報処理方法、プログラム、およびプログラム記録媒体
JP2006279373A (ja) * 2005-03-29 2006-10-12 Seiko Epson Corp 画角を維持した画像の傾き補正
JP2007043502A (ja) * 2005-08-03 2007-02-15 Sony Corp 撮像装置
JP2008118495A (ja) * 2006-11-07 2008-05-22 Matsushita Electric Ind Co Ltd 撮像装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004015987A1 (ja) * 2002-08-09 2004-02-19 Sharp Kabushiki Kaisha 画像合成装置、画像合成方法、画像合成プログラム、および画像合成プログラムを記録した記録媒体
JP2006129391A (ja) * 2004-11-01 2006-05-18 Sony Corp 撮像装置
GB0424767D0 (en) * 2004-11-10 2004-12-08 Koninkl Philips Electronics Nv Method for generating images and optical device
JP4379728B2 (ja) * 2005-01-31 2009-12-09 カシオ計算機株式会社 撮像装置及びそのプログラム
JP2007180730A (ja) * 2005-12-27 2007-07-12 Eastman Kodak Co デジタルカメラおよびデータ管理方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002314868A (ja) * 2001-04-13 2002-10-25 Olympus Optical Co Ltd 撮像装置
JP2004072677A (ja) * 2002-08-09 2004-03-04 Sharp Corp 画像合成装置、画像合成方法、画像合成プログラム、および画像合成プログラムを記録した記録媒体
JP2006270187A (ja) * 2005-03-22 2006-10-05 Sony Corp 撮影装置、情報処理装置、情報処理方法、プログラム、およびプログラム記録媒体
JP2006279373A (ja) * 2005-03-29 2006-10-12 Seiko Epson Corp 画角を維持した画像の傾き補正
JP2007043502A (ja) * 2005-08-03 2007-02-15 Sony Corp 撮像装置
JP2008118495A (ja) * 2006-11-07 2008-05-22 Matsushita Electric Ind Co Ltd 撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016502346A (ja) * 2012-11-27 2016-01-21 クゥアルコム・インコーポレイテッドQualcomm Incorporated キャプチャされたビデオの向きを調節するためのシステムおよび方法

Also Published As

Publication number Publication date
JP4930297B2 (ja) 2012-05-16
WO2009034678A1 (ja) 2009-03-19
US20110187879A1 (en) 2011-08-04

Similar Documents

Publication Publication Date Title
JP4930297B2 (ja) 撮像装置
JP4489608B2 (ja) ディジタル・スチル・カメラ,画像再生装置および顔画像表示装置ならびにそれらの制御方法
US6750903B1 (en) Super high resolution camera
JP4378258B2 (ja) 画像補正装置およびその制御方法
JP5106142B2 (ja) 電子カメラ
US20100238325A1 (en) Image processor and recording medium
JP2008123086A (ja) 画像処理装置及び画像処理方法
JP2006293782A (ja) 画像処理装置及び画像処理プログラム
JP2006293783A (ja) 画像処理装置及び画像処理プログラム
JP5952782B2 (ja) 画像処理装置及びその制御方法、プログラム、記憶媒体
JP5877329B2 (ja) 撮像装置および画像処理装置
JP5282530B2 (ja) デジタルカメラ
US9137448B2 (en) Multi-recording image capturing apparatus and control method for multi-recording image capturing apparatus for enabling the capture of two image areas having two different angles of view
JP2009089220A (ja) 撮像装置
JP2009077226A (ja) 撮像装置とその制御方法及びプログラム及びプログラムを記憶した記憶媒体
JP5950755B2 (ja) 画像処理装置、制御方法、プログラム及び記憶媒体
JP2010263270A (ja) 撮像装置
JP2009089172A (ja) 画像表示装置
JP5267279B2 (ja) 画像合成装置及びプログラム
JP4632417B2 (ja) 撮像装置、及びその制御方法
JP2010263269A (ja) 撮像装置
JP4379191B2 (ja) 電子カメラおよび画像処理プログラム
JP2010016693A (ja) 電子カメラ
JP2020061760A (ja) 撮像装置
JP5417920B2 (ja) 画像処理装置、画像処理方法、電子カメラおよび画像処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100907

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110712

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111018

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111219

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120117

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120130

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4930297

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150224

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150224

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees