JP3950550B2 - Image processing apparatus, control method therefor, and storage medium - Google Patents

Image processing apparatus, control method therefor, and storage medium Download PDF

Info

Publication number
JP3950550B2
JP3950550B2 JP15166998A JP15166998A JP3950550B2 JP 3950550 B2 JP3950550 B2 JP 3950550B2 JP 15166998 A JP15166998 A JP 15166998A JP 15166998 A JP15166998 A JP 15166998A JP 3950550 B2 JP3950550 B2 JP 3950550B2
Authority
JP
Japan
Prior art keywords
images
image
optical system
shooting
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP15166998A
Other languages
Japanese (ja)
Other versions
JPH11346339A (en
Inventor
洋一 山岸
琢 山上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP15166998A priority Critical patent/JP3950550B2/en
Priority to US09/265,070 priority patent/US7136096B1/en
Priority to EP99104778A priority patent/EP0942598B1/en
Priority to DE69941938T priority patent/DE69941938D1/en
Publication of JPH11346339A publication Critical patent/JPH11346339A/en
Application granted granted Critical
Publication of JP3950550B2 publication Critical patent/JP3950550B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【０００１】
【発明の属する技術分野】
本発明は、静止画像や動画像を撮像、記録、再生する画像処理装置及びその制御方法及び記憶媒体に関する。
【０００２】
【従来の技術】
従来より、固体メモリ素子を有するメモリカードを記録媒体として、静止画像や動画像を記録再生する電子カメラ等の画像処理装置が既に市販されており、カラー液晶パネル等の電子ファインダーを備える電子カメラも販売されている。
【０００３】
これらの電子カメラによれば、撮影前の画像を連続して表示して電子カメラの使用者が構図を決定することや、撮影した画像を再生表示して確認することが可能である。
【０００４】
特に、複数枚撮影した画像を組み合わせてパノラマ画像を作成する機能は利便性が高く、電子カメラの使用者にとって有益な機能となっている。
【０００５】
また、撮像レンズの焦点距離を可変出来る切り替えレンズやズームレンズを備える電子カメラも販売されている。
【０００６】
【発明が解決しようとする課題】
このような従来の電子カメラ等の画像処理装置においては、パノラマ画像の撮影中に、電子カメラ等の画像処理装置の使用者が撮影レンズの焦点距離を切り替えたり、或いはズーミングを行ったりすることがあった。この場合、複数枚撮影した画像を組み合わせてパノラマ画像を作成する際に、焦点距離の違いを補正するために余分な補正演算を行う必要があり、画質が著しく低下することが多く問題であった。
【０００７】
また、撮影レンズの焦点距離を切り替えたり、或いはズーミングを行ったりしたために、それぞれ撮影した画像の構図が個々に著しく異なる場合、合成したパノラマ画像の外形が撮影した画像毎に大きく異なって段付きとなってしまうという問題があった。
【０００８】
さらに、パノラマ撮影の途中で、撮影レンズの焦点距離切り替えがパノラマ撮影に不適当な側に切り替わっているのに気付いた場合、或いはズームレンズのズーム位置がパノラマ撮影に不適当な位置にあることに気付いた場合、パノラマ撮影のために複数枚の撮影を行っている途中であるにも関わらず、撮影レンズの焦点距離を切り替えたり、或いはズーミングを行ったりして前述の問題点を引き起こしてしまうことが起こり易く、問題であった。
【０００９】
従って、本発明は上述した課題に鑑みてなされたものであり、その目的は、焦点距離を変更する機能を有するレンズを使用しても、パノラマ撮影時に問題の発生しない画像処理装置及びその制御方法及び記憶媒体を提供することである。
【００２２】
【課題を解決するための手段】
上述した課題を解決し、目的を達成するために、本発明に係わる画像処理装置は、撮像した複数枚の静止画像及び／又は動画像を記憶手段に記憶する機能を有する画像処理装置であって、光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する様に制御する制御手段と、を具備することを特徴としている。
【００２３】
また、この発明に係わる画像処理装置において、前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴としている。
【００２４】
また、この発明に係わる画像処理装置において、前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴としている。
【００２５】
また、この発明に係わる画像処理装置において、前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴としている。
【００２６】
また、本発明に係わる画像処理装置は、撮像した複数枚の静止画像及び／又は動画像を記憶手段に記憶する機能を有する画像処理装置であって、光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、外部に所定の情報を表示する表示手段と、前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、前記表示手段により警告情報を表示した後に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する様に制御する制御手段と、を具備することを特徴としている。
【００２７】
また、この発明に係わる画像処理装置において、前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴としている。
【００２８】
また、この発明に係わる画像処理装置において、前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴としている。
【００２９】
また、この発明に係わる画像処理装置において、前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴としている。
【００４７】
また、本発明に係わる画像処理装置の制御方法は、光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段とを備える画像処理装置を制御するための画像処理装置の制御方法であって、前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始することを特徴としている。
【００４８】
また、この発明に係わる画像処理装置の制御方法において、前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴としている。
【００４９】
また、この発明に係わる画像処理装置の制御方法において、前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴としている。
【００５０】
また、この発明に係わる画像処理装置の制御方法において、前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴としている。
【００５１】
また、本発明に係わる画像処理装置の制御方法は、光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、外部に所定の情報を表示する表示手段とを備える画像処理装置を制御するための画像処理装置の制御方法であって、前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、前記表示手段により警告情報を表示した後に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始することを特徴としている。
【００５２】
また、この発明に係わる画像処理装置の制御方法において、前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴としている。
【００５３】
また、この発明に係わる画像処理装置の制御方法において、前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴としている。
【００５４】
また、この発明に係わる画像処理装置の制御方法において、前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴としている。
【００７２】
また、本発明に係わる記憶媒体は、光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段とを備える画像処理装置を制御する制御プログラムを格納した記憶媒体であって、該制御プログラムが、前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する工程のコードを具備することを特徴としている。
【００７３】
また、この発明に係わる記憶媒体において、前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴としている。
【００７４】
また、この発明に係わる記憶媒体において、前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴としている。
【００７５】
また、この発明に係わる記憶媒体において、前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴としている。
【００７６】
また、本発明に係わる記憶媒体は、光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、外部に所定の情報を表示する表示手段とを備える画像処理装置を制御する制御プログラムを格納した記憶媒体であって、該制御プログラムが、前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、前記表示手段により警告情報を表示した後に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する工程のコードを具備することを特徴としている。
【００７７】
また、この発明に係わる記憶媒体において、前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴としている。
【００７８】
また、この発明に係わる記憶媒体において、前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴としている。
【００７９】
また、この発明に係わる記憶媒体において、前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴としている。
【００８５】
【発明の実施の形態】
以下、本発明の好適な実施形態について、添付図面を参照して詳細に説明する。
【００８６】
（第１の実施形態）
図１は、本発明の第１の実施形態に係わる画像処理装置の構成を示す図である。
【００８７】
図１において、１００は画像処理装置である。
１４は光学像を電気信号に変換する撮像素子、１６は撮像素子１４のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。
１８は撮像素子１４、 Ａ／Ｄ変換器１６、 Ｄ／Ａ変換器２６にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。
２０は画像処理回路であり、 Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。
【００８８】
また、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御手段３４０、測距制御手段３４２に対して制御を行う、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を行っている。
【００８９】
さらに、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。
【００９０】
Ａ／Ｄ変換器１６のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１６のデータが直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００９１】
２４は画像表示メモリ、２６はＤ／Ａ変換器、２８はＴＦＴ ＬＣＤ等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。
【００９２】
画像表示部２８を用いて撮像した画像データを逐次表示すれば、電子ファインダー機能を実現することが可能である。
【００９３】
また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合には画像処理装置１００の電力消費を大幅に低減することが出来る。
【００９４】
３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。これにより、複数枚の静止画像を連続して撮影する連射撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。
また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００９５】
３２は適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する圧縮・伸長回路であり、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。
【００９６】
４８はフラッシュであり、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。
【００９７】
露光制御手段３４０、測距制御手段３４２はＴＴＬ方式を用いて制御されており、撮像した画像データを画像処理回路２０によって演算した演算結果に基づき、システム制御回路５０が露光制御手段３４０、測距制御手段３４２に対して制御を行う。
【００９８】
５０は画像処理装置１００全体を制御するシステム制御回路、５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。
【００９９】
５４はシステム制御回路５０でのプログラムの実行に応じて、文字、画像、音声等を用いて動作状態やメッセージ等を表示する液晶表示装置、スピーカー等の表示部であり、画像処理装置１００の操作部近辺の視認し易い位置に単数或いは複数個所設置され、例えばＬＣＤやＬＥＤ、発音素子等の組み合わせにより構成されている。
【０１００】
また、表示部５４は、その一部の機能が光学ファインダー１０４内に設置されている。
【０１０１】
表示部５４の表示内容のうち、ＬＣＤ等に表示するものとしては、例えば、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、シャッタースピード表示、絞り値表示、露出補正表示、フラッシュ表示、赤目緩和表示、マクロ撮影表示、ブザー設定表示、時計用電池残量表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００及び２１０の着脱状態表示、レンズユニット３００の着脱状態表示、通信Ｉ／Ｆ動作表示、日付け・時刻表示、外部コンピュータとの接続状態を示す表示、等がある。
【０１０２】
また、表示部５４の表示内容のうち、光学ファインダー１０４内に表示するものとしては、例えば、合焦表示、撮影準備完了表示、手振れ警告表示、フラッシュ充電表示、フラッシュ充電完了表示、シャッタースピード表示、絞り値表示、露出補正表示、記録媒体書き込み動作表示、等がある。
【０１０３】
さらに、表示部５４の表示内容のうち、ＬＥＤ等に表示するものとしては、例えば、合焦表示、撮影準備完了表示、手振れ警告表示、フラッシュ充電表示、フラッシュ充電完了表示、記録媒体書き込み動作表示、マクロ撮影設定通知表示、二次電池充電状態表示、等がある。
【０１０４】
そして、表示部５４の表示内容のうち、ランプ等に表示するものとしては、例えば、セルフタイマー通知ランプ、等がある。このセルフタイマー通知ランプは、ＡＦ補助光と共用して用いても良い。
【０１０５】
５６は電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。
【０１０６】
６０，６２，６４，６６，６８，７０，７２，７４及び７６は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【０１０７】
ここで、これらの操作手段の具体的な説明を行う。
【０１０８】
６０はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定することが出来る。
【０１０９】
６２はシャッタースイッチＳＷ１で、不図示のシャッターボタンの操作途中でＯＮとなり、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作開始を指示する。
【０１１０】
６４はシャッタースイッチＳＷ２で、不図示のシャッターボタンの操作完了でＯＮとなり、撮像素子１２から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む露光処理、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理、メモリ３０から画像データを読み出し、圧縮・伸長回路３２で圧縮を行い、記録媒体２００或いは２１０に画像データを書き込む記録処理という一連の処理の動作開始を指示する。
【０１１１】
６６は選択/切り替えスイッチで、パノラマモード等の撮影及び再生を実行する際に、各種機能の選択及び切り替えを設定することが出来る。
【０１１２】
６８は決定/実行スイッチで、パノラマモード等の撮影及び再生を実行する際に、各種機能の決定及び実行を設定することが出来る。
【０１１３】
７０は各種ボタンやタッチパネル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写/連写/セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付/時間設定ボタン、画像表示部２８のＯＮ／ＯＦＦを設定する画像表示ＯＮ／ＯＦＦボタン、撮影直後に撮影した画像データを画像表示部２８で自動再生するクイックレビュー機能を設定するクイックレビューＯＮ／ＯＦＦボタン等がある。
【０１１４】
７２は圧縮モードスイッチで、ＪＰＥＧ圧縮の圧縮率を選択するため、或いは撮像素子の信号をそのままディジタル化して記録媒体に記録するＣＣＤＲＡＷモードを選択するためのスイッチである。
【０１１５】
ＪＰＥＧ圧縮のモードは、例えばノーマルモードとファインモードが用意されている。
【０１１６】
ＪＰＥＧ圧縮のモードに於いては、撮像素子１４から読み出されてＡ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、メモリ３０に書き込まれた画像データを読み出し、圧縮・伸長回路３２により設定した圧縮率に圧縮を行った後、記録媒体２００或いは２１０に記録を行う。
【０１１７】
ＣＣＤＲＡＷモードでは、撮像素子１４の色フィルタの画素配列に応じて、ライン毎にそのまま画像データを読み出して、Ａ／Ｄ変換器１６、メモリ制御回路２２を介して、メモリ３０に書き込まれた画像データを読み出し、記録媒体２００或いは２１０に記録を行う。
【０１１８】
７４及び７６はズームスイッチで、レンズユニット３００のズーム制御手段３４４を介して撮影レンズ３１０のズーム操作を行うスイッチである。ここで、７４は広角方向にズーミングを行うズームスイッチＷＩＤＥ、７６は望遠方向にズーミングを行うズームスイッチＴＥＬＥである。７４及び７６は一体となった構成のスイッチとしても良い。
【０１１９】
８０は電源制御手段で、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されており、電池の装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。
【０１２０】
８２はコネクタ、８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる電源手段である。
【０１２１】
９０及び９４はメモリカードやハードディスク等の記録媒体とのインタフェース、９２及び９６はメモリカードやハードディスク等の記録媒体と接続を行うコネクタ、９８はコネクタ９２及び或いは９６に記録媒体２００或いは２１０が装着されているか否かを検知する記録媒体着脱検知手段である。
【０１２２】
なお、本実施形態では記録媒体を取り付けるインターフェース及びコネクタを２系統持つものとして説明している。もちろん、記録媒体を取り付けるインターフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインターフェース及びコネクタを組み合わせて備える構成としても構わない。
【０１２３】
インターフェース及びコネクタとしては、ＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ）カード等の規格に準拠したものを用いて構成して構わない。
【０１２４】
さらに、インタフェース９０及び９４、そしてコネクタ９２及び９６をＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ）カード等の規格に準拠したものを用いて構成した場合、ＬＡＮカードやモデムカード、ＵＳＢカード、ＩＥＥＥ１３９４カード、Ｐ１２８４カード、ＳＣＳＩカード、ＰＨＳ等の通信カード、等の各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことが出来る。
１０４は光学ファインダであり、画像表示部２８による電子ファインダー機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。また、光学ファインダー１０４内には、表示部５４の一部の機能、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示などが設置されている。
【０１２５】
１１０は通信手段で、ＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、Ｐ１２８４、ＳＣＳＩ、モデム、ＬＡＮ、無線通信、等の各種通信機能を有する。
【０１２６】
１１２は通信手段１１０により画像処理装置１００を他の機器と接続するコネクタ或いは無線通信の場合はアンテナである。
【０１２７】
１２０は、レンズマウント１０６内において、画像処理装置１００をレンズユニット３００と接続するためのインタフェース、１２２は画像処理装置１００をレンズユニット３００と電気的に接続するコネクタ、１２４はレンズマウント１０６及び／或いはコネクタ１２２にレンズユニット３００が装着されているか否かを検知するレンズ着脱検知手段である。
【０１２８】
コネクタ１２２は、画像処理装置１００とレンズユニット３００との間で制御信号、状態信号、データ信号等を伝え合うと共に、各種電圧の電流を供給する機能も備えている。また、コネクタ１２２は電気通信のみならず、光通信、音声通信等を伝達する構成としても良い。
【０１２９】
２００はメモリカードやハードディスク等の記録媒体である。
記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、画像処理装置１００とのインタフェース２０４、画像処理装置１００と接続を行うコネクタ２０６を備えている。
【０１３０】
２１０はメモリカードやハードディスク等の記録媒体である。
記録媒体２１０は、半導体メモリや磁気ディスク等から構成される記録部２１２、画像処理装置１００とのインタフェース２１４、画像処理装置１００と接続を行うコネクタ２１６を備えている。
【０１３１】
３００は交換レンズタイプのレンズユニットである。
【０１３２】
３０６は、レンズユニット３００を画像処理装置１００と機械的に結合するレンズマウントである。レンズマウント３０６内には、レンズユニット３００を画像処理装置１００と電気的に接続する各種機能が含まれている。
【０１３３】
３１０は撮影レンズ、３１２は絞り機能を備えるシャッターである。
【０１３４】
３２０は、レンズマウント３０６内において、レンズユニット３００を画像処理装置１００と接続するためのインタフェース、３２２はレンズユニット３００を画像処理装置１００と電気的に接続するコネクタである。
【０１３５】
コネクタ３２２は、画像処理装置１００とレンズユニット３００との間で制御信号、状態信号、データ信号等を伝え合うと共に、各種電圧の電流を供給される或いは供給する機能も備えている。また、コネクタ３２２は電気通信のみならず、光通信、音声通信等を伝達する構成としても良い。
【０１３６】
３４０は絞り機能を備えるシャッター３１２を制御する露光制御手段であり、フラッシュ４８と連携することによりフラッシュ調光機能も有するものである。
【０１３７】
３４２は撮影レンズ３１０のフォーカシングを制御する測距制御手段、３４４は撮影レンズ３１０のズーミングを制御するズーム制御手段である。
【０１３８】
３５０はレンズユニット３００全体を制御するレンズシステム制御回路である。レンズシステム制御回路３５０は、動作用の定数、変数、プログラム等を記憶するメモリやレンズユニット３００固有の番号等の識別情報、管理情報、開放絞り値や最小絞り値、焦点距離等の機能情報、現在や過去の各設定値などを保持する不揮発メモリの機能も備えている。
図２Ａ、図２Ｂ、図３Ａ、図３Ｂ、図４、図５、図６、図７及び図８を参照して、第１の実施形態の動作を説明する。
【０１３９】
図２Ａ、図２Ｂ、図３Ａ、図３Ｂ及び図４は本実施形態の画像処理装置１００の主ルーチンのフローチャートを示す図である。
【０１４０】
図２Ａ、図２Ｂ、図３Ａ、図３Ｂ及び図４を用いて、画像処理装置１００の動作を説明する。
【０１４１】
電池交換等の電源投入により、システム制御回路５０はフラグや制御変数等を初期化すると共に、画像制御装置１００各部の初期化処理を行う（ステップＳ１０１）。
【０１４２】
システム制御回路５０は、モードダイアル６０の設定位置を判断し、モードダイアル６０が電源ＯＦＦに設定されていたならば（ステップＳ１０２）、各表示部の表示を終了状態に変更し、レンズユニット３００が保護手段のバリア等を備えている場合はそれを閉じて撮像部を保護し、フラグや制御変数等を含む必要なパラメータや設定値、設定モードを不揮発性メモリ５６に記録し、電源制御手段８０により画像表示部２８を含む画像処理装置１００各部の不要な電源を遮断する等の所定の終了処理を行った後（ステップＳ１０３）、ステップＳ１０２に戻る。
【０１４３】
モードダイアル６０がその他のモードに設定されていたならば（ステップＳ１０２）、システム制御回路５０は、電源制御手段８０により電池等により構成される電源８６の残容量や動作情況が画像処理装置１００の動作に問題があるか否かを判断し（ステップＳ１０４）、問題があるならば表示部５４を用いて画像や音声により所定の警告表示を行った後に（ステップＳ１０６）、ステップＳ１０２に戻る。
【０１４４】
なお、画像表示部２８の画像表示がＯＮであったならば、画像表示部２８も用いて画像や音声により所定の警告表示を行う。
【０１４５】
電源８６に問題が無いならば（ステップＳ１０４）、記録媒体２００或いは２１０の動作状態が画像処理装置１００の動作、特に記録媒体に対する画像データの記録再生動作に問題があるか否かを判断し（ステップＳ１０５）、問題があるならば表示部５４を用いて画像や音声により所定の警告表示を行った後に（ステップＳ１０６）、ステップＳ１０２に戻る。
【０１４６】
なお、画像表示部２８の画像表示がＯＮであったならば、画像表示部２８も用いて画像や音声により所定の警告表示を行う。
【０１４７】
記録媒体２００或いは２１０の動作状態に問題が無いならば（ステップＳ１０５）、表示部５４を用いて画像や音声により画像処理装置１００の各種設定状態の表示を行う（ステップＳ１０７）。なお、画像表示部２８の画像表示がＯＮであったならば、画像表示部２８も用いて画像や音声により画像処理装置１００の各種設定状態の表示を行う。
【０１４８】
モードダイアル６０が撮影モードに設定されていたならば（ステップＳ１０８）、所定の撮影処理を実行し（ステップＳ１０９）、処理を終えたならばステップＳ１０２に戻る。
【０１４９】
モードダイアル６０がその他のモードに設定されていたならば（ステップＳ１０８）、システム制御回路５０は選択されたモードに応じた処理を実行し（ステップＳ１１０）、処理を終えたならばステップＳ１０２に戻る。
【０１５０】
モードダイアル６０がパノラマモードに設定されていたならば（ステップＳ１０８）、システム制御回路５０は撮像レンズ３１０のズーム位置が所定のホームポジションであるか否かを判断し（ステップＳ１２１）、ホームポジションに位置していなかった場合はズーム位置をホームポジションに移動する（ステップＳ１２２）。
【０１５１】
なお、撮影レンズ３１０が焦点距離を複数種類に切り替える切り替えレンズであった場合も同様に、システム制御回路５０は撮像レンズ３１０の切り替えレンズの設定が所定のホームポジション側であるか否かを判断し（ステップＳ１２１）、ホームポジション側に位置していなかった場合は切り替えレンズの設定をホームポジション側に移動する（ステップＳ１２２）。
【０１５２】
また、ホームポジションの例としては、ズームレンズであれば、パノラマ撮影に適した広角側の焦点距離であるＷＩＤＥ端が一例としてあげられる。
【０１５３】
そして、焦点距離切り替えレンズであれば、パノラマ撮影に適した広角側の焦点距離であるＷＩＤＥ側の焦点距離を備えるレンズへの切り替えが一例としてあげられる。
【０１５４】
この例に限らず、パノラマ撮影に適した焦点距離に設定するのであれば、何れの焦点距離をホームポジションとしても良い。
システム制御回路５０は、画像表示部２８にパノラマモード選択画面を表示する（ステップＳ１１１）。
【０１５５】
画像処理装置１００の使用者は、画像表示部２８に表示されたパノラマモード選択画面を見て、複数のパノラマ撮影モードから任意のモードを選択することが出来る。
【０１５６】
パノラマ撮影モードには、２×２パノラマモード、水平パノラマモード、垂直パノラマモード等があり、複数の撮影を重ねることにより、２次元的に拡大したパノラマ画像や、水平方向に拡大したパノラマ画像、垂直方向に拡大したパノラマ画像を作成することが出来る。
【０１５７】
撮影した一連の各画像は、その位置関係を示す情報が付加されており、画像処理装置自身で、或いは、コンピュータ等に画像を転送した後に、各画像を結合して１枚のパノラマ画像を作成することが可能である。
なお、パノラマモード選択画面の一例を図９に示す。
図９において、左は２次元的なパノラマ画像を撮影するための２×２パノラマモードを選択するアイコン、中央は水平パノラマ画像を撮影するための水平パノラマモードを選択するアイコン、右は垂直パノラマ画像を撮影するための垂直パノラマモードを選択するアイコンである。
【０１５８】
画像処理装置１００の使用者は、選択／切換えスイッチ６６（例えば[＋]キー）により撮影するパノラマモードを選択し、決定／実行スイッチ６８（例えば[SET]キー）によりパノラマモードを決定することが出来る。
【０１５９】
選択／切換えスイッチ６６及び決定／実行スイッチ６８によりパノラマモードが選択されたならば、システム制御回路５０は、選択されたパノラマモードに応じて（ステップＳ１１２）、２×２パノラマモード初期設定（ステップＳ１１３）、垂直パノラマモード初期設定（ステップＳ１１４）、水平パノラマモード初期設定（ステップＳ１１５）において、フラグやパラメータ、変数の初期値、メモリ領域の設定や、ユーザーインターフェースとしての表示画面の読み出し等、をそれぞれ行い、各モードに応じたパノラマ撮影画面を画像表示部２８に表示して（ステップＳ１１６）、ステップＳ１３１に進む。
【０１６０】
なお、水平パノラマモード撮影画面の一例を図１０に、垂直パノラマモード撮影画面の一例を図１１に、２×２パノラマ撮影画面の一例を図１２に、それぞれ示す。
【０１６１】
図１０において、（ａ）は右方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面、（ｂ）は左方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面である。
【０１６２】
図中、一連のパノラマ画像の１枚目の撮影用に、電子ファインダによるスルー画像が「１」の領域に表示され、また、１枚目の撮影完了前であれば、選択／切換えスイッチ６６（例えば[＋]キー）により、右方向撮影（ａ）と左方向撮影（ｂ）を随時切り替えることが出来る。
【０１６３】
撮影方向の決定は、希望する（ａ）或いは（ｂ）何れかの表示画面状態で、シャッターボタンを押して１枚目の撮影を実行することで行われる。
【０１６４】
なお、決定／実行スイッチ６８（例えば[SET]キー）を押すことにより、水平パノラマモードでの撮影を終了することが出来る。
【０１６５】
また、図１１において、（ａ）は上方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面、（ｂ）は下方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面である。
【０１６６】
図中、一連のパノラマ画像の１枚目の撮影用に、電子ファインダによるスルー画像が「１」の領域に表示され、また、１枚目の撮影完了前であれば、選択／切換えスイッチ６６（例えば[＋]キー）により、上方向撮影（ａ）と下方向撮影（ｂ）を随時切り替えることが出来る。
【０１６７】
撮影方向の決定は、希望する（ａ）或いは（ｂ）何れかの表示画面状態で、シャッターボタンを押して１枚目の撮影を実行することで行われる。
【０１６８】
なお、決定／実行スイッチ６８（例えば[SET]キー）を押すことにより、垂直パノラマモードでの撮影を終了することが出来る。
【０１６９】
また、図１２において、（ａ）は２次元的に縦横計４枚の撮影を繰り返し、２×２のパノラマ画面を作成する撮影画面の１枚目の撮影用画面である。同じく、（ｂ）は２枚目の撮影用画面である。
【０１７０】
図中、パノラマ画像の１枚目の撮影用に、電子ファインダによるスルー画像が例えば右上の領域に表示される。
【０１７１】
１枚目の撮影を終えたならば、撮影した画像の再生画像を例えば右上の領域に表示し、２枚目の撮影用に、電子ファインダによるスルー画像が例えば右下の領域に表示される。
【０１７２】
電子ファインダーによる撮影領域は、撮影の度に次の領域へと順次送られるが、任意の領域から撮影を開始することが可能であり、また、撮影済みの領域に戻って撮影をやり直すことも可能である。このため、選択／切換えスイッチ６６（例えば[＋]キー）により、随時、撮影領域を移動することが出来る。
【０１７３】
やり直し撮影領域の決定及び撮影実行は、希望する領域を選択した表示画面状態で、シャッターボタンを押して撮影を実行することで行われる。
【０１７４】
なお、決定／実行スイッチ６８（例えば[SET]キー）を押すことにより、２×２パノラマモードでの撮影を終了することが出来る。
【０１７５】
システム制御回路５０は、システム制御回路５０の内部メモリ或いはメモリ５２に設定したフラグや変数を初期化する。例えば、パノラマ撮影開始フラグを解除し（ステップＳ１３１）、変数ｍ，ｎを設定して、それぞれｍ＝１，ｎ＝１と初期化する（ステップＳ１３３，ステップＳ１３２）。
【０１７６】
ここで、パノラマ撮影開始フラグの解除は、まだ一連のパノラマ撮影が１枚も行われていないことを示している。
また、変数nは、各パノラマモードの撮影において何枚目の撮影領域であるかを示すものである。
【０１７７】
そして、変数ｍは、水平パノラマモード及び垂直パノラマモードでの撮影やり直しの際に、撮影領域を１枚前に戻したり、戻すのを取り止めたりするために使用している。
【０１７８】
これらのフラグや変数の使用方法の詳細については後述する。
【０１７９】
モードダイアル６０の設定位置がパノラマモード以外に設定された場合（ステップＳ１３４）、システム制御回路５０はパノラマモードによる撮影を終了し、ステップＳ１０２に戻る。これにより、画像処理装置１００の使用者は、パノラマモードを随時終了して他のモードに切り替えることが可能である。
【０１８０】
モードダイアル６０の設定位置がパノラマモードのままの状態で（ステップＳ１３４）、つまり、画像表示部２８の表示画面が前述した各パノラマ撮影画面の状態で、決定／実行スイッチ６８（例えば[SET]キー）を押すことによりパノラマモードの終了が選択されたならば（ステップＳ１３５）、パノラマモード終了確認の表示を行い、さらに終了確認が選択されたならば（ステップＳ１３６）、パノラマモード選択画面ステップＳ１１１に戻る。
【０１８１】
ズームスイッチＷＩＤＥ７４或いはズームスイッチＴＥＬＥ７６が押されたなれば（ステップＳ１６１）、システム制御回路５０はパノラマ撮影開始フラグの状態を判断する（ステップＳ１６２）。
【０１８２】
パノラマ撮影開始フラグが解除されていた場合、つまり、まだ一連のパノラマ撮影において１枚目の撮影実行前であれば（ステップＳ１６２）、システム制御回路５０はズームスイッチＷＩＤＥ７４或いはズームスイッチＴＥＬＥ７６の指示に従って、インタフェース１２０、コネクタ１２２、コネクタ３２２、インタフェース３２０、レンズシステム制御回路３５０、ズーム制御手段３４４を介して撮影レンズ３１０のズーミングを行う所定のズーム動作を実行し（ステップＳ１６３）、ステップＳ１３７に進む。
【０１８３】
パノラマ撮影開始フラグが設定されていた場合、つまり、一連のパノラマ撮影において１枚目の撮影実行後であれば（ステップＳ１６２）、システム制御回路５０は表示部５４及び或いは画像表示部２８を用いて画像や音声により所定の警告表示を行い（ステップＳ１６４）、ズーム動作を実行せずにステップＳ１３７に進む。
【０１８４】
これにより、一連のパノラマ撮影の途中で撮影レンズ３１０のズーム操作が行われてパノラマ合成に不適当な画像が撮影されることを防止することが出来る。
【０１８５】
画像表示部２８の表示画面が前述した各パノラマ撮影画面の状態で、選択／切換えスイッチ６６（例えば[＋]キー）が押されたならば（ステップＳ1３７）、システム制御回路５０はパノラマモードの設定に応じて所定の処理を行う（ステップＳ１３８）。
【０１８６】
選択/切換えスイッチ６６（例えば[＋]キー）が押されなければ（ステップＳ１３７）、ステップＳ１４６に進む。
【０１８７】
まず、２×２パノラマモードであったならば（ステップＳ１３８）、システム制御回路５０は、変数ｎをｎ＝ｎ＋１として次の撮影領域に移動する（ステップＳ１３９）。ここで、ｎ＝５だったならば（ステップＳ１４０）、ｎ＝ｎ−４として最初の撮影領域に戻る（ステップＳ１４１）。この後、ステップＳ１４６に進む。
【０１８８】
つまり、選択／切換えスイッチ６６（例えば[＋]キー）が押される度に、２×２パノラマモードの４個所の撮影領域を繰り返し移動することになる。例えば、右上、右下、左下、左上、右上、右下．．．と撮影領域が順次移動していく。
【０１８９】
一方、水平パノラマモード或いは垂直パノラマモードであったならば（ステップＳ１３８）、パノラマ撮影開始フラグが解除されていた場合、つまり、まだ一連のパノラマ撮影において１枚目の撮影実行前であれば（ステップＳ１４２）、システム制御回路５０はそれぞれのパノラマモードの撮影方向を反転する（ステップＳ１４３）。この後、ステップＳ１４６に進む。
なお、撮影方向の反転は、１枚目の撮影を行うまで、繰り返し行うことが出来る。
【０１９０】
ここで、水平パノラマモードでの撮影方向反転画面の一例を図１０に示す。
【０１９１】
図１０において、（ａ）は右方向に撮影を繰り返す画面、（ｂ）は左方向に撮影を繰り返す画面である。
【０１９２】
また、垂直パノラマモードでの撮影方向反転画面の一例を図１１に示す。
【０１９３】
図１１において、（ａ）は上方向に撮影を繰り返す画面、（ｂ）は下方向に撮影を繰り返す画面である。
【０１９４】
次に、水平パノラマモード或いは垂直パノラマモードであって（ステップＳ１３８）、パノラマ撮影開始フラグが設定されていた場合、つまり、一連のパノラマ撮影において１枚目の撮影実行後であれば（ステップＳ１４２）、システム制御回路５０は、ｍ＝ｍ×（−１）として、−１、＋１、−１、＋１．．．と一回毎に符号が反転する演算を行った後（ステップＳ１４４）、変数ｎに対してｎ＝ｎ＋ｍとして、一回毎にｎ＝ｎ−１、ｎ＝ｎ＋１、ｎ＝ｎ−１、ｎ＝ｎ＋１．．．となる演算を行う（ステップＳ１４５）。この後、ステップＳ１４６に進む。
【０１９５】
これにより、撮影をやり直すために、最後に撮影した１回分のみではあるが撮影済みの領域に移動すること、及び、撮影済みの領域に移動することを取り止めることを繰り返し選択することが出来る。
【０１９６】
これにより、ｎ番目の画像領域のパノラマ撮影の後に、選択／切換えスイッチ６６（例えば[＋]キー）を押してｎ−１番目の画像領域のクイックレビュー画像とｎ番目の画像領域のクイックレビュー画像との境界領域の繋がり具合を確認した後、一旦選択／切換えスイッチ６６（例えば[＋]キー）を放してｎ番目の画像領域をスルー画像としてから、もう一度選択／切換えスイッチ６６（例えば[＋]キー）を押して、元のｎ番目の画像領域のクイックレビュー画像とｎ＋１番目の画像領域のスルー画像を表示して、次のパノラマ撮影を行うことが出来る。
【０１９７】
また、ｎ番目の画像領域のパノラマ撮影の後に、選択／切換えスイッチ６６（例えば[＋]キー）を押してｎ−１番目の画像領域のクイックレビュー画像とｎ番目の画像領域のクイックレビュー画像との境界領域の繋がり具合を確認した際に、撮影やり直しを決断した場合は、一旦選択／切換えスイッチ６６（例えば[＋]キー）を放してｎ番目の画像領域をスルー画像として、この画面状態でシャッタースイッチＳＷ２を押すことにより、新たな撮影画像と取り替えてから、さらに次のパノラマ撮影を行うことが出来る。
【０１９８】
システム制御回路５０は、ｎ番目の画像領域を選択し（ステップＳ１４６）、選択した画像領域に応じて画面レイアウトを変更する必要があれば（ステップＳ１４７）、画面レイアウトを切り替えて表示する（ステップＳ１４８）。この後、ステップＳ１７１に進む。
これにより、前述したような、撮影方向の反転に対応した画面、或いは、撮影領域の変更に対応した画面、説明のための文字や画像を更新した画面、等を必要に応じて表示することが出来る。
【０１９９】
また、２枚目以降の撮影においては、既に撮影した撮影領域をクイックレビュー表示状態のままに設定すると共に、次の撮影のために移動した今度の撮影領域をスルー表示状態に設定することにより、既に撮影した画像の再生画像と次に撮影する画像とを一部重ねて表示することが可能となる。これにより、画像処理装置１００の使用者は、容易に次の撮影構図を決定することが出来る。
システム制御回路５０は、撮像した画像データを逐次表示するスルー表示状態に設定して（ステップＳ１７１）、ステップＳ１７２に進む。
スルー表示状態に於いては、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、画像表示メモリ２４に逐次書き込まれたデータを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に逐次表示することにより、電子ファインダー機能を実現している。
【０２００】
シャッタースイッチＳＷ１が押されていないならば（ステップＳ１７２）、ステップＳ１３４に戻る。
【０２０１】
シャッタースイッチＳＷ１が押されたならば（ステップＳ１７２）、システム制御回路５０は画像表示部２８の表示状態をフリーズ表示状態に設定して（ステップＳ１７３）、ステップＳ１７４に進む。
【０２０２】
フリーズ表示状態に於いては、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介した画像表示メモリ２４の画像データ書き換えを禁止し、最後に書き込まれた画像データを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に表示することにより、フリーズした映像を電子ファインダーに表示している。
【０２０３】
システム制御回路５０は、測距処理を行って撮影レンズ１０の焦点を被写体に合わせ、測光処理を行って絞り値及びシャッター時間を決定する（ステップＳ１７４）。測光処理に於いて、必要であればフラッシュの設定も行う。
【０２０４】
この測距・測光処理ステップＳ１７４の詳細は図５を用いて後述する。
【０２０５】
測距・測光処理ステップＳ１７４を終えたならば、システム制御回路５０は画像表示部２８の表示状態をスルー表示状態に設定して（ステップＳ１７５）、ステップＳ１７６に進む。なお、ステップＳ１７５でのスルー表示状態は、ステップＳ１７１でのスルー状態と同じ動作状態である。
【０２０６】
シャッタースイッチＳＷ２が押されずに（ステップＳ１７６）、さらにシャッタースイッチＳＷ１も解除されたならば（ステップＳ１７７）、ステップＳ１３４に戻る。
【０２０７】
シャッタースイッチＳＷ２が押されたならば（ステップＳ１７６）、システム制御回路５０は画像表示部２８の表示状態を固定色表示状態に設定して（ステップＳ１７８）、ステップＳ１７９に進む。
【０２０８】
固定色表示状態に於いては、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して画像表示メモリ２４に書き込まれた撮影画像データの代わりに、差し替えた固定色の画像データを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に表示することにより、固定色の映像を電子ファインダーに表示している。
【０２０９】
システム制御回路５０は、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器から直接メモリ制御回路２２を介して、メモリ３０に撮影した画像データを書き込む露光処理、及び、メモリ制御回路２２そして必要に応じて画像処理回路２０を用いて、メモリ３０に書き込まれた画像データを読み出して各種処理を行う現像処理からなる撮影処理を実行する（ステップＳ１７９）。
【０２１０】
この撮影処理ステップＳ１７９の詳細は図６を用いて後述する。
【０２１１】
システム制御回路５０は、撮影処理のステップＳ１７９によってメモリ３０に書き込まれた画像データを読み出して、メモリ制御回路２２を介して画像表示メモリ２４に転送する表示画像処理を実行する（ステップＳ１８０）。
【０２１２】
この表示画像処理ステップＳ１８０の詳細は図７を用いて後述する。
【０２１３】
システム制御回路５０は、画像表示部２８の表示状態をクイックレビュー表示状態に設定して（ステップＳ１８１）、ステップＳ１８２に進む。
【０２１４】
クイックレビュー状態に於いては、表示画像処理ステップＳ１８０によって画像表示メモリ２４に転送された画像データを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に表示することにより、撮影画像の自動再生を行う電子ファインダー機能を実現している。
【０２１５】
システム制御回路５０は、メモリ３０に書き込まれた撮影画像データを読み出して、メモリ制御回路２２そして必要に応じて画像処理回路２０を用いて各種画像処理を、また、圧縮・伸長回路３２を用いて設定したモードに応じた画像圧縮処理を行う圧縮処理を行った後（ステップＳ１８２）、インタフェース９０或いは９４、コネクタ９２或いは９６を介して、メモリカードやコンパクトフラッシュカード等の記録媒体２００或いは２１０へ画像データの書き込みを行う記録処理を実行する（ステップＳ１８３）。
【０２１６】
この圧縮処理ステップＳ１８２の詳細は図８を用いて後述する。
【０２１７】
なお、画像表示部２８がＯＮの場合は、記録媒体２００或いは２１０へ画像データの書き込みを行っている間、書き込み動作中であることを明示する例えば「BUSY」のような表示を画像表示部２８に対して行う。
【０２１８】
さらに、表示部５４において例えばＬＥＤを点滅させる等の記録媒体書き込み動作表示も併せて行う。
【０２１９】
システム制御回路５０はシャッタースイッチＳＷ２が放されるまで（ステップＳ１８４）、画像表示部２８におけるクイックレビュー表示を継続する。これにより、使用者はシャッタースイッチＳＷ２を押している間、撮影画像の確認を入念に行うことが出来る。
【０２２０】
シャッタースイッチＳＷ２が放されたならば（ステップＳ１８４）、システム制御回路５０は、パノラマ撮影開始フラグを設定して（ステップＳ１８５）、一連のパノラマ撮影において１枚目の撮影が実行済みであることを明らかにする。これにより、ステップＳ１４２で説明したように、１枚目の水平パノラマモード或いは垂直パノラマモードの撮影実行後に撮影方向を反転することを禁止することが可能となる。
【０２２１】
システム制御回路５０は、次の撮影領域に移動するために、変数ｎをｎ＝ｎ＋１とし（ステップＳ１８６）、変数ｍをｍ＝１として初期化した後（ステップＳ１８７）、ステップＳ１３４に戻り、一連のパノラマ撮影処理を繰り返す。
【０２２２】
このように、シャッタースイッチＳＷ２を放すことにより、処理がステップＳ１３４に戻った後、ステップＳ１４６において次の撮影領域に移動し、ステップＳ１４８において、前回を含む撮影済みの撮影領域をクイックレビュー表示状態に、次の撮影領域をスルー表示状態にそれぞれ設定して、撮影済みの画像とこれから撮影する画像とをオーバーラップさせて表示することにより、パノラマ撮影の繋ぎ取りを使用者が容易に行えるようにすることが出来る。
【０２２３】
ここで、水平パノラマモードでのｎ枚目の撮影終了前後の撮影画面の一例を図１４に示す。
【０２２４】
図１４において、（ａ）は１枚目の撮影前の状態での撮影画面、（ｂ）は１枚目の撮影後にシャッタースイッチＳＷ２を放した状態での撮影画面である。なお、説明図としては準備していないが、１枚目の撮影後にシャッタースイッチＳＷ２を放すまでは（ａ）の１枚目の撮影領域がクイックレビュー表示となった撮影画面となる。
【０２２５】
また、垂直パノラマモードでのｎ枚目の撮影終了前後の撮影画面の一例を図１５に示す。
【０２２６】
図１５において、（ａ）は１枚目の撮影前の状態での撮影画面、（ｂ）は１枚目の撮影後にシャッタースイッチＳＷ２を放した状態での撮影画面である。なお、説明図としては準備していないが、１枚目の撮影後にシャッタースイッチＳＷ２を放すまでは（ａ）の１枚目の撮影領域がクイックレビュー表示となった撮影画面となる。
【０２２７】
さらに、２×２パノラマモードでのｎ枚目の撮影終了前後の撮影画面の一例を図１２及び図１３に示す。
【０２２８】
図１２において、（ａ）は１枚目の撮影前の状態での撮影画面、（ｂ）は１枚目の撮影後にシャッタースイッチＳＷ２を放した状態、つまり、２枚目の撮影前の状態での撮影画面である。
【０２２９】
そして、 図１３において、（ｃ）は２枚目の撮影後にシャッタースイッチＳＷ２を放した状態、つまり、３枚目の撮影前の状態での撮影画面、（ｄ）は３枚目の撮影後にシャッタースイッチＳＷ２を放した状態、つまり、４枚目の撮影前の状態での撮影画面である。
【０２３０】
なお、説明図としては準備していないが、ｎ枚目の撮影後にシャッタースイッチＳＷ２を放すまでは、それぞれ（ａ），（ｂ），（ｃ），（ｄ）のｎ枚目の撮影領域がクイックレビュー表示となった撮影画面となる。シャッタースイッチＳＷ２を放すと次の撮影領域であるｎ＋１枚目の撮影領域のスルー表示が追加されることになる。
【０２３１】
以上説明した様に、第１の実施形態によれば、一連のパノラマ撮影の開始後はズーム操作を禁止すると共に所定の警告をすることにより、一連のパノラマ撮影の途中で撮影レンズ３１０のズーム操作を行ってパノラマ合成に不適当な画像を撮影してしまうという問題を防止することが出来る。
【０２３２】
図５は、図４のステップＳ１７４における測距・測光処理の詳細なフローチャートである。
【０２３３】
システム制御回路５０は、撮像素子１４から電荷信号を読み出し、Ａ／Ｄ変換器１６を介して画像処理回路２０に撮影画像データを逐次読み込む（ステップＳ２０１）。この逐次読み込まれた画像データを用いて、画像処理回路２０はＴＴＬ（スルー・ザ・レンズ）方式のＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理、ＡＦ（オートフォーカス）処理に用いる所定の演算を行っている。
【０２３４】
なお、ここでの各処理は、撮影した全画素数のうちの必要に応じた特定の部分を必要個所分切り取って抽出し、演算に用いている。これにより、 ＴＴＬ方式のＡＥ、ＥＦ、ＡＷＢ、ＡＦの各処理において、中央重点モード、平均モード、評価モード等の異なるモード毎に最適な演算を行うことが可能となる。
【０２３５】
画像処理回路２０での演算結果を用いて、システム制御回路５０は露出（ＡＥ）が適正と判断されるまで（ステップＳ２０２）、露光制御手段４０を用いてＡＥ制御を行う（ステップＳ２０３）。
【０２３６】
ＡＥ制御で得られた測定データを用いて、システム制御回路５０はフラッシュが必要か否かを判断し（ステップＳ２０４）、フラッシュが必要ならばフラッシュフラグをセットし、フラッシュ４８を充電する（ステップＳ２０５）。
【０２３７】
露出（ＡＥ）が適正と判断したならば（ステップＳ２０２）、測定データ及び／又は設定パラメータをシステム制御回路５０の内部メモリ或いはメモリ５２に記憶する。
【０２３８】
画像処理回路２０での演算結果及びＡＥ制御で得られた測定データを用いて、システム制御回路５０はホワイトバランス（ＡＷＢ）が適正と判断されるまで（ステップＳ２０６）、画像処理回路２０を用いて色処理のパラメータを調節してＡＷＢ制御を行う（ステップＳ２０７）。
【０２３９】
ホワイトバランス（ＡＷＢ）が適正と判断したならば（ステップＳ２０６）、測定データ及び／又は設定パラメータをシステム制御回路５０の内部メモリ或いはメモリ５２に記憶する。
【０２４０】
ＡＥ制御及びＡＷＢ制御で得られた測定データを用いて、システム制御回路５０は測距（ＡＦ）が合焦と判断されるまで（ステップＳ２０８）、測距制御手段４２を用いてＡＦ制御を行う（ステップＳ２０９）。
【０２４１】
測距（ＡＦ）が合焦と判断されたならば（ステップＳ２０８）、測定データ及び／又は設定パラメータをシステム制御回路５０の内部メモリ或いはメモリ５２に記憶し、測距・測光処理ルーチンステップＳ１７４を終了する。
【０２４２】
図６は、図４のステップＳ１７９における撮影処理の詳細なフローチャートである。
【０２４３】
システム制御回路５０は、システム制御回路５０の内部メモリ或いはメモリ５２に記憶される測光データに従い、露光制御手段４０によって、絞り機能を有するシャッター１２を絞り値に応じて開放して撮像素子１０を露光する（ステップＳ３０１、ステップＳ３０２）。
【０２４４】
フラッシュ・フラグによりフラッシュ４８が必要か否かを判断し（ステップＳ３０３）、必要な場合はフラッシュを発光させる（ステップＳ３０４）。
【０２４５】
システム制御回路５０は、測光データに従って撮像素子１４の露光終了を待ち（ステップＳ３０５）、シャッター１２を閉じて（ステップＳ３０６）、撮像素子１４から電荷信号を読み出し、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１６から直接メモリ制御回路２２を介して、メモリ３０に撮影画像のデータを書き込む（ステップＳ３０７）。
【０２４６】
一連の処理を終えたならば、撮影処理ルーチンステップＳ１７９を終了する。
【０２４７】
図７は、図４のステップＳ１８０における表示画像処理の詳細なフローチャートである。
【０２４８】
システム制御回路５０は、設定された撮影モードに応じて、フレーム処理を行う必要があるならば（ステップＳ４０１）、メモリ制御回路２２そして必要に応じて画像処理回路２０を用いて、メモリ３０に書き込まれた画像データを読み出して垂直加算処理や（ステップＳ４０２）、色処理（ステップＳ４０３）を順次行った後、メモリ３０に処理を終えた画像データを書き込む。
【０２４９】
システム制御回路５０は、メモリ３０から画像データを読み出し、メモリ制御回路２２を介して画像表示メモリ２４に表示画像データの転送を行う（ステップＳ４０４）。
【０２５０】
一連の処理を終えたならば、表示画像処理ルーチンステップＳ１８０を終了する。
【０２５１】
図８は、図４のステップＳ１８２における圧縮処理の詳細なフローチャートである。
【０２５２】
システム制御回路５０は、メモリ制御回路２２そして必要に応じて画像処理回路２０を用いて、メモリ３０に書き込まれた撮影画像データを読み出して撮像素子の縦横画素比率を１：１に補間する画素正方化処理を行った後（ステップＳ５０１）、メモリ３０に処理を終えた画像データを書き込む。
【０２５３】
そして、メモリ３０に書き込まれた画像データを読み出して、設定したモードに応じた画像圧縮処理を圧縮・伸長回路３２により行う（Ｓ５０２）。
【０２５４】
画像圧縮処理が終わったならば、圧縮処理ルーチンステップＳ１８２を終了する。
（第２の実施形態）
図１６Ａ、図１６Ｂ、図１７Ａ、図１７Ｂ、図１８、図５、図６、図７及び図８を参照して、第２の実施形態の動作を説明する。第２の実施形態の外見的構成は、第１の実施形態と同様であり、その動作のみが異なる。また、図５、図６、図７及び図８は、第１の実施例と同様であるため、説明を省略する。
【０２５５】
図１６Ａ、図１６Ｂ、図１７Ａ、図１７Ｂ及び図１８を用いて、画像処理装置１００の動作を説明する。
【０２５６】
電池交換等の電源投入により、システム制御回路５０はフラグや制御変数等を初期化すると共に、画像処理装置１００各部の初期化処理を行う（ステップＳ６０１）。
【０２５７】
システム制御回路５０は、モードダイアル６０の設定位置を判断し、モードダイアル６０が電源ＯＦＦに設定されていたならば（ステップＳ６０２）、各表示部の表示を終了状態に変更し、レンズユニット３００が保護手段のバリア等を備えている場合はそれを閉じて撮像部を保護し、フラグや制御変数等を含む必要なパラメータや設定値、設定モードを不揮発性メモリ５６に記録し、電源制御手段８０により画像表示部２８を含む画像処理装置１００各部の不要な電源を遮断する等の所定の終了処理を行った後（ステップＳ６０３）、ステップＳ６０２に戻る。
【０２５８】
モードダイアル６０がその他のモードに設定されていたならば（ステップＳ６０２）、システム制御回路５０は、電源制御手段８０により電池等により構成される電源８６の残容量や動作情況が画像処理装置１００の動作に問題があるか否かを判断し（ステップＳ６０４）、問題があるならば表示部５４を用いて画像や音声により所定の警告表示を行った後に（ステップＳ６０６）、ステップＳ６０２に戻る。
【０２５９】
なお、画像表示部２８の画像表示がＯＮであったならば、画像表示部２８も用いて画像や音声により所定の警告表示を行う。
【０２６０】
電源８６に問題が無いならば（ステップＳ６０４）、記録媒体２００或いは２１０の動作状態が画像処理装置１００の動作、特に記録媒体に対する画像データの記録再生動作に問題があるか否かを判断し（ステップＳ６０５）、問題があるならば表示部５４を用いて画像や音声により所定の警告表示を行った後に（ステップＳ６０６）、ステップＳ６０２に戻る。
【０２６１】
なお、画像表示部２８の画像表示がＯＮであったならば、画像表示部２８も用いて画像や音声により所定の警告表示を行う。
【０２６２】
記録媒体２００或いは２１０の動作状態に問題が無いならば（ステップＳ６０５）、表示部５４を用いて画像や音声により画像処理装置１００の各種設定状態の表示を行う（ステップＳ６０７）。なお、画像表示部２８の画像表示がＯＮであったならば、画像表示部２８も用いて画像や音声により画像処理装置１００の各種設定状態の表示を行う。
【０２６３】
モードダイアル６０が撮影モードに設定されていたならば（ステップＳ６０８）、所定の撮影処理を実行し（ステップＳ６０９）、処理を終えたならばステップＳ６０２に戻る。
【０２６４】
モードダイアル６０がその他のモードに設定されていたならば（ステップＳ６０８）、システム制御回路５０は選択されたモードに応じた処理を実行し（ステップＳ６１０）、処理を終えたならばステップＳ６０２に戻る。
【０２６５】
モードダイアル６０がパノラマモードに設定されていたならば（ステップＳ６０８）、システム制御回路５０は撮像レンズ３１０のズーム位置が所定のホームポジションであるか否かを判断し（ステップＳ６２１）、ホームポジションに位置していなかった場合はズーム位置をホームポジションに移動する（ステップＳ６２２）。
【０２６６】
なお、撮影レンズ３１０が焦点距離を複数種類に切り替え可能な切り替えレンズであった場合も同様に、システム制御回路５０は撮像レンズ３１０の切り替えレンズの設定が所定のホームポジション側であるか否かを判断し（ステップＳ６２１）、ホームポジション側に位置していなかった場合は切り替えレンズの設定をホームポジション側に移動する（ステップＳ６２２）。
【０２６７】
また、ホームポジションの例としては、ズームレンズであれば、パノラマ撮影に適した広角側の焦点距離であるＷＩＤＥ端が一例としてあげられる。
【０２６８】
そして、焦点距離切り替えレンズであれば、パノラマ撮影に適した広角側の焦点距離であるＷＩＤＥ側の焦点距離を備えるレンズへの切り替えが一例としてあげられる。
【０２６９】
この例に限らず、パノラマ撮影に適した焦点距離に設定するのであれば、何れの焦点距離をホームポジションとしても良い。
システム制御回路５０は、画像表示部２８にパノラマモード選択画面を表示する（ステップＳ６１１）。
【０２７０】
画像処理装置１００の使用者は、画像表示部２８に表示されたパノラマモード選択画面を見て、複数のパノラマ撮影モードから任意のモードを選択することが出来る。
【０２７１】
パノラマ撮影モードには、２×２パノラマモード、水平パノラマモード、垂直パノラマモード等があり、複数の撮影を重ねることにより、２次元的に拡大したパノラマ画像や、水平方向に拡大したパノラマ画像、垂直方向に拡大したパノラマ画像を作成することが出来る。
【０２７２】
撮影した一連の各画像は、その位置関係を示す情報が付加されており、画像処理装置自身で、或いは、コンピュータ等に画像を転送した後に、各画像を結合して１枚のパノラマ画像を作成することが可能である。
【０２７３】
なお、パノラマモード選択画面の一例を図９に示す。
【０２７４】
図９において、左は２次元的なパノラマ画像を撮影するための２×２パノラマモードを選択するアイコン、中央は水平パノラマ画像を撮影するための水平パノラマモードを選択するアイコン、右は垂直パノラマ画像を撮影するための垂直パノラマモードを選択するアイコンである。
【０２７５】
画像処理装置１００の使用者は、選択／切換えスイッチ６６（例えば[＋]キー）により撮影するパノラマモードを選択し、決定／実行スイッチ６８（例えば[SET]キー）によりパノラマモードを決定することが出来る。
選択／切換えスイッチ６６及び決定／実行スイッチ６８によりパノラマモードが選択されたならば、システム制御回路５０は、選択されたパノラマモードに応じて（ステップＳ６1２）、２×２パノラマモード初期設定（ステップＳ６1３）、垂直パノラマモード初期設定（ステップＳ６1４）、水平パノラマモード初期設定（ステップＳ６1５）において、フラグやパラメータ、変数の初期値、メモリ領域の設定や、ユーザーインターフェースとしての表示画面の読み出し等、をそれぞれ行い、各モードに応じたパノラマ撮影画面を画像表示部２８に表示して（ステップＳ６1６）、ステップＳ６３１に進む。
【０２７６】
なお、水平パノラマモード撮影画面の一例を図１０に、垂直パノラマモード撮影画面の一例を図１１に、２×２パノラマ撮影画面の一例を図１２に、それぞれ示す。
【０２７７】
図１０において、（ａ）は右方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面、（ｂ）は左方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面である。
【０２７８】
図中、一連のパノラマ画像の１枚目の撮影用に、電子ファインダによるスルー画像が「１」の領域に表示され、また、１枚目の撮影完了前であれば、選択／切換えスイッチ６６（例えば[＋]キー）により、右方向撮影（ａ）と左方向撮影（ｂ）を随時切り替えることが出来る。
【０２７９】
撮影方向の決定は、希望する（ａ）或いは（ｂ）何れかの表示画面状態で、シャッターボタンを押して１枚目の撮影を実行することで行われる。
【０２８０】
なお、決定／実行スイッチ６８（例えば[SET]キー）を押すことにより、水平パノラマモードでの撮影を終了することが出来る。
【０２８１】
また、図１１において、（ａ）は上方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面、（ｂ）は下方向に連続して撮影を繰り返し、パノラマ画面を作成する撮影画面である。
【０２８２】
図中、一連のパノラマ画像の１枚目の撮影用に、電子ファインダによるスルー画像が「１」の領域に表示され、また、１枚目の撮影完了前であれば、選択／切換えスイッチ６６（例えば[＋]キー）により、上方向撮影（ａ）と下方向撮影（ｂ）を随時切り替えることが出来る。
【０２８３】
撮影方向の決定は、希望する（ａ）或いは（ｂ）何れかの表示画面状態で、シャッターボタンを押して１枚目の撮影を実行することで行われる。
【０２８４】
なお、決定／実行スイッチ６８（例えば[SET]キー）を押すことにより、垂直パノラマモードでの撮影を終了することが出来る。
【０２８５】
また、図１２において、（ａ）は２次元的に縦横計４枚の撮影を繰り返し、２×２のパノラマ画面を作成する撮影画面の１枚目の撮影用画面である。同じく、（ｂ）は２枚目の撮影用画面である。
【０２８６】
図中、パノラマ画像の１枚目の撮影用に、電子ファインダによるスルー画像が例えば右上の領域に表示される。
【０２８７】
１枚目の撮影を終えたならば、撮影した画像の再生画像を例えば右上の領域に表示し、２枚目の撮影用に、電子ファインダによるスルー画像が例えば右下の領域に表示される。
【０２８８】
電子ファインダーによる撮影領域は、撮影の度に次の領域へと順次送られるが、任意の領域から撮影を開始することが可能であり、また、撮影済みの領域に戻って撮影をやり直すことも可能である。このため、選択／切換えスイッチ６６（例えば[＋]キー）により、随時、撮影領域を移動することが出来る。
【０２８９】
やり直し撮影領域の決定及び撮影実行は、希望する領域を選択した表示画面状態で、シャッターボタンを押して撮影を実行することで行われる。
【０２９０】
なお、決定／実行スイッチ６８（例えば[SET]キー）を押すことにより、２×２パノラマモードでの撮影を終了することが出来る。
【０２９１】
システム制御回路５０は、システム制御回路５０の内部メモリ或いはメモリ５２に設定したフラグや変数を初期化する。例えば、パノラマ撮影開始フラグを解除し（ステップＳ６３１）、変数ｍ，ｎを設定して、それぞれｍ＝１，ｎ＝１と初期化する（ステップＳ６３３、ステップＳ６３２）。
【０２９２】
ここで、パノラマ撮影開始フラグの解除は、まだ一連のパノラマ撮影が１枚も行われていないことを示している。
【０２９３】
また、変数ｎは、各パノラマモードの撮影において何枚目の撮影領域であるかを示すものである。
【０２９４】
そして、変数ｍは、水平パノラマモード及び垂直パノラマモードでの撮影やり直しの際に、撮影領域を１枚前に戻したり、戻すのを取り止めたりするために使用している。
【０２９５】
これらのフラグや変数の使用方法詳細については後述する。
【０２９６】
モードダイアル６０の設定位置がパノラマモード以外に設定された場合（ステップＳ６３４）、システム制御回路５０はパノラマモードによる撮影を終了し、ステップＳ６０２に戻る。これにより、画像処理装置１００の使用者は、パノラマモードを随時終了して他のモードに切り替えることが可能である。
【０２９７】
モードダイアル６０の設定位置がパノラマモードのままの状態で（ステップＳ６３４）、つまり、画像表示部２８の表示画面が前述した各パノラマ撮影画面の状態で、決定/実行スイッチ６８（例えば[SET]キー）を押すことによりパノラマモードの終了が選択されたならば（ステップＳ６３５）、パノラマモード終了確認の表示を行い、さらに終了確認が選択されたならば（ステップＳ６３６）、パノラマモード選択画面ステップＳ６１１に戻る。
【０２９８】
ズームスイッチＷＩＤＥ７４或いはズームスイッチＴＥＬＥ７６が押されたなれば（ステップＳ６６１）、システム制御回路５０はパノラマ撮影開始フラグの状態を判断する（ステップＳ６６２）。
【０２９９】
パノラマ撮影開始フラグが解除されていた場合、つまり、まだ一連のパノラマ撮影において１枚目の撮影実行前であれば（ステップＳ６６２）、システム制御回路５０はズームスイッチＷＩＤＥ７４或いはズームスイッチＴＥＬＥ７６の指示に従って、インタフェース１２０、コネクタ１２２、コネクタ３２２、インタフェース３２０、レンズシステム制御回路３５０、ズーム制御手段３４４を介して撮影レンズ３１０のズーミングを行う所定のズーム動作を実行し（ステップＳ６６３）、ステップＳ６３７に進む。
【０３００】
パノラマ撮影開始フラグが設定されていた場合、つまり、一連のパノラマ撮影において１枚目の撮影実行後であれば（ステップＳ６６２）、システム制御回路５０は表示部５４及び／又は画像表示部２８を用いて画像や音声により所定の警告表示を行い（ステップＳ６６４）、さらに一連のパノラマ撮影終了の確認が選択されたならば（ステップＳ６６５）、一旦これまでの一連のパノラマ撮影を終えて、ステップＳ６３１に戻って新たな一連のパノラマ撮影を開始する。
【０３０１】
一連のパノラマ撮影終了の取り消しが選択されたならば（ステップＳ６６５）、ズーム動作を実行せずにステップＳ６３７に進む。
【０３０２】
これにより、一連のパノラマ撮影の途中で撮影レンズ３１０のズーム操作が行われてパノラマ合成に不適当な画像が撮影されることを防止することが出来る。
【０３０３】
画像表示部２８の表示画面が前述した各パノラマ撮影画面の状態で、選択／切換えスイッチ６６（例えば[＋]キー）が押されたならば（ステップＳ６３７）、システム制御回路５０はパノラマモードの設定に応じて所定の処理を行う（ステップＳ６３８）。
【０３０４】
選択／切換えスイッチ６６（例えば[＋]キー）が押されなければ（ステップＳ６３７）、ステップＳ６４６に進む。
【０３０５】
まず、２×２パノラマモードであったならば（ステップＳ６３８）、システム制御回路５０は、変数ｎをｎ＝ｎ＋１として次の撮影領域に移動する（ステップＳ６３９）。ここで、ｎ＝５だったならば（ステップＳ６４０）、ｎ＝ｎ−４として最初の撮影領域に戻る（ステップＳ６４１）。この後、ステップＳ６４６に進む。
【０３０６】
つまり、選択/切換えスイッチ６６（例えば[＋]キー）が押される度に、２×２パノラマモードの４個所の撮影領域を繰り返し移動することになる。例えば、右上、右下、左下、左上、右上、右下．．．と撮影領域が順次移動していく。
【０３０７】
一方、水平パノラマモード或いは垂直パノラマモードであったならば（ステップＳ６３８）、パノラマ撮影開始フラグが解除されていた場合、つまり、まだ一連のパノラマ撮影において１枚目の撮影実行前であれば（ステップＳ６４２）、システム制御回路５０はそれぞれのパノラマモードの撮影方向を反転する（ステップＳ６４３）。この後、ステップＳ６４６に進む。
【０３０８】
なお、撮影方向の反転は、１枚目の撮影を行うまで、繰り返し行うことが出来る。
【０３０９】
ここで、水平パノラマモードでの撮影方向反転画面の一例を図１０に示す。
【０３１０】
図１０において、（ａ）は右方向に撮影を繰り返す画面、（ｂ）は左方向に撮影を繰り返す画面である。
【０３１１】
また、垂直パノラマモードでの撮影方向反転画面の一例を図１１に示す。
【０３１２】
図１１において、（ａ）は上方向に撮影を繰り返す画面、（ｂ）は下方向に撮影を繰り返す画面である。
【０３１３】
次に、水平パノラマモード或いは垂直パノラマモードであって（ステップＳ６３８）、パノラマ撮影開始フラグが設定されていた場合、つまり、一連のパノラマ撮影において１枚目の撮影実行後であれば（ステップＳ６４２）、システム制御回路５０は、ｍ＝ｍ×（−１）として、−１，＋１，−１，＋１．．．と一回毎に符号が反転する演算を行った後（ステップＳ６４４）、変数ｎに対してｎ＝ｎ＋ｍとして、一回毎にｎ＝ｎ−１，ｎ＝ｎ＋１，ｎ＝ｎ−１，ｎ＝ｎ＋１．．．となる演算を行う（ステップＳ６４５）。この後、ステップＳ６４６に進む。
【０３１４】
これにより、撮影をやり直すために、最後に撮影した1回分のみではあるが撮影済みの領域に移動すること、及び、撮影済みの領域に移動することを取り止めることを繰り返し選択することが出来る。
【０３１５】
これにより、ｎ番目の画像領域のパノラマ撮影の後に、選択/切換えスイッチ６６（例えば[＋]キー）を押してｎ−１番目の画像領域のクイックレビュー画像とｎ番目の画像領域のクイックレビュー画像との境界領域の繋がり具合を確認した後、一旦選択／切換えスイッチ６６（例えば[＋]キー）を放してｎ番目の画像領域をスルー画像としてから、もう一度選択／切換えスイッチ６６（例えば[＋]キー）を押して、元のｎ番目の画像領域のクイックレビュー画像とｎ＋１番目の画像領域のスルー画像を表示して、次のパノラマ撮影を行うことが出来る。
【０３１６】
また、ｎ番目の画像領域のパノラマ撮影の後に、選択／切換えスイッチ６６（例えば[＋]キー）を押してｎ−１番目の画像領域のクイックレビュー画像とｎ番目の画像領域のクイックレビュー画像との境界領域の繋がり具合を確認した際に、撮影やり直しを決断した場合は、一旦選択／切換えスイッチ６６（例えば[＋]キー）を放してｎ番目の画像領域をスルー画像として、この画面状態でシャッタースイッチＳＷ２を押すことにより、新たな撮影画像と取り替えてから、さらに次のパノラマ撮影を行うことが出来る。
【０３１７】
システム制御回路５０は、ｎ番目の画像領域を選択し（ステップＳ６４６）、選択した画像領域に応じて画面レイアウトを変更する必要があれば（ステップＳ６４７）、画面レイアウトを切り替えて表示する（ステップＳ６４８）。この後、ステップＳ６７１に進む。
【０３１８】
これにより、前述したような、撮影方向の反転に対応した画面、或いは、撮影領域の変更に対応した画面、説明のための文字や画像を更新した画面、等を必要に応じて表示することが出来る。
【０３１９】
また、２枚目以降の撮影においては、既に撮影した撮影領域をクイックレビュー表示状態のままに設定すると共に、次の撮影のために移動した今度の撮影領域をスルー表示状態に設定することにより、既に撮影した画像の再生画像と次に撮影する画像とを一部重ねて表示することが可能となる。これにより、画像処理装置１００の使用者は、容易に次の撮影構図を決定することが出来る。
【０３２０】
システム制御回路５０は、撮像した画像データを逐次表示するスルー表示状態に設定して（ステップＳ６７１）、ステップＳ６７２に進む。
【０３２１】
スルー表示状態に於いては、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、画像表示メモリ２４に逐次書き込まれたデータを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に逐次表示することにより、電子ファインダー機能を実現している。
【０３２２】
シャッタースイッチＳＷ１が押されていないならば（ステップＳ６７２）、ステップＳ６３４に戻る。
【０３２３】
シャッタースイッチＳＷ１が押されたならば（ステップＳ６７２）、システム制御回路５０は画像表示部２８の表示状態をフリーズ表示状態に設定して（ステップＳ６７３）、ステップＳ６７４に進む。
【０３２４】
フリーズ表示状態に於いては、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介した画像表示メモリ２４の画像データ書き換えを禁止し、最後に書き込まれた画像データを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に表示することにより、フリーズした映像を電子ファインダーに表示している。
【０３２５】
システム制御回路５０は、測距処理を行って撮影レンズ１０の焦点を被写体に合わせ、測光処理を行って絞り値及びシャッター時間を決定する（ステップＳ６７４）。測光処理に於いて、必要であればフラッシュの設定も行う。
【０３２６】
この測距・測光処理ステップＳ６７４の詳細は図５を用いて前述した通りである。
【０３２７】
測距・測光処理ステップＳ６７４を終えたならば、システム制御回路５０は画像表示部２８の表示状態をスルー表示状態に設定して（ステップＳ６７５）、ステップＳ６７６に進む。なお、ステップＳ６７５でのスルー表示状態は、ステップＳ６７１でのスルー状態と同じ動作状態である。
【０３２８】
シャッタースイッチＳＷ２が押されずに（ステップＳ６７６）、さらにシャッタースイッチＳＷ１も解除されたならば（ステップＳ６７７）、ステップＳ６３４に戻る。
【０３２９】
シャッタースイッチＳＷ２が押されたならば（ステップＳ６７６）、システム制御回路５０は画像表示部２８の表示状態を固定色表示状態に設定して（ステップＳ６７８）、ステップＳ６７９に進む。
【０３３０】
固定色表示状態に於いては、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して画像表示メモリ２４に書き込まれた撮影画像データの代わりに、差し替えた固定色の画像データを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に表示することにより、固定色の映像を電子ファインダーに表示している。
【０３３１】
システム制御回路５０は、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器から直接メモリ制御回路２２を介して、メモリ３０に撮影した画像データを書き込む露光処理、及び、メモリ制御回路２２そして必要に応じて画像処理回路２０を用いて、メモリ３０に書き込まれた画像データを読み出して各種処理を行う現像処理からなる撮影処理を実行する（ステップＳ６７９）。
【０３３２】
この撮影処理ステップＳ６７９の詳細は図６を用いて前述した通りである。
【０３３３】
システム制御回路５０は、撮影処理ステップＳ６７９によってメモリ３０に書き込まれた画像データを読み出して、メモリ制御回路２２を介して画像表示メモリ２４に転送する表示画像処理を実行する（ステップＳ６８０）。
【０３３４】
この表示画像処理ステップＳ６８０の詳細は図７を用いて前述した通りである。
【０３３５】
システム制御回路５０は、画像表示部２８の表示状態をクイックレビュー表示状態に設定して（ステップＳ６８１）、ステップＳ６８２に進む。
【０３３６】
クイックレビュー状態に於いては、表示画像処理ステップＳ６８０によって画像表示メモリ２４に転送された画像データを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８の前述した撮影領域に表示することにより、撮影画像の自動再生を行う電子ファインダー機能を実現している。
【０３３７】
システム制御回路５０は、メモリ３０に書き込まれた撮影画像データを読み出して、メモリ制御回路２２そして必要に応じて画像処理回路２０を用いて各種画像処理を、また、圧縮・伸長回路３２を用いて設定したモードに応じた画像圧縮処理を行う圧縮処理を行った後（ステップＳ６８２）、インタフェース９０或いは９４、コネクタ９２或いは９６を介して、メモリカードやコンパクトフラッシュカード等の記録媒体２００或いは２１０へ画像データの書き込みを行う記録処理を実行する（ステップＳ６８３）。
【０３３８】
この圧縮処理ステップＳ６８２の詳細は図８を用いて前述した通りである。
【０３３９】
なお、画像表示部２８がＯＮの場合は、記録媒体２００或いは２１０へ画像データの書き込みを行っている間、書き込み動作中であることを明示する例えば「BUSY」のような表示を画像表示部２８に対して行う。
【０３４０】
さらに、表示部５４において例えばＬＥＤを点滅させる等の記録媒体書き込み動作表示も併せて行う。
【０３４１】
システム制御回路５０はシャッタースイッチＳＷ２が放されるまで（ステップＳ６８４）、画像表示部２８におけるクイックレビュー表示を継続する。これにより、使用者はシャッタースイッチＳＷ２を押している間、撮影画像の確認を入念に行うことが出来る。
【０３４２】
シャッタースイッチＳＷ２が放されたならば（ステップＳ６８４）、システム制御回路５０は、パノラマ撮影開始フラグを設定して（ステップＳ６８５）、一連のパノラマ撮影において１枚目の撮影が実行済みであることを明らかにする。これにより、ステップＳ６４２で説明したように、１枚目の水平パノラマモード或いは垂直パノラマモードの撮影実行後に撮影方向を反転することを禁止することが可能となる。
【０３４３】
システム制御回路５０は、次の撮影領域に移動するために、変数ｎをｎ＝ｎ＋１とし（ステップＳ６８６）、変数ｍをｍ＝１として初期化した後（ステップＳ６８７）、ステップＳ６３４に戻り、一連のパノラマ撮影処理を繰り返す。
【０３４４】
このように、シャッタースイッチＳＷ２を放すことにより、処理がステップＳ６３４に戻った後、ステップＳ６４６において次の撮影領域に移動し、ステップＳ６４８において、前回を含む撮影済みの撮影領域をクイックレビュー表示状態に、次の撮影領域をスルー表示状態にそれぞれ設定して、撮影済みの画像とこれから撮影する画像とをオーバーラップさせて表示することにより、パノラマ撮影の繋ぎ取りを使用者が容易に行えるようにすることが出来る。
ここで、水平パノラマモードでのｎ枚目の撮影終了前後の撮影画面の一例を図１４に示す。
【０３４５】
図１４において、（ａ）は１枚目の撮影前の状態での撮影画面、（ｂ）は1枚目の撮影後にシャッタースイッチＳＷ２を放した状態での撮影画面である。なお、説明図としては準備していないが、１枚目の撮影後にシャッタースイッチＳＷ２を放すまでは（ａ）の１枚目の撮影領域がクイックレビュー表示となった撮影画面となる。
【０３４６】
また、垂直パノラマモードでのｎ枚目の撮影終了前後の撮影画面の一例を図１５に示す。
図１５において、（ａ）は１枚目の撮影前の状態での撮影画面、（ｂ）は１枚目の撮影後にシャッタースイッチＳＷ２を放した状態での撮影画面である。なお、説明図としては準備していないが、１枚目の撮影後にシャッタースイッチＳＷ２を放すまでは（ａ）の１枚目の撮影領域がクイックレビュー表示となった撮影画面となる。
【０３４７】
さらに、２×２パノラマモードでのｎ枚目の撮影終了前後の撮影画面の一例を図１２及び図１３に示す。
【０３４８】
図１２において、（ａ）は１枚目の撮影前の状態での撮影画面、（ｂ）は１枚目の撮影後にシャッタースイッチＳＷ２を放した状態、つまり、２枚目の撮影前の状態での撮影画面である。
そして、 図１３において、（ｃ）は２枚目の撮影後にシャッタースイッチＳＷ２を放した状態、つまり、３枚目の撮影前の状態での撮影画面、（ｄ）は３枚目の撮影後にシャッタースイッチＳＷ２を放した状態、つまり、４枚目の撮影前の状態での撮影画面、である。
【０３４９】
なお、説明図としては準備していないが、ｎ枚目の撮影後にシャッタースイッチＳＷ２を放すまでは、それぞれ（ａ），（ｂ），（ｃ），（ｄ）のｎ枚目の撮影領域がクイックレビュー表示となった撮影画面となる。シャッタースイッチＳＷ２を放すと次の撮影領域であるｎ＋１枚目の撮影領域のスルー表示が追加されることになる。
【０３５０】
以上説明した様に、第２の実施形態によれば、一連のパノラマ撮影の開始後にズーム操作を行った場合は、所定の警告を行って画像処理装置１００の使用者に確認した後に、一連のパノラマ撮影を一旦打ち切ることにより、一連のパノラマ撮影の途中で撮影レンズ３１０のズーム操作を行ってパノラマ合成に不適当な画像を撮影してしまうという問題を防止することが出来る。
【０３５１】
以上、図１を用いて本発明の各実施形態の説明を行った。
【０３５２】
なお、実施形態の説明に於いては、撮像レンズ３１０がズームレンズであるとして説明したが、例えば広角レンズと望遠レンズを切り替えるような切り替えレンズの構成であっても勿論問題ない。この場合も実施形態の説明と同様に、パノラマ撮影開始フラグの状態に応じて、レンズ切り替え動作の実行を禁止すると共に所定の警告を行ったり、所定の警告を行って確認した後に一連のパノラマ撮影を終えて新たな一連のパノラマ撮影を開始したりすれば良い。
【０３５３】
また、第２の実施形態においては、ステップＳ６６５で一連のパノラマ撮影終了の確認が選択されたならばステップＳ６３１に戻って新たな一連のパノラマ撮影を開始するとして説明したが、ステップＳ６２１に戻ってパノラマモード選択画面から再度設定を行い、その後に新たな一連のパノラマ撮影を開始しても勿論問題ない。
【０３５４】
そして、パノラマモード選択画面で選択可能なパノラマモードを、２×２パノラマモード、水平パノラマモード、垂直パノラマモードの3種類として説明したが、これらに限らず、単数或いは複数種類の任意の数の異なるパノラマモードを選択可能としても、勿論問題ない。
【０３５５】
図９でのパノラマモード選択画面の表示も、この例に限らず、画像や音声を用いた任意の配置や方法による表示を行って構わない。
【０３５６】
また、２×２パノラマモード撮影画面での表示を２次元的に縦横計４枚として説明したが、これに限らず、縦横計９枚、縦横計１６枚等の、任意の数の２次元配置、更には3次元配置としても、勿論問題ない。
【０３５７】
また、水平パノラマモード撮影画面及び垂直パノラマモードでの表示を連続2枚として説明したが、これに限らず、３枚、４枚等の、任意の数の１次元配置としても、勿論問題ない。
【０３５８】
図１０、図１１、図１２、図１３、図１４及び図１５でのパノラマモード撮影画面の表示も、この例に限らず、画像や音声、文字、記号等を用いた任意の配置や方法による表示を行って構わない。
【０３５９】
また、水平パノラマモード及び垂直パノラマモードでの撮影方向の反転は、１枚目の撮影を終えた後は出来ないものとして説明したが、この例に限らず、随時撮影方向を反転出来るようにしても、勿論問題ない。右方向と左方向、上方向と下方向、或いは斜めを含む任意の方向へと随時撮影方向を変更するようにしても、勿論問題ない。画像表示部２８の表示面積を大きくして多数の画像表示領域を同時に表示可能な形態とすれば、右方向と左方向、上方向と下方向、或いは斜めを含む任意の方向へと随時撮影方向を変更することも可能である。
【０３６０】
また、水平パノラマモード及び垂直パノラマモードでの撮影やり直しは、１回前の撮影画像迄として説明したが、この例に限らず、任意の回数前の撮影画像に溯って撮影やり直しをするようにしても、勿論問題ない。
【０３６１】
また、次に撮影する画像表示領域をスルー表示とし、撮影済みの画像表示領域をクイックレビュー表示として、既に撮影した画像の再生画像と次に撮影する画像との境界領域を一部重ねて表示するとして説明したが、境界領域を重ねずに表示するようにしても良い。
【０３６２】
また、図１０、図１１、図１２、図１３、図１４、図１５の各パノラマモードの説明図においては、一例として、画像表示領域内に、「LIVE」、「FREEZE」という説明文字を付加したが、実際の画像表示部２８での表示には、これらの文字を表示する構成としても、表示しない構成としても、どちらでも問題ない。
【０３６３】
また、レンズユニット３００は画像処理装置１００と分離していて任意に接続可能なものとして説明したが、レンズユニット３００が画像処理装置１００と一体となった構成としても、勿論問題ない。
【０３６４】
さらに、画像処理装置１００に複数のレンズユニット３００が着脱可能な構成であっても勿論問題ない。
【０３６５】
また、記録媒体２００及び２１０は、ＰＣＭＣＩＡカードやコンパクトフラッシュ等のメモリカード、ハードディスク等だけでなく、マイクロＤＡＴ、光磁気ディスク、ＣＤ−ＲやＣＤ−ＷＲ等の光ディスク、ＤＶＤ等の相変化型光ディスク等で構成されていても勿論問題無い。
【０３６６】
また、記録媒体２００及び２１０がメモリカードとハードディスク等が一体となった複合媒体であっても勿論問題無い。さらに、その複合媒体から一部が着脱可能な構成としても勿論問題無い。
【０３６７】
また、実施形態の説明に於いては、記録媒体２００及び２１０は画像処理装置１００と分離していて任意に接続可能なものとして説明したが、いずれか或いは全ての記録媒体が画像処理装置１００に固定したままとなっていても勿論問題無い。全ての記録媒体が画像処理装置１００に固定したままとなっている場合は記録媒体の装着の有無に応じて警告の表示を行う状態にはならないが、全ての記録媒体が、故障や記録禁止の設定状態、記録空き領域が無い、等の理由から記録不可能な状態であったならば、上記の実施形態と同様の効果が得られるのは言うまでも無い。
【０３６８】
また、画像処理装置１００に記録媒体２００或いは２１０が、単数或いは複数の任意の個数接続可能な構成であっても構わない。
【０３６９】
また、画像処理装置１００に記録媒体２００及び２１０が装着される構成として説明したが、記録媒体は単数或いは複数の何れの組み合わせの構成であっても、勿論問題無い。
【０３７０】
また、上記の実施形態では、撮像レンズの変更可能な光学系の条件として、焦点距離の変更の場合について説明したが、これに限らず、光学系の条件としては、レンズの交換、絞りの変更、フォーカス位置の変更、シャッタースピードの変更等も含まれ、このような光学系の条件の変更に対しても、本発明は同様に適用可能である。
【０３７１】
また、複数の画像を関連付ける例としてパノラマ画像の合成について説明したが、画素ずらしを行いながら複数の画像を撮像し、これらの画像から高解像度の画像を合成する場合にも、本発明は適用可能である。
【０３７２】
【他の実施形態】
なお、本発明は、複数の機器（例えばホストコンピュータ，インタフェイス機器，リーダ，プリンタなど）から構成されるシステムに適用しても、一つの機器からなる装置（例えば、複写機，ファクシミリ装置など）に適用してもよい。
【０３７３】
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても、達成されることは言うまでもない。
【０３７４】
この場合、記憶媒体から読出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【０３７５】
プログラムコードを供給するための記憶媒体としては、例えば、フロッピディスク，ハードディスク，光ディスク，光磁気ディスク，ＣＤ−ＲＯＭ，ＣＤ−Ｒ，磁気テープ，不揮発性のメモリカード，ＲＯＭなどを用いることができる。
【０３７６】
また、コンピュータが読出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０３７７】
さらに、記憶媒体から読出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０３７８】
【発明の効果】
以上説明したように、本発明によれば、パノラマ画像の撮影中に、電子カメラ等の画像処理装置の使用者が撮影レンズの焦点距離を切り替えたり、或いはズーミングを行ったりした場合、複数枚撮影した画像を組み合わせてパノラマ画像を作成する際に、焦点距離の違いを補正するために余分な補正演算を行う必要があり、画質が著しく低下することが多いという従来の問題点を解決することができる。
【０３７９】
また、撮影レンズの焦点距離を切り替えたり、或いはズーミングを行ったりしたために、それぞれ撮影した画像の構図が個々に著しく異なる場合、合成したパノラマ画像の外形が撮影した画像毎に大きく異なって段付きとなってしまうという従来の問題点を解決することができる。
【０３８０】
さらに、パノラマ撮影の途中で、撮影レンズの焦点距離切り替えがパノラマ撮影に不適当な側に切り替わっているのに気付いた場合、或いはズームレンズのズーム位置がパノラマ撮影に不適当な位置にあることに気付いた場合、パノラマ撮影のために複数枚の撮影を行っている途中であるにも関わらず、撮影レンズの焦点距離を切り替えたり、或いはズーミングを行ったりして前述の問題点を引き起こしてしまうことが起こり易いという従来の問題点を解決することができる。
【０３８１】
【図面の簡単な説明】
【図１】本発明の実施形態に係わる画像処理装置の構成を示すブロック図である。
【図２Ａ】画像処理装置の動作を示す主ルーチンのフローチャートである。
【図２Ｂ】画像処理装置の動作を示す主ルーチンのフローチャートである。
【図３Ａ】画像処理装置の動作を示す主ルーチンのフローチャートである。
【図３Ｂ】画像処理装置の動作を示す主ルーチンのフローチャートである。
【図４】画像処理装置の動作を示す主ルーチンのフローチャートである。
【図５】測距・測光処理ルーチンのフローチャートである。
【図６】撮影処理ルーチンのフローチャートである。
【図７】表示画像処理ルーチンのフローチャートである。
【図８】圧縮処理ルーチンのフローチャートである。
【図９】パノラマ撮影モード設定画面の説明図である。
【図１０】水平パノラマモード初期画面の説明図である。
【図１１】垂直パノラマモード初期画面の説明図である。
【図１２】２×２パノラマモード撮影画面の説明図である。
【図１３】２×２パノラマモード撮影画面の説明図である。
【図１４】水平パノラマモード撮影画面の説明図である。
【図１５】垂直パノラマモード撮影画面の説明図である。
【図１６Ａ】第２の実施形態の主ルーチンのフローチャートである。
【図１６Ｂ】第２の実施形態の主ルーチンのフローチャートである。
【図１７Ａ】第２の実施形態の主ルーチンのフローチャートである。
【図１７Ｂ】第２の実施形態の主ルーチンのフローチャートである。
【図１８】第２の実施形態の主ルーチンのフローチャートである。
【符号の説明】
１４ 撮像素子
１６ Ａ／Ｄ変換器
１８ タイミング発生回路
２０ 画像処理回路
２２ メモリ制御回路
２４ 画像表示メモリ
２６ Ｄ／Ａ変換器
２８ 画像表示部
３０ メモリ
３２ 画像圧縮・伸長回路
４８ フラッシュ
５０ システム制御回路
５２ メモリ
５４ 表示部
５６ 不揮発性メモリ
６０ モードダイアルスイッチ
６２ シャッタースイッチＳＷ１
６４ シャッタースイッチＳＷ２
６６ 選択/切替スイッチ
６８ 決定/実行スイッチ
７０ 操作部
７２ 圧縮モードスイッチ
７４ ズームスイッチＷＩＤＥ
７６ ズームスイッチＴＥＬＥ
８０ 電源制御手段
８２ コネクタ
８４ コネクタ
８６ 電源手段
９０ インタフェース
９２ コネクタ
９４ インタフェース
９６ コネクタ
９８ 記録媒体着脱検知手段
１００ 画像処理装置
１０４ 光学ファインダ
１０６ レンズマウント
１１０ 通信手段
１１２ コネクタ（またはアンテナ）
１２０ インタフェース
１２２ コネクタ
１２４ レンズ着脱検知手段
１２６ レンズ着脱スイッチ
２００ 記録媒体
２０２ 記録部
２０４ インタフェース
２０６ コネクタ
２１０ 記録媒体
２１２ 記録部
２１４ インタフェース
２１６ コネクタ
３００ レンズユニット
３０６ レンズマウント
３１０ 撮影レンズ
３１２ シャッター
３２０ インタフェース
３２２ コネクタ
３４０ 露光制御手段
３４２ 測距制御手段
３４４ ズーム制御手段
３５０ レンズシステム制御回路[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image processing apparatus that captures, records, and reproduces still images and moving images, a control method thereof, and a storage medium.
[0002]
[Prior art]
Conventionally, image processing apparatuses such as electronic cameras for recording and reproducing still images and moving images using a memory card having a solid-state memory element as a recording medium are already on the market, and electronic cameras equipped with an electronic viewfinder such as a color liquid crystal panel are also available. Sold.
[0003]
According to these electronic cameras, it is possible to continuously display images before photographing and to determine the composition by the user of the electronic camera, or to reproduce and display the photographed images for confirmation.
[0004]
In particular, the function of creating a panoramic image by combining a plurality of captured images is highly convenient and is a useful function for the user of the electronic camera.
[0005]
Electronic cameras equipped with a switching lens and a zoom lens that can change the focal length of the imaging lens are also on the market.
[0006]
[Problems to be solved by the invention]
In such a conventional image processing apparatus such as an electronic camera, a user of the image processing apparatus such as an electronic camera may switch the focal length of the photographing lens or perform zooming while capturing a panoramic image. there were. In this case, when a panoramic image is created by combining a plurality of captured images, it is necessary to perform an extra correction operation to correct the difference in focal length, and there are many problems that the image quality is significantly deteriorated. .
[0007]
Also, if the composition of each captured image differs significantly due to switching of the focal length of the photographic lens or zooming, the outer shape of the combined panoramic image differs greatly from one captured image to another. There was a problem of becoming.
[0008]
In addition, during panorama shooting, if you notice that the focal length switch of the photographic lens has been switched to the inappropriate side for panoramic shooting, or that the zoom position of the zoom lens is in an inappropriate position for panoramic shooting. If you notice it, you may be switching the focal length of the photographic lens or zooming, even if you are in the middle of shooting multiple photos for panoramic shooting, and cause the above-mentioned problems. Was easy to happen and was a problem.
[0009]
Accordingly, the present invention has been made in view of the above-described problems, and an object of the present invention is to provide an image processing apparatus that does not cause a problem during panoramic photography even when a lens having a function of changing a focal length is used, and a control method thereof. And providing a storage medium.
[0022]
[Means for Solving the Problems]
  In order to solve the above-described problems and achieve the object, an image processing apparatus according to the present invention is an image processing apparatus having a function of storing a plurality of captured still images and / or moving images in a storage unit. An imaging unit having an imaging lens capable of changing the conditions of the optical system, a storage unit that stores a plurality of images captured by the imaging unit in association with each other, and an instruction to change the optical system conditions of the imaging lens An optical system condition change instruction means, and after capturing and storing a first image of a plurality of images to be stored in association with the storage means, the optical system condition change instruction means And a control unit that controls to start imaging operation and storage operation of a plurality of newly associated images when an instruction to change the condition of the optical system is given.
[0023]
In the image processing apparatus according to the present invention, the condition of the optical system is a focal length of the imaging lens.
[0024]
In the image processing apparatus according to the present invention, the associating the plurality of images is synthesizing a panoramic image from the plurality of images.
[0025]
In the image processing apparatus according to the present invention, the plurality of images are images picked up by performing pixel shifting, and associating the plurality of images is based on a plurality of images picked up by performing the pixel shifting. It is characterized by synthesizing resolution images.
[0026]
  An image processing apparatus according to the present inventionAn image processing apparatus having a function of storing a plurality of captured still images and / or moving images in a storage unit, the imaging unit including an imaging lens capable of changing the conditions of an optical system, and captured by the imaging unit Storage means for associating and storing a plurality of images, optical system condition change instruction means for outputting an instruction to change the optical system conditions of the imaging lens, display means for displaying predetermined information externally, and An instruction to change the condition of the optical system of the imaging lens was received from the condition change instruction means of the optical system after the first image of the plurality of images to be stored in association with the storage means was captured and stored. And a control means for controlling to start the imaging operation and the storage operation of a plurality of newly associated images after displaying the warning information by the display means. That.
[0027]
In the image processing apparatus according to the present invention, the condition of the optical system is a focal length of the imaging lens.
[0028]
In the image processing apparatus according to the present invention, the associating the plurality of images is synthesizing a panoramic image from the plurality of images.
[0029]
In the image processing apparatus according to the present invention, the plurality of images are images picked up by performing pixel shifting, and associating the plurality of images is based on a plurality of images picked up by performing the pixel shifting. It is characterized by synthesizing resolution images.
[0047]
  In addition, the control method of the image processing apparatus according to the present invention includes:Imaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output An image processing apparatus control method for controlling an image processing apparatus comprising an optical system condition change instruction means, wherein a first image of a plurality of images to be stored in association with the storage means is captured. Then, when there is an instruction to change the condition of the optical system of the imaging lens from the condition change instruction unit of the optical system, the imaging operation and storage operation of a plurality of newly associated images are started. It is characterized by that.
[0048]
In the control method of the image processing apparatus according to the present invention, the optical system condition is a focal length of the imaging lens.
[0049]
In the control method of the image processing apparatus according to the present invention, the associating the plurality of images is synthesizing a panoramic image from the plurality of images.
[0050]
Further, in the control method of the image processing apparatus according to the present invention, the plurality of images are images picked up by performing pixel shifting, and associating the plurality of images means a plurality of images picked up by performing the pixel shifting. It is characterized by synthesizing a high-resolution image from an image.
[0051]
  In addition, the control method of the image processing apparatus according to the present invention includes:Imaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output An image processing apparatus control method for controlling an image processing apparatus, comprising: an optical system condition change instructing unit; and a display unit for displaying predetermined information on the outside. After the first image of a plurality of images is captured and stored, warning information is displayed by the display means when an instruction to change the conditions of the optical system of the imaging lens is received from the condition change instruction means of the optical system. After the display, the imaging operation and storage operation of a plurality of newly associated images are started.
[0052]
In the control method of the image processing apparatus according to the present invention, the optical system condition is a focal length of the imaging lens.
[0053]
In the control method of the image processing apparatus according to the present invention, the associating the plurality of images is synthesizing a panoramic image from the plurality of images.
[0054]
Further, in the control method of the image processing apparatus according to the present invention, the plurality of images are images picked up by performing pixel shifting, and associating the plurality of images means a plurality of images picked up by performing the pixel shifting. It is characterized by synthesizing a high-resolution image from an image.
[0072]
  The storage medium according to the present invention isImaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output A storage medium storing a control program for controlling an image processing apparatus including an optical system condition change instruction unit, wherein the control program stores the first of a plurality of images to be stored in association with the storage unit After capturing and storing an image, when there is an instruction to change the condition of the optical system of the imaging lens from the condition change instruction unit of the optical system, the imaging operation and storage operation of a plurality of newly associated images It is characterized by comprising a code of a process for starting.
[0073]
In the storage medium according to the present invention, the condition of the optical system is a focal length of the imaging lens.
[0074]
In the storage medium according to the present invention, the associating the plurality of images is synthesizing a panoramic image from the plurality of images.
[0075]
Further, in the storage medium according to the present invention, the plurality of images are images picked up by shifting pixels, and associating the plurality of images means a high resolution from the plurality of images picked up by shifting pixels. It is characterized by synthesizing the images.
[0076]
  The storage medium according to the present invention isImaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output A storage medium storing a control program for controlling an image processing apparatus including an optical system condition change instructing unit and a display unit for displaying predetermined information on the outside, the control program being associated with the storage unit After the first image of the plurality of images to be stored is captured and stored, the display is performed when there is an instruction to change the condition of the optical system of the imaging lens from the condition change instruction unit of the optical system. After the warning information is displayed by the means, a code of a step of starting the imaging operation and the storage operation of a plurality of newly associated images is provided.
[0077]
In the storage medium according to the present invention, the condition of the optical system is a focal length of the imaging lens.
[0078]
In the storage medium according to the present invention, the associating the plurality of images is synthesizing a panoramic image from the plurality of images.
[0079]
Further, in the storage medium according to the present invention, the plurality of images are images picked up by shifting pixels, and associating the plurality of images means a high resolution from the plurality of images picked up by shifting pixels. It is characterized by synthesizing the images.
[0085]
DETAILED DESCRIPTION OF THE INVENTION
DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, preferred embodiments of the invention will be described in detail with reference to the accompanying drawings.
[0086]
(First embodiment)
FIG. 1 is a diagram showing a configuration of an image processing apparatus according to the first embodiment of the present invention.
[0087]
In FIG. 1, reference numeral 100 denotes an image processing apparatus.
An image sensor 14 converts an optical image into an electrical signal, and an A / D converter 16 converts an analog signal output from the image sensor 14 into a digital signal.
A timing generation circuit 18 supplies a clock signal and a control signal to the image sensor 14, the A / D converter 16, and the D / A converter 26, and is controlled by the memory control circuit 22 and the system control circuit 50.
An image processing circuit 20 performs predetermined pixel interpolation processing and color conversion processing on the data from the A / D converter 16 or the data from the memory control circuit 22.
[0088]
Further, the image processing circuit 20 performs predetermined calculation processing using the captured image data, and the system control circuit 50 controls the exposure control unit 340 and the distance measurement control unit 342 based on the obtained calculation result. TTL (through-the-lens) AF (autofocus) processing, AE (automatic exposure) processing, and EF (flash pre-emission) processing are performed.
[0089]
Further, the image processing circuit 20 performs predetermined arithmetic processing using captured image data, and also performs TTL AWB (auto white balance) processing based on the obtained arithmetic result.
A memory control circuit 22 controls the A / D converter 16, the timing generation circuit 18, the image processing circuit 20, the image display memory 24, the D / A converter 26, the memory 30, and the compression / decompression circuit 32.
[0090]
The data of the A / D converter 16 is written into the image display memory 24 or the memory 30 via the image processing circuit 20 and the memory control circuit 22 or the data of the A / D converter 16 is directly passed through the memory control circuit 22. It is.
[0091]
Reference numeral 24 denotes an image display memory, 26 denotes a D / A converter, 28 denotes an image display unit including a TFT LCD, and the image data for display written in the image display memory 24 passes through the D / A converter 26. Displayed by the image display unit 28.
[0092]
If the image data captured using the image display unit 28 is sequentially displayed, the electronic viewfinder function can be realized.
[0093]
The image display unit 28 can arbitrarily turn on / off the display according to an instruction from the system control circuit 50. When the display is turned off, the power consumption of the image processing apparatus 100 can be greatly reduced. I can do it.
[0094]
Reference numeral 30 denotes a memory for storing captured still images and moving images, and has a sufficient storage capacity to store a predetermined number of still images and a predetermined time of moving images. Thereby, even in the case of continuous shooting or panoramic shooting in which a plurality of still images are continuously shot, it is possible to write a large amount of images to the memory 30 at high speed.
The memory 30 can also be used as a work area for the system control circuit 50.
[0095]
Reference numeral 32 denotes a compression / decompression circuit that compresses and decompresses image data by adaptive discrete cosine transform (ADCT) or the like, reads an image stored in the memory 30, performs compression processing or decompression processing, and stores the processed data in the memory 30. Write to.
[0096]
A flash 48 has an AF auxiliary light projecting function and a flash light control function.
[0097]
The exposure control means 340 and the distance measurement control means 342 are controlled using the TTL method, and the system control circuit 50 determines the exposure control means 340 and the distance measurement based on the calculation result obtained by calculating the captured image data by the image processing circuit 20. Control is performed on the control means 342.
[0098]
Reference numeral 50 denotes a system control circuit that controls the entire image processing apparatus 100, and 52 denotes a memory that stores constants, variables, programs, and the like for operation of the system control circuit 50.
[0099]
Reference numeral 54 denotes a display unit such as a liquid crystal display device or a speaker that displays an operation state or a message using characters, images, sounds, or the like in accordance with execution of a program in the system control circuit 50. One or a plurality of places are provided near the portion where they are easily visible, and are configured by a combination of, for example, an LCD, an LED, a sound generation element, and the like.
[0100]
In addition, the display unit 54 is partially installed in the optical viewfinder 104.
[0101]
Among the display contents of the display unit 54, what is displayed on the LCD or the like is, for example, single shot / continuous shooting display, self-timer display, compression rate display, recording pixel number display, recording number display, remaining image number display , Shutter speed display, Aperture value display, Exposure compensation display, Flash display, Red-eye reduction display, Macro shooting display, Buzzer setting display, Clock battery level display, Battery level display, Error display, Multi-digit number information display , Attachment / detachment state display of the recording media 200 and 210, attachment / detachment state display of the lens unit 300, communication I / F operation display, date / time display, display showing a connection state with an external computer, and the like.
[0102]
In addition, among the display contents of the display unit 54, what is displayed in the optical viewfinder 104 is, for example, in-focus display, shooting preparation completion display, camera shake warning display, flash charge display, flash charge completion display, shutter speed display, There are an aperture value display, an exposure correction display, a recording medium writing operation display, and the like.
[0103]
Furthermore, among the display contents of the display unit 54, what is displayed on the LED or the like includes, for example, in-focus display, shooting preparation completion display, camera shake warning display, flash charge display, flash charge completion display, recording medium writing operation display, Macro shooting setting notification display, secondary battery charge status display, and the like.
[0104]
And what is displayed on a lamp etc. among the display contents of the display part 54 includes a self-timer notification lamp, for example. This self-timer notification lamp may be used in common with AF auxiliary light.
[0105]
Reference numeral 56 denotes an electrically erasable / recordable nonvolatile memory such as an EEPROM.
[0106]
Reference numerals 60, 62, 64, 66, 68, 70, 72, 74, and 76 are operation means for inputting various operation instructions of the system control circuit 50, and are switches, dials, touch panels, pointing by visual line detection, audio. It is composed of a single or a plurality of combinations such as a recognition device.
[0107]
Here, a specific description of these operating means will be given.
[0108]
Reference numeral 60 denotes a mode dial switch, which can switch and set various function modes such as power-off, automatic shooting mode, shooting mode, panoramic shooting mode, playback mode, multi-screen playback / erase mode, and PC connection mode.
[0109]
Reference numeral 62 denotes a shutter switch SW1, which is turned ON during operation of a shutter button (not shown), and performs AF (auto focus) processing, AE (automatic exposure) processing, AWB (auto white balance) processing, EF (flash pre-flash) processing, and the like. Instruct to start operation.
[0110]
Reference numeral 64 denotes a shutter switch SW2, which is turned on when the operation of a shutter button (not shown) is completed, and an exposure process for writing a signal read from the image sensor 12 to the memory 30 via the A / D converter 16 and the memory control circuit 22. Development processing using operations in the image processing circuit 20 and the memory control circuit 22, recording processing for reading image data from the memory 30, compression in the compression / decompression circuit 32, and writing the image data to the recording medium 200 or 210. Instructs the start of a series of operations
[0111]
Reference numeral 66 denotes a selection / changeover switch that can be used to select and switch various functions when performing shooting and playback in a panoramic mode or the like.
[0112]
Reference numeral 68 denotes a determination / execution switch, which can be used to determine and execute various functions when performing shooting and playback in a panorama mode or the like.
[0113]
70 is an operation unit composed of various buttons, a touch panel, etc., a menu button, a set button, a macro button, a multi-screen playback page break button, a flash setting button, a single shooting / continuous shooting / self-timer switching button, menu movement + (plus) Button, menu shift-(minus) button, playback image shift + (plus) button, playback image-(minus) button, shooting image quality selection button, exposure compensation button, date / time setting button, ON / OFF of image display unit 28 There is an image display ON / OFF button for setting the image, a quick review ON / OFF button for setting a quick review function for automatically reproducing the image data captured immediately after shooting on the image display unit 28, and the like.
[0114]
Reference numeral 72 denotes a compression mode switch, which is a switch for selecting a compression rate for JPEG compression, or for selecting a CCD RAW mode in which a signal from an image sensor is directly digitized and recorded on a recording medium.
[0115]
For example, a normal mode and a fine mode are prepared as JPEG compression modes.
[0116]
In the JPEG compression mode, image data read from the image sensor 14 and written to the memory 30 via the A / D converter 16, the image processing circuit 20, and the memory control circuit 22 are read and compressed / compressed. After compression to the compression ratio set by the decompression circuit 32, recording is performed on the recording medium 200 or 210.
[0117]
In the CCD RAW mode, the image data is read as it is for each line in accordance with the pixel arrangement of the color filter of the image sensor 14, and the image data written in the memory 30 via the A / D converter 16 and the memory control circuit 22. Are recorded on the recording medium 200 or 210.
[0118]
Reference numerals 74 and 76 denote zoom switches, which are zoom switches for the taking lens 310 via the zoom control means 344 of the lens unit 300. Here, 74 is a zoom switch WIDE that performs zooming in the wide-angle direction, and 76 is a zoom switch TELE that performs zooming in the telephoto direction. 74 and 76 may be integrated switches.
[0119]
Reference numeral 80 denotes a power supply control means, which includes a battery detection circuit, a DC-DC converter, a switch circuit for switching a block to be energized, etc., and detects the presence / absence of a battery, the type of battery, the remaining battery level, and the detection result In addition, the DC-DC converter is controlled based on an instruction from the system control circuit 50, and a necessary voltage is supplied to each unit including the recording medium for a necessary period.
[0120]
Reference numeral 82 denotes a connector, 84 denotes a connector, and 86 denotes a primary battery such as an alkaline battery or a lithium battery, a secondary battery such as a NiCd battery, a NiMH battery, or a Li battery, an AC adapter, or the like.
[0121]
90 and 94 are interfaces with a recording medium such as a memory card or a hard disk, 92 and 96 are connectors for connecting to a recording medium such as a memory card or a hard disk, and 98 is a recording medium 200 or 210 attached to the connector 92 or 96. Recording medium attachment / detachment detecting means for detecting whether or not the recording medium is present.
[0122]
In the present embodiment, it is assumed that there are two systems of interfaces and connectors for attaching a recording medium. Of course, the interface and the connector for attaching the recording medium may have a single or a plurality of systems and any number of systems. Moreover, it is good also as a structure provided with combining the interface and connector of a different standard.
[0123]
The interface and connector may be configured using a PCMCIA card, a CF (compact flash) card, or the like that conforms to a standard.
[0124]
Further, when the interfaces 90 and 94 and the connectors 92 and 96 are configured using a PCMCIA card, a CF (compact flash) card, or the like, a LAN card, a modem card, a USB card, an IEEE 1394 card, a P1284 card. By connecting various communication cards such as SCSI cards, PHS and other communication cards, image data and management information attached to the image data can be transferred to and from other computers and peripheral devices such as printers. I can do it.
Reference numeral 104 denotes an optical viewfinder, which can take an image using only the optical viewfinder without using the electronic viewfinder function of the image display unit 28. In the optical viewfinder 104, some functions of the display unit 54, for example, a focus display, a camera shake warning display, a flash charge display, a shutter speed display, an aperture value display, an exposure correction display, and the like are installed.
[0125]
A communication unit 110 has various communication functions such as RS232C, USB, IEEE1394, P1284, SCSI, modem, LAN, and wireless communication.
[0126]
Reference numeral 112 denotes a connector for connecting the image processing apparatus 100 to another device by the communication unit 110 or an antenna in the case of wireless communication.
[0127]
120 is an interface for connecting the image processing apparatus 100 to the lens unit 300 in the lens mount 106, 122 is a connector for electrically connecting the image processing apparatus 100 to the lens unit 300, and 124 is the lens mount 106 and / or. Lens attachment / detachment detection means for detecting whether or not the lens unit 300 is attached to the connector 122.
[0128]
The connector 122 communicates control signals, status signals, data signals, and the like between the image processing apparatus 100 and the lens unit 300, and also has a function of supplying currents of various voltages. The connector 122 may be configured to transmit not only electrical communication but also optical communication, voice communication, and the like.
[0129]
Reference numeral 200 denotes a recording medium such as a memory card or a hard disk.
The recording medium 200 includes a recording unit 202 composed of a semiconductor memory, a magnetic disk, or the like, an interface 204 with the image processing apparatus 100, and a connector 206 for connecting to the image processing apparatus 100.
[0130]
Reference numeral 210 denotes a recording medium such as a memory card or a hard disk.
The recording medium 210 includes a recording unit 212 composed of a semiconductor memory, a magnetic disk, and the like, an interface 214 with the image processing apparatus 100, and a connector 216 that connects to the image processing apparatus 100.
[0131]
Reference numeral 300 denotes an interchangeable lens type lens unit.
[0132]
Reference numeral 306 denotes a lens mount that mechanically couples the lens unit 300 to the image processing apparatus 100. The lens mount 306 includes various functions for electrically connecting the lens unit 300 to the image processing apparatus 100.
[0133]
Reference numeral 310 denotes a photographing lens, and 312 denotes a shutter having an aperture function.
[0134]
Reference numeral 320 denotes an interface for connecting the lens unit 300 to the image processing apparatus 100 in the lens mount 306, and reference numeral 322 denotes a connector for electrically connecting the lens unit 300 to the image processing apparatus 100.
[0135]
The connector 322 transmits a control signal, a status signal, a data signal, and the like between the image processing apparatus 100 and the lens unit 300, and also has a function of supplying or supplying currents of various voltages. The connector 322 may be configured to transmit not only electrical communication but also optical communication, voice communication, and the like.
[0136]
Reference numeral 340 denotes exposure control means for controlling the shutter 312 having an aperture function, and has a flash light control function in cooperation with the flash 48.
[0137]
Reference numeral 342 denotes distance measurement control means for controlling the focusing of the photographing lens 310, and reference numeral 344 denotes zoom control means for controlling zooming of the photographing lens 310.
[0138]
A lens system control circuit 350 controls the entire lens unit 300. The lens system control circuit 350 includes a memory for storing operation constants, variables, programs and the like, identification information such as a number unique to the lens unit 300, management information, function information such as an open aperture value, a minimum aperture value, a focal length, It also has a non-volatile memory function for holding current and past set values.
The operation of the first embodiment will be described with reference to FIGS. 2A, 2B, 3A, 3B, 4, 5, 6, 7, and 8. FIG.
[0139]
2A, 2B, 3A, 3B, and 4 are flowcharts of a main routine of the image processing apparatus 100 according to the present embodiment.
[0140]
The operation of the image processing apparatus 100 will be described with reference to FIGS. 2A, 2B, 3A, 3B, and 4. FIG.
[0141]
Upon power-on such as battery replacement, the system control circuit 50 initializes flags, control variables, and the like, and initializes each part of the image control apparatus 100 (step S101).
[0142]
The system control circuit 50 determines the setting position of the mode dial 60, and if the mode dial 60 is set to power OFF (step S102), the display of each display unit is changed to the end state, and the lens unit 300 If a barrier or the like of the protection unit is provided, the imaging unit is protected by closing it, and necessary parameters, setting values, and setting modes including flags and control variables are recorded in the nonvolatile memory 56, and the power control unit 80 After performing a predetermined end process such as shutting off unnecessary power sources of each part of the image processing apparatus 100 including the image display unit 28 (step S103), the process returns to step S102.
[0143]
If the mode dial 60 has been set to another mode (step S102), the system control circuit 50 indicates that the remaining capacity and operation status of the power source 86 constituted by a battery or the like by the power source control means 80 is in the image processing apparatus 100. It is determined whether or not there is a problem in operation (step S104). If there is a problem, a predetermined warning is displayed by an image or sound using the display unit 54 (step S106), and the process returns to step S102.
[0144]
If the image display of the image display unit 28 is ON, the image display unit 28 is also used to perform a predetermined warning display using an image or sound.
[0145]
If there is no problem with the power supply 86 (step S104), it is determined whether the operation state of the recording medium 200 or 210 has a problem with the operation of the image processing apparatus 100, particularly with respect to the recording / reproducing operation of the image data with respect to the recording medium ( In step S105), if there is a problem, a predetermined warning is displayed by an image or sound using the display unit 54 (step S106), and the process returns to step S102.
[0146]
If the image display of the image display unit 28 is ON, the image display unit 28 is also used to perform a predetermined warning display using an image or sound.
[0147]
If there is no problem in the operation state of the recording medium 200 or 210 (step S105), the display unit 54 is used to display various setting states of the image processing apparatus 100 using images and sounds (step S107). If the image display of the image display unit 28 is ON, the image display unit 28 is also used to display various setting states of the image processing apparatus 100 using images and sounds.
[0148]
If the mode dial 60 is set to the shooting mode (step S108), a predetermined shooting process is executed (step S109), and if the process is completed, the process returns to step S102.
[0149]
If the mode dial 60 has been set to another mode (step S108), the system control circuit 50 executes processing corresponding to the selected mode (step S110), and returns to step S102 when the processing is completed. .
[0150]
If the mode dial 60 is set to the panorama mode (step S108), the system control circuit 50 determines whether or not the zoom position of the imaging lens 310 is a predetermined home position (step S121), and sets the home position. If not, the zoom position is moved to the home position (step S122).
[0151]
Similarly, when the photographing lens 310 is a switching lens that switches the focal length to a plurality of types, the system control circuit 50 determines whether or not the setting of the switching lens of the imaging lens 310 is a predetermined home position side. (Step S121) If it is not on the home position side, the setting of the switching lens is moved to the home position side (Step S122).
[0152]
As an example of the home position, in the case of a zoom lens, the WIDE end, which is a focal length on the wide-angle side suitable for panoramic photography, can be cited as an example.
[0153]
In the case of a focal length switching lens, an example is switching to a lens having a WIDE side focal length that is a wide-angle side focal length suitable for panoramic photography.
[0154]
The focal position is not limited to this example, and any focal length may be used as the home position as long as the focal length is suitable for panoramic photography.
The system control circuit 50 displays a panorama mode selection screen on the image display unit 28 (step S111).
[0155]
The user of the image processing apparatus 100 can select an arbitrary mode from a plurality of panorama shooting modes by looking at the panorama mode selection screen displayed on the image display unit 28.
[0156]
The panorama shooting mode includes a 2 × 2 panorama mode, a horizontal panorama mode, a vertical panorama mode, and the like. By overlapping a plurality of shootings, a panorama image expanded in two dimensions, a panorama image expanded in the horizontal direction, and a vertical A panoramic image enlarged in the direction can be created.
[0157]
Each series of captured images is added with information indicating its positional relationship, and after the images are transferred to the image processing device itself or to a computer, etc., the images are combined to create a single panoramic image. Is possible.
An example of the panorama mode selection screen is shown in FIG.
In FIG. 9, the left is an icon for selecting a 2 × 2 panorama mode for shooting a two-dimensional panoramic image, the center is an icon for selecting a horizontal panorama mode for shooting a horizontal panorama image, and the right is a vertical panorama image. This is an icon for selecting a vertical panorama mode for shooting.
[0158]
A user of the image processing apparatus 100 can select a panorama mode for shooting with the selection / changeover switch 66 (for example, the [+] key), and can determine the panorama mode with the determination / execution switch 68 (for example, the [SET] key). I can do it.
[0159]
If the panorama mode is selected by the selection / changeover switch 66 and the decision / execution switch 68, the system control circuit 50 sets the 2 × 2 panorama mode initial setting (step S113) according to the selected panorama mode (step S112). ), Vertical panorama mode initial setting (step S114), horizontal panorama mode initial setting (step S115), flags, parameters, initial values of variables, memory area setting, display screen reading as a user interface, etc. The panorama shooting screen corresponding to each mode is displayed on the image display unit 28 (step S116), and the process proceeds to step S131.
[0160]
An example of the horizontal panorama mode shooting screen is shown in FIG. 10, an example of the vertical panorama mode shooting screen is shown in FIG. 11, and an example of the 2 × 2 panorama shooting screen is shown in FIG.
[0161]
In FIG. 10, (a) is a shooting screen for continuously shooting in the right direction to create a panorama screen, and (b) is a shooting screen for repeatedly shooting in the left direction to create a panorama screen.
[0162]
In the figure, a through image obtained by the electronic viewfinder is displayed in the area “1” for the first photographing of a series of panoramic images, and before the first photographing is completed, the selection / changeover switch 66 ( For example, with the [+] key, it is possible to switch between right shooting (a) and left shooting (b) at any time.
[0163]
The shooting direction is determined by pressing the shutter button and executing the first shooting in the desired display screen state (a) or (b).
[0164]
Note that by pressing the enter / execute switch 68 (eg, [SET] key), shooting in the horizontal panorama mode can be terminated.
[0165]
In FIG. 11, (a) is a shooting screen for continuously shooting in the upward direction to create a panoramic screen, and (b) is a shooting screen for continuously shooting in the downward direction to create a panoramic screen. is there.
[0166]
In the figure, a through image obtained by the electronic viewfinder is displayed in the area “1” for the first photographing of a series of panoramic images, and before the first photographing is completed, the selection / changeover switch 66 ( For example, by using the [+] key), it is possible to switch between the upper direction shooting (a) and the lower direction shooting (b).
[0167]
The shooting direction is determined by pressing the shutter button and executing the first shooting in the desired display screen state (a) or (b).
[0168]
Note that shooting in the vertical panorama mode can be terminated by pressing the enter / execute switch 68 (for example, the [SET] key).
[0169]
Also, in FIG. 12, (a) is the first shooting screen of the shooting screen in which a total of four vertical and horizontal shootings are two-dimensionally repeated to create a 2 × 2 panoramic screen. Similarly, (b) is the second screen for photographing.
[0170]
In the figure, a through image by the electronic viewfinder is displayed in the upper right area, for example, for photographing the first panoramic image.
[0171]
When the first image has been shot, a reproduced image of the shot image is displayed, for example, in the upper right area, and a through image by the electronic viewfinder is displayed, for example, in the lower right area for the second image.
[0172]
The shooting area of the electronic viewfinder is sent sequentially to the next area each time you take a picture, but you can start shooting from any area, and you can return to the already shot area and start shooting again. It is. Therefore, the photographing area can be moved at any time by the selection / changeover switch 66 (for example, the [+] key).
[0173]
The determination of the redo shooting area and the execution of shooting are performed by pressing the shutter button and executing shooting in the display screen state where the desired area is selected.
[0174]
Note that by pressing the enter / execute switch 68 (eg, [SET] key), shooting in the 2 × 2 panorama mode can be terminated.
[0175]
The system control circuit 50 initializes flags and variables set in the internal memory of the system control circuit 50 or the memory 52. For example, the panorama shooting start flag is canceled (step S131), variables m and n are set, and m = 1 and n = 1 are initialized (step S133 and step S132), respectively.
[0176]
Here, the cancellation of the panorama shooting start flag indicates that no series of panorama shooting has been performed yet.
The variable n indicates the number of shooting regions in shooting in each panorama mode.
[0177]
The variable m is used to return the shooting area to the previous frame or to cancel the return when shooting is performed again in the horizontal panorama mode and the vertical panorama mode.
[0178]
Details of how to use these flags and variables will be described later.
[0179]
When the setting position of the mode dial 60 is set to other than the panorama mode (step S134), the system control circuit 50 ends the shooting in the panorama mode and returns to step S102. As a result, the user of the image processing apparatus 100 can end the panorama mode at any time and switch to another mode.
[0180]
When the setting position of the mode dial 60 remains in the panorama mode (step S134), that is, when the display screen of the image display unit 28 is in the state of each panorama shooting screen described above, the enter / execute switch 68 (for example, the [SET] key) ) To select the end of the panorama mode (step S135), the panorama mode end confirmation is displayed. If the end confirmation is selected (step S136), the panorama mode selection screen displays step S111. Return.
[0181]
If the zoom switch WIDE74 or the zoom switch TELE76 is not pressed (step S161), the system control circuit 50 determines the state of the panorama shooting start flag (step S162).
[0182]
If the panorama shooting start flag has been cancelled, that is, if the first shot has not yet been executed in a series of panorama shooting (step S162), the system control circuit 50 follows the instructions of the zoom switch WIDE74 or the zoom switch TELE76. A predetermined zoom operation for zooming the taking lens 310 is performed via the interface 120, the connector 122, the connector 322, the interface 320, the lens system control circuit 350, and the zoom control means 344 (step S163), and the process proceeds to step S137.
[0183]
If the panorama shooting start flag is set, that is, after the first shooting is executed in a series of panorama shooting (step S162), the system control circuit 50 uses the display unit 54 and / or the image display unit 28. A predetermined warning is displayed by an image or sound (step S164), and the process proceeds to step S137 without executing the zoom operation.
[0184]
Accordingly, it is possible to prevent an image inappropriate for panorama synthesis from being shot by performing a zoom operation of the taking lens 310 during a series of panorama shooting.
[0185]
If the selection / changeover switch 66 (for example, the [+] key) is pressed while the display screen of the image display unit 28 is in the above-described panorama shooting screen state (step S137), the system control circuit 50 sets the panorama mode. In response to this, a predetermined process is performed (step S138).
[0186]
If the selection / changeover switch 66 (for example, the [+] key) is not pressed (step S137), the process proceeds to step S146.
[0187]
First, if the 2 × 2 panorama mode is set (step S138), the system control circuit 50 sets the variable n to n = n + 1 and moves to the next shooting area (step S139). If n = 5 (step S140), the process returns to the first shooting area with n = n-4 (step S141). Thereafter, the process proceeds to step S146.
[0188]
That is, every time the selection / switching switch 66 (for example, the [+] key) is pressed, the four shooting areas in the 2 × 2 panorama mode are repeatedly moved. For example, upper right, lower right, lower left, upper left, upper right, lower right. . . The shooting area moves sequentially.
[0189]
On the other hand, if the panorama shooting mode is set to the horizontal panorama mode or the vertical panorama mode (step S138), if the panorama shooting start flag is canceled, that is, if the first shooting is not yet executed in the series of panorama shooting (step S138). (S142), the system control circuit 50 reverses the shooting direction of each panorama mode (step S143). Thereafter, the process proceeds to step S146.
Note that the reversal of the shooting direction can be repeated until the first image is shot.
[0190]
Here, an example of the photographing direction reversal screen in the horizontal panorama mode is shown in FIG.
[0191]
In FIG. 10, (a) is a screen that repeats shooting in the right direction, and (b) is a screen that repeats shooting in the left direction.
[0192]
An example of the shooting direction reversal screen in the vertical panorama mode is shown in FIG.
[0193]
In FIG. 11, (a) is a screen that repeats photographing in the upward direction, and (b) is a screen that repeats photographing in the downward direction.
[0194]
Next, when the panorama shooting start flag is set in the horizontal panorama mode or the vertical panorama mode (step S138), that is, after execution of the first shooting in a series of panorama shooting (step S142). The system control circuit 50 sets m = m × (−1) as −1, +1, −1, +1. . . And the operation of inverting the sign every time (step S144), n = n + m for the variable n, and n = n−1, n = n + 1, n = n−1, n each time = N + 1. . . The following calculation is performed (step S145). Thereafter, the process proceeds to step S146.
[0195]
Thus, in order to redo the shooting, it is possible to repeatedly select to move to the area that has already been shot, but to cancel the movement to the area that has already been shot, although only for the last shot.
[0196]
Thus, after panoramic shooting of the nth image area, the selection / switching switch 66 (for example, the [+] key) is pressed, and the quick review image of the n−1th image area and the quick review image of the nth image area After confirming the connection state of the boundary area, the selection / changeover switch 66 (for example, the [+] key) is released to make the nth image area a through image, and then the selection / changeover switch 66 (for example, the [+] key is used again). ) To display the quick review image of the original nth image area and the through image of the (n + 1) th image area, and the next panorama shooting can be performed.
[0197]
Further, after panoramic shooting of the nth image area, the selection / changeover switch 66 (for example, the [+] key) is pressed to switch between the quick review image of the n−1th image area and the quick review image of the nth image area. If it is determined that the boundary area is connected and if it is determined that the image is to be shot again, the selection / changeover switch 66 (for example, the [+] key) is released and the nth image area is used as a through image, and the shutter in this screen state is displayed. By pressing the switch SW2, it is possible to perform the next panoramic photographing after replacing with a new photographed image.
[0198]
The system control circuit 50 selects the nth image area (step S146), and if it is necessary to change the screen layout according to the selected image area (step S147), the screen layout is switched and displayed (step S148). ). Thereafter, the process proceeds to step S171.
As a result, the screen corresponding to the reversal of the shooting direction, the screen corresponding to the change of the shooting area, the screen updated with the text or image for explanation, etc. can be displayed as necessary. I can do it.
[0199]
In the second and subsequent shots, by setting the already shot shooting area in the quick review display state, and setting the next shooting area moved for the next shooting to the through display state, It is possible to display a reproduced image of an already captured image and an image to be captured next in a partially overlapped manner. Thereby, the user of the image processing apparatus 100 can easily determine the next photographing composition.
The system control circuit 50 sets a through display state in which captured image data is sequentially displayed (step S171), and proceeds to step S172.
In the through display state, the data sequentially written in the image display memory 24 via the image sensor 14, the A / D converter 16, the image processing circuit 20, and the memory control circuit 22 are transferred to the memory control circuit 22, D The electronic viewfinder function is realized by sequentially displaying in the above-described photographing area of the image display unit 28 via the / A converter 26.
[0200]
If the shutter switch SW1 has not been pressed (step S172), the process returns to step S134.
[0201]
If the shutter switch SW1 is pressed (step S172), the system control circuit 50 sets the display state of the image display unit 28 to the freeze display state (step S173), and proceeds to step S174.
[0202]
In the freeze display state, rewriting of image data in the image display memory 24 via the image sensor 14, the A / D converter 16, the image processing circuit 20, and the memory control circuit 22 is prohibited, and the last written image data Is displayed in the above-described photographing region of the image display unit 28 via the memory control circuit 22 and the D / A converter 26, thereby displaying the frozen image on the electronic viewfinder.
[0203]
The system control circuit 50 performs a distance measurement process to focus the photographing lens 10 on the subject, performs a photometry process, and determines an aperture value and a shutter time (step S174). In the photometric process, the flash is set if necessary.
[0204]
Details of the distance measurement / photometry processing step S174 will be described later with reference to FIG.
[0205]
After completing the distance measurement / photometry processing step S174, the system control circuit 50 sets the display state of the image display unit 28 to the through display state (step S175), and proceeds to step S176. Note that the through display state in step S175 is the same operation state as the through state in step S171.
[0206]
If the shutter switch SW2 is not pressed (step S176) and the shutter switch SW1 is also released (step S177), the process returns to step S134.
[0207]
If the shutter switch SW2 is pressed (step S176), the system control circuit 50 sets the display state of the image display unit 28 to the fixed color display state (step S178), and proceeds to step S179.
[0208]
In the fixed color display state, instead of the photographic image data written in the image display memory 24 via the image sensor 14, the A / D converter 16, the image processing circuit 20, and the memory control circuit 22, the fixed image is replaced. By displaying the color image data in the above-described photographing area of the image display unit 28 via the memory control circuit 22 and the D / A converter 26, a fixed color image is displayed on the electronic viewfinder.
[0209]
The system control circuit 50 captures an image in the memory 30 via the image sensor 14, the A / D converter 16, the image processing circuit 20, the memory control circuit 22, or directly from the A / D converter via the memory control circuit 22. Using the exposure process for writing the image data and the development process for reading out the image data written in the memory 30 and performing various processes using the memory control circuit 22 and the image processing circuit 20 as necessary. (Step S179).
[0210]
Details of the photographing process step S179 will be described later with reference to FIG.
[0211]
The system control circuit 50 reads out the image data written in the memory 30 in step S179 of the photographing process, and executes display image processing that transfers it to the image display memory 24 via the memory control circuit 22 (step S180).
[0212]
Details of the display image processing step S180 will be described later with reference to FIG.
[0213]
The system control circuit 50 sets the display state of the image display unit 28 to the quick review display state (step S181), and proceeds to step S182.
[0214]
In the quick review state, the image data transferred to the image display memory 24 in the display image processing step S180 is transferred to the above-described shooting area of the image display unit 28 via the memory control circuit 22 and the D / A converter 26. By displaying it, an electronic viewfinder function for automatically reproducing captured images is realized.
[0215]
The system control circuit 50 reads the captured image data written in the memory 30, performs various image processing using the memory control circuit 22 and the image processing circuit 20 as necessary, and uses the compression / decompression circuit 32. After performing the compression processing for performing the image compression processing according to the set mode (step S182), the image is transferred to the recording medium 200 or 210 such as a memory card or a compact flash card via the interface 90 or 94 and the connector 92 or 96. A recording process for writing data is executed (step S183).
[0216]
Details of the compression processing step S182 will be described later with reference to FIG.
[0217]
Note that when the image display unit 28 is ON, a display such as “BUSY” that clearly indicates that the writing operation is being performed while the image data is being written to the recording medium 200 or 210 is displayed on the image display unit 28. To do.
[0218]
Further, the display unit 54 also displays a recording medium writing operation display such as blinking the LED.
[0219]
The system control circuit 50 continues the quick review display on the image display unit 28 until the shutter switch SW2 is released (step S184). As a result, the user can carefully check the captured image while pressing the shutter switch SW2.
[0220]
If the shutter switch SW2 is released (step S184), the system control circuit 50 sets a panorama shooting start flag (step S185) and confirms that the first shooting has been executed in a series of panorama shooting. To clarify. As a result, as described in step S142, it is possible to prohibit reversing the shooting direction after shooting in the first horizontal panorama mode or vertical panorama mode.
[0221]
In order to move to the next imaging region, the system control circuit 50 sets the variable n to n = n + 1 (step S186), initializes the variable m to m = 1 (step S187), returns to step S134, and then returns to the series. Repeat the panorama shooting process.
[0222]
Thus, after the shutter switch SW2 is released, the process returns to step S134, and then moves to the next shooting area in step S146. In step S148, the shooting area including the previous shot is set to the quick review display state. The next shooting area is set to the through display state, and the captured image and the image to be captured are overlapped and displayed so that the user can easily connect the panorama shooting. I can do it.
[0223]
Here, FIG. 14 shows an example of a shooting screen before and after the end of shooting of the nth image in the horizontal panorama mode.
[0224]
In FIG. 14, (a) is a shooting screen in a state before shooting the first image, and (b) is a shooting screen in a state where the shutter switch SW2 is released after shooting the first image. Although not prepared as an explanatory diagram, the first shooting area of (a) is a shooting screen in which a quick review display is displayed until the shutter switch SW2 is released after the first shooting.
[0225]
FIG. 15 shows an example of a shooting screen before and after the end of shooting of the nth image in the vertical panorama mode.
[0226]
15A is a shooting screen in a state before shooting the first image, and FIG. 15B is a shooting screen in a state where the shutter switch SW2 is released after shooting the first image. Although not prepared as an explanatory diagram, the first shooting area of (a) is a shooting screen in which a quick review display is displayed until the shutter switch SW2 is released after the first shooting.
[0227]
Further, an example of a shooting screen before and after the end of shooting of the nth image in the 2 × 2 panorama mode is shown in FIGS.
[0228]
In FIG. 12, (a) is a shooting screen in a state before shooting the first image, and (b) is a state in which the shutter switch SW2 is released after shooting the first image, that is, in a state before shooting the second image. This is the shooting screen.
[0229]
In FIG. 13, (c) shows a state in which the shutter switch SW2 is released after the second image is taken, that is, a shooting screen in a state before the third image is taken, and (d) shows a shutter after the third image is taken. This is a shooting screen in a state where the switch SW2 is released, that is, in a state before shooting the fourth image.
[0230]
Although not prepared as an explanatory diagram, the n-th shooting areas of (a), (b), (c), and (d) are respectively shown until the shutter switch SW2 is released after the n-th shooting. The shooting screen is displayed as a quick review. When the shutter switch SW2 is released, a through display of the (n + 1) th shooting area which is the next shooting area is added.
[0231]
As described above, according to the first embodiment, the zoom operation is prohibited after the start of the series of panorama shooting and the zoom operation of the taking lens 310 is performed during the series of panorama shooting by prohibiting the zoom operation and giving a predetermined warning. This prevents the problem that an image unsuitable for panorama synthesis is taken.
[0232]
FIG. 5 is a detailed flowchart of the distance measurement / photometry process in step S174 of FIG.
[0233]
The system control circuit 50 reads the charge signal from the image sensor 14 and sequentially reads the captured image data into the image processing circuit 20 via the A / D converter 16 (step S201). Using this sequentially read image data, the image processing circuit 20 is a predetermined used for TTL (through the lens) type AE (automatic exposure) processing, EF (flash pre-flash) processing, and AF (autofocus) processing. The operation is performed.
[0234]
In each processing here, a specific portion of the total number of photographed pixels is extracted by extracting a necessary portion according to necessity and used for calculation. As a result, in the TTL method AE, EF, AWB, and AF processes, it is possible to perform optimum calculations for different modes such as the center weight mode, the average mode, and the evaluation mode.
[0235]
Using the calculation result in the image processing circuit 20, the system control circuit 50 performs AE control using the exposure control means 40 (step S203) until it is determined that the exposure (AE) is appropriate (step S202).
[0236]
Using the measurement data obtained by the AE control, the system control circuit 50 determines whether or not the flash is necessary (step S204). If the flash is necessary, the flash flag is set and the flash 48 is charged (step S205). ).
[0237]
If it is determined that the exposure (AE) is appropriate (step S202), the measurement data and / or setting parameters are stored in the internal memory of the system control circuit 50 or the memory 52.
[0238]
Using the calculation result in the image processing circuit 20 and the measurement data obtained by the AE control, the system control circuit 50 uses the image processing circuit 20 until the white balance (AWB) is determined to be appropriate (step S206). Color processing parameters are adjusted to perform AWB control (step S207).
[0239]
If it is determined that the white balance (AWB) is appropriate (step S206), the measurement data and / or setting parameters are stored in the internal memory or the memory 52 of the system control circuit 50.
[0240]
Using the measurement data obtained by the AE control and the AWB control, the system control circuit 50 performs the AF control using the distance measurement control means 42 until the distance measurement (AF) is determined to be in focus (step S208). (Step S209).
[0241]
If the distance measurement (AF) is determined to be in focus (step S208), the measurement data and / or setting parameters are stored in the internal memory of the system control circuit 50 or the memory 52, and the distance measurement / photometry processing routine step S174 is performed. finish.
[0242]
FIG. 6 is a detailed flowchart of the photographing process in step S179 of FIG.
[0243]
The system control circuit 50 exposes the image sensor 10 by opening the shutter 12 having an aperture function according to the aperture value by the exposure control means 40 in accordance with the photometric data stored in the internal memory of the system control circuit 50 or the memory 52. (Step S301, Step S302).
[0244]
It is determined whether or not the flash 48 is necessary based on the flash flag (step S303), and if necessary, the flash is emitted (step S304).
[0245]
The system control circuit 50 waits for the exposure of the image sensor 14 to end in accordance with the photometric data (step S305), closes the shutter 12 (step S306), reads out the charge signal from the image sensor 14, and performs the A / D converter 16 and image processing. The captured image data is written into the memory 30 via the circuit 20, the memory control circuit 22, or directly from the A / D converter 16 via the memory control circuit 22 (step S307).
[0246]
When the series of processing is finished, the photographing processing routine step S179 is finished.
[0247]
FIG. 7 is a detailed flowchart of the display image processing in step S180 of FIG.
[0248]
If it is necessary to perform frame processing according to the set shooting mode (step S401), the system control circuit 50 writes into the memory 30 using the memory control circuit 22 and the image processing circuit 20 as necessary. The read image data is read and subjected to vertical addition processing (step S402) and color processing (step S403) in sequence, and then the processed image data is written in the memory 30.
[0249]
The system control circuit 50 reads the image data from the memory 30 and transfers the display image data to the image display memory 24 via the memory control circuit 22 (step S404).
[0250]
When the series of processing is finished, the display image processing routine step S180 is finished.
[0251]
FIG. 8 is a detailed flowchart of the compression process in step S182 of FIG.
[0252]
The system control circuit 50 uses the memory control circuit 22 and, if necessary, the image processing circuit 20 to read out the captured image data written in the memory 30 and to interpolate the image sensor in a vertical / horizontal pixel ratio of 1: 1. After performing the conversion processing (step S501), the processed image data is written in the memory 30.
[0253]
Then, the image data written in the memory 30 is read, and image compression processing corresponding to the set mode is performed by the compression / decompression circuit 32 (S502).
[0254]
If the image compression process is completed, the compression process routine step S182 is terminated.
(Second Embodiment)
The operation of the second embodiment will be described with reference to FIGS. 16A, 16B, 17A, 17B, 18, 18, 5, 6, and 8. FIG. The external configuration of the second embodiment is the same as that of the first embodiment, and only the operation is different. 5, 6, 7, and 8 are the same as those in the first embodiment, and a description thereof is omitted.
[0255]
The operation of the image processing apparatus 100 will be described with reference to FIGS. 16A, 16B, 17A, 17B, and 18. FIG.
[0256]
Upon power-on such as battery replacement, the system control circuit 50 initializes flags, control variables, and the like, and initializes each part of the image processing apparatus 100 (step S601).
[0257]
The system control circuit 50 determines the setting position of the mode dial 60, and if the mode dial 60 is set to power OFF (step S602), the display of each display unit is changed to the end state, and the lens unit 300 If a barrier or the like of the protection unit is provided, the imaging unit is protected by closing it, and necessary parameters, setting values, and setting modes including flags and control variables are recorded in the nonvolatile memory 56, and the power control unit 80 After performing a predetermined end process such as shutting off unnecessary power sources of each part of the image processing apparatus 100 including the image display unit 28 (step S603), the process returns to step S602.
[0258]
If the mode dial 60 has been set to another mode (step S602), the system control circuit 50 indicates that the remaining capacity and operation status of the power source 86 constituted by a battery or the like by the power source control means 80 are in the image processing apparatus 100. It is determined whether or not there is a problem in operation (step S604). If there is a problem, a predetermined warning is displayed by an image or sound using the display unit 54 (step S606), and the process returns to step S602.
[0259]
If the image display of the image display unit 28 is ON, the image display unit 28 is also used to perform a predetermined warning display using an image or sound.
[0260]
If there is no problem with the power source 86 (step S604), it is determined whether the operation state of the recording medium 200 or 210 has a problem with the operation of the image processing apparatus 100, particularly with respect to the recording / reproducing operation of the image data with respect to the recording medium ( In step S605), if there is a problem, a predetermined warning is displayed by image or sound using the display unit 54 (step S606), and the process returns to step S602.
[0261]
If the image display of the image display unit 28 is ON, the image display unit 28 is also used to perform a predetermined warning display using an image or sound.
[0262]
If there is no problem in the operation state of the recording medium 200 or 210 (step S605), the display unit 54 is used to display various setting states of the image processing apparatus 100 using images and sounds (step S607). If the image display of the image display unit 28 is ON, the image display unit 28 is also used to display various setting states of the image processing apparatus 100 using images and sounds.
[0263]
If the mode dial 60 is set to the shooting mode (step S608), a predetermined shooting process is executed (step S609), and if the process is completed, the process returns to step S602.
[0264]
If the mode dial 60 has been set to another mode (step S608), the system control circuit 50 executes processing corresponding to the selected mode (step S610), and if processing is completed, returns to step S602. .
[0265]
If the mode dial 60 is set to the panorama mode (step S608), the system control circuit 50 determines whether or not the zoom position of the imaging lens 310 is a predetermined home position (step S621), and sets the home position. If not, the zoom position is moved to the home position (step S622).
[0266]
Similarly, when the photographing lens 310 is a switching lens that can switch the focal length to a plurality of types, the system control circuit 50 determines whether or not the setting of the switching lens of the imaging lens 310 is a predetermined home position side. Judgment is made (step S621), and if it is not located on the home position side, the setting of the switching lens is moved to the home position side (step S622).
[0267]
As an example of the home position, in the case of a zoom lens, the WIDE end, which is a focal length on the wide-angle side suitable for panoramic photography, can be cited as an example.
[0268]
In the case of a focal length switching lens, an example is switching to a lens having a WIDE side focal length that is a wide-angle side focal length suitable for panoramic photography.
[0269]
The focal position is not limited to this example, and any focal length may be used as the home position as long as the focal length is suitable for panoramic photography.
The system control circuit 50 displays a panorama mode selection screen on the image display unit 28 (step S611).
[0270]
The user of the image processing apparatus 100 can select an arbitrary mode from a plurality of panorama shooting modes by looking at the panorama mode selection screen displayed on the image display unit 28.
[0271]
The panorama shooting mode includes a 2 × 2 panorama mode, a horizontal panorama mode, a vertical panorama mode, and the like. By overlapping a plurality of shootings, a panorama image expanded in two dimensions, a panorama image expanded in the horizontal direction, and a vertical A panoramic image enlarged in the direction can be created.
[0272]
Each series of captured images is added with information indicating its positional relationship, and after the images are transferred to the image processing device itself or to a computer, etc., the images are combined to create a single panoramic image. Is possible.
[0273]
An example of the panorama mode selection screen is shown in FIG.
[0274]
In FIG. 9, the left is an icon for selecting a 2 × 2 panorama mode for shooting a two-dimensional panoramic image, the center is an icon for selecting a horizontal panorama mode for shooting a horizontal panorama image, and the right is a vertical panorama image. This is an icon for selecting a vertical panorama mode for shooting.
[0275]
A user of the image processing apparatus 100 can select a panorama mode for shooting with the selection / changeover switch 66 (for example, the [+] key), and can determine the panorama mode with the determination / execution switch 68 (for example, the [SET] key). I can do it.
If the panorama mode is selected by the selection / changeover switch 66 and the decision / execution switch 68, the system control circuit 50 sets the 2 × 2 panorama mode initial setting (step S613) according to the selected panorama mode (step S612). ), Initial setting of vertical panorama mode (step S614), initial setting of horizontal panorama mode (step S615), setting of flags, parameters, initial values of variables, memory area, reading of display screen as user interface, etc. The panorama shooting screen corresponding to each mode is displayed on the image display unit 28 (step S616), and the process proceeds to step S631.
[0276]
An example of the horizontal panorama mode shooting screen is shown in FIG. 10, an example of the vertical panorama mode shooting screen is shown in FIG. 11, and an example of the 2 × 2 panorama shooting screen is shown in FIG.
[0277]
In FIG. 10, (a) is a shooting screen for continuously shooting in the right direction to create a panorama screen, and (b) is a shooting screen for repeatedly shooting in the left direction to create a panorama screen.
[0278]
In the figure, a through image obtained by the electronic viewfinder is displayed in the area “1” for the first photographing of a series of panoramic images, and before the first photographing is completed, the selection / changeover switch 66 ( For example, with the [+] key, it is possible to switch between right shooting (a) and left shooting (b) at any time.
[0279]
The shooting direction is determined by pressing the shutter button and executing the first shooting in the desired display screen state (a) or (b).
[0280]
Note that by pressing the enter / execute switch 68 (eg, [SET] key), shooting in the horizontal panorama mode can be terminated.
[0281]
In FIG. 11, (a) is a shooting screen for continuously shooting in the upward direction to create a panoramic screen, and (b) is a shooting screen for continuously shooting in the downward direction to create a panoramic screen. is there.
[0282]
In the figure, a through image obtained by the electronic viewfinder is displayed in the area “1” for the first photographing of a series of panoramic images, and before the first photographing is completed, the selection / changeover switch 66 ( For example, by using the [+] key), it is possible to switch between the upper direction shooting (a) and the lower direction shooting (b).
[0283]
The shooting direction is determined by pressing the shutter button and executing the first shooting in the desired display screen state (a) or (b).
[0284]
Note that shooting in the vertical panorama mode can be terminated by pressing the enter / execute switch 68 (for example, the [SET] key).
[0285]
Also, in FIG. 12, (a) is the first shooting screen of the shooting screen in which a total of four vertical and horizontal shootings are two-dimensionally repeated to create a 2 × 2 panoramic screen. Similarly, (b) is the second screen for photographing.
[0286]
In the figure, a through image by the electronic viewfinder is displayed in the upper right area, for example, for photographing the first panoramic image.
[0287]
When the first image has been shot, a reproduced image of the shot image is displayed, for example, in the upper right area, and a through image by the electronic viewfinder is displayed, for example, in the lower right area for the second image.
[0288]
The shooting area of the electronic viewfinder is sent sequentially to the next area each time you take a picture, but you can start shooting from any area, and you can return to the already shot area and start shooting again. It is. Therefore, the photographing area can be moved at any time by the selection / changeover switch 66 (for example, the [+] key).
[0289]
The determination of the redo shooting area and the execution of shooting are performed by pressing the shutter button and executing shooting in the display screen state where the desired area is selected.
[0290]
Note that by pressing the enter / execute switch 68 (eg, [SET] key), shooting in the 2 × 2 panorama mode can be terminated.
[0291]
The system control circuit 50 initializes flags and variables set in the internal memory of the system control circuit 50 or the memory 52. For example, the panorama shooting start flag is canceled (step S631), variables m and n are set, and m = 1 and n = 1 are initialized (step S633 and step S632), respectively.
[0292]
Here, the cancellation of the panorama shooting start flag indicates that no series of panorama shooting has been performed yet.
[0293]
The variable n indicates the number of shooting areas in shooting in each panorama mode.
[0294]
The variable m is used to return the shooting area to the previous frame or to cancel the return when shooting is performed again in the horizontal panorama mode and the vertical panorama mode.
[0295]
Details of how to use these flags and variables will be described later.
[0296]
When the setting position of the mode dial 60 is set to other than the panorama mode (step S634), the system control circuit 50 ends the shooting in the panorama mode and returns to step S602. As a result, the user of the image processing apparatus 100 can end the panorama mode at any time and switch to another mode.
[0297]
When the setting position of the mode dial 60 remains in the panorama mode (step S634), that is, when the display screen of the image display unit 28 is in the state of each panorama shooting screen described above, the enter / execute switch 68 (eg, [SET] key) ) Is selected to end panorama mode (step S635), panorama mode end confirmation is displayed. If end confirmation is further selected (step S636), panorama mode selection screen step S611 is entered. Return.
[0298]
If the zoom switch WIDE74 or the zoom switch TELE76 is not pressed (step S661), the system control circuit 50 determines the state of the panorama shooting start flag (step S662).
[0299]
If the panorama shooting start flag has been canceled, that is, if the first shot has not yet been executed in a series of panorama shooting (step S662), the system control circuit 50 follows the instructions of the zoom switch WIDE74 or the zoom switch TELE76. A predetermined zoom operation for zooming the photographing lens 310 is executed via the interface 120, the connector 122, the connector 322, the interface 320, the lens system control circuit 350, and the zoom control means 344 (step S663), and the process proceeds to step S637.
[0300]
If the panorama shooting start flag is set, that is, if the first shooting is performed in a series of panorama shooting (step S662), the system control circuit 50 uses the display unit 54 and / or the image display unit 28. Then, a predetermined warning is displayed by image or sound (step S664), and if confirmation of the end of a series of panorama shooting is selected (step S665), the series of panorama shooting so far is finished, and the process goes to step S631. Go back and start a new series of panoramas.
[0301]
If cancellation of the end of the series of panorama shooting is selected (step S665), the process proceeds to step S637 without performing the zoom operation.
[0302]
Accordingly, it is possible to prevent an image inappropriate for panorama synthesis from being shot by performing a zoom operation of the taking lens 310 during a series of panorama shooting.
[0303]
If the selection / changeover switch 66 (for example, the [+] key) is pressed while the display screen of the image display unit 28 is in the state of each panorama shooting screen described above (step S637), the system control circuit 50 sets the panorama mode. A predetermined process is performed according to (step S638).
[0304]
If the selection / changeover switch 66 (for example, the [+] key) is not pressed (step S637), the process proceeds to step S646.
[0305]
First, if the 2 × 2 panorama mode is set (step S638), the system control circuit 50 sets the variable n to n = n + 1 and moves to the next shooting area (step S639). Here, if n = 5 (step S640), the process returns to the first imaging region with n = n-4 (step S641). Thereafter, the process proceeds to step S646.
[0306]
That is, every time the selection / switching switch 66 (for example, the [+] key) is pressed, the four shooting areas in the 2 × 2 panorama mode are repeatedly moved. For example, upper right, lower right, lower left, upper left, upper right, lower right. . . The shooting area moves sequentially.
[0307]
On the other hand, if the panorama shooting mode is set to the horizontal panorama mode or the vertical panorama mode (step S638), if the panorama shooting start flag is canceled, that is, if the first shooting is not yet executed in the series of panorama shooting (step S638). In step S642), the system control circuit 50 reverses the shooting direction of each panorama mode (step S643). Thereafter, the process proceeds to step S646.
[0308]
Note that the reversal of the shooting direction can be repeated until the first image is shot.
[0309]
Here, an example of the photographing direction reversal screen in the horizontal panorama mode is shown in FIG.
[0310]
In FIG. 10, (a) is a screen that repeats shooting in the right direction, and (b) is a screen that repeats shooting in the left direction.
[0311]
An example of the shooting direction reversal screen in the vertical panorama mode is shown in FIG.
[0312]
In FIG. 11, (a) is a screen that repeats photographing in the upward direction, and (b) is a screen that repeats photographing in the downward direction.
[0313]
Next, if the panorama shooting start flag is set in the horizontal panorama mode or the vertical panorama mode (step S638), that is, after execution of the first shooting in a series of panorama shooting (step S642). , The system control circuit 50 sets m = m × (−1) as −1, + 1, −1, + 1. . . And the calculation of inverting the sign every time (step S644), n = n + m for the variable n, and n = n−1, n = n + 1, n = n−1, n each time. = N + 1. . . The following calculation is performed (step S645). Thereafter, the process proceeds to step S646.
[0314]
Thus, in order to redo the shooting, it is possible to repeatedly select to move to the area that has already been shot, but to stop moving to the area that has already been shot, although it is only for the last shot.
[0315]
Thus, after panoramic shooting of the nth image area, the quick review image of the (n-1) th image area and the quick review image of the nth image area are pressed by pressing the selection / changeover switch 66 (for example, the [+] key). After confirming the connection state of the boundary area, the selection / changeover switch 66 (for example, the [+] key) is released to make the nth image area a through image, and then the selection / changeover switch 66 (for example, the [+] key is used again). ) To display the quick review image of the original nth image area and the through image of the (n + 1) th image area, and the next panorama shooting can be performed.
[0316]
Further, after panoramic shooting of the nth image area, the selection / changeover switch 66 (for example, the [+] key) is pressed to switch between the quick review image of the n−1th image area and the quick review image of the nth image area. If it is determined that the boundary area is connected and if it is determined that the image is to be shot again, the selection / changeover switch 66 (for example, the [+] key) is released and the nth image area is used as a through image, and the shutter in this screen state is displayed. By pressing the switch SW2, it is possible to perform the next panoramic photographing after replacing with a new photographed image.
[0317]
The system control circuit 50 selects the nth image area (step S646), and if it is necessary to change the screen layout in accordance with the selected image area (step S647), the screen layout is switched and displayed (step S648). ). After this, the process proceeds to step S671.
[0318]
As a result, the screen corresponding to the reversal of the shooting direction, the screen corresponding to the change of the shooting area, the screen updated with the text or image for explanation, etc. can be displayed as necessary. I can do it.
[0319]
In the second and subsequent shots, by setting the already shot shooting area in the quick review display state, and setting the next shooting area moved for the next shooting to the through display state, It is possible to display a reproduced image of an already captured image and an image to be captured next in a partially overlapped manner. Thereby, the user of the image processing apparatus 100 can easily determine the next photographing composition.
[0320]
The system control circuit 50 sets a through display state in which captured image data is sequentially displayed (step S671), and proceeds to step S672.
[0321]
In the through display state, the data sequentially written in the image display memory 24 via the image sensor 14, the A / D converter 16, the image processing circuit 20, and the memory control circuit 22 are transferred to the memory control circuit 22, D The electronic viewfinder function is realized by sequentially displaying in the above-described photographing area of the image display unit 28 via the / A converter 26.
[0322]
If the shutter switch SW1 has not been pressed (step S672), the process returns to step S634.
[0323]
If the shutter switch SW1 is pressed (step S672), the system control circuit 50 sets the display state of the image display unit 28 to the freeze display state (step S673), and the process proceeds to step S674.
[0324]
In the freeze display state, rewriting of image data in the image display memory 24 via the image sensor 14, the A / D converter 16, the image processing circuit 20, and the memory control circuit 22 is prohibited, and the last written image data Is displayed in the above-described photographing region of the image display unit 28 via the memory control circuit 22 and the D / A converter 26, thereby displaying the frozen image on the electronic viewfinder.
[0325]
The system control circuit 50 performs a distance measurement process to focus the photographing lens 10 on the subject, performs a photometry process, and determines an aperture value and a shutter time (step S674). In the photometric process, the flash is set if necessary.
[0326]
Details of the distance measurement / photometry processing step S674 are as described above with reference to FIG.
[0327]
After completing the distance measurement / photometry processing step S674, the system control circuit 50 sets the display state of the image display unit 28 to the through display state (step S675), and proceeds to step S676. Note that the through display state in step S675 is the same operation state as the through state in step S671.
[0328]
If the shutter switch SW2 is not pressed (step S676) and the shutter switch SW1 is also released (step S677), the process returns to step S634.
[0329]
If the shutter switch SW2 is pressed (step S676), the system control circuit 50 sets the display state of the image display unit 28 to the fixed color display state (step S678), and proceeds to step S679.
[0330]
In the fixed color display state, instead of the photographic image data written in the image display memory 24 via the image sensor 14, the A / D converter 16, the image processing circuit 20, and the memory control circuit 22, the fixed image is replaced. By displaying the color image data in the above-described photographing area of the image display unit 28 via the memory control circuit 22 and the D / A converter 26, a fixed color image is displayed on the electronic viewfinder.
[0331]
The system control circuit 50 captures an image in the memory 30 via the image sensor 14, the A / D converter 16, the image processing circuit 20, the memory control circuit 22, or directly from the A / D converter via the memory control circuit 22. Using the exposure process for writing the image data and the development process for reading out the image data written in the memory 30 and performing various processes using the memory control circuit 22 and the image processing circuit 20 as necessary. (Step S679).
[0332]
Details of the photographing processing step S679 are as described above with reference to FIG.
[0333]
The system control circuit 50 reads out the image data written in the memory 30 in the photographing processing step S679 and executes display image processing for transferring to the image display memory 24 via the memory control circuit 22 (step S680).
[0334]
The details of this display image processing step S680 are as described above with reference to FIG.
[0335]
The system control circuit 50 sets the display state of the image display unit 28 to the quick review display state (step S681), and proceeds to step S682.
[0336]
In the quick review state, the image data transferred to the image display memory 24 in the display image processing step S680 is transferred to the above-described shooting area of the image display unit 28 via the memory control circuit 22 and the D / A converter 26. By displaying it, an electronic viewfinder function for automatically reproducing captured images is realized.
[0337]
The system control circuit 50 reads the captured image data written in the memory 30, performs various image processing using the memory control circuit 22 and the image processing circuit 20 as necessary, and uses the compression / decompression circuit 32. After performing the compression processing for performing the image compression processing according to the set mode (step S682), the image is transferred to the recording medium 200 or 210 such as a memory card or a compact flash card via the interface 90 or 94 and the connector 92 or 96. A recording process for writing data is executed (step S683).
[0338]
Details of the compression processing step S682 are as described above with reference to FIG.
[0339]
Note that when the image display unit 28 is ON, a display such as “BUSY” that clearly indicates that the writing operation is being performed while the image data is being written to the recording medium 200 or 210 is displayed on the image display unit 28. To do.
[0340]
Further, the display unit 54 also displays a recording medium writing operation display such as blinking the LED.
[0341]
The system control circuit 50 continues the quick review display on the image display unit 28 until the shutter switch SW2 is released (step S684). As a result, the user can carefully check the captured image while pressing the shutter switch SW2.
[0342]
If the shutter switch SW2 is released (step S684), the system control circuit 50 sets a panorama shooting start flag (step S685) and confirms that the first shooting has been executed in a series of panorama shooting. To clarify. As a result, as described in step S642, it is possible to prohibit reversing the shooting direction after shooting in the first horizontal panorama mode or the vertical panorama mode.
[0343]
In order to move to the next imaging region, the system control circuit 50 sets the variable n to n = n + 1 (step S686), initializes the variable m to m = 1 (step S687), returns to step S634, and then returns to the series. Repeat the panorama shooting process.
[0344]
Thus, after the shutter switch SW2 is released, the process returns to step S634, and then moves to the next shooting area in step S646. In step S648, the shooting area including the previous shot is set to the quick review display state. The next shooting area is set to the through display state, and the captured image and the image to be captured are overlapped and displayed so that the user can easily connect the panorama shooting. I can do it.
Here, FIG. 14 shows an example of a shooting screen before and after the end of shooting of the nth image in the horizontal panorama mode.
[0345]
In FIG. 14, (a) is a shooting screen in a state before shooting the first image, and (b) is a shooting screen in a state where the shutter switch SW2 is released after shooting the first image. Although not prepared as an explanatory diagram, the first shooting area of (a) is a shooting screen in which a quick review display is displayed until the shutter switch SW2 is released after the first shooting.
[0346]
FIG. 15 shows an example of a shooting screen before and after the end of shooting of the nth image in the vertical panorama mode.
15A is a shooting screen in a state before shooting the first image, and FIG. 15B is a shooting screen in a state where the shutter switch SW2 is released after shooting the first image. Although not prepared as an explanatory diagram, the first shooting area of (a) is a shooting screen in which a quick review display is displayed until the shutter switch SW2 is released after the first shooting.
[0347]
Further, an example of a shooting screen before and after the end of shooting of the nth image in the 2 × 2 panorama mode is shown in FIGS.
[0348]
In FIG. 12, (a) is a shooting screen in a state before shooting the first image, and (b) is a state in which the shutter switch SW2 is released after shooting the first image, that is, in a state before shooting the second image. This is the shooting screen.
In FIG. 13, (c) shows a state in which the shutter switch SW2 is released after the second image is taken, that is, a shooting screen in a state before the third image is taken, and (d) shows a shutter after the third image is taken. This is a shooting screen in a state in which the switch SW2 is released, that is, a state before shooting the fourth image.
[0349]
Although not prepared as an explanatory diagram, the n-th shooting areas of (a), (b), (c), and (d) are respectively shown until the shutter switch SW2 is released after the n-th shooting. The shooting screen is displayed as a quick review. When the shutter switch SW2 is released, a through display of the (n + 1) th shooting area which is the next shooting area is added.
[0350]
As described above, according to the second embodiment, when a zoom operation is performed after the start of a series of panoramic shootings, a predetermined warning is given to the user of the image processing apparatus 100, and then a series of operations are performed. By temporarily stopping the panorama shooting, it is possible to prevent a problem that an image inappropriate for panorama synthesis is shot by performing a zoom operation of the shooting lens 310 during a series of panorama shooting.
[0351]
The embodiments of the present invention have been described with reference to FIG.
[0352]
In the description of the embodiment, the image pickup lens 310 is described as a zoom lens. However, for example, there is no problem with a configuration of a switching lens that switches between a wide-angle lens and a telephoto lens. In this case as well, similar to the description of the embodiment, a series of panorama shooting is performed after prohibiting the lens switching operation from being executed and performing a predetermined warning or confirming by performing a predetermined warning according to the state of the panoramic shooting start flag. Or start a new series of panoramic shots.
[0353]
In the second embodiment, it has been described that if confirmation of the end of a series of panorama shooting is selected in step S665, the process returns to step S631 to start a new series of panorama shooting, but the process returns to step S621. Of course, there is no problem even if the setting is made again from the panorama mode selection screen and then a new series of panoramic shooting is started.
[0354]
The panorama modes that can be selected on the panorama mode selection screen have been described as three types of 2 × 2 panorama mode, horizontal panorama mode, and vertical panorama mode. However, the present invention is not limited to these, and an arbitrary number of single or plural types is different. Of course, there is no problem even if the panorama mode can be selected.
[0355]
The display of the panorama mode selection screen in FIG. 9 is not limited to this example, and display by an arbitrary arrangement or method using an image or sound may be performed.
[0356]
In addition, the display on the 2 × 2 panorama mode shooting screen has been described as a two-dimensional display with four vertical and horizontal totals. However, the present invention is not limited to this, and an arbitrary number of two-dimensional arrangements such as nine vertical and horizontal totals and sixteen vertical and horizontal totals are possible. Of course, there is no problem with the three-dimensional arrangement.
[0357]
In addition, the display in the horizontal panorama mode shooting screen and the vertical panorama mode has been described as two continuous images. However, the present invention is not limited to this, and any number of one-dimensional arrangements such as three or four may naturally be used.
[0358]
The panorama mode shooting screens shown in FIGS. 10, 11, 12, 13, 14 and 15 are not limited to this example, and may be displayed in any arrangement or method using images, sounds, characters, symbols, or the like. You can display it.
[0359]
In addition, although it has been described that the reversal of the shooting direction in the horizontal panorama mode and the vertical panorama mode cannot be performed after the first shooting is finished, the present invention is not limited to this example, and the shooting direction can be reversed at any time. But of course there is no problem. Of course, there is no problem even if the photographing direction is changed at any time including rightward and leftward, upward and downward, or any direction including diagonal. If the display area of the image display unit 28 is increased so that a large number of image display areas can be displayed at the same time, the shooting direction can be taken in any direction including right and left, up and down, or any direction including diagonal. It is also possible to change.
[0360]
In addition, although the re-shooting in the horizontal panorama mode and the vertical panorama mode has been described as being performed up to the previous captured image, the present invention is not limited to this example, and the re-shooting may be performed over an arbitrary number of previous captured images. But of course there is no problem.
[0361]
In addition, the image display area to be captured next is set as a through display, the captured image display area is set as a quick review display, and a boundary area between the reproduced image of the already captured image and the image to be captured next is partially displayed. However, the boundary area may be displayed without overlapping.
[0362]
In addition, in the explanatory diagrams of the panoramic modes of FIGS. 10, 11, 12, 13, 14, and 15, as an example, explanatory characters “LIVE” and “FREEZE” are added in the image display area. However, in the actual display on the image display unit 28, there is no problem with either a configuration in which these characters are displayed or a configuration in which these characters are not displayed.
[0363]
Further, the lens unit 300 is described as being separated from the image processing apparatus 100 and can be arbitrarily connected. However, there is of course no problem even if the lens unit 300 is integrated with the image processing apparatus 100.
[0364]
Further, there is of course no problem even if a plurality of lens units 300 are detachable from the image processing apparatus 100.
[0365]
Recording media 200 and 210 are not only memory cards such as PCMCIA cards and compact flash, hard disks, but also micro DAT, magneto-optical disks, optical disks such as CD-R and CD-WR, and phase change optical disks such as DVDs. Of course, there is no problem even if it is configured by the above.
[0366]
Of course, there is no problem even if the recording media 200 and 210 are composite media in which a memory card and a hard disk are integrated. Further, there is no problem even if a part of the composite medium is detachable.
[0367]
In the description of the embodiment, the recording media 200 and 210 have been described as being separated from the image processing apparatus 100 and arbitrarily connectable. However, any or all of the recording media can be connected to the image processing apparatus 100. Of course, there is no problem even if it remains fixed. If all the recording media remain fixed to the image processing apparatus 100, a warning is not displayed depending on whether or not the recording medium is installed. Needless to say, the same effects as those of the above-described embodiment can be obtained if the recording is impossible due to the setting state, the absence of recording free space, and the like.
[0368]
Further, the recording medium 200 or 210 may be connected to the image processing apparatus 100 in any number of single or plural.
[0369]
Further, although the description has been given of the configuration in which the recording media 200 and 210 are mounted on the image processing apparatus 100, there is of course no problem even if the recording medium has a single or a plurality of combinations.
[0370]
Further, in the above-described embodiment, the case of changing the focal length is described as the condition of the optical system in which the imaging lens can be changed. However, the present invention is not limited to this, and the conditions of the optical system include lens replacement and aperture change. In addition, a change in focus position, a change in shutter speed, and the like are included, and the present invention can be similarly applied to such a change in conditions of the optical system.
[0371]
In addition, as an example of associating a plurality of images, panoramic image synthesis has been described. However, the present invention can also be applied to a case where a plurality of images are captured while shifting pixels and a high-resolution image is synthesized from these images. It is.
[0372]
[Other Embodiments]
Note that the present invention can be applied to a system including a plurality of devices (for example, a host computer, an interface device, a reader, a printer, etc.), or a device (for example, a copier, a facsimile device, etc.) including a single device. You may apply to.
[0373]
Another object of the present invention is to supply a storage medium storing software program codes for implementing the functions of the above-described embodiments to a system or apparatus, and the computer (or CPU or MPU) of the system or apparatus stores the storage medium. Needless to say, this can also be achieved by reading and executing the program code stored in the.
[0374]
In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiments, and the storage medium storing the program code constitutes the present invention.
[0375]
As a storage medium for supplying the program code, for example, a floppy disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a nonvolatile memory card, a ROM, or the like can be used.
[0376]
Further, by executing the program code read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) operating on the computer based on the instruction of the program code. It goes without saying that a case where the function of the above-described embodiment is realized by performing part or all of the actual processing and the processing is included.
[0377]
Further, after the program code read from the storage medium is written into a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. It goes without saying that the CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing, and the functions of the above-described embodiments are realized by the processing.
[0378]
【The invention's effect】
As described above, according to the present invention, when a user of an image processing apparatus such as an electronic camera switches the focal length of a photographing lens or performs zooming during panoramic image shooting, multiple images are shot. When creating a panoramic image by combining the images, it is necessary to perform an extra correction operation to correct the difference in focal length, which can solve the conventional problem that the image quality often deteriorates significantly. it can.
[0379]
In addition, if the composition of each captured image differs significantly due to switching of the focal length of the photographic lens or zooming, the outline of the combined panoramic image differs greatly from one captured image to another. The conventional problem of becoming can be solved.
[0380]
In addition, if you notice that the focal length of the photographic lens has been switched to an inappropriate position for panoramic shooting during panoramic shooting, or that the zoom position of the zoom lens is in an inappropriate position for panoramic shooting. If you notice it, you may be switching the focal length of the photographic lens or zooming, even if you are in the middle of shooting multiple photos for panoramic shooting, and cause the above-mentioned problems. It is possible to solve the conventional problem that is likely to occur.
[0381]
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an image processing apparatus according to an embodiment of the present invention.
FIG. 2A is a flowchart of a main routine showing the operation of the image processing apparatus.
FIG. 2B is a flowchart of a main routine showing the operation of the image processing apparatus.
FIG. 3A is a flowchart of a main routine showing the operation of the image processing apparatus.
FIG. 3B is a flowchart of a main routine showing the operation of the image processing apparatus.
FIG. 4 is a flowchart of a main routine showing the operation of the image processing apparatus.
FIG. 5 is a flowchart of a distance measurement / photometry processing routine.
FIG. 6 is a flowchart of a photographing process routine.
FIG. 7 is a flowchart of a display image processing routine.
FIG. 8 is a flowchart of a compression processing routine.
FIG. 9 is an explanatory diagram of a panorama shooting mode setting screen.
FIG. 10 is an explanatory diagram of a horizontal panorama mode initial screen.
FIG. 11 is an explanatory diagram of an initial screen of the vertical panorama mode.
FIG. 12 is an explanatory diagram of a 2 × 2 panorama mode shooting screen.
FIG. 13 is an explanatory diagram of a 2 × 2 panorama mode shooting screen.
FIG. 14 is an explanatory diagram of a horizontal panorama mode shooting screen.
FIG. 15 is an explanatory diagram of a vertical panorama mode shooting screen.
FIG. 16A is a flowchart of a main routine of the second embodiment.
FIG. 16B is a flowchart of a main routine of the second embodiment.
FIG. 17A is a flowchart of a main routine of the second embodiment.
FIG. 17B is a flowchart of a main routine of the second embodiment.
FIG. 18 is a flowchart of a main routine of the second embodiment.
[Explanation of symbols]
14 Image sensor
16 A / D converter
18 Timing generator
20 Image processing circuit
22 Memory control circuit
24 Image display memory
26 D / A converter
28 Image display
30 memory
32 Image compression / decompression circuit
48 flash
50 System control circuit
52 memory
54 Display
56 Nonvolatile memory
60 mode dial switch
62 Shutter switch SW1
64 Shutter switch SW2
66 Select / Changeover switch
68 Decision / execution switch
70 Operation unit
72 Compression mode switch
74 Zoom switch WIDE
76 Zoom switch TELE
80 Power control means
82 connector
84 connector
86 Power supply means
90 interface
92 connector
94 interface
96 connectors
98 Recording medium attachment / detachment detection means
100 Image processing apparatus
104 Optical viewfinder
106 Lens mount
110 Communication means
112 connector (or antenna)
120 interface
122 connector
124 Lens attachment / detachment detection means
126 Lens switch
200 recording media
202 Recording unit
204 interface
206 Connector
210 Recording medium
212 Recording unit
214 interface
216 connector
300 Lens unit
306 Lens mount
310 Photography lens
312 shutter
320 interface
322 connector
340 Exposure control means
342 Ranging control means
344 Zoom control means
350 Lens system control circuit

Claims (24)

撮像した複数枚の静止画像及び／又は動画像を記憶手段に記憶する機能を有する画像処理装置であって、
光学系の条件を変更可能な撮像レンズを備える撮像手段と、
該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、
前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、
前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する様に制御する制御手段と、
を具備することを特徴とする画像処理装置。An image processing apparatus having a function of storing a plurality of captured still images and / or moving images in a storage unit,
Imaging means comprising an imaging lens capable of changing the conditions of the optical system;
Storage means for associating and storing a plurality of images taken by the imaging means;
An optical system condition change instruction means for outputting an instruction to change an optical system condition of the imaging lens;
After the first image of the plurality of images to be stored in association with the storage means is captured and stored, an instruction to change the conditions of the optical system of the imaging lens is received from the condition change instruction means of the optical system. Control means for controlling to start the imaging operation and storage operation of a plurality of newly associated images,
An image processing apparatus comprising: 前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴とする請求項１に記載の画像処理装置。Wherein the condition of the optical system, an image processing apparatus according to claim 1, characterized in that the focal length of the imaging lens. 前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴とする請求項１に記載の画像処理装置。The image processing apparatus according to claim 1 , wherein associating the plurality of images includes synthesizing a panoramic image from the plurality of images. 前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴とする請求項１に記載の画像処理装置。The plurality of images are images picked up by shifting pixels, and associating the plurality of images means synthesizing high-resolution images from the plurality of images picked up by shifting pixels. The image processing apparatus according to claim 1 , wherein: 撮像した複数枚の静止画像及び／又は動画像を記憶手段に記憶する機能を有する画像処理装置であって、
光学系の条件を変更可能な撮像レンズを備える撮像手段と、
該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、
前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、
外部に所定の情報を表示する表示手段と、
前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、前記表示手段により警告情報を表示した後に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する様に制御する制御手段と、
を具備することを特徴とする画像処理装置。An image processing apparatus having a function of storing a plurality of captured still images and / or moving images in a storage unit,
Imaging means comprising an imaging lens capable of changing the conditions of the optical system;
Storage means for associating and storing a plurality of images taken by the imaging means;
An optical system condition change instruction means for outputting an instruction to change an optical system condition of the imaging lens;
Display means for displaying predetermined information externally;
After the first image of the plurality of images to be stored in association with the storage means is captured and stored, an instruction to change the conditions of the optical system of the imaging lens is received from the condition change instruction means of the optical system. Control means for controlling to start imaging operation and storage operation of a plurality of newly associated images after displaying warning information by the display means,
An image processing apparatus comprising: 前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴とする請求項５に記載の画像処理装置。The image processing apparatus according to claim 5 , wherein the condition of the optical system is a focal length of the imaging lens. 前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴とする請求項５に記載の画像処理装置。The image processing apparatus according to claim 5 , wherein associating the plurality of images is synthesizing a panoramic image from the plurality of images. 前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴とする請求項５に記載の画像処理装置。The plurality of images are images picked up by shifting pixels, and associating the plurality of images means synthesizing high-resolution images from the plurality of images picked up by shifting pixels. The image processing apparatus according to claim 5 , wherein 光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段とを備える画像処理装置を制御するための画像処理装置の制御方法であって、
前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始することを特徴とする画像処理装置の制御方法。Imaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output An image processing apparatus control method for controlling an image processing apparatus comprising an optical system condition change instruction means,
After the first image of the plurality of images to be stored in association with the storage means is captured and stored, an instruction to change the conditions of the optical system of the imaging lens is received from the condition change instruction means of the optical system. A control method for an image processing apparatus, wherein an imaging operation and a storage operation of a plurality of newly associated images are started. 前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴とする請求項９に記載の画像処理装置の制御方法。The method of controlling an image processing apparatus according to claim 9 , wherein the condition of the optical system is a focal length of the imaging lens. 前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴とする請求項９に記載の画像処理装置の制御方法。The image processing apparatus control method according to claim 9 , wherein associating the plurality of images includes synthesizing a panoramic image from the plurality of images. 前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴とする請求項９に記載の画像処理装置の制御方法。The plurality of images are images picked up by shifting pixels, and associating the plurality of images means synthesizing high-resolution images from the plurality of images picked up by shifting pixels. The method of controlling an image processing apparatus according to claim 9 , wherein 光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、外部に所定の情報を表示する表示手段とを備える画像処理装置を制御するための画像処理装置の制御方法であって、
前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、前記表示手段により警告情報を表示した後に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始することを特徴とする画像処理装置の制御方法。Imaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output An image processing apparatus control method for controlling an image processing apparatus comprising: an optical system condition change instructing unit; and a display unit for displaying predetermined information outside.
After the first image of the plurality of images to be stored in association with the storage means is captured and stored, an instruction to change the conditions of the optical system of the imaging lens is received from the condition change instruction means of the optical system. In this case, after displaying the warning information by the display unit, the imaging operation and storage operation of a plurality of newly associated images are started. 前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴とする請求項１３に記載の画像処理装置の制御方法。The method of controlling an image processing apparatus according to claim 13 , wherein the condition of the optical system is a focal length of the imaging lens. 前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴とする請求項１３に記載の画像処理装置の制御方法。The method according to claim 13 , wherein associating the plurality of images is synthesizing a panoramic image from the plurality of images. 前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴とする請求項１３に記載の画像処理装置の制御方法。The plurality of images are images picked up by performing pixel shifting, and associating the plurality of images means that a high-resolution image is synthesized from the plurality of images picked up by performing pixel shifting. The method of controlling an image processing apparatus according to claim 13 , wherein: 光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段とを備える画像処理装置を制御する制御プログラムを格納した記憶媒体であって、該制御プログラムが、
前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する工程のコードを具備することを特徴とする記憶媒体。Imaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output A storage medium storing a control program for controlling an image processing apparatus including an optical system condition change instructing unit, the control program comprising:
After the first image of the plurality of images to be stored in association with the storage means is captured and stored, an instruction to change the conditions of the optical system of the imaging lens is received from the condition change instruction means of the optical system. A storage medium comprising a code for a step of starting an imaging operation and a storage operation of a plurality of newly associated images. 前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴とする請求項１７に記載の記憶媒体。The storage medium according to claim 17 , wherein the condition of the optical system is a focal length of the imaging lens. 前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴とする請求項１７に記載の記憶媒体。The storage medium according to claim 17 , wherein associating the plurality of images is synthesizing a panoramic image from the plurality of images. 前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴とする請求項１７に記載の記憶媒体。The plurality of images are images picked up by performing pixel shifting, and associating the plurality of images means that a high-resolution image is synthesized from the plurality of images picked up by performing pixel shifting. The storage medium according to claim 17 , characterized in that: 光学系の条件を変更可能な撮像レンズを備える撮像手段と、該撮像手段により撮像された複数の画像を関連付けて記憶する記憶手段と、前記撮像レンズの光学系の条件を変更する指示を出力する光学系の条件変更指示手段と、外部に所定の情報を表示する表示手段とを備える画像処理装置を制御する制御プログラムを格納した記憶媒体であって、該制御プログラムが、
前記記憶手段に関連付けて記憶しようとする複数の画像の内の最初の画像を撮像して記憶した後に、前記光学系の条件変更指示手段から前記撮像レンズの光学系の条件を変更する指示があった際に、前記表示手段により警告情報を表示した後に、新たな関連付けられた複数の画像の撮像動作と記憶動作とを開始する工程のコードを具備することを特徴とする記憶媒体。Imaging means including an imaging lens capable of changing the conditions of the optical system, storage means for associating and storing a plurality of images taken by the imaging means, and an instruction for changing the conditions of the optical system of the imaging lens is output A storage medium storing a control program for controlling an image processing apparatus including an optical system condition change instructing unit and a display unit for displaying predetermined information externally, the control program comprising:
After the first image of the plurality of images to be stored in association with the storage means is captured and stored, an instruction to change the conditions of the optical system of the imaging lens is received from the condition change instruction means of the optical system. A storage medium comprising a code for a step of starting an imaging operation and a storage operation of a plurality of newly associated images after displaying warning information by the display means. 前記光学系の条件とは、前記撮像レンズの焦点距離であることを特徴とする請求項２１に記載の記憶媒体。The storage medium according to claim 21 , wherein the condition of the optical system is a focal length of the imaging lens. 前記複数の画像を関連付けるとは、複数の画像からパノラマ画像を合成することであることを特徴とする請求項２１に記載の記憶媒体。The storage medium according to claim 21 , wherein associating the plurality of images includes synthesizing a panoramic image from the plurality of images. 前記複数の画像は、画素ずらしを行って撮像した画像であり、前記複数の画像を関連付けるとは、前記画素ずらしを行って撮像した複数の画像から高解像度の画像を合成することであることを特徴とする請求項２１に記載の記憶媒体。The plurality of images are images picked up by shifting pixels, and associating the plurality of images means synthesizing high-resolution images from the plurality of images picked up by shifting pixels. The storage medium according to claim 21 , characterized in that:
JP15166998A 1998-03-11 1998-06-01 Image processing apparatus, control method therefor, and storage medium Expired - Fee Related JP3950550B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP15166998A JP3950550B2 (en) 1998-06-01 1998-06-01 Image processing apparatus, control method therefor, and storage medium
US09/265,070 US7136096B1 (en) 1998-03-11 1999-03-09 Image processing method and apparatus, control method therefor, and storage medium
EP99104778A EP0942598B1 (en) 1998-03-11 1999-03-10 Method and apparatus for panoramic imaging, control method therefor, and storage medium
DE69941938T DE69941938D1 (en) 1998-03-11 1999-03-10 Method and apparatus for taking panorama pictures, corresponding control method and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP15166998A JP3950550B2 (en) 1998-06-01 1998-06-01 Image processing apparatus, control method therefor, and storage medium

Publications (2)

Publication Number Publication Date
JPH11346339A JPH11346339A (en) 1999-12-14
JP3950550B2 true JP3950550B2 (en) 2007-08-01

Family

ID=15523658

Family Applications (1)

Application Number Title Priority Date Filing Date
JP15166998A Expired - Fee Related JP3950550B2 (en) 1998-03-11 1998-06-01 Image processing apparatus, control method therefor, and storage medium

Country Status (1)

Country Link
JP (1) JP3950550B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4481428B2 (en) * 2000-05-09 2010-06-16 キヤノン株式会社 Image processing device
JP5506589B2 (en) * 2010-08-02 2014-05-28 キヤノン株式会社 Imaging apparatus, control method therefor, program, and recording medium
JP5845763B2 (en) * 2011-09-20 2016-01-20 カシオ計算機株式会社 Imaging apparatus, image processing method, and program
JP6717354B2 (en) * 2018-10-23 2020-07-01 カシオ計算機株式会社 Image processing apparatus, image processing method and program

Also Published As

Publication number Publication date
JPH11346339A (en) 1999-12-14

Similar Documents

Publication Publication Date Title
JP4481842B2 (en) Imaging apparatus and control method thereof
US7136096B1 (en) Image processing method and apparatus, control method therefor, and storage medium
EP1770988B1 (en) Image display apparatus and method
JP3862404B2 (en) Image processing apparatus and method, image file format, and storage medium
JP4455219B2 (en) Image processing apparatus, image display method, program, and storage medium
JP2008283361A (en) Image processing apparatus, image processing method, program, and recording medium
JP5196753B2 (en) Image display control device and imaging device
JP4095383B2 (en) Imaging apparatus, control method therefor, and storage medium
JP2005150836A (en) Photographing apparatus
JPH11345317A (en) Image processor, its control method, and storage medium
JP4533017B2 (en) Imaging device
JP3950550B2 (en) Image processing apparatus, control method therefor, and storage medium
JP3625371B2 (en) Image processing apparatus, control method for image processing apparatus, and storage medium
JP4700796B2 (en) Imaging apparatus, control method therefor, and storage medium
JP4401974B2 (en) Imaging apparatus and control method thereof
JP3976894B2 (en) Image recording apparatus, control method therefor, and memory medium
JP5448498B2 (en) Imaging apparatus, control method thereof, and program
JP3805179B2 (en) Image processing apparatus, control method for image processing apparatus, and storage medium
JPH11261939A (en) Image processing method, its unit and storage medium
JP2003110983A (en) Image pickup device, image management device, image management system, method for controlling the image pickup device, image management method, recording medium and program
JP2008070646A (en) Image display controller and imaging apparatus
JP4908860B2 (en) Control device and control method thereof
JP2005110128A (en) Imaging apparatus and imaging control method
JP2006157884A (en) Display control device and display control method
JP3854795B2 (en) Image processing apparatus, image processing apparatus control method, and storage medium storing computer-readable program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20031216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070314

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070406

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070423

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110427

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130427

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130427

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140427

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees