JP2006165600A

JP2006165600A - 撮影装置

Info

Publication number: JP2006165600A
Application number: JP2004349239A
Authority: JP
Inventors: Takehiro Kawaguchi; 武弘河口
Original assignee: Fuji Photo Film Co Ltd
Current assignee: Fujifilm Holdings Corp
Priority date: 2004-12-02
Filing date: 2004-12-02
Publication date: 2006-06-22
Anticipated expiration: 2024-12-02
Also published as: JP4368783B2

Abstract

【課題】初心者であっても流し撮りを簡単に行なうことができる撮影装置を提供する。
【解決手段】流し撮りモードボタン１０＿３５を押して、移動中の主要被写体をデジタルカメラ１０の視線で追いながら主要被写体を停止した状態、背景が流れた状態の撮影画像を表わす画像信号を得る流し撮りモードに設定し、ＣＣＤ１０＿４１からのアナログの画像信号がＡ／Ｄ変換回路１０＿４２でＡ／Ｄ変換されて画像入力コントローラ１０＿４３でバスライン１０＿１００に伝達されたデジタルの画像信号で表わされる主要被写体と背景とを画像信号処理回路１０＿４４で分離し、主要被写体について輪郭強調処理、および背景について画像の流れを強調する処置を施す。
【選択図】図４

Description

本発明は、撮影操作に応じて被写体を表わす画像信号を生成して記録する撮影装置に関する。

従来より、上述のような撮影装置として、撮像素子から出力された画像信号を画像処理して得られた映像信号から特定の被写体を表わす特定被写体信号を抽出しておき、この特定被写体信号に基づいてシャッタ等を制御して、特定被写体とそれ以外の背景等とを個別に処理してポートレート効果を付与したり、特定被写体の色補正等を行なうビデオカメラが提案されている（特許文献１参照）。

また、撮像素子から出力された画像信号を画像処理して得られた映像信号から高周波成分の信号を抽出し、抽出した信号に基づいてコントラスト最大点にピントを合わして主要被写体を表わす画像信号を求め、その画像信号で表わされる主要被写体とそれ以外の被写体（背景）とを分離して識別するデジタルカメラが提案されている（特許文献２参照）。
特開平５−１１０９３６号公報特開２００４−１５１６０９号公報

上述した撮影装置において、移動中の主要被写体を撮影装置の視線で追いながら、その主要被写体を停止した状態および背景が流れた状態の撮影画像を表わす画像信号を得ることにより写真撮影を行なう、いわゆる「流し撮り」といわれる撮影手法（以下、単に流し撮りと称する）が知られている。この流し撮りによれば、主要被写体については鮮明な画像が得られるとともに、背景については撮影装置を移動した方向に流れるような画像が得られるため、スピード感のある写真を撮ることができる。

ここで、上記特許文献１，２に提案された技術を流し撮りに採用すると、以下の問題が発生する。

特許文献１に提案された技術は、ポートレート効果の付与や特定被写体の色補正等にあたり、特定被写体を表わす特定被写体信号をあらかじめ抽出しておく必要がある。このため、この技術を流し撮りに採用したのでは、移動中の主要被写体を遅れて追いかけることとなり、従ってシャッタチャンスを逃がすという問題が発生する。

また、特許文献２に提案された技術は、映像信号から抽出した高周波成分の信号に基づいてピントを合わして主要被写体を表わす画像信号を求め、さらにその画像信号で表わされる主要被写体と背景とを分離・識別するものであるため、この技術を流し撮りに採用したのでは、移動中の主要被写体にピントを合わせた後に追いかけることとなり、従ってやはりシャッタチャンスを逃がすという問題が発生する。

一般に、流し撮りは、スピード感のある写真を撮るために、移動中の主要被写体を撮影装置の視線で追いながら、シャッタスピードを通常よりも遅いシャッタスピードに設定する等、高度な撮影テクニックが要求される。従って、初心者にとって流し撮りは困難であるという問題がある。

本発明は、上記事情に鑑み、初心者であっても流し撮りを簡単に行なうことができる撮影装置を提供することを目的とする。

上記目的を達成する本発明の撮影装置は、撮影操作に応じて被写体を表わす画像信号を生成して記録する撮影装置において、
移動中の主要被写体をその撮影装置の視線で追いながらその主要被写体を停止した状態、背景が流れた状態の撮影画像を表わす画像信号を得る流し撮りモードを有し、その流し撮りモードで作用する、
主要被写体と背景とを分離する分離手段と、
主要被写体について輪郭強調処理、および背景について画像の流れを強調する処置を行なう画像処理手段とを備えたことを特徴とする。

本発明の撮影装置は、流し撮りモードにおいて、移動中の主要被写体をその撮影装置の視線で追いながら、その主要被写体を停止した状態と背景が流れた状態との双方の状態の撮影画像を表わす画像信号を得るものである。このため、特許文献１，２に提案された、特定の被写体を表わす特定被写体信号をあらかじめ抽出したり、高周波成分の信号に基づいてピントを合わして主要被写体を表わす画像信号を求める技術を採用した場合と比較し、主要被写体を表わす画像信号が遅れて得られるということはなく、従ってシャッタチャンスを逃がすことが防止される。また、流し撮りモードにおいて得られた画像信号に基づいて、主要被写体と背景とが分離されて、主要被写体について輪郭強調処理、背景について画像の流れを強調する処置が行なわれる。このため、主要被写体については鮮明な画像が、背景については撮影装置を移動した方向に流れるような画像を簡単に得ることができる。従って、初心者であっても流し撮りを簡単に行なうことができる。

ここで、この撮影装置が撮影操作を行なうに先立って画角確認用の動画を撮影して表示する動画表示手段を備えたものであり、
上記分離手段が、順次連続する動画の各部分ごとの動きを検出することにより撮影画像中の主要被写体と背景とを分離するものであることが好ましい。

このようにすると、撮影画像中の主要被写体を確実に確認して流し撮りを行なうことができるとともに、主要被写体と背景とを高い精度で分離することができる。

また、流し撮りの方向を検出する検出手段を備え、
上記分離手段が、撮影画像の各部分の、上記検出手段で検出された流し撮り方向についての所定の空間周波数成分に基づいて、その撮影画像中の主要被写体と背景とを分離するものであることも好ましい態様である。

このようにすると、流し撮り方向について主要被写体と背景とを簡単に且つ高い精度で分離することができる。

さらに、この撮影装置が撮影操作を行なうに先立って画角確認用の動画を撮影して表示する動画表示手段を備えたものであり、
上記検出手段が、順次連続する動画の各部分ごとの動きを検出することにより流し撮りの方向を検出するものであることも好ましい。

このようにすると、撮影画像中の主要被写体を確実に確認して流し撮りを行なうことができるとともに、流し撮り方向を精度よく検出することができる。

また、上記検出手段が、撮影装置に作用する加速度を検出することにより流し撮りの方向を検出する加速度センサであることも好ましい。

このようにすると、簡単な構成で流し撮りの方向を検出することができる。

本発明の撮影装置によれば、初心者であっても流し撮りを簡単に行なうことができる。

以下、本発明の実施の形態について説明する。

図１は、本発明の撮影装置の第１実施形態であるデジタルカメラを前面斜め上から見た外観斜視図である。

図１に示すデジタルカメラ１０は、撮影操作に応じて被写体を表わす画像信号を生成して記録するデジタルカメラであって、詳細は後述するが、移動中の主要被写体をこのデジタルカメラ１０の視線で追いながら主要被写体を停止した状態、背景が流れた状態の撮影画像を表わす画像信号を得る流し撮りモードを有する。

図１に示すデジタルカメラ１０の前面中央部には、光学ズームレンズである撮影レンズ１０＿１ａを内部に備えたズーム鏡胴１０＿１が備えられている。また、このデジタルカメラ１０の前面上部には、撮影に同期してフラッシュ光を発するフラッシュ発光装置１０＿２と、フラッシュ発光装置１０＿２からのフラッシュ光の光量を制御するためにそのフラッシュ光の光量を検出するフラッシュ調光センサ１０＿３と、光学式ファインダ対物窓１０＿４とが備えられている。

また、このデジタルカメラ１０の前面左側には、このデジタルカメラ１０を確実に握ることができる形状を有するグリップ１０＿５と、セルフタイマ作動時等に点滅するセルフタイマランプ１０＿６と、音声をピックアップするマイクロホン１０＿７とが備えられている。

さらに、このデジタルカメラ１０の上面には、シャッタボタン１０＿８と、各種の設定を行なうためのモードダイヤル１０＿９と、電源ボタン１０＿１０とが備えられている。

また、このデジタルカメラ１０の図１に示す右側面には、スピーカ１０＿１１が備えられている。

図２は、図１に示すデジタルカメラを上から見た外観図である。

このデジタルカメラ１０には、前述したフラッシュ発光装置１０＿２，シャッタボタン１０＿８，モードダイヤル１０＿９，電源ボタン１０＿１０に加えて、このデジタルカメラ１０の上方から下方に向けて設けられた斜面部に、フラッシュ発光装置１０＿２をポップアップするためのポップアップボタン１０＿１２が備えられている。また、モードダイヤル１０＿９には、オートモードを示す文字ＡＵＴＯ、プログラムオートモードを示すＰ、シャッタスピード優先オートモードを示すＳ、絞り優先オートモードを示すＡ、マニュアルモードを示すＭ、動画モードを示す絵柄、および４つのシーンポジション（夜景、スポーツ、風景、人物のシーンポジション）を示す４つの絵柄が印刷されている。このモードダイヤル１０＿９を回転操作することにより、所望のモードに設定することができる。ここで、各モードについて説明する。

オートモード（ＡＵＴＯ）は、カメラ側で露出やホワイトバランス等全てを制御するためのモードである。

プログラムオートモード（Ｐ）は、シャッタスピードと絞りを自動的に設定するためのモードである。

シャッタスピード優先オートモード（Ｓ）は、シャッタスピードを優先的に設定するためのモードである。

絞り優先オートモード（Ａ）は、絞りを優先的に設定するためのモードである。

マニュアルモード（Ｍ）は、シャッタスピードと絞りを自由に設定するためのモードである。

マニュアルモード（Ｍ）の隣りの絵柄で示される動画モードは、動画撮影用のモードである。

また、この動画モードから見て時計回りに４つの撮影シーン（夜景、スポーツ、風景、人物）を選択するための４つのシーンポジションモードがある。

夜景用のシーンポジションモードは、夕景や夜景などの雰囲気を活かした撮影に好適なモードである。

スポーツ用のシーンポジションモードは、スポーツシーンをはじめ、動体撮影に好適なモードである。

風景用のシーンポジションモードは、建物や山等、昼間の風景撮影に好適なモードである。

人物用のシーンポジションモードは、肌色をより美しく写し出すことができるポートレート撮影に好適なモードである。

図３は、図１に示すデジタルカメラを背面から見た外観図である。

図３に示すデジタルカメラ１０の背面上部には、光学式ファインダ接眼窓１０＿２２と、撮影準備完了等に点灯したり撮影中に点滅したりするファインダランプ１０＿２３と、露出補正ボタン１０＿２４と、押下することにより広角側（ワイド側）にズームアップする広角ズームボタン１０＿２５と、押下することにより望遠側（テレ側）にズームアップする望遠ズームボタン１０＿２６と、撮影モードと再生モードを切り換えるモードスイッチ１０＿２７とが備えられている。

また、モードスイッチ１０＿２７の下側には、フォトモードボタン１０＿３０と、十字ボタン１０＿３１と、メニュー／ＯＫボタン１０＿３２と、ＤＩＳＰ／ＢＡＣＫボタン１０＿３３とが備えられている。さらに、デジタルカメラ１０の背面中央部には、液晶モニタ１０＿３４が備えられている。

フォトモードボタン１０＿３０は、ピクセル数，感度，色味，プリント枚数等を設定するためのボタンである。

十字ボタン１０＿３１は、液晶モニタ１０＿３４上にメニュー画面などが表示された場合には、その十字キー１０＿３１の上ボタン１０＿３１ａ、下ボタン１０＿３１ｂ、左ボタン１０＿３１ｃ、右ボタン１０＿３１ｄの４つのボタンを操作することによってメニューの選択を行なうことができる。また、左ボタン１０＿３１ｃは、マクロ撮影を行なうか否かを切り換えるためのボタンでもあり、一度押下するとマクロ撮影モードとなり、再度押下するとマクロ撮影モードが解除される。さらに、右ボタン１０＿３１ｄは、フラッシュボタンの役割を担うボタンでもあり、押下する毎に、オートフラッシュ→赤目低減フラッシュ→強制フラッシュ→フラッシュ禁止→スローシャッタでのフラッシュ→オートフラッシュというようにフラッシュの状態を繰り返し切り換えるためのボタンでもある。

メニュー／ＯＫボタン１０＿３２は、撮影時や再生時における各種のメニューを表示したり、選択されたメニューを決定するためのボタンである。

ＤＩＳＰ／ＢＡＣＫボタン１０＿３３は、ＤＩＳＰボタンおよびＢＡＣＫボタン双方の役割を担うボタンである。ＤＩＳＰボタンの役割の場合は、液晶モニタ１０＿３４に表示された画面の状態を切り換えるためのボタンとなり、例えば撮影時に液晶モニタ１０＿３４の表示をオン，オフしたり、再生時に文字表示をオン，オフしたりする。一方、ＢＡＣＫボタンの役割の場合は、ＭＥＮＵ／ＯＫボタン１０＿３２等による操作状態を１つ前に戻したり取り消したりするためのボタンとなる。

液晶モニタ１０＿３４は、デジタルカメラ１０で被写体光を捉えて生成された画像データからなる画像や種々の設定時における情報等を表示する。また、この液晶モニタ１０＿３４は、撮影操作を行なうに先立って画角確認用の動画を撮影して表示する、本発明にいう動画表示手段の役割を担うものでもある。

また、このデジタルカメラ１０には、フォトモードボタン１０＿３０とＤＩＳＰ／ＢＡＣＫボタン１０＿３３との間に、流し撮りモードボタン１０＿３５が備えられている。この流し撮りモードボタン１０＿３５は、移動中の主要被写体をデジタルカメラ１０の視線で追いながらその主要被写体を停止した状態、背景が流れた状態の撮影画像を表わす画像信号を得る流し撮りモードに設定するためのボタンであり、一度押下すると流し撮りモードに設定され、再度押下すると設定された流し撮りモードが解除される。

図４は、図１に示すデジタルカメラの回路構成を示すブロック図である。

このデジタルカメラ１０には、前述した撮影レンズ１０＿１ａを構成するズームレンズ１０＿１ａ₁およびフォーカスレンズ１０＿１ａ₂と、その撮影レンズ１０＿１ａを経由して結像された被写体像をアナログ信号に変換する撮像素子（ＣＣＤと称する）１０＿４１が備えられている。

また、このデジタルカメラ１０には、ＣＣＤ１０＿４１からのアナログの画像信号をＡ／Ｄ変換してデジタルの画像信号を生成するＡ／Ｄ変換回路１０＿４２と、そのＡ／Ｄ変換回路１０＿４２からのデジタルの画像信号をバスライン１０＿１００に伝達する画像入力コントローラ１０＿４３が備えられている。

さらに、このデジタルカメラ１０には、画像信号処理回路１０＿４４が備えられている。この画像信号処理回路１０＿４４は、バスライン１０＿１００を介して入力されたデジタルの画像信号で表わされる主要被写体と背景とを分離する、本発明にいう分離手段の役割を担うものである。詳細には、撮影画像の各部分の、後述する加速度センサ１０＿５５で検出された流し撮り方向についての所定の空間周波数成分に基づいて、撮影画像中の主要被写体と背景とを分離する。また、この画像信号処理回路１０＿４４は、主要被写体について輪郭強調処理、および背景について画像の流れを強調する処置を行なう、本発明にいう画像処理手段の役割を担うものでもある。さらに、この画像信号処理回路１０＿４４は、バスライン１０＿１００を介して入力されたデジタルの画像信号を輝度（Ｙ）と色（Ｃ）とで表わされるＹＣ信号に変換する。

また、このデジタルカメラ１０には、バスライン１０＿１００を介して入力されたＹＣ信号を圧縮処理する圧縮処理回路１０＿４５と、バスライン１０＿１００を介して入力されたＹＣ信号をＮＴＳＣ（ＮａｔｉｏｎａｌＴＶＳｔａｎｄａｒｄｓＣｏｍｍｉｔｔｅｅ）信号に変換するビデオエンコーダ１０＿４６が備えられている。ビデオエンコーダ１０＿４６から出力されたＮＴＳＣ信号は、前述した液晶モニタ１０＿３４に供給されてその液晶モニタ１０＿３４で画像が表示される。

さらに、デジタルカメラ１０には、このデジタルカメラ１０全体の制御を行なうＣＰＵ１０＿４７と、ズームレンズ１０＿１ａ₁，フォーカスレンズ１０＿１ａ₂を駆動するモータドライバ１０＿４８，１０＿４９と、前述したシャッタボタン１０＿８とが備えられている。

また、このデジタルカメラ１０には、デジタルの画像信号に基づいて被写界輝度を検出するＡＥ検出回路１０＿５０が備えられている。

さらに、このデジタルカメラ１０には、デジタルの画像信号に基づくコントラスト検知によりコントラスト最大点にピントを合わせるＡＦ検出回路１０＿５１が備えられている。

また、このデジタルカメラ１０には、デジタルの画像信号が記憶されるメモリ（ＳＤＲＡＭ）１０＿５２と、圧縮処理回路１０＿４５で圧縮されたＹＣ信号を可搬型記録媒体である記録メディア１０＿５４に記録するためのメディアコントローラ１０＿５３が備えられている。

さらに、このデジタルカメラ１０には、加速度センサ１０＿５５が備えられている。この加速度センサ１０＿５５は、本発明にいう流し撮りの方向を検出する検出手段の一例に相当し、詳細にはデジタルカメラ１０に作用する加速度を検出することにより流し撮りの方向を検出する。

図５は、図４に示すデジタルカメラで実行される流し撮りモードにおける処理ルーチンのフローチャート、図６は、図５に示すフローチャートを説明するための画像およびデジタルカメラの流し撮りの方向を示す図、図７は、撮影画像および撮影画像中の主要被写体と背景とを分離する様子を示す図である。

流し撮りモードボタン１０＿３５が押下されると、流し撮りモードがオンされて図５に示す処理ルーチンが実行される。

先ず、ステップＳ１において、加速度センサ１０＿５５でデジタルカメラ１０の動きを調べる。即ち、デジタルカメラ１０に作用する加速度を検出することにより流し撮りの方向を検出する。例えば、図６（ａ）に示すように液晶モニタ１０＿３４に表示された、矢印Ａで示す左方向から右方向に向けて移動する物体Ｂを主要被写体として流し撮りを行なう場合、デジタルカメラ１０は、図６（ｂ）に示す矢印Ｃで示すように左から右に向けて回転される。加速度センサ１０＿５５では、このデジタルカメラ１０に作用する加速度を検出する。

次に、ステップＳ２において、シャッタボタン１０＿８を押したか否かが判定される。シャッタボタン１０＿８が押されていないと判定された場合はステップＳ１に戻る。一方、シャッタボタン１０＿８が押されたと判定された場合はステップＳ３に進む。

ステップＳ３では、デジタルカメラ１０の変化した向きに応じてＨＰＦ（ハイパスフィルタ）を一定サイズごとに区切った画像にかける。具体的には、シャッタボタン１０＿８が押されて、図７（ａ）に示すような画像Ｄが得られたものとする。背景についてはデジタルカメラ１０を移動した方向に流れた画像部分Ｄ１が得られ、主要被写体についてはデジタルカメラ１０の視線で追いながらの撮影による、背景よりも鮮明な画像部分Ｄ２が得られている。ここで、デジタルカメラ１０を移動した方向に対する高周波成分の信号を抜き出すために、デジタルカメラ１０を移動した方向に応じた方向（ここでは横方向）についてＨＰＦ（ハイパスフィルタ）を、図７（ｂ）に示す一定サイズのブロックＤ３ごとにかける（適用する）。図７（ｂ）に示すように、背景は流れた画像なので高周波成分は少なく、逆に主要被写体は鮮明な画像であるので高周波成分は多い。このことを利用して、主要被写体と背景とを分離する。尚、ブロックＤ３のサイズは小さいほど背景分離の精度は高まる。

次に、ステップＳ４において、主要被写体について輪郭強調処理を行なう。これにより、多少のぶれを補うことができる。また、ステップＳ５において、背景について画像の流れを強調するための、横方向へのブラー効果を施す。その後、この処理ルーチンを終了する。

図８は、図５に示す流し撮りモードにおける処理ルーチンで得られた画像を示す図である。

図８に示す画像Ｅは、背景を表わす画像部分Ｅ１と、主要被写体を表わす画像部分Ｅ２から構成されている。背景については、横方向へのブラー効果が施されているため、画像部分Ｅ１における流れがより強調されている。また、主要被写体については、輪郭強調処理が行なわれているため、鮮明な画像部分Ｅ２が得られている。

ここで、ブラー効果は隣接するピクセルをブレンドする（混ぜる）ことによって得られる。また、どの距離までブレンドするかによって、流れる量が変わってくる。以下、図９を参照して説明する。

図９は、ブラー効果が施される前の元画像と、ブラー効果が弱く施された画像と、ブラー効果が強く施された画像とを示す図である。

図９（ａ）には、流し撮りにより撮影された、ブラー効果が施される前の元画像Ｆが示されている。この元画像Ｆは、背景を表わす画像Ｆ１と主要被写体を表わす画像Ｆ２とで構成されている。ここでは、背景を表わす画像Ｆ１の流れの量は小さい。

また、図９（ｂ）に示す画像Ｇを構成する背景を表わす画像Ｇ１には、弱いブラー効果が施されている。一方、主要被写体を表わす画像Ｇ２には、輪郭強調が行なわれている。背景を表わす画像Ｇ１の流れの量は、図９（ａ）に示す画像Ｆ１の流れの量よりも大きい。従って、スピード感のある写真が得られている。

さらに、図９（ｃ）に示す画像Ｈを構成する背景を表わす画像Ｈ１には、強いブラー効果が施されている。また、主要被写体を表わす画像Ｈ２には、輪郭強調が行なわれている。背景を表わす画像Ｈ１の流れの量は、図９（ａ），図９（ｂ）に示す画像Ｆ１，Ｇ１の流れの量よりも大きい。従って、さらにスピード感のある写真が得られている。

図１０は、本発明の撮影装置の第２実施形態であるデジタルカメラの回路構成を示すブロック図である。

尚、前述した図４に示すデジタルカメラ１０の構成要素と同じ構成要素には同一の符号を付し、重複説明は省く。

図１０に示すデジタルカメラ２０は、図４に示すデジタルカメラ１０と比較し、加速度センサ１０＿５５が削除された点と、画像信号処理回路１０＿４４が画像信号処理回路２０＿４４に置き換えられた点が異なっている。

画像信号処理回路２０＿４４は、バスライン１０＿１００を介して入力されたデジタルの画像信号で表わされる主要被写体と背景とを分離する、本発明にいう分離手段の役割を担うものである。詳細には、順次連続する動画の各部分ごとの動き（オプティカルフロー）を検出することにより撮影画像中の主要被写体と背景とを分離するものである。また、この画像信号処理回路２０＿４４は、主要被写体について輪郭強調処理、および背景について画像の流れを強調する処置を行なう。

図１１は、図１０に示すデジタルカメラで実行される流し撮りモードにおける処理ルーチンのフローチャート、図１２は、図１１に示すフローチャートを説明するための画像およびデジタルカメラの流し撮りの方向を示す図、図１３は、撮影画像および撮影画像中の主要被写体と背景とを分離する様子を示す図である。

流し撮りモードボタン１０＿３５が押下されると、流し撮りモードがオンされて図１１に示す処理ルーチンが実行される。尚、流し撮りモードがオンされた状態では、オプティカルフローを調べるために、直前の画像がメモリ１０＿５２に常に保存される。

先ず、ステップＳ１１において、シャッタボタン１０＿８を押したか否かが判定される。シャッタボタン１０＿８が押されていないと判定された場合はステップＳ１１に戻る。一方、シャッタボタン１０＿８が押されたと判定された場合はステップＳ１２に進む。ここでは、図１２（ａ）に示すように液晶モニタ１０＿３４に表示された、矢印Ｊで示す左方向から右方向に向けて移動する物体Ｋを主要被写体として流し撮りを行なう場合であって、デジタルカメラ２０を、図１２（ｂ）に示す矢印Ｌで示すように左から右に向けて回転しながらシャッタボタン１０＿８を押したものとして、ステップＳ１２に進むものとする。

ステップＳ１２では、デジタルカメラ２０で撮影された画像と、その画像の直前に撮影されて保存されている画像とを比較することにより、オプティカルフローを調べる。

ここでは、シャッタボタン１０＿８が押されて、図１３（ａ）に示すような画像Ｍが得られたものとする。背景についてはデジタルカメラ２０を移動した方向に流れた画像部分Ｍ１が得られ、主要被写体についてはデジタルカメラ２０の視線で追いながらの撮影による、背景よりも鮮明な画像部分Ｍ２が得られている。ここで、最新の画像Ｍと保存していた直前の画像とを比較することにより、図１３（ｂ）に示す画面上の各点のベクトル（オプティカルフロー）を調べる。背景を表わす画像部分Ｍ１は、デジタルカメラ２０を移動した方向に流れているため、オプティカルフローは大きい。逆に、主要被写体についてはデジタルカメラ２０の視線で追いながら撮影して得られた画像部分Ｍ２であり固定されているため、オプティカルフローは小さい。このことを利用して、主要被写体と背景とを分離する。

さらに、ステップＳ１３において、主要被写体について輪郭強調処理を行なう。これにより、多少のぶれを補うことができる。また、ステップＳ１４において、背景について画像の流れを強調するための、横方向へのブラー効果を施す。その後、この処理ルーチンを終了する。

図１４は、本発明の撮影装置の第３実施形態であるデジタルカメラの回路構成を示すブロック図である。

図１４に示すデジタルカメラ３０は、図４に示すデジタルカメラ１０と比較し、加速度センサ１０＿５５が削除された点と、画像信号処理回路１０＿４４が画像信号処理回路３０＿４４に置き換えられた点が異なっている。

画像信号処理回路３０＿４４は、本発明にいう流し撮りの方向を検出する検出手段の役割を担うものであり、この画像信号処理回路３０＿４４は、順次連続する動画の各部分ごとの動き（オプティカルフロー）を検出することにより流し撮りの方向を検出する。また、この画像信号処理回路３０＿４４は、撮影画像の各部分の、上記のようにして検出された流し撮り方向についての所定の空間周波数成分に基づいて、撮影画像中の主要被写体と背景とを分離する。さらに、この画像信号処理回路３０＿４４は、主要被写体について輪郭強調処理、および背景について画像の流れを強調する処置を行なう。

図１５は、図１４に示すデジタルカメラで実行される流し撮りモードにおける処理ルーチンのフローチャート、図１６は、図１５に示すフローチャートを説明するための画像およびデジタルカメラの流し撮りの方向を示す図、図１７は、撮影画像および撮影画像中の主要被写体と背景とを分離する様子を示す図である。

流し撮りモードボタン１０＿３５が押下されると、流し撮りモードがオンされて図１５に示す処理ルーチンが実行される。尚、流し撮りモードがオンされた状態では、オプティカルフローを調べるために、直前の画像が常に保存される。

先ず、ステップＳ２１において、シャッタボタン１０＿８を押したか否かが判定される。シャッタボタン１０＿８が押されていないと判定された場合はステップＳ２１に戻る。一方、シャッタボタン１０＿８が押されたと判定された場合はステップＳ２２に進む。ここでは、図１６（ａ）に示すように液晶モニタ１０＿３４に表示された、矢印Ｎで示す左方向から右方向に向けて移動する物体Ｏを主要被写体として流し撮りを行なう場合であって、デジタルカメラ３０を、図１６（ｂ）に示す矢印Ｐで示すように左から右に向けて回転しながらシャッタボタン１０＿８を押したものとして、ステップＳ２２に進むものとする。

ステップＳ２２では、デジタルカメラ３０で撮影された画像と、その画像の直前に撮影されて保存されている画像とを比較することにより、オプティカルフローを調べる。

ここでは、シャッタボタン１０＿８が押されて、図１７（ａ）に示すような画像Ｑが得られたものとする。背景についてはデジタルカメラ３０を移動した方向に流れた画像部分Ｑ１が得られ、主要被写体についてはデジタルカメラ３０の視線で追いながらの撮影による、背景よりも鮮明な画像部分Ｑ２が得られている。ここで、最新の画像Ｑと保存していた直前の画像とを比較することにより、図１７（ｂ）に示す画面上の各点のベクトル（オプティカルフロー）を調べる。ここでは、全体として左向きのオプティカルフローが多く、デジタルカメラ３０を左から右に回転しながら、もしくは右に移動しながら撮影してると判断することができる。

次に、ステップＳ２３において、デジタルカメラ３０の変化した向きに応じてＨＰＦ（ハイパスフィルタ）を一定サイズごとに区切った画像にかける。具体的には、図７を参照して説明したようにして、デジタルカメラ１０を移動した方向に対する高周波成分の信号を抜き出すために、デジタルカメラ３０を移動した方向に応じた方向（ここでは横方向）についてＨＰＦ（ハイパスフィルタ）を、一定サイズのブロックごとにかける（適用する）。ここで、背景は流れた画像なので高周波成分は少なく、逆に主要被写体は鮮明な画像であるので高周波成分は多い。このことを利用して、主要被写体と背景とを分離する。

次に、ステップＳ２４において、主要被写体について輪郭強調処理を行なう。これにより、多少のぶれを補うことができる。また、ステップＳ２５において、背景について画像の流れを強調するための、横方向へのブラー効果を施す。その後、この処理ルーチンを終了する。

本発明の撮影装置の第１実施形態であるデジタルカメラを前面斜め上から見た外観斜視図である。図１に示すデジタルカメラを上から見た外観図である。図１に示すデジタルカメラを背面から見た外観図である。図１に示すデジタルカメラの回路構成を示すブロック図である。図４に示すデジタルカメラで実行される流し撮りモードにおける処理ルーチンのフローチャートである。図５に示すフローチャートを説明するための画像およびデジタルカメラの流し撮りの方向を示す図である。撮影画像および撮影画像中の主要被写体と背景とを分離する様子を示す図である。図５に示す流し撮りモードにおける処理ルーチンで得られた画像を示す図である。ブラー効果が施される前の元画像と、ブラー効果が弱く施された画像と、ブラー効果が強く施された画像とを示す図である。本発明の撮影装置の第２実施形態であるデジタルカメラの回路構成を示すブロック図である。図１０に示すデジタルカメラで実行される流し撮りモードにおける処理ルーチンのフローチャートである。図１１に示すフローチャートを説明するための画像およびデジタルカメラの流し撮りの方向を示す図である。撮影画像および撮影画像中の主要被写体と背景とを分離する様子を示す図である。本発明の撮影装置の第３実施形態であるデジタルカメラの回路構成を示すブロック図である。図１４に示すデジタルカメラで実行される流し撮りモードにおける処理ルーチンのフローチャートである。図１５に示すフローチャートを説明するための画像およびデジタルカメラの流し撮りの方向を示す図である。撮影画像および撮影画像中の主要被写体と背景とを分離する様子を示す図である。

符号の説明

１０，２０，３０デジタルカメラ
１０＿１ズーム鏡胴
１０＿１ａ撮影レンズ
１０＿１ａ₁ ズームレンズ
１０＿１ａ₂ フォーカスレンズ
１０＿２フラッシュ発光装置
１０＿３フラッシュ調光センサ
１０＿４光学式ファインダ対物窓
１０＿５グリップ
１０＿６セルフタイマランプ
１０＿７マクロボタン
１０＿８シャッタボタン
１０＿９モードダイヤル
１０＿１０電源ボタン
１０＿１１スピーカ
１０＿１２ポップアップボタン
１０＿２２光学式ファインダ接眼窓
１０＿２３ファインダランプ
１０＿２４露出補正ボタン
１０＿２５広角ズームボタン
１０＿２６望遠ズームボタン
１０＿２７モードスイッチ
１０＿３０フォトモードボタン
１０＿３１十字ボタン
１０＿３１ａ上ボタン
１０＿３１ｂ下ボタン
１０＿３１ｃ左ボタン
１０＿３１ｄ右ボタン
１０＿３２メニュー／ＯＫボタン
１０＿３３ＤＩＳＰ／ＢＡＣＫボタン
１０＿３４液晶モニタ
１０＿３５流し撮りモードボタン
１０＿４１撮像素子（ＣＣＤ）
１０＿４２Ａ／Ｄ変換回路
１０＿４３画像入力コントローラ
１０＿４４，２０＿４４，３０＿４４画像信号処理回路
１０＿４５圧縮処理回路
１０＿４６ビデオエンコーダ
１０＿４７ＣＰＵ
１０＿４８，１０＿４９モータドライバ
１０＿５０ＡＥ検出回路
１０＿５１ＡＦ検出回路
１０＿５２メモリ（ＳＤＲＡＭ）
１０＿５３メディアコントローラ
１０＿５４記録メディア
１０＿５５加速度センサ
１０＿１００バスライン

Claims

撮影操作に応じて被写体を表わす画像信号を生成して記録する撮影装置において、
移動中の主要被写体を該撮影装置の視線で追いながら該主要被写体を停止した状態、背景が流れた状態の撮影画像を表わす画像信号を得る流し撮りモードを有し、該流し撮りモードで作用する、
主要被写体と背景とを分離する分離手段と、
主要被写体について輪郭強調処理、および背景について画像の流れを強調する処置を行なう画像処理手段とを備えたことを特徴とする撮影装置。
この撮影装置が撮影操作を行なうに先立って画角確認用の動画を撮影して表示する動画表示手段を備えたものであり、
前記分離手段が、順次連続する動画の各部分ごとの動きを検出することにより撮影画像中の主要被写体と背景とを分離するものであることを特徴とする請求項１記載の撮影装置。
流し撮りの方向を検出する検出手段を備え、
前記分離手段が、撮影画像の各部分の、前記検出手段で検出された流し撮り方向についての所定の空間周波数成分に基づいて、該撮影画像中の主要被写体と背景とを分離するものであることを特徴とする請求項１記載の撮影装置。
この撮影装置が撮影操作を行なうに先立って画角確認用の動画を撮影して表示する動画表示手段を備えたものであり、
前記検出手段が、順次連続する動画の各部分ごとの動きを検出することにより流し撮りの方向を検出するものであることを特徴とする請求項３記載の撮影装置。
前記検出手段が、撮影装置に作用する加速度を検出することにより流し撮りの方向を検出する加速度センサであることを特徴とする請求項３記載の撮影装置。