JP4154053B2 - 画像記録・再生システム、画像記録装置及び画像再生装置 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、作画意図に応じた画像を得るための画像記録装置、及び該画像記録装置で撮影された画像に所定の処理を施して再現するための画像再生装置を有する画像記録・再生システムに関するものである。
【０００２】
【従来の技術】
従来より、流し撮りやポートレイト撮影等、撮影者の作画意図に応じた画像を簡便に得るための技術が提案されている。
【０００３】
例えば特開昭58-198031では、作画意図を表わす複数の絵文字をカメラの表示器に表示し、撮影者が該絵文字の中から所望の絵文字を選択すると、所定の作画効果を実現するための絞りとシャッタースピードを自動で決定するカメラが開示されている。
【０００４】
当公知技術によると、撮影者が流し撮りに対応する絵文字を選択すると、カメラは流し撮り効果を発揮するのに適当と思われるシャッタースピードを設定し、続いて該シャッタースピードとフィルム感度、被写体輝度から適正な絞り値を演算して露光条件を決定する。
【０００５】
また特開平5-232562では、カメラに内蔵された角速度センサの出力に基づいて流し撮り状態か否かを判定し、流し撮り状態と判定された場合には該角速度センサ出力と撮影レンズの焦点距離情報から流し撮りの作画効果に適したシャッタースピードを自動選択するカメラが開示されている。
【０００６】
また特開平8-43870においては、手振れ補正機能内蔵カメラにおいて、所定方向の手振れ補正は機能させ、これと直交する方向の手振れ補正を不作動とする事で、手振れ補正と流し撮り効果の両立を図ったカメラが開示されている。
【０００７】
また特開昭62-32577では、撮影画像に対して撮影時に設定された画像処理パラメータを用いた処理を行ない、クロススクリーンフィルタ等の効果を画像処理で実現する技術が開示されている。
【０００８】
【発明が解決しようとする課題】
しかしながら、上記公知技術を用いて提供されたカメラは、画像に記録時での露光条件だけで所望の画像を得ようとするものがほとんどであり、画像の再現時に撮影者の意図を的確且つ高画質とするものではなかった。
【０００９】
例えば、特開平5-232562では、被写体の移動速度が遅い時にはシャッタースピードを長秒時にするので、背景画像に所定の流れ効果を与えることはできるが、手振れを生じたり、主被写体の画質を劣化させる可能性が生じてしまう。
【００１０】
また、公知技術を用いて画像を再生する再生装置では、ただ単に、再生の処理としての特殊技法を用いるだけなので、本来の撮影意図が的確に表せないという問題が生じてしまう。
【００１１】
例えば、特開昭62-32577では、主被写体と背景の分離を容易にする技術が記載されていないため、クロススクリーンフィルタのごとく画面全体に施して構わない画像処理には適するが、流し撮りのように主被写体と背景のいずれかのみに処理を施す場合には、撮影者が望む効果は得られないことになってしまう。
【００１２】
本出願に係る発明の目的は、作画意図どおりの画像を再現するために、画像の記録の際に撮影モードに応じた撮影条件での撮影を行うと共に、画像再生装置でも選択された撮影モードに合わせて更に画像処理を行い、撮影者の意図を的確且つ高画質で再現できるようにした画像記録・再生システムを提供することにある。
【００１３】
本出願に係る第２の発明の目的は、充分な流し撮り効果を有した画像を簡単に再現できる画像記録・再生システムを提供することにある。
【００１４】
本出願に係る第３の発明の目的は、特定の撮影対象と他の撮影対象の焦点を意識的に変える画像を簡単に再現できる画像記録・再生システムを提供することにある。
【００１５】
【課題を解決するための手段】
上記の課題を解決するため、本発明は記録媒体に撮影画像を記録する画像記録装置と、該画像記録装置で画像が記録された前記記録媒体を用いて画像を再現させる画像再生装置からなる画像記録・再生システムにおいて、画像記録装置は、流し撮り効果を得るための撮影モードを選択する撮影モード選択手段と、該撮影モード選択手段が流し撮り効果を得るためのモードである場合に、被写体に対して背景の像流れが生じる撮影条件を設定する撮影条件設定手段と、選択された撮影モードに基づく撮影情報を記録媒体に記録する撮影情報記録手段を有し、画像再生装置は、画像の縦方向の空間周波数と横方向の空間周波数を解析する解析手段と、記録媒体に記録された前記撮影情報として流し撮り効果を得るための情報が含まれている場合に、解析手段の解析結果に基づき、画像中の被写体領域と背景領域とを分離し、背景領域のみに対して流し撮り方向のブレ量を大きくするように画像を変化させる処理を行う画像処理手段を有することを特徴とする。
【００１６】
さらに、上記の課題を解決するため、本発明は記録媒体に撮影画像を記録する画像記録装置と、該画像記録装置で画像が記録された記録媒体を用いて画像を再現させる画像再生装置からなる画像記録・再生システムにおいて、画像記録装置は、被写体の背景をぼかしたボケ効果を得るための撮影モードを選択する撮影モード選択手段と、該撮影モード選択手段がボケ効果を得るためのモードである場合に、被写体に対して背景のボケが生じる撮影条件を設定する撮影条件設定手段と、選択された撮影モードに基づく撮影情報を記録媒体に記録する撮影情報記録手段を有し、画像再生装置は、画像の縦方向の空間周波数と横方向の空間周波数を解析する解析手段と、記録媒体に記録された撮影情報として前記ボケ効果を得るための情報が含まれている場合に、解析手段の解析結果に基づき、画像中の被写体領域と背景領域とを分離し、背景領域のみに対してボケ効果を大きくするように画像を変化させる処理を行う画像処理手段を有することを特徴とする。
【００２６】
【発明の実施の形態】
（第１の実施例）
図１ないし図１６は本発明の第１の実施の形態に係わる図である。
【００２７】
図１は本発明の第１の実施の形態の画像記録装置及び画像再生装置からなるシステムの概略構成を示す斜視図である。
【００２８】
１０１は画像記録装置であるカメラで、内蔵されたフィルムに被写体像と撮影情報を記録する機能を有し、撮影レンズ１０２、ファインダー接眼部１０３、電源スイッチに相当するメインスイッチ１０４、レリーズボタン１０５を有する。
【００２９】
またカメラ１０１の背面には、液晶パネル等の表示手段１１１、スクロールボタン１１２、モード選択ボタン１１３、選択確定ボタン１１４が設置される。
【００３０】
１８１はディジタル化された画像に所定の処理を施すための画像再生装置本体で、電源スイッチ１８２、ＣＲＴ等の表示手段１８４、ＰＣカードドライブ１８５を有している。またキーボード１８７、マウス１８８が接続される。
【００３１】
１９１はフィルムスキャナで、フィルムカートリッジ１９４内のフィルムに記録された画像を読み取る。
【００３２】
１９５はプリンタで、画像再生装置本体１８１で処理されたディジタル画像信号を受信し、ハードコピーとしての写真１９７を出力する。
【００３３】
図２は、図１の画像記録装置としてのカメラ及び画像再生装置の詳細構成を示す図である。
【００３４】
まずカメラ１０１の構成を説明する。
【００３５】
１２１はカメラ全体の動作を制御するＣＰＵで、ＲＯＭ、ＲＡＭ、ＥＥＰＲＯＭ、Ａ／Ｄ、Ｄ／Ａ変換機能を有する１チップマイコンである。１２２はＣＰＵ１２１やカメラ１０１内の各種回路、アクチュエータに電力を供給する電源である。
【００３６】
被写体（撮影対象）からの光束は撮影レンズ１０２、半透過のクイックリターンミラー１２３、ペンタダハプリズム１２４、接眼レンズ１０３を介して撮影者が観察するためのファインダー像が形成される。また撮影時にはクイックリターンミラー１２３が上方に退避し、フォーカルプレンシャッター１２５で露光時間調節された被写体像が、画像記録媒体としてのフィルム１２６に記録される。
【００３７】
１２６はベース部材上に感光用乳剤と磁性媒体との混合物が塗布されたフィルムで、被写体像が光学的に、撮影条件に関する情報が磁気的に記録される。１２７は撮影レンズ１０２のフォーカシング駆動や不図示の絞りを駆動するためのレンズ駆動手段である。１２８は前述のクイックリターンミラー１２３及びフォーカルプレンシャッター１２５のメカニカルチャージや、フィルム１２６の巻き上げ巻戻しを行なう巻き上げ手段である。
【００３８】
クイックリターンミラー１２３の後方にはサブミラー１３１が軸支され、クイックリターンミラー１２３を透過した光束は該サブミラー１３１で下方に反射され、焦点検出センサを含む焦点検出ユニット１３２に入射される。焦点検出ユニット１３２は、例えば本出願人による特開平１０−１０４５０４に開示された焦点検出装置が用いられる。当装置は結像面内の２次元領域の焦点情報が検出可能な、すなわち被写界の３次元情報が検出可能なシステムである。
【００３９】
１３３はファインダー光路中に配置されたハーフミラーで、ファインダー光束の一部を上方に反射し、不図示の再結像レンズにて再結像された被写体像がイメージセンサ１３４に投影される。イメージセンサ１３４はＣＣＤ等で構成されたカラーエリアセンサで、被写体像を取得し、その情報をマイコン１２１に送信する。
【００４０】
１３５は磁気信号記録手段で、磁気ヘッドがフィルム１２６に当接し、フィルム１２６に塗布された磁性媒体に撮影情報を磁気的に記録する。
【００４１】
１３６はアイピースレンズ１０３の近傍に配置された視線検出センサで、撮影者の視線方向、すなわちファインダー画面における撮影者の注視方向を検出する。当センサは本出願人による特開平５−１０７４５４等に開示された装置が用いられる。
【００４２】
１３７は、撮影者の手振れや、流し撮りの際のパンニング操作によって生じたカメラの動きを検出するための角速度計で、振動ジャイロ等が利用される。
【００４３】
１３８は撮影情報の記憶や、カメラ内の各種センサで検知した画像信号を処理する際に用いられるメモリで、ＥＥＰＲＯＭ、フラッシュメモリ、磁気ディスク、光ディスク等が用いられる。
【００４４】
１０４はメインスイッチで、該スイッチが撮影者によってオンされると、ＣＰＵ１２１はスリープ状態から脱し、撮影に関する所定のプログラムの実行を許可する。
【００４５】
１４１は測光、焦点調節等の撮影準備動作の実行を開始させる撮影準備スイッチ（ＳＷ１）、１４２はフィルム１２６への露光動作を開始させる撮影スイッチ（ＳＷ２）である。そしてこれらスイッチは前述のレリーズボタン１０５とメカニカルに連動しており、該ボタンの半押し操作でＳＷ１がオンされ、該ボタン１０５の全押し操作でＳＷ２がオンされ、前記撮影準備と撮影動作が実行される。
【００４６】
１１２はスクロールボタンに連動したスクロールスイッチ群で、図１に示したスクロールボタン１１２の下には4個のスイッチが配置され、後述する方法でカメラの各種機能やデータの選択、変更が行なわれる。
【００４７】
１１３はカメラの種々の動作モードを選択するモード選択ボタンで、選択されたモードに対応する情報が前記表示手段１１１に表示される。１１４は選択確定ボタンで、選択された機能を確定する時に用いる操作部材である。
【００４８】
次に画像再生装置本体１８１の構成を説明する。
【００４９】
１８３は画像再生装置全体の動作を制御するＣＰＵで、ＲＯＭ、ＲＡＭ、ＥＥＰＲＯＭ、Ａ／Ｄ、Ｄ／Ａ変換機能を有する制御装置である。１８４はＣＲＴ、液晶モニタ、プラズマディスプレイ等で構成された表示手段で、画像再生装置本体１８１やこれに接続される周辺機器の状態、及び各種制御プログラムの実行画面やデータを表示する。
【００５０】
１８５は不図示のＰＣカードとデータの授受を行なうためのカードドライブである。１８６は後述する画像処理のプログラムを記憶するとともに画像データ等の各種データを保存するハードディスクである。１８２は電源スイッチで、該スイッチのオン操作で各種制御プログラムの実行が開始される。
【００５１】
１８７はデータ入力用キーボード、１８８はマウスである。
【００５２】
１９１はフィルムスキャナで、カメラ１０１で撮影され、不図示の現像機で現像処理されたフィルムが収納されたフィルムカートリッジ１９４が装填されると、光学読み取り部１９２がフィルムの画像情報を読み取ってディジタル画像信号に変換すると共に、磁気読み取り部１９３がフィルムの磁気層に記録された撮影情報を読み取る。該スキャナ１９１は画像再生装置本体１８１によってフィルムスキャン動作が制御され、読み取った画像信号と撮影情報は画像再生装置本体１８１に転送される。
【００５３】
１９５はプリンタで、画像再生装置本体１８１で処理されたディジタル画像信号を受信し、ハードコピーとしての写真１９７を出力する。プリンタ１９５は、銀塩印画紙に３原色のレーザ光で感光を行なう銀塩プリンタ、昇華型プリンタ、インクジェットプリンタ、電子写真式のレーザービームプリンタ等が用いられる。
【００５４】
図３は、流し撮りに好適なシーンを示した図である。撮影画面１５１内には、主被写体である走行中の自動車１５２、背景１５３、背景の一部の建物１５４、同じく背景の一部である木１５５が写っている。そして、当画像は通常のプログラムＡＥで撮影した場合を想定しており、被写体輝度が明るい場合にはシャッタースピードが高速になるため、主被写体１５２と背景１５３ないし１５５が共に静止して写り、流し撮り効果は表現されていない。
【００５５】
図４は、図３で説明したシーンを通常のシャッター優先ＡＥモードで撮影した場合である。通常は撮影者の判断で、流し撮り効果が表現されるシャッタースピードを選択し、該シャッタースピードを用いたシャッター優先ＡＥモードで撮影する。そして流し撮り効果を充分に表現するためにはより低速のシャッタースピードが選択されるが、この場合、背景１５３ないし１５５は流れるが、主被写体１５２に手振れによる画像振れが生じる恐れがある。
【００５６】
第１の実施の形態は、この様な流し撮りの失敗を防止し、初心者でも簡単に流し撮りが撮影できるカメラを提供するものである。
【００５７】
図５は、本発明の第１の実施の形態でのカメラ１０１における、表示器１１１の表示状態説明図である。当図はカメラ１０１のメインスイッチ１０４をオン操作し、カメラに電源を投入した時の、カメラ１０１の背面に配置された表示手段１１１と各種操作部材を併せて示している。表示手段１１１内の１６１はカメラの動作モード表示部、１６２は撮影モード選択指標である。１６３はシャッタースピード表示部、１６４は絞り値表示部である。
【００５８】
図6は、カメラ１０１が有する露出制御のためのプログラム線図を示す図である。以下に図５と図6を用いて各撮影モードを説明する。
【００５９】
図５に示す「プログラム」は「プログラムＡＥ」モードで、図６のＥＶ平面において「Ｐ」の線で示した絞りとシャッタースピードの組み合わせで露出制御される。
【００６０】
図５に示す「シャッター優先」は「シャッター優先ＡＥ」モードで、図６の「ＴＶ３０」はシャッタースピードが１／３０秒に設定されたシャッター優先ＡＥの線図を示す。図５に示す「絞り優先」は「絞り優先ＡＥ」モードで、図６の「ＡＶ４」は絞り値がＦ４．０に設定された絞り優先ＡＥの線図を示す。図５に示す「マニュアル」は「マニュアル露出」モードで、撮影者によってシャッタースピードと絞り値がマニュアルで選択される。図５に示す「流し撮り」は第１の実施の形態に特有の「流し撮り」モードで、撮影者によって「流し撮り」モードが選択されると、撮影状況に応じて、後述する方法によって図６の「ＦＬｓｌｏｗ」、「ＦＬｍｉｄ」、「ＦＬｆａｓｔ」で示すような線図が設定される。
【００６１】
図７は、図１ないし図２で説明したカメラ１０１における撮影操作の制御フローを示すフローチャートである。前述の図１ないし図６を参照しながら、図７のフロー図を用いてカメラの撮影フローを説明する。
【００６２】
ステップＳ１１０１よりステップＳ１１０２において、撮影者によって図１のカメラ１０１のメインスイッチ１０４がオンされると、カメラ内のマイコン１２１はスリープ状態から制御状態に起動され、カメラ内の各回路に電源が投入されるとともに、撮影フローの実行が許容され、ステップＳ１１０３において表示器１１１には図５の初期画面が表示される。
【００６３】
ステップＳ１１０４では、撮影者による撮影モードの選択が許可される。撮影者がモード選択ボタン１１３を押圧操作すると、表示器１１１には図５のごとく撮影モードが表示され、スクロールボタン１１２の上下方向の押圧操作で所望の撮影モードの選択が許可される。そして選択されたモードには、選択指標１６２が表示される。図５においては「流し撮り」モードが選択されたことを示す。
【００６４】
続いて図７のステップＳ１１０５において、レリーズボタン１０５に連動した撮影準備スイッチ１４１（ＳＷ１）をオン操作したか否かが判別される。そして該スイッチ１４１がオン操作されていたら、ステップＳ１１１１以降を実行し、オン操作されていない時はステップＳ１１０４に戻って撮影モードの選択受け付け状態で待機する。
【００６５】
ステップＳ１１０５において、スイッチ１４１がオン操作された場合にはステップＳ１１１１に進む。ステップＳ１１１１では、図２の視線検出センサ１３６で、撮影者の視線方向を検出する。
【００６６】
ステップＳ１１１２では測光を実行する。測光は、図２のイメージセンサ１３４で取得した被写体信号から被写体輝度を算出する。
【００６７】
ステップＳ１１１３では以下の手順で焦点調節を行なう。まず焦点検出ユニット１３２で得た画像信号に公知の相関演算を施し、被写界（撮影領域）の三次元情報を得る。続いて該三次元情報とステップＳ１１１１で得た視線情報から、撮影画面における主被写体位置を類推する。そして主被写体のデフォーカス量、すなわちピントずれ量に基づいてレンズ駆動手段１２７を駆動し、焦点調節を行なう。
【００６８】
ステップS１１１４ではイメージセンサ１３４で取得した画像、いわゆるプレビュー画像を表示手段１１１に表示し、撮影者に対してどのような写真が撮影されるのかを報知する。
【００６９】
ステップＳ１１１５では、ステップＳ１１０４で選択された撮影モードの判定を行なう。そして撮影モードが「流し撮り」モード以外の場合には、ステップＳ１１１７にジャンプし、図６に示した所定の露出制御線図に従ってシャッタースピードと絞り値が決定される。一方撮影モードが「流し撮り」モードの場合は、ステップＳ１１１６にて撮影画面の像流れ速度V（単位：ｍｍ／ｓｅｃ）の認識を行なう。
【００７０】
これは図２の角速度計１３７の出力ω（単位：ｒａｄ／ｓｅｃ）と、撮影レンズの焦点距離ｆ（単位：ｍｍ）の積、すなわちV＝ω×ｆにて演算される。
【００７１】
続いてステップＳ１１１７にて、シャッタースピードと絞り値の演算を行なう。具体的には、上記ステップＳ１１１６で検知したカメラの像流れ速度Vと、流し撮りモードにおける像流れ変位δ（単位：ｍｍ）から、シャッタースピードｔ（単位：ｓｅｃ）を、ｔ＝δ／Ｖにて演算し、この秒時を優先したシャッター優先ＡＥモードが設定される。そして本実施例では、例えばδ＝１〔ｍｍ〕としている。
【００７２】
これは通常の流し撮りシーンの背景流れ変位よりもかなり少ない値に設定されている。その理由は、シャッタースピードを通常の流し撮りシーンより高速にして手振れを排除するとともに、後述する画像処理過程で主被写体と背景の分離を行なうのに充分な値としたためである。
【００７３】
当ステップにより、カメラのパンニング角速度と撮影レンズの焦点距離に応じて、パンニング角速度が小さい時は図６の「ＦＬｓｌｏｗ」、中程度の時は「ＦＬｍｉｄ」、大きい時は「ＦＬｆａｓｔ」というように、撮影状況に応じたプログラム線図が設定される。
【００７４】
ステップＳ１１１８では、図１のレリーズボタン１０５が全押し操作されたか否か、すなわち図２のスイッチ１４２（ＳＷ２）がオンされたか否かを判定する。そして該スイッチ１４２がオンしていなければ、ステップＳ１１０５に戻って視線検知、測光、焦点調節、絞り・シャッタ設定及びプレビュー画像表示を繰り返し実行する。
【００７５】
スイッチ１４２がオン操作されたらステップＳ１１１８からステップＳ１１２１に進み、以降のレリーズ動作を実行する。
【００７６】
ステップＳ１１２１では図２のクイックリターンミラー１２３及びサブミラー１３１を撮影光束外に退避させる。
【００７７】
ステップＳ１１２２では、ステップＳ１１１６で設定した絞り値に応じて不図示の絞り機構を駆動する。
【００７８】
ステップＳ１１２３では、同じくステップＳ１１１６で設定したシャッタースピードに基づいて図２のシャッター機構１２５を制御し、フィルムに被写体像を記録する。
【００７９】
ステップＳ１１２４では不図示の絞り機構を開放に復帰駆動する。
【００８０】
ステップＳ１１２５ではクイックリターンミラー１２３を撮影光束内の初期位置に復帰させる。
【００８１】
ステップＳ１１２６では図２の巻き上げ手段を駆動して、クイックリターンミラー１２３及びフォーカルプレンシャッター１２５のメカニカルチャージと共に、フィルム１２６の1駒分の巻き上げを行なう。
【００８２】
ステップＳ１１２７においては、前記フィルム給送中に図２の磁気信号記録手段１３５を用いて、フィルムの磁気媒体に撮影モード、主被写体位置、絞り値、シャッタースピード、焦点距離、撮影日時等の撮影条件を磁気的に記録する。
【００８３】
ここで、図8に主被写体位置の定義を示す。
【００８４】
１５７は視線検出センサで検知した撮影者の視線方向で、これが主被写体の代表位置に相当する。そこで撮影画面の左上の点１５６を原点とし、この原点からの横方向の距離Ｘと縦方向の距離Ｙで表わされる座標値ＯＢＪ（Ｘ、Ｙ）が主被写体位置を表わす。
【００８５】
ステップS１１２８ではイメージセンサ１３４で取得した撮影画像を表示手段１１１に表示し、撮影者に対してどのような写真が撮影されたのかを報知する。なお、当実施の形態ではフィルムへの露光に際してはクイックリターンミラー１２３が撮影光束外に退避してイメージセンサ１３４への光束が遮断されるため、該ミラー１２３の退避直前の画像が表示される。そして所定時間後にステップＳ１１０３に戻り、次の撮影に備える。
【００８６】
図９は、上記図７のフローにおいて、「流し撮り」モードで撮影された画像を示す。主被写体１５２は振れること無く静止して記録されている。一方、背景１５３、１５４、１５５はフィルム面上で横方向に１ｍｍだけ流れて撮影されている。これは図７のステップＳ１１１６で設定された像流れ変位δ＝１〔ｍｍ〕に対応する。
【００８７】
図１０は、本発明の第1の実施の形態における画像再生装置の、画像処理及び画像出力フローを示す図である。
【００８８】
画像再生装置本体１８１の電源スイッチ１８２をオン操作すると、ステップ１２０２においてＣＰＵ１８３はスリープ状態から制御状態に起動され、画像再生装置本体１８１内の各回路や周辺機器に電源が投入されるとともに、画像再現フローの実行が許容される。そして、ステップＳ１２０３において表示器１８４には不図示の初期画面が表示される。
【００８９】
ステップＳ１２０４では、操作者による操作命令を受け付ける。
【００９０】
ステップＳ１２０５では、前記ステップＳ１２０４において、プリント命令がなされたか否かの判定を行なう。そして該命令が指示されていない時はステップＳ１２０３に戻って待機し、該命令が指示されたと判定したらステップＳ１２１１に移行する。
【００９１】
ステップＳ１２１１では、図２のフィルムスキャナ１９１を起動し、フィルムに記録された光学画像を読み取り、その結果をＣＰＵ１８３に転送する。
【００９２】
ステップＳ１２１２では上記ステップＳ１２１１の画像読み取りと並行してフィルムの磁気層に記録された撮影情報を読み取り、その結果をＣＰＵ１８３に転送する。
【００９３】
ステップＳ１２１３では読み取った画像のネガポジ反転、ホワイトバランス処理、γ調整等の画像最適化処理を施す。
【００９４】
ステップＳ１２１４では、前記ステップＳ１２１２で読み取った撮影情報に基づき、撮影画像が「流し撮り」モードで撮影されたものか否かの判定を行なう。そして該画像が「流し撮り」モード以外で撮影された場合には、ステップＳ１２１８にジャンプする。
【００９５】
するとステップＳ１２１８では、ステップＳ１２１３で最適化処理した画像をプリントアウトし、画像の再現として写真１９７を排出する。
【００９６】
ステップＳ１２１４で影画像が「流し撮り」モードで撮影されたと判定された場合には、ステップＳ１２１５に進む。
【００９７】
ステップＳ１２１５では、後述する方法で静止した主被写体と流れた背景とを分離し、主被写体の切り出しを行なう。
【００９８】
ステップＳ１２１６では、ステップＳ１２１５で切り出しされた残りの背景画像に対して、後述する方法で流し撮り効果を強調する処理を施す。
【００９９】
ステップＳ１２１７では、ステップＳ１２１６で流れ強調された背景に対してステップＳ１２１５で切り出しされた主被写体画像を埋め込み、最終画像を得る。
【０１００】
そしてステップＳ１２１８で完成した最終画像をプリントアウトし、写真１９７を排出する。
【０１０１】
図１１は図１０で示したステップＳ１２１５の主被写体切り出しサブルーチンの制御フロー図、図１１及び図１２は当サブルーチンにおける主被写体切り出し過程を説明する図である。
【０１０２】
図１１のステップS１３０１を経てステップS１３０２では、スキャナで読み取った画像を図１２のごとく小ブロックに分割する。ここで一つのブロックは例えば１００画素×１００画素で構成され、図１２では縦１０ブロック×横１６ブロックに分割されている。
【０１０３】
ステップS１３０３では、最初のブロックについて、ブロック内の画像をフーリエ変換し、画像の空間周波数分析を行なう。
【０１０４】
ステップS１３０４では、前記ステップS１３０３で分析した空間周波数の水平方向と垂直方向の比較を行なう。
【０１０５】
ステップS１３０５では、前記ステップＳ１３０４の比較結果から、当ブロックが流し撮りシーンの主被写体か背景かの判定を行なう。例えば縦横とも高周波成分が多い場合は静止した主被写体、横方向に対して縦方向の空間周波数が低ければ横方向に流れた背景、それ以外は不明と見なす。
【０１０６】
ステップS１３０６では、上記ステップS１３０３ないしステップS１３０５の演算が全ブロックに対して実行されたか否かを判定し、終了していなければステップS１３０３に戻って次のブロックに対する演算を実行し、終了した場合にはステップS１３１１に進む。
【０１０７】
この時点での演算結果を図１２に示すが、濃い網点で塗られた領域が静止被写体と判定されたブロック、薄い網点で塗られた領域が流れ被写体と判定されたブロック、白抜きの領域が不明と判定されたブロックである。
【０１０８】
ステップS１３１１では、フィルムの磁気情報に記録された主被写体位置情報を、当サブルーチンで処理している画像のブロックに割り当てる。この主被写体位置情報は図８で説明した定義に従ってフィルムに磁気記録され、図１１のステップS１２１２で読み出しされた情報である。該主被写体位置情報は、撮影画面内の座標値として記録されているため、当ステップではこの座標値を、当フローのステップS１３０２で分割したブロックの何番目に相当するかに変換する。
【０１０９】
ステップS１３１２では、前記ステップS１３０３ないしステップS１３０６で推定した主被写体ブロック群と、ステップS１３１１で認識した撮影時の主被写体位置情報から、より確度の高い主被写体ブロック群を抽出する。そしてこの主被写体ブロック群の境界を形成する境界ブロックを抽出する。これは図１２のブロック群１５２になる。
【０１１０】
ステップS１３１３では、前記ステップS１３１２で抽出した各境界ブロックについて、ブロック内の主被写体画像と背景画像の境界線抽出を行なう。
【０１１１】
ここで背景画像は流し撮りのために流れており、主被写体は静止画像のため、両者の境界は高コントラストのエッジで構成されている。このエッジをトレースすることで、主被写体と背景の分離を行なう。
【０１１２】
ステップS１３１４では、前記境界線追跡演算が全境界ブロックに対して実行されたか否かの判定し、終了していなければステップS１３１３に戻って次の境界ブロックに対するエッジトレースを実行し、終了した場合にはステップS１３１５に進む。
【０１１３】
ステップS１３１５では、前記ステップS１３１３で演算した各境界ブロック内の境界線をつなぎ、主被写体画像を囲む一本の閉じた境界線を決定する。そしてこの境界線で囲まれた主被写体画像を、撮影画像から切り出す。図１３にその結果を示すが、背景画像１５３に対して、主被写体が切り抜かれた領域が１５２で示されている。
【０１１４】
図１４は図１０で示したステップＳ１２１６の背景流しサブルーチンの制御フロー図、図１５は当サブルーチンで用いられる画像処理フィルタを説明する図である。
【０１１５】
図１１のステップS１４０１を経てステップS１４０２では、背景ブロックの空間周波数の平均化処理を行なう。
【０１１６】
これは図１１のステップS１３０２ないしステップS１３０６で抽出された背景ブロックについて、２次元方向の空間周波数の平均値を求める。
【０１１７】
ステップS１４０３では、前記ステップS１４０２で演算した背景の空間周波数から、背景の像流れ量δＳを求める。すなわち当ステップでは、図７のステップS１１１７で説明した、撮影時に設定した像流れ変位δを、撮影画像から復元する演算である。
【０１１８】
この演算式は、δＳ＝Ｋ１／ＳＦで表わされる。ここで、Ｋ１は所定の定数、ＳＦは背景画像の流れ方向における主たる空間周波数である。
【０１１９】
ステップS１４０４では、背景画像の流し量を決定するパラメータを設定する。例えば撮影時の背景流れ量が１ｍｍの場合、これを５倍にすれば、充分な流し撮り効果が得られる。図１５はこのようにして得た流れパラメータを用いて作成した画像処理フィルタである。
【０１２０】
一般にディジタル化された２次元画像にボカシやエッジ強調等のフィルタ処理を施す場合、処理効果を決定するフィルタはｍ列×ｎ行の２次元のマトリクスで表わされる。
【０１２１】
そこで、本発明の第1の実施の形態においては、流し撮り画像の背景の流れを強調するため、図１５に示すフィルタを用いる。当フィルタは垂直方向に対して水平方向の次数が大きい２次元マトリクスで、中央の横方向ライン上には重み付け係数１が、その周辺には重み付け係数１／２を有した要素が並ぶ。
【０１２２】
そして先に認識した画像流れ量δＳ＝の所定倍数、すなわちここでは５倍の５ｍｍに相当する画素数が当マトリクスの横方向の列数になる。よって２次元画像のすべての画素に対して、当マトリクスを順次乗じていくと、画像の横方向の空間周波数を減少させ、流し撮りと同等の効果が得られる。
【０１２３】
ステップS１４０５では、ステップS１４０４で作成した図１５のマトリクスフィルタを用いて、図１３の背景画像に処理を行なう。そしてこの処理画像に、図１２で切り抜き保存されていた主被写体画像を元の位置に埋め込んだものが、図１６に示す最終画像となる。以上の処理が終了すると、ステップS１４０６にてリターンする。
【０１２４】
以上がカメラにおける撮影と、画像再生装置における画像処理及び出力の流れの詳細である。ここで撮影から画像出力までの一連の手順を、改めて以下に簡単に説明する。
【０１２５】
操作者が流し撮りを意図する場合、図５のごとくカメラの撮影モードを「流し撮り」モードに設定して撮影を行なう。
【０１２６】
するとカメラ１０１は、撮影レンズの焦点距離と流し撮りに伴うカメラのパンニング角速度から像面上で所定の像流れ変位δが生じるようにシャッタースピードを決定し、図６のごとく露出制御のプログラム線図を設定する。
【０１２７】
そして該線図と被写体輝度、フィルム感度情報からＡＰＥＸ演算を行ない、適正なシャッタースピードと絞り値を決定してフィルムへの露光制御を行なう。
【０１２８】
露光後はフィルムを１駒分巻き上げるが、流し撮りモードによる撮影がなされたこと、撮影者の視線検知結果に基づいた撮影画面内の主被写体位置情報、その他の撮影情報が巻き上げ動作に同期してフィルムに塗布された磁気層に記録される。
【０１２９】
その後撮影者は撮影済みのフィルムをカメラから取り出し、写真ラボに現像処理を依頼する。そして現像処理を経たフィルムは、撮影者個人あるいはラボ業者が有する画像再生装置により、以下の処理が施される。
【０１３０】
まず現像済みのフィルムが収納されたカートリッジがフィルムスキャナに装填され、フィルムに記録された光学情報と、磁気層に記録された撮影情報が読み取りされる。
【０１３１】
そして撮影情報の中に流し撮りモードによる撮影がなされた情報が含まれていると、画像の空間周波数分析を行なって静止した画像と流れた画像の切り分けを行ない、これに磁気層に記録された主被写体位置情報を加味して主被写体と背景の分離を行ない、図１３の背景画像信号を得る。
【０１３２】
続いて背景画像のみに所定の流れ強調フィルタを作用させ、流れ処理を施さない主被写体画像を埋め込んで画像処理を完了し、図１６の最終画像を得る。そしてこの画像をモニタ上、あるいは記録紙上に出力する。
【０１３３】
なお上記第１の実施の形態では、主被写体位置情報は視線検知センサの情報を元に決定したが、カメラ背面のスクロールボタン１１２で撮影画面上の任意位置を選択する構成としても構わない。
【０１３４】
また主被写体位置の指定方法として、撮影画面を複数ブロックに分割して番号を割り振り、ブロック番号で指定する形態でも構わない。
【０１３５】
また、流し撮り効果を強調する画像処理方法は、図１５に示した２次元フィルタの乗算に限定されるものではない。
【０１３６】
上記第1の実施の形態によれば、撮影時に流し取りモードが選択されると、主被写体は振れず、かつ背景には所定の流れが生じるような撮影条件が設定されるため、主被写体が振れてしまう失敗が防止できる。
【０１３７】
撮影された背景画像には所定の流れ量が生じているため、主被写体と背景の分離が正確に行なわれ、背景に流れ強調処理を施す際の誤処理が回避できる。
【０１３８】
撮影時に設定した撮影モード情報が画像とともに記録されて画像再生装置に伝達されるため、撮影者が特別な操作や注文をすること無く、簡単に所望の画像処理が施された写真を得ることができる。
【０１３９】
撮影時に入力あるいは検知された主被写体の画面内位置情報が、画像とともに記録されて画像再生装置に伝達されるため、主被写体と背景の分離が正確に行なわれ、背景に流れ強調処理を施す際の誤処理が回避できる。
【０１４０】
撮影画像の周波数特性に応じた画像処理のパラメータを自動決定するため、撮影者が特別な操作や注文をすること無く、簡単に所望の画像処理が施された写真を得ることができる、という効果がある。
【０１４１】
（第２の実施例）
前記第1の実施の形態は、流し撮りを効果的に撮影する実施形態を示した。
【０１４２】
以下に示す第２の実施例は、ポートレイト等で、背景を効果的にぼかす実施例を示す。なお、当実施例では、主被写体のみに焦点を合わせる撮影モードをポートレイトモードと称したが、被写界深度を狭くして特定の被写体のみに焦点を合わせる撮影技法を、シャロウフォーカス（ShallowFocus）と称することもある。
【０１４３】
図１７ないし図２５は本発明の第２の実施例に係わる図である。なお、当第2の実施の形態におけるカメラと画像再生装置の部材構成は、図１及び図2に示した第１の実施の形態のものと同一のため、重複説明は省略する。
【０１４４】
図１７は、典型的なポートレイトシーンを示した図である。撮影画面２５１内には、主被写体である人物２５２、背景２５３、背景の一部の建物２５４、同じく背景の一部である木２５５が写っている。
【０１４５】
そして、当画像は通常のプログラムＡＥで撮影した場合を想定しており、被写体輝度が明るい場合には絞り制御値が小絞りになるため、主被写体２５２と背景２５３ないし２５５はすべて被写界深度内に収まり、背景のボケ効果は表現されていない。あるいは被写界深度の深いワイドレンズで撮影した場合も同様である。
【０１４６】
当実施の形態は、初心者でも簡単に雰囲気のあるポートレイト撮影が可能なカメラを提供するものである。
【０１４７】
図１８は、本発明の第２の実施の形態のカメラ２０１における、表示器１１１の表示状態説明図である。なお、第２の実施の形態のカメラ２０１は第１の実施の形態のカメラ１０１と同一の部材構成となっているため、カメラ２０１の説明は図１及び図２で代用し、第１の実施の形態と作用の異なる部分のみ、新たな符号や番号を用いて説明する。
【０１４８】
図１８はカメラ２０１のメインスイッチ１０４をオン操作し、カメラに電源を投入した時の、カメラ２０１の背面に配置された表示手段１１１と各種操作部材を併せて示している。
【０１４９】
表示手段１１１内の２６１はカメラの動作モード表示部、２６２は撮影モード選択指標である。１６３はシャッタースピード表示部、１６４は絞り値表示部である。
【０１５０】
図１９は、カメラ２０１が有する露出制御のためのプログラム線図を示す図である。以下に図１８と図１９を用いて、第１の実施の形態と異なる部分を説明する。
【０１５１】
図１８に示す「プログラム」ないし「流し撮り」モードは、図５の第１の実施の形態と同様の動作をするモードで、図１９のＥＶ平面においてはプログラムモードの「Ｐ」を代表で示した。
【０１５２】
図１８に示す「ポートレイト」は本実施例に特有の「ポートレイト撮影」モードで、撮影者によって「ポートレイト」モードが選択されると、撮影状況に応じて、図１９の「ＰＲＴ」で示すような線図が設定される。
【０１５３】
図２０は、当第２の実施の形態のカメラ２０１における撮影操作の制御フローを示すフローチャートである。
【０１５４】
当フローチャートは図７に示した第１の実施の形態のフローに対して、ステップＳ１１１５の流し撮りモード判定部がステップＳ２１１５のポートレイトモード判定部に変わり、Ｓ１１１６の背景流れ速度認識がステップＳ２１１６の３次元情報認識に変わった点が異なり、他のステップは同一の作用をする。
【０１５５】
従って前述の図１８及び図１９を参照しながら、図２０のフロー図を用いて第１の実施の形態に対して異なる部分のみ詳しく説明し、同一部分は簡単に説明する。
【０１５６】
ステップＳ２１０１よりステップＳ２１０２において、撮影者によってカメラ２０１のメインスイッチ１０４がオンされると、カメラ内のマイコン２２１はスリープ状態から制御状態に起動され、カメラ内の各回路に電源が投入されるとともに、撮影フローの実行が許容され、ステップＳ２１０３において表示器２１１には図１８の初期画面が表示される。
【０１５７】
ステップＳ２１０４では、撮影者による撮影モードの選択が許可される。撮影者がモード選択ボタン１１３を押圧操作すると、表示器１１１には図１８のごとく撮影モードが表示され、スクロールボタン１１２の上下方向の押圧操作で所望の撮影モードの選択が許可される。そして選択されたモードには、選択指標２６２が表示される。
【０１５８】
図１８においては「ポートレイト」モードが選択されたことを示す。
【０１５９】
続いて図２０のステップＳ２１０５において、レリーズボタン１０５に連動した撮影準備スイッチ１４１（ＳＷ１）をオン操作したか否かが判別される。そして該スイッチ１４１がオン操作されていたら、ステップＳ２１１１以降を実行し、オン操作されていない時はステップＳ２１０４に戻って撮影モードの選択受け付け状態で待機する。
【０１６０】
ステップＳ２１０５において、スイッチ１４１がオン操作された場合にはステップＳ２１１１に進み、第１実施例と同様にステップＳ２１１１で視線検知、ステップＳ２１１２で測光、ステップＳ２１１３で焦点調節、ステップS２１１４でプレビュー画像表示を行なう。
【０１６１】
ステップＳ２１１５では、ステップＳ２１０４で選択された撮影モードの判定を行なう。
【０１６２】
そして撮影モードが「ポートレイト」モード以外の場合には、ステップＳ２１１７にジャンプし、所定の露出制御線図に従ってシャッタースピードと絞り値が決定される。
【０１６３】
一方撮影モードが「ポートレイト」モードの場合は、ステップＳ２１１６にて撮影画面の３次元情報解析を行なう。これはステップＳ２１１３で実行した焦点検出の結果から、主被写体と背景のすべてを含んだ撮影画面内の被写体のデフォーカス分布（ピントずれ量の分布）を解析する。
【０１６４】
続いてステップＳ２１１７にて、シャッタースピードと絞り値の演算を行なう。具体的には、上記ステップＳ２１１６で検知した被写体の３次元情報から、基準絞り値Ｆを、Ｆ＝ＤＥＦＭＡＸ／ε／Ｋ２にて演算する。
【０１６５】
ここで、ＤＥＦＭＡＸこは焦点検出した領域内で最もピントずれ量の大きな領域、すなわちポートレイトシーンにおける背景のデフォーカス量、εは許容錯乱円径、Ｋ２は所定の係数である。
【０１６６】
そして本実施の形態ではＫ２＝５としている。これは背景画像のボケの直径が許容錯乱円の５倍になるような絞り値を選択することになる。
【０１６７】
そこで例えばＤＥＦＭＡＸ＝０．６ｍｍ、ε＝０．０３ｍｍ、／Ｋ２＝５とすると基準絞り値はＦ＝４となり、図１９ＰＲＴで示す露出制御線図が設定される。
【０１６８】
ここで、Ｋを過大に設定すると制御絞り値が明るくなり過ぎて、焦点深度が極端に狭くなり、主被写体の一部にしか焦点が合わなくなる。一方Ｋを過小に設定すると制御絞り値が暗くなり過ぎて、焦点深度が深くなり、後述する主被写体と背景の分離が困難になる。
【０１６９】
従ってＫの値は上記問題が生じない適切な値にすると、効果的なポートレート写真が得られる。
【０１７０】
ステップＳ２１１８では、カメラ２０１のレリーズボタン１０５が全押し操作されたか否か、すなわち図２のスイッチ１４２（ＳＷ２）がオンされたか否かを判定する。そして該スイッチ１４２がオンしていなければ、ステップＳ２１０５に戻って視線検知、測光、焦点調節、絞り・シャッタ設定及びプレビュー画像表示を繰り返し実行する。
【０１７１】
スイッチ１４２がオン操作されたらステップＳ２１１８からステップＳ２１２１に進み、以降のレリーズ動作を実行する。
【０１７２】
ステップＳ２１２１ないしステップＳ２１２６は、第１の実施の形態の図７におけるステップＳ１１２１ないしステップＳ１１２６と同一の動作を実行する。
【０１７３】
ステップＳ２１２７においては、前記フィルム給送中に図２の磁気信号記録手段１３５を用いて、フィルムの磁気媒体に撮影モード、主被写体位置、絞り値、シャッタースピード、焦点距離、撮影日時等の撮影条件を磁気的に記録する。
【０１７４】
ここで、図２１に主被写体位置の定義方法を示す。２５７は視線検出センサで検知した撮影者の視線方向で、これが主被写体の代表位置に相当する。そこで撮影画面の縦方向及び横方法をそれぞれ５分割した合計２５の領域２５６に分割し、左上から右下に番号ＳＬ１からＳＬ２５を割り振る。
【０１７５】
そして視線方向２５７が含まれる領域ＳＬ１８が主被写体位置を表わし、このコードを磁気記録する。
【０１７６】
ステップS２１２８ではイメージセンサ１３４で取得した撮影画像を表示手段１１１に表示し、撮影者に対してどのような写真が撮影されたのかを報知する。そして所定時間後にステップＳ１１０３に戻り、次の撮影に備える。
【０１７７】
図２２は、上記図２０のフローにおいて、「ポートレイト」モードで撮影された画像を示す。主被写体２５２には焦点が合っている。一方、背景２５３、２５４、２５５には、許容錯乱円径の５倍のボケが生じている。
【０１７８】
図２３は、本発明の第２の実施の形態における画像再生装置２８１の、画像処理及び画像出力フローを示す図である。
【０１７９】
当フローチャートは図１０に示した第１実施例のフローに対して、ステップＳ１２１５の主被写体切り出しサブルーチンの内容がステップＳ２２１５では変更されているのと、ステップＳ１２１６の背景流し処理サブルーチンがステップＳ２２１６の背景ボカシサブルーチンに変わった点が異なり、他のステップは同一の作用をする。
【０１８０】
また画像再生装置２８１も、第1実施例の画像再生装置本体１８１と部材構成は同一のため、説明は図１及び図２を用いて行なう。第１の実施形態に対して異なる部分のみ詳しく説明し、同一部分は簡単に説明する。
【０１８１】
画像再生装置２８１の電源スイッチ１８２をオン操作すると、ステップ２２０２においてＣＰＵ１８３はスリープ状態から制御状態に起動され、画像再生装置２８１内の各回路や周辺機器に電源が投入されるとともに、画像再現フローの実行が許容される。
【０１８２】
そして、ステップＳ２２０３において表示器１８４には不図示の初期画面が表示される。
【０１８３】
ステップＳ２２０４ないしステップＳ２２１３は、第１の実施の形態のステップＳ１２０４ないしステップＳ１２１３と同一の処理を行なう。
【０１８４】
ステップＳ２２１４では、前記ステップＳ２２１２で読み取った撮影情報に基づき、撮影画像が「ポートレイト」モードで撮影されたものか否かの判定を行なう。そして該画像が「ポートレイト」モード以外で撮影された場合には、ステップＳ２２１８にジャンプする。
【０１８５】
するとステップＳ２２１８では、ステップＳ２２１３で最適化処理した画像をプリントアウトし、写真１９７を排出する。
【０１８６】
ステップＳ２２１４で影画像が「ポートレイト」モードで撮影されたと判定された場合には、ステップＳ２２１５に進む。
【０１８７】
ステップＳ１２１５では、後述する方法で静止した主被写体と流れた背景とを分離し、主被写体の切り出しを行なう。
【０１８８】
ステップＳ１２１６では、ステップＳ１２１５で切り出しされた残りの背景画像に対して、後述する方法で流し撮り効果を強調する処理を施す。
【０１８９】
ステップＳ１２１７では、ステップＳ１２１６で流れ強調された背景に対してステップＳ１２１５で切り出しされた主被写体画像を埋め込み、最終画像を得る。
【０１９０】
そしてステップＳ１２１８で完成した最終画像をプリントアウトし、写真１９７を排出する。
【０１９１】
図２４は図２３で示したステップＳ２２１５の主被写体切り出しサブルーチンの制御フロー図、図２５及び図２６は当サブルーチンにおける主被写体切り出し過程を説明する図である。
【０１９２】
図２４のステップS２３０１を経てステップS２３０２では、第1実施例と同様にスキャナで読み取った画像を図２５のごとく小ブロックに分割する。
【０１９３】
ステップS２３０３では、最初のブロックについて、ブロック内の画像をフーリエ変換し、画像の空間周波数分析を行なう。
【０１９４】
ステップS２３０４では、前記ステップS２３０３で分析した空間周波数の水平方向及び垂直方向の比較及び数値判定を行なう。
【０１９５】
ステップS２３０５では、前記ステップＳ２３０４の比較結果から、当ブロックがポートレイトシーンの主被写体か背景かの判定を行なう。例えば縦あるいは横の少なくとも一方に高周波成分が多い場合は主被写体、縦横いずれの方向も空間周波数が低ければ背景と見なす。
【０１９６】
ステップS２３０６では、上記ステップS２３０３ないしステップS２３０５の演算が全ブロックに対して実行されたか否かを判定し、終了していなければステップS２３０３に戻って次のブロックに対する演算を実行し、終了した場合にはステップS２３１１に進む。
【０１９７】
この時点での演算結果を図１２に示すが、濃い網点で塗られた領域がピントの合った被写体と判定されたブロック、薄い網点で塗られた領域がピントのぼけた被写体と判定されたブロックである。
【０１９８】
ステップS２３１１では、フィルムの磁気情報に記録された主被写体位置情報を、当サブルーチンで処理している画像のブロックに割り当てる。この主被写体位置情報は図２１で説明した定義に従ってフィルムに磁気記録され、図２３のステップS２２１２で読み出しされた情報である。
【０１９９】
該主被写体位置情報は、撮影画面内の小領域位置番号として記録されているため、当ステップではこの位置番号を、当フローのステップS２３０２で分割したブロックの何番目に相当するかに変換する。
【０２００】
ステップS２３１２では、前記ステップS２３０３ないしステップS２３０６で推定した主被写体ブロック群と、ステップS２３１１で認識した撮影時の主被写体位置情報から、より確度の高い主被写体ブロック群を抽出する。
【０２０１】
そしてこの主被写体ブロック群の境界を形成する境界ブロックを抽出する。これは図２５のブロック群２５２になる。
【０２０２】
ステップS２３１３では、前記ステップS２３１２で抽出した各境界ブロックについて、ブロック内の主被写体画像と背景画像の境界線抽出を行なう。ここで背景画像はピントずれのためにぼけており、主被写体はピントがあった画像のため、両者の境界は高コントラストのエッジで構成されている。このエッジをトレースすることで、主被写体と背景の分離を行なう。
【０２０３】
ステップS２３１４では、前記境界線追跡演算が全境界ブロックに対して実行されたか否かの判定し、終了していなければステップS２３１３に戻って次の境界ブロックに対するエッジトレースを実行し、終了した場合にはステップS２３１５に進む。
【０２０４】
ステップS２３１５では、前記ステップS２３１３で演算した各境界ブロック内の境界線をつなぎ、主被写体画像を囲む一本の閉じた境界線を決定する。そしてこの境界線で囲まれた主被写体画像を、撮影画像から切り出す。
【０２０５】
図２６にその結果を示すが、背景画像２５３に対して、主被写体が切り抜かれた領域が２５２で示されている。
【０２０６】
図２７は図２３で示したステップＳ２２１６の背景ボカシ処理サブルーチンの制御フロー図、図２８は当サブルーチンで用いられる画像処理フィルタを説明する図である。
【０２０７】
図２７のステップS２４０１を経てステップS２４０２では、背景ブロックの空間周波数の最大値抽出を行なう。これは図２４のステップS２３０２ないしステップS２３０６で抽出された背景ブロックについて、２次元方向の空間周波数の最大値を求める。
【０２０８】
ステップS２４０３では、前記ステップS２４０２で演算した背景の空間周波数から、背景のボケ量εＳを求める。すなわち当ステップでは、図２０のステップS２１１７で説明した、撮影時に設定した背景のボケ量を、撮影画像から復元する演算である。この演算式は、εＳ＝Ｋ４／ＳＦ２で表わされる。
【０２０９】
ここで、Ｋ４は所定の定数、ＳＦ２は背景画像の最大空間周波数である。
【０２１０】
ステップＳ２４０４では、背景画像のボカシ量を決定するパラメータを設定する。例えば撮影時の背景ボケ量が許容錯乱円径０．０３ｍｍの５倍である０．１５ｍｍの場合、これを更に５倍である０．７５ｍｍにすれば、充分な背景ボケ効果が得られる。図２８はこのようにして得たボケパラメータを用いて作成した画像処理フィルタである。
【０２１１】
図２８のボカシフィルタは７×７次元のマトリクスで表わしてあるが、このマトリクスの次元数を前記ボカシ量の０．７５ｍｍに相当する画素数に設定すれば良い。
【０２１２】
ステップS２４０５では、ステップS２４０４で作成した図２８のマトリクスフィルタを用いて、図２６の背景画像に処理を行なう。そしてこの処理画像に、図２５で切り抜き保存されていた主被写体画像を元の位置に埋め込んだものが、図２９に示す最終画像となる。
【０２１３】
以上の処理が終了すると、ステップS２４０６にてリターンする。
【０２１４】
以上がカメラにおける撮影と、画像再生装置における画像処理及び出力の流れの詳細である。ここで撮影から画像出力までの一連の手順を、改めて以下に簡単に説明する。
【０２１５】
操作者がポートレイト撮影を意図する場合、図１８のごとくカメラの撮影モードを「ポートレイト」モードに設定して撮影を行なう。するとカメラ２０１は、焦点検出装置で検知した被写体の３次元情報から、像面上で背景に所定のボケが生じるように絞り値を決定し、図１９のごとく露出制御のプログラム線図を設定する。
【０２１６】
そして該線図と被写体輝度、フィルム感度情報からＡＰＥＸ演算を行ない、適正なシャッタースピードと絞り値を決定してフィルムへの露光制御を行なう。
【０２１７】
露光後はフィルムを１駒分巻き上げるが、ポートレイトモードによる撮影がなされたこと、撮影者の視線検知結果に基づいた撮影画面内の主被写体位置情報、その他の撮影情報が巻き上げ動作に同期してフィルムに塗布された磁気層に記録される。
【０２１８】
その後撮影者は撮影済みのフィルムをカメラから取り出し、写真ラボに現像処理を依頼する。そして現像処理を経たフィルムは、撮影者個人あるいはラボ業者が有する画像再生装置により、以下の処理が施される。
【０２１９】
まず現像済みのフィルムが収納されたカートリッジがフィルムスキャナに装填され、フィルムに記録された光学情報と、磁気層に記録された撮影情報が読み取りされる。
【０２２０】
そして撮影情報の中にポートレイトモードによる撮影がなされた情報が含まれていると、画像の空間周波数分析を行なって焦点の合った画像と焦点のはずれた画像の切り分けを行ない、これに磁気層に記録された主被写体位置情報を加味して主被写体と背景の分離を行ない、図２６の背景画像信号を得る。
【０２２１】
続いて背景画像のみに所定のボカシフィルタを作用させ、ボカシ処理を施さない主被写体画像を埋め込んで画像処理を完了し、図２９の最終画像を得る。そしてこの画像をモニタ上、あるいは記録紙上に出力する。
【０２２２】
上記第２の実施の形態によれば、
撮影時にポートレイトモードが選択されると、主被写体は焦点深度内におさまり、かつ背景には所定のボケが生じるような撮影条件が設定されるため、主被写体がのピントが外れてしまう失敗が防止できる。
【０２２３】
撮影された背景画像には所定のボケが生じているため、主被写体と背景の分離が正確に行なわれ、背景にボカシ強調処理を施す際の誤処理が回避できる。
【０２２４】
撮影時に設定した撮影モード情報が画像とともに記録されて画像再生装置に伝達されるため、撮影者が特別な操作や注文をすること無く、簡単に所望の画像処理が施された写真を得ることができる。
【０２２５】
撮影時に入力あるいは検知された主被写体の画面内位置情報が、画像とともに記録されて画像再生装置に伝達されるため、主被写体と背景の分離が正確に行なわれ、背景にボカシ強調処理を施す際の誤処理が回避できる。
【０２２６】
撮影画像の周波数特性に応じた画像処理のパラメータを自動決定するため、撮影者が特別な操作や注文をすること無く、簡単に所望の画像処理が施された写真を得ることができる、という効果がある。
【０２２７】
前記第1及び第２の実施の形態は、磁気記録媒体が塗布された銀塩フィルムを用いる画像記録装置の実施例を示したが、画像を光電変換してメモリ媒体に記録する、いわゆる電子カメラ（デジタルカメラとも呼ばれている）でも同様の効果を発揮できる。
【０２２８】
また、画像再生装置での画像の出力を写真（プリントアウトされた紙情報）として説明したが、当然ながら画像出力として表示装置を用いることも本発明の実施にあたるものである。
【０２２９】
また、画像再生装置での画像の出力を写真（プリントアウトされた紙情報）として説明したが、当然ながら画像出力としてネットワークに画像情報を送ることも本発明の実施にあたるものである。
【０２３０】
（第３の実施例）
図３０は本発明の第３の実施の形態に係わる図である。当実施の形態は、図２の第１の実施の形態に対して、銀塩フィルム１１６が撮像素子３３６に、メモリ１３８はカメラに対して着脱可能なカード型ＩＣメモリ、いわゆるＰＣカード３３８に置き換わり、撮影された画像の光電変換信号はＰＣカード３３８に記録される点が異なる。
【０２３１】
また、第１の実施の形態において、撮影情報をフィルムに記録するための磁気信号記録手段１３５は、当実施の形態においては廃止され、撮影情報は画像信号とともに画像記録媒体としてのＰＣカード３３８に記録される。
【０２３２】
当カメラ３０１の動作は第１の実施の形態あるいは第２の実施の形態のカメラの動作と本質的に変わるところはないので、詳しい説明は省略する。
【０２３３】
一方、画像再生装置本体１８１はＰＣカード３３８の情報を読み取るＰＣカードドライブ１８５を備えているため、第１及び第２の実施の形態で用いられたフィルムカートリッジ１９４の光学画像を処理するのと同様に、ＰＣカード３３８に記憶された画像信号と撮影情報を読み出して、第１の実施の形態あるいは第２の実施の形態と同様の画像処理を行ない、画像を出力することができる。
【０２３４】
【発明の効果】
以上説明したように、請求項１の発明によれば、撮影時に作画意図に応じた撮影を行うとともに、画像再現時にも更に作画意図を強調する画像処理を施すため、作画意図に応じた画像が的確且つ高画質で取得可能な画像記録・再生システムが提供できる。
【０２３５】
また、請求項２の発明によれば、流し撮り撮影時の背景画像に像ぶれ強調処理を行うため、従来よりも高速のシャッタースピードで撮影しても充分な流し撮り効果のある画像を提供することが可能になる。
【０２３６】
また、請求項３の発明によれば、ポートレイト撮影時の背景画像にボケ強調処理を行うため、背景が充分にボケた雰囲気のあるポートレイト画像を提供することが可能になる。
【０２３７】
更に、請求項４の発明によれば、画像記録装置で撮影意図に応じて設定された撮影条件が画像再生装置にも伝えられ、作画意図に応じた効果を強調するための画像処理が画像再生装置でも可能になる。
【図面の簡単な説明】
【図１】本発明の第1の実施の形態の画像記録・再生システムの概略構成図である。
【図２】本発明の第1の実施の形態の画像記録・再生システムの詳細構成図である。
【図３】本発明の第1の実施の形態に好適な撮影シーンの図である。
【図４】本発明の第1の実施の形態の画像記録装置としてのカメラにおいて、従来の撮影モードで撮影した場合の撮影画像説明図である。
【図５】本発明の第1の実施の形態の画像記録装置としてのカメラにおける表示手段の初期画面説明図である。
【図６】本発明の第1の実施の形態の画像記録装置としてのカメラにおける露出制御プログラム線図の説明図である。
【図７】本発明の第1の実施の形態の画像記録装置としてのカメラにおける撮影制御フロー図である。
【図８】本発明の第1の実施の形態の画像記録装置としてのカメラにおける被写体位置の定義方法説明図である。
【図９】本発明の第1の実施の形態の画像記録装置としてのカメラにおける、流し撮りモードで撮影された画像である。
【図１０】本発明の第1の実施の形態の画像再生装置におけるメイン制御フロー図である。
【図１１】本発明の第1の実施の形態の画像再生装置における被写体切り出しサブルーチンフロー図である。
【図１２】本発明の第1の実施の形態の画像再生装置における被写体切り出しの途中経過を示す図である。
【図１３】本発明の第1の実施の形態の画像再生装置における被写体切り出しの最終結果を示す図である。
【図１４】本発明の第1の実施の形態の画像再生装置における背景流しサブルーチンフロー図である。
【図１５】本発明の第1の実施の形態の画像再生装置における画像処理フィルタの図である。
【図１６】本発明の第1の実施の形態の画像再生装置における画像処理後の最終画像の図である。
【図１７】本発明の第２の実施の形態に好適な撮影シーンの図である。
【図１８】本発明の第２の実施の形態の画像記録装置としてのカメラにおける表示手段の初期画面説明図である。
【図１９】本発明の第２の実施の形態の画像記録装置としてのカメラにおける露出制御プログラム線図の説明図である。
【図２０】本発明の第２の実施の形態の画像記録装置としてのカメラにおける撮影制御フロー図である。
【図２１】本発明の第２の実施の形態の画像記録装置としてのカメラにおける被写体位置の定義方法説明図である。
【図２２】本発明の第２の実施の形態の画像記録装置としてのカメラにおける、ポートレイトモードで撮影された画像である。
【図２３】本発明の第２の実施の形態の画像再生装置におけるメイン制御フロー図である。
【図２４】本発明の第２の実施の形態の画像再生装置における被写体切り出しサブルーチンフロー図である。
【図２５】本発明の第２の実施の形態の画像再生装置における被写体切り出しの途中経過を示す図である。
【図２６】本発明の第２の実施の形態の画像再生装置における被写体切り出しの最終結果を示す図である。
【図２７】本発明の第２の実施の形態の画像再生装置における背景ボカシサブルーチンフロー図である。
【図２８】本発明の第２の実施の形態の画像再生装置における画像処理フィルタの図である。
【図２９】本発明の第２の実施の形態の画像再生装置における画像処理後の最終画像の図である。
【図３０】本発明の第３の実施の形態の画像記録・再生システムの詳細構成図である。
【符号の説明】
１０１、２０１、３０１ 画像記録装置としてのカメラ
１０４ メインスイッチ
１０５ レリーズボタン
１１１、２１１、３１１ 表示手段
１１２ スクロールボタン
１１３ モード選択ボタン
１１４ 選択確定ボタン
１２６ 画像記録媒体としてのフィルム
１３２ 焦点検出装置
１３５ 磁気信号記録手段メモリ
１３６ 視線検知手段
１３７ 角速度計
１５１、２５１ 撮影画面
１５２、２５２ 主被写体画像
１５３、１５４、１５５、２５３、２５４、２５５ 背景画像
１８１ 画像再生装置
１８４ 表示手段
１９１ フィルムスキャナ
１９４ フィルムカートリッジ
１９５ プリンタ
１９７ 写真
３２６ 撮像手段
３３８ ＰＣカード

Claims (6)

1. 記録媒体に撮影画像を記録する画像記録装置と、該画像記録装置で画像が記録された前記記録媒体を用いて前記画像を再現させる画像再生装置からなる画像記録・再生システムにおいて、
   前記画像記録装置は、
   流し撮り効果を得るための撮影モードを選択する撮影モード選択手段と、
   該撮影モード選択手段が流し撮り効果を得るためのモードである場合に、被写体に対して背景の像流れが生じる撮影条件を設定する撮影条件設定手段と、
   前記選択された撮影モードに基づく撮影情報を前記記録媒体に記録する撮影情報記録手段を有し、
   前記画像再生装置は、
   前記画像の縦方向の空間周波数と横方向の空間周波数を解析する解析手段と、
   前記記録媒体に記録された前記撮影情報として流し撮り効果を得るための情報が含まれている場合に、前記解析手段の解析結果に基づき、前記画像中の被写体領域と背景領域とを分離し、前記背景領域のみに対して流し撮り方向のブレ量を大きくするように前記画像を変化させる処理を行う画像処理手段を有することを特徴とする画像記録・再生システム。
2. 前記撮影条件設定手段では、前記流し撮り効果としての像ぶれが生じるようなシャッタースピードが設定されることを特徴とした請求項１に記載の画像記録・再生システム。
3. 記録媒体に撮影画像を記録する画像記録装置と、該画像記録装置で画像が記録された前記記録媒体を用いて前記画像を再現させる画像再生装置からなる画像記録・再生システムにおいて、
   前記画像記録装置は、
   被写体の背景をぼかしたボケ効果を得るための撮影モードを選択する撮影モード選択手段と、
   該撮影モード選択手段がボケ効果を得るためのモードである場合に、被写体に対して背景のボケが生じる撮影条件を設定する撮影条件設定手段と、
   前記選択された撮影モードに基づく撮影情報を前記記録媒体に記録する撮影情報記録手段を有し、
   前記画像再生装置は、
   前記画像の縦方向の空間周波数と横方向の空間周波数を解析する解析手段と、
   前記記録媒体に記録された前記撮影情報として前記ボケ効果を得るための情報が含まれている場合に、前記解析手段の解析結果に基づき、前記画像中の被写体領域と背景領域とを分離し、前記背景領域のみに対してボケ効果を大きくするように前記画像を変化させる処理を行う画像処理手段を有することを特徴とする画像記録・再生システム。
4. 記録媒体に撮影画像を記録する画像記録装置と、該画像記録装置で画像が記録された前記記録媒体を用いて前記画像を再現させる画像再生装置からなる画像記録・再生システムの制御方法であって、
   前記画像記録装置の制御方法は、
   流し撮り効果を得るための撮影モードを選択する撮影モード選択工程と、
   該撮影モード選択工程で流し撮り効果を得るためのモードが選択された場合に、被写体に対して背景の像流れが生じる撮影条件を設定する撮影条件設定工程と、
   前記選択された撮影モードに基づく撮影情報を前記記録媒体に記録する撮影情報記録工程を有し、
   前記画像再生装置の制御方法は、
   前記画像の縦方向の空間周波数と横方向の空間周波数を解析する解析工程と、
   前記記録媒体に記録された前記撮影情報として流し撮り効果を得るための情報が含まれている場合に、前記解析工程での解析結果に基づき、前記画像中の被写体領域と背景領域とを分離し、前記背景領域のみに対して流し撮り方向のブレ量を大きくするように前記画像を変化させる処理を行う画像処理工程を有することを特徴とする画像記録・再生システムの制御方法。
5. 前記撮影条件設定工程では、前記流し撮り効果としての像ぶれが生じるようなシャッタースピードが設定されることを特徴とした請求項４に記載の画像記録・再生システムの制御方法。
6. 記録媒体に撮影画像を記録する画像記録装置と、該画像記録装置で画像が記録された前記記録媒体を用いて前記画像を再現させる画像再生装置からなる画像記録・再生システムの制御方法であって、
   前記画像記録装置の制御方法は、
   被写体の背景をぼかしたボケ効果を得るための撮影モードを選択する撮影モード選択工程と、
   該撮影モード選択工程でボケ効果を得るためのモードが選択された場合に、被写体に対して背景のボケが生じる撮影条件を設定する撮影条件設定工程と、
   前記選択された撮影モードに基づく撮影情報を前記記録媒体に記録する撮影情報記録工程を有し、
   前記画像再生装置の制御方法は、
   前記画像の縦方向の空間周波数と横方向の空間周波数を解析する解析工程と、
   前記記録媒体に記録された前記撮影情報として、前記ボケ効果を得るための情報が含まれている場合に、前記解析工程での解析結果に基づき、前記画像中の被写体領域と背景領域とを分離し、前記背景領域のみに対してボケ効果を大きくするように前記画像を変化させる処理を行う画像処理工程を有することを特徴とする画像記録・再生システムの制御方法。

Images