JP5907660B2 - 撮像装置 - Google Patents

Description

本発明は、例えば主要被写体である人物の顔部を自分自身で撮影するという所謂自分撮りに用いられる撮像装置に関する。

自分撮りに用いられる撮像装置の技術としては、例えば特許文献１がある。この特許文献１は、簡易な方法で自分撮り時に映りを確認することができるもので、撮像部のレンズ部の近傍に配置された表示部を有し、この表示部は、該表示部の表面に光を反射する材料を蒸着により層状に形成した蒸着ミラーを有し、この蒸着ミラーは、表示部の画面に表示される表示光の一部を透過可能に形成し、蒸着ミラーによる映像によって、ユーザは、自身の表情などを認識しつつ、液晶パネル等によって表示される内容も同時に確認することができることを開示する。

特開２０１０−１５４３７０号公報

自分撮りにより取得される画像は、撮像装置から撮影を行う自身の顔部までの距離が短くなるために、画像中に占める自身の顔部の割合が大きくなり、これに反して背景部の割合が小さくなってしまうことが多い。自身の顔部の背景部は、撮影を行っている場所等が映されるものであり、例えば撮影時の旅行先であるとか、その季節、周囲環境等を思い起こしてその当時の印象を想起することを可能とする。

しかしながら、画像中に占める背景部の割合が小さくなってしまうと、背景部の画像から例えば撮影時の旅行先であるとか、その季節、周囲環境等を思い起こしてその当時の印象を想起することに困難性を有するものとなってしまう。
本発明の目的は、自身の顔部の割合が大きくならずにその背景部の画像を大きくすることを可能とする自分撮りに用いられる撮像装置を提供することにある。

本発明の主要な局面に係る撮像装置は、本装置に設けられ、被写体として人物及び背景を撮像する撮像部と、前記本装置の回動を判定する回動判定部と、前記回動判定部により判定された回動に基づいて、少なくとも２つの位置で撮像された各画像データを合成して前記人物の前記背景にあたる画像部分を拡張した合成画像データを作成する画像処理部と、前記合成画像データを表示する表示部とを備え、前記画像処理部は、前記表示部に表示された前記合成画像データと共に、前記人物を拡大、縮小、又は移動する加工処理の操作指示をさせるための表示を行い、更に、前記加工処理の前記操作指示がされたことに応じて前記人物の画像データを前記拡大、前記縮小、又は前記移動させる処理を行う。

本発明によれば、自身の顔部の割合が大きくならずにその背景部の画像を大きくすることを可能とする自分撮りに用いられる撮像装置を提供できる。

本発明に係る撮像装置の第１の実施の形態を示すブロック構成図。 同装置における外観図。 同装置における表示器に表示する自分撮り時のガイダンスの一例を示す図。 同装置における表示器に表示する自分撮り時のガイダンスの一例を示す図。 同装置における表示器に表示する自分撮り時のガイダンスの一例を示す図。 同装置におけるユーザが自分撮りを行う場合のカメラの配置を示す図。 同装置におけるユーザが自分撮りをするときのカメラの水平移動を示す図。 同装置におけるユーザが第１の自分撮り方法で自分撮りするときのカメラの回動による水平移動を示す図。 同装置におけるユーザが第１の自分撮り方法で自分撮りするときのカメラの回動による水平移動を示す図。 同装置における第１の自分撮り方法により取得された各撮像画像データの繋ぎ合わせにより背景部を拡張した合成撮像画像データを示す模式図。 同装置におけるユーザが第２の自分撮り方法で自分撮りするときのカメラの回動による水平移動を示す図。 同装置における第２の自分撮り方法により取得された各撮像画像データの繋ぎ合わせにより背景部を拡張した合成撮像画像データを示す模式図。 同装置における撮像部を示す概略構成図。 同装置における視差を持つ各撮像画像データをユーザの位置を揃えて配置した図。 同装置における視差を持つ各各撮像画像データをユーザを一致させて重ね合わせて背景部を除去する作用を示す図。 同装置における合成画像データに拡大・縮小処理したユーザの画像データを再配置した再配置画像データの一例を示す図。 同装置におけるカメラ制御フローチャート。 同装置における合成画像データ上のユーザの画像データの縮小を示す図。 同装置における合成画像データ上のユーザの画像データの縮小を示す図。 同装置における合成画像データ上のユーザの画像データの移動を示す図。 同装置における合成画像データ上のユーザの画像データの縮小・移動・拡大等の完了を示す図。 同装置におけるユーザの画像データを縮小、移動、拡大して合成画像データ上に配置した図。 同装置を回動させたときの撮像タイミングを決定するための構図イメージ選択ブロックを示す図。 同装置における自分撮りの撮影方法の指示フローチャート。

以下、本発明の一実施の形態について図面を参照して説明する。
図１は撮像装置（カメラ）のブロック構成図を示し、図２（ａ）（ｂ）は本装置の外観図を示し、このうち図２（ａ）は正面外観図を示し、同図（ｂ）は背面外観図を示す。
装置本体（カメラ本体）１には、マイクロコンピュータを搭載する画像処理・制御部２が設けられている。この画像処理・制御部２は、予め記憶されているカメラ制御プログラムを実行することにより、写真撮影を行うときのシャッタ動作や露光処理、絞り調整、画像処理等の一連の動作制御を行って撮像画像データを取得するための撮像制御、記録された撮像画像データの再生動作の制御等を行う。この画像処理・制御部２には、撮像部３と、操作判定部４と、記録部５と、表示部６と、タッチパネル７と、回動判定部８と、時計部９と、ガイダンス操作ボタン１０とが接続されている。
カメラ本体１の正面には、図２（ａ）に示すように撮像部３のレンズ光学系３ａと、ガイダンス操作ボタン１０と、回動確認表示器１１とが設けられ、かつカメラ本体１の上部には、操作判定部４のレリーズボタン４ａが設けられている。
カメラ本体１の背面には、図２（ｂ）に示すように表示部６が設けられている。この表示部６は、撮影時に取得された撮像画像データを表示したり、記録された撮像画像データを再生表示する。この表示部６は、例えば液晶ディスプレイから成る。この液晶ディスプレイの上面には、タッチパネル７が設けられている。このタッチパネル７は、ユーザのタッチ操作を受け、このタッチ位置に対応するタッチ位置信号を出力する。この表示部６は、視差を持つ左右（ＬＲ）の各画像データを同時に表示することにより３次元（３Ｄ）表示をすることが可能である。

撮像部３は、人物等の主要被写体を含む被写体からの光像を撮像してその画像信号を出力する。この撮像部３は、フォーカスレンズを含むレンズ光学系と、絞りと、シャッタと、レンズ光学系から絞り、シャッタを通った被写体からの光像を画像信号に変換する撮像素子とを有する。
操作判定部４は、ユーザの操作を受けるもので、例えば電源ボタン、レリーズボタン４ａ、再生ボタン、動画ボタン、自分撮りボタン等を備え、動画モード又は静止画モードの切り替え、自分撮りモードへの切り替え、２次元（２Ｄ）撮影又は３次元（３Ｄ）撮影の切り替え、絞りの調整等を行う。

記録部５は、撮影時に画像処理・制御部２により取得された撮像画像データを記録する。

回動判定部８は、カメラ本体１の回動を判定するもので、例えば加速度センサを有する。加速度センサは、カメラの横ｘ方向に並べて配置することで、カメラ本体１が回動しているときに回動に伴う加速度信号を出力することができる。加速度センサを例えばその他３次元を構成するカメラ縦ｙ方向、撮影光軸ｚ方向にそれぞれ配置すれば、重力加速度の検知によって回動判定部８は、カメラ本体１が、ｘｙｚのいずれかの方向に傾いたり、回動しているのかも判定可能である。
又、回動判定部８は、カメラ本体１の回動を判定するために地磁気を検出する方位センサを用いてもよい。例えば、方位センサは、カメラ本体１が予め定められた方向、例えば水平方向に回動しているか否かを判定し、この判定信号を出力する。カメラ本体１の水平方向への回動は、レリーズボタン４ａが設けられているカメラ本体１の上面を上方に向けた状態を保ちながら光軸方向ｚの向きを変えながら水平方向へ回転移動することである。単純にｙ軸に並行に動かされたか、向きを変えて動かされたかは、この方位センサや、加速度センサの出力を分析して判定可能である。また、こうした機能は、撮像結果、顔や背景の動きを分析して代用することも可能である。

時計部９は、計時の経過をカウントする。
ガイダンス操作ボタン１０は、自分撮りを行うときの操作方法のガイダンスを例えば表示器６に表示するためのユーザの操作用のボタンである。
回動確認表示器１１は、自分撮り時に、後述するカメラ本体１の回動が水平方向に安定していることを報知するためもので、例えば発光ダイオード（ＬＥＤ）が用いられる。回動確認表示器１１は、カメラ本体１の回動が水平方向に安定しているときに点灯する。

画像処理・制御部２は、自分撮り時に、回動判定部８によりカメラ本体１の水平方向への回動を判定し、カメラ本体１が水平方向に回動するタイミング、例えば回動開始時、回動中又は回動終了時の各タイミングに撮像部３の撮像により取得された少なくとも２つの撮像画像データを合成して主要被写体として人物の背景部を拡張した合成画像データを作成する。

画像処理・制御部２は、少なくとも２つの撮像画像データ中から主要被写体として例えば人物の顔部の画像データを切り出し、この顔部の画像データを合成画像データ中に配置する。
カメラ本体１の回動により撮像部３は、例えば人物の顔部等の主要被写体に対して視差が異なり、かつ同主要被写体を中心部に撮像した少なくとも２つの画像データを取得すると、画像処理・制御部２は、視差の異なる少なくとも２つの撮像画像データ中から例えば人物の顔部等の主要被写体の画像データを切り出して合成画像データ中に配置する。
画像処理・制御部２は、切り出した例えば人物の顔部等の主要被写体の画像データを拡大、縮小して合成画像データ中に配置する。
画像処理・制御部２は、切り出した例えば人物の顔部等の主要被写体の画像データを合成画像データ中に移動可能である。
画像処理・制御部２は、切り出した例えば人物の顔部等の主要被写体の画像データを合成画像データ上に配置し、表示部６に例えば人物の顔部等の主要被写体の画像データを立体表示する。
この画像処理・制御部２は、仮記録部２１と、顔検出部２２と、合成部２３と、ガイダンス報知部２４とを有する。

仮記録部２１は、例えば回動開始時、回動中又は回動終了時の各タイミングに撮像部３の撮像により取得された少なくとも２つの撮像画像データを一時的に記録する。
顔検出部２２は、例えば撮像画像データから主要被写体として人物の顔部を検出する。
合成部２３は、仮記録部２１に記録されている各撮像画像データを合成して主要被写体として人物の背景部を拡張した合成画像データを作成する。

ガイダンス報知部２４は、カメラ本体１を水平方向に回動して主要被写体として人物を当該人物により撮影するという所謂自分撮りのためのガイダンスを例えば表示器６に表示したり、自分撮りの操作が予め定められた通りの操作方法に従って行われているかの操作状態を表示器６に表示する。自分撮りのためのガイダンスは、例えば図３に示すような「手を伸ばし撮影レンズをこちらに向けて安定させて構えて下さい」のガイダンスＧ１と、図４に示すような「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」のガイダンスＧ２と、図５に示すような「カメラを水平にしたまま腕を引くように回して下さい」のガイダンスＧ３がある。これらガイダンスＧ１〜Ｇ３は、それぞれユーザＷの形状を模した模式図Ｑを表示し、この模式図Ｑによって手首を回し方（図４）又は腕の回し方（図５）によるカメラ本体１の水平方向への回動方向の操作方法を矢印等により表示する。

ガイダンス報知部２４は、警告を発することや、終了を知らせることが可能である。警告の内容は、例えば「カメラを正しく構えて初めからやり直して下さい」「時間が超過したので初めからやり直して下さい」等である。終了を知らせは、「撮影を終わります」等である。

ここで、自分撮りでのカメラの構え方について説明する。
図６に示すようにユーザＨが自分撮りを行う場合、図７（ａ）に示すようにユーザＨは、カメラ１に正対して構えるよりも、同図（ｂ）に示すように身体を傾けてカメラ１を構えて撮影することが多い。図７（ａ）においてカメラ１の画角をΘ０、カメラ１とユーザＨとの間の距離をＤ１、ユーザＨの顔部の幅をＷｆとすると、カメラ１の画角の幅Ｗｉは、
Ｗｉ＝Ｄ１×ｔａｎΘ０ …（１）
により表わされる。

図７（ｂ）に示すように身体を傾けてカメラ１を構えると、カメラ１とユーザＨとの間の距離Ｄ２は、ユーザＨの肩部の幅Ｄ３だけ距離Ｄ１よりも長くなる。これにより、図７（ｂ）に示すように身体を傾けてカメラ１を構えた場合のカメラ１の画角の幅Ｗｉは、
Ｗｉ＝Ｄ２×ｔａｎΘ０ …（２）
により表わされ、上記図７（ａ）に示すカメラ１の画角の幅Ｗｉよりも広く出来る。このカメラ１の画角の幅Ｗｉは、水平方向に広くなる。このようにカメラ１の画角の幅Ｗｉが広くなると、自分撮りしたときのユーザＨの背景部の画像を広くできる。

次に、本装置による自分撮りの撮影方法について説明する。
第１の自分撮りの撮影方法は、図４に示すガイダンスＧ２「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」に従った方法である。
ユーザＨは、上記図７（ｂ）に示すように図３に示すガイダンスＧ１に従って「手を伸ばし撮影レンズをこちらに向けて安定させて構えて下さい」の状態にカメラ１を配置する。かかるカメラ１を配置した状態で自分撮りすると、図１０に示すような撮像画像データＳ１が取得される。この撮像画像データＳ１には、ユーザＨが撮像されている。

次に、ユーザＨは、図８又は図９に示すように図４に示すガイダンスＧ２の「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」に従ってカメラ１を水平方向に回動角Θ１を持って回動（傾ける）する。なお、回動角Θ１の変化は、回動判定部８により検出される。図８はカメラ１をユーザＨから遠ざける方向に回動し、図９はカメラ１をユーザＨに近付ける方向に回動する場合を示す。
次に、かかるカメラ１を水平方向に回動角Θ１を持って回動中に自分撮りすると、図１０に示すような撮像画像データＳ２が取得される。この撮像画像データＳ２は、図８に示すようにカメラ１をユーザＨから遠ざける方向に回動角Θ１を持って回動した後に、自分撮りして取得される。この撮像画像データＳ２は、ユーザＨが画角から外れて写し出されていないが、ユーザＨの背景部の画像部分Ｓ２ａが撮像されている。
従って、図１０に示す撮像画像データＳ１と、カメラ１をユーザＨから遠ざける方向に回動角Θ１を持って回動した後の撮像画像データＳ２とが取得されると、撮像画像データＳ１に対してユーザＨの背景部の画像部分Ｓ２ａを繋ぎ合わせる。この結果、ユーザＨの背景部を拡張した合成画像データＧを作成することが出来る。この合成画像データＧは、撮像画像データＳ１よりも回動角Θ１を持って傾けた分だけ画角が広くなっている。

かかるユーザＨの背景部を拡張した合成画像データＧを作成するために、画像処理・制御部２は、ユーザＨである人物等の主要被写体を含む一方の撮像画像データ、例えば撮像画像データＳ１に対してカメラ１が回動した後に取得される他方の撮像画像データ、例えば撮像画像データＳ２中の背景部の画像データＳ２ａを繋ぎ合わせる。
このうち画像処理・制御部２の合成部２３は、当該画像処理・制御部２の画像処理のうち撮像画像データＳ１に対してカメラ１が回動した後に取得される撮像画像データＳ２中の背景部の画像データＳ２ａを繋ぎ合わせることを行う。

第２の自分撮りの撮影方法は、図５に示すガイダンスＧ３「カメラを水平にしたまま腕を引くように回して下さい」に従った方法である。
図１１に示すようにユーザＨは、手にカメラ本体１を把持し、腕全体を自身の背側に向けて、カメラ本体１を水平にしたまま腕を引くように回す。このときのユーザＨの肩を中心とするカメラ本体１の傾き角すなわち回動角をΘ２とする。

先ず、ユーザＨは、図３に示すガイダンスＧ１に従って「手を伸ばし撮影レンズをこちらに向けて安定させて構えて下さい」の状態にカメラ１を配置する。かかるカメラ１を配置した状態で自分撮りすると、図１２に示すような撮像画像データＫ１が取得される。この撮像画像データＫ１には、ユーザＨが撮像されている。

次に、かかるカメラ１を水平方向に回動中に自分撮りすると、図１２に示すような撮像画像データＫ２が取得される。この撮像画像データＫ２は、図１１に示すようにカメラ本体１を水平にしたまま腕を引くように回動中に自分撮りして取得される。この撮像画像データＫ２は、撮像画像データＫ１に加えてユーザＨの背景部の画像部分Ｋ２ａが拡張して撮像されている。
さらに、かかるカメラ１を水平方向に回動角Θ２を持って傾けた後に自分撮りすると、図１２に示すような撮像画像データＫ３が取得される。この撮像画像データＫ３は、撮像画像データＫ２に加えてユーザＨの背景部の画像部分Ｋ３ａ分がさらに拡張して撮像されている。なお、回動角Θ２の変化は、回動判定部８により検出される。
従って、図１２に示す撮像画像データＫ１と、カメラ１を水平にしたまま腕を引くように回動中に自分撮りして取得した撮像画像データＫ２の画像部分Ｋ２ａと、回動角Θ２を持って回動後の撮像画像データＫ３の画像部分Ｋ３ａとを繋ぎ合わせる。この結果、ユーザＨの背景部を拡張した合成画像データＪを作成することが出来る。この合成画像データＧは、撮像画像データＫ１よりも回動角Θ２を持って傾けた分だけ画角が広くなっている。

かかるユーザＨの背景部を拡張した合成画像データＪを作成するために、画像処理・制御部２の合成部２３は、ユーザＨである人物等の主要被写体を含む一方の撮像画像データ、例えば撮像画像データＫ１に対してカメラ１が回動した後に取得される他方の撮像画像データ、例えば撮像画像データＫ２、Ｋ３中の背景部の各画像データＫ２ａ、Ｋ３ａを繋ぎ合わせる。
このような第２の自分撮りの撮影方法でのカメラ本体１の回動では、図１２に示すように常にユーザ自身の顔部が撮像される可能性が高く、少しずつ背景部の領域が拡張する。又、当該撮影方法では、ユーザＨ等の主要被写体に対して視差を異ならして撮像するので、後述するようにユーザ自身の顔部の画像データを切り出すことが可能であり、３次元（３Ｄ）によって合成画像データＪを表示することが可能である。

次に、ユーザ自身の顔部の画像データの切り出しについて説明する。
図１３は撮像部３の概略構成図を示す。この撮像部３は、３Ｄ用のカメラであって、２つの撮影レンズ３０、３１と、２つの撮像素子３２、３３とを有する。各撮影レンズ３０、３１は、間隔Ｘ１だけずれて配置されている。
上記図１２に示す各撮像画像データＫ１〜Ｋ３は、間隔Ｘ１だけずれた各撮影レンズ３０、３１の各場所から例えば人物Ａと背景Ｂとを撮影した場合に相当し、これら撮影レンズ３０、３１の間隔Ｘ１に対応する視差を持つ。撮影を行うユーザから人物Ａまでの距離と背景Ｂまでの距離とに差がある場合、三角測量の原理に従って人物Ａと背景Ｂとの各像がそれぞれ各撮影レンズ３０、３１を通して各撮像素子３２、３３に入射する相対位置が異なる。すなわち、一方の撮像素子３２上において人物Ａと背景Ｂの各入射位置の差がＸ１１であり、他方の撮像素子３３上において人物Ａと背景Ｂの各入射位置の差がＸ１２であり、これらＸ１１、Ｘ１２が撮影レンズ３０、３１の間隔Ｘ１に対応する視差となる。これらＸ１１、Ｘ１２は、互いに異なり、Ｘ１１≠Ｘ１２の関係となる。

従って、当該３Ｄ用の撮像部３によって視差を有する撮影を行って図１２に示すような例えば３つの撮像画像データＫ１、Ｋ２、Ｋ３を取得する。図１４はかかる各撮像画像データＫ１、Ｋ２、Ｋ３のユーザＨの画像データの位置を揃えて配置した図を示す。同図から各撮像画像データＫ１、Ｋ２、Ｋ３においてユーザＨの各画像データは一致度が高いが、背景部は一致度が低くなる。図１５は各撮像画像データＫ１、Ｋ２、Ｋ３を重ね合わせたもので、ユーザＨの画像データを一致させると、背景部は一致しないことが分る。

このような視差を有する撮影により例えば各撮像画像データＫ１、Ｋ２、Ｋ３を取得すると、これら撮像画像データＫ１、Ｋ２、Ｋ３からユーザＨの画像のみを切り出すことが可能である。この切り出したユーザＨの画像データは、拡大・縮小処理することが可能である。拡大・縮小処理したユーザＨの画像データは、例えば図１２に示す合成画像データＪに再配置することが可能である。図１６は合成画像データＪに拡大・縮小処理したユーザＨの画像データを再配置した再配置画像データＬの一例を示す。この再配置画像データＬは、各撮像画像データＫ１、Ｋ２、Ｋ３におけるユーザＨの画像の位置よりも画像中左側に配置されている。

次に、カメラを用いた自分撮りを含むカメラ制御について図１７に示すカメラ制御フローチャートに従って説明する。
ユーザによる操作判定部４の操作によりカメラ１の動作モードが設定される。画像処理・制御部２は、ステップＳ１０１において、操作判定部４に対するユーザ操作の各種ボタンを読み取り、動作モードが撮影モードか否かを判定する。この判定の結果、撮影モードであれば、画像処理・制御部２は、ステップＳ１０２において、自分撮りであるか否かを判定する。この判定の結果、自分撮りでなければ、画像処理・制御部２は、ステップＳ１０３において、撮像部３から出力される画像信号を画像処理し、スルー画像として表示部６に表示する。

画像処理・制御部２は、ステップＳ１０４において、ユーザの操作判定部４に対する操作により撮影開始指示がなされたか否かを判定する。この判定の結果、撮影開始指示がなされると、画像処理・制御部２は、ステップＳ１０５において、例えば静止画の撮影であれば、撮像部２を動作させることで静止画像データを取得する静止画撮影を実行する。動画撮影であれば、画像処理・制御部２は、ステップＳ１０５において、撮像部３を連続動作させて動画像データを取得する動画撮影を実行する。
静止画撮影又は動画撮影の終了後、画像処理・制御部２は、ステップＳ１０６において、画像ファイルを作成し、作成した画像ファイルを記録部４に記録する。画像ファイルの作成後、画像処理・制御部２は、静止画又は動画のデータを表示部６に表示する。

次に、画像処理・制御部２は、ステップＳ１０８において、ユーザによる操作判定部４の操作により電源オフの指示がなされたか否かを判定する。電源オフの指示があれば、画像処理・制御部２は、カメラ制御を終了する。電源オフの指示が無ければ、画像処理・制御部２は、ステップＳ１０１に戻る。

カメラ１の動作モードが撮影モードでなければ、画像処理・制御部２は、ステップＳ１０１からステップＳ１２１に移り、再生モードであるか否かを判定する。この判定の結果、再生モードであれば、画像処理・制御部２は、ステップＳ１２２において、記録部５に記録されている静止画及び動画の各ファイルを表示部６上に一覧表示（サムネイル表示）する。これら静止画及び動画の各ファイルのいずれかが表示部６上でユーザのタッチにより選択されると、タッチパルネ７は、ステップＳ１２３において、タッチ位置に対応するタッチ位置信号を出力する。

画像処理・制御部２は、ステップＳ１２４において、タッチパルネ７からのタッチ位置信号から表示部６上に一覧表示されている静止画及び動画の各ファイルからタッチにより選択された静止画又は動画を表示部６に再生する。
ユーザのタッチにより静止画及び動画のファイルの選択がなければ、画像処理・制御部２は、ステップＳ１２５において、再生モードを終了し、次のステップＳ１０８において、電源オフの指示がなされたか否かを判定する。電源オフの指示がなければ、画像処理・制御部２は、ステップＳ１０９において、再度、撮影モード又は再生モードの変更操作の受付を行い、ステップＳ１０１に戻る。

一方、画像処理・制御部２は、ステップＳ１０２において、操作判定部４に対するユーザ操作の各種ボタンを読み取り、自分撮りモードであることを判定すると、ステップＳ１１１に移り、ガイダンス報知部２４に自分撮りモードのガイダンスを行う指示を発する。このガイダンス報知部２４は、例えば図３に示すような自分撮りのためのガイダンスＧ１「手を伸ばし撮影レンズをこちらに向けて安定させて構えて下さい」を表示部６に表示する。

画像処理・制御部２は、ステップＳ１１２において、撮像部３から出力される画像信号を画像処理し、撮像画像データ内の所定の位置に主要被写体としてユーザの顔部が正しく配置されているか否かを判定する。すなわち、画像処理・制御部２は、ユーザの顔部が例えば図１０に示す撮像画像データＳ１のように当該撮像画像データＳ１内の例えば右側にあるか否かを判定する。この判定において、顔検出部２２は、例えば撮像画像データからユーザの顔部を検出すると共に、当該顔部の位置を検出する。画像処理・制御部２は、顔検出部２２により検出されたユーザの顔部の位置が撮像画像データ内の例えば右側にあるか否かを判定する。

この判定の結果、ユーザの顔部の位置が撮像画像データ内の例えば右側になければ、画像処理・制御部２は、ステップＳ１１３に移り、ガイダンス報知部２４に警告を発するように指示する。このガイダンス報知部２４は、例えば警告「カメラを正しく構えて初めからやり直して下さい」を表示部６に表示する。このガイダンス報知部２４は、スピーカを鳴動させることにより同警告を音声によりユーザに案内してもよい。ガイダンス報知部２４は、例えば警告中に、「顔部の位置を撮像画像データ内の右側に配置してください」を表示すると共に、同警告をスピーカを鳴動させて音声によりユーザに案内してもよい。

ユーザの顔部の位置が撮像画像データ内の例えば右側に存在すれば、画像処理・制御部２は、ステップＳ１１４において、カメラ本体１の姿勢が安定しているか否かを判定する。このカメラ本体１の姿勢が安定しているか否かの判定は、例えば回動判定部８によって行われる。この回動判定部８は、各加速度センサから出力される各加速度信号又は方位センサから出力される方位信号からカメラ本体１の傾き及びｘｙｚのいずれかの方向に回動しているのかを判定する。例えば、回動判定部８は、カメラ本体１が予め定められた方向、例えば水平方向に回動しているか否かを判定し、この判定信号を出力する。カメラ本体１の水平方向への回動は、レリーズボタン４ａが設けられているカメラ本体１の上面を上方に向けた状態を保ちながら水平方向へ回転移動することである。

これと共に、画像処理・制御部２は、ユーザの顔部の位置が一定期間継続して安定していることを判定するために時計部９のカウント値を読み取って一定期間の継続を判定する。この判定の結果、ユーザの顔部の位置が一定期間継続して安定していなければ、画像処理・制御部２は、上記ステップＳ１１３に移る。

ユーザの顔部の位置が一定期間継続して安定していると、画像処理・制御部２は、ステップＳ１１５において、ガイダンス報知部２４に対して次のガイダンスを行う指示を発する。このガイダンス報知部２４は、カメラを横に回動させるための指示、例えば図４に示すようなガイダンスＧ２「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」を表示部６に表示する。これに加えてガイダンス報知部２４は、撮影ガイダンス「撮影を行って下さい」を表示部６に表示する。このガイダンス報知部２４は、スピーカを鳴動させることにより同ガイダンスＧ２等を音声によりユーザに案内してもよい。

撮影のガイダンス「撮影を行って下さい」に従ってユーザがレリーズボタンを押し操作すると、撮像部３は、人物等の主要被写体を含む被写体からの光像を撮像してその画像信号を出力する。画像処理・制御部２は、ステップＳ１１６において、撮像部３から出力された画像信号を入力し、画像処理等を行って撮像画像データを取得し、この撮像画像データを一時的に仮記録部２１に記録する。この撮像画像データは、例えば図１０に示すように撮像画像データＳ１である。

ユーザＨは、例えば図４に示すガイダンスＧ２の「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」に従って図８に示すようにはカメラ１をユーザＨから遠ざける方向に回動（傾ける）する。

カメラ１の回動中、画像処理・制御部２は、ステップＳ１１７において、回動判定部８から出力される各加速度信号又は方位信号に基づいてカメラ本体１の回動角を求め、当該カメラ本体１が予め設定された角度、例えば図１０に示す回動角Θ１だけ回動したか否かを判定する。この判定の結果、カメラ本体１が予め設定された回動角Θ１だけ回動すると、画像処理・制御部２は、ステップＳ１３１において、ガイダンス報知部２４は、撮影ガイダンス「撮影を行って下さい」を表示部６に表示する。このガイダンス報知部２４は、スピーカを鳴動させることにより同ガイダンスＧ２等を音声によりユーザに案内してもよい。

撮影のガイダンス「撮影を行って下さい」に従ってユーザがレリーズボタンを押し操作すると、撮像部３は、被写体からの光像を撮像してその画像信号を出力する。画像処理・制御部２は、ステップＳ１３２において、撮像部３から出力された画像信号を入力し、画像処理等を行って撮像画像データを取得し、この撮像画像データを一時的に仮記録部２１に記録する。この撮像画像データは、例えば図１０に示すように撮像画像データＳ２である。

画像処理・制御部２の合成部２３は、ステップＳ１３３において、仮記録部２１に記録されている各撮像画像データＳ１、Ｓ２を合成し、図１０に示すように撮像画像データＳ１に対してユーザＨの背景部の画像部分Ｓ２ａを繋ぎ合わせる。この結果、ユーザＨの背景部を拡張した合成画像データＧを作成する。この合成画像データＧは、撮像画像データＳ１よりも回動角Θ１で傾けた分だけ画角が広くなっている。

一方、上記ステップＳ１１５において、ガイダンス報知部２４が例えば図５に示すようなガイダンスＧ３「カメラを水平にしたまま腕を引くように回して下さい」を表示部６に表示し、かつ撮影ガイダンス「撮影を行って下さい」を表示部６に表示すると、ユーザはレリーズボタンを押し操作する。このときの撮像部３は、図１３に示すような３Ｄ用のカメラであるとする。この撮像部３は、人物等の主要被写体を含む被写体からの光像を撮像してその画像信号を出力する。画像処理・制御部２は、ステップＳ１１６において、撮像部３から出力された画像信号を入力し、画像処理等を行って撮像画像データを取得し、この撮像画像データを一時的に仮記録部２１に記録する。この撮像画像データは、例えば図１４に示すように撮像画像データＫ１である。

カメラ１の回動中、画像処理・制御部２は、ステップＳ１１７において、回動判定部８から出力される各加速度信号又は方位信号に基づいてカメラ本体１の回動角Θ２を求め、当該カメラ本体１が予め設定された角度だけ回動したか否かを判定する。この判定の結果、カメラ本体１が予め設定された回動角だけ回動すると、画像処理・制御部２は、ステップＳ１３１において、ガイダンス報知部２４に対して撮影ガイダンス「撮影を行って下さい」を表示部６に表示させる指令を発する。これにより、上記同様に、ユーザがレリーズボタンを押し操作すると、画像処理・制御部２は、ステップＳ１３２において、例えば図１４に示すような撮像画像データＫ２を取得し、この撮像画像データＫ２を仮記録部２１に一時的に記録する。
画像処理・制御部２の合成部２３は、ステップＳ１３３において、仮記録部２１に記録されている各撮像画像データＫ１、Ｋ２を読み出し、図１２に示すように撮像画像データＫ１と、カメラ１を水平にしたまま腕を引くように回動中に自分撮りして取得した撮像画像データＫ２の画像部分Ｋ２ａとを繋ぎ合わせる。

さらに、カメラ１の回動中、画像処理・制御部２は、回動判定部８から出力される各加速度信号又は方位信号に基づいてカメラ本体１の回動角Θ２を求め、当該カメラ本体１が予め設定された角度だけ回動したか否かを判定する。この判定の結果、カメラ本体１が予め設定された回動角だけ回動すると、画像処理・制御部２は、ステップＳ１３１において、ガイダンス報知部２４に対して撮影ガイダンス「撮影を行って下さい」を表示部６に表示させる指令を発する。これにより、上記同様に、ユーザがレリーズボタンを押し操作すると、画像処理・制御部２は、ステップＳ１３２において、例えば図１４に示すような撮像画像データＫ３を取得し、この撮像画像データＫ３を仮記録部２１に一時的に記録する。
画像処理・制御部２の合成部２３は、ステップＳ１３３において、仮記録部２１に記録されている各撮像画像データＫ３を読み出し、図１２に示すように既に繋ぎ合わせた撮像画像データＫ１、Ｋ２ａの画像データに対して撮像画像データＫ３の画像部分Ｋ３ａを繋ぎ合わせて合成画像データＪを作成する。この合成画像データＪは、撮像画像データＫ１よりも回動角Θ２で傾けた分だけ画角が広くなっている。

画像処理・制御部２は、ステップＳ１３４において、カメラ本体１の回動を終了するか否かを判定する。カメラ本体１の回動の終了は、例えばカメラ本体１を回動させたときに取得する撮像画像データの枚数によって決定してよい。例えば２枚の撮像画像データを取得する設定であれば、撮像画像データＳ１と、カメラ本体１を回動角Θ１だけ傾けたときの撮像画像データＳ２との２枚を取得した時点でカメラ本体１の回動の終了を判定する。２枚以上の撮像画像データを取得する設定であれば、当該枚数の撮像画像データを取得した時点でカメラ本体１の回動の終了を判定する。
この判定の結果、カメラ本体１の回動の終了でなければ、画像処理・制御部２は、ステップＳ１３１に戻る。カメラ本体１の回動の終了であれば、画像処理・制御部２は、ステップＳ１３５に移り、ガイダンス報知部２４に対して終了の指示を送る。ガイダンス報知部２４は、終了のガイダンスとして「撮影を終わります」等を表示部に表示する。このガイダンス報知部２４は、スピーカを鳴動させることにより終了のガイダンスを音声によりユーザに案内してもよい。

次に、画像処理・制御部２は、ステップＳ１３６において、複数の撮像画像データ、例えば図１０に示す撮像画像データＳ１、Ｓ２の２枚の撮像画像データ中にユーザの顔部が１つ存在するか否かを判定する。このとき、顔検出部２２は、例えば撮像画像データＳ１、Ｓ２中にユーザの顔部があれば、当該ユーザの顔部とその数とを検出する。この判定の結果、ユーザの顔部が１つ存在すれば、
画像処理・制御部２は、ステップＳ１４１に移り、例えば図１５に示すように視差の異なる各撮像画像データＫ１、Ｋ２、Ｋ３のユーザＨの画像データの位置を揃えて重ね合わせる。この重ね合わせにより各撮像画像データＫ１、Ｋ２、Ｋ３においてユーザＨの各画像データは一致度が高くなるが、背景部の一致度は低くなる。
従って、画像処理・制御部２は、ステップＳ１４２において、重ね合わせにより各撮像画像データＫ１、Ｋ２、Ｋ３における一致度の低い背景部、すなわち各撮像画像データＫ１、Ｋ２、Ｋ３間で画像の内容が変化している部分を除去する。この背景部の除去により画像処理・制御部２は、各撮像画像データＫ１、Ｋ２、Ｋ３のいずれかの画像データからユーザＨの画像を切り出す。

画像処理・制御部２は、ステップＳ１４３において、切り出したユーザＨの画像データを用いての合成画像データＪの加工処理を行うのか否かを判定する。例えば操作判定部４に対して加工処理を行うことの操作指示があると、画像処理・制御部２は、ステップＳ１４４に移り、切り出したユーザＨの画像データを用いての合成画像データＪの加工処理を行う。

この画像処理・制御部２は、切り出したユーザＨの画像データを合成画像データＪ中に配置する。この画像処理・制御部２は、切り出したユーザＨの画像データを拡大、縮小して合成画像データＪ中に配置する。この画像処理・制御部２は、切り出したユーザＨの画像データを合成画像データＪ中で移動する。この画像処理・制御部２は、切り出したユーザＨの画像データを合成画像データＪ上に配置し、表示部６に例えばユーザＨの画像データを立体表示する。
ユーザＨの画像データを拡大、縮小、移動等の加工処理の選択は、例えば操作判定部４に加工処理の選択ボタン等を設ければよい。ユーザＨの画像データを拡大、縮小の場合、画像処理・制御部２は、例えば図１８に示すように表示部６に合成画像データＪを表示し、かつ表示部６の画面下部に拡大、縮小の各タッチスイッチと、これら拡大又は縮小を不要とするタッチスイッチとを形成する。表示部６の画面上にはタッチパネル７が配置されているので、このタッチパネル７は、ユーザのタッチ操作を受け、例えば拡大等のタッチスイッチのタッチ位置に対応するタッチ位置信号を出力する。

ユーザＨが縮小のタッチスイッチをタッチすると、タッチパネル７は、縮小のタッチスイッチのタッチ位置に対応するタッチ位置信号を出力する。画像処理・制御部２は、タッチパネル７からのタッチ位置信号から縮小のタッチスイッチが操作されたことを判定し、図１９に示すように合成画像データＪ上のユーザＨの画像データを縮小する。
ユーザＨが図２０に示すようにユーザＨの画像データ上のタッチパネル７をタッチし、この状態でタッチパネル７上を移動すると、タッチパネル７は、移動するタッチ位置に追従するタッチ位置信号を出力する。画像処理・制御部２は、タッチパネル７からのタッチ位置信号からタッチ位置の移動位置を判定し、このタッチ位置の移動位置上にユーザＨの画像データを移動させる。
ユーザＨが図２１に示すように拡大のタッチスイッチをタッチすると、タッチパネル７は、拡大のタッチスイッチのタッチ位置に対応するタッチ位置信号を出力する。画像処理・制御部２は、タッチパネル７からのタッチ位置信号から拡大のタッチスイッチが操作されたことを判定し、合成画像データＪ上のユーザＨの画像データを拡大する。
なお、ユーザＨの画像データの縮小、移動、拡大の加工処理がそれぞれ完了（ＯＫ）であれば、ユーザＨがＯＫのタッチスイッチをタッチすることにより、画像処理・制御部２は、縮小、移動、拡大の加工処理をそれぞれ完了する。

このようにユーザＨの画像データを縮小、移動、拡大して合成画像データＪ上に配置すれば、例えば図２２に示すような合成画像データＭを作成できる。この合成画像データＭ及びユーザＨの画像データは、３Ｄ用のカメラの撮像により取得されるので、合成画像データＪ上のユーザＨの画像データを立体表示、すなわちユーザＨを所謂飛び出すように立体表示することができる。

なお、カメラ本体１を回動角Θ１で回動させたときの撮像タイミングは、図２３に示す構図イメージ選択ブロックＦを表示部６に表示して決定するようにしてもよい。この構図イメージ選択ブロックＦで決定したときの撮像タイミングは、図４に示すガイダンスＧ２「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」に従った第１の自分撮りの撮影方法で撮像する場合である。

この構図イメージ選択ブロックＦは、例えばユーザＨの撮像画像データ中の大きさに対応する各撮像タイミングの回動角Θ１を選択可能となっている。この構図イメージ選択ブロックＦには、例えば４つの構図イメージＮ１〜Ｎ４が設けられている。なお、図８に示すようにカメラ１の画角をΘ０とする。
構図イメージＮ１は、回動角Θ１１＝Θ１＝０である。
構図イメージＮ２は、回動角Θ１２＝Θ１＝Θ０／２である。
構図イメージＮ３は、回動角Θ１３＝Θ１＝Θ０×２／３である。
構図イメージＮ４は、回動角Θ１４＝Θ１＝Θ１＝Θ０である。
例えば構図イメージＮ２を選択すると、画像処理・制御部２は、回動角Θ１が０°とΘ０／２°とのときにガイダンス報知部２４に対して撮影ガイダンス「撮影を行って下さい」を表示部６に表示させる指令を発する。これにより、画像処理・制御部２は、回動角Θ１が０°のときに例えば図１０に示すような撮像画像データＳ１を取得し、回動角Θ１がΘ０／２°のときに例えば図１０に示すような撮像画像データＳ２を取得する。
しかるに、画像処理・制御部２は、主要被写体としてユーザＨを撮像するときの複数の構図例えば４つの構図イメージＮ１〜Ｎ４と、カメラ本体１を回動させるためのそれぞれ異なる複数の操作方法のガイダンス例えば図４に示すようなガイダンスＧ２「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」、図５に示すようなガイダンスＧ３「カメラを水平にしたまま腕を引くように回して下さい」とを有し、選択された構図イメージＮ１、Ｎ２、Ｎ３又はＮ４に応じたガイダンスＧ２又はＧ３を表示部６に表示する。

画像処理・制御部２は、ステップＳ１１５において、ガイダンス報知部２４に対して図４に示すようなガイダンスＧ２「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」、又は図５に示すようなガイダンスＧ３「カメラを水平にしたまま腕を引くように回して下さい」を表示部６に表示しているが、上記図２３に示す構図イメージ選択ブロックＦで例えば４つの構図イメージＮ１〜Ｎ４のうちいずれかの構図イメージが選択されると、画像処理・制御部２は、ステップＳ１１５において、図２４に示す自分撮りの撮影方法の指示フローチャートを実行する。

画像処理・制御部２は、ステップＳ２２１において、図２３に示す構図イメージ選択ブロックＦ中で例えば４つの構図イメージＮ１〜Ｎ４のうちいずれかの構図イメージが選択されたか否かを判定する。この判定の結果、４つの構図イメージＮ１〜Ｎ４のうちいずれかの構図イメージが選択されると、画像処理・制御部２は、ステップＳ２２２において、ガイダンス報知部２４に対して図４に示すようなガイダンスＧ２「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」を表示する指示を発する。これにより、ユーザＨは、図８に示すようにガイダンスＧ２「カメラを水平にしたままカメラを遠ざけるように手首を回して下さい」に従った第１の自分撮りの撮影方法で撮像を行う。

４つの構図イメージＮ１〜Ｎ４のうちいずれかの構図イメージが選択されると、画像処理・制御部２は、ステップＳ２２２において、ガイダンス報知部２４に対して図５に示すようなガイダンスＧ３「カメラを水平にしたまま腕を引くように回して下さい」を表示する指示を発する。これにより、ユーザＨは、図１１に示すようにガイダンスＧ３「カメラを水平にしたまま腕を引くように回して下さい」に従った第２の自分撮りの撮影方法で撮像を行う。なお、画像処理・制御部２は、同ステップＳ２２２において、回動角Θ１を指定してもよい。

このように上記一実施の形態によれば、自分撮り時に、回動判定部８によりカメラ本体１の水平方向への回動を判定し、カメラ本体１が水平方向に回動するタイミング、例えば回動開始時、回動中又は回動終了時の各タイミングに撮像部３の撮像により取得された少なくとも２つの撮像画像データを繋ぎ合わせて主要被写体としてユーザＨ等の人物の背景部を拡張した合成画像データを作成するので、ユーザＨ等の自身の顔部の割合が大きくならずにその背景部の画像を大きくすることができる。ユーザＨ等の自身の顔部の背景部は、撮影を行っている場所等が映されるものであり、例えば撮影時の旅行先であるとか、その季節、周囲環境等を思い起こしてその当時の印象を想起することが可能である。

例えば回動開始時、回動中又は回動終了時の各タイミングに撮像部３の撮像により取得する撮像画像データは、２つに限らず、２つ以上の撮像画像データを取得してもよい。撮像画像データの取得数が多くなると、例えばユーザＨ等の人物の背景部の拡張量を大きくすることができる。

さらに、図１２に示すように撮像画像データＫ１〜Ｋ３を重ね合わせて主要被写体として例えばユーザＨ等の人物の画像データを切り出し、この切り出した画像データを合成画像データＪ中の所望の位置に配置できる。この場合、視差を持つ３Ｄ用のカメラを用いればよい。
又、切り出した例えばユーザＨ等の人物の顔部等の主要被写体の画像データを拡大、縮小して合成画像データＪ中に配置できる。
切り出した例えばユーザＨ等の人物等の主要被写体の画像データを合成画像データＪ中で所望の位置に移動できる。
切り出した例えばユーザＨ等の人物の主要被写体の画像データを合成画像データＪ上に配置し、表示部６に例えばユーザＨ等の人物の主要被写体の画像データを立体表示できる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

１：装置本体（カメラ本体）、２：画像処理・制御部、３：撮像部、３ａ：レンズ光学系、４：操作判定部、４ａ：レリーズボタン、５：記録部、６：表示部、７：タッチパネル、８：回動判定部、９：時計部、１０：ガイダンス操作ボタン、１１：回動確認表示器、２１：仮記録部、２２：顔検出部、２３：合成部、２４：ガイダンス報知部。

Claims (13)

1. 本装置に設けられ、被写体として人物及び背景を撮像する撮像部と、
   前記本装置の回動を判定する回動判定部と、
   前記回動判定部により判定された回動に基づいて、少なくとも２つの位置で撮像された各画像データを合成して前記人物の前記背景にあたる画像部分を拡張した合成画像データを作成する画像処理部と、
   前記合成画像データを表示する表示部と、
   を備え、
   前記画像処理部は、前記表示部に表示された前記合成画像データと共に、前記人物を拡大、縮小、又は移動する加工処理の操作指示をさせるための表示を行い、更に、前記加工処理の前記操作指示がされたことに応じて前記人物の画像データを前記拡大、前記縮小、又は前記移動させる処理を行う、
   ことを特徴とする撮像装置。
2. 前記画像処理部は、前記被写体を含む一方の前記画像データに対して前記本装置が回動して後に取得される他方の前記画像データ中の前記背景の画像データを繋ぎ合わせることを特徴とする請求項１記載の撮像装置。
3. 前記画像処理部は、前記各画像データ中から前記被写体の画像データを切り出し、当該被写体の画像データを前記合成画像データ中に配置することを特徴とする請求項１記載の撮像装置。
4. 前記本装置の回動により前記撮像部は、前記被写体に対して視差が異なり、かつ前記被写体を中心部に撮像した前記各画像データを取得し、
   前記画像処理部は、前記視差の異なる前記各画像データ中から前記被写体の画像データを切り出して前記合成画像データ中に配置する、
   ことを特徴とする請求項３記載の撮像装置。
5. 前記画像処理部は、前記加工処理の前記操作指示により、前記拡大又は前記縮小の指示がされると、前記各画像データ中から前記人物の画像データを切り出し、前記拡大又は前記縮小して前記合成画像データ中に配置する合成処理を行うことを特徴とする請求項１記載の撮像装置。
6. 前記画像処理部は、前記加工処理の操作指示により、前記移動の指示がされると、前記各画像データ中から前記人物の画像データを切り出し、移動して前記合成画像データ中に配置する合成処理を行うことを特徴とする請求項１記載の撮像装置。
7. 前記表示部は、前記撮像部の撮像により取得された前記画像データを表示し、
   前記画像処理部は、前記切り出した前記被写体の画像データを前記合成画像データ上に配置し、前記表示部に前記被写体の画像データを立体表示する、
   ことを特徴とする請求項３記載の撮像装置。
8. 前記撮像部は、前記被写体として当該被写体の撮影を行う人物の顔部を撮像し、
   前記画像処理部は、前記人物の顔部の前記背景の画像データを繋ぎ合わせて画角を広くした前記合成画像データを作成する、
   ことを特徴とする請求項１記載の撮像装置。
9. 前記回動判定部は、前記本装置が予め定められた方向に回動しているか否かを判定することを特徴とする請求項１記載の撮像装置。
10. 前記回動判定部は、前記本装置が水平方向に回動しているか否かを判定することを特徴とする請求項９記載の撮像装置。
11. 前記本装置を回動して前記被写体を当該被写体により撮影するためのガイダンスを報知するガイダンス報知部を有することを特徴とする請求項１記載の撮像装置。
12. 前記被写体を撮像するときの複数の構図と、前記本装置を回動させるためのそれぞれ異なる複数の操作方法のガイダンスとを有し、選択された前記構図に応じた前記操作方法のガイダンスを報知することを特徴とする請求項１記載の撮像装置。
13. 前記移動の指示は、前記表示部に対して移動操作することによって行うことを特徴とする請求項６記載の撮像装置。

Images