JP2017055158A - 撮像装置、撮像制御方法及び撮像制御プログラム - Google Patents

Abstract

【課題】キャッチライトを、撮影部により自然な形で目に映り込ませるように撮影を制御するプログラムを提供する。【解決手段】表示部１０は、バックライト１１の照射により表示画面に画像を表示する。撮像部２０は、表示画面の表示側を撮影範囲とし、表示部１０に近接して配置される。選択部７１は、画像一覧を表示画面に表示し、入力操作により画像一覧から画像を選択する。表示制御部７２は、選択部７１によって画像を選択した場合に、選択された画像の輪郭内部が当該輪郭外部よりも高い輝度となるように、画像一覧に替えて選択された画像を表示画面に表示すると共に、表示画面のうち撮像部２０の近接領域に、撮像部２０によって取得されたライブビュー画像を表示画面に表示する。撮像制御部７４は、選択された画像とライブビュー画像を表示した状態で、撮像部２０により撮像する。【選択図】図３

Description

本発明は、撮像装置、撮像制御方法及び撮像制御プログラムに関する。

スマートフォンやタブレット機器などには表示部の周辺枠にカメラが内臓されている。そのような機器が普及するにあたって、「自撮り」（英名: Ｓｅｌｆｉｅ）と呼ばれる自らを被写体として自分で撮影する文化が生まれつつある。そして、スマートフォンやタブレット機器では、通常の撮影に用いるメインカメラとは別に、表示部の表示側にもフロントカメラ（前面カメラ）が設けられるものが一般的となり、フロントカメラを用いて自撮りをすることが益々一般的になってきている。

そして、スマートフォンやタブレット機器によるカメラ撮影では、ライブビュー画像を表示することにより、被写体の状況を確認して撮影する機能もまた一般的となってきている（例えば、特許文献１参照）。

特開２０１５−５７７３４号公報

以上のように自撮りが普及していく中、被写体の画像への特殊効果も求められるようになってきている。そのために、撮影された画像を画像処理することにより、撮影画像をより好ましいものとする技術が多く採用されている。このような被写体に対する画像効果の１つとしてキャッチライトというものがあり、被写体の目に光を映り込ませるものがある。本来は通常のカメラ撮影において光を目に映り込ませるが、目の所望の位置に光を入れることは難しく、従来はこのキャッチライトの効果を画像処理により付加していた。しかしながら自撮り撮影においては、被写体の顔、そして目の大きさがとりわけ多く映ることから、キャッチライトをより自然な形で目に映り込ませることが求められていた。

本発明は、かかる事情に鑑み、撮影部にキャッチライトをより自然な形で目に映り込ませるように撮影を制御するプログラムを提供することを目的とする。

本発明の一形態は、バックライトの照射により表示画面に画像を表示する表示部と、前記表示画面の表示側を撮影範囲とし、前記表示部に近接して配置される撮像部と、を備える撮像装置に対する制御を実行するコンピュータに実行させる撮像制御プログラムである。当該撮像制御プログラムは、画像一覧を前記表示画面に表示し、入力操作により前記画像一覧から画像を選択する選択ステップと、前記選択ステップで画像を選択した場合に、選択された画像の輪郭内部が当該輪郭外部よりも高い輝度となるように、前記画像一覧に替えて前記選択された画像を前記表示画面に表示すると共に、前記表示画面のうち前記撮像部の近接領域に、前記撮像部によって取得されたライブビュー画像を前記表示画面に表示する表示制御ステップと、前記選択された画像と前記ライブビュー画像を表示した状態で、前記撮像部により撮像する撮像制御ステップと、を含む。

本発明によれば、選択された画像を表示部に表示することで、バックライトの光が被写体の目に到達し、撮影に際して、被写体の目にキャッチライトを映り込ませることができる。一方、撮像部に近接した位置にライブビュー画像を表示することから、被写体の目を撮像部の側に合わせて向けさせることが可能となる。従って、バックライトから照射されるキャッチライトが的確に目に映り込み、さらに目線を確保された画像を撮影することができる。キャッチライト画像を取得するためにはバックライトから十分な光量を照射することになることから、被写体の視線方向が揺れる状況に対しても、ライブビュー画像が撮像部に近接した位置に配置されていることで、安定した視線方向を確保することができる。

撮像装置の外観構成を示す平面図である。 撮像装置の機能的構成を示すブロック図である。 制御部の機能的構成を示すブロック図である。 画像一覧からの画像の選択処理について説明する図である。 キャッチライト撮影画像を示す画面である。 キャッチライト画像の編集処理を説明する表示画面である。 複数のキャッチライト画像を表示する場合を説明する表示画面である。 キャッチライト撮影の一連の処理を説明するフローチャートである。 撮影時のユーザ操作の概要を示す図である。 撮影終了後の表示画面を示す図である。 複数の画像を連写撮影する場合の一連の処理を説明するフローチャートである。 撮像装置を携帯用ゲーム装置に適用した場合の外観を説明する図である。 撮像装置を据置型装置に適用した場合の外観を説明する図である。

図１は、撮像装置の外観構成を示す平面図である。図１に示す撮像装置は、近接センサ９、表示部１０、スピーカ１２、ボタン１３、撮像部２０を表面に備える。撮像装置及び表示部１０は長方形に形成されている。表示部１０は、画像を表示する表示面を有するディスプレイであり、タッチ操作により入力操作が可能なタッチパネルとしても機能する。

撮像部２０はフロントカメラ（前面カメラ）として説明する。背面にメインカメラを有する。撮像部２０は表示部１０の表示画面の表示側を撮影範囲とし、表示部１０の表示画面に近接して配置される。近接するというのは、撮像部２０は表示部１０に隣接、近接していることを含む概念であるが、撮像部２０と表示部１０の間に何らかの部材が介在することもあることから、撮像部２０の位置は表示部１０の近くにあるという意味で近接するという言葉を用いる。もちろん、表示部１０は十分に大きな領域を有しているので、撮像部２０の側と反対側の位置では撮像部２０と近接していることにならないが、少なくとも表示部１０の一部領域においては撮像部２０に近接するという意味を含む。図１では撮像装置の外観的構成を示したので、次に撮像装置の機能的構成を説明する。

図２は、撮像装置の機能的構成を示すブロック図である。撮像装置は、表示部１０と、撮像部２０と、制御部３０と、入力部４０と、通信部５０を備える。

表示部１０は、撮像画像を含め各種画像を表示可能な液晶型表示装置であり、その背面（表示面との対向面）にはバックライト１１が配置され、バックライト１１の照射により表示画面に画像を表示する。表示部１０の輝度は、バックライト１１の輝度を変化させることで変化する。表示部１０には、バックライト１１と反対側の表示面側に重ねてタッチパネルが配置され、人の指等が触れた位置の情報を出力する。

バックライト１１は、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）を光源として、導光板を介して表示部１０の液晶を背面から照明する。光源はＬＥＤに限定されずその他冷極陰管が採用されてもよいし、また、方式もエッジライト方式に限定されずその他直下型方式が採用されてもよい。バックライト１１の光源として、ＲＧＢの各ＬＥＤを採用し、バックライト１１からの光の輝度に加えてさらに、色合いも自在に可変設定できる。

撮像部２０は、ＣＣＤやＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を有し、該撮像素子に結像した被写体の画像信号を生成し出力する。撮像部２０で撮影された画像を表示部１０に表示する。撮像部２０は、例えばデジタルカメラであり、ユーザによるシャッタタイミングを指示する所定の操作に基づいて、当該ユーザを被写体として撮像して、その結果得られる撮像画像のデータを記録するまでの一連の処理を実行することができる。撮像部２０によって撮像装置はデジタルカメラとして実現されるが、コンパクト型でも一眼レフ型でも、スマートフォン内蔵型でもいずれでもよい。本実施の形態では、撮像装置はスマートフォン内蔵型として説明する。また、携帯型のカメラに限らず、筐体型の写真撮影機として撮像装置を実現してもよい。

撮像部２０は、光学レンズ部と、イメージセンサと、を備えている。光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。

イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）等から構成される。光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。

ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部２０の出力信号として出力される。このような撮像部２０の出力信号が、撮像画像のデータである。

制御部３０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）３２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）３３と、画像処理部３４と、メモリ３５を備えている。ＣＰＵ３１、ＲＯＭ３２、ＲＡＭ３３、画像処理部３４及びメモリ３５は、バスを介して相互に接続されている。

ＣＰＵ３１は、ＲＯＭ３２に記録されているプログラム、又はメモリ３５からＲＡＭ３３にロードされたプログラムに従って各種の処理を実行する。ＲＡＭ３３には、ＣＰＵ３１が各種の処理を実行する上において必要なデータ等も適宜記憶される。

画像処理部３４は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）や、ＶＲＡＭ（Ｖｉｄｅｏ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等から構成されており、ＣＰＵ３１と協働して、画像のデータに対して各種画像処理を施す。例えば、画像処理部３４は、撮像部２０から出力される撮像画像のデータに対して、ノイズ低減、ホワイトバランスの調整、手ぶれ補正等の画像処理を施す。

メモリ３５は、ＤＲＡＭやキャッシュメモリ、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等何らかの記憶媒体が挙げられる。メモリ３５は、バスにより接続されるもののみならず、ドライブを介して読み書きされるものも含まれる。本実施形態で記憶されたデータは、一時的記憶も不揮発性メモリによる長期記憶の場合も、このメモリ３５にいったん記憶するものとして説明する。

制御部３０には入出力インターフェースが接続されている。入出力インターフェースを介して、表示部１０、撮像部２０、入力部４０、通信部５０が接続されている。入力部４０は、各種ボタンにより構成され、ユーザの指示操作を受け付ける。通信部５０は、インターネットを含むネットワークを介して他の装置との間で行う通信を制御する。

以上の各構成により、撮像装置は撮像部２０によって被写体を撮影することができ、撮影結果を表示部１０に表示することができる。本実施の形態では、さらに表示部１０に画像を表示することにより、バックライト１１により照射された表示内容を被写体の目に映り込ませてキャッチライトの効果を発生させる。そしてキャッチライトが被写体の目に映った状態で撮像部２０によって撮影する動作について説明する。

すなわち、キャッチライトとして被写体の目に映り込ませる画像を表示部１０に表示させ、その一方で表示部１０にライブビュー画像を表示して被写体の視線を撮像部２０の方向に保ち、その状態で撮影を行う動作について説明する。

図３は、制御部の機能的構成を示すブロック図である。制御部３０は、選択部７１と、表示制御部７２と、タッチパネル制御部７３と、撮像制御部７４を備える。以上の制御部３０の各機能的構成は、図２に示したＣＰＵ３１、ＲＯＭ３２、ＲＡＭ３３、画像処理部３４及びメモリ３５の協働動作により機能的に実現される。これらの各部の機能は電子回路又はプログラムによって提供されるモジュール構成であり、プログラムについてはＲＯＭ３２に格納され、ＣＰＵ３１により適宜読み出しながら各部と協働することで実行される。

選択部７１は、複数の一覧項目から、１つ又は複数の項目（少なくとも一覧項目の数よりは少ない）を選択する選択処理を実行する機能的構成である。特にキャッチライト照射撮影の処理を行うとき、選択部７１は、画像一覧を表示部１０の表示画面に表示し、入力操作により画像一覧からいずれかの画像を選択する。選択部７１は、１つの画像のみを表示することによりキャッチライト撮影をするときには、１つの画像のみを選択するが、２つ以上の画像を組み合わせて表示する場合や、２つ以上の画像を切り替えて表示しながら撮影する場合には、複数の画像を選択する。

以上の選択処理について入力操作を行うが、入力操作は入力部４０による入力に基づき行うことができる。又は表示制御部７２を介して表示された画像に対するタッチパネル操作に基づき行うことができる。タッチパネル操作は、タッチパネル制御部７３による入力に基づき行う。選択のための画像表示については、表示制御部７２に基づき表示処理を行う。このように、選択部７１の動作は、表示制御部７２及びタッチパネル制御部７３と協働動作することにより実現することができる。

表示制御部７２は、表示部１０に対する表示処理を実現する機能的構成である。つまり、表示制御部７２は、メモリ３５に保持されている静止画像や動画像を、表示部１０で表示可能な信号に変換して表示部１０に送信する機能的構成である。また、撮像部２０によって撮像された静止画像や動画像を表示部１０で表示する制御を実行する。

表示制御部７２は、本実施の形態にかかる最初の動作処理において、キャッチライト画像として選択対象となる複数の画像を一覧として表示部１０に表示する。そして、選択部７１によって画像を選択した場合に、選択された画像の輪郭内部が当該輪郭外部よりも高い輝度となるように、画像一覧に替えて選択された画像を表示画面に表示すると共に、表示画面のうち撮像部２０の近接領域に、撮像部２０によって取得されたライブビュー画像を表示画面に表示する。

タッチパネル制御部７３は、表示部１０に設けられたタッチパネルを介して入力されたタッチ操作の検出に対して、入力内容を判定確認し、表示制御部７２及び撮像制御部７４の動作を制御する。タッチパネル制御部７３は、表示制御部７２への指示によりタッチ操作に必要な画面を表示部１０に表示し、入力を検出して操作内容を制御部３０内の各部へ送る。

撮像制御部７４は、撮像部２０に対する制御処理を実行する。例えば撮像制御部７４は、撮像部２０に対して撮像開始の信号を送ることにより撮像部２０に撮像動作を実行させ、撮像された結果の静止画像や動画像を受け取る処理を実行する。その他の露光やフォーカスなどの各種制御も撮像部２０に対して実行する。また撮像制御部７４は、選択された画像とライブビュー画像を表示した状態で、撮像部２０により撮像する。以上の各部の動作について、図４以降を参照することにより説明する。

図４は、画像一覧からの画像の選択処理について説明する図である。タッチパネル操作や入力部４０に対する入力操作によりキャッチライト撮影の撮影指示が入力されたとき、表示制御部７２は、図４に示す画像一覧７９を表示部１０に表示する。図４に示すように、３ｘ４に分割された各領域に、ハート形、星形、ダイヤ型等の各種画像を表示する。この画像一覧７９が、キャッチライト撮影に用いる画像の一覧であり、ユーザはこの中からタッチパネル操作や入力部４０を介して入力操作し、これに応答して選択部７１は画像を選択する。例えば、星形の画像８０を選択する。１つだけでなく複数の画像を選択するモードを備えることも可能であるが、その場合については後述する。

なお図４では画像一覧７９を、選択対象となる縮小画像を並べたものとして示しているが、必ずしも画像そのものを表示して選択しなければならないものではなく、各画像のファイル名などの文字列を表示するものでもよく、この場合、選択対象となる画像を特定する何らかの指定方法により、星形の画像８０を選択することもできる。

図５は、キャッチライト撮影画像を示す画面である。選択部７１が星形の画像８０を選択した場合、表示制御部７２は、表示画面全体にわたってキャッチライト画像８１を表示する。このキャッチライト画像８１は、輪郭の内部の輝度が高く、輪郭の外部は輝度が小さい又は０である。色については、輪郭の内外で照射内容を変えるべく、輪郭の内部は白とし、輪郭の外部は、黒にしてもよい。輪郭は、図形の一番外の縁を通る線であり、その内側に線が生じるような図形の場合は、一番外側の線を本実施形態の輪郭とする。

このキャッチライト画像８１を表示することにより、バックライト１１は光をこの星形の光として被写体の目に投射し、撮影時のキャッチライトを形成する。図５の時点ではまだ撮影は完了していない。撮影をするために、表示制御部７２は、表示部１０の中でも特に撮像部２０に近接する近接領域８２に、ライブビュー画像８３を表示する。

近接領域８２は、図５に示すように、撮像部２０に近接する位置にあり、長方形又は正方形などの内部を取り囲む矩形領域である。ここでは長方形としたが、角を丸にしたり、全体を円形形状にしてもよい。その大きさは、図４に示した画像一覧７９のうちの１領域（星形の画像８０の領域等）と同程度又はこれより小さい程度の大きさとする。図４に示した画像一覧７９は１２分割されているので、そのうちの１つは表示画面の１２分の１の大きさとなる。

そして、少なくとの１２分割されたうちの一番上の３領域の線よりも上の位置に近接領域８２は位置する。言い換えると、表示画面のうち撮像部２０側の第１辺（一番上の辺）と第１辺の反対側の第２辺（一番下の辺）の中間、すなわち、第１辺第２辺に平行な中間を通る線を第１線とする。そして、この第１線よりも第１辺の側であって、第１線と前記第１辺の中間を通る線を第２線とする。近接領域８２は、この第２線よりも前記第１辺の側に位置し、前記表示画面の１２分の１以下の大きさである。

大きさについては、被写体を確認できる程度の大きさの確保と、ライブビュー画像８３がキャッチライト撮影に影響を及ぼさない程度の小ささの確保の兼ね合いにより決まる。ただし、被写体は撮影者でもあり、また特に被写体の顔を撮影する目的上、被写体自身は表示部１０に十分近づいていることからある程度小さくても確認する上ではあまり支障を生じない。したがって、近接領域８２の大きさは、図４に示した画像一覧７９のうちの１領域の半分程度、２４分の１とすることができる。具体的には、１２分の１から２４分の１の間で設定する。

この近接領域８２の大きさは変更可能である。大きさは、あらかじめ設定画面で数値により設定してもよいが、ユーザがピンチイン／ピンチアウト操作することにより、タッチパネル制御部７３が操作を認識し、表示制御部７２は、近接領域８２の大きさを拡大／縮小することができる。大きさを拡大することにより、ライブビュー画像８３を視認しやすくなり、大きさを縮小することにより、キャッチライト撮影に対するライブビュー画像８３の影響を縮小することができる。キャッチライト画像８３が表示された状態で拡大縮小操作をすることができるので、撮影の際のタイミングから元の画面に戻らなければならない不都合が解消される。

もちろん、近接領域８２の大きさの大きさ／小ささには限度があることから、ピンチイン操作に対しても例えば２４分の１ならこれを限度とし、ピンチアウト操作に対しても、１２分の１ならこれを限度としたリミットを設けることができる。このようにリミットを設けることにより、誤った操作による望まない処理を防止することができる。

ここで、ライブビュー画像８３について説明する。撮像制御部７４は、図５に示すキャッチライト撮影画面に移行するとともに、撮像部２０による被写体の撮像動作に移行する。そして、撮像制御部７４は、撮像部２０による被写体の撮像動作が継続されている間、撮像部２０から順次出力される撮像画像（フレーム）のデータを、メモリ３５に一時的に記憶させる、ライブビュー撮像処理を実行する。また、表示制御部７２は、ライブビュー撮像処理時にメモリ３５に一時的に記録された各データを順次読み出して、各々に対応する撮像画像（フレーム）を表示部１０に順次表示させる、ライブビュー表示処理を実行する。このようなライブビュー撮像処理及びライブビュー表示処理の結果として、表示部１０に表示される撮像画像が、ライブビュー画像８３である。

ユーザは、このようなライブビュー画像８３を見ながら、シャッタイミングをはかる。そして、ユーザは、入力部４０又はタッチパネル操作により所望のシャッタタイミングで撮像記録指示を出す。撮像制御部７４は、撮像記録指示の直後に撮像部２０から出力された撮像画像（フレーム）のデータをメモリ３５に記録させる。

図６は、キャッチライト画像の編集処理を説明する表示画面である。上述の説明でライブビュー画像８３の拡大縮小操作について説明したが、キャッチライト画像８１についてもライブビュー画像８３が表示された撮影の際の画面上で編集処理することができる。

表示制御部７２は、キャッチライト画像８１が表示画面に表示されているときに、キャッチライト画像８１の表示態様の変更を指示する入力操作（すなわち、拡大縮小、位置の移動、色彩の変更）に基づき、キャッチライト画像８１の表示態様を変更（すなわち、拡大縮小、位置の移動、色彩の変更）して表示する。そして表示態様を変更された画像を表示した状態で撮像される。特に、図５に示したキャッチライト画像８１に対して、ユーザがピンチイン／ピンチアウト操作することにより、タッチパネル制御部７３が操作を認識し、表示制御部７２は、キャッチライト画像８１の大きさを拡大／縮小することができる。

キャッチライト画像８１については初期設定の状態では最も大きいサイズとしておくので、キャッチライト画像８１をこれ以上大きくすることはできず、逆にピンチイン操作により、大きさが小さくなり、キャッチライト画像８６にまで大きさを小さくすることができる。いったん小さくした後は、再び大きくし直すことができる。

必ずしも瞳の大きさいっぱいに星形、ハート形などの大きさを映したいとは限らないため、入力操作によりユーザにとって好ましい大きさにキャッチライト画像８１の大きさを調節することができる。最も大きいサイズのキャッチライト画像８１については画面上で移動することはできないが、キャッチライト画像８６についてはタッチパネル操作により画面上で位置を操作することができる。その結果、所望の位置でキャッチライト撮影を実現することができる。特にアップ撮影の際にキャッチライトの大きさが大きすぎる場合がありうるので、この場合に大きさを変えることで調節することができる。例えばキャッチライト画像８１を縮小しておいて撮像部２０の近い領域に移動しておくことで、より適切な視線方向を確保することができる。

この他、画像編集画面でキャッチライト画像８１の色を調節してもよい。表示制御部７２は、表示部１０のキャッチライト画像８１の輪郭外部に入力操作領域を表示する。選択部７１は、入力操作に応答してキャッチライト画像８１の輪郭内部の発光色を選択する。そして表示制御部７２は、選択された発光色でキャッチライト画像８１を表示画面に表示する。この後撮像制御部７４は、キャッチライト画像８１を編集後の発光色で表示した状態で、撮像部２０により撮像する。

図７は、複数のキャッチライト画像を表示する場合を説明する表示画面である。図４以降の説明では、選択部７１により１つの星形の画像８０のみを選択した場合を例に挙げて説明したが、１つだけでなく複数の画像を選択することも可能である。そこで、２つの画像を選択した場合の例について説明する。もちろん１つ又は２つだけでなく３つ以上としてもよいが、説明の簡略化のため、図４の星形の画像８０の他にハートマークの画像も選択した場合について説明する。

複数の画像を選択した場合、図７に示すように、表示制御部７２は、キャッチライト画像８６に加え、キャッチライト画像８７の両方を表示画面に表示する。図６の説明ではピンチインにより縮小することによりキャッチライト画像８１をキャッチライト画像８６にしたが、ここでは表示画面に収めるために最初からキャッチライト画像８６の大きさにしている。ハート形のキャッチライト画像８７についても同様である。

したがって、図６の説明と同様に、両方の画像を表示画面上で拡大縮小操作することができるとともに、それぞれ位置を動かすことにより、所望の画像の組み合わせ及び位置関係を実現することができる。あらかじめ用意された画像をそのまま用いてキャッチライト撮影するだけでなく、複数画像を組み合わせることで撮影画像のメッセージ性が高まり、利便性を高めることができる。

図８は、キャッチライト撮影の一連の処理を説明するフローチャートである。まず、入力部４０又はタッチパネル操作による入力操作に基づきキャッチライト撮影が指示されたとき、一連の処理を開始し、まず表示制御部７２は、図４に示した画像一覧７９を表示する（ステップＳ１１）。

表示された画像一覧７９に対してユーザがタッチパネル操作により画像を選択すると、選択部７１は、キャッチライト画像を選択する（ステップＳ１２）。キャッチライト画像が選択されると次は図５に示す撮影画面に移行し、表示制御部７２は、ライブビュー画像８３を近接領域８２に表示する（ステップＳ１３）。そして、表示制御部７２は、選択されたキャッチライト画像８１を、図５に示すように表示画面上に表示する（ステップＳ１４）。ステップＳ１４とステップＳ１５はいずれを先に行ってもよい。

ここで表示したキャッチライト画像８１について、そのまま撮影に移行することもできるが、編集操作がされた場合、タッチパネル制御部７３及び表示制御部７２により、キャッチライト画像８１を編集する（ステップＳ１５）。この画像編集処理については、図６及び図７で説明した通りである。特にステップＳ１２で複数の画像が選択された場合、図７に示した画像編集処理を行う。ステップＳ１５に示す画像編集処理についてはステップＳ１４のタイミングで行うことに限られず、ステップＳ１１、Ｓ１２のタイミングで行ってもよい。

そして、入力部４０又はタッチパネル操作による入力操作に基づき撮影指示がされた場合、撮影制御部７４は、撮影を実行する（ステップＳ１６）。撮影がされたら、撮影制御部７４は撮影された画像を撮像部２０から取得し、表示制御部７２により表示部１０に表示し（ステップＳ１７）、一連の処理を終了する。

図９は、撮影時のユーザ操作の概要を示す図である。図８に示した一連の処理の間、ユーザは図９に示した撮像装置との位置関係で撮影を行う。撮像装置を被写体に近づけ、この位置関係で顔写真を撮影する。したがって、星形やハート形の図形を表示部１０に表示した場合、その光が十分大きく被写体の目に到達し、撮影によりキャッチライト画像８１が被写体の瞳に十分に反映された画像を取得することができる。

斜線部分はキャッチライト画像８１の投影部分を示しており、灰色三角形が撮像部２０による撮影範囲を示している。なお、図９ではユーザが撮像装置を上下逆に持つことで撮像部２０が下に位置しているが、正方向に持った時は下を頂点とした三角形となる。このようにキャッチライト画像８１が被写体の目に投影された状態で、被写体を撮影範囲に入れて撮影する。

このとき表示部１０は十分に被写体に近い位置であるのでライブビュー画像８３を表示部１０全体に表示する必要は必ずしもないことから、ライブビュー画像８３を適切に縮小された近接領域８２の範囲内で、撮像部２０に近接した位置に表示する。それにより、ユーザの視線をライブビュー画像８３、撮像部２０側に向けた状態でキャッチライト撮影を実現することができる。特に被写体は撮像装置に顔を近づけている状態であることから、表示画面の撮像部と異なる位置に視線を向けていると、顔が離された通常の状態と比べて視線の方向が不適切な方向となりやすい。

本実施形態によりライブビュー画像８３が被写体の視線方向を誘導することができることから、被写体の目により的確なキャッチライトを反映させた撮影を実現することができる。そして、図１０に示すような撮影画像を得ることができる。図１０は、撮影終了後の表示画面を示す図である。

次に、複数画像によりキャッチライト撮影を行う場合の他の例について説明する。選択部７１により複数画像を選択する場合の例については図７を参照して説明したが、他の例として、画像を複数選択するが、被写体の目に移る画像の数は１つずつという場合について説明する。すなわち連続撮影により、各撮影タイミングのたびにキャッチライト画像を変更して、複数の撮影画像を得る場合の例である。

図１１は、複数の画像を連写撮影する場合の一連の処理を説明するフローチャートである。まずステップＳ１１〜Ｓ１３までは図８に示した場合と同じである。キャッチライト撮影を選択し、画像を選択し、ライブビュー表示する点は共通だからである。ここで、選択部７１は、第１のキャッチライト画像、第２のキャッチライト画像、第３のキャッチライト画像を選択するものとする。

次にＳ１４に進み、表示制御部７２は、第１のキャッチライト画像を表示する。ここでも１回目の画像表示については図８に示した場合と同じである。なお、ステップＳ１５に示す画像編集処理については、必要な場合はステップＳ１１、Ｓ１２のタイミングで行う。

そして、入力部４０又はタッチパネル操作による入力操作に基づき撮影指示がされた場合、撮影制御部７４は、撮影を実行する（ステップＳ１６）。撮影は入力を待たずに自動で行ってもよい。撮影がされたら、撮像制御部７４は、すべての撮影が行われたか否かを判定する（ステップＳ２０）。すべての撮影が終わっていない場合はステップＳ１４に戻り、終わった場合はステップＳ１７に進む。ここでは１回目の撮影が終わったばかりであるからＮｏであり、ステップＳ１４に戻る。

次にステップＳ１４に戻り、第２のキャッチライト画像を表示する。２回目の画像表示についても第１の撮影と同じである。そして、ステップＳ１６で同様に撮影処理を行い、再びステップＳ１４に戻り、３回目の撮影を行う。３回目の撮影が終わった場合は、ステップＳ１７に進む。

撮影制御部７４は撮影された画像を撮像部２０から取得し、表示制御部７２により表示部１０に表示する（ステップＳ１７）。ここで複数の画像を撮影していることから、複数画像を並べて表示してもよく、その中から特定の画像を選択したときに全画面表示するようにしてもよい。

ユーザは画像一覧７９からどれを選択したらいいのか迷うことから、１つ１つ撮影してその結果を見たいと考える場合も想定されるが、１回１回撮影ごとに操作をし直すというのは煩わしい。また、候補となる画像が２つ３つであれば問題ないが、キャッチライト画像として単純な図形だけでなく、様々な形が今後現れることがあり、あるいはキャッチライト画像として撮影した画像自体を用いることも考えられる。

例えば被写体の目の中に人の姿を映したり、又は自分自身の画像を映し出すという特殊効果も考えられる。これは通常で考えれば画像処理で行うのが一般的であるが、被写体の目に光を投影することにより画像処理を伴わない自然なキャッチライト効果で撮影することができれば、より自然な画像として得ることができる。

このようにバリエーション豊富なキャッチライト画像の候補が多大な数となったとき、そのたびに撮影をし直すことはとても煩わしいということになる。本実施の形態では、そのような多くの画像を一度の撮影により得ることができれば、ユーザの利便性を向上させることができる。

（変形例）
上述の実施の形態に係る撮像装置は、スマートホンに適用する場合を例に挙げて説明したが、スマートホンに限る必要はなく、撮像機能及び表示機能を有する装置であれば、いかなる態様のものに適用してもよい。例えば、筐体のテレビゲーム装置、写真シール装置等の筐体型の撮影装置、携帯型ゲーム装置、パーソナルコンピュータ、テレビ受像装置、据置型ゲーム装置に対して適用することもできる。

図１２は、撮像装置を携帯用ゲーム装置に適用した場合の外観を説明する図である。図１ではスマートホンに適用した場合の外観を示したが、図１２ではその代わりに本実施例に係る撮像装置を携帯用ゲーム装置に適用した例を示す。図１２の場合でも図１の場合と同様、図２及び図３に示した機能的構成を備える。

また、表示画面についても図３〜図７に示した通りとなり、動作については図８に示した通りであり、図９〜図１１の場合も同様に適用される。表示部２０Ａ、撮像部２０Ａ、入力部４０Ａの配置については図１２に示した通りであり、それぞれ表示部２０、撮像部２０、入力部４０と同一の機能を有する。

図１３は、撮像装置を据置型装置に適用した場合の外観を説明する図である。図１ではスマートホンに適用した場合の外観を示したが、図１３ではその代わりに本実施例に係る撮像装置をテレビ受像装置、パーソナルコンピュータ、据置型ゲーム装置に適用した例を示す。図１３の場合でも図１の場合と同様、図２及び図３に示した機能的構成を備える。

また、表示画面についても図３〜図７に示した通りとなり、動作については図８に示した通りであり、図９〜図１１の場合も同様に適用される。表示部２０Ｂ、撮像部２０Ｂの配置については図１３に示した通りであり、それぞれ表示部２０、撮像部２０と同一の機能を有する。

本実施の形態に係る撮像装置が、テレビ受像装置等の据置型の装置の場合、入力部４０については、入力部４０Ｂに示すようにリモートコントロール装置としてもよい。入力部４０Ｂに備えられたボタン類を操作することにより、撮像装置に対して指示入力操作をすることにより、表示部１０Ｂの表示処理及び撮像部２０Ｂに対する制御処理を実行する。

本実施の形態に係る撮像装置が、パーソナルコンピュータや据置型ゲーム装置の場合、入力部４０については、入力部４０Ｃに示すようにキーボードとしてもよく、また入力部４０Ｄに示すようにマウスとしてもよく、また入力部４０Ｅに示すようにゲーム機用コントローラとしてもよい。入力部４０Ｂと同様に、備えられた操作入力機能を介して、撮像装置に対して指示入力操作をすることにより、表示部１０Ｂの表示処理及び撮像部２０Ｂに対する制御処理を実行する。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載されたその均等の範囲に含まれる。

１０ 表示部、１１ バックライト、２０ 撮像部、３０ 制御部、３１ ＣＰＵ、３２ ＲＯＭ、３３ ＲＡＭ、３４ 画像処理部、３５ メモリ、４０ 入力部、５０ 通信部、７１ 選択部、７２ 表示制御部、７３ タッチパネル制御部、７４ 撮像制御部

Claims (8)

1. バックライトの照射により表示画面に画像を表示する表示部と、
   前記表示画面の表示側を撮影範囲とし、前記表示部に近接して配置される撮像部と、
   を備える撮像装置に対する制御を実行するコンピュータに、
   画像一覧を前記表示画面に表示し、入力操作により前記画像一覧から画像を選択する選択ステップと、
   前記選択ステップで画像を選択した場合に、選択された画像の輪郭内部が当該輪郭外部よりも高い輝度となるように、前記画像一覧に替えて前記選択された画像を前記表示画面に表示すると共に、前記表示画面のうち前記撮像部の近接領域に、前記撮像部によって取得されたライブビュー画像を前記表示画面に表示する表示制御ステップと、
   前記選択された画像と前記ライブビュー画像を表示した状態で、前記撮像部により撮像する撮像制御ステップと、
   を実行させる撮像制御プログラム。
2. 前記近接領域は、前記表示画面のうち前記撮像部側の第１辺と当該第１辺の反対側の第２辺の中間を通る第１線よりも前記第１辺の側であって、前記第１線と前記第１辺の中間を通る第２線よりも前記第１辺の側に位置し、前記表示画面の１２分の１以下の大きさである、請求項１に記載の撮像制御プログラム。
3. 前記表示制御ステップは、前記選択された画像が前記表示画面に表示されているときに、前記選択された画像の表示態様の変更を指示する入力操作に基づき、前記選択された画像の表示態様を変更して表示し、
   前記撮像制御ステップは、前記表示態様を変更された画像を表示した状態で、前記撮像部により撮像する、請求項１又は２に記載の撮像制御プログラム。
4. 前記表示制御ステップは、前記選択された画像が前記表示画面に表示されているときに、前記選択された画像に対する拡大又は縮小操作の入力操作に対して、前記選択された画像を前記表示画面上で拡大又は縮小して表示し、
   前記撮像制御ステップは、前記選択された画像を前記表示画面上で拡大又は縮小して表示した状態で、前記撮像部により撮像する、
   請求項３に記載の撮像制御プログラム。
5. 前記選択ステップは、入力操作により前記画像一覧から、２以上の画像を選択し、
   前記表示制御ステップは、前記２以上の選択された画像を前記表示画面に表示し、入力操作に対して、選択された前記２以上の画像の前記表示画面上の配置をそれぞれ調整し、
   前記撮像制御ステップは、前記表示画面上の配置を調整された前記２以上の選択された画像を表示した状態で、前記撮像部により撮像する、
   請求項１〜４のいずれか１つに記載の撮像制御プログラム。
6. 前記選択ステップは、入力操作により前記画像一覧から、２以上の画像を選択し、
   前記表示制御ステップは、前記２以上の画像のうち１つを前記選択された画像として前記表示画面に表示し、前記撮像制御部が前記選択された画像を表示した状態で前記撮像部により撮像した後に、前記２以上の画像のうち他の１つを前記選択された画像として前記表示画面に表示し、
   前記撮像制御ステップは、前記２以上の画像のうち１つを表示した状態で前記撮像部により撮像した後、連続動作により前記２以上の画像のうち他の１つを表示した状態で前記撮像部により撮像する、
   請求項１〜３のいずれか１つに記載の撮像制御プログラム。
7. バックライトの照射により表示画面に画像を表示する表示部と、
   前記表示画面の表示側を撮影範囲とし、前記表示部に近接して配置される撮像部と、
   画像一覧を前記表示画面に表示し、入力操作により前記画像一覧から画像を選択する選択部と、
   前記選択部によって画像を選択した場合に、選択された画像の輪郭内部が当該輪郭外部よりも高い輝度となるように、前記画像一覧に替えて前記選択された画像を前記表示画面に表示すると共に、前記表示画面のうち前記撮像部の近接領域に、前記撮像部によって取得されたライブビュー画像を前記表示画面に表示する表示制御部と、
   前記選択された画像と前記ライブビュー画像を表示した状態で、前記撮像部により撮像する撮像制御部と、
   を備える撮像装置。
8. バックライトの照射により表示画面に画像を表示する表示部と、
   前記表示画面の表示側を撮影範囲とし、前記表示部に近接して配置される撮像部と、
   を備える撮像装置に対する制御を実行する撮像制御方法であって、
   画像一覧を前記表示画面に表示し、入力操作により前記画像一覧から画像を選択する選択ステップと、
   前記選択ステップで画像を選択した場合に、選択された画像の輪郭内部が当該輪郭外部よりも高い輝度となるように、前記画像一覧に替えて前記選択された画像を前記表示画面に表示すると共に、前記表示画面のうち前記撮像部の近接領域に、前記撮像部によって取得されたライブビュー画像を前記表示画面に表示する表示制御ステップと、
   前記選択された画像と前記ライブビュー画像を表示した状態で、前記撮像部により撮像する撮像制御ステップと、
   を含む撮像制御方法。