JP2013066190A - 自動写真作成装置、画像処理装置、画像処理方法、および画像処理プログラム - Google Patents

Abstract

【課題】本来よりも利用者の顔が小さく写り、かつ、本来よりも首が長く写った写真シールを出力することのできる自動写真作成装置を提供する。
【解決手段】自動写真作成装置において、撮影（ステップＳ１２１，Ｓ１３１）が行われた後、撮影画像から利用者の顔の輪郭を抽出する顔検出処理（ステップＳ１２３，Ｓ１３３）が行われる。その後、最終的に出力される写真シールにおける利用者の顔が実際の撮影画像における利用者の顔よりも相対的に小さくなるように撮影画像から当該撮影画像に含まれている利用者の顔の輪郭を小さくする小顔処理（ステップＳ１２５，Ｓ１３５）が行われ、落書き対象画像が生成される。その際、写真シールにおける利用者の首の長さが実際の撮影画像における利用者の首の長さよりも相対的に長くされる。
【選択図】図７

Description

本発明は、利用者をカメラで撮影し、その撮影画像に基づき生成される合成画像を写真等として出力する自動写真作成装置に関する。

従来より、利用者をカメラで撮影し、その撮影画像を写真シール（あるいは写真カード等）として出力する遊戯用写真作成装置が知られている。このような遊戯用写真作成装置は、遊戯性または娯楽性が高いことから、撮影画像と合成すべき画像を、利用者の嗜好に応じて、予め用意された多種多様な背景画像および前景画像から選択したり、タッチペンやライトペン等のペン型入力手段を用いて利用者が自由に描いたりできるように構成されているものが多い。利用者によるこのような行為は、撮影画像に対してなされるため、「落書き」と呼ばれる。

ところで、利用者にとっては、いわゆる「写真写り」の良い写真シールが得られることが好ましい。特に近年、「小顔（こがお）」という言葉が流行していることから把握されるように、多くの女性が「顔を小さく見せたい」と感じており、比較的顔が大きく写っている写真シールよりも比較的顔が小さく写っている写真シールの方が利用者には喜ばれる。そこで、特許文献１には、撮影画像に対して補正を施すことを可能にした自動写真作成装置の発明が開示されている。この自動写真作成装置によれば、利用者からの指示に基づいて、撮影画像に対して頬を細くする処理や顔を小さくする処理が施される。

特開２００５−２７７７７２号公報

ところが、上記特許文献１に開示された自動写真作成装置によると、撮影画像中の顔を小さくするための操作を利用者自身が行わなければならないので、不慣れな利用者にとっては操作負担が大きい。また、写真シールに自分の顔が小さく写っていることに対する利用者の喜びは、「顔を小さくする処理が施された」という認識があるときよりもそのような認識がないときの方が大きくなると考えられる。

そこで、本発明は、利用者に操作負担を課すことなく、かつ、（顔を小さくする処理が施されたことを）利用者に意識させることなく、本来よりも利用者の顔が小さく写った（利用者が小顔に写った）写真シールを出力することのできる自動写真作成装置を提供することを目的とする。

本発明は、所定の撮影領域における被写体である利用者を撮影し、撮影画像に基づいて生成される落書き対象画像を含む合成画像を出力する自動写真作成装置および画像処理装置に関するものである。撮影画像における利用者の顔を検出し、落書き対象画像における利用者の顔の輪郭が撮影画像における利用者の顔の輪郭よりも小さくなるように、かつ、落書き対象画像における利用者の首の長さが撮影画像における利用者の首の長さよりも長くなるように、撮影画像に基づいて落書き対象画像を生成する。

本発明によれば、撮影画像における利用者の顔が検出され、利用者の顔の輪郭を小さくする小顔処理が施されることにより落書き対象画像が生成される。そして、その落書き対象画像を含む合成画像が出力される。ここで、小顔処理の際、利用者の顔の輪郭が小さくされるのに伴い、利用者の首の長さが長くされる。このため、本来よりも顔が小さく写り、かつ、本来よりも首が長く写った写真を利用者に提供することができる。

本発明の一実施形態に係る自動写真作成装置である遊戯用写真作成装置の外観を示す図である。 上記実施形態における撮影ユニットの正面図である。 上記実施形態における編集ユニットの正面図である。 上記実施形態において、撮影操作用タッチパネルの画面構成を示す模式図である。 上記実施形態において、編集操作用タッチパネルの画面構成を示す模式図である。 上記実施形態に係る遊戯用写真作成装置の要部を機能面から見た構成を示すブロック図である。 上記実施形態における撮影処理の処理手順を示すフローチャートである。 上記実施形態における編集処理の処理手順を示すフローチャートである。 上記実施形態における小顔処理の処理手順を示すフローチャートである。 上記実施形態において、小顔処理について説明するための図である。 上記実施形態において、小顔処理について説明するための図である。 上記実施形態において、小顔処理について説明するための図である。 上記実施形態において、小顔処理について説明するための図である。 上記実施形態の変形例における撮影処理の処理手順を示すフローチャートである。 上記変形例における明るさ補償処理の処理手順を示すフローチャートである。 上記変形例において、ＲＧＢ色空間からＬａｂ色空間へのデータの変換に用いられる式である。 上記変形例において、補正前の明るさと補正後の明るさとの関係を規定したトーンカーブを示す図である。

以下、添付図面を参照しつつ本発明の一実施形態について説明する。

＜１．全体構成＞
図１は、本発明の一実施形態に係る自動写真作成装置である遊戯用写真作成装置の外観を示す図である。より詳細には、図１（ａ）は、この遊戯用写真作成装置を横から見た外観側面図であり、図１（ｂ）は、上から見た外観平面図である。この遊戯用写真作成装置は、利用者Ｕが入る撮影室２と、利用者Ｕを撮影し背景画像および前景画像の選択を受け付ける撮影ユニット３と、利用者Ｕによる落書き（描画操作）を含む編集操作を受け付け撮影画像に合成した合成画像を生成する編集ユニット４とを備えている。図２は、撮影ユニット３の正面図であり、図３は、編集ユニット４の正面図である。以下、図１から図３を参照しつつ、本実施形態における遊戯用写真作成装置の全体構成について説明する。

撮影室２は、略直方体形状であって、撮影ユニット３は、内部に入る利用者Ｕから見て前の面である撮影室２の前面に沿って配置される。なお、撮影室２左右両側面の一部には、それぞれ利用者Ｕが出入りするための開口部と、当該開口部の一部または全部を覆う遮光カーテンとが設けられている。また、撮影室２の内部に入る利用者Ｕから見て後ろの面である背面には電動ロールカーテン装置２５が備えられている。この電動ロールカーテン装置２５にはクロマキー合成処理のための単一の色（ここでは青色または緑色）が付されたロールカーテンが収納されており、撮影の開始とともに当該ロールカーテンが展開され終了とともに巻き取られる。なお、電動ロールカーテン装置２５は、クロマキー合成処理が行われない場合、所定の模様や風景などがそれぞれ描かれた複数のロールカーテンを適宜展開し巻き取る構成であってもよい。また、撮影室２の床面が撮影対象となる場合には、当該床面にも上記単一の色が付される。

撮影ユニット３は、利用者Ｕを撮影する撮像手段としてのカメラ１０と、当該カメラ１０の上下左右の適宜の位置に配置され閃光を発する照明手段としてのストロボ１１，１２，１３Ｌ，１３Ｒ，１４と、当該カメラ１０の下方に配置され利用者Ｕからの操作の受け付けや撮影画像の表示等を行う撮影操作用タッチパネル２０とを備えている。

カメラ１０は、典型的には、ＣＣＤ（電荷結合素子）を利用してデジタル画像信号を生成するデジタルカメラであって、利用者Ｕを撮影し、その撮影画像を表す画像信号を出力する。ストロボ１１〜１４は、撮影のための充分な光を得るために利用者Ｕに向かって閃光を発する。撮影操作用タッチパネル２０は、撮影の際に利用者Ｕによる各種操作を受け付けるための操作画面を提供するとともに、上記画像信号に基づく画像をリアルタイムで表示するように構成されている。図４は、撮影操作用タッチパネル２０の画面構成を示す模式図である。図４に示すように、撮影操作用タッチパネル２０には、リアルタイムで撮影画像を表示するためのリアルタイムプレビュー領域２０１と、ポーズの見本を表示するためのポーズ見本表示領域２０２と、撮影によって得られる落書き対象画像を表示するための落書き対象画像表示領域２０３とが含まれている。

また撮影ユニット３は、コンピュータを中心に構成され各部の制御等を行う制御装置、Ｉ／Ｏ制御装置、および編集ユニット４と通信を行うためのネットワークアダプタなどを内蔵しているほか、合成画像を写真シール（または写真カード）として出力する出力手段としてのネットワークプリンタ３５を備えている。さらに、撮影ユニット３は、前面下方にコイン投入口２６を、側面に写真シールの取出口２８をそれぞれ備えている。

編集ユニット４は、撮影ユニット３と同様のコンピュータを中心に構成され各部の制御等を行う制御装置および撮影ユニット３等と通信を行うためのネットワークアダプタなどを内蔵している。また、編集ユニット４は、図１（ｂ）に示すように、２組の利用者Ｕがプレイ可能なように２つのユニット４ａ、４ｂに分かれている。そのうちの一方のユニット４ａには、落書き領域や落書きのためのメニュー、ツール等を表示する領域を含む編集操作用タッチパネル４００と、当該編集操作用タッチパネル４００に対する操作に使用されるタッチペン４９Ｌ、４９Ｒとが設けられている。なお、他方のユニット４ｂについても同様の構成となっている。ここで図１（ａ）において手前に見えるユニット４ａを「落書きブースＡ」と呼び、その反対側（図では裏側）のユニット４ｂを「落書きブースＢ」と呼ぶ。

本実施形態における編集操作用タッチパネル４００は、各ユニット４ａ、４ｂにおいてそれぞれ２人の利用者Ｕが同時に落書きを行えるような画面構成となっている。なお、本説明においては、左側の利用者Ｕが使用する構成要素には「Ｌ」を含む参照符号を付し、右側の利用者Ｕが使用する構成要素には「Ｒ」を含む参照符号を付している。

図５は、編集操作用タッチパネル４００の画面構成を示す模式図である。この編集操作用タッチパネル４００には、左右の利用者Ｕそれぞれが使用する構成要素として、撮影画像に基づいて生成された複数の落書き対象画像から選択された画像を表示し（仮想的な）落書きを行える領域である落書き領域４１Ｌ、４１Ｒと、利用者Ｕが落書きを行うためのツールすなわち（選択された）落書き対象画像に対する編集指示のためのツールの集合であって使用可能に表示したものとしてのパレット４２Ｌ、４２Ｒと、それらパレット４２Ｌ、４２Ｒに含まれるツールの種類を切り替えるためのモード選択ボタン群４４Ｌ、４４Ｒと、パレット４２Ｌ、４２Ｒに含まれうるツール以外で落書きに関する操作を行うためのボタン群４５Ｌ、４５Ｒとが含まれている。パレット４２Ｌ、４２Ｒにはタブ４３Ｌ、４３Ｒが設けられており、タブを切り替えることによって多種類のアイテムの表示、選択が可能となっている。また、編集操作用タッチパネル４００には、左右の利用者が共通に使用する構成要素として、落書き時間の残り時間を表示するためのタイマー４６と、編集用の複数の落書き対象画像を落書き候補画像として小さく一覧表示した画像群である候補画像サムネイル４７と、タブやアイテムなどの選択が行われたときに当該選択されたものについての使用説明などを表示するためのガイド画面表示領域４８とが含まれている。

なお、図５に示す編集操作用タッチパネル４００において、モード選択ボタン群４４Ｌ、４４Ｒによって、パレットモードを例えば「ペン」、「スタンプ」、「フレーム」、および「背景」のいずれかに切り替えることができる。また、ボタン群４５Ｌ、４５Ｒによって、例えば「らくがき終了」、「らくがき全消去」、「一つ戻る」、「消しゴム」、「背景消しゴム」、「太いペン」、「中ぐらいのペン」、および「細いペン」というような機能が提供される。

以上のような構成において、利用者は、撮影室２において撮影を行った後、編集ユニット４の落書きブースＡまたは落書きブースＢの編集操作用タッチパネル４００を使用することにより、撮影画像に基づいて生成された落書き対象画像に対して落書きを行う。そして、落書きによって生成された合成画像をネットワークプリンタ３５から印刷出力する。

＜２．機能的構成＞
図６は、本実施形態に係る遊戯用写真作成装置の要部を機能面から見た構成を示すブロック図である。この遊戯用写真作成装置は、機能的には、主として利用者Ｕを撮影する処理（撮影処理）を行うための撮影処理部７と、主として落書き対象画像に対する利用者Ｕの落書き操作に応じて当該落書き対象画像の編集処理を行うための編集処理部８と、印刷出力を行う出力処理部９とから構成されている。撮影処理部７は、第１の制御部７０と撮像部７１と第１の表示・操作部７２とＩ／Ｏ制御部７３と照明部７４と第１の通信部７５とによって構成されている。編集処理部８は、第２の制御部８０と第２の表示・操作部８１、８２と第２の通信部８３とによって構成されている。出力処理部９は、出力部９０によって構成されている。ネットワークアダプタである第１および第２の通信部７５，８３とネットワークプリンタ３５である出力部９０とは、ＬＡＮ（Local Area Network）などのネットワーク６を介してそれぞれ相互に通信可能となっている。

撮像部７１は、ＣＣＤ等の撮像素子を用いて構成されるカメラ１０に相当し、リアルタイムに画像を取り込んで当該画像（撮影画像）を表す画像信号を出力する。この画像信号は第１の制御部７０に入力されて、その内部のメモリに撮影画像データとして一時的に記憶される。また、この撮影画像データは撮影画像信号として第１の制御部７０から第１の表示・操作部７２に供給され、当該撮影画像信号に基づく撮影画像がリアルタイムに表示される。

第１の表示・操作部７２は、撮影操作用タッチパネル２０に相当し、撮影画像に合成されるべき背景画像および前景画像を選択する操作や、出力されるべき写真のレイアウトを決定するための利用者Ｕの操作やシャッター操作等を受け付ける。これらの操作を示す信号は、操作信号として第１の制御部７０に入力される。ここで、利用者Ｕを撮影するための（選択された撮影メニューに対応する）所定の処理が開始されると、第１の表示・操作部７２に利用者Ｕのための案内が表示され、その後の第１の制御部７０からの指示に基づき、数秒程度の予め決められた時間の経過後にカメラ１０の撮影方向にストロボ１１〜１４から閃光が放たれる。そのとき、利用者Ｕの撮影画像を表す信号として撮像部７１から出力される画像信号が第１の制御部７０に入力され、第１の制御部７０内のメモリまたは補助記憶装置としてのハードディス装置等に撮影画像データとして格納される。また、この撮影画像データに対して後述する小顔処理が施されることによって落書き対象画像が生成される。

照明部７４は、カメラ１０の上下左右の適宜の位置に配置されたストロボ１１，１２，１３Ｌ，１３Ｒ，１４に相当し、第１の制御部７０からの指示に基づきＩ／Ｏ制御部７３によって点灯／消灯および調光が制御される。Ｉ／Ｏ制御部７３は、撮影ユニット３に内蔵されるＩ／Ｏ制御装置に相当し、第１の制御部７０からの指示に基づき、照明部７４を制御する。また、後述のコイン検出部（不図示）からの検出信号等の入力信号を第１の制御部７０へ転送する。第１の通信部７５は、撮影ユニット３に内蔵されるネットワークアダプタに相当し、データ送受信の際のインタフェースとして機能する。

第１の制御部７０は、撮影ユニット３に内蔵され、ＣＰＵや、メモリ、フレームバッファ、タイマー、補助記憶装置などを含むコンピュータを中心に構成される制御装置に相当し、内部メモリに格納された所定プログラムをＣＰＵが実行することにより、上述のようにして入力される操作信号等に基づき各部を制御するために、上述のように各部に指示を出す。また撮影された画像に基づいて落書き対象画像が生成され、生成された落書き対象画像はフレームバッファに書き込まれることにより、第１の表示・操作部７２に表示される。さらに、第１の制御部７０は、落書き対象画像に所定の背景画像や前景画像を描画した画像である合成画像を生成する。生成された合成画像はフレームバッファに書き込まれることにより第１の表示・操作部７２に表示される。こうして撮影および合成画像の生成が終了すると、生成された合成画像は利用者Ｕの操作入力に応じて適宜選択された後、第１の通信部７５を介して、編集ユニット４に対応する第２の制御部８０へ送信される。

上記の構成要素の他、撮影ユニット３におけるコイン投入口２６に投入されたコインを検出するためのコイン検出部（不図示）が更に撮影ユニット３に設けられており、第１の制御部７０は、コイン検出部での検出結果に基づき、利用者Ｕに所定時間だけ撮影や背景画像および前景画像の選択や落書きなど、本遊戯用写真作成装置によるプレイを許容するように各部を制御する。このコイン検出部やその検出結果に基づく第１の制御部７０による制御動作は、従来の遊戯用写真作成装置と同様であって周知であるので、その詳しい説明を省略する。

第２の制御部８０は、編集ユニット４に内蔵され、ＣＰＵ、メモリ、フレームバッファ、および補助記憶装置などを含むコンピュータを中心に構成される制御装置に相当し、内部メモリに格納された所定プログラムをＣＰＵが実行することにより、編集処理に関する全体の制御を行う。また、第２の制御部８０は、第１の制御部７０から送られてきた合成画像に対する落書き処理を行うための操作信号に基づき、当該合成画像に所定画像を描画した画像である合成画像を生成する。生成された合成画像は対応する第２の表示・操作部８１，８２に表示される。上記のような画像合成が終了すると、当該合成画像は出力部９０に送信される。なお、出力部９０が別の合成画像を出力中である場合には、その旨が表示されるとともに終了を待って送信される。

第２の表示・操作部８１、８２は、落書きのための編集操作用タッチパネル４００に相当し、タッチペンを用いた利用者Ｕの操作を受け付ける。第２の通信部８３は、編集ユニット４に内蔵されるネットワークアダプタに相当し、データ送受信の際のインタフェースとして機能する。

出力部９０は、撮影ユニット３に内蔵されるネットワークプリンタ３５に相当し、第２の制御部８０から受け取った利用者Ｕの落書きに応じて画像処理された画像データの表す画像を写真シール（または写真カード）として出力する。出力された写真シール等は、撮影ユニット３の側面に設けられた取出口２８から取り出される。

なお、制御装置において実行される上記所定プログラムは、例えば、そのプログラムを記録した記録媒体であるＤＶＤ−ＲＯＭによって提供される。すなわち、上記所定プログラムの記録媒体としてのＤＶＤ−ＲＯＭが制御装置内に補助記憶装置として内蔵されたＤＶＤ−ＲＯＭ駆動装置に装着され、そのＤＶＤ−ＲＯＭから所定プログラムが読み出されて補助記憶装置としてのハードディスク装置にインストールされる。また、上記所定プログラムは、ＤＶＤ−ＲＯＭ以外の記録媒体（ＣＤ−ＲＯＭ等）や通信回線を介して提供されてもよい。そして、本遊戯用写真作成装置の起動のための所定操作がなされると、ハードディスク装置にインストールされた所定プログラムは、制御装置内のメモリに転送されてそこに一時的に格納され、制御装置内のＣＰＵによって実行される。これにより、制御装置による上記各部の制御処理が実現される。

＜３．遊戯用写真作成装置における処理手順＞
上述したように、この遊戯用写真作成装置には撮影ユニット３と編集ユニット４とが含まれている。撮影ユニット３では撮影処理が行われ、編集ユニット４では編集処理が行われる。なお、或る利用者Ｕが編集ユニット４でプレイしている時に他の利用者Ｕは撮影ユニット３でプレイすることができるように構成されている。すなわち、この遊戯用写真作成装置は、撮影処理と編集処理とを並行して行うことができる。以下に、撮影処理と編集処理の処理手順の概要について説明する。

＜３．１ 撮影処理＞
図７は、本実施形態における撮影処理の処理手順を示すフローチャートである。この遊戯用写真作成装置が利用されていない時（プレイが行われていない時）には、撮影操作用タッチパネル２０にはデモ画像（デモンストレーション用の画像）が表示されている。デモ画像の表示中に利用者Ｕがコイン投入口２６にコインを投入すると、プレイが開始される（ステップＳ１００）。

プレイが開始されると、第１の制御部７０は、利用者Ｕによる撮影モードの選択を受け付ける（ステップＳ１１０）。なお、本実施形態においては、撮影モードとして、利用者Ｕにとって自動的に撮影が行われる「オート撮影モード」と、背景等を利用者Ｕが選択する「こだわり撮影モード」とが用意されているものとして説明する。ステップＳ１１０では、第１の制御部７０は、いずれかのモードを利用者Ｕに選択させるための画面を撮影操作用タッチパネル２０に表示し、利用者Ｕによる選択操作を受け付ける。そして、第１の制御部７０は、利用者Ｕがいずれのモードを選択したのかを判定する。判定の結果、オート撮影モードが選択されていればステップＳ１２０に進み、こだわり撮影モードが選択されていればステップＳ１３０に進む。

ステップＳ１２０では、撮影用テーマの選択が行われる。具体的には、第１の制御部７０は、予め用意された複数の撮影用テーマの中からいずれか（１または複数）の撮影用テーマを利用者Ｕに選択させるための画面を撮影操作用タッチパネル２０に表示し、利用者Ｕによる選択操作を受け付ける。そして、第１の制御部７０は、利用者Ｕの選択操作に基づいて選択情報を取得し、選択された撮影用テーマに基づいて、撮影の際に使用するフレームと背景との組み合わせを決定する。その後、ステップＳ１２１に進み、撮影が行われる。この撮影により、撮影画像データが第１の制御部７０のメモリに格納される。

撮影の終了後、ステップＳ１２３に進み、第１の制御部７０のメモリに格納された撮影画像データに基づいて、顔検出処理が行われる。顔検出処理とは、撮影画像から利用者Ｕの顔の部分を表している領域を検出するための処理すなわち利用者Ｕの顔の輪郭を検出する処理のことである。本実施形態においては、公知の顔検出処理を用いて、撮影画像から利用者Ｕの顔の輪郭が検出される。例えば、特開平８−６３５９７号公報に開示されているように、各画素のＲＧＢ値から明度，色相，彩度，色度などの色の特徴量を求め、その特徴量に基づいて対象画素が肌色であるか否かを判定し、肌色と判定された画素から成る画像に対してエッジ抽出を行ってエッジ画像を取得し、当該エッジ画像と予め用意された複数の顔テンプレートとをマッチングすることにより利用者Ｕの顔の輪郭を検出することができる。また、特開２０００−４８１８４号公報に開示されているように、肌色領域の検出後、当該肌色領域の射影分布を求め、その射影分布から顔領域候補を抽出し、当該顔領域候補についての領域の縦横比や当該顔領域候補が予め用意された顔パターンと一致するか否かなどを考慮して利用者Ｕの顔の輪郭を検出することもできる。さらに、特許第４１２１０２６号公報に開示されているように、水平方向および垂直方向のエッジの大きさから算出される勾配ベクトルに基づく特徴量と顔の識別のために予め用意された参照データとに基づいて識別ポイントを求め、当該識別ポイントに基づいて利用者Ｕの顔を検出するようにしても良い。顔検出処理の終了後、ステップＳ１２５に進む。

ステップＳ１２５では、小顔処理が行われる。小顔処理とは、最終的に出力される写真シールにおける利用者Ｕの顔が実際の撮影画像における利用者Ｕの顔よりも相対的に小さくなるように、撮影画像から当該撮影画像に含まれている利用者Ｕの顔の輪郭を小さくすることによって落書き対象画像を生成する処理のことである。なお、小顔処理についての詳しい説明は後述する。小顔処理の終了後、ステップＳ１２７に進む。

ステップＳ１２７では、小顔処理によって撮影画像に基づいて生成された落書き対象画像が、撮影操作用タッチパネル２０に表示される。詳しくは、ステップＳ１２７の処理が行われる都度、図４に示した撮影操作用タッチパネル２０の落書き対象画像表示領域２０３に落書き対象画像が順次表示される。その後、ステップＳ１２９に進み、第１の制御部７０は、予め定められた枚数の撮影が終了したか否かを判定する。判定の結果、当該枚数の撮影が終了していればステップＳ１４０に進み、当該枚数の撮影が終了していなければステップＳ１２１に戻る。

ステップＳ１３０では、利用者Ｕによって、フレームと背景との組み合わせが選択される。具体的には、第１の制御部７０は、予め用意された複数のフレームの中からいずれかのフレームを利用者Ｕに選択させるための画面、および予め用意された複数の背景の中からいずれかの背景を利用者Ｕに選択させるための画面を撮影操作用タッチパネル２０に表示し、利用者Ｕによる選択操作を受け付ける。そして、第１の制御部７０は、利用者Ｕの選択操作に基づいて、選択情報を取得する。その後、ステップＳ１３１に進み、撮影が行われる。この撮影により、撮影画像データが第１の制御部７０のメモリに格納される。

撮影の終了後、顔検出処理（ステップＳ１３３）および小顔処理（ステップＳ１３５）が行われ、それらの処理によって生成された落書き対象画像が撮影操作用タッチパネル２０に表示される（ステップＳ１３７）。なお、ステップＳ１３３、ステップＳ１３５、およびステップＳ１３７における処理の詳細については、それぞれ上述したステップＳ１２３、ステップＳ１２５、およびステップＳ１２７と同様であるので、説明を省略する。ステップＳ１３７の終了後、ステップＳ１３９に進み、第１の制御部７０は、プレイの開始から或いは撮影モードが選択されてから所定の時間が経過しているか否かの判定を行う。判定の結果、所定の時間が経過していればステップＳ１４０に進み、所定の時間が経過していなければステップＳ１３０に戻る。

ステップＳ１４０では、小顔処理で生成された複数の落書き対象画像の中から実際の落書き対象となる画像の（利用者Ｕによる）選択が行われる。具体的には、第１の制御部７０は、落書きおよび印刷に使用する画像を利用者Ｕに選択させるために、落書き対象画像の一覧を撮影操作用タッチパネル２０に表示し、利用者Ｕによる選択操作を受け付ける。そして、第１の制御部７０は、利用者Ｕによって選択された画像を実際の落書き対象画像として第２の制御部８０に転送する。ステップＳ１４０の終了後、ステップＳ１５０に進む。ステップＳ１５０では、案内画面の表示が行われる。具体的には、第１の制御部７０は、利用者Ｕを編集ユニット４のいずれか（４ａまたは４ｂ）に導くための画面を撮影操作用タッチパネル２０に表示する。これにより、撮影処理が終了する。

なお、本実施形態においては、上記ステップＳ１２３，Ｓ１３３によって顔検出手段（顔検出ステップ）が実現され、上記ステップＳ１２５，Ｓ１３５によって小顔処理手段（小顔処理ステップ）が実現されている。

＜３．２ 編集処理＞
図８は、本実施形態における編集処理の処理手順を示すフローチャートである。上述した撮影処理の終了後、第２の制御部８０は、ネットワーク６を介して第１の制御部７０から送られる落書き対象画像（図８のステップＳ１４０で利用者Ｕによって選択された画像）を取得する（ステップＳ２００）。その後、タイマー４６が所定の時間（利用者Ｕに落書きを許可する時間）に設定され、カウントダウンが開始される（ステップＳ２１０）。

タイマー４６のカウントダウン開始後、編集ユニット４では、利用者Ｕによる落書き操作（描画操作）が受け付けられる（ステップＳ２２０）。利用者Ｕに落書きを許可する残り時間が６０秒になると、第２の制御部８０は、落書き時間を延長するか否かを判定する（ステップＳ２３０）。落書き時間を延長するか否かは、次にこのユニット４ａまたは４ｂでプレイすることになる利用者Ｕが撮影室２にいるか否か（撮影ユニット３で撮影処理が行われているか否か）によって判定される。その結果、落書き時間を延長する旨の判定がなされると、ステップＳ２４０に進む。一方、落書き時間を延長しない旨の判定がなされると、ステップＳ２５０に進む。ステップＳ２４０では、タイマーが所定の時間（利用者Ｕに更に落書きを許可する時間）に設定され、再度カウントダウンが開始される。ステップＳ２４０の終了後、ステップＳ２５０に進む。

ステップＳ２５０では、ステップＳ２２０と同様、編集ユニット４で利用者Ｕによる落書き操作が受け付けられる。落書き時間が０になる（終了する）と、出力される写真の分割パターンの選択が行われる（ステップＳ２６０）。具体的には、第２の制御部８０は、予め用意された複数の分割パターンの中からいずれかの分割パターンを利用者Ｕに選択させるための画面を編集操作用タッチパネル４００に表示し、利用者Ｕによる選択操作を受け付ける。そして、第２の制御部８０は、利用者Ｕの選択操作に基づいて、選択情報を取得する。ステップＳ２６０の終了後、ステップＳ２７０に進む。

ステップＳ２７０では、第２の制御部８０は、落書き終了済みの落書き対象画像である合成画像を所定のサーバに登録するか否かの判定を行う。具体的には、第２の制御部８０は、合成画像を所定のサーバに登録するか否かを利用者Ｕに選択させるための画面を編集操作用タッチパネル４００に表示し、利用者Ｕによる選択操作を受け付ける。そして、第２の制御部８０は、利用者Ｕがいずれを選択したのか判定する。判定の結果、サーバに登録する旨の選択が行われていればステップＳ２８０に進み、サーバに登録しない旨の選択が行われていればステップＳ２９０に進む。

ステップＳ２８０では、所定のサーバへの合成画像の画像データの送信が行われる。ステップＳ２８０の終了後、ステップＳ２９０に進む。ステップＳ２９０では、案内画面の表示が行われる。具体的には、第２の制御部８０は、利用者Ｕを写真シールの取出口２８に導くための画面を編集操作用タッチパネル４００に表示する。これにより、編集処理が終了する。

＜３．３ 小顔処理＞
図９は、本実施形態における小顔処理の処理手順を示すフローチャートである。まず、第１の制御部７０は、上述した顔検出処理の結果に基づき、撮影画像に何人の顔が含まれているかの情報（以下「人数データ」という。）を取得する（ステップＳ３００）。この小顔処理においては、その人数データに基づいて、ステップＳ３１０からステップＳ３４０までの処理が人数分の回数だけ繰り返される。例えば撮影画像に３人の顔が含まれていれば、ステップＳ３１０からステップＳ３４０までの処理が３回繰り返され、当該３人の利用者Ｕの顔が順次に処理対象とされる。

ステップＳ３１０では、第１の制御部７０は、撮影画像中の処理対象とされている利用者Ｕの顔の輪郭のうち目から下の部分を当該撮影画像から抽出する（抽出されたデータを以下「抽出輪郭データ」という。）。その後、ステップＳ３２０に進み、第１の制御部７０は、抽出輪郭データの座標の変換を行う。この変換は、変換後の利用者Ｕの顔の輪郭が変換前の利用者Ｕの顔の輪郭よりも小さくなるように行われる。これにより、例えば、図１０（ａ）に示すような利用者Ｕの顔の輪郭が図１０（ｂ）に示すような形状に変形させられる。

ステップＳ３２０の終了後、ステップＳ３３０に進み、第１の制御部７０は、利用者Ｕの顔の輪郭を変形させたことに伴い、利用者Ｕの首の部分のデータの座標を変換する。これにより、変換後のデータに基づく利用者Ｕの首の長さは、変換前のデータに基づく利用者Ｕの首の長さよりも長くなる。ステップＳ３３０の終了後、ステップＳ３４０に進み、第１の制御部７０は、人数分の処理が終了したか否かの判定を行う。判定の結果、人数分の処理が終了していれば小顔処理は終了し、人数分の処理が終了していなければステップＳ３１０に戻る。

ところで、上記小顔処理において、撮影画像中の利用者Ｕの顔は例えば以下のようにして縮小される。まず、撮影画像において利用者Ｕの右目および左目の所定の位置を通過する直線が第１の基準線とされる。これについては、図１１に示すように、右目および左目の最上部を通過する直線５１を第１の基準線としても良いし、右目および左目の中心を通過する直線５２を第１の基準線としても良いし、右目および左目の最下部を通過する直線５３を第１の基準線としても良い。そして、利用者Ｕの顔の輪郭を形成する画素データのうち第１の基準線よりも当該利用者Ｕの顎側に位置する画素データが上述の抽出輪郭データとされる。また、図１１に示すように、撮影画像において利用者Ｕの額の中心と顎の中心とを通過する直線５５が第２の基準線とされる。そして、第１の基準線や第２の基準線を考慮して抽出輪郭データの座標の変換（移動）が行われる。

以下、利用者Ｕの右目および左目の最下部を通過する直線５３が第１の基準線とされたものと仮定して抽出輪郭データの座標の変換例（第１〜第３の変換例）を説明する。第１の変換例では、図１２（ａ）に示すように、抽出輪郭データの各画素の座標が第１の基準線寄りに移動させられる。これにより、図１１に示すような撮影画像は図１３（ａ）に示すような画像に変換される。第２の変換例では、図１２（ｂ）に示すように、抽出輪郭データの各画素の座標が第１の基準線寄りかつ第２の基準線寄りに移動させられ、その際、第１の基準線寄りに移動させられる距離と第２の基準線寄りに移動させられる距離とは等しくされる。これにより、図１１に示すような撮影画像は図１３（ｂ）に示すような画像に変換される。第３の変換例では、図１２（ｃ）に示すように、抽出輪郭データの各画素の座標が第１の基準線寄りかつ第２の基準線寄りに移動させられ、その際、第２の基準線寄りに移動させられる距離は第１の基準線寄りに移動させられる距離よりも長くされる。これにより、図１１に示すような撮影画像は図１３（ｃ）に示すような画像に変換される。以上のように、抽出輪郭データの座標の変換の仕方は様々なものが考えられる。

＜４．効果＞
以上のように、本実施形態によると、撮影によって得られた撮影画像に対して利用者Ｕの顔の輪郭を小さくする処理（小顔処理）が施され、それによって生成された画像が落書き対象画像とされる。そして、当該落書き対象画像に落書きが施された画像が出力される。小顔処理においては、利用者Ｕの顔の輪郭を変形させたことに伴い、利用者Ｕの首の部分のデータの座標に変換が施される。その際、変換後のデータに基づく利用者Ｕの首の長さは、変換前のデータに基づく利用者Ｕの首の長さよりも長くされる。このため、本来よりも顔が小さく写り、かつ、本来よりも首が長く写った写真を利用者Ｕに提供することができる。

また、図１３（ａ）〜（ｃ）に例示したように、小顔処理の施し方（抽出輪郭データの座標の変換の仕方）については様々なものを適用することができる。このため、「本来よりも目から顎までの距離が短く写った写真」、「本来よりも目から顎までの距離が短く、かつ、目よりも顎側の部分が本来よりも細く写った写真」、「本来よりも目から顎までの距離が短く、かつ、目よりも顎側の部分が本来よりも著しく細く写った写真」など様々な変換手法により利用者Ｕの顔を小さくした写真を当該利用者Ｕに提供することができる。

＜５．変形例＞
以下、上記実施形態の変形例について説明する。図１４は、本変形例における撮影処理の処理手順を示すフローチャートである。本変形例においては、顔検出処理（ステップＳ１２３，ステップＳ１３３）と小顔処理（ステップＳ１２５，ステップＳ１３５）との間のタイミングで、明るさ補償処理（ステップＳ１２４，ステップＳ１３４）が行われる。ここで、明るさ補償処理とは、撮影画像において利用者Ｕの顔の明るさが予め定められた目標とする明るさよりも暗い場合に、小顔処理によって生成される落書き対象画像中の利用者Ｕの顔を明るくする処理のことである。

図１５は、本変形例における明るさ補償処理の処理手順を示すフローチャートである。明るさ補償処理の開始後、まず、第１の制御部７０は、顔検出処理によって検出された利用者Ｕの顔の輪郭内の画素データについて、ＲＧＢ色空間からＬａｂ色空間へのデータの変換を行う（ステップＳ４００）。なお、この変換については、例えば特開２００８−９９１４８号公報に開示されているように図１６に示す式を用いて行うことができる。

次に、ステップＳ４１０に進み、第１の制御部７０は、Ｌａｂ色空間に変換されたデータに基づいて、利用者Ｕの顔の輪郭内の画素データのうち肌色のデータの抽出を行う。本変形例においては、ａ値およびｂ値が１８以上かつ２５以下となる画素データが肌色のデータであると判断される。次に、ステップＳ４２０に進み、第１の制御部７０は、ステップＳ４１０で抽出した肌色のデータについての明るさ（Ｌ値）の平均値を算出する。

次に、ステップＳ４３０に進み、第１の制御部７０は、ステップＳ４２０で算出された平均値と予め定められた（明るさの）目標値との差を算出する。その後、ステップＳ４４０に進み、第１の制御部７０は、ステップＳ４３０で算出された（平均値と目標値との）差を補償するように、画素データ中の明るさを示すデータに変換を施す。この変換については、例えば、補正前の明るさと補正後の明るさとの関係を規定した図１７に示すようなトーンカーブに従って行うことができる。ステップＳ４４０が終了すると、明るさ補償処理が終了する。

本変形例によれば、撮影画像中の利用者Ｕの顔の肌色部分が目標とする明るさよりも暗い場合に、落書き対象画像の生成の際に当該肌色部分の明るさが補償される。このため、利用者Ｕの顔色が比較的黒い場合であっても、明るさが補償された落書き対象画像に基づいて写真シールが生成されるので、写真シール中の利用者Ｕの顔は鮮明となる。また、撮影の際に光量が不充分であっても、落書き対象画像の生成の際に利用者Ｕの顔の肌色部分の明るさが補償されるので、写真シール中の利用者Ｕの顔は鮮明となる。また、Ｌａｂ色空間による色の表現は人の視角に近いため、効果的に撮影画像中の利用者Ｕの顔の肌色部分の明るさが補償される。

なお、本変形例においては小顔処理の前に明るさ補償処理が行われる構成としているが、本発明はこれに限定されず、小顔処理の後に明るさ補償処理が行われる構成としても良い。また、本変形例においてはＲＧＢ色空間のデータをＬａｂ色空間のデータに変換することによって得られるａ値およびｂ値に基づいて各画素データが肌色であるか否かの判断が行われているが、本発明はこれに限定されず、他の手法により肌色の部分の抽出が行われても良い。さらに、本変形例においては肌色のデータについての明るさの平均値と目標値との差を補償するようにデータの変換が行われているが、本発明はこれに限定されず、明るさの中央値あるいはヒストグラムに基づき決定される値（例えば最頻値）と目標値との差を補償するようにデータの変換が行われても良い。

＜６．その他＞
上記実施形態においては１つの撮影画像につき１つの落書き対象画像が生成されることを前提に説明しているが、本発明はこれに限定されない。１つの撮影画像につき複数の落書き対象画像（例えば、図１３（ａ）〜（ｃ）に示すような３つの画像）を生成し、それらの画像のうちの１つを利用者Ｕが選択するための手段（落書き対象画像選択手段）を備える構成にしても良い。この場合、利用者Ｕによる操作が介在することになるが、利用者Ｕの好みの応じて縮小された顔が写った写真シールを当該利用者Ｕに提供することができる。

２…撮影室
３…撮影ユニット
４…編集ユニット
１０…カメラ
１１〜１４…ストロボ
２０…撮影操作用タッチパネル
５１〜５３…第１の基準線
５５…第２の基準線
７０…第１の制御部
７１…撮像部（カメラ）
７２…第１の表示・操作部（撮影操作用タッチパネル）
７３…Ｉ／Ｏ制御部（Ｉ／Ｏ制御装置）
７４…照明部（ストロボ）
７５，８３…第１および第２の通信部（ネットワークアダプタ）
８０…第２の制御部
８１，８２…第２の表示・操作部（編集操作用タッチパネル）
４００…編集操作用タッチパネル
Ｕ…利用者

Claims (4)

1. 所定の撮影領域における被写体である利用者を撮影する撮像手段と、前記撮像手段により得られる撮影画像に基づいて生成される落書き対象画像を含む合成画像を写真として出力する出力手段とを備える自動写真作成装置であって、
   前記撮影画像における前記利用者の顔を検出する顔検出手段と、
   前記落書き対象画像における前記利用者の顔の輪郭が前記撮影画像における前記利用者の顔の輪郭よりも小さくなるように、かつ、前記落書き対象画像における前記利用者の首の長さが前記撮影画像における前記利用者の首の長さよりも長くなるように、前記撮影画像に基づいて前記落書き対象画像を生成する小顔処理手段と
   を備えることを特徴とする、自動写真作成装置。
2. 撮影画像に含まれる人物の顔を検出する顔検出手段と、
   前記撮影画像に含まれる人物の顔の輪郭を小さくするとともに前記撮影画像に含まれる人物の首の長さを長くした二次画像を前記撮影画像に基づいて生成する小顔処理手段と
   を備えることを特徴とする、画像処理装置。
3. 撮影画像に含まれる人物の顔を検出する顔検出ステップと、
   前記撮影画像に含まれる人物の顔の輪郭を小さくするとともに前記撮影画像に含まれる人物の首の長さを長くした二次画像を前記撮影画像に基づいて生成する小顔処理ステップと
   を備えることを特徴とする、画像処理方法。
4. 撮影画像に含まれる人物の顔を検出する顔検出ステップと、
   前記撮影画像に含まれる人物の顔の輪郭を小さくするとともに前記撮影画像に含まれる人物の首の長さを長くした二次画像を前記撮影画像に基づいて生成する小顔処理ステップと
   をコンピュータに実行させることを特徴とする、画像処理プログラム。

Images