JP6465333B2

JP6465333B2 - 画像処理装置および画像処理方法

Info

Publication number: JP6465333B2
Application number: JP2014154290A
Authority: JP
Inventors: 妥美呉屋; 由香理濱口; 隆彰伊藤; 香奈西村
Original assignee: フリュー株式会社
Priority date: 2014-07-29
Filing date: 2014-07-29
Publication date: 2019-02-06
Anticipated expiration: 2034-07-29
Also published as: JP2016032224A

Description

本技術は、画像処理装置および画像処理方法に関し、特に、複数の画像を組み合わせて構成される合成画像の生成が行われる場合において、利用者が、生成される合成画像をイメージしながら撮影を行うことができるようにした画像処理装置および画像処理方法に関する。

従来、写真シール作成装置が知られている。写真シール作成装置は、利用者を撮影し、撮影画像に対して利用者に編集を行わせ、編集後の画像をシール紙に印刷して提供するものである。写真シール作成装置は遊戯施設などに設置される。

写真シール作成装置が提供する１ゲームの流れは、通常、撮影空間内にいる利用者を被写体として撮影を行った後、利用者を編集空間に移動させ、編集空間内で行われる操作に従って画像を編集して、編集済みの画像をシール紙に印刷するものとなる。撮影時、撮影空間内に設けられるモニタには、利用者が自分の写りを確認できるようにするためのライブビューが表示される。

特許文献１には、撮影時のライブビューとして、利用者の全身が映る動画と、顔の部分をトリミングによって切り出して拡大した動画である顔拡大動画を同じ画面に表示させる技術が記載されている。これにより、利用者は、自分の全身のバランスを確認しながら、顔の写りを細部まで確認することが可能になる。利用者が複数人のグループである場合、２人が映る動画と、それぞれの利用者の顔拡大動画を同じ画面に表示させるようになされている。

特開２０１４−９９８６８号公報

顔などの被写体の一部を切り出した同じ構図の画像を複数配置した画像を生成して提供する場合、最終的に得ることのできる画像をイメージしながら利用者が撮影を行うことができるようにすることが望ましい。

本技術はこのような状況に鑑みてなされたものであり、複数の画像を組み合わせて構成される合成画像の生成が行われる場合において、利用者が、生成される画像をイメージしながら撮影を行うことができるようにするものである。

本技術の一側面の画像処理装置は、利用者を被写体として撮影を行う撮影部と、複数の区画から構成される表示領域を含むライブビュー表示画面を表示する表示部と、前記撮影部により撮影された動画の各フレームから切り出した一部の領域の画像を、複数の前記区画に配置して表示させる表示制御部と、前記ライブビュー表示画面が表示された後の所定のタイミングで前記撮影部により撮影された静止画から切り出した前記一部の領域の画像を前記表示領域における配置と同じ配置で配置して組み合わせることによって構成される合成画像を生成する生成部とを備える。前記利用者の人数が２人である場合、それぞれの前記利用者の顔が写る２つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた２つの画像が、それぞれ複数、前記区画に配置して表示され、前記利用者の人数が３人である場合、全員の前記利用者の顔が写る１つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた１つの画像が、複数、前記区画に配置して表示される。

前記一部の領域の画像に加工を施す加工部をさらに設けることができる。この場合、前記表示制御部には、加工が施された前記一部の領域の画像を複数の前記区画に配置して表示させ、前記生成部には、加工が施された前記一部の領域の画像から構成される前記合成画像を生成させることができる。

前記加工部には、前記一部の領域の画像に対して、内容が異なる加工を施させることができる。

前記表示制御部には、前記撮影部により撮影された動画の各フレームから切り出した複数の前記一部の領域の画像を、複数の前記区画に配置して表示させることができる。

前記利用者の人数が２人である場合の前記表示領域は、同じ大きさ、同じ形状の４つの前記区画が、縦方向と横方向に２区画ずつ並べて配置されることによって構成されるようにすることができる。

前記表示制御部には、２つの前記一部の領域の画像のうちの一方の前記一部の領域の画像を対角にある前記区画に配置させるとともに、他方の前記一部の領域の画像を対角にある前記区画に配置させることができる。

前記表示制御部には、前記表示領域を構成する上段の２つの前記区画を強調して表示させることができる。

前記表示領域の形状を正方形とし、前記合成画像の形状を正方形とすることができる。

前記表示領域を構成するそれぞれの前記区画の形状を正方形とすることができる。

前記利用者の人数が３人である場合の前記表示領域は、同じ大きさ、同じ形状の２つの前記区画が縦に並べて配置されることによって構成されるようにすることができる。

前記表示制御部には、前記利用者の人数に応じて異なる数の前記区画から構成される前記表示領域を表示させることができる。

本技術の一側面においては、利用者を被写体として撮影部により撮影が行われ、複数の区画から構成される表示領域を含むライブビュー表示画面を表示する表示部に、前記撮影部により撮影された動画の各フレームから切り出された一部の領域の画像が、複数の前記区画に配置して表示される。また、前記ライブビュー表示画面が表示された後の所定のタイミングで前記撮影部により撮影された静止画から切り出された前記一部の領域の画像が前記表示領域における配置と同じ配置で配置して組み合わせることによって構成される合成画像が生成される。前記利用者の人数が２人である場合、それぞれの前記利用者の顔が写る２つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた２つの画像が、それぞれ複数、前記区画に配置して表示され、前記利用者の人数が３人である場合、全員の前記利用者の顔が写る１つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた１つの画像が、複数、前記区画に配置して表示される。

本技術によれば、複数の画像を組み合わせて構成される合成画像の生成が行われる場合において、利用者は、生成される合成画像をイメージしながら撮影を行うことができる。

本発明の一実施の形態に係る写真シール作成装置の外観の構成例を示す斜視図である。写真シール作成装置の外観を他の角度からみた斜視図である。利用者の移動について説明する図である。撮影部の構成例を示す図である。背景部の構成例を示す図である。画像処理ユニットの背面の構成例を示す図である。画像処理ユニットの側面の構成例を示す図である。編集画像が印刷されたシール紙の例を示す図である。編集画像のレイヤ構造の例を示す図である。写真シール作成装置の内部の構成例を示すブロック図である。制御部の機能構成例を示すブロック図である。図１１の撮影管理部の構成例を示すブロック図である。写真シール作成処理について説明するフローチャートである。図１３のステップＳ２において行われる撮影処理について説明するフローチャートである。切り出し部によるトリミングの例を示す図である。通常撮影用ライブビューの表示画面の例を示す図である。合成画像の撮影案内画面の例を示す図である。デザイン選択画面の例を示す図である。加工見本画像の拡大図である。顔画像切り出し部によるトリミングの例を示す図である。合成画像撮影用ライブビューの表示画面の例を示す図である。ライブビュー表示領域の拡大図である。合成画像の配置の例を示す図である。合成画像の例を示す図である。図１３のステップＳ３において行われる編集処理について説明するフローチャートである。編集画面の例を示す図である。編集画面の他の例を示す図である。合成画像の編集の例を示す図である。合成画像の編集の他の例を示す図である。切り出し部によるトリミングの例を示す図である。通常撮影用ライブビューの表示画面の例を示す図である。デザイン選択画面の例を示す図である。顔画像切り出し部によるトリミングの例を示す図である。合成画像撮影用ライブビューの表示画面の例を示す図である。合成画像の配置の例を示す図である。合成画像の例を示す図である。ライブビュー表示領域の例を示す図である。

＜＜写真シール作成装置の外観構成＞＞
＜全体の構成＞
図１は、写真シール作成装置１の外観の構成例を示す斜視図である。

写真シール作成装置１は、撮影や編集等の作業を利用者にゲームとして行わせ、画像を提供するゲーム機である。画像の提供は、シール紙に印刷した形で行われるだけでなく、サーバに送信した画像を利用者の携帯端末上で閲覧可能にする形で行われることもある。写真シール作成装置１はゲームセンターなどの店舗に設置される。

写真シール作成装置１で遊ぶ利用者は、自身が被写体となって撮影を行い、撮影によって得られた撮影画像に手書きの文字やスタンプ画像などの合成用画像を合成させるなどして、撮影画像を彩り豊かな画像に編集する。利用者は、編集済みの撮影画像である編集画像が印刷されたシール紙を受け取って一連のゲームを終了させる。写真シール作成装置１の利用者は、主に、２人、３人等の複数人からなる利用者のグループである。

図１に示すように、写真シール作成装置１は、基本的に、撮影ユニット１１と編集ユニット１２が接した状態で設置されることによって構成される。

撮影ユニット１１は、撮影部２１と背景部２２から構成される。撮影部２１と背景部２２は離して設置され、撮影部２１と背景部２２の間に設けられる空間が、利用者が撮影を行う撮影空間となる。

撮影部２１は、利用者を被写体とした撮影処理を行う装置である。撮影空間に臨む撮影部２１の正面には、カメラや各種の操作に用いられるタッチパネルモニタなどが設けられる。撮影空間にいる利用者から見て右側の面を右側面、左側の面を左側面とすると、撮影部２１の右側面が側面パネル４２Ａにより構成され、左側面が側面パネル４２Ｂ（図３）により構成される。

背景部２２は、正面を向いて撮影を行っている利用者の背面側に位置する板状の部材である背面パネル５１、背面パネル５１の右端に取り付けられ、側面パネル４２Ａより横幅の狭い板状の部材である側面パネル５２Ａ、および、背面パネル５１の左端に取り付けられ、側面パネル４２Ｂより横幅の狭い板状の部材である側面パネル５２Ｂ（図３）から構成される。

撮影部２１の右側面を構成する側面パネル４２Ａと背景部２２の側面パネル５２Ａは、ほぼ同一平面に設けられる。側面パネル４２Ａと側面パネル５２Ａは、上部が板状の部材である連結部２３Ａによって連結され、下部が、床面に設けた例えば金属製の部材である連結部２３Ａ’によって連結される。撮影部２１の左側面を構成する側面パネル４２Ｂと背景部２２の側面パネル５２Ｂも同様に、ほぼ同一平面に設けられ、上部において連結部２３Ｂによって連結され、下部において、床面に設けた金属製の部材である連結部２３Ｂ’（図示せず）によって連結される。

撮影部２１の側面パネル４２Ａ、連結部２３Ａ、および背景部２２の側面パネル５２Ａに囲まれることによって形成される開口が撮影空間の出入り口となる。また、撮影部２１の側面パネル４２Ｂ、連結部２３Ｂ、および背景部２２の側面パネル５２Ｂに囲まれることによって形成される開口も撮影空間の出入り口となる。撮影空間の内部には床材２７が設置される。利用者は、撮影空間に入り、床材２７の上に立って撮影を行うことになる。

背景部２２の上部には、背面パネル５１、側面パネル５２Ａ、および側面パネル５２Ｂに支持される形で背景カーテンユニット２５が設けられる。背景カーテンユニット２５には、巻き取り式の背景カーテンが収納される。背景カーテンは、クロマキー用の緑色の背景に利用されるカーテンや、所定の色や柄のカーテンである。背景カーテンユニット２５は、撮影部２１に設けられたカメラ等による撮影と連動して動作し、撮影の際に、カーテンを下ろし、撮影が終了したらカーテンを巻き取る。

撮影空間の上方には、撮影部２１の正面、連結部２３Ａ、連結部２３Ｂ、および背景カーテンユニット２５に囲まれる開口が形成され、その開口の一部を覆うように天井ストロボユニット２４が設けられる。天井ストロボユニット２４の一端が連結部２３Ａに固定され、他端が連結部２３Ｂに固定される。天井ストロボユニット２４は、撮影に合わせて撮影空間内に向けて光を照射するストロボを内蔵する。天井ストロボユニット２４の内部には、ストロボの他に蛍光灯が設けられており、撮影空間の照明としても機能する。

編集ユニット１２は、一方の側面が撮影部２１の背面に接するように撮影ユニット１１に連結して設けられる。編集ユニット１２は、撮影画像の編集処理を行う装置である。編集ユニット１２には、編集時に利用者により用いられるタブレット内蔵モニタなどの構成が設けられる。

図１に一部が見える編集ユニット１２の構成を正面側の構成とすると、２組の利用者が同時に編集を行うことができるように、編集ユニット１２の正面側と背面側には編集に用いられる構成がそれぞれ設けられる。

編集ユニット１２の正面側は、床面に対して垂直な面であり、側面パネル４２Ａとほぼ平行な面である面７１と、面７１の上方に形成された斜面７２から構成される。斜面７２には、編集作業に用いられる構成が設けられる。斜面７２の右側には、照明装置７４（図２）の一端を支持する柱状の支持部７３Ａが設けられる。斜面７２の左側にも、照明装置７４の他端を支持する柱状の支持部７３Ｂ（図２）が設けられる。支持部７３Ａの右側には、編集ユニット１２の側面を構成する板状のパネル７３Ｃが設けられる。パネル７３Ｃの上面にはカーテンレール２６を支持する支持部７５が設けられる。

編集ユニット１２の上方にはカーテンレール２６が取り付けられる。カーテンレール２６は、３本のレール２６Ａ乃至２６Ｃを、上から見たときの形状がコの字状となるように組み合わせることによって構成される。平行に設けられるレール２６Ａとレール２６Ｂの一端は、連結部２３Ａと連結部２３Ｂにそれぞれ固定され、他端にレール２６Ｃの両端が接合される。

カーテンレール２６には、編集ユニット１２の正面前方の空間と背面前方の空間の内部が外から見えないようにカーテンが取り付けられる。カーテンレール２６に取り付けられたカーテンにより囲まれる編集ユニット１２の正面前方の空間と背面前方の空間が、利用者が撮影画像の編集を行う編集空間となる。

図２は、写真シール作成装置１を別の角度から見た斜視図である。

後述するように、編集ユニット１２の右側面には、タブレット内蔵モニタや、印刷済みのシール紙が排出されるシール紙排出口などが設けられる。編集ユニット１２の側面に設けられるタブレット内蔵モニタは、画像の印刷が終わるのを待っている利用者が事後接客機能を利用するときに用いられる。事後接客機能には、画像をサーバに送信する機能である携帯送信の機能などが含まれる。編集ユニット１２の右側面前方の空間が、利用者が事後接客機能を利用する事後接客空間となる。

ここで、写真シール作成ゲームの流れと、それに伴う利用者の移動について説明する。

図３は、写真シール作成装置１を上から見た平面図である。

写真シール作成装置１の利用者は、白抜き矢印＃１で示すように出入り口Ｇ１から、または白抜き矢印＃２で示すように出入り口Ｇ２から、撮影部２１と背景部２２の間に形成された撮影空間Ａ１に入り、人数を選択した後、撮影部２１に設けられたカメラやタッチパネルモニタなど利用して撮影を行う。

撮影を終えた利用者は、白抜き矢印＃３で示すように出入り口Ｇ１を使って撮影空間Ａ１から出て編集空間Ａ２−１に移動するか、白抜き矢印＃４で示すように出入り口Ｇ２を使って撮影空間Ａ１から出て編集空間Ａ２−２に移動する。

編集空間Ａ２−１は、編集ユニット１２の正面側の編集空間であり、編集空間Ａ２−２は、編集ユニット１２の背面側の編集空間である。編集空間Ａ２−１と編集空間Ａ２−２のいずれの空間に移動するのかが、撮影部２１のタッチパネルモニタの画面表示などによって案内される。例えば２つの編集空間のうちの空いている方の空間が移動先として案内される。

編集空間Ａ２−１または編集空間Ａ２−２に移動した利用者は、撮影画像の編集を開始する。編集空間Ａ２−１の利用者と、編集空間Ａ２−２の利用者は同時に編集を行うことができる。

編集が終了した後、編集画像の印刷が開始される。画像の印刷中、編集空間Ａ２−１での編集を終えた利用者は、白抜き矢印＃５で示すように編集空間Ａ２−１から事後接客空間Ａ３に移動して事後接客機能を利用する。また、編集空間Ａ２−２での編集を終えた利用者は、白抜き矢印＃６で示すように編集空間Ａ２−２から事後接客空間Ａ３に移動して事後接客機能を利用する。

画像の印刷が終了したとき、利用者は、シール紙排出口からシール紙を受け取り、一連の写真シール作成ゲームを終えることになる。

＜撮影部の構成＞
図４は、撮影部２１の正面の構成例を示す図である。

撮影部２１は、正面パネル４１、側面パネル４２Ａ、および側面パネル４２Ｂが、箱状の形状を有するベース部４３に取り付けられることによって構成される。

正面パネル４１の中央からやや上側には撮影・表示ユニット８１が設けられる。撮影・表示ユニット８１は、カメラ９１、タッチパネルモニタ９２、および正面ストロボ９３から構成される。

カメラ９１は、例えば一眼レフカメラであり、レンズが露出するように撮影・表示ユニット８１の内部に取り付けられる。カメラ９１はCCD(Charge Coupled Device)などの撮像素子を有し、撮影空間Ａ１にいる利用者を撮影する。カメラ９１により取り込まれた動画は、タッチパネルモニタ９２にリアルタイムで表示される。また、所定のタイミングでカメラ９１により取り込まれた静止画は撮影画像として保存される。

カメラ９１の下に設けられたタッチパネルモニタ９２は、LCD(Liquid Crystal Display)などのモニタと、それに積層されたタッチパネルにより構成される。タッチパネルモニタ９２は、カメラ９１により取り込まれた動画を表示するライブビューモニタとしての機能と、各種のGUI(Graphical User Interface)画像を表示し、利用者の選択操作をタッチパネルにより受け付ける機能とを備えている。タッチパネルモニタ９２には、適宜、カメラ９１により取り込まれた動画（ライブビュー）や撮影画像が表示される。

カメラ９１の上側および左右を半円状の乳白アクリル板よりなる発光面で囲む正面ストロボ９３は、カメラ９１による撮影に合わせて発光し、被写体としての利用者の顔付近を正面から照射する。

撮影・表示ユニット８１の上方には、曲面の発光面を利用者に向けた右上ストロボ８２および左上ストロボ８３が設置される。右上ストロボ８２および左上ストロボ８３は、カメラ９１による撮影に合わせて発光することで、上方から利用者を照射する。

ベース部４３の正面には利用者の足元を照射する足元ストロボ８４が設けられる。足元ストロボ８４の右側には、利用者が硬貨を入れる硬貨投入返却口８５が設けられる。

ベース部４３の上面には、足元ストロボ８４の上面を挟んでスペース４３Ａおよび４３Ｂが左右に形成される。スペース４３Ａおよび４３Ｂは、撮影を行う利用者が手荷物等を置くための荷物置き場として用いられる。正面パネル４１の例えば天井付近には、撮影処理の案内音声、BGM(Back Ground Music)、効果音等の音を出力するスピーカも設けられる。

＜背景部の構成＞
図５は、背景部２２の撮影空間Ａ１側の構成例を示す図である。

背面パネル５１の上方には背景カーテンユニット２５が設けられる。背景カーテンユニット２５のほぼ中央には、撮影空間Ａ１内で撮影処理を行っている利用者を後方中央から照射する背面中央ストロボ１０１が取り付けられる。

背面パネル５１の出入り口Ｇ１側の位置には、撮影空間Ａ１内で撮影処理を行っている利用者を右後方から照射する背面右ストロボ１０２が取り付けられる。また、背面パネル５１の出入り口Ｇ２側の位置には、撮影空間Ａ１内で撮影処理を行っている利用者を左後方から照射する背面左ストロボ１０３が取り付けられる。

＜編集ユニットの構成＞
図６は、編集ユニット１２の背面側（編集空間Ａ２−２側）の構成例を示す図である。

斜面７２のほぼ中央には、タブレット内蔵モニタ１３１が設けられる。タブレット内蔵モニタ１３１を挟んで左側にタッチペン１３２Ａが設けられ、右側にタッチペン１３２Ｂが設けられる。

タブレット内蔵モニタ１３１は、タッチペン１３２Ａまたは１３２Ｂを用いて操作入力が可能なタブレットがLCDなどのモニタに重畳して設けられることによって構成される。タブレット内蔵モニタ１３１には例えば編集画面が表示される。編集画面は、撮影画像の編集に用いられる画面である。２人で同時に編集を行う場合、タッチペン１３２Ａはタブレット内蔵モニタ１３１に向かって左側にいる利用者により用いられ、タッチペン１３２Ｂはタブレット内蔵モニタ１３１に向かって右側にいる利用者により用いられる。

図７は、編集ユニット１２の右側面の構成例を示す図である。

編集ユニット１２の側面にはタブレット内蔵モニタ１６１が設けられる。タブレット内蔵モニタ１６１には、事後接客機能を利用するときに用いられる画面が表示される。

タブレット内蔵モニタ１６１の下には、事後接客機能の案内音声、BGM、効果音等などを出力するスピーカ１６２が設けられる。スピーカ１６２の下にはシール紙排出口１６３が設けられる。編集ユニット１２の内部にはプリンタが設けられており、編集画像が所定のレイアウトでシール紙に印刷され、シール紙排出口１６３から排出される。

＜シール紙の例＞
図８は、編集画像が印刷されたシール紙の例を示す図である。

図８Ａは、６枚の編集画像が２行３列のレイアウトに配置されて印刷されたシール紙を示し、図８Ｂは、６枚の編集画像が３行２列のレイアウトに配置されて印刷されたシール紙を示す。

６枚の編集画像は、それぞれ、２人の利用者が異なる構図で写る６種類の画像である。１ゲームの処理においては、例えば撮影画像の撮影が６回行われ、６枚の撮影画像に対してそれぞれ編集が施された後、シール紙に印刷される。図８の例においては、それぞれの撮影画像は若干傾いて印刷されている。

撮影画像に写る利用者の背景には所定の色や模様の画像である背景画像が合成され、前景には、手書きの文字やスタンプ画像などの合成用画像が合成される。例えば図８Ａの６枚のうちの上段左端の編集画像に含まれる「Love my friend」の文字は手書きの文字であり、下段中央の編集画像に含まれるハート型の画像はスタンプ画像である。

シール紙の縁の余白領域には、機種名、撮影日の他に、メールアドレスとIDが印刷される。余白領域に印刷されたメールアドレスとIDは、サーバに送信された編集画像を携帯電話機などの携帯端末で閲覧するときに利用される。

図９は、編集画像のレイヤ構造の例を示す図である。

編集画像Ｐ１は、背景画像Ｐ１１、撮影画像Ｐ１２、前景画像Ｐ１３の各レイヤから構成される。図９の背景画像Ｐ１１は、所定の色の地にハートや星などの模様が表された画像であり、前景画像Ｐ１３は、落書きによって入力された「Love my friend」の手書き文字を含む画像である。

編集画像Ｐ１は、撮影画像Ｐ１２の被写体の領域を背景画像Ｐ１１に重ね、その上に前景画像Ｐ１３を重ねることによって生成される。

＜＜写真シール作成装置の内部構成＞＞
＜ハードウェア構成＞
図１０は、写真シール作成装置１の内部の構成例を示すブロック図である。上述した構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。

制御部２０１はCPU(Central Processing Unit)などよりなり、ROM(Read Only Memory)２０６や記憶部２０２に記憶されているプログラムを実行し、写真シール作成装置１の全体の動作を制御する。制御部２０１には、記憶部２０２、通信部２０３、ドライブ２０４、ROM２０６、RAM(Random Access Memory)２０７が接続される。制御部２０１には、撮影部２０８、編集部２０９Ａ、編集部２０９Ｂ、および事後接客部２１０の各構成も接続される。

記憶部２０２は、ハードディスクやフラッシュメモリなどの不揮発性の記憶媒体からなり、制御部２０１から供給された各種の設定情報等を記憶する。記憶部２０２に記憶されている情報は制御部２０１により適宜読み出される。

通信部２０３は、インターネットなどのネットワークのインタフェースであり、制御部２０１による制御に従って外部の装置と通信を行う。通信部２０３は、編集画像などをサーバに送信する。

ドライブ２０４には、光ディスクや半導体メモリなどよりなるリムーバブルメディア２０５が適宜装着される。ドライブ２０４によりリムーバブルメディア２０５から読み出されたコンピュータプログラムやデータは、制御部２０１に供給され、記憶部２０２に記憶されたり、インストールされたりする。

ROM２０６には、制御部２０１において実行されるプログラムやデータが記憶されている。RAM２０７は、制御部２０１が処理するデータやプログラムを一時的に記憶する。

撮影部２０８は、撮影空間Ａ１にいる利用者を対象とした撮影処理を行う。撮影部２０８は、硬貨処理部２２１、背景制御部２２２、照明装置２２３、カメラ９１、タッチパネルモニタ９２、およびスピーカ２２４から構成される。

硬貨処理部２２１は、硬貨投入返却口８５に対する硬貨の投入を検出する。硬貨処理部２２１は、４００円などの所定の金額分の硬貨が投入されたことを検出した場合、そのことを表す起動信号を制御部２０１に出力する。

背景制御部２２２は、制御部２０１より供給される背景制御信号に従って背景カーテンユニット２５を制御し、背景カーテンの上げ下げを行う。背景カーテンの上げ下げが利用者により手動で行われるようにしてもよい。

照明装置２２３は、制御部２０１から供給される照明制御信号に従って、撮影空間Ａ１内の各ストロボの発光を制御する。撮影空間Ａ１には、天井ストロボユニット２４のストロボの他に、撮影部２１の右上ストロボ８２、左上ストロボ８３、足元ストロボ８４、正面ストロボ９３、背景部２２の背面中央ストロボ１０１、背面右ストロボ１０２、背面左ストロボ１０３が設けられる。

カメラ９１は、制御部２０１による制御に従って撮影を行い、撮影によって得られた画像を制御部２０１に出力する。

編集部２０９Ａは、編集空間Ａ２−１にいる利用者を対象とした編集を行う。編集部２０９Ａは、タブレット内蔵モニタ１３１、タッチペン１３２Ａ，１３２Ｂ、およびスピーカ２３１から構成される。編集部２０９Ｂは、編集部２０９Ａと同一の構成を有しており、編集空間Ａ２−２にいる利用者を対象とした編集を行う。

タブレット内蔵モニタ１３１は、制御部２０１による制御に従って編集画面を表示し、画面に対する利用者の操作を検出する。利用者の操作の内容を表す信号は制御部２０１に供給され、利用者の操作に応じて編集が行われる。

事後接客部２１０は、事後接客空間Ａ３にいる利用者を対象とした事後接客処理を行う。事後接客部２１０は、タブレット内蔵モニタ１６１、スピーカ１６２、およびプリンタ２４１から構成される。プリンタ２４１にはシール紙ユニット２４２が装着される。

プリンタ２４１は、制御部２０１から供給された印刷データに基づいて、シール紙ユニット２４２に収納されているシール紙に編集画像を印刷する。プリンタ２４１は、編集画像を印刷したシール紙をシール紙排出口１６３に排出する。制御部２０１からプリンタ２４１に対しては、各画像が配置されたイメージデータが印刷データとして供給される。

＜制御部の構成＞
図１１は、図１０の制御部２０１の機能構成例を示すブロック図である。図１１に示す機能部のうちの少なくとも一部は、制御部２０１内のCPUにより所定のプログラムが実行されることによって実現される。

制御部２０１においては、撮影管理部３０１、編集管理部３０２、印刷管理部３０３、および事後接客管理部３０４が実現される。

撮影管理部３０１は、撮影部２０８の各部を制御し、写真シール作成装置１を利用する際に投入される代金に関する処理や撮影処理を行う。編集管理部３０２は、編集部２０９Ａ、編集部２０９Ｂの各部を制御し、編集を行う。印刷管理部３０３は、事後接客部２１０のプリンタ２４１を制御し、印刷処理を行う。事後接客管理部３０４は、事後接客部２１０のタブレット内蔵モニタ１６１を制御するなどして事後接客処理を行う。

図１２は、撮影管理部３０１の構成例を示すブロック図である。

撮影管理部３０１は、撮影制御部３１１、切り出し部３１２、表示制御部３１３、顔画像切り出し部３１４、加工部３１５、合成画像生成部３１６、および画像記憶部３１７から構成される。

撮影制御部３１１は、カメラ９１を制御し、動画と静止画の撮影を行う。カメラ９１により撮影された動画はライブビューの表示に用いられ、静止画は、撮影画像の生成と合成画像の生成に用いられる。

撮影画像は、カメラ９１により撮影された１枚の静止画から、１つの矩形の領域をトリミングにより切り出すことによって生成される静止画である。切り出される領域には、例えば利用者が複数人である場合、全員が含まれる。撮影画像は、上述したように編集の対象として用いられ、編集の後、シール紙に印刷される。

一方、合成画像は、カメラ９１により撮影された１枚の静止画から、１つまたは複数の矩形の領域をトリミングにより切り出し、切り出した画像を複数組み合わせて合成することによって生成される静止画である。例えば利用者の人数が２人である場合、それぞれの利用者の顔が写る２つの矩形の領域が切り出され、３人以上である場合、全員の利用者が写る１つの矩形の領域が切り出される。合成画像は、例えば携帯送信の機能によって利用者に提供され、SNS(Social Networking Service)のプロフィール紹介用の画像として用いられる。

撮影制御部３１１は、撮影画像の生成に用いる静止画の撮影前、カメラ９１により撮影された動画を切り出し部３１２に出力する。また、撮影制御部３１１は、撮影画像の生成に用いる静止画の撮影時、カメラ９１により撮影された静止画を切り出し部３１２に出力する。

撮影制御部３１１は、合成画像の生成に用いる静止画の撮影前、カメラ９１により撮影された動画を顔画像切り出し部３１４に出力する。また、撮影制御部３１１は、合成画像の生成に用いる静止画の撮影時、カメラ９１により撮影された静止画を顔画像切り出し部３１４に出力する。

以下、適宜、撮影画像の生成に用いる静止画の撮影を通常撮影という。通常撮影の前に表示するライブビューは通常撮影用ライブビューとなる。また、合成画像の生成に用いる静止画の撮影を、単に、合成画像の撮影という。合成画像の撮影の前に表示するライブビューは合成画像撮影用ライブビューとなる。

切り出し部３１２は、撮影制御部３１１から供給された動画の各フレームから矩形領域をトリミングにより切り出し、切り出した画像からなる動画を表示制御部３１３に出力する。表示制御部３１３に供給された動画は通常撮影用ライブビューの表示に用いられる。

また、切り出し部３１２は、撮影制御部３１１から供給された静止画から矩形領域をトリミングにより切り出し、切り出した画像を撮影画像として表示制御部３１３と画像記憶部３１７に出力する。

表示制御部３１３は、タッチパネルモニタ９２に対する画面の表示を制御する。例えば、表示制御部３１３は、切り出し部３１２から供給された動画に基づいて通常撮影用ライブビューを表示させ、切り出し部３１２から供給された撮影画像を撮影結果として表示させる。

また、表示制御部３１３は、加工部３１５から供給された動画に基づいて合成画像撮影用ライブビューを表示させ、合成画像生成部３１６から供給された合成画像を撮影結果として表示させる。

顔画像切り出し部３１４は、撮影制御部３１１から供給された動画の各フレームから、利用者の人数に応じた数の矩形領域の画像をトリミングにより切り出し、切り出した画像からなる動画を加工部３１５に出力する。また、顔画像切り出し部３１４は、撮影制御部３１１から供給された静止画から利用者の人数に応じた数の矩形領域の画像をトリミングにより切り出し、切り出した画像を加工部３１５に出力する。

加工部３１５は、顔画像切り出し部３１４から供給された画像に対して加工を施す。加工部３１５が施す加工は、例えば、画像を構成する全ての画素のRGB値をフィルタ処理によって変えることにより、構図はそのままに、画像全体の色味を変える処理である。加工は、他の画像を合成する編集とは異なる画像処理である。

加工部３１５は、合成画像の撮影前、各フレームの色味を変えた加工済みの動画を表示制御部３１３に出力する。また、加工部３１５は、合成画像の撮影が行われたとき、各フレームの色味を変えた加工済みの画像を合成画像生成部３１６に出力する。

合成画像生成部３１６は、加工部３１５から供給された画像を所定の配置に並べ、１枚の静止画を生成する。合成画像生成部３１６は、生成した静止画を合成画像として表示制御部３１３と画像記憶部３１７に出力する。

画像記憶部３１７は、通常撮影時に切り出し部３１２から供給された撮影画像と、合成画像の撮影時に合成画像生成部３１６から供給された合成画像を記憶する。画像記憶部３１７に記憶された画像は編集処理の開始時に編集管理部３０２により読み出される。

＜＜写真シール作成装置の動作＞＞
＜写真シール作成処理＞
次に、以上のような構成を有する写真シール作成装置１の動作について説明する。

はじめに、図１３のフローチャートを参照して、シール作成ゲームを提供する写真シール作成装置１の一連の処理について説明する。図１３の処理は、所定の金額分の硬貨が投入されたときに開始される。

ステップＳ１において、撮影管理部３０１の表示制御部３１３は、コース選択画面をタッチパネルモニタ９２に表示させる。

コース選択画面は、利用者の人数に応じたコースの選択に用いられる画面である。例えば、シール作成ゲームを２人で行う２人用コース、３人で行う３人用コース、４人で行う４人用コースの中から、いずれかのコースを選択することが可能とされる。

ステップＳ２において、撮影管理部３０１は、利用者の人数に応じた撮影処理を行う。撮影処理においては、例えば、通常撮影が６回行われ、合成画像の撮影が１回行われる。撮影処理については図１４のフローチャートを参照して後述する。

ステップＳ３において、編集管理部３０２は編集処理を行う。編集処理においては、撮影画像と合成画像の編集が行われる。編集処理については図２５のフローチャートを参照して後述する。

ステップＳ４において、印刷管理部３０３は、利用者により選択されたレイアウトに従って編集画像を配置することによって印刷データを生成する。印刷管理部３０３は、印刷データをプリンタ２４１に出力し、編集画像をシール紙に印刷する。

ステップＳ５において、事後接客管理部３０４は、印刷が終わるのを待っている利用者に対する事後接客処理を行う。事後接客管理部３０４は、事後接客処理として合成画像をサーバに送信する。利用者に対する合成画像の提供がサーバを経由して行われるのではなく、無線LANなどの通信を介して、利用者が持っている携帯電話機に直接送信されるようにしてもよい。

印刷が終了したとき、編集画像が印刷されたシール紙がシール紙排出口１６３に排出される。利用者は、シール紙をシール紙排出口１６３から取り出して一連のゲームを終える。

＜撮影処理＞
次に、図１４のフローチャートを参照して、図１３のステップＳ２において行われる撮影処理について説明する。ここでは、利用者の人数が２人であり、２人用コースが選択されているものとする。

ステップＳ１１において、撮影制御部３１１は、カメラ９１を制御し、動画の撮影を開始する。撮影制御部３１１は、撮影した動画を切り出し部３１２に出力する。

ステップＳ１２において、切り出し部３１２は、撮影制御部３１１から供給された動画の各フレームから矩形領域の画像をトリミングにより切り出す。

図１５は、切り出し部３１２によるトリミングの例を示す図である。

図１５の画像Ｐ１は、カメラ９１により撮影された動画の１フレーム全体の画像である。画像Ｐ１は縦長の画像であり、撮影空間Ａ１にいる２人の利用者の頭の上から腰のあたりまでが写っている。画像Ｐ１においては、カメラ９１に向かって右側に立つ利用者Ｈ１が左側に写り、左側に立つ利用者Ｈ２が右側に写る。

枠Ｆ１で示す矩形領域がトリミングによって切り出される領域である。例えば、枠Ｆ１で示す矩形領域の縦と横の比は１：１．２である。枠Ｆ１で示す矩形領域は、各フレームにおいて固定とされる。

切り出し部３１２は、動画の各フレームから切り出した、枠Ｆ１で示す矩形領域の画像からなる動画を表示制御部３１３に出力する。

ステップＳ１３において、表示制御部３１３は、切り出し部３１２から供給された動画に基づいて、通常撮影用ライブビューをタッチパネルモニタ９２に表示させる。

図１６は、通常撮影用ライブビューの表示画面の例を示す図である。

通常撮影用ライブビューの表示画面の中央上方には「撮影するよ！」のメッセージが表示され、その下に設けられた矩形の領域であるライブビュー表示領域５０１には、切り出し部３１２から供給された動画が表示される。ライブビュー表示領域５０１に表示される動画においては、カメラ９１に向かって右側に立つ利用者Ｈ１が右側に写り、左側に立つ利用者Ｈ２が左側に写る。カメラ９１によって撮影された画像は、反転してタッチパネルモニタ９２に表示される。

ライブビュー表示領域５０１の左には、ライブビュー表示領域５０１の上辺に沿うように頭の位置を調整することを案内するメッセージが表示される。ライブビュー表示領域５０１の下には、ライブビュー表示領域５０１より小さい矩形の領域である撮影結果表示領域５０２−１乃至５０２−６が２行３列に並べて配置される。

撮影結果表示領域５０２−１乃至５０２−６には、通常撮影が行われる毎に、通常撮影によって得られた撮影画像が撮影順に表示される。図１６の例においてはまだ通常撮影が行われていないことから、撮影結果表示領域５０２−１乃至５０２−６には撮影画像が表示されていない。利用者は、このようなライブビュー表示画面を見て、自分の顔の位置を調整することができる。

通常撮影用ライブビューが表示された状態で撮影のタイミングになったとき、ステップＳ１４において、撮影制御部３１１は通常撮影を行う。

ステップＳ１５において、切り出し部３１２は、通常撮影によって得られた静止画のうち、図１５を参照して説明した枠Ｆ１で示す矩形領域をトリミングにより切り出すことによって撮影画像を生成する。

切り出し部３１２により生成された撮影画像は、画像記憶部３１７に記憶されるとともに、表示制御部３１３に供給され、通常撮影用ライブビューの表示画面の撮影結果表示領域５０２−１に縮小して表示される。利用者は、撮影結果を確認しながら、次の撮影の準備を行うことができる。

ステップＳ１６において、撮影制御部３１１は、通常撮影が終わったか否かを判定し、終わっていないと判定した場合、ステップＳ１１に戻り、２回目以降の通常撮影を行う。

あらかじめ決められた例えば６回の通常撮影が行われたことから、通常撮影が終わったとステップＳ１６において判定された場合、ステップＳ１７において、表示制御部３１３は、合成画像の撮影案内画面をタッチパネルモニタ９２に表示させる。

図１７は、合成画像の撮影案内画面の例を示す図である。

図１７の例においては、横長楕円形の枠の内側に、次の撮影が７枚目の撮影であることを表すメッセージが表示されている。このような撮影案内画面を表示することにより、次に行われる７回目の撮影が、通常撮影とは異なる撮影であることを利用者に知らせることができる。

ステップＳ１８において、表示制御部３１３は、デザイン選択画面をタッチパネルモニタ９２に表示させる。デザイン選択画面は、加工の種類の選択に用いられる画面である。

図１８は、デザイン選択画面の例を示す図である。

図１８の例においては、加工の種類の選択に用いられる画像である加工見本画像５１１−１乃至５１１−６が表示されている。加工見本画像５１１−１乃至５１１−６は、それぞれ、異なる種類の加工が施された画像であり、４枚の画像を組み合わせることによって構成される。この例においては、利用者は６種類の加工の中から、所定の加工を選択することができるようになされている。

図１９は、加工見本画像５１１−１を拡大して示す図である。

加工見本画像５１１−１は、破線で示すように４つの区画に分割され、それぞれの区画に、１人の人物が写る画像５１１−１Ａ乃至５１１−１Ｄが配置される。４つの区画を分割する破線は実際に画像上に見えるものではない。例えば、各区画の形状は正方形であり、縦と横の比が１：１となる。この場合、加工見本画像５１１−１全体の形状も正方形になる。正方形の縦横比は、SNSのアイコンとしてふさわしい。

加工見本画像５１１−１を構成する４枚の画像のうち、左上の画像５１１−１Ａと右下の画像５１１−１Ｄは同じ画像であり、モデルの人物が同じ構図で写っている。また、右上の画像５１１−１Ｂと左下の画像５１１−１Ｃも同じ画像であり、モデルの人物が同じ構図で写っている。

それぞれの画像には、全体の色を黒っぽくするような加工が施されている。４枚の画像に同じ加工が施されるようにしてもよいし、内容の異なる加工が施されるようにしてもよい。

後述するように、合成画像も、縦と横に２区画ずつ配置した４つの区画に分割され、同じ画像を対角に配置することによって構成される。

加工見本画像５１１−１乃至５１１−６の中から所定の画像が選択され、加工の種類が選択されたとき、ステップＳ１９において、撮影制御部３１１は、カメラ９１を制御し、動画の撮影を開始する。撮影制御部３１１は、撮影した動画を顔画像切り出し部３１４に出力する。

ステップＳ２０において、顔画像切り出し部３１４は、撮影制御部３１１から供給された動画の各フレームから、人数に応じた数の矩形領域の画像をトリミングにより切り出す。

図２０は、顔画像切り出し部３１４によるトリミングの例を示す図である。

図２０の画像Ｐ１１は、カメラ９１により撮影された動画の１フレーム全体の画像である。図１５の画像と同様に、画像Ｐ１１にも、通常撮影を終えた２人の利用者の頭の上から腰のあたりまでが写っている。

枠Ｆ１１と枠Ｆ１２で示す２つの矩形領域がトリミングによって切り出される領域である。枠Ｆ１１と枠Ｆ１２で示す矩形領域の縦と横の比は１：１である。枠Ｆ１１と枠Ｆ１２で示す矩形領域は、各フレームにおいて固定とされる。

このように、合成画像の撮影前、通常撮影前とは形状と数が異なる矩形領域の画像が、カメラ９１により撮影された動画の各フレームから切り出される。

顔画像切り出し部３１４は、動画の各フレームから切り出した枠Ｆ１１と枠Ｆ１２で示す矩形領域の画像からなる動画を加工部３１５に出力する。

ステップＳ２１において、加工部３１５は、顔画像切り出し部３１４から供給された動画の各フレームに対して、利用者により選択された加工を施す。加工部３１５は、各フレームの色味を変えた動画を表示制御部３１３に出力する。

ステップＳ２２において、表示制御部３１３は、加工部３１５から供給された動画に基づいて、合成画像撮影用ライブビューをタッチパネルモニタ９２に表示させる。

図２１は、合成画像撮影用ライブビューの表示画面の例を示す図である。

合成画像撮影用ライブビューの表示画面の中央上方には「撮影するよ！」のメッセージが表示され、その下に設けられた正方形の領域であるライブビュー表示領域５３１には、加工部３１５から供給された動画が所定の区画に配置して表示される。

図２２は、ライブビュー表示領域５３１を拡大して示す図である。

ライブビュー表示領域５３１は均等に４つの区画に分割され、それぞれの区画に、１人の人物が写る動画である画像５３１Ａ乃至５３１Ｄが配置される。各区画の形状は正方形である。この場合、ライブビュー表示領域５３１全体の形状も正方形となる。

ライブビュー表示領域５３１に配置される４枚の画像のうち、左上の画像５３１Ａと右下の画像５３１Ｄは、図２０の枠Ｆ１２の矩形領域の画像として切り出された同じ画像である。画像５３１Ａと画像５３１Ｄには、カメラ９１に向かって左側に立つ利用者Ｈ２が同じ構図で写っている。

また、右上の画像５３１Ｂと左下の画像５３１Ｃは、図２０の枠Ｆ１１の矩形領域の画像として切り出された同じ画像である。画像５３１Ｂと画像５３１Ｃには、カメラ９１に向かって右側に立つ利用者Ｈ１が同じ構図で写っている。それぞれの画像には、利用者により選択された加工が施されている。

左上の区画は、所定の色の枠の画像である枠画像５４１Ｌによって強調表示されている。また、右上の区画は、違う色の枠の画像である枠画像５４１Ｒによって強調表示されている。

図２１に示すように、ライブビュー表示領域５３１の左側には、カメラ９１に向かって左側に立っている利用者Ｈ２に対して、ライブビュー表示領域５３１の左上の区画に自分の顔の収めることを案内するメッセージが表示される。利用者Ｈ２は、枠画像５４１Ｌによって強調表示されている区画内の画像５３１Ａを見て、自分の顔が左上の区画に収まるように位置を調整する。

また、ライブビュー表示領域５３１の右側には、カメラ９１に向かって右側に立っている利用者Ｈ１に対して、ライブビュー表示領域５３１の右上の区画に自分の顔の収めることを案内するメッセージが表示される。利用者Ｈ１も同様に、枠画像５４１Ｒによって強調表示されている区画内の画像５３１Ｂを見て、自分の顔が右上の区画に収まるように位置を調整する。

左上の区画と右上の区画を強調表示させることにより、利用者は、どの画像を見て自分の顔の位置を調整すればいいのかを容易に把握することが可能になる。強調表示させる区画を利用者が変更することができるようにしてもよい。

合成画像は、１枚の静止画から切り出した枠Ｆ１１で示す矩形領域の画像と枠Ｆ１２で示す矩形領域の画像をそれぞれ対角に配置して構成される画像である。２人の利用者は、このようなライブビュー表示画面の表示から、生成される合成画像をイメージしながら、自分の写りを確認することができる。

合成画像撮影用ライブビューが表示された状態で撮影のタイミングになったとき、ステップＳ２３において、撮影制御部３１１は合成画像の撮影を行う。

ステップＳ２４において、顔画像切り出し部３１４は、合成画像の撮影によって得られた静止画のうち、図２０を参照して説明した枠Ｆ１１と枠Ｆ１２で示す矩形領域の画像をトリミングにより切り出し、加工部３１５に出力する。

ステップＳ２５において、加工部３１５は、顔画像切り出し部３１４から供給された画像に対して、利用者により選択された加工を施す。加工部３１５は、色味を変えた２つの画像を合成画像生成部３１６に出力する。

ステップＳ２６において、合成画像生成部３１６は、加工部３１５から供給された画像を所定の配置に並べて合成することによって１枚の合成画像を生成する。

図２３は、合成画像の配置の例を示す図である。

図２３に示すように、合成画像５５１の領域全体は、４つの区画に均等に分割され、４つの区画５５１−１乃至５５１−４から構成される。

合成画像生成部３１６は、合成画像撮影用ライブビュー表示時の配置と同様に、枠Ｆ１２で示す矩形領域の画像を左上の区画５５１−１と右下の区画５５１−４に対角に配置し、枠Ｆ１１で示す矩形領域の画像を右上の区画５５１−２と左下の区画５５１−３に対角に配置する。

合成画像生成部３１６は、各区画に配置した４枚の画像を合成することによって、図２４に示すような１枚の合成画像５５１を生成する。合成画像生成部３１６は、生成した合成画像を画像記憶部３１７に記憶させるとともに、表示制御部３１３に出力し、撮影結果としてタッチパネルモニタ９２に表示させる。

合成画像の撮影が終了した後、ステップＳ２７において、表示制御部３１３は、タッチパネルモニタ９２に案内画面を表示させ、撮影処理を終えた利用者に対して、編集空間Ａ２−１または編集空間Ａ２−２への移動を案内する。

利用者は、撮影空間Ａ１から出て、案内された方の編集空間に移動して編集を行うことになる。その後、図１３のステップＳ２に戻り、それ以降の処理が行われる。

以上のように、利用者は、通常撮影が終わった後、最終的に生成される合成画像をイメージしながら、合成画像の撮影を行うことができる。

＜編集処理＞
次に、図２５のフローチャートを参照して、図１３のステップＳ３において行われる編集処理について説明する。

ステップＳ３１において、編集管理部３０２は、名前入力画面をタブレット内蔵モニタ１３１に表示させる。名前入力画面に入力された利用者の名前に応じて、編集時に利用可能な編集ツールが変化する。例えば、利用者の名前を手書き風の文字で表すスタンプ画像などが編集ツールとして用意される。

ステップＳ３２において、編集管理部３０２は、目＆顔サイズ調整画面をタブレット内蔵モニタ１３１に表示させる。このとき、編集管理部３０２は、６枚の撮影画像と１枚の合成画像を撮影管理部３０１の画像記憶部３１７から読み出して取得する。目＆顔サイズ調整画面は、撮影画像と合成画像に写る利用者の目と顔の大きさの調整に用いられる画面である。

ステップＳ３３において、編集管理部３０２は、それぞれの撮影画像と合成画像から、人物の目と顔の領域を検出し、検出した領域に含まれる目と顔の大きさを、利用者により選択された大きさになるように調整する。

ステップＳ３４において、編集管理部３０２は、撮影画像と合成画像に写る利用者の肌の明るさの調整に用いられる画面である明るさ調整画面をタブレット内蔵モニタ１３１に表示させる。

ステップＳ３５において、編集管理部３０２は、それぞれの撮影画像と合成画像から人物の肌の領域を検出し、検出した領域を、利用者により選択された明るさに応じて調整する。

ステップＳ３６において、編集管理部３０２は、撮影画像に写る利用者の背景の選択に用いられる画面である背景選択画面をタブレット内蔵モニタ１３１に表示させる。

ステップＳ３７において、編集管理部３０２は、利用者により選択された背景画像を合成することによって撮影画像の背景を調整し、編集対象となる撮影画像を生成する。編集対象となる撮影画像は、撮影画像に写る利用者の目と顔の大きさ、肌の明るさ、および背景が調整された画像となる。

背景画像の選択が終了したとき、ステップＳ３８において、編集管理部３０２は、編集画面をタブレット内蔵モニタ１３１に表示させる。

図２６は、編集画面の例を示す図である。

編集画面は、主な構成が左右対称に設けられることによって構成される。左半分の領域である領域７１２Ｌは、タブレット内蔵モニタ１３１に向かって左側にいる利用者により用いられる領域であり、右半分の領域である領域７１２Ｒは、タブレット内蔵モニタ１３１に向かって右側にいる利用者により用いられる領域である。中央上方の領域７１１には編集処理の残り時間などが表示される。なお、図２６の各領域を囲む一点鎖線と破線は画面に実際に表示されるものではない。

領域７１２Ｌの中央上方のサムネイル画像表示領域７２１Ｌは、撮影画像と合成画像を表すサムネイル画像の表示領域である。利用者は、サムネイル画像表示領域７２１Ｌに表示されているサムネイル画像を選択することによって、編集対象とする画像を選択する。

図２６の例においては、６枚の撮影画像を表すサムネイル画像Ｐ５１乃至Ｐ５６と、１枚の合成画像を表すサムネイル画像Ｐ５７が撮影順に並べて表示され、左端のサムネイル画像Ｐ５１が選択されることによって、１枚目の撮影画像が編集対象とされている。

領域７１２Ｌの略中央に設けられた比較的大きな編集領域７２２Ｌは、編集対象として選択された画像の表示領域である。利用者は、編集用パレット７３１Ｌにサンプルが表示されるものの中から好みの編集ツールをタッチペン１３２Ａを用いて選択し、続けて、編集領域７２２Ｌに表示された画像上の位置を指定することにより、指定した位置に、手書きの文字やスタンプ画像などの合成用画像を合成させることができる。

編集領域７２２Ｌの下の編集用パレット表示領域７２３Ｌは、スタンプ画像などの各種の編集ツールの選択に用いられる編集用パレット７３１Ｌの表示領域である。編集用パレットに表示される編集ツールはカテゴリ毎に分かれており、タブを選択することによって、編集用パレット７３１Ｌに表示させる編集ツールを切り替えることができるようになされている。

編集用パレット表示領域７２３Ｌの上の修正ツール選択領域７２４Ｌは、入力した編集を取り消すときに用いられるツールである消しゴムツールの選択に用いられるボタンや、１つ前または１つ後の作業に戻るときに操作されるボタンが並べて表示される領域である。

編集領域７２２Ｌの右側の一発落書きボタン７２５Ｌは、一発落書き機能を使って編集を行うときに操作されるボタンである。一発落書き機能は、複数種類の編集ツールを組み合わせることによってあらかじめ設定された複数の編集を一括して編集対象の画像に合成する機能である。

一発落書きボタン７２５Ｌの上には、編集処理を終了するときに操作される終了ボタン７２６Ｌが表示される。

領域７１２Ｒには、領域７１２Ｌの構成と同じ構成が位置を対称にして配置される。図２６の例においては、サムネイル画像表示領域７２１Ｒからサムネイル画像Ｐ５３を選択することによって、３枚目の撮影画像が編集対象とされている。

図２７は、合成画像を編集対象とする編集画面の例を示す図である。

例えばサムネイル画像表示領域７２１Ｒからサムネイル画像Ｐ５７を選択したとき、編集領域７２２Ｒには、編集対象の画像として合成画像が拡大して表示される。利用者は、撮影画像と同様に、好みの編集ツールを用いて合成画像の編集を行うことができる。

図２５の説明に戻り、ステップＳ３９において、編集管理部３０２は、編集画面に対する利用者の操作に応じて、撮影画像または合成画像の編集を行う。編集は、例えば、あらかじめ設定された時間が経過するまで、または編集画面に用意された終了ボタン７２６Ｌ，７２６Ｒが操作されるまで続けられる。

図２８は、合成画像の編集の例を示す図である。

合成画像５５１に重ねて示すハート柄の画像７５１は、所定の編集ツールを用いて利用者により入力された合成用画像である。画像７５１は、合成画像５５１を構成する４枚の画像に跨る形で合成されている。

このように、利用者は、合成画像５５１を構成する４枚の画像に跨って編集を行うことができる。

図２９は、合成画像の編集の他の例を示す図である。

左上の区画に配置された画像と右下の区画に配置された画像に重ねて示すハート柄の画像７６１と画像７６２は、所定の編集ツールを用いて利用者により入力された合成用画像である。左上の区画における画像７６１の位置と、右下の区画における画像７６２の位置は同じ位置である。

例えば、画像７６２は、左上の区画に配置された画像に対して画像７６１が入力されることに応じて入力されたものである。このように、合成画像５５１を構成する同じ画像のうち、一方の画像に対して入力された編集が、対角に配置された他方の画像に反映されるようにしてもよい。編集を反映させるとき、それぞれの画像において入力位置をずらして反映させるようにしてもよい。

ステップＳ４０において、編集管理部３０２は、編集終了か否かを判定し、終了ではないと判定した場合、ステップＳ３８以降の処理を繰り返す。

一方、編集終了であるとステップＳ４０において判定した場合、ステップＳ４１において、編集管理部３０２は、分割数選択画面をタブレット内蔵モニタ１３１に表示させる。分割数選択画面は、編集作業によって生成された編集画像をシール紙に印刷するときのレイアウトの選択に用いられる画面である。

分割数選択画面から所定のレイアウトが選択されたとき、ステップＳ４２において、編集管理部３０２は、撮影画像の編集を終えた利用者に対して事後接客空間Ａ３への移動を案内する。事後接客空間Ａ３への移動の案内は、タブレット内蔵モニタ１３１に案内画面を表示させることによって、またはスピーカ２３１から音声を出力させることによって行われる。その後、図１３のステップＳ３に戻り、それ以降の処理が行われる。

以上のように、利用者は、撮影画像と同様に、合成画像に対しても編集を行うことができる。

＜３人用コース選択時の処理＞
ここで、３人用コースが選択された場合の撮影処理について説明する。

３人用コースが選択された場合も同様に、図１４のフローチャートを参照して説明した処理と同様の処理が行われる。重複する説明については適宜省略する。

ステップＳ１１において、撮影制御部３１１は、動画の撮影を開始する。

図３０は、切り出し部３１２によるトリミングの例を示す図である。

図３０の画像Ｐ２１は、カメラ９１により撮影された動画の１フレーム全体の画像である。画像Ｐ２１には、撮影空間Ａ１にいる３人の利用者の頭の上から膝のあたりまでが写っている。画像Ｐ２１においては、カメラ９１に向かって右側に立つ利用者Ｈ１１が左側に写り、左側に立つ利用者Ｈ１３が右側に写る。中央に立つ利用者Ｈ１２はそのまま利用者Ｈ１１と利用者Ｈ１３の間に写る。

枠Ｆ２１で示す矩形領域がトリミングによって切り出される領域である。例えば、枠Ｆ２１で示す矩形領域の縦と横の比は３：４である。

切り出し部３１２は、枠Ｆ２１で示す矩形領域の画像からなる動画を表示制御部３１３に出力する。

図３１は、３人用コース選択時における通常撮影用ライブビューの表示画面の例を示す図である。

図３１に示すように、ライブビュー表示領域５０１には、切り出し部３１２から供給された、３人の利用者が映る動画が表示される。ライブビュー表示領域５０１に表示される動画においては、カメラ９１に向かって右側に立つ利用者Ｈ１１が右側に写り、左側に立つ利用者Ｈ１２が左側に写る。

撮影結果表示領域５０２−１乃至５０２−６には、通常撮影が行われる毎に、通常撮影によって得られた３人の利用者が写る撮影画像が撮影順に表示される。

ステップＳ１５において、切り出し部３１２は、通常撮影によって得られた静止画のうち、図３０を参照して説明した枠Ｆ２１で示す矩形領域をトリミングにより切り出すことによって撮影画像を生成する。

切り出し部３１２により生成された撮影画像は、画像記憶部３１７に記憶されるとともに、表示制御部３１３に供給され、通常撮影用ライブビューの表示画面の撮影結果表示領域５０２−１に縮小して表示される。

このような通常撮影が繰り返し行われ、ステップＳ１６において、通常撮影が終わったと判定された場合、ステップＳ１７において、表示制御部３１３は、合成画像の撮影案内画面をタッチパネルモニタ９２に表示させる。

ステップＳ１８において、表示制御部３１３は、デザイン選択画面をタッチパネルモニタ９２に表示させる。

図３２は、３人用コース選択時におけるデザイン選択画面の例を示す図である。

図３２の例においては、加工見本画像８１１−１乃至８１１−６が表示されている。加工見本画像８１１−１乃至８１１−６は、それぞれ、異なる種類の加工が施された画像であり、２枚の画像を組み合わせることによって構成される。

３人用コースの場合、加工見本画像は、上下の２つの区画に分割され、それぞれの区画に、３人のモデルの人物が写る同じ画像が配置される。例えば、各区画の形状は、縦と横の比が１：２である。この場合も、加工見本画像全体の形状は正方形となる。

加工の種類が選択されたとき、ステップＳ１９において、撮影制御部３１１は、動画の撮影を開始する。

図３３は、３人用コース選択時における顔画像切り出し部３１４によるトリミングの例を示す図である。

図３３の画像Ｐ３１は、カメラ９１により撮影された動画の１フレーム全体の画像である。画像Ｐ３１にも、通常撮影を終えた３人の利用者の頭の上から膝のあたりまでが写っている。

枠Ｆ３１で示す１つの矩形領域がトリミングによって切り出される領域である。例えば、枠Ｆ３１で示す矩形領域の縦と横の比は１：２である。枠Ｆ３１で示す矩形領域は、各フレームにおいて固定とされる。

このように、３人用コースにおいても、合成画像の撮影前、通常撮影前とは異なる形状の矩形領域の画像が、カメラ９１により撮影された動画の各フレームから切り出される。

ステップＳ２１において、加工部３１５は、顔画像切り出し部３１４から供給された動画の各フレームに対して、利用者により選択された加工を施す。

図３４は、３人用コース選択時における合成画像撮影用ライブビューの表示画面の例を示す図である。

正方形の領域であるライブビュー表示領域８２１は、上下の２つの区画に分割され、それぞれの区画に、図３３の枠Ｆ３１の矩形領域の画像として切り出され、加工部３１５によって加工が施された同じ動画が表示される。ライブビュー表示領域８２１を構成する各区画の形状は縦と横の比が１：２であり、ライブビュー表示領域８２１全体の形状は正方形となる。

上の区画は、所定の色の枠の画像である枠画像８２１Ａによって強調表示されている。３人の利用者は、枠画像８２１Ａによって強調表示されている区画内の動画を見て、自分の顔が上の区画に収まるように位置を調整する。

３人用コースの場合、合成画像は、１枚の静止画から切り出した枠Ｆ３１で示す矩形領域の画像を上下に配置して構成される画像となる。３人の利用者は、このようなライブビュー表示画面の表示から、生成される合成画像をイメージすることができる。

ステップＳ２４において、顔画像切り出し部３１４は、合成画像の撮影によって得られた静止画のうち、図３３を参照して説明した枠Ｆ３１で示す矩形領域の画像をトリミングにより切り出す。

ステップＳ２５において、加工部３１５は、顔画像切り出し部３１４から供給された画像に対して、利用者により選択された加工を施す。

ステップＳ２６において、合成画像生成部３１６は、加工部３１５から供給された画像を上下に並べて合成することによって１枚の合成画像を生成する。

図３５は、３人用コース選択時における合成画像の配置の例を示す図である。

図３５に示すように、合成画像８３１の領域全体は、上下に分割された２つの区画８３１−１と区画８３１−２から構成される。合成画像８３１の領域全体を左右に２分割してもよい。

合成画像生成部３１６は、合成画像撮影用ライブビュー表示時の配置と同様に、枠Ｆ３２で示す矩形領域の画像を上の区画８３１−１と下の区画８３１−２に配置し、２枚の画像を合成することによって、図３６に示すような１枚の合成画像８３１を生成する。

このように、３人用コースにおいても、利用者は、通常撮影が終わった後、最終的に生成される合成画像をイメージしながら、合成画像の撮影を行うことができる。３人用コースにおいても、２人用コースの場合と同様に４つの区画に配置した画像から合成画像が構成されるようにしてもよい。この場合、１人ずつ写る３つの画像を４区画のうちの３区画にそれぞれ配置し、残りの１区画に、所定の装飾が施されたデザイン画像等を配置することが可能である。デザイン画像を配置するのではなく、残りの１区画に、３人全員が写る画像を配置するようにしてもよい。

なお、４人用コース選択時の撮影処理は、トリミングにより切り出される矩形領域の縦横比が異なる点を除いて、３人用コース選択時と同様の処理である。すなわち、通常撮影前と合成画像の撮影前、カメラ９１により撮影された動画の各フレームから１つの横長の矩形領域の画像が切り出され、ライブビューの表示に用いられる。４人用コースにおいて生成される合成画像についても、２人用コースの場合と同様に４つの区画に配置した画像から構成されるようにすることが可能である。この場合、１人ずつ写る４つの画像が４区画にそれぞれ配置されることによって合成画像が構成されることになる。

＜＜変形例＞＞
・ライブビュー表示領域と合成画像の区画の例
２人用コース選択時のライブビュー表示領域と合成画像の各区画の形状が正方形であるものとしたが、他の形状であってもよい。例えば、各区画の縦と横の比を、撮影画像と同じ１：１．２とすることが可能である。この場合、ライブビュー表示領域全体と合成画像全体の縦と横の比も１：１．２となる。また、各区画の形状を、三角形、円形、楕円形などの各種の形状とすることも可能である。

各区画が均等に分割されるのではなく、左上と右下が小さく、左下と右上が大きいなど、各区画のサイズを利用者が変更することができるようにしてもよい。

また、ライブビュー表示領域と合成画像において、同じ構図の画像が対角に自動的に配置されるのではなく、それぞれの区画に配置される画像を利用者が選択することができるようにしてもよい。

同じ構図の画像が対角に配置されるものとしたが、構図をずらしたものを対角に配置するようにしてもよい。

図３７は、構図をずらした画像が表示されるライブビュー表示領域の例を示す図である。

上述したように、左上の画像５３１Ａは左側に立つ利用者が写る画像であり、右上の画像５３１Ｂは右側に立つ利用者が写る画像である。図３７の例においては、左側に立つ利用者が写る右下の画像５３１Ｄとして、画像５３１Ａとは異なる画像が表示され、右側に立つ利用者が写る左下の画像５３１Ｃとして、画像５３１Ｂとは異なる画像が表示されている。

右下の画像５３１Ｄは、画像５３１Ａを切り出すときに用いた矩形領域の位置を基準とすると、位置をずらした矩形領域を用いて切り出された画像である。また、左下の画像５３１Ｃは、画像５３１Ｂを切り出すときに用いた矩形領域の位置を基準とすると、位置をずらした矩形領域を用いて切り出された画像である。

画像５３１Ｄと画像５３１Ａ、および画像５３１Ｃと画像５３１Ｂにおいて、共通で表示される画像領域を有したまま、領域の基準点となる部分を縦方向、または横方向、あるいは縦横ともに所定量の画素をずらして表示するようにしてもよい。ずらす量は、画像５３１Ａと画像５３１Ｄとの間でずらす画素数と、画像５３１Ｂと画像５３１Ｃとの間で同じでもよいし、違っていてもよい。これにより、同じ画像を表示していても、見る位置が若干異なった画像となり、画像全体の印象が新鮮なものとなる。

このように、ある画像を切り出すときに用いた矩形領域の位置を基準として、位置をずらした矩形領域を用いてそれぞれの画像を切り出すようにしてもよい。合成画像の生成時も、同様にして矩形領域が設定され、画像の切り出しが行われる。

これにより、同じ構図の画像を用いる場合と較べて、意外性のある合成画像を撮影することができる。

・トリミングの例
以上においては、トリミングにより切り出す矩形領域が固定であるものとしたが、顔認識によって、利用者の顔の位置に追従して設定するようにしてもよい。

・加工の例
複数の画像に一括して施す加工を選択するのではなく、区画毎に、加工の種類を選択することができるようにしてもよい。人物が写る部分に対してのみ加工を施したり、背景の部分に対してのみ加工を施したりするといったように、加工を施す部分を選択することができるようにしてもよい。

本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。

１写真シール作成装置、３０１撮影管理部，３１１撮影制御部、３１２切り出し部、３１３表示制御部、３１４顔画像切り出し部、３１５加工部、３１６合成画像生成部、３１７画像記憶部

Claims

利用者を被写体として撮影することによって取得された静止画である撮影画像に対して、前記利用者による入力に応じて編集を施し、編集が施された前記撮影画像を生成する画像処理装置において、
前記利用者を被写体として撮影を行う撮影部と、
複数の区画から構成される表示領域を含むライブビュー表示画面を表示する表示部と、
前記撮影部により撮影された動画の各フレームから切り出した一部の領域の画像を、複数の前記区画に配置して表示させる表示制御部と、
前記ライブビュー表示画面が表示された後の所定のタイミングで前記撮影部により撮影された静止画から切り出した前記一部の領域の画像を前記表示領域における配置と同じ配置で配置して組み合わせることによって構成される合成画像を生成する生成部と
を備え、
前記利用者の人数が２人である場合、それぞれの前記利用者の顔が写る２つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた２つの画像が、それぞれ複数、前記区画に配置して表示され、
前記利用者の人数が３人である場合、全員の前記利用者の顔が写る１つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた１つの画像が、複数、前記区画に配置して表示される
画像処理装置。
前記一部の領域の画像に加工を施す加工部をさらに備え、
前記表示制御部は、加工が施された前記一部の領域の画像を複数の前記区画に配置して表示させ、
前記生成部は、加工が施された前記一部の領域の画像から構成される前記合成画像を生成する
請求項１に記載の画像処理装置。
前記加工部は、前記一部の領域の画像に対して、内容が異なる加工を施す
請求項２に記載の画像処理装置。
前記表示制御部は、前記撮影部により撮影された動画の各フレームから切り出した複数の前記一部の領域の画像を、複数の前記区画に配置して表示させる
請求項３に記載の画像処理装置。
前記利用者の人数が２人である場合の前記表示領域は、同じ大きさ、同じ形状の４つの前記区画が、縦方向と横方向に２区画ずつ並べて配置されることによって構成される
請求項４に記載の画像処理装置。
前記表示制御部は、２つの前記一部の領域の画像のうちの一方の前記一部の領域の画像を対角にある前記区画に配置するとともに、他方の前記一部の領域の画像を対角にある前記区画に配置する
請求項５に記載の画像処理装置。
前記表示制御部は、前記表示領域を構成する上段の２つの前記区画を強調して表示させる
請求項６に記載の画像処理装置。
前記表示領域の形状は正方形であり、
前記合成画像の形状は正方形である
請求項１乃至７のいずれかに記載の画像処理装置。
前記表示領域を構成するそれぞれの前記区画の形状は正方形である
請求項１乃至８のいずれかに記載の画像処理装置。
前記利用者の人数が３人である場合の前記表示領域は、同じ大きさ、同じ形状の２つの前記区画が縦に並べて配置されることによって構成される
請求項４に記載の画像処理装置。
前記表示制御部は、前記利用者の人数に応じて異なる数の前記区画から構成される前記表示領域を表示させる
請求項１乃至１０のいずれかに記載の画像処理装置。
利用者を被写体として撮影することによって取得された静止画である撮影画像に対して、前記利用者による入力に応じて編集を施し、編集が施された前記撮影画像を生成する画像処理装置の画像処理方法において、
前記利用者を被写体として撮影部により撮影を行い、
複数の区画から構成される表示領域を含むライブビュー表示画面を表示する表示部に、前記撮影部により撮影された動画の各フレームから切り出した一部の領域の画像を、複数の前記区画に配置して表示させ、
前記ライブビュー表示画面が表示された後の所定のタイミングで前記撮影部により撮影された静止画から切り出した前記一部の領域の画像を前記表示領域における配置と同じ配置で配置して組み合わせることによって構成される合成画像を生成する
ステップを含み、
前記利用者の人数が２人である場合、それぞれの前記利用者の顔が写る２つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた２つの画像が、それぞれ複数、前記区画に配置して表示され、
前記利用者の人数が３人である場合、全員の前記利用者の顔が写る１つの領域の画像が前記一部の領域の画像として切り出され、切り出されることによって得られた１つの画像が、複数、前記区画に配置して表示される
画像処理方法。