JP2024014882A - Game image shooting system - Google Patents

Game image shooting system Download PDF

Info

Publication number
JP2024014882A
JP2024014882A JP2023187404A JP2023187404A JP2024014882A JP 2024014882 A JP2024014882 A JP 2024014882A JP 2023187404 A JP2023187404 A JP 2023187404A JP 2023187404 A JP2023187404 A JP 2023187404A JP 2024014882 A JP2024014882 A JP 2024014882A
Authority
JP
Japan
Prior art keywords
user
image
photographing
unit
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023187404A
Other languages
Japanese (ja)
Inventor
沙也佳 大島
Sayaka Oshima
正樹 川端
Masaki Kawabata
祥子 庄井
Shoko Shoi
晋平 野村
Shinpei Nomura
裕樹 花房
Hiroki Hanafusa
沙羅 宮中
Sara Miyanaka
晶洋 森
Akihiro Mori
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sega Corp
Original Assignee
Sega Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sega Corp filed Critical Sega Corp
Priority to JP2023187404A priority Critical patent/JP2024014882A/en
Publication of JP2024014882A publication Critical patent/JP2024014882A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Cameras Adapted For Combination With Other Photographic Or Optical Apparatuses (AREA)
  • Studio Devices (AREA)

Abstract

To obtain a photographed image with high user satisfaction in a game image shooting system.SOLUTION: A game image shooting system includes an imaging unit that images a user as a subject, a live view image generation unit that generates a live view image of a subject using the imaging unit, an editing unit that edits the captured image, an image output unit that outputs the edited captured image, an imaging condition registration unit that registers, as feedback information, an imaging condition indicating the standing position, facial inclination, or expression that the user tends to be satisfied with on the basis of an important image selected as satisfying by the user from among the plurality of captured images, and a configuration confirmation unit that reflects the feedback information and determines the appropriateness of the composition for the face area included in the live view image.SELECTED DRAWING: Figure 9

Description

本発明は、遊戯画像の撮影および編集、に関する。 The present invention relates to shooting and editing of play images.

プリクラ(登録商標)とよばれる遊戯画像撮影装置は、女子高生を中心として根強い人気を誇る。ユーザは、自らを撮影し、俗に「盛り」と呼ばれる事前修正が施された撮影画像にペンによる書き込みなどの編集を行う。 A playful image capturing device called Purikura (registered trademark) is extremely popular, especially among high school girls. The user takes a photograph of himself or herself and performs editing such as writing with a pen on the pre-corrected photographed image, which is commonly referred to as "priming."

特開2004‐32213号公報Japanese Patent Application Publication No. 2004-32213

遊戯画像撮影装置の楽しみは、撮影ポーズの工夫や撮影画像に対する編集によりオリジナル性を発揮できるところにある。本発明者らは、撮影や編集に先立って取得される原撮影画像の構図を適正化させることによって、遊戯画像の撮影・編集における利便性と遊戯性をいっそう高めることができると想到した。 The fun of the game image capturing device is that it allows you to express your originality by devising the shooting pose and editing the captured images. The present inventors have come up with the idea that by optimizing the composition of the original photographed image obtained prior to photographing and editing, it is possible to further enhance the convenience and playability of photographing and editing play images.

また、複数ユーザの写り具合が均質であれば撮影や編集が生かされること、更にユーザが好む写り具合はユニークであることにも着目した。 We also focused on the fact that shooting and editing can be put to good use if multiple users' photos are uniform, and that the photos that users prefer are unique.

本発明は、本発明者らによる上記着眼点に基づいて完成された発明であり、その主たる目的は、遊戯画像撮影装置において構図を適正化させるメッセージをユーザの印象に残るように伝え、撮影や編集の機能を生かす方法を提案することにある。 The present invention was completed based on the above points of view by the present inventors, and its main purpose is to convey a message for optimizing the composition in a game image photographing device so as to leave a lasting impression on the user, and to The purpose is to suggest ways to take advantage of editing functions.

本発明のある態様における遊戯画像撮影システムは、ユーザを被写体として撮影する撮影部と、撮影部を用いて被写体のライブビュー画像を生成するライブビュー画像生成部と、撮影画像を編集する編集部と、編集された撮影画像を出力する画像出力部と、複数の撮影画像のうちユーザが満足するとして選択した重要画像に基づいて、ユーザが満足する傾向にある立ち位置、顔の傾きまたは表情を示す撮影条件を、フィードバック情報として登録する撮影条件登録部と、フィードバック情報を反映して、ライブビュー画像に含まれる顔領域について構図の適正度を判定する構成確認部と、を備える。 A play image shooting system according to an aspect of the present invention includes a shooting unit that shoots a user as a subject, a live view image generation unit that uses the shooting unit to generate a live view image of the subject, and an editing unit that edits the shot image. , an image output unit that outputs an edited photographed image, and an image output unit that indicates a standing position, facial inclination, or expression that tends to satisfy the user based on an important image selected as satisfying the user from among the plurality of photographed images. The present invention includes a photographing condition registration section that registers photographing conditions as feedback information, and a configuration confirmation section that reflects the feedback information and determines the suitability of a composition for a face area included in a live view image.

本発明の別の態様における遊戯画像撮影システムは、ユーザを被写体として撮影する撮影部と、撮影画像を編集する編集部と、編集された撮影画像を出力する画像出力部と、撮影画像毎の撮影条件を記録し、複数の撮影画像のうちユーザが満足するとして選択した重要画像に基づいて、ユーザが満足する傾向にある撮影条件を、フィードバック情報として登録する撮影条件登録部と、フィードバック情報を反映して、撮影条件を設定する撮影条件設定部と、を備える。 A game image shooting system according to another aspect of the present invention includes a shooting unit that shoots a user as a subject, an editing unit that edits the shot image, an image output unit that outputs the edited shot image, and a shooting unit that shoots each shot image. A shooting condition registration unit that records conditions and registers shooting conditions that tend to be satisfied by the user as feedback information based on an important image that the user selects as satisfying from a plurality of shot images, and reflects the feedback information. and a photographing condition setting section for setting photographing conditions.

本発明によれば、遊戯画像撮影装置において、構図や撮影条件を適正化させやすくなる。 According to the present invention, it becomes easy to optimize the composition and photographing conditions in the play image photographing device.

遊戯画像撮影システムの全体構成図である。FIG. 1 is an overall configuration diagram of a play image photographing system. 遊戯画像撮影装置の外観斜視図である。FIG. 2 is a perspective view of the appearance of the play image photographing device. 撮影ブースの外観斜視図である。It is an external perspective view of a photography booth. 遊戯画像撮影装置におけるプレイの流れを示すフローチャートである。It is a flowchart showing the flow of play in the game image photographing device. 遊戯画像撮影装置を上から見た平面図である。FIG. 3 is a plan view of the play image photographing device viewed from above. 遊戯画像撮影装置の機能ブロック図である。FIG. 2 is a functional block diagram of a play image photographing device. サーバの機能ブロック図である。It is a functional block diagram of a server. ユーザ情報のデータ構造図である。It is a data structure diagram of user information. フィードバック情報のデータ構造図である。FIG. 3 is a data structure diagram of feedback information. S12(図4)の撮影処理の詳細を示すフローチャートである。5 is a flowchart showing details of the photographing process in S12 (FIG. 4). S26(図10)構図確認処理の詳細を示すフローチャートである。S26 (FIG. 10) is a flowchart showing details of the composition confirmation process. 図11の構図確認処理の続きのフローチャートである。12 is a flowchart that is a continuation of the composition confirmation process of FIG. 11. ライブビュー画像の第1例である。This is a first example of a live view image. S62(図12)ユーザ判別処理の詳細を示すフローチャートである。S62 (FIG. 12) is a flowchart showing details of user determination processing. ライブビュー画像の第2例である。This is a second example of a live view image. ライブビュー画像の第3例である。This is a third example of a live view image. ライブビュー画像の第4例である。This is a fourth example of a live view image. 図12の構図確認処理の続きのフローチャートである。13 is a flowchart continuing the composition confirmation process of FIG. 12. FIG. ライブビュー画像の第5例である。This is a fifth example of a live view image. ライブビュー画像の第6例である。This is a sixth example of a live view image. ライブビュー画像の第7例である。This is a seventh example of a live view image. S26(図10)構図確認処理の詳細を示すフローチャートである。S26 (FIG. 10) is a flowchart showing details of the composition confirmation process. S28(図10)撮影条件設定処理の詳細を示すフローチャートである。S28 (FIG. 10) is a flowchart showing details of the photographing condition setting process.

本実施形態における遊戯画像撮影装置は、撮影ブースと編集ブースを備える。ユーザは撮影ブースにて自らを撮影する。以下、撮影ブースにおいて被写体(ユーザ)を撮影した画像のことを「撮影画像」とよぶ。ユーザは、撮影ブースにおいて肌の美白化、髪のつや出しなど任意の画像修正を撮影画像に施すことができる(以下、このような画像修正を「事前修正」とよぶ)。本実施形態における遊戯画像撮影装置は、撮影ブースにおいて静止画像だけでなく動画像も撮影する。撮影画像のうち、動画像として取得されるものを「撮影動画像」、静止画像として取得されるものを「撮影静止画像」とよぶ。 The game image photographing device in this embodiment includes a photographing booth and an editing booth. The user takes a photo of himself in the photo booth. Hereinafter, an image taken of a subject (user) in a photo booth will be referred to as a "photographed image." The user can perform arbitrary image corrections, such as skin whitening and hair shine, on the captured image in the photo booth (hereinafter, such image corrections will be referred to as "pre-correction"). The play image photographing device in this embodiment photographs not only still images but also moving images in the photographing booth. Among photographed images, those acquired as moving images are referred to as "photographed moving images", and those acquired as still images are referred to as "photographed still images".

事前修正を施された撮影画像は、編集ブースに送られる。ユーザは、編集ブースにおいて、スタンプ画像の貼付やスタイラスペンによる落書きなど任意の装飾を撮影画像に施すことができる(以下、このような画像の装飾を「装飾加工」または「編集」とよぶ)。編集ブースにおいて編集対象となっている撮影画像のことを「対象画像」とよぶ。また、対象画像のうち、撮影動画像を編集対象としたものを「対象動画像」、撮影静止画像を編集対象としたものを「対象静止画像」とよぶ。 The pre-corrected images are sent to an editing booth. In the editing booth, the user can apply any decoration to the photographed image, such as pasting a stamp image or writing with a stylus pen (hereinafter, such image decoration will be referred to as "decoration processing" or "editing"). The photographed image that is to be edited in the editing booth is referred to as a "target image." Furthermore, among the target images, one in which a photographed moving image is to be edited is referred to as a "target moving image", and one in which a photographed still image is to be edited is referred to as a "target still image".

遊戯画像撮影装置は、対象静止画像をシール台紙(外部媒体)に印刷する。また、遊戯画像撮影装置は、対象動画像および対象静止画像をサーバ(外部媒体)にアップロードする。ユーザは、スマートフォンなどのユーザ端末からサーバにアクセスすることにより、装飾加工後の対象画像(対象動画像と対象静止画像)をダウンロードすることもできる。以上のように、本実施形態における遊戯画像撮影装置は、撮影機能、編集機能(装飾加工機能)、印刷機能および通信機能を備える。
以下においては、被写体の各種情報に基づく撮影・編集時の設定変更を中心として説明する。
The play image photographing device prints the target still image on a sticker mount (external medium). Further, the play image photographing device uploads the target moving image and the target still image to a server (external medium). A user can also download target images (target moving images and target still images) after decoration processing by accessing the server from a user terminal such as a smartphone. As described above, the play image photographing device in this embodiment has a photographing function, an editing function (decoration processing function), a printing function, and a communication function.
The following description will focus on changing settings during shooting and editing based on various information about the subject.

図1は、遊戯画像撮影システム200の全体構成図である。
遊戯画像撮影システム200においては、遊戯画像撮影装置100はインターネット204を介してサーバ202およびユーザ端末206と接続される。遊戯画像撮影装置100においてユーザは自らを撮影する。遊戯画像撮影装置100は、被写体(ユーザ)を含む撮影画像を取得し、必要に応じて事前修正を撮影画像に施し、ユーザによる装飾加工を受け付ける。ユーザは、あらかじめ付与されたユーザIDにより識別される。ユーザは、ユーザIDが登録されたユーザカードを利用して遊戯画像撮影装置100のプレイ予約をする。
FIG. 1 is an overall configuration diagram of a play image photographing system 200.
In the game image photographing system 200, the game image photographing device 100 is connected to a server 202 and a user terminal 206 via the Internet 204. A user photographs himself/herself using the game image photographing device 100. The play image photographing device 100 acquires a photographed image including a subject (user), performs preliminary correction on the photographed image as necessary, and accepts decorative processing by the user. A user is identified by a user ID assigned in advance. The user makes a play reservation for the game image photographing device 100 using the user card in which the user ID is registered.

装飾加工後の対象画像はユーザIDとともに遊戯画像撮影装置100からサーバ202にアップロードされる。サーバ202は、ユーザID、撮影日時および対象画像(対象動画像と対象静止画像)を対応づけて保存する。ユーザは、ユーザIDおよびパスワード等の認証情報を介してサーバ202にアクセスすることにより、サーバ202から対象画像をダウンロードする。 The target image after decoration processing is uploaded from the game image photographing device 100 to the server 202 together with the user ID. The server 202 stores the user ID, shooting date and time, and target images (target moving image and target still image) in association with each other. A user downloads a target image from the server 202 by accessing the server 202 via authentication information such as a user ID and password.

サーバ202は、ユーザに関連する各種情報(以下、「ユーザ情報」とよぶ)を管理する。本実施形態における遊戯画像撮影装置100は、ライブビュー画像に基づいて被写体への指示や撮影条件の設定変更を自動的に行うが詳細は後述する。 The server 202 manages various types of information related to users (hereinafter referred to as "user information"). The play image photographing device 100 in this embodiment automatically instructs the subject and changes settings of photographing conditions based on the live view image, details of which will be described later.

図2は、遊戯画像撮影装置100の外観斜視図である。
遊戯画像撮影装置100は、受付装置102、撮影ブース104、編集ブース106および印刷装置110を備える。ユーザは、受付装置102において遊戯画像撮影装置100の使用を予約する。ユーザは、受付装置102においてユーザIDを入力するとともに、現金または電子マネーにてプレイ料金を支払う。受付装置102は、ユーザに予約番号を発行する。受付装置102は、受付モニタ108において待機人数および呼び出し対象となる予約番号を表示させる。ユーザは、自分の予約番号が受付モニタ108に表示されると、撮影ブース104に入室する。
FIG. 2 is an external perspective view of the play image photographing device 100.
The game image photographing device 100 includes a reception device 102, a photographing booth 104, an editing booth 106, and a printing device 110. A user makes a reservation to use the play image photographing device 100 at the reception device 102. The user inputs the user ID at the reception device 102 and pays the play fee with cash or electronic money. The reception device 102 issues a reservation number to the user. The reception device 102 causes the reception monitor 108 to display the number of people waiting and the reservation number to be called. When the user's reservation number is displayed on the reception monitor 108, the user enters the photo booth 104.

撮影ブース104においてユーザは写真撮影を行う。撮影終了後、ユーザは編集ブース106に移動する。編集ブース106には、編集装置126が設置される。編集装置126は、編集モニタ120を備える。編集モニタ120には対象画像(装飾加工の対象となる撮影画像)が表示される。本実施形態における編集モニタ120は、静電容量式タッチパネルにより形成される。1つの編集モニタ120に対して、2つのスタイラスペン122a、122bが用意される。ユーザはスタイラスペン122および指を使って対象画像に装飾加工を施す。編集終了後、印刷装置110は対象静止画像をシール台紙に印刷する。また、編集装置126は、対象画像をサーバ202にアップロードする。 A user takes a photo in the photo booth 104. After shooting, the user moves to the editing booth 106. An editing device 126 is installed in the editing booth 106. Editing device 126 includes an editing monitor 120 . A target image (a photographed image to be subjected to decorative processing) is displayed on the editing monitor 120. The editing monitor 120 in this embodiment is formed by a capacitive touch panel. Two stylus pens 122a and 122b are prepared for one editing monitor 120. The user uses the stylus pen 122 and his finger to decorate the target image. After editing is completed, the printing device 110 prints the target still image on the sticker mount. Additionally, the editing device 126 uploads the target image to the server 202.

図3は、撮影ブース104の外観斜視図である。
撮影ブース104は、カーテン124により外部から遮蔽される。撮影ブース104には、撮影装置128が設置される。撮影装置128は、被写体となるユーザを3方向から照らす3つのライト116、撮影静止画像および撮影動画像を取得するためのカメラ118、第1撮影モニタ112、第2撮影モニタ114、左側ストロボ119aおよび右側ストロボ119bを備える。
FIG. 3 is an external perspective view of the photo booth 104.
The photo booth 104 is shielded from the outside by a curtain 124. A photographing device 128 is installed in the photographing booth 104. The photographing device 128 includes three lights 116 that illuminate the user as the subject from three directions, a camera 118 for acquiring photographed still images and photographed moving images, a first photographing monitor 112, a second photographing monitor 114, a left strobe 119a, and A right strobe 119b is provided.

第1撮影モニタ112は、ライブビュー画像及びユーザの撮影画像(撮影動画像と撮影静止画像)を表示させる。第2撮影モニタ114は、被写体となるユーザ以外の人物、たとえば、モデルの撮影画像(以下、「サンプル画像」とよぶ)を表示させる。ユーザは、第2撮影モニタ114に表示されるサンプル画像を参考にしながら、カメラ118の前で任意の撮影ポーズをとる。第2撮影モニタ114には、撮影方法に関する各種説明も表示される。左側ストロボ119aおよび右側ストロボ119bは、撮影静止画像の撮影と同時に発光する。上述したように、撮影ブース104においては、撮影動画像および撮影静止画像を取得できる。
本実施形態においては、第2撮影モニタ114はサンプル画像により、撮影ポーズも指示する(詳細は、省略する)。
The first photographing monitor 112 displays live view images and user's photographed images (photographed moving images and photographed still images). The second photographing monitor 114 displays a photographed image (hereinafter referred to as a "sample image") of a person other than the user who is the subject, for example, a model. The user takes an arbitrary photographing pose in front of the camera 118 while referring to the sample image displayed on the second photographing monitor 114. The second photographing monitor 114 also displays various explanations regarding the photographing method. The left strobe 119a and the right strobe 119b emit light at the same time as the photographed still image is photographed. As described above, in the photographing booth 104, photographed moving images and photographed still images can be acquired.
In this embodiment, the second photographing monitor 114 also instructs a photographing pose using a sample image (details are omitted).

図4は、遊戯画像撮影装置100におけるプレイの流れを示すフローチャートである。図5は、遊戯画像撮影装置100を上から見た平面図である。
ユーザは、受付装置102において使用予約を行うと、受付装置102は受付処理を実行する(S10)。受け付け後、ユーザは撮影ブース104に入室する。撮影装置128は、ユーザの撮影画像を取得する(S12)。撮影ブース104においては、ユーザは所定数の撮影画像を取得できる。撮影動画像と撮影静止画像は同時に取得され(後述)、撮影動画像と撮影静止画像のペアを1セットの撮影画像とカウントする。本実施形態においては、最大6セットの撮影画像(撮影動画像と撮影静止画像のセット)が取得される。撮影に際し、ユーザは撮影装置128が提供する複数の事前修正メニューから事前修正の方法を選択できる。また、ユーザは撮影画像の背景色等も撮影装置128において選択できる。撮影装置128は、撮影画像を取得するごとに事前修正を実行する。なお、事前修正メニューは、受付装置102においてプレイ前に選択できてもよい。撮影処理(S12)の詳細は図10に関連して後述する。
FIG. 4 is a flowchart showing the flow of play in the game image photographing device 100. FIG. 5 is a top plan view of the play image photographing device 100.
When the user makes a reservation for use at the reception device 102, the reception device 102 executes reception processing (S10). After accepting the request, the user enters the photographing booth 104. The photographing device 128 acquires a photographed image of the user (S12). In the photographing booth 104, the user can acquire a predetermined number of photographed images. A photographed moving image and a photographed still image are acquired simultaneously (described later), and a pair of a photographed moving image and a photographed still image is counted as one set of photographed images. In this embodiment, a maximum of six sets of captured images (sets of captured moving images and captured still images) are acquired. When photographing, the user can select a pre-correction method from a plurality of pre-correction menus provided by the photographing device 128. Additionally, the user can also select the background color of the photographed image using the photographing device 128. The photographing device 128 performs advance correction every time it acquires a photographed image. Note that the pre-correction menu may be selectable on the reception device 102 before playing. Details of the photographing process (S12) will be described later with reference to FIG.

撮影後、第1撮影モニタ112には、2つの編集ブース106のいずれかを指示する指示情報が表示される。ユーザは、2つの編集ブース106a、106bのうち、第1撮影モニタ112により指定された編集ブース106に移動する。撮影装置128からは、編集装置126に撮影画像が転送される。ユーザは、編集装置126において転送された撮影画像(対象画像)に装飾加工を施す(S14)。 After photographing, instruction information instructing one of the two editing booths 106 is displayed on the first photographing monitor 112. The user moves to the editing booth 106 designated by the first photographing monitor 112 out of the two editing booths 106a and 106b. The photographed image is transferred from the photographing device 128 to the editing device 126. The user applies decorative processing to the transferred captured image (target image) in the editing device 126 (S14).

編集後、編集装置126は対象画像を印刷装置110に送り、印刷装置110は対象画像をシール台紙に印刷する(S16)。また、編集装置126は、インターネット204を介して対象画像をサーバ202にアップロードする(S18)。ユーザは、ユーザIDをアクセスキーとしてサーバ202にアクセスすることにより、対象画像をサーバ202からユーザ端末206にダウンロードできる。 After editing, the editing device 126 sends the target image to the printing device 110, and the printing device 110 prints the target image on a sticker mount (S16). Further, the editing device 126 uploads the target image to the server 202 via the Internet 204 (S18). The user can download the target image from the server 202 to the user terminal 206 by accessing the server 202 using the user ID as an access key.

一般的には、撮影作業よりも編集作業に時間がかかる。本実施形態における遊戯画像撮影装置100においては、1つの撮影ブース104に対して2つの編集ブース106a、106b(編集装置126a、126b)を設けることにより、顧客回転率を高めている。 Generally, editing takes more time than shooting. In the game image photographing device 100 in this embodiment, two editing booths 106a and 106b (editing devices 126a and 126b) are provided for one photographing booth 104, thereby increasing the customer turnover rate.

図6は、遊戯画像撮影装置100の機能ブロック図である。
遊戯画像撮影装置100の各構成要素は、CPU(Central Processing Unit)および各種コプロセッサなどの演算器、メモリやストレージといった記憶装置、それらを連結する有線または無線の通信線を含むハードウェアと、記憶装置に格納され、演算器に処理命令を供給するソフトウェアによって実現される。コンピュータプログラムは、デバイスドライバ、オペレーティングシステム、それらの上位層に位置する各種アプリケーションプログラム、また、これらのプログラムに共通機能を提供するライブラリによって構成されてもよい。
上述したように、遊戯画像撮影装置100は、撮影装置128、受付装置102、編集装置126および印刷装置110の集合体として構成される。以下に説明する各ブロックは、ハードウェア単位の構成ではなく、機能単位のブロックを示している。図7に示すサーバ202も同様である。
FIG. 6 is a functional block diagram of the play image photographing device 100.
Each component of the play image photographing device 100 includes hardware including arithmetic units such as a CPU (Central Processing Unit) and various coprocessors, storage devices such as memory and storage, and wired or wireless communication lines connecting them, and storage. This is realized by software that is stored in the device and supplies processing instructions to the arithmetic unit. A computer program may be composed of a device driver, an operating system, various application programs located in an upper layer thereof, and a library that provides common functions to these programs.
As described above, the play image photographing device 100 is configured as a collection of the photographing device 128, the receiving device 102, the editing device 126, and the printing device 110. Each block described below indicates a functional unit block rather than a hardware unit configuration. The same applies to the server 202 shown in FIG.

遊戯画像撮影装置100は、ユーザインタフェース処理部130、データ処理部132、通信部134およびデータ格納部136を含む。
ユーザインタフェース処理部130は、受付モニタ108、編集モニタ120等を介したユーザインタフェース処理を担当する。通信部134は、インターネット204を介してサーバ202との通信処理を担当する。通信部134は、近距離無線通信によりユーザ端末206とダイレクトに通信してもよい。たとえば、通信部134からユーザ端末206に対象画像を直接送信してもよい。データ格納部136は各種データを格納する。データ処理部132は、通信部134により取得されたデータおよびデータ格納部136に格納されているデータに基づいて各種処理を実行する。データ処理部132は、ユーザインタフェース処理部130、通信部134およびデータ格納部136のインタフェースとしても機能する。
The play image photographing device 100 includes a user interface processing section 130, a data processing section 132, a communication section 134, and a data storage section 136.
The user interface processing unit 130 is in charge of user interface processing via the reception monitor 108, the editing monitor 120, and the like. The communication unit 134 is in charge of communication processing with the server 202 via the Internet 204. The communication unit 134 may communicate directly with the user terminal 206 by short-range wireless communication. For example, the target image may be directly transmitted from the communication unit 134 to the user terminal 206. The data storage unit 136 stores various data. The data processing unit 132 executes various processes based on the data acquired by the communication unit 134 and the data stored in the data storage unit 136. The data processing section 132 also functions as an interface for the user interface processing section 130, the communication section 134, and the data storage section 136.

ユーザインタフェース処理部130は、ユーザによる操作入力を受け付ける入力部140と、ユーザへの情報提示を行う出力部142と、撮影画像を取得する撮影部138(カメラ118)を含む。入力部140は、受付装置102、撮影装置128、編集装置126等に設置されるタッチパネルに対するユーザの操作入力を検出する。入力部140は、スタイラスペン122による操作入力も検出する。出力部142は、受付装置102、撮影装置128、編集装置126等における画像表示のほか、音声出力、印刷出力など各種の出力処理を実行する。 The user interface processing section 130 includes an input section 140 that receives operation input from the user, an output section 142 that presents information to the user, and a photographing section 138 (camera 118) that acquires a photographed image. The input unit 140 detects a user's operation input to a touch panel installed in the reception device 102, the photographing device 128, the editing device 126, and the like. The input unit 140 also detects operation input using the stylus pen 122. The output unit 142 performs various output processes such as audio output and print output in addition to image display in the receiving device 102, photographing device 128, editing device 126, and the like.

入力部140は、ID取得部158を含む。ID取得部158は、ユーザカードから、ユーザIDを取得する。 The input unit 140 includes an ID acquisition unit 158. The ID acquisition unit 158 acquires the user ID from the user card.

出力部142は、画像出力部170、撮影指示部160と説明部162を含む。撮影指示部160は、被写体となるユーザに対して撮影方法、たとえば、立ち位置、姿勢や表情等について指示する(詳細後述)。説明部162は、受付・撮影・編集・印刷に際し、テキスト画像および音声により、ユーザに対して遊戯画像撮影装置100の使用方法の説明を行う。 The output unit 142 includes an image output unit 170, a shooting instruction unit 160, and an explanation unit 162. The photographing instruction unit 160 instructs the user, who is the subject, about the photographing method, for example, the standing position, posture, facial expression, etc. (details will be described later). The explanation section 162 explains to the user how to use the game image photographing device 100 using text images and audio during reception, photographing, editing, and printing.

データ処理部132は、撮影制御部144、編集処理部146(編集部)、受付管理部148、印刷処理部150および画像認識部152を含む。
撮影制御部144は、撮影ブース104における撮影処理を制御する。撮影制御部144は、撮影ブース104においてユーザに撮影タイミングを通知する。撮影タイミングを時刻t1とすると、撮影制御部144は時刻t1よりも1.5秒前から0.1秒前まで動画像(以下、「前半動画像」とよぶ)を記録し、時刻t1において撮影静止画像を取得し、時刻t1の0.1秒後から1.5秒後まで動画像(以下、「後半動画像」とよぶ)を再び記録する。撮影制御部144は、前半動画像と後半動画像をつなげることにより撮影動画像を生成する。撮影制御部144は、撮影部138に撮影の開始指示および停止指示を送信することにより、撮影部138を制御する。また、撮影制御部144は、撮影静止画の取得時においては、図示しないストロボを発光させる。撮影動画像は、撮影静止画の取得期間、いいかえれば、ストロボ発光時の動画が含まれないため、ストロボ発光が映り込むことがない。
The data processing section 132 includes a shooting control section 144, an editing processing section 146 (editing section), a reception management section 148, a printing processing section 150, and an image recognition section 152.
The photographing control unit 144 controls photographing processing in the photographing booth 104. The photographing control unit 144 notifies the user of the photographing timing in the photographing booth 104. Assuming that the shooting timing is time t1, the shooting control unit 144 records a moving image (hereinafter referred to as "first half moving image") from 1.5 seconds before time t1 to 0.1 seconds before shooting, and starts shooting at time t1. A still image is acquired, and a moving image (hereinafter referred to as "second half moving image") is recorded again from 0.1 seconds to 1.5 seconds after time t1. The photographing control unit 144 generates a photographed moving image by connecting the first half moving image and the second half moving image. The imaging control unit 144 controls the imaging unit 138 by transmitting an instruction to start and stop the imaging to the imaging unit 138. Further, the photographing control unit 144 causes a strobe (not shown) to emit light when acquiring a photographed still image. The photographed moving image does not include the acquisition period of the photographed still image, in other words, the video at the time of strobe light emission, so that strobe light emission is not reflected.

また、撮影制御部144は、構図確認部154、差判定部156、撮影条件設定部157、事前修正部159および好み特定部164を含む。構図確認部154は、ライブビュー画像における構図を検証する。差判定部156は、被写体の特性に関する差を判定する。撮影条件設定部157は、ストロボ光量などの撮影条件を設定する。事前修正部159は、事前修正を実行する。好み特定部164は、被写体であるユーザの好みを特定する。 The photography control unit 144 also includes a composition confirmation unit 154, a difference determination unit 156, a photography condition setting unit 157, a pre-correction unit 159, and a preference identification unit 164. The composition confirmation unit 154 verifies the composition in the live view image. The difference determination unit 156 determines a difference regarding the characteristics of the subject. The photographing condition setting section 157 sets photographing conditions such as the amount of flash light. The pre-correction unit 159 performs pre-correction. The preference identifying unit 164 identifies the preferences of the user who is the subject.

画像出力部170は、撮影画像を対象画像として編集モニタ120(静電容量式のタッチパネル)に表示させる。編集処理部146は、ユーザからの操作入力にしたがって対象画像を装飾加工する。受付管理部148は、受付装置102においてユーザによるプレイ料金の支払いと予約順序を管理する。受付管理部148は、撮影ブース104において撮影作業が終了するごとに、予約中のユーザを撮影ブース104に案内する。印刷処理部150は、印刷装置110における対象画像の印刷を制御する。たとえば、画像認識部152は、撮影画像等からオブジェクトやユーザの顔画像を認識する。画像認識部152は、撮影制御部144に含まれてもよい。 The image output unit 170 displays the photographed image as a target image on the editing monitor 120 (capacitive touch panel). The editing processing unit 146 decorates the target image according to the operation input from the user. The reception management unit 148 manages the payment of play fees by users and the order of reservations in the reception device 102 . The reception management unit 148 guides the user who has made a reservation to the photo booth 104 every time a photo shoot is completed in the photo booth 104. The print processing unit 150 controls printing of the target image in the printing device 110. For example, the image recognition unit 152 recognizes an object or a user's face image from a photographed image or the like. The image recognition unit 152 may be included in the imaging control unit 144.

通信部134は、ユーザ情報取得部166、ユーザID送信部168および画像送信部188を含む。ユーザID送信部168は、ID取得部158が取得したユーザIDをサーバ202に送信する。ユーザ情報取得部166は、ユーザIDに対応するユーザ情報をサーバ202から受信する。画像送信部188は、装飾加工後の対象画像をサーバ202にアップロードする。 The communication unit 134 includes a user information acquisition unit 166, a user ID transmission unit 168, and an image transmission unit 188. The user ID transmitting unit 168 transmits the user ID acquired by the ID acquiring unit 158 to the server 202. The user information acquisition unit 166 receives user information corresponding to the user ID from the server 202. The image transmitting unit 188 uploads the target image after decoration processing to the server 202.

図7は、サーバ202の機能ブロック図である。
サーバ202は、通信部210、データ処理部212およびデータ格納部214を含む。通信部210は、インターネット204を介して遊戯画像撮影装置100、ユーザ端末206との通信処理を担当する。データ格納部214はユーザ情報等の各種データを格納する。データ処理部212は、通信部210により取得されたデータおよびデータ格納部214に格納されているデータに基づいて各種処理を実行する。データ処理部212は、通信部210およびデータ格納部214のインタフェースとしても機能する。
FIG. 7 is a functional block diagram of the server 202.
Server 202 includes a communication section 210, a data processing section 212, and a data storage section 214. The communication unit 210 is in charge of communication processing with the play image photographing device 100 and the user terminal 206 via the Internet 204. The data storage unit 214 stores various data such as user information. The data processing unit 212 executes various processes based on the data acquired by the communication unit 210 and the data stored in the data storage unit 214. The data processing section 212 also functions as an interface between the communication section 210 and the data storage section 214.

通信部210は、ユーザID取得部216、ユーザ情報送信部218および画像受信部296を含む。ユーザID取得部216は、遊戯画像撮影装置100からユーザIDを受信する。ユーザ情報送信部218は、ユーザID取得部216が受信したユーザIDに対応するユーザ情報を遊戯画像撮影装置100に送信する。画像受信部296は、遊戯画像撮影装置100から装飾加工後の対象画像を受信する。 The communication unit 210 includes a user ID acquisition unit 216, a user information transmission unit 218, and an image reception unit 296. The user ID acquisition unit 216 receives the user ID from the play image photographing device 100. The user information transmitting unit 218 transmits the user information corresponding to the user ID received by the user ID acquiring unit 216 to the game image photographing device 100. The image receiving unit 296 receives the target image after decoration processing from the play image photographing device 100.

データ処理部212は、重要画像選択部220、撮影条件登録部222、ユーザ情報管理部224および画像認識部292を含む。重要画像選択部220は、複数の撮影画像のうち、後述の方法によりユーザの満足度が高いと考えられる撮影画像である「重要画像」を選択する。撮影条件登録部222は、重要画像に基づいて好適な撮影条件を登録する。ユーザ情報管理部224は、データ格納部214に格納されるユーザ情報を管理する。画像認識部292は、ユーザ登録時の顔画像から特徴データを生成し、ユーザ情報に設定する。また、画像認識部292は、撮影画像等からオブジェクトやユーザの顔画像を認識することもできる。 The data processing section 212 includes an important image selection section 220, a photographing condition registration section 222, a user information management section 224, and an image recognition section 292. The important image selection unit 220 selects an "important image" that is a photographed image that is considered to have a high degree of user satisfaction from among the plurality of photographed images, using a method described later. The photographing condition registration unit 222 registers suitable photographing conditions based on important images. The user information management unit 224 manages user information stored in the data storage unit 214. The image recognition unit 292 generates feature data from the face image at the time of user registration, and sets it as user information. The image recognition unit 292 can also recognize an object or a user's face image from a photographed image or the like.

図8は、ユーザ情報230のデータ構造図である。
ユーザ情報230は、サーバ202のデータ格納部214に格納される。ユーザ情報230は、ユーザの属性、好みなどを定義する情報である。ユーザは、遊戯画像撮影システム200に会員登録したときにユーザIDが発行される。ユーザ情報230は、ユーザの年齢等を含む基本情報、顔情報、好みの撮影条件、好みの仕上がりを含む。ユーザは、ユーザ端末206からユーザIDを指定してサーバ202にログインすることにより、ユーザ情報を任意に編集できる。図8はユーザ情報230の一部を示す。
FIG. 8 is a data structure diagram of the user information 230.
User information 230 is stored in data storage 214 of server 202. User information 230 is information that defines user attributes, preferences, and the like. When a user registers as a member of the game image photographing system 200, a user ID is issued. The user information 230 includes basic information including the user's age, face information, preferred shooting conditions, and preferred finish. The user can edit user information as desired by specifying a user ID from the user terminal 206 and logging into the server 202. FIG. 8 shows part of the user information 230.

図8によると、ユーザID=P01のユーザ(以下、「ユーザ(P01)」のように表記する)は、17歳の女性であり、ニックネームは「あーちゃん」である。また、ユーザID=P02のユーザ(以下、「ユーザ(P02)」のように表記する)は、17歳の女性であり、ニックネームは「サッチー」である。 According to FIG. 8, the user with user ID=P01 (hereinafter referred to as "user (P01)") is a 17-year-old female, and her nickname is "A-chan." Further, the user with user ID=P02 (hereinafter referred to as "user (P02)") is a 17-year-old female, and her nickname is "Satchie."

顔情報には、特徴データ、大きさ係数、肌特性が登録される。特徴データは、ユーザの顔の特徴を示し、顔識別に用いられる。大きさ係数は、標準の顔の大きさに対するユーザの顔の大きさの比率である。標準の目の間隔に対するユーザの目の間隔の比率である間隔係数を登録するようにしてもよい。例えば、子供のように顔が小さいユーザの場合に、大きさ係数と間隔係数は、1よりも小さい値となる。肌特性は、色白、普通、色黒などを示す。顔情報は、例えばユーザ登録の際に取得したユーザの顔画像に基づいて生成される。サーバ202の画像受信部296が受信した顔画像を用いて、サーバ202の画像認識部292が顔情報を生成する。あるいは、遊戯画像撮影装置100の撮影部138が撮影した顔画像を用いて、遊戯画像撮影装置100の画像認識部152が顔情報を生成し、遊戯画像撮影装置100の通信部134が顔情報をサーバ202へ送信するようにしてもよい。 Feature data, size coefficients, and skin characteristics are registered in the face information. The feature data indicates the features of the user's face and is used for face identification. The size factor is the ratio of the user's face size to the standard face size. A spacing coefficient that is a ratio of the user's eye spacing to a standard eye spacing may be registered. For example, in the case of a user with a small face, such as a child, the size coefficient and the interval coefficient have values smaller than 1. Skin characteristics include fair skin, normal skin, and dark skin. The face information is generated, for example, based on a user's face image acquired during user registration. Using the facial image received by the image receiving unit 296 of the server 202, the image recognition unit 292 of the server 202 generates facial information. Alternatively, the image recognition unit 152 of the play image capture device 100 generates face information using the face image captured by the capture unit 138 of the play image capture device 100, and the communication unit 134 of the play image capture device 100 generates the face information. It may also be transmitted to the server 202.

好みの撮影条件は、例えば好みのストロボ光量である。好みの撮影条件は、事前修正の種類やパラメータであってもよい。好みの仕上がりは、例えば肌の印象である。肌の印象は、美白、標準、ナチュラル等である。サーバ202が、ユーザ履歴をフィードバックして、自動的に好みの撮影条件および好みの仕上がりを設定するようにしてもよい。 The preferred photographing condition is, for example, a preferred strobe light amount. The preferred shooting conditions may be the type or parameters of pre-correction. The desired finish is, for example, the impression of skin. The impression of the skin is white, normal, natural, etc. The server 202 may feed back the user's history and automatically set the desired shooting conditions and desired finish.

ユーザ情報230には、このほかにもさまざまな情報が含まれてもよい。たとえば、基本情報として、ユーザの名前(本名)、生年月日、出身地、学校、会社、職業等が含まれてもよい。また、基本情報として、音楽情報(好きなアーティスト、好きな曲など)、パレット情報(ペンの太さ、ペンの色など)、ユーザの嗜好情報(好きな食べ物、好きな言葉、好きな有名人、好きなキャラクタ、好きなゲームなど)が含まれてもよい。 User information 230 may include various other information. For example, the basic information may include the user's name (real name), date of birth, place of birth, school, company, occupation, etc. In addition, basic information includes music information (favorite artist, favorite song, etc.), palette information (pen thickness, pen color, etc.), and user preference information (favorite food, favorite words, favorite celebrity, etc.). Favorite characters, favorite games, etc.) may also be included.

このほかにも、ユーザ情報230には編集履歴が含まれてもよい。編集履歴には、たとえば、ユーザが設定したペンの線種や色彩、各種スタンプの利用履歴が含まれる。編集処理部146は、ユーザの編集作業の結果を編集履歴として記録し、編集終了後にサーバ202に編集履歴をユーザIDとともに送信する。ユーザ情報管理部224は、編集履歴を取得してユーザ情報230を適宜更新してもよい。 In addition to this, the user information 230 may also include an editing history. The editing history includes, for example, the pen line type and color set by the user, and the usage history of various stamps. The editing processing unit 146 records the results of the user's editing work as an editing history, and transmits the editing history to the server 202 together with the user ID after editing is completed. The user information management unit 224 may obtain the editing history and update the user information 230 as appropriate.

ユーザ情報230には、使用履歴が含まれてもよい。使用履歴は、ユーザがどの遊戯画像撮影装置100をどのくらい利用しているかを示す情報である。 User information 230 may include usage history. The usage history is information indicating which game image photographing device 100 is used by the user and how long.

図9は、フィードバック情報290のデータ構造図である。
フィードバック情報290は、サーバ202のデータ格納部214に格納される。フィードバック情報290は、ユーザがどのような撮影条件で撮影したときの撮影画像に満足する傾向があるかを示す統計情報である。重要画像選択部220は、撮影画像からユーザが満足している撮影画像である「重要画像」を選択する。本実施形態においては、ユーザは、複数の撮影画像に対して、「満足」「普通」「不満」のいずれかを入力する。重要画像選択部220は、「満足」と設定された撮影画像を重要画像と判断する。
FIG. 9 is a data structure diagram of the feedback information 290.
Feedback information 290 is stored in data storage 214 of server 202. The feedback information 290 is statistical information indicating under what shooting conditions the user tends to be satisfied with the captured images. The important image selection unit 220 selects an "important image" that is a photographed image that the user is satisfied with from among the photographed images. In this embodiment, the user inputs "satisfied,""average," or "unsatisfied" with respect to a plurality of captured images. The important image selection unit 220 determines a photographed image set as "satisfactory" to be an important image.

撮影条件登録部222は、撮影画像ごとの撮影条件を記録する。図9によれば、ユーザ(P01)は比較的前方に立って撮影したときの撮影画像のうち60%については「満足」、30%については「普通」、10%については「不満」と回答している。したがって、ユーザ(P01)の満足度は、撮影時の立ち位置が前である場合に満足しやすい傾向がある。 The photographing condition registration unit 222 records photographing conditions for each photographed image. According to Figure 9, the user (P01) responded that he was "satisfied" with 60% of the images taken while standing relatively forward, "average" with 30%, and "dissatisfied" with 10%. are doing. Therefore, the user (P01) tends to be more satisfied when the standing position at the time of photographing is the front.

ユーザ(P01)は、顔を傾けたときの撮影画像については70%について満足しており、不満は2%しかない。したがって、ユーザ(P01)は、小首をかしげたときの撮影画像に満足しやすい傾向がある。同様に、ユーザ(P01)は微笑したときの撮影画像についても満足度が高い。これらの傾向を、図10の構図確認処理(S26)、撮影条件設定処理(S28)に反映させるようにしてもよい。詳しくは、後述する。 The user (P01) is satisfied with 70% of the images captured when his face is tilted, and only 2% is dissatisfied. Therefore, the user (P01) tends to be satisfied with the captured image when tilting his head slightly. Similarly, the user (P01) also has a high degree of satisfaction with the captured images when he smiles. These trends may be reflected in the composition confirmation process (S26) and the shooting condition setting process (S28) in FIG. 10. The details will be described later.

図10は、S12(図4)の撮影処理の詳細を示すフローチャートである。
まず、撮影制御部144は、撮影部138および画像出力部170を用いるライブビューを起動する(S20)。ライブビューが行われている間、カメラ118から継続的に得られる映像が即時第1撮影モニタ112に表示される。ライブビューによって、第1撮影モニタ112に表示される画像をライブビュー画像又はスルー画像という。
FIG. 10 is a flowchart showing details of the photographing process in S12 (FIG. 4).
First, the photographing control section 144 activates live view using the photographing section 138 and the image output section 170 (S20). While the live view is being performed, images continuously obtained from the camera 118 are immediately displayed on the first photographing monitor 112. The image displayed on the first photographing monitor 112 by live view is called a live view image or a through image.

説明部162は、撮影時において所定の説明情報を第2撮影モニタ114に表示させるとともに、説明のために用意された音声を再生する(S22)。 The explanation section 162 displays predetermined explanation information on the second photographing monitor 114 at the time of photographing, and plays back audio prepared for the explanation (S22).

その後、撮影制御部144は、カウントダウンを開始するタイミングを待つ(S24)。たとえば、撮影制御部144は、ユーザがカウントダウンの開始ボタンにタッチするまで待つ。撮影制御部144は、所定の時間が経過した時点で、カウントダウンを開始するタイミングに至ったと判断してもよい。 After that, the photographing control unit 144 waits for the timing to start the countdown (S24). For example, the imaging control unit 144 waits until the user touches a countdown start button. The imaging control unit 144 may determine that it is time to start the countdown when a predetermined time has elapsed.

カウントダウンを開始するタイミングに至ると、構図確認部154は、ライブビュー画像における構図を確認する(S26)。 When the timing to start the countdown is reached, the composition confirmation unit 154 confirms the composition in the live view image (S26).

図11は、S26(図10)構図確認処理の詳細を示すフローチャートである。
構図確認部154は、最新のライブビュー画像を取得し、画像認識部152にライブビュー画像に含まれる顔領域を検出させる(S42)。
FIG. 11 is a flowchart showing details of the composition confirmation process in S26 (FIG. 10).
The composition confirmation unit 154 acquires the latest live view image, and causes the image recognition unit 152 to detect a face area included in the live view image (S42).

構図確認部154は、検出された顔領域の数が受付装置102において入力したユーザIDの数と一致するか否かを判定する(S44)。顔領域の数がユーザIDの数より少ないときは、いずれかのユーザの顔が写っていないことになる。このようなときに、遊戯画像撮影装置100は、写っていないユーザがカメラ118に向くように促す。 The composition confirmation unit 154 determines whether the number of detected face areas matches the number of user IDs input at the reception device 102 (S44). When the number of face areas is less than the number of user IDs, it means that the face of any user is not captured. In such a case, the game image photographing device 100 prompts the user who is not photographed to face the camera 118.

そのため、遊戯画像撮影装置100は、顔識別によって顔が写っているユーザを判別し、残余のユーザを絞り込む。具体的には、構図確認部154は、画像認識部152によって検出された顔領域を1つ選択して(S46)、画像認識部152に当該顔領域を予約済みの各ユーザと照合させる(S48)。この処理で、画像認識部152は、当該顔領域から抽出される特徴データが、受付装置102において入力した各ユーザIDに対応するユーザ情報230に含まれる特徴データと合致するか否かを判定する。特徴データが同一または近似するときには、画像認識部152は照合が成功したと判定する。つまり、顔領域が当該特徴データに係るユーザに該当すると判定し、当該ユーザのIDが特定される。 Therefore, the game image photographing device 100 determines the users whose faces are photographed by face recognition, and narrows down the remaining users. Specifically, the composition confirmation unit 154 selects one face area detected by the image recognition unit 152 (S46), and causes the image recognition unit 152 to match the face area with each user who has made a reservation (S48). ). In this process, the image recognition unit 152 determines whether the feature data extracted from the face area matches the feature data included in the user information 230 corresponding to each user ID input in the reception device 102. . When the feature data are the same or similar, the image recognition unit 152 determines that the matching is successful. That is, it is determined that the face area corresponds to the user associated with the feature data, and the ID of the user is specified.

構図確認部154は、検出されているすべての顔領域について各ユーザとの照合を終えた段階で(S50)、予約済みの各ユーザのIDのうち、照合が成功したときのユーザIDのいずれにも該当しなかったユーザIDをライブビュー画像に写っていなかったユーザとして特定し、ユーザIDに対応するニックネームを特定する(S52)。 When the composition confirmation unit 154 has finished comparing all the detected face areas with each user (S50), the composition confirmation unit 154 selects which of the reserved user IDs is the user ID when the comparison is successful. A user ID that does not match is identified as a user who was not shown in the live view image, and a nickname corresponding to the user ID is identified (S52).

たとえば、ユーザ(P01)とユーザ(P02)のIDが受付装置102に入力され、ライブビュー画像に1つしか顔領域が含まれない場合には、顔領域についてユーザ(P01)とユーザ(P02)を候補とする顔識別が行われる。その結果、当該顔領域がユーザ(P02)に該当するという識別結果が得られた場合、写っていないのは、ユーザ(P01)であると限定される。そして、構図確認部154は、ユーザ情報230を参照しユーザ(P01)のニックネーム「あーちゃん」を検索する。 For example, if the IDs of the user (P01) and the user (P02) are input to the reception device 102, and the live view image includes only one face area, the IDs of the user (P01) and the user (P02) are input for the face area. Face recognition is performed using . As a result, if an identification result is obtained that the face area corresponds to the user (P02), it is determined that the person not shown is the user (P01). Then, the composition confirmation unit 154 refers to the user information 230 and searches for the nickname "A-chan" of the user (P01).

撮影指示部160は、検索されたニックネームを含む指示メッセージを音声出力する(S54)。上述の例では、「あーちゃん、カメラに写るようにしてください。」という音声が発せられる。 The photographing instruction unit 160 audio outputs an instruction message including the retrieved nickname (S54). In the above example, a voice saying "A-chan, please make your picture appear in the camera." is emitted.

その後、構図確認部154は、ユーザがカメラ118に向くために十分な時間の経過を待つ(S56)。そして、処理はS40に戻り、再び最新のライブビュー画像が取得される。 Thereafter, the composition confirmation unit 154 waits for sufficient time to pass for the user to face the camera 118 (S56). Then, the process returns to S40, and the latest live view image is acquired again.

S44において顔領域の数がユーザIDの数と一致すると判定したとき、予約したユーザの顔がすべて写っているとみなす。この場合、処理は図12に移る。 When it is determined in S44 that the number of face areas matches the number of user IDs, it is assumed that all the faces of the reserved users are captured. In this case, the process moves to FIG.

図12は、図11の構図確認処理の続きのフローチャートである。
S58以降の処理では、ライブビュー画像に含まれる各顔領域について、順次構図の適正度を判定する。そのため、構図確認部154は、判定の対象となる顔領域を1つ選択する(S58)。選択する順番は、任意である。
FIG. 12 is a flowchart that is a continuation of the composition confirmation process in FIG. 11.
In the processing from S58 onward, the appropriateness of the composition is sequentially determined for each face area included in the live view image. Therefore, the composition confirmation unit 154 selects one face area to be determined (S58). The selection order is arbitrary.

まず、構図確認部154は、判定対象の顔領域に基づいてユーザの立ち位置が遠すぎるか否かを判定する(S60)。たとえば、判定対象の顔領域の大きさが、顔領域の大きさに関する適正範囲の下限値より小さい場合には、構図確認部154は、ユーザの立ち位置が遠すぎると判定する。あるいは、判定対象の顔領域に含まれる目の間隔が、目の間隔に関する適正範囲の下限値より短い場合に、ユーザの立ち位置が遠すぎると判定してもよい。 First, the composition confirmation unit 154 determines whether the user's standing position is too far based on the face area to be determined (S60). For example, if the size of the face area to be determined is smaller than the lower limit of the appropriate range for the size of the face area, the composition confirmation unit 154 determines that the user's standing position is too far. Alternatively, it may be determined that the user's standing position is too far if the distance between the eyes included in the face area to be determined is shorter than the lower limit of the appropriate range for the distance between the eyes.

図13は、ライブビュー画像の第1例である。
このライブビュー画像における左側の被写体がユーザ(P01)であり、右側の被写体がユーザ(P02)である。なお、第2例以降についても、左右の被写体とユーザの対応関係は、第1例の場合と同様である。左側の顔領域301aが、顔領域の大きさに関する適正範囲の下限値より小さいために、顔領域301aについてユーザの立ち位置が遠すぎると判定される。あるいは、左側の顔領域301aに含まれる目の間隔303aが、目の間隔に関する適正範囲の下限値より短いために、顔領域301aについてユーザの立ち位置が遠すぎると判定してもよい。
FIG. 13 is a first example of a live view image.
The subject on the left side of this live view image is the user (P01), and the subject on the right side is the user (P02). Note that in the second and subsequent examples, the correspondence between the left and right subjects and the user is the same as in the first example. Since the face area 301a on the left side is smaller than the lower limit of the appropriate range for the size of the face area, it is determined that the user's standing position is too far with respect to the face area 301a. Alternatively, it may be determined that the eye distance 303a included in the left face area 301a is shorter than the lower limit of the appropriate range for the eye distance, and that the user's standing position is too far away with respect to the face area 301a.

一方、右側の顔領域301bの大きさは、顔領域の大きさに関する適正範囲の下限値以上であるために、顔領域301bについてユーザの立ち位置が遠すぎないと判定される。あるいは、右側の顔領域301bに含まれる目の間隔303bが、目の間隔に関する適正範囲の下限値以上であるために、顔領域301bについてユーザの立ち位置が遠すぎないと判定してもよい。 On the other hand, since the size of the right face area 301b is greater than or equal to the lower limit of the appropriate range for the size of the face area, it is determined that the user's standing position is not too far with respect to the face area 301b. Alternatively, since the distance between the eyes 303b included in the right face region 301b is equal to or greater than the lower limit of the appropriate range for the distance between the eyes, it may be determined that the user's standing position is not too far with respect to the face region 301b.

ユーザの立ち位置が遠すぎると判定したとき(S60のY)、構図確認部154は、判定対象の顔領域に相当するユーザを判別する(S62)。このように、ある顔領域について適正度が低いと判定した時点でユーザを判別すれば、予めすべての顔領域についてユーザを判別しておく方法に比べて、判別処理の回数が抑制される。後述するように、ユーザ判別において顔識別処理を行うのであれば、顔識別処理に伴う負荷が軽減される。 When determining that the user's standing position is too far (Y in S60), the composition confirmation unit 154 determines the user corresponding to the face area to be determined (S62). In this way, if a user is identified at the time when it is determined that the appropriateness level is low for a certain face area, the number of times the determination process is performed can be reduced compared to a method in which users are identified for all face areas in advance. As will be described later, if face identification processing is performed in user identification, the load associated with face identification processing is reduced.

図14は、S62(図12)ユーザ判別処理の詳細を示すフローチャートである。
画像認識部152は、判定対象の顔領域を各ユーザと照合する(S74)。つまり、図11のS48の場合と同様に顔識別を試みる。前述の通り、顔領域から抽出される特徴データが、受付時に入力されたユーザIDに対応する特徴データと一致または近似する場合に、照合が成功したことになる。
FIG. 14 is a flowchart showing details of the user determination process in S62 (FIG. 12).
The image recognition unit 152 compares the face area to be determined with each user (S74). In other words, face recognition is attempted in the same way as in S48 of FIG. As described above, if the feature data extracted from the face area matches or approximates the feature data corresponding to the user ID input at the time of reception, the matching is considered successful.

画像認識部152は、判定対象の顔領域がいずれかのユーザとの照合において成功したか否かを判定する(S76)。いずれかのユーザとの照合が成功したときには(S76のY)、判定対象の顔領域に対応するユーザIDが特定し、当該ユーザIDに対応するニックネームを特定する。図13に示したライブビュー画像の第1例では、遠すぎると判定された左側の顔領域301aについて、ユーザ(P01)のニックネーム「あーちゃん」が特定される。 The image recognition unit 152 determines whether the face area to be determined has been successfully matched with any user (S76). When matching with any user is successful (Y in S76), the user ID corresponding to the face area to be determined is specified, and the nickname corresponding to the user ID is specified. In the first example of the live view image shown in FIG. 13, the nickname "A-chan" of the user (P01) is identified for the left face area 301a that is determined to be too far away.

ただし、たとえば、遠すぎると判定された顔領域が陰になっていて不鮮明である場合には、顔識別が失敗することも考えられる。このようにいずれのユーザとの照合においても失敗したときは(S76のN)、直接的にユーザを特定できないので、遠すぎないと判定された顔領域のユーザを特定することによって、遠すぎると判定された顔領域のユーザを絞り込む。 However, for example, if a face area determined to be too far away is in shadow and unclear, face recognition may fail. In this way, when matching with any user fails (N in S76), the user cannot be directly identified, so by identifying the user whose face area was determined not to be too far away, Narrow down the users of the determined face area.

そのため、画像認識部152は、遠すぎると判定された顔領域以外のすべての顔領域について、各ユーザと照合する(S78)。これらの顔領域について照合が成功すれば、目的以外のユーザIDが特定される。つまり、受付時に入力されたユーザIDのうち、この顔識別で特定されなかったユーザIDが、遠すぎると判定された顔領域に相当する(S80)。ユーザ判別処理を終えると、処理は図12のS64へ戻る。 Therefore, the image recognition unit 152 matches each user with respect to all face areas other than the face area determined to be too far away (S78). If the matching of these face areas is successful, a user ID other than the intended user ID is identified. In other words, among the user IDs input at the time of reception, the user ID that was not identified by this face identification corresponds to the face area determined to be too far away (S80). When the user determination process is finished, the process returns to S64 in FIG. 12.

撮影指示部160は、特定されたニックネームを含む指示メッセージを音声出力する(S64)。立ち位置が遠すぎると判定されたときは、ユーザのニックネームに続けてユーザが前へ移動するように促すフレーズが読み上げられる。たとえば、「あーちゃん、前に出てください。」という音声が発せられる。 The photographing instruction unit 160 audio outputs an instruction message including the specified nickname (S64). If it is determined that the user is standing too far away, the user's nickname is read out followed by a phrase urging the user to move forward. For example, a voice saying, "A-chan, please come forward." is emitted.

その後、構図確認部154は、ユーザが前進するために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 Thereafter, the composition confirmation unit 154 waits for sufficient time to pass for the user to move forward (S66). The process then returns to S40 in FIG.

図12のS60においてユーザの立ち位置が遠すぎないと判定した場合には、次に構図確認部154は、判定対象の顔領域に基づいてユーザの立ち位置が近すぎるか否かを判定する(S68)。たとえば、判定対象の顔領域が、顔領域の大きさに関する適正範囲の上限値より大きい場合には、構図確認部154は、ユーザの立ち位置が近すぎると判定する。あるいは、判定対象の顔領域に含まれる目の間隔が、目の間隔に関する適正範囲の上限値より長い場合に、ユーザの立ち位置が近すぎると判定してもよい。 If it is determined in S60 of FIG. 12 that the user's standing position is not too far, then the composition confirmation unit 154 determines whether the user's standing position is too close based on the face area to be determined ( S68). For example, if the face area to be determined is larger than the upper limit of the appropriate range for the size of the face area, the composition confirmation unit 154 determines that the user's standing position is too close. Alternatively, it may be determined that the user's standing position is too close if the distance between the eyes included in the face area to be determined is longer than the upper limit of the appropriate range for the distance between the eyes.

図15は、ライブビュー画像の第2例である。
この例で、左側の顔領域301cが、顔領域の大きさに関する適正範囲の上限値より大きいために、顔領域301cについてユーザの立ち位置が近すぎると判定される。あるいは、左側の顔領域301cに含まれる目の間隔303cが、目の間隔に関する適正範囲の上限値より長いために、顔領域301cについてユーザの立ち位置が近すぎると判定してもよい。
FIG. 15 is a second example of a live view image.
In this example, since the left face area 301c is larger than the upper limit of the appropriate range for the size of the face area, it is determined that the user's standing position is too close to the face area 301c. Alternatively, it may be determined that the user's standing position is too close to the face area 301c because the eye distance 303c included in the left face area 301c is longer than the upper limit of the appropriate range for the eye distance.

一方、右側の顔領域301dの大きさは、顔領域の大きさに関する適正範囲の上限値以下であるために、顔領域301dについてユーザの立ち位置は近すぎないと判定される。あるいは、右側の顔領域301dに含まれる目の間隔303dが、目の間隔に関する適正範囲の上限値以下であるために、顔領域301dについてユーザの立ち位置は近すぎないと判定してもよい。 On the other hand, since the size of the right face area 301d is less than or equal to the upper limit of the appropriate range for the size of the face area, it is determined that the user's standing position is not too close to the face area 301d. Alternatively, it may be determined that the user's standing position is not too close to the face area 301d because the eye distance 303d included in the right face area 301d is less than or equal to the upper limit of the appropriate range for the eye distance.

ユーザの立ち位置が近すぎると判定したとき(S68のY)、構図確認部154は、前述のとおり、判定対象の顔領域に相当するユーザを判別する(S62)。 When determining that the user's standing position is too close (Y in S68), the composition confirmation unit 154 determines the user corresponding to the face area to be determined (S62), as described above.

立ち位置が近すぎるケースで、撮影指示部160は、ニックネームを含む指示メッセージの音声出力において(S64)、ニックネームに続けてユーザが後ろへ移動するように促すフレーズの音声を出力する。たとえば、「あーちゃん、後ろにさがってください。」という音声が発せられる。 In a case where the user is standing too close, the photographing instruction unit 160 outputs an audio instruction message that includes the nickname (S64), and outputs a phrase that prompts the user to move backwards following the nickname (S64). For example, a voice saying "A-chan, please step back." is emitted.

その後、構図確認部154は、ユーザが後退するために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 Thereafter, the composition confirmation unit 154 waits for sufficient time to elapse for the user to retreat (S66). The process then returns to S40 in FIG.

図12のS68においてユーザの立ち位置が近すぎないと判定した場合には、次に構図確認部154は、判定対象の顔領域に基づいてユーザの立ち位置が端に寄りすぎているか否かを判定する(S70)。たとえば、判定対象の顔領域がライブビュー画像の左端あるいは右端に接している場合に、ユーザの立ち位置が端に寄りすぎていると判定する。 If it is determined in S68 of FIG. 12 that the user's standing position is not too close, then the composition confirmation unit 154 determines whether the user's standing position is too close to the edge based on the face area to be determined. A determination is made (S70). For example, if the face area to be determined is in contact with the left or right edge of the live view image, it is determined that the user's standing position is too close to the edge.

図16は、ライブビュー画像の第3例である。
この例で、左側の顔領域301eがライブビュー画像の左端に接しているので、顔領域301eについてユーザの立ち位置が端に寄りすぎていると判定される。一方、右側の顔領域301fは、ライブビュー画像の左端と右端のいずれにも接していないので、顔領域301eについてユーザの立ち位置が端に寄りすぎていないと判定される。
FIG. 16 is a third example of a live view image.
In this example, since the left face area 301e is in contact with the left edge of the live view image, it is determined that the user's standing position is too close to the edge of the face area 301e. On the other hand, since the right face area 301f does not touch either the left end or the right end of the live view image, it is determined that the user's standing position is not too close to the end of the face area 301e.

ユーザの立ち位置が端に寄りすぎていると判定したとき(S70のY)、構図確認部154は、前述のとおり、判定対象の顔領域に相当するユーザを判別する(S62)。 When determining that the user's standing position is too close to the edge (Y in S70), the composition confirmation unit 154 determines the user corresponding to the face area to be determined (S62), as described above.

立ち位置が端に寄りすぎているケースで、撮影指示部160は、ニックネームを含む指示メッセージ音声の出力において(S64)、ニックネームに続けてユーザが内側へ移動するように促すフレーズの音声を出力する。たとえば、「あーちゃん、真ん中に寄ってください。」という音声が発せられる。 In the case where the standing position is too close to the edge, the shooting instruction unit 160 outputs an audio instruction message including the nickname (S64), and outputs an audio phrase that urges the user to move inward following the nickname (S64). . For example, a voice saying, "A-chan, please move to the middle." is emitted.

その後、構図確認部154は、ユーザが内側に寄るために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 After that, the composition confirmation unit 154 waits for sufficient time to pass for the user to move inward (S66). The process then returns to S40 in FIG.

図12のS70においてユーザの立ち位置が端に寄りすぎていないと判定した場合には、次に構図確認部154は、判定対象の顔領域に基づいてユーザの顔が隠れすぎているか否かを判定する(S72)。たとえば、判定対象の顔領域に両目と口のいずれかが含まれない場合に、ユーザの顔が隠れすぎていると判定する。 If it is determined in S70 of FIG. 12 that the user's standing position is not too close to the edge, then the composition confirmation unit 154 determines whether the user's face is too hidden based on the face area to be determined. A determination is made (S72). For example, if either the eyes or the mouth are not included in the face area to be determined, it is determined that the user's face is too hidden.

図17は、ライブビュー画像の第4例である。
この例で、左側の顔領域301gに口が含まれないので、顔領域301eについてユーザの顔が隠れすぎていると判定される。一方、右側の顔領域301hには、両目と口が含まれるので、顔領域301hについてユーザの顔が隠れすぎていないと判定される。
FIG. 17 is a fourth example of a live view image.
In this example, since the mouth is not included in the left face area 301g, it is determined that the user's face is too hidden in the face area 301e. On the other hand, since the right face area 301h includes both eyes and a mouth, it is determined that the user's face is not hidden too much in the face area 301h.

ユーザの顔が隠れすぎていると判定したとき(S72のY)、構図確認部154は、前述のとおり、判定対象の顔領域に相当するユーザを判別する(S62)。 When determining that the user's face is too hidden (Y in S72), the composition confirmation unit 154 determines the user corresponding to the face area to be determined (S62), as described above.

ユーザの顔が隠れすぎているケースで、撮影指示部160は、ニックネームを含む指示メッセージの音声出力において(S64)、ニックネームに続けてユーザが顔を隠さないように促すフレーズの音声を出力する。たとえば、「あーちゃん、顔を隠さないでください。」という音声が発せられる。 In a case where the user's face is too hidden, the photographing instruction unit 160 outputs a voice of a phrase urging the user not to hide his/her face following the nickname (S64) when outputting the voice of the instruction message including the nickname. For example, a voice saying, "A-chan, please don't hide your face." is emitted.

その後、構図確認部154は、ユーザが顔を妨げているものをよけるために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 Thereafter, the composition confirmation unit 154 waits for sufficient time to elapse for the user to avoid anything obstructing the user's face (S66). The process then returns to S40 in FIG.

図12のS72においてユーザの顔が隠れすぎていないと判定した場合に、処理は図18に移る。 If it is determined in S72 of FIG. 12 that the user's face is not too hidden, the process moves to FIG. 18.

図18は、図12の構図確認処理の続きのフローチャートである。次に構図確認部154は、判定対象の顔領域に基づいてユーザの顔が正面を向いているか否かを判定する(S82)。たとえば、判定対象の顔領域に含まれる目の間隔が比較的短い場合に、ユーザの顔は横を向き、正面を向いていないと判定する。また、各目と口の間隔が比較的短い場合に、ユーザの顔が下方を向きあるいは上方を向き、正面を向いていないと判定してもよい。 FIG. 18 is a flowchart that is a continuation of the composition confirmation process in FIG. 12. Next, the composition checking unit 154 determines whether the user's face is facing forward based on the face area to be determined (S82). For example, if the distance between the eyes included in the face area to be determined is relatively short, it is determined that the user's face is turned to the side and not facing forward. Furthermore, when the distance between each eye and the mouth is relatively short, it may be determined that the user's face is facing downward or upward and is not facing forward.

図19は、ライブビュー画像の第5例である。
この例で、左側の顔領域301iについて、目の間隔303iが比較的短いのでユーザの顔が正面を向いていないと判定される。一方、右側の顔領域303jについて、目の間隔303jは短くないのでユーザの顔が正面を向いていると判定される。
FIG. 19 is a fifth example of a live view image.
In this example, since the distance between the eyes 303i of the left face area 301i is relatively short, it is determined that the user's face is not facing forward. On the other hand, regarding the right face area 303j, since the eye distance 303j is not short, it is determined that the user's face is facing forward.

ユーザの顔が正面を向いていないと判定したとき(S82のN)、構図確認部154は、前述のとおり、判定対象の顔領域に相当するユーザを判別する(S62)。 When determining that the user's face is not facing forward (N in S82), the composition confirmation unit 154 determines the user corresponding to the face area to be determined, as described above (S62).

ユーザの顔が正面を向いていないケースで、撮影指示部160は、ニックネームを含む指示メッセージの音声出力において(S64)、ニックネームに続けてユーザの顔が正面を向くように促すフレーズの音声を出力する。たとえば、「あーちゃん、顔を正面に向けてください。」という音声が発せられる。 In the case where the user's face is not facing forward, the photographing instruction unit 160 outputs a voice of a phrase urging the user to face forward after the nickname (S64) when outputting the voice of the instruction message including the nickname. do. For example, a voice saying, "A-chan, please turn your face forward." is emitted.

その後、構図確認部154は、顔の向きを変えるために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 Thereafter, the composition confirmation unit 154 waits for sufficient time to change the direction of the face (S66). The process then returns to S40 in FIG.

図18のS82においてユーザの顔が正面を向いていると判定した場合には、次に構図確認部154は、判定対象の顔領域に基づいてユーザが顔を傾けすぎているか否かを判定する(S84)。たとえば、判定対象の顔領域に含まれる両目を結ぶ線が縦方向に近い場合に、ユーザが顔を傾けすぎていると判定する。 If it is determined in S82 of FIG. 18 that the user's face is facing forward, then the composition confirmation unit 154 determines whether the user's face is tilted too much based on the face area to be determined. (S84). For example, if the line connecting both eyes included in the face area to be determined is close to the vertical direction, it is determined that the user is tilting his or her face too much.

図20は、ライブビュー画像の第6例である。
この例で、左側の顔領域301kについて、両目を結ぶ線が縦方向に近いのでユーザが顔を傾けすぎていると判定される。一方、右側の顔領域301jについて、両目を結ぶ線が横方向に近いのでユーザが顔を傾けすぎていないと判定される。
FIG. 20 is a sixth example of a live view image.
In this example, for the left face area 301k, the line connecting both eyes is close to the vertical direction, so it is determined that the user is tilting his or her face too much. On the other hand, regarding the right face area 301j, since the line connecting both eyes is close to the horizontal direction, it is determined that the user is not tilting his or her face too much.

ユーザが顔を傾けすぎていると判定したとき(S84のN)、構図確認部154は、前述のとおり、判定対象の顔領域に相当するユーザを判別する(S62)。 When it is determined that the user is tilting his or her face too much (N in S84), the composition confirmation unit 154 determines the user corresponding to the face area to be determined, as described above (S62).

ユーザが顔を傾けすぎているケースで、撮影指示部160は、ニックネームを含む指示メッセージの音声出力において(S64)、ニックネームに続けてユーザの顔が傾けすぎないように促すフレーズの音声を出力する。たとえば、「あーちゃん、あまり顔を傾けないでください。」という音声が発せられる。 In a case where the user tilts his or her face too much, the photographing instruction unit 160 outputs an audio message that prompts the user not to tilt his or her face too much after the nickname (S64). . For example, a voice saying, "A-chan, please don't tilt your face too much." is emitted.

その後、構図確認部154は、ユーザが顔をおこすために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 Thereafter, the composition confirmation unit 154 waits for sufficient time to elapse for the user to raise his/her face (S66). The process then returns to S40 in FIG.

図18のS82においてユーザが顔を傾けすぎていないと判定した場合には、次に構図確認部154は、判定対象の顔領域に含まれる瞼の中における瞳の位置に基づいてユーザの視線がカメラ118に向いているか否かを判定する(S86)。たとえば、両目ともに瞳が瞼内の中央に近ければ、ユーザの視線がカメラ118に向いていると判定する。 If it is determined in S82 of FIG. 18 that the user is not tilting his or her face too much, then the composition confirmation unit 154 determines whether the user's line of sight is It is determined whether the camera 118 is facing the camera 118 (S86). For example, if the pupils of both eyes are close to the center of the eyelids, it is determined that the user's line of sight is directed toward the camera 118.

図21は、ライブビュー画像の第7例である。
この例で、左側の顔領域301mの両目ともに瞳が瞼内の右側に寄っているので、ユーザの視線がカメラ118に向いていないと判定される。一方、右側の顔領域301nの両目ともに瞳が瞼内の中央に近いので、ユーザの視線がカメラ118に向いていると判定される。
FIG. 21 is a seventh example of a live view image.
In this example, since the pupils of both eyes in the left face area 301m are close to the right side within the eyelids, it is determined that the user's line of sight is not directed toward the camera 118. On the other hand, since the pupils of both eyes in the right face area 301n are close to the center of the eyelids, it is determined that the user's line of sight is directed toward the camera 118.

ユーザの視線がカメラ118に向いていないと判定したとき(S86のN)、構図確認部154は、前述のとおり、判定対象の顔領域に相当するユーザを判別する(S62)。 When determining that the user's line of sight is not directed toward the camera 118 (N in S86), the composition confirmation unit 154 determines the user corresponding to the face area to be determined, as described above (S62).

ユーザの視線がカメラ118に向いていないケースで、撮影指示部160は、ニックネームを含む指示メッセージの音声出力において(S64)、ニックネームに続けてユーザが視線をカメラ118に向けるように促すフレーズの音声を出力する。たとえば、「あーちゃん、カメラを見てください。」という音声が発せられる。 In a case where the user's line of sight is not directed toward the camera 118, the shooting instruction unit 160, when outputting the voice instruction message including the nickname (S64), outputs an audio phrase that prompts the user to direct his or her gaze toward the camera 118 following the nickname. Output. For example, a voice saying "A-chan, please look at the camera." is emitted.

その後、構図確認部154は、視線を変えるために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 Thereafter, the composition confirmation unit 154 waits for sufficient time to change the line of sight (S66). The process then returns to S40 in FIG.

図18のS82においてユーザの視線がカメラ118に向いていると判定した場合には、次に構図確認部154は、判定対象の顔領域に基づいてユーザが笑っているか否かを判定する(S88)。たとえば、顔領域に含まれる両目と口の形状が、笑顔における両目と口の標準形状に近似している場合に、ユーザが笑っていると判定する。あるいは、画像認識部152における表情判定機能を用いてもよい。 If it is determined in S82 of FIG. 18 that the user's line of sight is directed toward the camera 118, then the composition confirmation unit 154 determines whether the user is smiling based on the face area to be determined (S88 ). For example, if the shape of the eyes and mouth included in the face area approximates the standard shape of the eyes and mouth in a smiling face, it is determined that the user is smiling. Alternatively, the facial expression determination function of the image recognition unit 152 may be used.

ユーザが笑っていないと判定したとき(S88のN)、構図確認部154は、前述のとおり、判定対象の顔領域に相当するユーザを判別する(S62)。 When determining that the user is not smiling (N in S88), the composition checking unit 154 determines the user corresponding to the face area to be determined (S62), as described above.

ユーザが笑っていないケースで、撮影指示部160は、ニックネームを含む指示メッセージの音声出力において(S64)、ニックネームに続けてユーザが笑うように促すフレーズの音声を出力する。たとえば、「あーちゃん、笑ってください。」という音声が発せられる。 In the case where the user is not smiling, the photographing instruction unit 160 outputs the voice of the instruction message including the nickname (S64), followed by the nickname and a voice of a phrase encouraging the user to laugh. For example, a voice saying "A-chan, please smile." is emitted.

その後、構図確認部154は、表情を変えるために十分な時間の経過を待つ(S66)。そして、処理は図11のS40に戻る。 Thereafter, the composition confirmation unit 154 waits for sufficient time to change the facial expression (S66). The process then returns to S40 in FIG.

図18のS82においてユーザが笑っていると判定した場合には、判定対象の顔領域について構図の適正度が低くないので、次の顔領域の判定に移る。つまり、まだ検証していない顔領域が残っているときには(S90)、端子Dを介して図12のS58に戻って、上述して処理を繰り返す。一方、すべての顔領域について検証を終えた場合には、構図確認処理を終えると、処理は図10のS28へ戻る。 If it is determined in S82 of FIG. 18 that the user is smiling, the appropriateness of the composition for the face area to be determined is not low, and therefore the process moves to determination of the next face area. That is, if there is a face area that has not been verified yet (S90), the process returns to S58 in FIG. 12 via terminal D, and the process described above is repeated. On the other hand, if all face areas have been verified, the process returns to S28 in FIG. 10 after completing the composition confirmation process.

上述した例では、立ち位置の適正範囲として、各ユーザにおいて共通の基準を用いることを想定した。ただし、子供であれば顔が小さく、また顔の大きさには個人差がある。目の間隔についても同様に、年齢や顔立ちによって異なる。この点を考慮すれば、ユーザ固有の基準によって立ち位置や顔の向きの適否を判定するようにしてもよい。 In the example described above, it was assumed that each user uses a common standard as the appropriate range of standing position. However, children have small faces, and there are individual differences in the size of faces. Similarly, the distance between the eyes varies depending on age and facial features. Taking this point into consideration, the suitability of the standing position and the direction of the face may be determined based on user-specific criteria.

図22に示すように、立ち位置や顔の向きに関する判定を行う前にユーザ判別処理を行ってユーザIDを特定し(S92)、ユーザIDに対応するユーザ情報230の顔情報に含まれる大きさ係数を用いて基準を修正するようにしてもよい。S60において、構図確認部154は、顔領域の大きさに関する適正範囲の上限値に大きさ係数を乗ずれば、ユーザに適した上限基準が得られる。また、目の間隔に関する適正範囲の上限値に大きさ係数を乗じて、ユーザに適した上限基準が得られるようにしてもよい。同様に、S68において、構図確認部154は、顔領域の大きさに関する適正範囲の下限値に間隔係数を乗ずれば、ユーザに適した下限基準が得られる。また、目の間隔に関する適正範囲の下限値に間隔係数を乗じて、ユーザに適した下限基準が得られるようにしてもよい。このようにすれば、誤った判定を減らすことができる。 As shown in FIG. 22, before making determinations regarding standing position and face orientation, user identification processing is performed to identify the user ID (S92), and the size included in the face information of the user information 230 corresponding to the user ID is The reference may be modified using a coefficient. In S60, the composition confirmation unit 154 multiplies the upper limit value of the appropriate range regarding the size of the face area by the size coefficient to obtain an upper limit standard suitable for the user. Alternatively, the upper limit of the appropriate range for the distance between eyes may be multiplied by a size coefficient to obtain an upper limit standard suitable for the user. Similarly, in S68, the composition confirmation unit 154 obtains a lower limit standard suitable for the user by multiplying the lower limit value of the appropriate range regarding the size of the face area by the interval coefficient. Alternatively, the lower limit value of the appropriate range regarding the distance between the eyes may be multiplied by a distance coefficient to obtain a lower limit standard suitable for the user. In this way, erroneous determinations can be reduced.

図23は、S28(図10)撮影条件設定処理の詳細を示すフローチャートである。
本実施の形態では、たとえば男女のペアが被写体である場合に、女性側のストロボの光量を男性側のストロボの光量よりも多くする。これは、女性が望むストロボの光量の平均値が、男性が望むストロボの光量の平均値よりも多いためである。
FIG. 23 is a flowchart showing details of the photographing condition setting process in S28 (FIG. 10).
In this embodiment, for example, when the subject is a pair of a man and a woman, the amount of light from the strobe on the woman's side is set to be greater than the amount of light from the strobe on the man's side. This is because the average amount of strobe light desired by women is greater than the average amount of strobe light desired by men.

ここでは、被写体であるユーザが二人であることを前提とする。三人以上の場合に、たとえば右端のユーザと左端のユーザに着目してこれから述べる処理を行ってもよい。 Here, it is assumed that there are two users who are the subjects. If there are three or more users, the process described below may be performed, focusing on the rightmost user and the leftmost user, for example.

撮影条件設定部157は、ライブビュー画像に含まれる各顔領域の性別を判定する(S94)。撮影条件設定部157は、画像認識部152における性別判定機能を用いるようにしてもよい。 The photographing condition setting unit 157 determines the gender of each face area included in the live view image (S94). The imaging condition setting section 157 may use the gender determination function of the image recognition section 152.

そして、撮影条件設定部157は、右側ユーザが女性であって、かつ左側ユーザが男性であるか否かを判定する(S95)。この条件を満たすと判定したとき(S95のY)、撮影条件設定部157は、右側ストロボ119bの光量を多く、左側ストロボ119aの光量を少なく設定する(S96)。そして、撮影条件設定処理を終えて、処理は図10のS30へ戻る。 Then, the photographing condition setting unit 157 determines whether the right user is a woman and the left user is a man (S95). When it is determined that this condition is satisfied (Y in S95), the photographing condition setting unit 157 sets the light amount of the right strobe 119b to be large and the light amount of the left strobe 119a to be small (S96). Then, after completing the photographing condition setting process, the process returns to S30 in FIG.

S95において上記条件を満たさないと判定すると、撮影条件設定部157は、右側が男性であって、かつ左側が女性であるか否かを判定する(S97)。この条件を満たすと判定したとき(S97のY)、撮影条件設定部157は、右側ストロボ119bの光量を少なく、左側ストロボ119aの光量を多く設定する(S98)。そして、撮影条件設定処理を終えて、処理は図10のS30へ戻る。 If it is determined in S95 that the above conditions are not satisfied, the photographing condition setting unit 157 determines whether the person on the right side is male and the person on the left side is female (S97). When it is determined that this condition is satisfied (Y in S97), the photographing condition setting unit 157 sets the light amount of the right strobe 119b to be small and the light amount of the left strobe 119a to be large (S98). Then, after completing the photographing condition setting process, the process returns to S30 in FIG.

S97において上記条件を満たさないと判定すると、撮影条件設定部157は、右側ストロボの光量と左側ストロボの光量を均等に設定する(S99)。そして、撮影条件設定処理を終えて、処理は図10のS30へ戻る。 If it is determined in S97 that the above condition is not satisfied, the photographing condition setting unit 157 sets the light amount of the right strobe and the left strobe equally (S99). Then, after completing the photographing condition setting process, the process returns to S30 in FIG.

上述した例では、ユーザの性別に応じてストロボの光量を設定したが、ユーザの年齢に応じてストロボの光量を設定してもよい。この場合には、撮影条件設定部157は、ライブビュー画像に含まれる各顔領域に基づいてユーザの年齢を推定する。撮影条件設定部1572は、画像認識部152における年齢推定機能を用いるようにしてもよい。 In the example described above, the amount of light of the strobe is set according to the gender of the user, but the amount of light of the strobe may be set according to the age of the user. In this case, the photographing condition setting unit 157 estimates the user's age based on each facial area included in the live view image. The photographing condition setting section 1572 may use the age estimation function of the image recognition section 152.

そして、撮影条件設定部157は、左側ユーザの推定年齢から右側ユーザの推定年齢を引いた差が正の基準値を超える場合に、右側ストロボ119bの光量を少なく、左側ストロボ119aの光量を多く設定する。また、右側ユーザの推定年齢から左側ユーザの推定年齢を引いた差が正の基準値を超える場合に、右側ストロボ119bの光量を多く、左側ストロボ119aの光量を少なく設定する。上記両条件のいずれも満たさない場合には、撮影条件設定部157は、右側ストロボの光量と左側ストロボの光量を均等に設定する。 Then, when the difference obtained by subtracting the estimated age of the right user from the estimated age of the left user exceeds a positive reference value, the shooting condition setting unit 157 sets the light amount of the right strobe 119b to be smaller and the light amount of the left strobe 119a to be larger. do. Further, if the difference obtained by subtracting the estimated age of the left user from the estimated age of the right user exceeds a positive reference value, the light amount of the right strobe 119b is set to be large and the light amount of the left strobe 119a is set to be small. If neither of the above conditions is satisfied, the photographing condition setting unit 157 sets the light amount of the right strobe and the left strobe equally.

また、ユーザの肌特性に応じてストロボの光量を設定してもよい。この場合には、撮影条件設定部157は、ライブビュー画像に含まれる各顔領域に基づいてユーザの肌特性を判定する。たとえば、顔領域の明度が低い場合に色黒であると判定し、顔領域の明度が高い場合に色白であると判定する。撮影条件設定部157は、画像認識部152における肌特性判定機能を用いるようにしてもよい。 Furthermore, the light intensity of the strobe may be set according to the user's skin characteristics. In this case, the photographing condition setting unit 157 determines the user's skin characteristics based on each facial area included in the live view image. For example, if the brightness of the face area is low, it is determined that the person has dark skin, and if the brightness of the face area is high, it is determined that the person has fair skin. The photographing condition setting section 157 may use the skin characteristic determination function of the image recognition section 152.

そして、撮影条件設定部157は、右側ユーザが色白であって、かつ左側ユーザが色黒である場合に、右側ストロボ119bの光量を少なく、左側ストロボ119aの光量を多く設定する。また、右側ユーザが色黒であって、かつ左側ユーザが色白である場合に、右側ストロボ119bの光量を多く、左側ストロボ119aの光量を少なく設定する。上記両条件のいずれも満たさない場合には、撮影条件設定部157は、右側ストロボの光量と左側ストロボの光量を均等に設定する。このようにすれば、肌の色が均質になりやすい。 Then, when the user on the right side is fair-skinned and the user on the left side is dark-skinned, the photographing condition setting unit 157 sets the light amount of the right strobe light 119b to be small and the light amount of the left strobe light 119a to be large. Furthermore, if the user on the right side is dark-skinned and the user on the left side is fair-skinned, the amount of light from the right strobe 119b is set to be large and the amount of light from the left strobe 119a is set to be small. If neither of the above conditions is satisfied, the photographing condition setting unit 157 sets the light amount of the right strobe and the left strobe equally. In this way, the skin color tends to be uniform.

また、ユーザの立ち位置の前後関係に応じてストロボの光量を設定してもよい。この場合には、撮影条件設定部157は、顔の大きさ又は目の間隔によって、ユーザの前後関係を判定する。撮影条件設定部157は、画像認識部152における距離判定機能を用いるようにしてもよい。 Furthermore, the amount of light from the strobe may be set depending on the front and back of the user's standing position. In this case, the photographing condition setting unit 157 determines the front and back relationship of the user based on the size of the face or the distance between the eyes. The photographing condition setting section 157 may use the distance determination function of the image recognition section 152.

そして、撮影条件設定部157は、右側ユーザが左側ユーザより前に位置する場合に、右側ストロボ119bの光量を少なく、左側ストロボ119aの光量を多く設定する。また、左側ユーザが右側ユーザより前に位置する場合に、右側ストロボ119bの光量を少なく、左側ストロボ119aの光量を多く設定する。そして、右側ユーザと左側ユーザが横に並んでいる場合には、撮影条件設定部157は、右側ストロボの光量と左側ストロボの光量を均等に設定する。このようにすれば、明度が均質になりやすい。 When the user on the right side is located in front of the user on the left side, the photographing condition setting unit 157 sets the light amount of the right strobe light 119b to be small and the light amount of the left strobe light 119a to be large. Further, when the left user is located in front of the right user, the light amount of the right strobe 119b is set to be small and the light amount of the left strobe 119a is set to be large. If the user on the right side and the user on the left side are side by side, the photographing condition setting unit 157 sets the light amount of the right strobe and the left strobe equally. In this way, the brightness tends to be uniform.

さらに、ユーザの好みに応じてストロボの光量を設定してもよい。撮影条件設定部157は、各顔領域のユーザIDが不明である場合には、画像認識部152の顔識別によって各顔領域のユーザIDを特定する。そして、ユーザIDに対応するユーザ情報230に含まれる好みの撮影条件を特定する。撮影条件設定部157は、各ユーザの好みに合わせて撮影条件を設定する。たとえば、左側ユーザが多いストロボ光量を好み、かつ左側ユーザが少ないストロボ光量を好む場合には、左側ストロボ119aの光量を多く設定し、右側ストロボ119bの光量を少なく設定する。逆に、左側ユーザが少ないストロボ光量を好み、かつ左側ユーザが多いストロボ光量を好む場合には、左側ストロボ119aの光量を少なく設定し、右側ストロボ119bの光量を多く設定する。 Furthermore, the light intensity of the strobe may be set according to the user's preference. If the user ID of each facial area is unknown, the photographing condition setting unit 157 identifies the user ID of each facial area by face identification by the image recognition unit 152. Then, preferred shooting conditions included in the user information 230 corresponding to the user ID are specified. The photographing condition setting unit 157 sets photographing conditions according to each user's preference. For example, if the user on the left prefers a large amount of strobe light and the user on the left prefers a small amount of strobe light, the light amount of the left strobe 119a is set to be large and the light amount of the right strobe 119b is set to be small. Conversely, if the user on the left side prefers a small amount of strobe light and the user on the left side prefers a large amount of strobe light, the light amount of the left strobe 119a is set to be low, and the light amount of the right strobe 119b is set to be high.

あるいは、ユーザIDに対応するユーザ情報230に含まれる好みの仕上がりに応じて撮影条件を特定してもよい。たとえば、左側ユーザが美白の肌印象を好み、右側ユーザがナチュラルの肌印象を好む場合には、左側ストロボ119aの光量を多く設定し、右側ストロボ119bの光量を少なく設定する。逆に、左側ユーザがナチュラルの肌印象を好み、右側ユーザが美白の肌印象を好む場合には、左側ストロボ119aの光量を少なく設定し、右側ストロボ119bの光量を多く設定する。このようにすれば、両者が満足する撮影画像が得られる。 Alternatively, the shooting conditions may be specified according to the desired finish included in the user information 230 corresponding to the user ID. For example, if the user on the left side prefers a white skin impression and the user on the right side prefers a natural skin impression, the light amount of the left strobe 119a is set to be large and the light amount of the right strobe 119b is set to be small. Conversely, if the user on the left side prefers a natural skin impression and the user on the right side prefers a white skin impression, the light amount of the left strobe 119a is set to be low, and the light amount of the right strobe light 119b is set to be high. In this way, a captured image that satisfies both parties can be obtained.

図10に示した撮影条件設定処理(S28)を終えると、撮影指示部160は、カウントダウンを開始する(S30)。そして、撮影制御部144は、撮影部138を制御して前半動画像を生成した後に、カウントがゼロになるタイミングで撮影部138による撮影静止画像の生成を行う(S32)。そのあと、撮影制御部144は、さらに撮影部138を制御して後半動画像を生成する。 After completing the photographing condition setting process (S28) shown in FIG. 10, the photographing instruction unit 160 starts a countdown (S30). Then, after controlling the imaging unit 138 to generate the first half moving image, the imaging control unit 144 causes the imaging unit 138 to generate a captured still image at the timing when the count reaches zero (S32). After that, the photographing control section 144 further controls the photographing section 138 to generate the second half moving image.

後半動画像の生成を終えると、撮影制御部144は、撮影静止画像に事前修正を施す(S34)。ユーザは、受付装置102において事前修正の種類やパラメータを設定してもよいし、撮影画像の生成後に事前修正の種類やパラメータを指示してもよい。事前修正は、肌の色味調整、目の大きさの調整、まつ毛のボリュームの調整、撮影画像の背景に関する。撮影終了条件が成立したときには(S36のY)、ライブビューを停止して(S38)、撮影処理は終了する。撮影終了条件が成立していなければ(S36のN)、処理はS24に戻り、再度、撮影が行われる。撮影処理を終えると、処理は図4のS14へ戻る。 After completing the generation of the second half moving image, the photographing control unit 144 performs advance correction on the photographed still image (S34). The user may set the type and parameters of the pre-correction in the reception device 102, or may instruct the type and parameters of the pre-correction after the captured image is generated. The pre-correction relates to skin tone adjustment, eye size adjustment, eyelash volume adjustment, and background of the photographed image. When the shooting end condition is satisfied (Y in S36), the live view is stopped (S38), and the shooting process ends. If the shooting end condition is not satisfied (N at S36), the process returns to S24 and shooting is performed again. When the photographing process is finished, the process returns to S14 in FIG. 4.

編集処理(S14)において、編集処理部146は、編集入力インタフェースを初期設定する。編集処理部146は、マイパレット情報に基づいて編集入力インタフェースを設定してもよい。その後、編集処理部146は、ユーザからの撮影静止画像に対する各種編集入力を受け付け、撮影静止画像に装飾加工を施す。編集完了後、編集処理部146(編集装置126)は印刷処理部150(印刷装置110)に装飾加工が施された撮影静止画像を送信し、印刷処理部150は印刷準備を開始する。 In the editing process (S14), the editing processing unit 146 initializes the editing input interface. The editing processing unit 146 may set the editing input interface based on the my palette information. Thereafter, the editing processing unit 146 receives various editing inputs from the user for the photographed still image, and performs decorative processing on the photographed still image. After the editing is completed, the editing processing unit 146 (editing device 126) transmits the photographed still image subjected to decorative processing to the printing processing unit 150 (printing device 110), and the printing processing unit 150 starts preparation for printing.

編集処理(S14)が終了すると、印刷準備が完了次第、印刷処理部150は、装飾加工が施された撮影静止画像をシール台紙に印刷する(S16)。また、編集装置は、撮影画像や履歴に加えるデータなどをサーバ202へアップロードする(S18)。 When the editing process (S14) is completed, the print processing unit 150 prints the decorated photographed still image on the sticker mount (S16) as soon as the printing preparation is completed. The editing device also uploads captured images, data to be added to the history, etc. to the server 202 (S18).

以上、実施形態に基づいて遊戯画像撮影装置100および遊戯画像撮影システム200を説明した。
本実施形態における遊戯画像撮影装置100によれば、ライブビュー画像における構図の適正度が低い場合にユーザの呼称を発するので、メッセージを印象的に伝えることができる。ユーザがメッセージの内容を聞き入れやすく、ユーザは正しい写り方を学習しやすい。
The game image photographing device 100 and the game image photographing system 200 have been described above based on the embodiments.
According to the play image photographing device 100 in this embodiment, since the user's name is uttered when the appropriateness of the composition in the live view image is low, it is possible to convey the message in an impressive manner. It is easier for the user to listen to the content of the message, and it is easier for the user to learn the correct way to take pictures.

このようにして、ユーザにメッセージの内容を聞き入れてもらえれば、撮影の失敗を減らせる。その結果、ユーザは、与えられる撮影機会(撮影回数や撮影時間)を無駄せず撮影を楽しむことができる。また、短い時間で撮影を終えられるようになるので、顧客回転率が高まり、収益に貢献できる面もある。 In this way, if the user listens to the content of the message, the number of shooting failures can be reduced. As a result, the user can enjoy photographing without wasting the given photographing opportunity (number of times of photographing and photographing time). Additionally, since the shooting can be completed in a short time, the customer turnover rate increases, contributing to profits.

また、被写体であるユーザを名指ししてメッセージを伝えるので、いずれのユーザへのメッセージであるかを把握させやすい。したがって、他方のユーザが勘違いすることを防ぎやすい。 Furthermore, since the message is conveyed by naming the user who is the subject, it is easy to understand which user the message is directed to. Therefore, it is easy to prevent the other user from misunderstanding.

また、顔識別処理によってユーザを特定するので、自然な雰囲気で呼び掛けができる。 Furthermore, since the user is identified through face recognition processing, it is possible to address the user in a natural atmosphere.

また、顔識別処理において受付済みのユーザを候補として照合を行うので、多数の候補の中から個人を特定する形態に比べて照合回数が少なくなる。また、受付済みのユーザが解であることが自明であるので、顔識別処理において特徴データの近似度が高い方を選択するようにしてもよい。近似度が基準を超えなければ照合が成功しないという一般的な顔識別処理の方法に比べて処理を単純化でき、識別の精度も高められるという面もある。 Furthermore, since the face identification process uses users who have already been accepted for verification as candidates, the number of times of verification is reduced compared to a method in which an individual is identified from among a large number of candidates. Further, since it is obvious that the accepted user is the solution, the one with the higher degree of approximation of the feature data may be selected in the face identification process. Compared to general face identification processing methods, in which matching is not successful unless the degree of similarity exceeds a standard, this method simplifies the process and improves the accuracy of identification.

また、いずれかの被写体に支障があると判断できた段階で、その被写体について顔識別を行うので、顔識別処理の機会を少なくし、処理負荷を軽減することができる。 Furthermore, when it is determined that there is a problem with one of the objects, the face of the object is identified, so that the number of opportunities for face recognition processing can be reduced and the processing load can be reduced.

被写体のいずれかに支障がある場合に限ってそのユーザに注意すれば足りるので、このようにしても機能的に問題はない。一方、適正度の判定に先立ってすべての被写体について顔識別処理を行う方法では、注意が不要であるユーザについても顔識別処理を行うことになるので無駄である。顔識別処理の負荷は適正度の判定に係る処理負荷よりも大きいので、効率的に顔識別処理を行うようにすることは、処理負荷の軽減に大きく寄与する。 Since it is sufficient to warn the user only when there is a problem with one of the objects, there is no functional problem in this case. On the other hand, a method in which face identification processing is performed on all subjects prior to determination of suitability is wasteful because face identification processing is also performed on users who do not need to be careful. Since the load of face identification processing is greater than the processing load related to appropriateness determination, performing face identification processing efficiently greatly contributes to reducing the processing load.

また、顔位置が適正範囲を外れている場合に、顔位置を修正させることができる。顔の大きさが適正であり、顔の一部が欠落していなければ、たとえば事前修正の結果が期待通りになりやすい。 Furthermore, when the face position is out of the appropriate range, the face position can be corrected. If the face size is appropriate and no part of the face is missing, for example, the result of pre-correction is likely to be as expected.

また、顔の写り方が適正態様でない場合に、顔の写り方を修正させることができる。顔の向きや傾きが適正であれば、たとえば事前修正の結果が期待通りになりやすい。 Further, when the way the face is reflected is not in an appropriate manner, the way the face is reflected can be corrected. If the orientation and inclination of the face are appropriate, for example, the results of pre-correction are likely to be as expected.

また、表情が好ましくない場合に、表情を修正させることができる。したがって、好印象の撮影画像が得られるとともに、たとえば事前修正の結果が期待通りになりやすい。 Furthermore, if the facial expression is not desirable, the facial expression can be corrected. Therefore, a photographed image with a good impression can be obtained, and, for example, the result of pre-correction is likely to be as expected.

また、顔領域を検出できない場合や顔識別ができない場合でも、個人を特定できる工夫をした。しがって、たとえば極端なポーズをとるユーザにも正しく呼びかけができる。 In addition, we have devised a way to identify individuals even when facial areas cannot be detected or facial recognition is not possible. Therefore, for example, users who take extreme poses can be called out correctly.

また、ユーザ固有の基準を用いれば、ユーザの個体差に応じて構図の適正度を判定できる。 Further, by using user-specific criteria, the appropriateness of the composition can be determined according to individual differences among users.

また、ユーザの特性や好みに応じて撮影条件を設定するので、質感を統一したり、ユーザの個性を強調させることができる。 Furthermore, since the shooting conditions are set according to the user's characteristics and preferences, it is possible to standardize the texture and emphasize the user's individuality.

以上に示したように、撮影の失敗を減らせば、ユーザの満足度が高まり、さらに利用機会が増えると期待できる。 As shown above, if the number of shooting failures is reduced, it can be expected that user satisfaction will increase and opportunities for use will further increase.

なお、本発明は上記実施形態や変形例に限定されるものではなく、要旨を逸脱しない範囲で構成要素を変形して具体化することができる。上記実施形態や変形例に開示されている複数の構成要素を適宜組み合わせることにより種々の発明を形成してもよい。また、上記実施形態や変形例に示される全構成要素からいくつかの構成要素を削除してもよい。 It should be noted that the present invention is not limited to the above-described embodiments and modified examples, and can be embodied by modifying the constituent elements without departing from the scope of the invention. Various inventions may be formed by appropriately combining a plurality of components disclosed in the above embodiments and modified examples. Furthermore, some components may be deleted from all the components shown in the above embodiments and modified examples.

遊戯画像撮影装置100とサーバ202、ユーザ端末206により、特に、遊戯画像撮影装置100とサーバ202により遊戯画像撮影システム200が構成されるとして説明したが、遊戯画像撮影装置100の機能の一部はサーバ202により実現されてもよいし、サーバ202の機能の一部が遊戯画像撮影装置100に割り当てられてもよい。また、遊戯画像撮影装置100やサーバ202以外の第3の装置が、これらの装置の機能の一部を担ってもよい。1つまたは複数のハードウェアに対して、本発明を実現するために必要な複数の機能をどのように配分するかは、各ハードウェアの処理能力や遊戯画像撮影システム200に求められる仕様等に鑑みて決定されればよい。 Although it has been explained that the game image photographing system 200 is constituted by the game image photographing device 100, the server 202, and the user terminal 206, in particular, the game image photographing device 100 and the server 202, some of the functions of the game image photographing device 100 are It may be realized by the server 202, or a part of the functions of the server 202 may be assigned to the play image photographing device 100. Furthermore, a third device other than the play image photographing device 100 and the server 202 may assume some of the functions of these devices. How to allocate the multiple functions necessary to realize the present invention to one or more pieces of hardware depends on the processing capacity of each piece of hardware, the specifications required for the game image capturing system 200, etc. It should be decided based on the above.

たとえば、遊戯画像撮影装置100のみにより、遊戯画像撮影システム200の機能が実現されてもよい。この場合、遊戯画像撮影装置100のデータ格納部136がユーザ情報230等を格納し、重要画像選択部220、撮影条件登録部222、ユーザ情報管理部224、画像認識部292の各機能は遊戯画像撮影装置100に実装されるとしてもよい。また、構図確認処理等をサーバ202により実行してもよい。サーバ202が、好み特定部164、差判定部156等の各機能を実装してもよい。 For example, the functions of the play image capturing system 200 may be realized only by the play image capturing device 100. In this case, the data storage section 136 of the play image photographing device 100 stores the user information 230, etc., and the functions of the important image selection section 220, the shooting condition registration section 222, the user information management section 224, and the image recognition section 292 are used to store the play image It may be implemented in the photographing device 100. Further, composition confirmation processing and the like may be executed by the server 202. The server 202 may implement each function such as the preference identifying section 164 and the difference determining section 156.

[変形例]
本実施形態においては、ユーザがユーザIDを入力することを前提として説明した。変形例として、ユーザIDとユーザの顔画像を対応づけておき、受付装置102においてユーザの顔画像を撮影することによりユーザを特定してもよい。顔画像以外にも指紋等の生体情報をユーザIDの代わりに使用してもよい。このような制御方法によれば、ユーザカードを忘れたユーザであっても、事前に会員登録をしていれば会員としてのサービスを受けることができる。
[Modified example]
The present embodiment has been described on the assumption that the user inputs a user ID. As a modification, the user may be identified by associating the user ID with the user's face image and photographing the user's face image at the reception device 102. In addition to facial images, biometric information such as fingerprints may be used in place of the user ID. According to such a control method, even a user who has forgotten his user card can receive services as a member if he has registered as a member in advance.

100 遊戯画像撮影装置、102 受付装置、104 撮影ブース、106 編集ブース、108 受付モニタ、110 印刷装置、112 第1撮影モニタ、114 第2撮影モニタ、116 ライト、118 カメラ、119a 左側ストロボ、119b 右側ストロボ、120 編集モニタ、122 スタイラスペン、124 カーテン、126 編集装置、128 撮影装置、130 ユーザインタフェース処理部、132 データ処理部、134 通信部、136 データ格納部、138 撮影部、140 入力部、142 出力部、144 撮影制御部、146 編集処理部、148 受付管理部、150 印刷処理部、152 画像認識部、154 構図確認部、156 差判定部、157 撮影条件設定部、158 ID取得部、159 事前修正部、160 撮影指示部、162 説明部、164 好み判定部、166 ユーザ情報取得部、168 ユーザID送信部、170 画像出力部、188 画像送信部、200 遊戯画像撮影システム、202 サーバ、204 インターネット、206 ユーザ端末、210 通信部、212 データ処理部、214 データ格納部、216 ユーザID取得部、218 ユーザ情報送信部、220 重要画像選択部、222 撮影条件登録部、224 ユーザ情報管理部、230 ユーザ情報、290 フィードバック情報、292 画像認識部、296 画像受信部、301a 顔領域、301b 顔領域、301c 顔領域、301d 顔領域、301e 顔領域、301f 顔領域、301g 顔領域、301h 顔領域、301i 顔領域、301j 顔領域、301k 顔領域、301l 顔領域、301m 顔領域、301n 顔領域、303a 目の間隔、303b 目の間隔、303c 目の間隔、303d 目の間隔、303i 目の間隔、303j 目の間隔 Reference Signs List 100 game image photographing device, 102 reception device, 104 photographing booth, 106 editing booth, 108 reception monitor, 110 printing device, 112 first photographing monitor, 114 second photographing monitor, 116 light, 118 camera, 119a left strobe, 119b right side Strobe, 120 Editing monitor, 122 Stylus pen, 124 Curtain, 126 Editing device, 128 Photographing device, 130 User interface processing section, 132 Data processing section, 134 Communication section, 136 Data storage section, 138 Photographing section, 140 Input section, 142 Output unit, 144 Shooting control unit, 146 Edit processing unit, 148 Reception management unit, 150 Print processing unit, 152 Image recognition unit, 154 Composition confirmation unit, 156 Difference determination unit, 157 Shooting condition setting unit, 158 ID acquisition unit, 159 Pre-correction unit, 160 Shooting instruction unit, 162 Explanation unit, 164 Preference determination unit, 166 User information acquisition unit, 168 User ID transmission unit, 170 Image output unit, 188 Image transmission unit, 200 Game image photography system, 202 Server, 204 Internet, 206 user terminal, 210 communication unit, 212 data processing unit, 214 data storage unit, 216 user ID acquisition unit, 218 user information transmission unit, 220 important image selection unit, 222 photographing condition registration unit, 224 user information management unit, 230 user information, 290 feedback information, 292 image recognition unit, 296 image receiving unit, 301a face area, 301b face area, 301c face area, 301d face area, 301e face area, 301f face area, 301g face area, 301h face area, 301i face area, 301j face area, 301k face area, 301l face area, 301m face area, 301n face area, 303a eye distance, 303b eye distance, 303c eye distance, 303d eye distance, 303i eye distance, 303j distance between eyes

Claims (4)

ユーザを被写体として撮影する撮影部と、
前記撮影部を用いて前記被写体のライブビュー画像を生成するライブビュー画像生成部と、
撮影画像を編集する編集部と、
前記編集された撮影画像を出力する画像出力部と、
複数の撮影画像のうち前記ユーザが満足するとして選択した重要画像に基づいて、前記ユーザが満足する傾向にある立ち位置、顔の傾きまたは表情を示す撮影条件を、フィードバック情報として登録する撮影条件登録部と、
前記フィードバック情報を反映して、前記ライブビュー画像に含まれる顔領域について構図の適正度を判定する構成確認部と、を備えることを特徴とする遊戯画像撮影システム。
a photography department that photographs the user as a subject;
a live view image generation unit that generates a live view image of the subject using the imaging unit;
An editorial department that edits captured images,
an image output unit that outputs the edited photographed image;
Photographing condition registration for registering, as feedback information, photographing conditions indicating a standing position, facial inclination, or facial expression that the user tends to be satisfied with based on an important image selected as satisfying by the user from among a plurality of photographed images. Department and
A play image photographing system comprising: a configuration confirmation unit that reflects the feedback information and determines the appropriateness of the composition of the face area included in the live view image.
ユーザを被写体として撮影する撮影部と、
撮影画像を編集する編集部と、
前記編集された撮影画像を出力する画像出力部と、
前記撮影画像毎の撮影条件を記録し、複数の撮影画像のうち前記ユーザが満足するとして選択した重要画像に基づいて、前記ユーザが満足する傾向にある撮影条件を、フィードバック情報として登録する撮影条件登録部と、
前記フィードバック情報を反映して、撮影条件を設定する撮影条件設定部と、を備えることを特徴とする遊戯画像撮影システム。
a photography department that photographs the user as a subject;
An editorial department that edits captured images,
an image output unit that outputs the edited photographed image;
Photographing conditions for recording photographing conditions for each photographed image, and registering photographing conditions that tend to be satisfied by the user as feedback information based on an important image selected as being satisfied by the user from among a plurality of photographed images. Registration department and
A game image photographing system comprising: a photographing condition setting section that sets photographing conditions by reflecting the feedback information.
前記フィードバック情報は、ストロボ光量、前記ユーザが前記撮影画像に施す画像修正の種類または前記画像修正のパラメータに関することを特徴とする請求項1または2に記載の遊戯画像撮影システム。 3. The game image photographing system according to claim 1, wherein the feedback information relates to a strobe light amount, a type of image modification performed by the user on the photographed image, or a parameter of the image modification. 前記遊戯画像撮影システムは、ネットワークを介して互いに接続する遊戯画像撮影装置とサーバとを含み、
前記遊戯画像撮影装置は、前記撮影部を備え、
前記遊戯画像撮影装置は、前記ネットワークを介してユーザIDおよび前記撮影画像を前記サーバへアップロードし、
前記サーバは、前記ユーザIDと前記撮影画像を対応づけて登録し、
前記サーバは、前記撮影条件登録部を備え、
前記サーバは、前記ユーザのユーザ端末から前記ユーザのユーザIDをアクセスキーとしたアクセスを受け付け、
前記サーバは、前記ユーザIDに対応づけられる前記撮影画像のうち、前記ユーザ端末により指定された撮影画像を前記重要画像として特定する重要画像選択部を、さらに備えることを特徴とする請求項1から3のいずれかに記載の遊戯画像撮影システム。
The game image capturing system includes a game image capturing device and a server that are connected to each other via a network,
The play image photographing device includes the photographing section,
The play image photographing device uploads the user ID and the photographed image to the server via the network,
The server registers the user ID and the photographed image in association with each other,
The server includes the imaging condition registration unit,
The server accepts access from the user terminal of the user using the user ID of the user as an access key,
The server further includes an important image selection unit that specifies, as the important image, a photographed image specified by the user terminal from among the photographed images associated with the user ID. 3. The game image photographing system according to any one of 3.
JP2023187404A 2018-05-08 2023-11-01 Game image shooting system Pending JP2024014882A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023187404A JP2024014882A (en) 2018-05-08 2023-11-01 Game image shooting system

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018090060A JP7131060B2 (en) 2018-05-08 2018-05-08 Play image shooting system
JP2022130178A JP7380778B2 (en) 2018-05-08 2022-08-17 Game image shooting system
JP2023187404A JP2024014882A (en) 2018-05-08 2023-11-01 Game image shooting system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2022130178A Division JP7380778B2 (en) 2018-05-08 2022-08-17 Game image shooting system

Publications (1)

Publication Number Publication Date
JP2024014882A true JP2024014882A (en) 2024-02-01

Family

ID=68537951

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2018090060A Active JP7131060B2 (en) 2018-05-08 2018-05-08 Play image shooting system
JP2022130178A Active JP7380778B2 (en) 2018-05-08 2022-08-17 Game image shooting system
JP2023187404A Pending JP2024014882A (en) 2018-05-08 2023-11-01 Game image shooting system

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2018090060A Active JP7131060B2 (en) 2018-05-08 2018-05-08 Play image shooting system
JP2022130178A Active JP7380778B2 (en) 2018-05-08 2022-08-17 Game image shooting system

Country Status (1)

Country Link
JP (3) JP7131060B2 (en)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4316869B2 (en) 2002-12-25 2009-08-19 富士フイルム株式会社 camera
JP4333223B2 (en) 2003-06-11 2009-09-16 株式会社ニコン Automatic photographing device
JP2005079698A (en) * 2003-08-28 2005-03-24 Mitsumi Electric Co Ltd Channel selection apparatus
JP4693344B2 (en) 2003-08-29 2011-06-01 フリュー株式会社 Photo sticker making apparatus and photo sticker making method
JP2009009404A (en) 2007-06-28 2009-01-15 Olympus Corp Image processing device, image processing method and image processing program
JP5152583B2 (en) 2008-09-26 2013-02-27 カシオ計算機株式会社 Imaging apparatus, imaging guide method, and program
KR20100099559A (en) * 2009-03-03 2010-09-13 삼성전자주식회사 Photographing method and photographing apparatus capable of recognizing persons
JP5623174B2 (en) 2010-07-30 2014-11-12 株式会社バンダイナムコゲームス Imaging apparatus, network system, program, information storage medium, and imaging apparatus control method
JP6354246B2 (en) 2014-03-26 2018-07-11 株式会社ニコン IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND CONTROL PROGRAM
JP5888453B1 (en) 2015-03-05 2016-03-22 フリュー株式会社 Photo sticker making apparatus and photo sticker making method
JP6503927B2 (en) 2015-06-29 2019-04-24 フリュー株式会社 Image shooting apparatus and image shooting method
JP6700840B2 (en) 2016-02-18 2020-05-27 キヤノン株式会社 Image processing device, imaging device, control method, and program
JP6880394B2 (en) 2016-07-22 2021-06-02 フリュー株式会社 Photographing game console and shooting method

Also Published As

Publication number Publication date
JP7380778B2 (en) 2023-11-15
JP2019197112A (en) 2019-11-14
JP7131060B2 (en) 2022-09-06
JP2022164722A (en) 2022-10-27

Similar Documents

Publication Publication Date Title
CN110612533B (en) Method for recognizing, ordering and presenting images according to expressions
JP6607281B2 (en) Photo sticker creation apparatus, display method, and program
US9519950B2 (en) Image generating apparatus and image generating method
WO2022037111A1 (en) Image processing method and apparatus, interactive display apparatus, and electronic device
JP4403497B2 (en) Photo sticker vending machine, photo sticker creation method, and program
JP2013243648A (en) Photograph seal machine, and processing method and program for photograph seal machine
JP2018022126A (en) Photograph creation game machine and imaging method
JP7380778B2 (en) Game image shooting system
JP2020188507A (en) Game image capturing system and image processing system
JP6413271B2 (en) Information providing apparatus, image analysis system, information providing apparatus control method, image analysis method, control program, and recording medium
JP6413270B2 (en) Management device and management device control method, photo sticker creation device, terminal device, control program, and recording medium
JP7073803B2 (en) Game image shooting system
JP7185130B2 (en) Management server, mobile terminal, management server control method, mobile terminal control method, control program, and recording medium
JP6254400B2 (en) Photo sticker dispensing device
KR102479860B1 (en) Photography method using augmented reality
JP6311383B2 (en) PHOTOGRAPHIC EDITING DEVICE, ITS CONTROL METHOD, CONTROL PROGRAM, AND COMPUTER-READABLE RECORDING MEDIUM CONTAINING THE CONTROL PROGRAM
JP6349824B2 (en) Image management system, management server, image evaluation method, control program, and recording medium
JP6889366B2 (en) Management device, control method of management device
KR102682665B1 (en) Photo booth with selectable background image
JP2014202962A (en) Photographing game machine and control program thereof
JP7113606B2 (en) Photo shooting game machine, control method for photo shooting game machine, and control program for photo shooting game machine
JP2020181216A (en) Game image photographing device
US11997411B2 (en) Contactless photo system
JP7410367B2 (en) Server, probability calculation method, control program and recording medium
JP7215628B1 (en) Game image shooting system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231101

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241001