JP4720685B2 - Automatic photo studio - Google Patents

Automatic photo studio Download PDF

Info

Publication number
JP4720685B2
JP4720685B2 JP2006237939A JP2006237939A JP4720685B2 JP 4720685 B2 JP4720685 B2 JP 4720685B2 JP 2006237939 A JP2006237939 A JP 2006237939A JP 2006237939 A JP2006237939 A JP 2006237939A JP 4720685 B2 JP4720685 B2 JP 4720685B2
Authority
JP
Japan
Prior art keywords
studio
image
shooting
photograph
skin
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006237939A
Other languages
Japanese (ja)
Other versions
JP2008061107A (en
Inventor
真悟 土手
茂 加納
学 大水
直哉 前川
崇志 中川
松本  健志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sega Corp
Original Assignee
Sega Corp
Sega Games Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sega Corp, Sega Games Co Ltd filed Critical Sega Corp
Priority to JP2006237939A priority Critical patent/JP4720685B2/en
Publication of JP2008061107A publication Critical patent/JP2008061107A/en
Application granted granted Critical
Publication of JP4720685B2 publication Critical patent/JP4720685B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、子供を中心とする被写体の画像(被写体画像)を自動的に撮影する自動写真館に関するものである。   The present invention relates to an automatic photo studio that automatically captures an image of a subject (subject image) centered on a child.

最近の子供は6つの財布を持っていると言われる。近年一人っ子が増え、一人っ子同士が結婚して子供が生まれると、両親と祖父母の合計6人が、この一人の子供を金に糸目をつけずに可愛がるという現象を指す言葉である。   A recent child is said to have six wallets. In recent years, when the number of one child increases and one child marries and a child is born, a total of six parents and grandparents love this one child without paying attention to the money.

こうした社会状況を反映して、国内各地において子供の写真撮影を専業的に行う写真館が増加している。このような写真館においては、母親が小さな子供を連れて来店し、カメラマンに子供の写真を撮影してもらい、撮影した写真はその場で出来上がりを確認することができる。そして、「いい写真」(子供の可愛らしさが見て取れる写真、子供の生き生きした姿が写っている写真など)が撮れていると、祖父母にも送りたいため、同じ写真を何枚も焼き増し注文することになる。このため、写真館ではプリンセス風のドレスなどの着替えも用意して、普段とは違うイメージの写真が撮れるようにもしている。   Reflecting this social situation, there are an increasing number of photo studios dedicated to taking pictures of children in various parts of the country. In such a photo studio, a mother can bring a small child and have a photographer take a picture of the child, and the photograph taken can be confirmed on the spot. And if you have taken “good photos” (photos that show the cuteness of the children, photos that show the children ’s liveliness, etc.), you can order the same photos in order to send them to your grandparents. become. For this reason, the photo studio also prepares dress-ups such as princess-like dresses so that you can take pictures with a different image than usual.

こうした写真館では、利用者が満足する写真を撮影するために、プロのカメラマンが撮影を行っている。しかし、プロのカメラマンを雇うことによって写真館の運営費用は増大し、その結果、利用者の支払う対価も増大する。   In these photo studios, professional photographers take pictures to take pictures that satisfy users. However, hiring a professional photographer increases the cost of operating a photo studio, which in turn increases the price paid by users.

また、プロのカメラマンにとっても小さな子供(概ね6歳以下程度の子供)の「いい写真」を撮影するのは容易ではない。というのは、小さな子供は、カメラマンが視線の向きやポーズを指示しても、指示の意味を理解することができないことがあるし、たとえ意味を理解しても従わず、自分の興味がある方向を向いたり、逆に表情が硬くなったり、静止を求められても走り回っていたりすることが常だからである。   Also, it is not easy for professional photographers to take “good photos” of small children (approximately 6 years old or younger). This is because a small child may not be able to understand the meaning of the instruction even if the cameraman instructs the direction of the line of sight and the pose. This is because they usually turn in the direction, and on the contrary, their facial expressions become stiff, and they run around even when they are required to stop.

むしろ、母親以外の見知らぬカメラマンが存在することにより、小さな子供がリラックスすることができず、なかなか「いい写真」を撮影することができないというのが現実である。   Rather, the fact that there are strange photographers other than mothers makes it difficult for small children to relax and to take “good photos”.

最近では、前述した運用費用の低減を図るため、および、カメラマン等の他人を排除してリラックスした雰囲気で撮影を行うようにするため、自動写真館システムが提案されている。   Recently, an automatic photo studio system has been proposed in order to reduce the above-described operating costs and to perform shooting in a relaxed atmosphere by eliminating other people such as a photographer.

自動写真館システムとは、自動撮影スタジオ、写真編集用の設備および印刷装置を備えた写真館であり、利用者は自動撮影スタジオにおいて他人の目を気にすることなく、自分の子供の写真を撮影し、写真編集用の設備を使用して、撮影した写真に装飾用のフレームを付けたり、撮影日付を記入するなどの編集を行うことができる。そして、気に入った写真だけを、その場でさまざまな大きさに印刷し、自宅に持ち帰ることができる。   The automatic photo studio system is a photo studio equipped with an automatic photo studio, photo editing equipment and printing device, and users can take photos of their children without worrying about others' eyes in the auto photo studio. You can shoot and use the photo editing equipment to edit the photo you took, such as attaching a decorative frame or entering the date of the photo. And you can print just the photos you like in various sizes on the spot and take them home.

このような自動写真館システムにおいても、小さな子供を被写体として、記念として持ち帰るに足る写真を撮影するのは容易なことではない。子供は、その時々で注意を引くものに次々と目を向けるので、単にシャッタータイミングで静止させることすら難しく、いい顔、いいポーズを取らせるのは、さらに困難になる。   Even in such an automatic photo studio system, it is not easy to take a photo that can be taken home as a memorial with a small child as a subject. As children turn their attention one after another to something that attracts attention, it is even more difficult to make them stand still at the shutter timing, and to make a good face and a good pose.

こうした問題を解決するために、既に本願出願人らにより、自動撮影スタジオのカメラ近傍にモニタを設置し、このモニタにお遊戯の映像を表示して子供の注意をひく、さらに映像内でインストラクタが子供にジャンプしたり寝転んだりするように呼びかけ、この呼びかけのタイミングで撮影するなどの手法が、特願2005−192183において提案されている。   In order to solve such problems, the applicants of the present application have already installed a monitor in the vicinity of the camera of the automatic shooting studio, and displayed the video of the game on this monitor to attract the attention of the child. Japanese Patent Application No. 2005-192183 proposes a method of calling a child to jump or lie down and shooting at the timing of this call.

しかしながら、このような手法を採ったとしても、小さな子供が、シャッタータイミングにおいて、撮影画角内に収まった状態で、ぶれなく(すなわちシャッタータイミングにおいて、ほぼ静止した状態を子供が保って)撮影できる確率は高くない。   However, even if such a method is adopted, a small child can shoot without blurring (that is, the child keeps a substantially stationary state at the shutter timing) while staying within the shooting angle of view at the shutter timing. Probability is not high.

このため、自動写真館の自動撮影スタジオにおいては、上記のような手法に加えて、一定時間(例えば5秒)毎に連続的に撮影を行い、自動撮影スタジオを1回使用するごとに50枚程度の写真(画像)を撮影するということが行われる。つまり、撮影回数を増やすことで結果的にいい写真の枚数を増加させるわけである。   For this reason, in the automatic photography studio of the automatic photo studio, in addition to the above-described method, continuous photography is performed every predetermined time (for example, 5 seconds), and 50 sheets are used every time the automatic photography studio is used. Taking a photo (image) of a degree is performed. In other words, increasing the number of shots results in an increase in the number of good photos.

前述したように、自動撮影スタジオを1回使用するごとに50枚程度の写真(画像)が撮影される。また、自動写真館を訪れた利用者は、自動撮影スタジオを1回使用するにとどまらず、1来館あたり何度も自動撮影スタジオを使用することが多い。   As described above, about 50 photographs (images) are taken every time the automatic photographing studio is used. In addition, a user who visits an automatic photo studio often uses an automatic photo studio several times per visit, rather than using the auto photo studio once.

このため、利用者が撮影した写真を確認して、このうちから、編集・印刷して持ち帰るための気に入った写真を選択するためには多大な時間を要する。また、このような数百枚の写真を画面上に一度に表示して比較することはできないから(無理に表示しても画像が小さくなり、内容が確認できない)、例えば数枚ずつ順番に表示して、順次選択するという方法が考えられる。   For this reason, it takes a lot of time to check a photograph taken by the user and select a favorite photograph to be edited / printed and taken home. Also, you can't display and compare hundreds of photos at once on the screen (the image gets smaller and you can't check the contents even if you forcibly display it), so for example, several photos are displayed in order. Then, the method of selecting sequentially can be considered.

従って、自動写真館においては、例えば、被写体の一部しか写っていないような失敗写真、あるいは、顔が写っていないような失敗写真は、選択・編集・印刷の対象写真として残さず破棄(メモリから消去)するようにし、これによって、無駄な撮影画像(写真)の数を減らすことで、写真選択を容易にする必要がある。   Therefore, in an automatic photo studio, for example, failed photos in which only a part of the subject is captured or failed photos in which a face is not captured are discarded as memory for selection / editing / printing (memory). Therefore, it is necessary to facilitate the selection of photos by reducing the number of useless photographed images (photos).

本発明は上記の点に鑑みなされたもので、その目的とするところは、自動写真スタジオにおいて、撮影が成功したか、すなわち、撮影画像中に被写体である子供がうまく撮影されているかどうかを判定し、失敗写真であると判定された撮影画像については、これをメモリから消去することで、利用者による写真選択(撮影画像選択)を容易にし、また、メモリ資源の有効活用を図ることにある。   The present invention has been made in view of the above points, and an object of the present invention is to determine whether shooting has been successful in an automatic photo studio, that is, whether a child as a subject has been successfully shot in a shot image. The photographed image determined to be a failed photograph is erased from the memory, thereby facilitating the user to select a photograph (selected photographed image) and to effectively use memory resources. .

上記目的を達成するために、本発明による自動写真館は、被写体を静止画撮影する撮影用カメラと、前記撮影用カメラで撮影された撮影画像を記憶するためのメモリ手段と、前記撮影用カメラで撮影されて前記メモリ手段に一旦記憶された個々の撮影画像が、成功写真であるか失敗写真であるかを判定して、失敗写真である場合には当該撮影画像を前記メモリ手段から消去させる成功写真判定・画像消去制御手段とを備え、前記成功写真判定・画像消去制御手段は、撮影画像から被写体の肌色部分を抽出して肌画像部分を生成する処理を行い、前記肌画像部分が生成できなかった場合、および、生成した前記肌画像部分の画像全体に対して占める比率が所定の閾値未満である場合には、失敗写真と判定する自動写真館において、利用者による被写体である撮影対象者の肌露出度の指定に応じて、前記閾値を決定する手段を備える。 In order to achieve the above object, an automatic photo studio according to the present invention includes a shooting camera for taking a still image of a subject, memory means for storing a shot image taken by the shooting camera, and the shooting camera. It is determined whether each photographed image taken in step 1 and stored in the memory means is a success photograph or a failure photograph. If the photographed photograph is a failure photograph, the photographed image is deleted from the memory means. A success photo determination / image erasure control means, wherein the success photo determination / image erasure control means performs a process of generating a skin image portion by extracting a skin color portion of a subject from a photographed image, and generating the skin image portion If it is not possible, and if the ratio of the generated skin image portion to the entire image is less than a predetermined threshold value, it is determined by the user at the automatic photo studio that determines that the photo is a failure. A is in accordance with the specified skin exposure value imaging subject Utsushitai comprises means for determining the threshold value.

本発明によれば、自動写真館において、撮影画像中に被写体である子供がうまく撮影されているかどうかを判定し、例えば、子供の一部しか写っていないような撮影画像や、子供の顔が写っていないような撮影画像や、子供が撮影画角の端に寄っているような撮影画像は失敗写真であると判定して、失敗写真であると判定された撮影画像については、これをメモリから消去するようにしているので、利用者による写真選択(撮影画像選択)が容易となり、また、メモリ資源の有効活用を図ることもできる。   According to the present invention, in an automatic photo studio, it is determined whether or not a child as a subject is well photographed in a photographed image. For example, a photographed image in which only a part of a child is photographed or a child's face is displayed. A photographed image that does not appear, or a photographed image where a child is approaching the edge of the field of view is determined to be a failed photo, and for a captured image that is determined to be a failed photo, this is stored in memory. Therefore, it is easy for the user to select a photo (photographed image selection), and it is possible to effectively use memory resources.

以下、本発明の実施の形態を、図面を用いて説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図1は、本発明の一実施形態(以下、本実施例と記す)に係る自動写真館の店内(館内)構造を示す配置図である。   FIG. 1 is a layout diagram showing the in-store (in-house) structure of an automatic photo studio according to an embodiment of the present invention (hereinafter referred to as the present example).

自動写真館0101には、カウンタ0102、サテライト0106、スタジオ0107の各設備が配置されている。   In the automatic photo studio 0101, equipments of a counter 0102, a satellite 0106, and a studio 0107 are arranged.

各設備の詳細な構成・機能等については後述するが、カウンタ0102は、利用者が店内で使用するICカードの発行を行い、また会計を行うための設備である。スタジオ0107は、カメラ、照明、背景等を備えた自動写真撮影スタジオである。サテライト0106は、利用者が撮影前の時間を過ごしたり、撮影済みの画像を編集するための設備であり、コンピュータを設置したテーブルと、1つ以上の椅子からなる。   The detailed configuration and function of each facility will be described later. The counter 0102 is a facility for the user to issue an IC card to be used in the store and to perform accounting. Studio 0107 is an automatic photography studio equipped with a camera, lighting, background, and the like. The satellite 0106 is a facility for a user to spend time before photographing or to edit a photographed image, and includes a table on which a computer is installed and one or more chairs.

自動写真館0101の店内には、複数の利用者が同時に撮影や画像の編集を行うことを可能とするために、複数のスタジオ0107、および複数のサテライト0106を設置している。   In the automatic photo studio 0101 store, a plurality of studios 0107 and a plurality of satellites 0106 are installed so that a plurality of users can simultaneously shoot and edit images.

なお、図1には示されていないが、カウンタ0102の近傍には、コンピュータシステムとそれに接続された各種構成要素からなるカウンタシステム0104、プリンタシステム0105、サーバシステム0103が設置されている。同様に、各サテライト0106にはサテライトシステム0110が、各スタジオ0107にはスタジオシステム0111が設置されている。   Although not shown in FIG. 1, a counter system 0104, a printer system 0105, and a server system 0103 including a computer system and various components connected thereto are installed near the counter 0102. Similarly, a satellite system 0110 is installed in each satellite 0106, and a studio system 0111 is installed in each studio 0107.

また、店内には以上の設備のほか、撮影時に使用する貸衣装を収納した衣装棚、衣装を着替えるための部屋、撮影に使用するぬいぐるみ等の小物を収納する棚、トイレ、下駄箱、退屈した子供を遊ばせるためのプレイエリア、機材等を保管するためのバックヤード等、自動写真館の運営に必要なさまざまな設備が存在する。   In addition to the above facilities, the store has a costume shelf that stores rental costumes used for shooting, a room for changing clothes, shelves for storing small items such as stuffed animals used for shooting, toilets, shoe boxes, and bored. There are various facilities necessary for the operation of an automatic photo studio, such as a play area for children to play and a backyard for storing equipment.

図2は、本実施例に係る自動写真館のシステム構成全体の概略図である。図2中の各システム内部の詳細な構成については後述するが、サーバシステム0103は、主として自動写真館システム全体で使用する各種のファイルを記録しており、他のシステムからの要求に従ってデータを提供する、いわゆるファイルサーバとして機能する。カウンタシステム0104は、ICカードの発行、印刷状況の確認、会計等の、自動写真館の運営に必要な業務を行う。一方、サテライトシステム0110、スタジオシステム0111は、主として利用者のためのシステムであり、それぞれ、画像(写真)の編集、画像の撮影に使用される。プリンタシステム0105は、プリンタによる画像の印刷を制御するためのシステムである。   FIG. 2 is a schematic diagram of the entire system configuration of the automatic photo studio according to the present embodiment. The detailed configuration of each system in FIG. 2 will be described later. The server system 0103 records various files used mainly in the entire automatic photo studio system, and provides data according to requests from other systems. It functions as a so-called file server. The counter system 0104 performs operations necessary for the operation of an automatic photo studio, such as issuance of IC cards, confirmation of printing status, and accounting. On the other hand, the satellite system 0110 and the studio system 0111 are systems mainly for users, and are used for image (photo) editing and image shooting, respectively. A printer system 0105 is a system for controlling image printing by a printer.

各システムは、PC等のコンピュータと、ICカードR/W(リーダー/ライター)、タッチパネル式モニタなどの周辺機器を接続したものであり、通信回線0114によって、相互に通信可能に接続されている。従って、例えば、サーバシステム0103がサテライトシステム0110の稼動状況情報を受け取って、自動写真館システムの稼動状況を管理するためのファイルに記録しておき、これをカウンタシステム0104からの要求に従って送付し、カウンタシステム0104のタッチパネル式モニタに表示するといったことが可能である。   Each system is configured by connecting a computer such as a PC and peripheral devices such as an IC card R / W (reader / writer), a touch panel monitor, and the like, and are connected to each other via a communication line 0114. Therefore, for example, the server system 0103 receives the operating status information of the satellite system 0110, records it in a file for managing the operating status of the automatic photo studio system, and sends it in accordance with a request from the counter system 0104. It can be displayed on a touch panel monitor of the counter system 0104.

プリンタシステム0105、サテライトシステム0110、スタジオシステム0111は、利用者や画像印刷枚数の多寡に応じて同種のシステムを複数設置すればよい。なお、以降の説明では、サーバシステム0103、カウンタシステム0104、プリンタシステム0105、サテライトシステム0110、スタジオシステム0111の総称として単に「システム」と記載する。また、複数のシステムが全て同じ用途のシステム、例えばプリンタシステム0105である場合に、「同一種類のシステム」というように記載する。   For the printer system 0105, the satellite system 0110, and the studio system 0111, a plurality of systems of the same type may be installed according to the number of users and the number of printed images. In the following description, the server system 0103, the counter system 0104, the printer system 0105, the satellite system 0110, and the studio system 0111 are simply referred to as “system”. In addition, when all of a plurality of systems are systems of the same application, for example, the printer system 0105, they are described as “the same type of system”.

図3は、本実施例に係る自動写真館(以下、「店」と略記する)における、利用者による自動写真館利用の流れを示すフローチャートである。   FIG. 3 is a flowchart showing a flow of use of the automatic photo studio by the user in the automatic photo studio (hereinafter abbreviated as “store”) according to the present embodiment.

利用者は入店すると(S0301)、まずカウンタ0102で受付を行い(S0302)、ICカード(プレイヤーカード)を受取る。利用者としては親子連れ(特に母親とその子供からなる利用者グループ)が中心になると想定され、1利用者グループに対して1枚のICカードが渡される。ICカードには、利用者または利用者グループ(以下、利用者グループの場合であっても、複数人であることを特に明示する必要のない場合には単に「利用者」と記載する)を識別するための固有のコードが記録されている。   When the user enters the store (S0301), first, the counter 0102 accepts it (S0302) and receives an IC card (player card). As a user, it is assumed that parents and children (especially, a user group consisting of a mother and its children) is the center, and one IC card is given to one user group. The IC card identifies a user or user group (hereinafter, even if it is a user group, it is simply described as “user” unless there is a need to clearly indicate that there are multiple users). A unique code is recorded.

次に、利用者は、空いているサテライト0106に移動して腰を下ろし、撮影に使用したいスタジオ0107が空くのを待つ(S0303)。このとき、初めての来店で店の利用方法が良く分からないような場合には、サテライトシステム0110を使用して利用方法の説明を見ることもできる。   Next, the user moves to a vacant satellite 0106, sits down, and waits for a studio 0107 to be used for photographing to become available (S0303). At this time, if it is not clear how to use the store for the first time, the satellite system 0110 can be used to explain the usage.

目当てのスタジオ0107を使用していた利用者が退出すると、スタジオ0107の入口付近に設置された、スタジオが使用中であることを示すランプが消灯する。利用者は、消灯によってスタジオ0107が使用可能になったことを確認し、スタジオ0107に移動し、スタジオシステム0111を使用して撮影を行う(S0304)。   When a user who has used the target studio 0107 leaves, the lamp installed near the entrance of the studio 0107 indicating that the studio is in use is turned off. The user confirms that the studio 0107 can be used by turning off the light, moves to the studio 0107, and performs shooting using the studio system 0111 (S0304).

撮影終了後、引き続き別のスタジオ0107で撮影したい場合には、そのスタジオ0107が使用可能であることを確認後に移動して、再び撮影を行い、目当てのスタジオが使用中の場合には、サテライト0106に引き返す(S0305でYESの場合)。また、一旦撮影済み写真を表示して確認したい場合にも、サテライト0106に引き返す(S0305でNOの場合)。このとき、必ずしも来店後に腰を下ろしたサテライト0106に戻る必要はなく、この時点で空いているサテライト0106に向かえばよい。   When it is desired to continue shooting in another studio 0107 after the shooting is completed, the camera 0107 is moved after confirming that the studio 0107 can be used, and when the target studio is in use, the satellite 0106 is moved. (In the case of YES at S0305). Also, when it is desired to display and confirm the photographed image once, it is returned to the satellite 0106 (NO in S0305). At this time, it is not always necessary to return to the satellite 0106 sitting down after visiting the store, and it is sufficient to go to the satellite 0106 that is free at this time.

サテライト0106では、サテライトシステム0110を使用して、撮影した画像の確認、選択を行うことができる(S0306)。そして、気に入った画像を選択した場合であっても、さらに撮影したい場合(S0307でYESの場合)には、再びスタジオ0107で撮影を行うことができる。   In the satellite 0106, the captured image can be confirmed and selected using the satellite system 0110 (S0306). Even if a favorite image is selected, if it is desired to further shoot (YES in S0307), it is possible to shoot again in the studio 0107.

追加撮影の必要がない場合(S0307でNOの場合)には、利用者はサテライトシステム0110を使用して選択済み画像の編集を行い、次に、最終的に印刷したい写真を選択して印刷指示する(S0308)。   If there is no need for additional shooting (NO in S0307), the user uses the satellite system 0110 to edit the selected image, and then selects a photo to be finally printed and prints it. (S0308).

そして、印刷指示が終了した後は、カウンタ0102に立ち寄って、ICカードを返却し、会計を済ませ、出力した写真を受取り(S0309)、退店する(S0310)。   After the printing instruction is completed, the user stops at the counter 0102, returns the IC card, completes the accounting, receives the output photo (S0309), and exits (S0310).

以降は、まず、図1、図2に示した各設備および各システムの詳細な構成等を説明し、続いて、図3のフローチャート中の各処理(受付、撮影、編集等)について各システムの動作を説明する。   In the following, first, the detailed configuration and the like of each facility and each system shown in FIGS. 1 and 2 will be described, and then each process (reception, shooting, editing, etc.) in the flowchart of FIG. The operation will be described.

図4は、カウンタ0102の一部を斜め上方から見た図である。また、図5、図6、図7は、それぞれ、サーバシステム0103、カウンタシステム0104、プリンタシステム0105のブロック図である。   FIG. 4 is a view of a part of the counter 0102 as viewed obliquely from above. FIGS. 5, 6, and 7 are block diagrams of the server system 0103, the counter system 0104, and the printer system 0105, respectively.

図4に示すように、カウンタのテーブル内部には、カウンタシステム0104のPC本体0600、およびプリンタシステム0105のPC本体0700が納められている。カウンタテーブルの上には、従業員が受付などの処理を行うためのタッチ式モニタ0603、追加プリントなどの処理を行うためのタッチ式モニタ0703、写真を印刷・出力するプリンタ0710aが置かれている。また、図4には示していないが、カウンタシステム0104のICカードR/W0606a、0606b、プリンタシステム0105のICカードR/W0706も、カウンタテーブルの上部に置かれている。   As shown in FIG. 4, a PC main body 0600 of the counter system 0104 and a PC main body 0700 of the printer system 0105 are stored in the counter table. On the counter table, a touch-type monitor 0603 for employees to perform processes such as reception, a touch-type monitor 0703 for performing processes such as additional printing, and a printer 0710a for printing / outputting photographs are placed. . Although not shown in FIG. 4, the IC cards R / W 0606a and 0606b of the counter system 0104 and the IC card R / W 0706 of the printer system 0105 are also placed on the counter table.

カウンタ0102の内側には、サーバシステム0103のPC本体0500、モニタ0503、および、図4には示していないが、キーボード0504、ICカードR/W0506が設置されている。   Inside the counter 0102, a PC main body 0500 of the server system 0103, a monitor 0503, and a keyboard 0504 and an IC card R / W 0506 (not shown in FIG. 4) are installed.

なお、各システムのPC本体とその周辺機器、および各システムのPC本体同士は、有線または無線方式により互いに通信可能であれば良いのであって、設置場所は上述の場所に限るものではない。店内の美観等も考慮した上で、通常の運営に便利な位置に設置すればよい。   The PC main body of each system and its peripheral devices, and the PC main bodies of each system need only be able to communicate with each other by a wired or wireless method, and the installation location is not limited to the above-described location. In consideration of the aesthetics of the store, it should be installed at a convenient location for normal operation.

図5に示すように、サーバシステム0103は、PC本体0500、モニタ(サーバ用モニタ)0503、キーボード0504、ICカードR/W0506を含んで構成されている。   As shown in FIG. 5, the server system 0103 includes a PC main body 0500, a monitor (server monitor) 0503, a keyboard 0504, and an IC card R / W 0506.

従業員は、キーボード0504を使用して操作を行い、ICカードR/W0506を使用して新たに採用した従業員用のICカード(以下「オペレータカード」と記述する)を作成したり、システム設定を初期作成あるいは変更したり、モニタ0503上に各システムの稼動状況を表示したりすることができる。   Employees operate using the keyboard 0504 to create newly adopted IC cards for employees (hereinafter referred to as “operator cards”) using the IC card R / W0506, or to make system settings. Can be initially created or changed, and the operating status of each system can be displayed on the monitor 0503.

PC本体0500は、CPU0501、メモリ0502、画像出力部0505、通信インタフェース0507、磁気ディスク0508を有している。磁気ディスク0508には、店の運営等に必要な情報が記録される。   The PC main body 0500 has a CPU 0501, a memory 0502, an image output unit 0505, a communication interface 0507, and a magnetic disk 0508. The magnetic disk 0508 records information necessary for store operation and the like.

各情報は、通信インタフェース0507および通信回線0114を経由して、カウンタシステム0104等、他システムとの間で送受信される。   Each information is transmitted / received to / from other systems such as the counter system 0104 via the communication interface 0507 and the communication line 0114.

図6は、カウンタシステム0104のブロック図である。カウンタシステム0104は、PC本体0600、タッチ式モニタ(タッチ式のカウンタ用モニタ)0603、ICカードR/W0606a、0606bを含んで構成されている。PC本体0600は、CPU0601、メモリ0602、画像出力部0605、通信インタフェース0607、磁気ディスク0608を有している。   FIG. 6 is a block diagram of the counter system 0104. The counter system 0104 includes a PC main body 0600, a touch monitor (touch counter monitor) 0603, and IC cards R / W 0606a and 0606b. The PC main body 0600 includes a CPU 0601, a memory 0602, an image output unit 0605, a communication interface 0607, and a magnetic disk 0608.

従業員(オペレータ)は、ICカードR/W0806aにオペレータカードを挿入することでカウンタシステム0104の操作が許容され、指をモニタ0603にタッチさせることで実際の操作を行う。例えば、来店した利用者の情報を入力して、ICカードR/W0806bに挿入されたICカードをプレイヤーカードとして作成したり、モニタ0603に各システムの利用状況を表示したりすることができる。   An employee (operator) is allowed to operate the counter system 0104 by inserting the operator card into the IC card R / W0806a, and performs an actual operation by touching the monitor 0603 with a finger. For example, it is possible to input the information of the user who has visited the store, create an IC card inserted into the IC card R / W0806b as a player card, or display the usage status of each system on the monitor 0603.

カウンタシステム0104で入力された利用者情報等は、通信インタフェース0607および通信回線0114を経由して、サーバシステム0103等、他システムとの間で送受信される。   User information or the like input by the counter system 0104 is transmitted / received to / from other systems such as the server system 0103 via the communication interface 0607 and the communication line 0114.

図7は、プリンタシステム0105のブロック図である。プリンタシステム0105は、PC本体0700、タッチ式モニタ(タッチ式のプリンタ用モニタ)0703、ICカードR/W0706および1台以上のプリンタ0710a、0710b、0710cを含んで構成されている(以降、プリンタ0710a、0710b、0710cを総称して、プリンタ0710と記載する)。プリンタ0710が複数台接続されている理由は、複数のプリンタ0710を使用して並列的に印刷を行うことで、印刷待ち時間を短縮する目的のほか、市場において一般に流通しているプリンタはA3サイズ程度の大きさまでしか印刷できず、例えばA1版の印刷を行うためには専用の特殊なプリンタが必要であるという事情による。また、PC本体0700は、CPU0701、メモリ0702、画像出力部0705、通信インタフェース0707、磁気ディスク0708、プリンタ制御部0709を有している。   FIG. 7 is a block diagram of the printer system 0105. The printer system 0105 includes a PC main body 0700, a touch monitor (touch printer monitor) 0703, an IC card R / W 0706, and one or more printers 0710a, 0710b, and 0710c (hereinafter referred to as printer 0710a). , 0710b and 0710c are collectively referred to as a printer 0710). The reason why a plurality of printers 0710 are connected is that, in addition to the purpose of shortening the printing waiting time by performing printing in parallel using a plurality of printers 0710, printers generally distributed in the market are A3 size. For example, it is possible to print only up to a certain size. For example, a special printer is required to print the A1 plate. The PC main body 0700 includes a CPU 0701, a memory 0702, an image output unit 0705, a communication interface 0707, a magnetic disk 0708, and a printer control unit 0709.

従業員(オペレータ)は、ICカードR/W0706にオペレータカードを挿入することでプリンタシステム0105の操作が許容され、指をモニタ0703にタッチさせることで実際の操作を行う。例えば、印刷時に不具合が発生した場合の再印刷(やり直し印刷)などの操作を行うことができる。   An employee (operator) is allowed to operate the printer system 0105 by inserting the operator card into the IC card R / W 0706, and performs an actual operation by touching the monitor 0703 with a finger. For example, it is possible to perform operations such as reprinting (redo printing) when a problem occurs during printing.

プリンタシステム0105の処理状況等は、通信インタフェース0707および通信回線0114を経由して、サーバシステム0103等、他システムとの間で送受信される。   The processing status of the printer system 0105 is transmitted / received to / from other systems such as the server system 0103 via the communication interface 0707 and the communication line 0114.

図8は、サテライト0106を斜め上方から見た図である。また、図9は、サテライトシステム0110のブロック図である。   FIG. 8 is a view of the satellite 0106 as viewed obliquely from above. FIG. 9 is a block diagram of the satellite system 0110.

サテライト0106は、利用者がスタジオ0107の空きを待ったり、撮影済みの画像を編集したりするための設備である。本実施例においては、図8に示すように、円形のテーブルを仕切り板0804によって略4等分に仕切り、仕切られたそれぞれの場所に、1つまたは複数の椅子とサテライトシステム0110を備えている。   The satellite 0106 is a facility for a user to wait for a free space in the studio 0107 or to edit a captured image. In this embodiment, as shown in FIG. 8, a circular table is divided into approximately four equal parts by a partition plate 0804, and one or more chairs and a satellite system 0110 are provided in each partitioned place. .

本実施例では、テーブル0801の支柱0803の内部に、サテライトシステム0110のPC本体0900が納められており、テーブル0801の上面0802には、タッチ式モニタ0903、タッチペン0904、ICカードR/W0906が取り付けられている。PC本体0900と、タッチ式モニタ0903、タッチペン0904、ICカードR/W0906とは、有線または無線により通信可能に接続されている。   In this embodiment, the PC main body 0900 of the satellite system 0110 is housed in the column 0803 of the table 0801, and the touch monitor 0903, the touch pen 0904, and the IC card R / W 0906 are attached to the upper surface 0802 of the table 0801. It has been. The PC main body 0900, the touch-type monitor 0903, the touch pen 0904, and the IC card R / W 0906 are connected to be communicable by wire or wirelessly.

図9に示すように、サテライトシステム0110は、PC本体0900、タッチ式モニタ(サテライト用モニタ)0903、タッチペン0904、ICカードR/W0906を含んで構成されている。PC本体0900は、CPU0901、メモリ0902、画像出力部0905、通信インタフェース0907、磁気ディスク0908を有している。   As shown in FIG. 9, the satellite system 0110 includes a PC main body 0900, a touch-type monitor (satellite monitor) 0903, a touch pen 0904, and an IC card R / W 0906. The PC main body 0900 includes a CPU 0901, a memory 0902, an image output unit 0905, a communication interface 0907, and a magnetic disk 0908.

利用者は、タッチペン0904を使用して操作を行い、タッチ式モニタ0903にスタジオ0107での撮影方法等を表示したり、撮影した画像の編集や印刷指示などの操作を行ったりすることができる。なお、タッチペン0904を使わず、指を使って操作するようにすることもできる。このようにした場合には、タッチペンが不要になるので、システム構築に必要な費用を減少させることができ、また、タッチペンの故障や紛失も発生しないため、店としては大きなメリットがある。しかし、他人の手が触れたモニタ画面に触ることを嫌がる利用者もいるので、この点に注意が必要である。   The user can operate using the touch pen 0904 to display the shooting method in the studio 0107 on the touch-type monitor 0903, and to perform operations such as editing of a captured image and a print instruction. Note that it is also possible to operate with a finger without using the touch pen 0904. In this case, since the touch pen is unnecessary, the cost required for the system construction can be reduced, and the touch pen does not break down or be lost. However, some users are reluctant to touch the monitor screen touched by another person's hand, so this point needs attention.

メモリ0902には、画像編集に使用する線描パターンや太さ、画像合成用に予め用意された各種のスタンプ画像、印刷レイアウトの見本、各種の案内メッセージ(音声及び文情報)などが記憶されている。これらの情報は、サーバシステム0103の磁気ディスク0508内に記録しておき、サテライトシステム0110を起動するときや、磁気ディスク0508の記録内容を更新するときなどに、必要に応じてサテライトシステム0110に転送することができる。   The memory 0902 stores line drawing patterns and thicknesses used for image editing, various stamp images prepared in advance for image composition, print layout samples, various guidance messages (speech and sentence information), and the like. . These pieces of information are recorded in the magnetic disk 0508 of the server system 0103 and transferred to the satellite system 0110 as necessary when starting the satellite system 0110 or updating the recorded contents of the magnetic disk 0508. can do.

サテライトシステム0110の使用状況等は、通信インタフェース0907および通信回線0114を経由して、サーバシステム0103等、他システムとの間で送受信される。   The usage status of the satellite system 0110 is transmitted / received to / from other systems such as the server system 0103 via the communication interface 0907 and the communication line 0114.

次に、スタジオ0107の構成と機能について説明する。スタジオ0107は、親の指示により立ち位置を変えたり、ポーズを取ったりすることができる、ある程度の年齢以上の子供を対象としている。   Next, the configuration and function of the studio 0107 will be described. Studio 0107 is intended for children of a certain age or older who can change their standing position or pose according to their parents' instructions.

図10は、スタジオ0107を斜め上方から見た図である。スタジオ0107は、外からの覗かれることがないように、壁1005a、1005b、1005cによって3方を囲まれており、スタジオへの出入りは出入口1006によって行う。出入口1006近辺の、壁1005cには、使用中ランプ1227が設置されており、撮影中はランプが点灯し、撮影が終了するとランプが消灯するようになっている。従って、利用者はスタジオが空いているかどうかを、使用中ランプ1227の点滅によって外部から知ることができる。   FIG. 10 is a view of the studio 0107 as viewed from obliquely above. The studio 0107 is surrounded on three sides by walls 1005a, 1005b, and 1005c so that the studio 0107 is not seen from the outside. An in-use lamp 1227 is installed on the wall 1005c in the vicinity of the entrance / exit 1006. The lamp is turned on during photographing, and the lamp is turned off when photographing is completed. Therefore, the user can know from the outside whether the studio is vacant by blinking the in-use lamp 1227.

なお、図10においては、壁1005cを透かしたスタジオ内部の様子を描いているが、これは壁1005cが透明壁であることを示しているのではなく、描画上の必要によるものである。壁1005cは透明ガラス等であっても良いが、通常は不透明な壁材とすべきであろう。   In FIG. 10, the inside of the studio with the wall 1005c watermarked is drawn, but this does not indicate that the wall 1005c is a transparent wall, but is due to the necessity for drawing. The wall 1005c may be transparent glass or the like, but should normally be an opaque wall material.

スタジオ0107の内部には、一方の端部付近に、撮影用カメラ1221等を収納したカメラボックス1002と、被写体である利用者を照射する照明装置1222(正面ストロボ1001a、右ストロボ1001b、左ストロボ1001c、図10では示していない常時点灯する面光源1222a)が設置され、反対側の端部付近には、ホリゾントカーテン1004、背景機構1223が設置されている。カメラボックス1002とホリゾントカーテン1004の間の空間が撮影用空間となり、被写体である利用者(通常は子供)が撮影用空間内に入り、母親の指示に従うなどによってポーズをとり、撮影される。   Inside the studio 0107, near one end, a camera box 1002 housing a camera for shooting 1221 and the like, and an illumination device 1222 for illuminating a user who is a subject (front strobe 1001a, right strobe 1001b, left strobe 1001c). A surface light source 1222a) that is always lit not shown in FIG. 10 is installed, and a horizont curtain 1004 and a background mechanism 1223 are installed in the vicinity of the opposite end. A space between the camera box 1002 and the horizont curtain 1004 becomes a shooting space, and a user (usually a child) who is a subject enters the shooting space and takes a pose by taking instructions from the mother and taking a picture.

撮影用空間の手前には操作卓1003が置かれており、操作卓1003には、利用者(通常は母親)が、後述する撮影モードを決めたり、被写体のポーズを確認したりするためのタッチパネル式操作用モニタ1203が取り付けられている。   A console 1003 is placed in front of the shooting space, and a touch panel for the user (usually a mother) to determine a shooting mode to be described later and to confirm the pose of the subject. A formula operation monitor 1203 is attached.

また、操作卓1003には、ICカードR/W1206も取り付けられている。利用者がプレイヤーカードをICカードR/W1206に挿入することにより、スタジオ0107のスタジオシステム0111が使用可能になり、使用中ランプ1227が点灯する。   An IC card R / W 1206 is also attached to the console 1003. When the user inserts the player card into the IC card R / W 1206, the studio system 0111 of the studio 0107 becomes usable, and the in-use lamp 1227 lights up.

カメラボックス1002には、被写体を撮影(静止画撮影)するための撮影用カメラ1221と、被写体の映像をリアルタイムに撮影(動画撮影)するためのモニタ用カメラ1220が収納されている。   The camera box 1002 houses a shooting camera 1221 for shooting a subject (still image shooting) and a monitor camera 1220 for shooting a subject image in real time (moving image shooting).

モニタ用カメラ1220は、撮影用カメラ1221の近傍に設置され、撮影用カメラ1221によって撮影されるはずの画像とほぼ同一の画像を写している。   The monitor camera 1220 is installed in the vicinity of the shooting camera 1221, and captures substantially the same image as the image that should be shot by the shooting camera 1221.

モニタ用カメラ1220が映し出した映像(動画像)は、操作用モニタ1203に表示され、母親はこれを確認することで、子供が撮影画角内に納まっているかどうか確認し、また、子供に前後左右に移動したりポーズを取ったりするようにするように指示することができる。   The image (moving image) projected by the monitor camera 1220 is displayed on the operation monitor 1203, and the mother confirms this by checking whether the child is within the shooting angle of view. You can instruct them to move left and right or pose.

また、モニタ用カメラ1220が映し出した映像は、カメラボックス1002に収納された確認用モニタ1205にも表示される。目的は被写体である子供に見せて、その興味を引くためである。   In addition, the image projected by the monitor camera 1220 is also displayed on the confirmation monitor 1205 housed in the camera box 1002. The purpose is to show the child, who is the subject, and to attract interest.

撮影の背景としては、背景機構1223に設定された複数のロールカーテンのうちから気に入ったものを選択して使用することもできるし、ロールカーテンを全て巻き上げた状態で、クロマキー合成しやすい色に着色されたホリゾントカーテン1004を使用することもできる。
図11は、スタジオシステム0111の簡略化したブロック構成図である。スタジオシステム0111は、スタジオPC1200と、モニタ用カメラ1220と、撮影用カメラ1221と、操作用モニタ1203と、確認用モニタ1205を含んで構成されている。
As a background for shooting, a favorite one of a plurality of roll curtains set in the background mechanism 1223 can be selected and used, or the roll curtains are all rolled up and colored in a color that is easy to synthesize chroma keys. It is also possible to use a horizont curtain 1004 that has been made.
FIG. 11 is a simplified block diagram of the studio system 0111. As shown in FIG. The studio system 0111 includes a studio PC 1200, a monitor camera 1220, a photographing camera 1221, an operation monitor 1203, and a confirmation monitor 1205.

撮影用カメラ1221で撮影した画像は、撮影を行ったスタジオPC1200の磁気ディスク等に一時的に記録され、サーバシステム0103に転送される。以上のスタジオシステム0111の主要な機能は、スタジオPC1200が担っている。   An image photographed by the photographing camera 1221 is temporarily recorded on a magnetic disk or the like of the studio PC 1200 that has photographed, and transferred to the server system 0103. The studio PC 1200 is responsible for the main functions of the studio system 0111 described above.

図12は、スタジオシステム0111の主要な構成要素であるスタジオPC1200の構成およびそれに接続される各構成要素を示すブロック図である。スタジオシステム0111のスタジオPC1200には、前述したような各構成要素等が接続されている。スタジオPC1200は、メモリ1202に格納されたプログラムによってスタジオPC1200全体を制御するCPU1201と、各種の画像データ(例えば、後述する見本コンテンツ)などを格納する磁気ディスク1208と、モニタカメラ1220に撮影指示を与え、また撮影された画像(動画像)を入力するモニタ用カメラ制御部1231と、撮影用カメラ1221に撮影指示を与え、また撮影された画像(静止画像)を入力する撮影用カメラ制御部1232と、確認用モニタ1205に被写体の動画像等を表示させるための確認用モニタ画像出力部1235と、スピーカ1224に各種の案内メッセージの音声信号を出力する音声出力部1237と、各種の案内メッセージ(音声及び文字情報)などが記憶されているパターンメモリ1238と、各種操作時間等を計測するためのタイマ1225と、背景機構1223を制御する背景機構制御部1236と、使用中ランプ1227を制御する使用中ランプ制御部1244等を含んでいる。   FIG. 12 is a block diagram showing a configuration of a studio PC 1200 which is a main component of the studio system 0111 and each component connected thereto. The above-described components and the like are connected to the studio PC 1200 of the studio system 0111. The studio PC 1200 gives a shooting instruction to the CPU 1201 that controls the entire studio PC 1200 by a program stored in the memory 1202, a magnetic disk 1208 that stores various image data (for example, sample content described later), and the monitor camera 1220. Also, a monitor camera control unit 1231 that inputs a captured image (moving image), a shooting camera control unit 1232 that gives a shooting instruction to the shooting camera 1221 and inputs a shot image (still image) , A confirmation monitor image output unit 1235 for displaying a moving image of the subject on the confirmation monitor 1205, an audio output unit 1237 for outputting audio signals of various guidance messages to the speaker 1224, and various guidance messages (audio) And text information) And 1238, a timer 1225 for measuring various operating time or the like, a background mechanism control section 1236 for controlling the background mechanism 1223 includes such use during lamp controller 1244 for controlling the use of the lamp 1227.

スタジオシステム0111で撮影された画像情報等は、通信インタフェース1207および通信回線0114を経由して、サーバシステム0103等、他システムとの間で送受信される。   Image information and the like captured by the studio system 0111 are transmitted / received to / from other systems such as the server system 0103 via the communication interface 1207 and the communication line 0114.

以上で、各システム構成要素についての説明を終わり、以降は、本発明と直接関係するスタジオシステムの動作を説明する。   This is the end of the description of each system component, and hereinafter, the operation of the studio system directly related to the present invention will be described.

図13は、スタジオシステム0111において行われる処理の概要を示すフローチャートである。   FIG. 13 is a flowchart showing an outline of processing performed in the studio system 0111.

スタジオシステム0111のCPU1201は、起動されると、操作用モニタ1203にICカードの挿入を促す画面を表示し(S1301)、ICカードR/W1206にプレイヤーカードが挿入されるまで待つ(S1302)。   When activated, the CPU 1201 of the studio system 0111 displays a screen for prompting insertion of an IC card on the operation monitor 1203 (S1301), and waits until a player card is inserted into the IC card R / W 1206 (S1302).

ICカードR/W1206にプレイヤーカードが挿入されると、ICカードに記録された当日の使用履歴等を参照し、撮影直後にスタジオで連続して撮影しようとしている場合等には、その旨をエラー表示した後、再度ICカードの挿入を促す画面を表示する(S1303)。   When a player card is inserted into the IC card R / W 1206, refer to the usage history of the day recorded on the IC card, and if an attempt is made to continuously shoot in the studio immediately after shooting, an error will be indicated. After the display, a screen prompting insertion of the IC card is displayed again (S1303).

スタジオ使用可能であれば、CPU1201は、使用中ランプ1227を点灯させ、操作用モニタ1203に撮影コース選択画面を表示し、撮影コースの選択処理を行う(S1304)。   If the studio can be used, the CPU 1201 turns on the in-use lamp 1227, displays the shooting course selection screen on the operation monitor 1203, and performs shooting course selection processing (S1304).

図14に撮影コース選択画面の表示例を示す。撮影コース選択画面には、「ダンス撮影」、「ゲーム撮影」、「ポーズ撮影」、「フリー撮影」と表記された4つのボタンが表示される。CPU1201は、利用者がこの4つのボタンのうちのいずれかをタッチすると、操作用モニタ1203および確認用モニタ1205に、各撮影コースに対応した表示を行う(S1306)。そして、「ダンス撮影」、「ゲーム撮影」、「ポーズ撮影」については種類を選択して(S1307、S1309、S1311)、撮影処理を行い(S1308、S1310、S1312)、「フリー撮影」についてはそのまま撮影処理を行う(S1313)。   FIG. 14 shows a display example of the shooting course selection screen. On the shooting course selection screen, four buttons labeled “dance shooting”, “game shooting”, “pose shooting”, and “free shooting” are displayed. When the user touches one of the four buttons, the CPU 1201 displays a display corresponding to each shooting course on the operation monitor 1203 and the confirmation monitor 1205 (S1306). For “Dance Shooting”, “Game Shooting”, and “Pause Shooting”, the type is selected (S1307, S1309, S1311), shooting processing is performed (S1308, S1310, S1312), and “Free Shooting” is left as it is. A photographing process is performed (S1313).

なお、各コースにおけるシステムの動作は基本的には同じであるので、まず、ダンス撮影が選択された場合について説明し、その後で、他のコースにおける相違点について説明する。   Since the operation of the system in each course is basically the same, the case where dance shooting is selected will be described first, and then the differences in other courses will be described.

ダンス撮影が選択された場合、CPU1201は、モニタ1203にダンス選択画面を表示する(S1307)。またこのとき、確認用モニタ1205には、子供の興味を引くためのアニメーション画面などを表示する。   When dance shooting is selected, the CPU 1201 displays a dance selection screen on the monitor 1203 (S1307). At this time, the confirmation monitor 1205 displays an animation screen for attracting the child's interest.

図15にダンス選択画面の表示例を示す。ダンス選択画面には、「ゆったりおゆうぎコース(2〜4才)」、「たのしいおゆうぎコース(4〜6才)」、「ばっちりダンスコース(6才〜)」と表記された3つのボタンが表示される。CPU1201は、利用者がこの3つのボタンのうちのいずれかをタッチすると、操作用モニタ1203に撮影用画面を表示し、撮影処理を行う(S1308)。撮影処理は、所定時間が経過すると終了する。   FIG. 15 shows a display example of the dance selection screen. On the dance selection screen, there are three buttons labeled “Relaxing Yugi Course (2 to 4 years old)”, “Fun Enjoying Yugi Course (4 to 6 years old)” and “Exact Dance Course (6 years old and up)” Is displayed. When the user touches any of these three buttons, the CPU 1201 displays a shooting screen on the operation monitor 1203 and performs shooting processing (S1308). The photographing process ends when a predetermined time elapses.

図16に撮影用画面の表示例を示す。撮影用画面には、インストラクタが見本のダンスを踊る様子を映した見本映像(見本コンテンツ)であるスタジオモニタ映像1601と、スタジオ内の子供の様子を映したスタジオ内映像1602の両方が映し出される。   FIG. 16 shows a display example of the shooting screen. On the shooting screen, both a studio monitor video 1601 that is a sample video (sample content) showing the instructor dancing a sample dance and an in-studio video 1602 showing the child in the studio are displayed.

また、確認用モニタ1205には、スタジオモニタ映像1601と同一の映像が表示される。   The confirmation monitor 1205 displays the same video as the studio monitor video 1601.

上記したスタジオ内映像1602に映し出される映像(上記したように、同じ映像が確認用モニタ1205にも表示される)は、モニタ用カメラ1220で撮影した映像(動画像)である。   The video displayed on the in-studio video 1602 (as described above, the same video is also displayed on the confirmation monitor 1205) is a video (moving image) taken by the monitor camera 1220.

選択した見本コンテンツ(見本映像であるスタジオモニタ映像1601)は、スタジオシステムス0111のスタジオPC1200の磁気ディスク1208に、予め記録されている。カメラ指定情報は見本コンテンツごとに異なり、例えば、映像データの開始から23秒後に、「さー、ジャンプしよー、イチ、ニ、サンッ」というように、インストラクタが呼びかけ、その後インストラクタがジャンプする映像が記録されている場合、この映像が再生される時間に合わせて撮影を行う。   The selected sample content (studio monitor image 1601 as a sample image) is recorded in advance on the magnetic disk 1208 of the studio PC 1200 of the studio system 0111. The camera designation information differs depending on the sample content. For example, after 23 seconds from the start of the video data, the instructor calls, such as “Oh, jump, ichi, ni, sang”, and then the video that the instructor jumps is If it is recorded, shooting is performed in accordance with the playback time of this video.

以上説明したダンス撮影においては、撮影は自動的に行われる、すなわち、撮影処理が始まり、確認用モニタ1205にスタジオモニタ映像1601と同一の映像が表示されると、CPU1201は所定時間が経過するまで、すなわち選択された見本コンテンツの映像が終了するまで、連続的に撮影を行う。標準的には3分〜5分程度、撮影が行われる。   In the dance shooting described above, shooting is automatically performed, that is, when shooting processing starts and the same video as the studio monitor video 1601 is displayed on the confirmation monitor 1205, the CPU 1201 continues until a predetermined time elapses. That is, shooting is continuously performed until the video of the selected sample content is completed. In general, photographing is performed for about 3 to 5 minutes.

より具体的には、CPU1201は、撮影処理が始まると一定時間後(例えば3秒後)に撮影を行い、撮影終了後、ストロボ(1001a、1001b、1001c)が充電されるまで待ち、充電されると再び撮影を行う。これを撮影処理終了まで繰り返す。   More specifically, the CPU 1201 shoots after a certain time (for example, after 3 seconds) when the shooting process starts, and waits until the strobe (1001a, 1001b, 1001c) is charged after the shooting is finished. And shoot again. This is repeated until the photographing process is completed.

被写体が小さな子供であるため、近くにいる母親が立ち位置やポーズを指定しても、必ずしも指示通りにできるわけではなく、また、見本コンテンツの映像上でインストラクタがジャンプ等を指示しても、その通りに行動できるわけではない。このため、可能な限り撮影の頻度を上げて連続撮影することにより、その中にできばえの良い写真を撮る可能性を高めている。   Because the subject is a small child, even if a nearby mother specifies a standing position or pose, it is not always possible to follow the instructions, and even if the instructor instructs jumping etc. on the sample content video, You can't act that way. For this reason, the possibility of taking a well-made photograph is increased by increasing the frequency of shooting as much as possible and continuously shooting.

次に、撮影コース選択画面で「ゲーム撮影」が選択された場合の処理について、ダンス撮影の場合との相違点を中心に説明する。相違点は下記の2点である。   Next, the processing when “game shooting” is selected on the shooting course selection screen will be described focusing on differences from the case of dance shooting. The differences are the following two points.

1)「ゲーム撮影」においては、ダンス選択画面ではなく、ゲーム選択画面が表示される。利用者はダンス選択画面におけるのと同様、ゲーム選択画面に表示された子供の年齢に応じた複数のゲームの中から、被写体である子供に合ったゲームを選択することができる。   1) In “game shooting”, a game selection screen is displayed instead of a dance selection screen. As in the dance selection screen, the user can select a game suitable for the child who is the subject from a plurality of games displayed on the game selection screen according to the age of the child.

2)ゲームが選択されると、ダンス撮影と異なり、操作用モニタ1203の撮影用画面には、スタジオ内の子供の様子を映したスタジオ内映像1602のみが表示される。また、確認用モニタ1205には、インストラクタが写った映像ではなく、ゲーム映像上に、スタジオ内映像1602に写される被写体である子供の映像を合成した映像が表示される。ゲーム画像としては、図17に示すような、さまざまな色の風船が次々に上から落ちてくる映像や、画面の複数箇所にモグラが不定期にか顔を出しては引っ込めるといった映像が映し出され、「風船をたたいて!」といったナレーションが流れる。子供が手足を風船やモグラの映像と重ねると、風船が割れたり、モグラが目を回したりするので、子供は面白がってさまざまなアクションを行う。これによって、通常では撮影できない、子供の生き生きとした動きのあるポーズを撮影することができる。   2) When the game is selected, unlike the dance shooting, only the in-studio video 1602 showing the state of the child in the studio is displayed on the shooting screen of the operation monitor 1203. In addition, on the confirmation monitor 1205, not a video in which an instructor is shown, but a video in which a video of a child, which is a subject that is shot in a studio video 1602, is displayed on a game video. As game images, images of balloons of various colors falling one after another as shown in FIG. 17 and images of moles appearing irregularly or appearing at multiple locations on the screen are displayed. , "Now the balloon!" When a child puts his limbs on a balloon or a video of a mole, the balloon breaks or the mole turns his eyes, so the child is amused and performs various actions. As a result, it is possible to shoot a pose with lively movements of a child that cannot normally be taken.

次に、撮影コース選択画面で「ポーズ撮影」が選択された場合の処理について、ダンス撮影の場合との相違点を中心に説明する。相違点は下記の2点である。   Next, the processing when “pose shooting” is selected on the shooting course selection screen will be described focusing on differences from the case of dance shooting. The differences are the following two points.

1)「ポーズ撮影」においては、ダンス選択画面ではなく、ポーズ選択画面が表示される。利用者はダンス選択画面におけるのと同様、ポーズ選択画面に表示された子供の年齢に応じた複数のポーズの中から、被写体である子供に合ったポーズ見本コンテンツを選択することができる。   1) In “pose photography”, a pose selection screen is displayed instead of a dance selection screen. As in the dance selection screen, the user can select a pose sample content suitable for the child as the subject from a plurality of poses according to the age of the child displayed on the pose selection screen.

2)ポーズ撮影が選択されると、ダンス撮影と同様に、操作用モニタ1203の撮影用画面には、インストラクタが見本のポーズを取る様子を映した見本映像であるスタジオモニタ映像1601と、スタジオ内の子供の様子を映したスタジオ内映像1602の両方が表示される。確認用モニタ1205にも、操作用モニタ1203の撮影用画面と同様、インストラクタが見本のポーズを取る様子を映した見本映像であるスタジオモニタ映像1601と、スタジオ内の子供の様子を映したスタジオ内映像1602の両方が表示される。見本映像としては、インストラクタが立ったり、座ったり、寝転んだりする姿が表示され、音声メッセージ等も使用して、子供に同じポーズをとるように促す。   2) When pose shooting is selected, as with dance shooting, the shooting screen of the operation monitor 1203 includes a studio monitor video 1601 that is a sample video showing the instructor taking a sample pose, Both the in-studio video 1602 showing the child's state are displayed. Similar to the shooting screen of the operation monitor 1203, the confirmation monitor 1205 also has a studio monitor image 1601 that is a sample image showing the instructor taking a pose of the sample, and an inside of the studio that shows the child in the studio. Both images 1602 are displayed. The sample video shows the instructor standing, sitting, and lying down, and uses voice messages to encourage the child to take the same pose.

次に、撮影コース選択画面で「フリー撮影」が選択された場合の処理について、ダンス撮影の場合との相違点を中心に説明する。相違点は下記の3点である。   Next, the processing when “free shooting” is selected on the shooting course selection screen will be described focusing on differences from the case of dance shooting. Differences are the following three points.

1)「フリー撮影」においては、ダンス選択画面等の選択画面は表示されずに、撮影処理が始まる。   1) In “free shooting”, a shooting screen starts without displaying a selection screen such as a dance selection screen.

2)撮影処理においては、操作用モニタ1203の撮影用画面には、モニタ用カメラ1220で撮影した映像が表示され、映像の下部に、「シャッター」、「3連写」と表記された2つのボタンが表示される。利用者が「シャッター」ボタンを押すと、撮影用カメラ1221により撮影を行う。「3連写」の場合は、撮影用カメラ1221により3枚連続の撮影を行う。いずれのボタンを押す場合も、利用者である母親は、操作用モニタ1203等の表示を見ながら、子供がいいポーズをするように誘導する。   2) In the shooting process, a video shot by the monitor camera 1220 is displayed on the shooting screen of the operation monitor 1203, and two images labeled “shutter” and “triple shooting” are displayed below the video. A button is displayed. When the user presses the “shutter” button, the photographing camera 1221 performs photographing. In the case of “triple continuous shooting”, three continuous shootings are performed by the shooting camera 1221. Regardless of which button is pressed, the mother who is the user guides the child to make a good pose while viewing the display on the operation monitor 1203 or the like.

3)フリー撮影においては、上述したように撮影は自動的には行われず、単写または3連写ボタンを押すことで行われる。撮影処理は、開始から所定時間が経過したところで終了する。   3) In free shooting, as described above, shooting is not automatically performed, but is performed by pressing a single shooting or triple shooting button. The photographing process ends when a predetermined time has elapsed from the start.

次に、各撮影コースにおいて共通的に行われる、撮影画像が成功写真であるか失敗写真であるかを判定し、失敗写真をメモリに残さないようにするための手法について、以下に説明する。   Next, a method for determining whether a photographed image is a successful photograph or a failed photograph, and not leaving the failed photograph in the memory, which is commonly performed in each photographing course, will be described below.

まず、成功写真であるか失敗写真であるかを判定する、第1の判定手法について説明する。   First, a first determination method for determining whether the photograph is a success photograph or a failure photograph will be described.

CPU1201は、撮影が行われると、撮影用カメラ1221が撮影した撮影画像(静止画像)をメモリ1202に記録するとともに、当該撮影画像の背景から被写体のみを切り抜き、被写体部分のマスクパターン(以下、単に「マスクパターン」と記載する)を生成して、これをメモリ1202に記録する。なお、背景から被写体を切り抜く技術、つまりマスクパターンを生成する技術については、クロマキ合成等に関連する技術として広く知られているので、ここではその説明は割愛する。   When shooting is performed, the CPU 1201 records a shot image (still image) shot by the shooting camera 1221 in the memory 1202, cuts out only the subject from the background of the shot image, and simply masks the subject portion (hereinafter simply referred to as a mask pattern). (Described as “mask pattern”), and records this in the memory 1202. Note that a technique for cutting out a subject from the background, that is, a technique for generating a mask pattern, is widely known as a technique related to chromach synthesis and the like, and therefore the description thereof is omitted here.

図18は、本実施例におけるスタジオ撮影の様子を示す図であり、クロマキ合成可能な背景の前に、着飾った子供が立っている。   FIG. 18 is a diagram showing a state of studio photography in the present embodiment, and a dressed child stands in front of a background that can be combined with black and white.

図19は、図18を例として、前述したマスクパターンがどのように記録されているかを模式的に表した図である。   FIG. 19 is a diagram schematically showing how the above-described mask pattern is recorded, taking FIG. 18 as an example.

すなわち、図19の(a)は、被写体(子供)が撮影用カメラ1221に近づいた状態で撮影を行ったときのマスクパターン1901を示しており、図19の(b)は、被写体が撮影用カメラ1221から遠ざかった状態で撮影を行ったときのマスクパターン1902を示している。また、図19の(c)は、被写体が撮影用カメラ1221の撮影画角外にいる状態で撮影が行われ、マスクパターンの生成処理を行ったが被写体部分が全く得られなかった無マスクパターン1903を示している。   That is, FIG. 19A shows a mask pattern 1901 when the subject (child) is photographed in the state of approaching the photographing camera 1221, and FIG. 19B shows the subject being photographed. A mask pattern 1902 is shown when an image is taken away from the camera 1221. FIG. 19C shows an unmasked pattern in which the subject is outside the shooting angle of view of the shooting camera 1221 and the mask pattern is generated, but the subject portion is not obtained at all. 1903 is shown.

CPU1201は、無マスクパターンを含めてマスクパターンを記録した後、画像(撮影画像)全体に占めるマスクパターンの大きさの比率(以下、「被写体比率」と記載する)を求める。被写体比率は、例えば、マスクパターン部分のピクセル数を、画像全体のピクセル数で除算することにより得ることができる。   After recording the mask pattern including the non-mask pattern, the CPU 1201 obtains the ratio of the mask pattern size to the entire image (captured image) (hereinafter referred to as “subject ratio”). The subject ratio can be obtained, for example, by dividing the number of pixels in the mask pattern portion by the number of pixels in the entire image.

そして、CPU1201は、上記の被写体比率が所定の値(以下、「マスクパターン閾値」と記載する)に満たない場合には、失敗写真であるとみなして、当該撮影画像をメモリ1202から削除する。また、CPU1201は、被写体比率がマスクパターン閾値以上である場合には、成功写真であるとみなして、メモリ1202に当該撮影画像の記録を維持させる。そして、成功写真判定、失敗写真判定の何れであっても、判定後は、メモリ1202に記録したマスクパターンを削除する。   If the subject ratio is less than a predetermined value (hereinafter referred to as “mask pattern threshold”), the CPU 1201 regards the photograph as a failed photograph and deletes the captured image from the memory 1202. If the subject ratio is equal to or greater than the mask pattern threshold, the CPU 1201 regards the photograph as a successful photograph, and causes the memory 1202 to maintain recording of the photographed image. Then, in both the successful photo determination and the failed photo determination, the mask pattern recorded in the memory 1202 is deleted after the determination.

例えば、図19において、無マスクパターン1903(実質上、マスクパターン無し)の被写体比率は0である。そして、マスクパターン1901、マスクパターン1902の被写体比率がそれぞれ、0.3と0.05であるとし、マスクパターン閾値が0.2であるとすると、マスクパターン1901の被写体比率はマスクパターン閾値以上であるので、マスクパターン1901に対応する撮影画像は成功写真であり、メモリ1202の記録に残される。他方、マスクパターン1902の被写体比率はマスクパターン閾値未満であるので、マスクパターン1902に対応する撮影画像は失敗写真であり、メモリ1202の記録から削除される。また、無マスクパターン1903は、実質上マスクパターンが生成できなかったので(被写体比率0であるので)、当然ながら失敗写真であり、無マスクパターン1903に対応する撮影画像は当然ながら失敗写真であり、メモリ1202の記録から削除される。   For example, in FIG. 19, the subject ratio of the non-mask pattern 1903 (substantially no mask pattern) is zero. If the subject ratios of the mask pattern 1901 and the mask pattern 1902 are 0.3 and 0.05, respectively, and the mask pattern threshold is 0.2, the subject ratio of the mask pattern 1901 is equal to or greater than the mask pattern threshold. Therefore, the photographed image corresponding to the mask pattern 1901 is a successful photograph and is left in the memory 1202 record. On the other hand, since the subject ratio of the mask pattern 1902 is less than the mask pattern threshold, the photographed image corresponding to the mask pattern 1902 is a failed photograph and is deleted from the recording in the memory 1202. In addition, since the mask pattern 1903 could not be substantially generated (because the subject ratio is 0), the maskless pattern 1903 is naturally a failure photo, and the captured image corresponding to the maskless pattern 1903 is naturally a failure photo. , Deleted from the record in the memory 1202.

上記したマスクパターン閾値は、システムで予め一定の値に定めても良いし、撮影コースや、見本コンテンツごとに変えても良い。例えば、フリー撮影コースで手動撮影する場合には、マスクパターン閾値を高くしてもよい。逆に、ダンスコースなど子供の動きが大きく、いい写真がとりにくい場合には、マスクパターン閾値を高くすると成功写真がなくなるおそれがあるので、マスクパターン閾値を低くしても良い。さらに、見本コンテンツで、「近づいて」という呼びかけに引き続いて撮影する場合には、マスクパターン閾値を高くし、「後ろ向きに下がろう」という呼びかけに引き続いて撮影する場合には、マスクパターン閾値を低くすればよい。   The mask pattern threshold value described above may be set to a predetermined value in advance by the system, or may be changed for each shooting course or sample content. For example, when manual shooting is performed in a free shooting course, the mask pattern threshold value may be increased. On the other hand, when there is a large movement of children such as a dance course and it is difficult to take a good photo, if the mask pattern threshold value is increased, there is a possibility that the success photo may disappear, so the mask pattern threshold value may be lowered. Furthermore, if the sample content is to be shot following the call “approaching”, the mask pattern threshold is increased, and if the shot is to be shot after the call “let's go backwards”, the mask pattern threshold is set. You can lower it.

なお、成功写真と判定された撮影画像のみが、スタジオシステム0111のメモリ1202からサーバシステム0103に、成功写真と判定される毎に逐次転送されるか、あるいは、スタジオ0107での一連の撮影の完了後に一括して転送されるようになっており、この転送処理後は、メモリ1202からは撮影画像は消去される。したがって、スタジオシステム0111のメモリの有効活用のみならず、サーバシステム0103のメモリの有効活用も、同時に達成可能となっている。このことは、以下の第2〜第5の判定手法においても、同様である。   Note that only the photographed image determined to be a successful photograph is sequentially transferred from the memory 1202 of the studio system 0111 to the server system 0103 every time it is determined to be a successful photograph, or a series of photographing in the studio 0107 is completed. The images are later transferred in a lump. After this transfer process, the photographed image is erased from the memory 1202. Therefore, not only the effective use of the memory of the studio system 0111 but also the effective use of the memory of the server system 0103 can be achieved at the same time. This also applies to the following second to fifth determination methods.

次に、成功写真であるか失敗写真であるかを判定する、第2の判定手法について説明する。CPU1201は、撮影が行われると、撮影用カメラ1221が撮影した撮影画像(静止画像)をメモリ1202に記録するとともに、当該撮影画像から肌色の部分(被写体である子供の露出している肌部分)を抽出して、被写体の肌色部分のみの画像(これも、マスクパターン(肌部分マスクパターン)と言えるが、特許請求の範囲で記載の用語と統一を図るため、以下では、これを「肌画像部分」と記載する)を生成して、これをメモリ1202に記録する。   Next, a second determination method for determining whether the photograph is a success photograph or a failure photograph will be described. When photographing is performed, the CPU 1201 records a photographed image (still image) photographed by the photographing camera 1221 in the memory 1202 and, from the photographed image, a skin color part (exposed skin part of a child as a subject). The image of only the skin color part of the subject (this can also be said to be a mask pattern (skin part mask pattern), but in order to unify the terms described in the claims, this is referred to as “skin image” below. (Denoted “part”), and this is recorded in the memory 1202.

肌色の部分の抽出は、肌色のRGB値(または、CMYK(Cyan、Magenta、Yellow、blacK)値やその他の色を特定できる値)の範囲を定めておき、撮影画像から、この例えばRGB値範囲内のピクセルを抽出することによって、実現することができる。   The skin color portion is extracted by defining a range of RGB values (or CMYK (Cyan, Magenta, Yellow, blackK) values and other values that can specify other colors) of the skin color, and, for example, this RGB value range from the photographed image. This can be achieved by extracting the pixels within.

図20における2001は、図19の(a)のマスクパターン1901に対応する撮影画像についての肌画像部分である。CPU1201は、肌画像部分を記録した後、画像(撮影画像)全体に占める肌画像部分の大きさの比率(以下、「肌比率」と記載する)を求める。肌比率は、例えば、肌画像部分のピクセル数を、画像全体のピクセル数で除算することにより得ることができる。   In FIG. 20, reference numeral 2001 denotes a skin image portion of a captured image corresponding to the mask pattern 1901 in FIG. After recording the skin image portion, the CPU 1201 obtains the ratio of the size of the skin image portion in the entire image (captured image) (hereinafter referred to as “skin ratio”). The skin ratio can be obtained, for example, by dividing the number of pixels in the skin image portion by the number of pixels in the entire image.

そして、CPU1201は、上記の肌比率が所定の値(以下、「肌閾値」と記載する)に満たない場合(肌画像部分が抽出・生成されなかった場合も当然含む)には、失敗写真であるとみなして、当該撮影画像をメモリ1202から削除する。また、CPU1201は、肌比率が肌閾値以上である場合には、成功写真であるとみなして、メモリ1202に当該撮影画像の記録を維持させる。そして、成功写真判定、失敗写真判定の何れであっても、判定後は、メモリ1202に記録した肌画像部分(肌部分マスクパターン)を削除する。   When the above skin ratio is less than a predetermined value (hereinafter referred to as “skin threshold”) (including the case where the skin image portion is not extracted / generated), the CPU 1201 uses a failed photo. The captured image is deleted from the memory 1202 assuming that there is. Further, when the skin ratio is equal to or higher than the skin threshold, the CPU 1201 regards the photograph as a successful photograph and causes the memory 1202 to maintain recording of the photographed image. Then, in any of the successful photo determination and the failed photo determination, the skin image portion (skin portion mask pattern) recorded in the memory 1202 is deleted after the determination.

上記の肌閾値は、システムで予め一定の値に定めても良いし、撮影コースや、見本コンテンツごとに変えても良い。例えば、フリー撮影コースで手動撮影する場合には肌閾値を高くしてもよい。逆に、ダンスコースなど子供の動きが大きく、いい写真がとりにくい場合には、肌閾値を高くすると成功写真がなくなるおそれがあるので、肌閾値を低くしても良い。さらに、見本コンテンツで、「近づいて」という呼びかけに引き続いて撮影する場合には、肌閾値を高くし、「後ろ向きに下がろう」という呼びかけに引き続いて撮影する場合には、肌閾値を低くすればよい。   The skin threshold value may be set to a predetermined value in advance by the system, or may be changed for each shooting course or sample content. For example, the skin threshold value may be increased when manual shooting is performed in a free shooting course. On the other hand, if the movement of the child is large, such as a dance course, and it is difficult to take a good picture, the skin threshold may be lowered because there is a possibility that the success photograph disappears if the skin threshold is increased. Furthermore, in the sample content, if you want to shoot following the call to “approach”, increase the skin threshold, and if you want to shoot after the call to “go down”, lower the skin threshold. That's fine.

次に、成功写真であるか失敗写真であるかを判定する、第3の判定手法について説明する。この第3の判定手法は、前述の第1の判定手法に加えて、前述の第2の判定手法を併せて用いるものである。   Next, a third determination method for determining whether the photograph is a success photograph or a failure photograph will be described. This third determination method uses the above-described second determination method in addition to the above-described first determination method.

すなわち、CPU1201は、撮影が行われると、撮影用カメラ1221が撮影した撮影画像(静止画像)をメモリ1202に記録するとともに、当該撮影画像から被写体部分のマスクパターンと肌画像部分の抽出・生成を行って、これをメモリ1202に記録する。そして、CPU1201は、前記被写体比率が前記マスクパターン閾値以上であり、かつ、前記肌比率が前記肌閾値以上である場合にのみ成功写真とみなし、それ以外は、失敗写真とみなす。成功写真であると判定すると、メモリ1202に当該撮影画像の記録を維持させ、失敗写真と判定すると、当該撮影画像をメモリ1202から削除する。また、成功写真判定、失敗写真判定の何れであっても、判定後は、メモリ1202に記録したマスクパターンおよび肌画像部分(肌部分マスクパターン)を削除する。   That is, when shooting is performed, the CPU 1201 records a shot image (still image) shot by the shooting camera 1221 in the memory 1202 and extracts and generates a mask pattern and a skin image portion of the subject portion from the shot image. This is recorded in the memory 1202. The CPU 1201 regards it as a success photograph only when the subject ratio is equal to or greater than the mask pattern threshold and the skin ratio is equal to or greater than the skin threshold, and otherwise regards it as a failure photograph. If it is determined that the photograph is a successful photograph, the memory 1202 keeps recording of the photographed image. If it is determined that the photograph is a failed photograph, the photographed image is deleted from the memory 1202. Further, in both the successful photo determination and the failed photo determination, after the determination, the mask pattern and the skin image part (skin part mask pattern) recorded in the memory 1202 are deleted.

この第3の判定手法においても、マスクパターン閾値や肌閾値は、システムで予め一定の値に定めても良いし、撮影コースや、見本コンテンツごとに変えても良い。   Also in the third determination method, the mask pattern threshold value and the skin threshold value may be set to predetermined values in advance by the system, or may be changed for each shooting course and sample content.

次に、成功写真であるか失敗写真であるかを判定する、第4の判定手法について説明する。   Next, a fourth determination method for determining whether the photograph is a success photograph or a failure photograph will be described.

CPU1201は、撮影が行われると、撮影用カメラ1221が撮影した撮影画像(静止画像)をメモリ1202に記録するとともに、当該撮影画像から被写体部分のマスクパターンと肌画像部分の抽出・生成を行って、これをメモリ1202に記録する。そして、肌画像部分のピクセル数をマスクパターンのピクセル数で除算する(図19、図20の例では、1904の肌画像部分の面積を、1901のマスクパターンの面積で除算する)ことにより、被写体内肌比率を求めて、この被写体内肌比率が所定の値(被写体内肌閾値)以上である場合には、成功写真とみなし、それ以外は、失敗写真とみなす。成功写真であると判定すると、メモリ1202に当該撮影画像の記録を維持させ、失敗写真と判定すると、当該撮影画像をメモリ1202から削除する。また、成功写真判定、失敗写真判定の何れであっても、判定後は、メモリ1202に記録したマスクパターンおよび肌画像部分(肌部分マスクパターン)を削除する。   When shooting is performed, the CPU 1201 records a shot image (still image) shot by the shooting camera 1221 in the memory 1202 and extracts and generates a mask pattern and a skin image portion of the subject portion from the shot image. This is recorded in the memory 1202. Then, the number of pixels of the skin image part is divided by the number of pixels of the mask pattern (in the example of FIGS. 19 and 20, the area of the skin image part of 1904 is divided by the area of the mask pattern of 1901). The inner skin ratio is obtained, and when the subject inner skin ratio is equal to or higher than a predetermined value (subject inner skin threshold), it is regarded as a success photograph, and otherwise it is regarded as a failure photograph. If it is determined that the photograph is a successful photograph, the memory 1202 keeps recording of the photographed image. If it is determined that the photograph is a failed photograph, the photographed image is deleted from the memory 1202. Further, in both the successful photo determination and the failed photo determination, after the determination, the mask pattern and the skin image part (skin part mask pattern) recorded in the memory 1202 are deleted.

この第4の判定手法においても、被写体内肌閾値は、システムで予め一定の値に定めても良いし、撮影コースや、見本コンテンツごとに変えても良い。   Also in the fourth determination method, the in-subject skin threshold value may be set to a predetermined value in advance by the system, or may be changed for each shooting course or sample content.

次に、成功写真であるか失敗写真であるかを判定する、第5の判定手法について説明する。   Next, a fifth determination method for determining whether the photograph is a success photograph or a failure photograph will be described.

CPU1201は、撮影が行われると、撮影用カメラ1221が撮影した撮影画像(静止画像)をメモリ1202に記録するとともに、当該撮影画像から被写体部分のマスクパターンの抽出・生成を行って、これをメモリ1202に記録する。そして、CPU1201は、画像(撮影画像)中に予め設定した画像中心領域に占めるマスクパターンの大きさの比率(以下、「中心領域内被写体比率」と記載する)を求めて、この中心領域内被写体比率が所定の値(中心領域閾値)以上である場合には、成功写真とみなし、それ以外は、失敗写真とみなす。成功写真であると判定すると、メモリ1202に当該撮影画像の記録を維持させ、失敗写真と判定すると、当該撮影画像をメモリ1202から削除する。また、成功写真判定、失敗写真判定の何れであっても、判定後は、メモリ1202に記録したマスクパターンを削除する。   When photographing is performed, the CPU 1201 records a photographed image (still image) photographed by the photographing camera 1221 in the memory 1202 and extracts and generates a mask pattern of a subject portion from the photographed image. Record in 1202. Then, the CPU 1201 obtains a ratio of the size of the mask pattern occupying a predetermined image center area in the image (captured image) (hereinafter referred to as “subject ratio in the center area”), and the subject in the center area. If the ratio is greater than or equal to a predetermined value (center area threshold), it is considered a successful photo, otherwise it is considered a failed photo. If it is determined that the photograph is a successful photograph, the memory 1202 keeps recording of the photographed image. If it is determined that the photograph is a failed photograph, the photographed image is deleted from the memory 1202. In addition, the mask pattern recorded in the memory 1202 is deleted after the determination regardless of whether the determination is a successful photo determination or a failed photo determination.

図21は、この第5の判定手法での判定例を模式的に表しており、図21中で、2101がマスクパターンで、2102が画像中心領域である(画像中心領域を示す破線は、マスクパターン2101で一部隠れているが、ここでは例えば矩形の領域である)。中心領域内被写体比率は、例えば、画像中心領域2102中に存在するマスクパターン部分のピクセル数を、中心領域2102のピクセル数で除算することにより得ることができる。   FIG. 21 schematically shows a determination example using the fifth determination method. In FIG. 21, reference numeral 2101 denotes a mask pattern, and reference numeral 2102 denotes an image center area (a broken line indicating an image center area indicates a mask). Although it is partially hidden by the pattern 2101, it is a rectangular area here, for example). The subject ratio in the center area can be obtained by, for example, dividing the number of pixels of the mask pattern portion existing in the image center area 2102 by the number of pixels in the center area 2102.

この第5の判定手法を用いると、被写体(子供)が撮影画角の端部に片寄って写った撮影画像を、失敗写真として判定し、メモリ1202から削除することができる。   When this fifth determination method is used, a captured image in which a subject (child) is shifted toward the end of the shooting angle of view can be determined as a failed photo and deleted from the memory 1202.

この第4の判定手法においても、中心領域閾値は、システムで予め一定の値に定めても良いし、撮影コースや、見本コンテンツごとに変えても良い。   Also in the fourth determination method, the central area threshold value may be set to a constant value in advance by the system, or may be changed for each shooting course or sample content.

なお、前述した第2から第4の判定手法において用いる肌閾値は、被写体である子供の肌の露出度に応じて、より適切な値に設定することが出来る。例えば、撮影コース選択処理(S1304)において、肌閾値設定画面等を表示して、母親が当日撮影時の子供の服装に応じて、肌閾値を設定できるようにすれば良い。ただし、一般人が肌の露出割合を正しく計算できるとは限らないので、例えば、服装例と肌閾値の推奨設定値の一覧を画面に表示し、この中から選択出来るようにしてもよい。   It should be noted that the skin threshold used in the second to fourth determination methods described above can be set to a more appropriate value according to the degree of exposure of the skin of the child that is the subject. For example, in the photographing course selection process (S1304), a skin threshold setting screen or the like may be displayed so that the mother can set the skin threshold according to the clothes of the child at the time of photographing on the day. However, since it is not always possible for a general person to calculate the exposure ratio of the skin, for example, a list of examples of clothes and recommended setting values of the skin threshold value may be displayed on the screen and selected from these.

図22に一覧表示の例を示す。利用者が、各服装見本を選ぶと、対応する推奨設定値が設定される。なお、一覧表示に先立ち、男の子なのか、女の子なのか、あるいは年齢等を選択させておけば、より適切な一覧を表示することが出来る。なおまた、この例では、推奨設定値は表示していないが、推奨設定値も表示し、数値自体を微調整入力できるようにしても良い。   FIG. 22 shows an example of a list display. When the user selects each clothing sample, the corresponding recommended setting value is set. Prior to displaying the list, if a boy, a girl, age, or the like is selected, a more appropriate list can be displayed. In this example, the recommended setting value is not displayed, but the recommended setting value may also be displayed so that the numerical value itself can be finely adjusted.

本発明の一実施形態に係る自動写真館の店内構造を示す配置図である。It is a layout view showing the in-store structure of an automatic photo studio according to an embodiment of the present invention. 本発明の一実施形態に係る自動写真館のシステム構成図である。1 is a system configuration diagram of an automatic photo studio according to an embodiment of the present invention. 本発明の一実施形態に係る自動写真館における、利用者による写真館利用の流れを示すフローチャートである。It is a flowchart which shows the flow of the photo studio use by the user in the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館のカウンタを斜め上方から見た説明図である。It is explanatory drawing which looked at the counter of the automatic photo studio which concerns on one Embodiment of this invention from diagonally upward. 本発明の一実施形態に係る自動写真館のサーバシステムのブロック図である。It is a block diagram of the server system of the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館のカウンタシステムのブロック図である。It is a block diagram of the counter system of the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館のプリンタシステムのブロック図である。1 is a block diagram of a printer system for an automatic photo studio according to an embodiment of the present invention. 本発明の一実施形態に係る自動写真館のサテライトを斜め上方から見た説明図である。It is explanatory drawing which looked at the satellite of the automatic photo studio which concerns on one Embodiment of this invention from diagonally upward. 本発明の一実施形態に係る自動写真館のサテライトシステムのブロック図である。It is a block diagram of the satellite system of the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館のスタジオを斜め上方から見た説明図である。It is explanatory drawing which looked at the studio of the automatic photo studio which concerns on one Embodiment of this invention from diagonally upward. 本発明の一実施形態に係る自動写真館のスタジオシステムの簡略化したブロック構成図である。1 is a simplified block diagram of a studio system for an automatic photo studio according to an embodiment of the present invention. 本発明の一実施形態に係る自動写真館における、スタジオシステムの主要な構成要素であるスタジオPCの構成およびスタジオPCに接続される各構成要素を示すブロック図である。1 is a block diagram showing a configuration of a studio PC, which is a main component of a studio system, and each component connected to the studio PC in an automatic photo studio according to an embodiment of the present invention. FIG. 本発明の一実施形態に係る自動写真館における、スタジオシステムでの処理の概要を示すフローチャートである。It is a flowchart which shows the outline | summary of the process in a studio system in the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館の表示画面の例を示す説明図である。It is explanatory drawing which shows the example of the display screen of the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館の表示画面の例を示す説明図である。It is explanatory drawing which shows the example of the display screen of the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館の表示画面の例を示す説明図である。It is explanatory drawing which shows the example of the display screen of the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館の表示画面の例を示す説明図である。It is explanatory drawing which shows the example of the display screen of the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館における、スタジオでの撮影の様子を示す説明図である。It is explanatory drawing which shows the mode of imaging | photography in a studio in the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館における、成功写真であるか失敗写真であるかを判定する第1の判定手法の説明図である。It is explanatory drawing of the 1st determination method which determines whether it is a success photograph or a failure photograph in the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館における、成功写真であるか失敗写真であるかを判定する第2の判定手法の説明図である。It is explanatory drawing of the 2nd determination method which determines whether it is a success photograph or a failure photograph in the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館における、成功写真であるか失敗写真であるかを判定する第5の判定手法の説明図である。It is explanatory drawing of the 5th determination method which determines whether it is a success photograph or a failure photograph in the automatic photo studio which concerns on one Embodiment of this invention. 本発明の一実施形態に係る自動写真館の表示画面の例を示す説明図である。It is explanatory drawing which shows the example of the display screen of the automatic photo studio which concerns on one Embodiment of this invention.

符号の説明Explanation of symbols

0101 自動写真館
0102 カウンタ
0103 サーバシステム
0104 カウンタシステム
0105 プリンタシステム
0106 サテライト
0107 スタジオ
0110 サテライトシステム
0111 スタジオシステム
0114 通信回線
0500 (サーバシステムの)PC本体
0501 (サーバシステムの)CPU
0502 (サーバシステムの)メモリ
0503 (サーバシステムの)モニタ
0504 (サーバシステムの)キーボード
0505 (サーバシステムの)画像出力部
0506 (サーバシステムの)ICカードR/W
0507 (サーバシステムの)通信インタフェース
0508 (サーバシステムの)磁気ディスク
0600 (カウンタシステムの)PC本体
0601 (カウンタシステムの)CPU
0602 (カウンタシステムの)メモリ
0603 (カウンタシステムの)モニタ
0605 (カウンタシステムの)画像出力部
0606a (カウンタシステムの)ICカードR/W
0606b (カウンタシステムの)ICカードR/W
0607 (カウンタシステムの)通信インタフェース
0608 (カウンタシステムの)磁気ディスク
0700 (プリンタシステムの)PC本体
0701 (プリンタシステムの)CPU
0702 (プリンタシステムの)メモリ
0703 (プリンタシステムの)モニタ
0705 (プリンタシステムの)画像出力部
0706 (プリンタシステムの)ICカードR/W
0707 (プリンタシステムの)通信インタフェース
0708 (プリンタシステムの)磁気ディスク
0709 (プリンタシステムの)プリンタ制御部
0710a (プリンタシステムの)プリンタ
0710b (プリンタシステムの)プリンタ
0710c (プリンタシステムの)プリンタ
0801 サテライトテーブル
0802 サテライトテーブルの上面
0803 サテライトテーブルの支柱
0900 (サテライトシステムの)PC本体
0901 (サテライトシステムの)CPU
0902 (サテライトシステムの)メモリ
0903 (サテライトシステムの)モニタ
0904 (サテライトシステムの)タッチペン
0905 (サテライトシステムの)画像出力部
0906 (サテライトシステムの)ICカードR/W
0907 (サテライトシステムの)通信インタフェース
0908 (サテライトシステムの)磁気ディスク
1001a 正面ストロボ
1001b 右ストロボ
1001c 左ストロボ
1002 カメラボックス
1003 操作卓
1004 ホリゾントカーテン
1005a スタジオ後方の外壁
1005b スタジオ側面の内壁
1005c スタジオ前方の内壁
1006 出入口
1200 スタジオPC
1201 (スタジオPCの)CPU
1202 (スタジオPCの)メモリ
1203 (スタジオシステムの)操作用モニタ
1205 (スタジオシステムの)確認用モニタ
1206 (スタジオシステムの)ICカードR/W
1207 (スタジオPCの)通信インタフェース
1208 (スタジオPCの)磁気ディスク
1220 (スタジオシステムの)モニタ用カメラ
1221 (スタジオシステムの)撮影用カメラ
1222 (スタジオシステムの)照明装置
1223 (スタジオシステムの)背景機構
1224 (スタジオシステムの)スピーカ
1225 (スタジオPCの)タイマ
1227 (スタジオシステムの)使用中ランプ
1231 (スタジオPC)モニタ用カメラ制御部
1232 (スタジオPCの)撮影用カメラ制御部
1233 (スタジオPCの)照明制御部
1234 (スタジオPCの)操作用モニタ制御部
1235 (スタジオPCの)確認用モニタ画像出力部
1236 (スタジオPCの)背景機構制御部
1237 (スタジオPCの)音声出力部
1238 (スタジオPCの)パターンメモリ
1244 (スタジオPCの)使用中ランプ制御部
0101 Automatic photo studio 0102 Counter 0103 Server system 0104 Counter system 0105 Printer system 0106 Satellite 0107 Studio 0110 Satellite system 0111 Studio system 0114 Communication line 0500 PC body of server system 0501 CPU of server system
0502 Memory (server system) 0503 (Server system) Monitor 0504 (Server system) Keyboard 0505 (Server system) Image output unit 0506 (Server system) IC card R / W
0507 Communication interface (server system) 0508 (server system) magnetic disk 0600 (counter system) PC main body 0601 (counter system) CPU
0602 Memory (for counter system) 0603 Monitor (for counter system) 0605 Image output unit (for counter system) 0606a IC card R / W (for counter system)
0606b (Counter system) IC card R / W
0607 Communication interface (counter system) 0608 Magnetic disk (counter system) 0700 PC body (printer system) 0701 CPU (printer system)
0702 Memory (printer system) 0703 (Printer system) Monitor 0705 (Printer system) Image output unit 0706 (Printer system) IC card R / W
0707 Communication interface of the printer system 0708 Magnetic disk of the printer system 0709 Printer control unit of the printer system 0710a Printer of the printer system 0710b Printer of the printer system 0710c Printer of the printer system 0801 Satellite table 0802 Satellite table top surface 0803 Satellite table support 0900 (satellite system) PC body 0901 (satellite system) CPU
0902 Memory (Satellite System) 0903 (Satellite System) Monitor 0904 (Satellite System) Touch Pen 0905 (Satellite System) Image Output Unit 0906 (Satellite System) IC Card R / W
0907 Communication interface (for satellite system) 0908 Magnetic disk (for satellite system) 1001a Front strobe 1001b Right strobe 1001c Left strobe 1002 Camera box 1003 Console 1004 Horizont curtain 1005a Outer wall at the back of studio 1005b Inner wall at the side of studio 1005c Inner wall at the front of studio 1006 Entrance 1200 Studio PC
1201 CPU (Studio PC)
1202 Memory (Studio PC) 1203 (Studio System) Operation Monitor 1205 (Studio System) Confirmation Monitor 1206 (Studio System) IC Card R / W
1207 (Studio PC) Communication Interface 1208 (Studio PC) Magnetic Disk 1220 (Studio System) Monitor Camera 1221 (Studio System) Shooting Camera 1222 (Studio System) Lighting Device 1223 (Studio System) Background Mechanism 1224 (Studio System) Speaker 1225 (Studio PC) Timer 1227 (Studio System) In Use Lamp 1231 (Studio PC) Monitor Camera Control Unit 1232 (Studio PC) Shooting Camera Control Unit 1233 (Studio PC) Illumination control unit 1234 (Studio PC) operation monitor control unit 1235 (Studio PC) confirmation monitor image output unit 1236 (Studio PC) background mechanism control unit 1237 (Studio PC) audio output Part 1238 (Studio PC) Pattern memory 1244 (Studio PC) In-use lamp control part

Claims (1)

被写体を静止画撮影する撮影用カメラと、
前記撮影用カメラで撮影された撮影画像を記憶するためのメモリ手段と、
前記撮影用カメラで撮影されて前記メモリ手段に一旦記憶された個々の撮影画像が、成功写真であるか失敗写真であるかを判定して、失敗写真である場合には当該撮影画像を前記メモリ手段から消去させる成功写真判定・画像消去制御手段とを、備え、
前記成功写真判定・画像消去制御手段は、撮影画像から被写体の肌色部分を抽出して肌画像部分を生成する処理を行い、前記肌画像部分が生成できなかった場合、および、生成した前記肌画像部分の画像全体に対して占める比率が所定の閾値未満である場合には、失敗写真と判定する自動写真館において、
利用者による被写体である撮影対象者の肌露出度の指定に応じて、前記閾値を決定する手段を備えることを特徴とする自動写真館。
A camera for taking still images of the subject,
Memory means for storing a photographed image photographed by the photographing camera;
It is determined whether each photographed image photographed by the photographing camera and temporarily stored in the memory means is a success photograph or a failure photograph. If the photographed photograph is a failure photograph, the photographed image is stored in the memory. A successful photo determination / image erasure control means for erasing from the means,
The successful photograph determination / image erasure control means performs a process of generating a skin image portion by extracting a skin color portion of a subject from a captured image, and when the skin image portion cannot be generated, and the generated skin image If the proportion of the entire image of the part is less than a predetermined threshold,
An automatic photo studio comprising means for determining the threshold value in accordance with a user's specification of a skin exposure level of a subject to be photographed.
JP2006237939A 2006-09-01 2006-09-01 Automatic photo studio Expired - Fee Related JP4720685B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006237939A JP4720685B2 (en) 2006-09-01 2006-09-01 Automatic photo studio

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006237939A JP4720685B2 (en) 2006-09-01 2006-09-01 Automatic photo studio

Publications (2)

Publication Number Publication Date
JP2008061107A JP2008061107A (en) 2008-03-13
JP4720685B2 true JP4720685B2 (en) 2011-07-13

Family

ID=39243325

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006237939A Expired - Fee Related JP4720685B2 (en) 2006-09-01 2006-09-01 Automatic photo studio

Country Status (1)

Country Link
JP (1) JP4720685B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012153823A1 (en) * 2011-05-11 2012-11-15 シャープ株式会社 Imaging device, imaging control method, imaging control program, and computer-readable recording medium
WO2013042766A1 (en) 2011-09-22 2013-03-28 オリンパス株式会社 Image processing device, image processing system, and image readout device
JP6027745B2 (en) * 2012-01-10 2016-11-16 オリンパス株式会社 Image processing device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11146405A (en) * 1992-01-13 1999-05-28 Mitsubishi Electric Corp Video signal processor and color video camera using the same
JP2004349959A (en) * 2003-02-03 2004-12-09 Omron Corp Photographing equipment, print sheet, control method for photographing equipment, control program for photographing equipment, and computer readable recording medium having the control program recorded therein
JP2005020196A (en) * 2003-06-24 2005-01-20 Casio Comput Co Ltd Image photographing apparatus and image arrangement apparatus
JP2005221550A (en) * 2004-02-03 2005-08-18 Konica Minolta Photo Imaging Inc Face photographic apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11146405A (en) * 1992-01-13 1999-05-28 Mitsubishi Electric Corp Video signal processor and color video camera using the same
JP2004349959A (en) * 2003-02-03 2004-12-09 Omron Corp Photographing equipment, print sheet, control method for photographing equipment, control program for photographing equipment, and computer readable recording medium having the control program recorded therein
JP2005020196A (en) * 2003-06-24 2005-01-20 Casio Comput Co Ltd Image photographing apparatus and image arrangement apparatus
JP2005221550A (en) * 2004-02-03 2005-08-18 Konica Minolta Photo Imaging Inc Face photographic apparatus

Also Published As

Publication number Publication date
JP2008061107A (en) 2008-03-13

Similar Documents

Publication Publication Date Title
JP2004062839A (en) Photographic printer, printing paper unit, method, program for controlling photographic printer and computer readable recording medium in which the same is recorded
US7668446B2 (en) Automatic photo studio
JP5802911B2 (en) Photo game machine
JP7011206B2 (en) Amusement photography equipment, image processing equipment, and image processing methods
JP2004349959A (en) Photographing equipment, print sheet, control method for photographing equipment, control program for photographing equipment, and computer readable recording medium having the control program recorded therein
JP2008278123A (en) Photographic sticker creation device, method, and program
JP4720686B2 (en) Automatic photo studio
JP2008061092A (en) Automatic photographing device
JP4720685B2 (en) Automatic photo studio
JP2008061094A (en) Automatic photo studio
JP2007042078A (en) Automatic photography studio
JP5334073B2 (en) Photo shooting device
JP2004357018A (en) Photograph vending machine and photograph providing method in photograph vending machine
JP4720684B2 (en) Automatic photo studio
JP5500359B2 (en) Photo sticker creation apparatus, photo sticker creation method, and program
JP6703243B2 (en) Photo sticker creation device and light emission control method
JP4301961B2 (en) Photo vending machine control method, photo vending machine, and photo vending machine control program
JP2005181843A (en) Photograph vending machine and control method and control program therefor
JP2008046491A (en) Photographic sticker forming device, control method for photographic sticker forming device and control program for photographic sticker forming device
JP2018023056A (en) Photograph making game machine and display control method
JP2020187250A (en) Photograph creation game machine, game providing method, and program
JP2014215398A (en) Phot-taking game device, photo-taking game device control method and photo-taking game device control program
JP2008058791A (en) Automatic photographing apparatus
JP2006145790A (en) Automatic photographing device
JP2022061920A (en) Photographing device, image forming method, image forming program, and photographing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090601

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20090601

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110124

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110308

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110321

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140415

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4720685

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140415

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees