JP2016004519A - Play system and play method, and program - Google Patents

Play system and play method, and program Download PDF

Info

Publication number
JP2016004519A
JP2016004519A JP2014126103A JP2014126103A JP2016004519A JP 2016004519 A JP2016004519 A JP 2016004519A JP 2014126103 A JP2014126103 A JP 2014126103A JP 2014126103 A JP2014126103 A JP 2014126103A JP 2016004519 A JP2016004519 A JP 2016004519A
Authority
JP
Japan
Prior art keywords
image
player
effect
goods
character
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014126103A
Other languages
Japanese (ja)
Other versions
JP6396694B2 (en
Inventor
高 青山
Takashi Aoyama
高 青山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bandai Co Ltd
Original Assignee
Bandai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bandai Co Ltd filed Critical Bandai Co Ltd
Priority to JP2014126103A priority Critical patent/JP6396694B2/en
Publication of JP2016004519A publication Critical patent/JP2016004519A/en
Application granted granted Critical
Publication of JP6396694B2 publication Critical patent/JP6396694B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a play system and play method, and program capable of executing "an impersonation game" with high taste.SOLUTION: A play system 1 includes: an imaging section 13 for capturing an image of a player P to acquire a player image; a storage section 15 that stores performance data including performance images for causing the player P to impersonate a performance character; a display section 14 for displaying an image; and a control section 18. The control section 18 recognizes a player's motion on the basis of the player image and, when detecting the player's motion matching a prescribed motion, executes performance processing based on the performance data. The performance processing includes: synthesis processing for synthesizing the performance image on the player image and displaying it on the display section 14; and follow-up processing causing an image formed by the synthesis processing to follow the player's motion and displaying it on the display section 14.

Description

本発明は、例えば演出キャラクタへの変身など、表示画面上で「なりきり遊び」を行うための遊戯システム及び遊戯方法並びにプログラムに関する。   The present invention relates to a game system, a game method, and a program for performing “successful play” on a display screen, such as transformation into a production character.

試着を行う人をカメラで撮影し、撮影された画像に写る試着者の体に試着対象の衣服の画像を合成して表示させ、試着者が実際に試着対象の衣服を着用しなくとも、試着対象の衣服を試着した場合の試着画像を見ることができる仮想試着装置が知られている(特許文献1参照)。この仮想試着装置では、試着者がカメラの前で動くと、試着者の動きに応じた試着対象の衣服の動きが計算され、試着者は、試着対象の衣服を着用した状態で同じ動きをする試着者の画像を見ることができるようになっている。   The person trying on is photographed with the camera, and the image of the clothing to be tried on is synthesized and displayed on the body of the dressed person appearing in the photographed image, so that the try-on does not actually wear the clothing to be tried on. There is known a virtual try-on device capable of seeing a try-on image when a target garment is tried on (see Patent Document 1). In this virtual try-on device, when the try-on moves in front of the camera, the movement of the clothing to be tried on according to the movement of the try-on is calculated, and the try-on moves in the same state as wearing the clothing to be tried on. You can see the image of the try-on.

特開2006−249618号公報JP 2006-249618 A

特許文献1に記載された仮想試着装置では、試着対象の衣服を試着者が直接選択するだけであり、また、試着画像を表示する時に何の演出もなく、面白みに欠けていた。   In the virtual try-on device described in Patent Literature 1, the try-on directly selects the clothes to be try-on, and there is no effect when displaying the try-on image and lacks interest.

本発明は、上述した事情に鑑みなされたものであり、興趣性が高い「なりきり遊び」を行うことができる遊戯システム及び遊戯方法並びにプログラムを提供することを目的としている。   The present invention has been made in view of the above-described circumstances, and an object of the present invention is to provide a game system, a game method, and a program capable of performing “successful play” with high interest.

本発明に係る遊戯システムは、プレーヤを撮像し、プレーヤ画像を取得する撮像部と、プレーヤを演出キャラクタになりきらせる演出画像を含む演出データを記憶した記憶部と、画像を表示する表示部と、制御部と、を備え、前記制御部は、前記プレーヤ画像に基づいてプレーヤ動作を認識し、所定動作に一致するプレーヤ動作を検出した場合に前記演出データに基づいて演出処理を実行し、前記演出処理は、前記プレーヤ画像に前記演出画像を合成して前記表示部に表示させる合成処理と、合成処理によって生成される画像を前記プレーヤ動作に追従させて前記表示部に表示させる追従処理とを含むことを特徴としている。   The game system according to the present invention includes an imaging unit that captures an image of a player and acquires the player image, a storage unit that stores effect data including an effect image that makes the player become an effect character, and a display unit that displays an image. A control unit that recognizes a player motion based on the player image, and executes a rendering process based on the rendering data when a player motion matching a predetermined motion is detected, The effect process includes a composition process in which the effect image is combined with the player image and displayed on the display unit, and a follow-up process in which an image generated by the composition process is made to follow the player operation and displayed on the display unit. It is characterized by including.

本発明に係る遊戯システムにおいては、プレーヤが所持する前記演出キャラクタのグッズの識別情報を取得する取得部をさらに備え、前記演出データは、前記グッズ毎に設けられ且つ前記グッズの識別情報に関連付けて前記記憶部に記憶されたグッズ関連演出データを含み、前記制御部は、前記取得部によって取得された前記識別情報に対応する前記グッズ関連演出データに基づいて前記演出処理を実行してもよい。   The game system according to the present invention further includes an acquisition unit that acquires the identification information of the goods of the effect character possessed by the player, wherein the effect data is provided for each of the goods and is associated with the identification information of the goods. The goods related effect data memorize | stored in the said memory | storage part may be included, and the said control part may perform the said effect process based on the said goods related effect data corresponding to the said identification information acquired by the said acquisition part.

本発明に係る遊戯システムにおいては、前記所定動作は、前記グッズ毎に定められており、前記制御部は、前記取得部によって取得された前記識別情報に対応する前記所定動作に一致するプレーヤ動作を検出した場合に前記演出処理を実行するようにしてもよい。   In the game system according to the present invention, the predetermined operation is determined for each of the goods, and the control unit performs a player operation that matches the predetermined operation corresponding to the identification information acquired by the acquisition unit. The effect processing may be executed when detected.

本発明に係る遊戯システムにおいては、前記グッズは玩具であって、前記識別情報は前記グッズの操作に伴い前記グッズから発せられる音声であり、前記取得部は、前記音声を検出するマイクロフォンであってもよい。   In the game system according to the present invention, the goods is a toy, the identification information is a sound emitted from the goods in accordance with the operation of the goods, and the acquisition unit is a microphone that detects the sound. Also good.

本発明に係る遊戯システムにおいては、前記演出画像は、前記演出キャラクタのキャラクタ画像を含み、前記合成処理は、前記プレーヤ画像を前記キャラクタ画像に変化させる処理を含み、当該キャラクタ画像を用いる前記追従処理において前記プレーヤ動作に追従させて表示させる画像とするものであってもよい。   In the game system according to the present invention, the effect image includes a character image of the effect character, and the combining process includes a process of changing the player image to the character image, and the follow-up process using the character image The image may be displayed in accordance with the player operation.

本発明に係る遊戯システムにおいては、前記演出画像は、前記演出キャラクタのコスチューム画像を含み、前記合成処理は、前記プレーヤ画像に前記コスチューム画像を重ねる処理を含んでもよい。   In the game system according to the present invention, the effect image may include a costume image of the effect character, and the composition process may include a process of superimposing the costume image on the player image.

本発明に係る遊戯システムにおいては、前記演出画像は、特殊効果画像を含み、前記合成処理は、前記プレーヤ画像に前記特殊効果画像を付加する処理を含んでもよい。   In the game system according to the present invention, the effect image may include a special effect image, and the combining process may include a process of adding the special effect image to the player image.

本発明に係る遊戯方法は、プレーヤを撮像してプレーヤ画像を取得する撮像ステップと、前記プレーヤ画像に基づいてプレーヤ動作を認識し、所定動作に一致するプレーヤ動作を検出した場合に、プレーヤを演出キャラクタになりきらせる演出画像を含む演出データに基づいて演出処理を実行する演出ステップと、を備え、前記演出処理は、前記プレーヤ画像に前記演出画像を合成して表示させる合成処理と、合成処理によって生成される画像を前記プレーヤ動作に追従させて表示させる追従処理とを含むことを特徴としている。   The game method according to the present invention provides an imaging step of capturing a player to acquire a player image, and recognizing a player operation based on the player image and detecting a player operation that matches a predetermined operation. An effect step of executing effect processing based on effect data including an effect image that makes the character look like a character, and the effect processing includes combining processing for combining and displaying the effect image on the player image, and combining processing And a follow-up process for displaying the image generated in accordance with the player action.

本発明に係る遊戯方法においては、前記演出データは、前記演出キャラクタのグッズ毎に設けられたグッズ関連演出データを含むものであり、プレーヤが所持する前記演出キャラクタのグッズの識別情報を取得する取得ステップをさらに備え、前記演出ステップは、前記取得ステップで取得された前記識別情報に対応する前記グッズ関連演出データに基づいて前記演出処理を実行してもよい。   In the game method according to the present invention, the effect data includes goods-related effect data provided for each of the effect character's goods, and obtains the identification information of the effect character goods possessed by the player. The production step may further include performing a production process based on the goods related production data corresponding to the identification information acquired in the acquisition step.

本発明に係る遊戯方法においては、前記所定動作は、前記グッズ毎に定められており、前記演出ステップは、前記取得ステップで取得された前記識別情報に対応する前記所定動作に一致するプレーヤ動作を検出した場合に前記演出処理を実行してもよい。   In the game method according to the present invention, the predetermined action is determined for each of the goods, and the rendering step includes a player action that matches the predetermined action corresponding to the identification information acquired in the acquisition step. The effect processing may be executed when detected.

本発明に係る遊戯方法においては、前記グッズは玩具であって、前記識別情報は前記グッズの操作に伴い前記グッズから発せられる音声であってもよい。   In the game method according to the present invention, the goods may be toys, and the identification information may be a sound emitted from the goods when the goods are operated.

本発明に係る遊戯方法においては、前記演出画像は、前記演出キャラクタのキャラクタ画像を含み、前記合成処理は、前記プレーヤ画像を前記キャラクタ画像に変化させる処理を含んでもよい。   In the game method according to the present invention, the effect image may include a character image of the effect character, and the combining process may include a process of changing the player image to the character image.

本発明に係る遊戯方法においては、前記演出画像は、前記演出キャラクタのコスチューム画像を含み、前記合成処理は、前記プレーヤ画像に前記コスチューム画像を重ねる処理を含んでもよい。   In the game method according to the present invention, the effect image may include a costume image of the effect character, and the composition process may include a process of superimposing the costume image on the player image.

本発明に係る遊戯方法においては、前記演出画像は、特殊効果画像を含み、前記合成処理は、前記プレーヤ画像に前記特殊効果画像を付加する処理を含んでもよい。   In the game method according to the present invention, the effect image may include a special effect image, and the combining process may include a process of adding the special effect image to the player image.

本発明に係るプログラムは、上記遊戯方法の各ステップをコンピュータに実行させることを特徴としている。   The program according to the present invention is characterized by causing a computer to execute each step of the above playing method.

本発明によれば、興趣性が高い「なりきり遊び」を行うことができる遊戯システム及び遊戯方法並びにプログラムを提供することができる。   According to the present invention, it is possible to provide a game system, a game method, and a program that are capable of performing “successful play” with high interest.

本発明の実施形態を説明するための、遊戯システムの一例の構成を示す図である。It is a figure which shows the structure of an example of the game system for describing embodiment of this invention. 図1の遊戯システムのハードウェア構成を示す機能ブロック図である。It is a functional block diagram which shows the hardware constitutions of the game system of FIG. 図1の遊戯システムによって提供される遊戯方法の一例のフロー図である。It is a flowchart of an example of the game method provided by the game system of FIG. 図3の遊戯方法における演出処理の一例のフロー図である。It is a flowchart of an example of the effect process in the game method of FIG. 図4の演出処理における画像表示の変遷の一例を示す図である。It is a figure which shows an example of the transition of the image display in the effect process of FIG. 図4の演出処理における画像表示の変遷の一例を示す図である。It is a figure which shows an example of the transition of the image display in the effect process of FIG. 図4の演出処理の変形例のフロー図である。It is a flowchart of the modification of the effect process of FIG. 図7の演出処理における画像表示の変遷の一例を示す図である。It is a figure which shows an example of the transition of the image display in the effect process of FIG. 図4の演出処理の他の変形例のフロー図である。It is a flowchart of the other modification of the effect process of FIG. 図9の演出処理における画像表示の変遷の一例を示す図である。It is a figure which shows an example of the transition of the image display in the effect process of FIG. 本発明の実施形態を説明するための、遊戯システムの他の例の構成を示す図である。It is a figure which shows the structure of the other example of the game system for describing embodiment of this invention. 図11の遊戯システムを用いた遊戯方法の一例のフロー図である。It is a flowchart of an example of the game method using the game system of FIG.

図1は、本発明の実施形態を説明するための、遊戯システムの一例の構成を示し、図2は図1の遊戯システムのハードウェア構成を示す。   FIG. 1 shows an example of a configuration of a game system for explaining an embodiment of the present invention, and FIG. 2 shows a hardware configuration of the game system of FIG.

図1に示す遊戯システム1は、プレーヤPを撮像し、撮像によって得られたプレーヤ画像と演出画像とを合成して画像表示し、また演出音声を出力して、演出キャラクタになりきらせる「なりきり遊び」をプレーヤPに提供するものである。図示の例では、撮像及び画像表示並びに音声出力にスマートフォン2が用いられ、スマートフォン2で所定のアプリケーションプログラムを実行させることにより遊戯システム1が構成される。なお、本願明細書でいう「合成して画像表示」には、プレーヤ画像と演出画像の一部が重なって画像表示される場合は勿論、プレーヤ画像と演出画像が重なってプレーヤ画像全体が演出画像によって隠される場合(つまり、プレーヤが視認できる画像としては演出画像だけが表示されている場合)も含んでいる。   The game system 1 shown in FIG. 1 takes an image of the player P, combines the player image obtained by the imaging with the effect image, displays the image, and outputs an effect sound to make it become an effect character. "Play" is provided to the player P. In the illustrated example, the smartphone 2 is used for imaging, image display, and audio output, and the game system 1 is configured by causing the smartphone 2 to execute a predetermined application program. In the “synthesized image display” in the specification of the present application, the player image and the effect image overlap each other and, of course, the player image and the effect image overlap to display the entire player image. (That is, only the effect image is displayed as an image that can be visually recognized by the player).

スマートフォン2は、主たる構成要素として、操作部10と、無線通信部11と、音声入出力部12と、撮像部13と、表示部14と、記憶部15と、外部入出力部16と、電源部17と、制御部18とを備える。   The smartphone 2 includes, as main components, an operation unit 10, a wireless communication unit 11, a voice input / output unit 12, an imaging unit 13, a display unit 14, a storage unit 15, an external input / output unit 16, and a power source. A unit 17 and a control unit 18 are provided.

操作部10は、キースイッチ20を有し、例えばスマートフォン2の電源のON/OFF操作などのキースイッチ20に対するユーザ操作を受け付ける。   The operation unit 10 includes a key switch 20 and accepts a user operation on the key switch 20 such as an ON / OFF operation of the smartphone 2.

無線通信部11は、移動通信網の基地局装置に対して無線通信を行う。無線通信部11は、無線通信を使用して、電話の音声データや電子メールデータやWebデータなどの各種データの送受信を行い、また、アプリケーションプログラムのダウンロードを行う。   The wireless communication unit 11 performs wireless communication with a base station device of a mobile communication network. The wireless communication unit 11 transmits and receives various kinds of data such as telephone voice data, e-mail data, and Web data, and downloads application programs using wireless communication.

音声入出力部12は、マイクロフォン21及びスピーカ22を有する。音声入出力部12は、マイクロフォン21を通じて入力された音声を無線通信部11にて処理可能な音声データに変換し、無線通信部11によって受信された音声データなどをスピーカ22から出力する。   The voice input / output unit 12 includes a microphone 21 and a speaker 22. The voice input / output unit 12 converts voice input through the microphone 21 into voice data that can be processed by the wireless communication unit 11, and outputs the voice data received by the wireless communication unit 11 from the speaker 22.

撮像部13は、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサやCCD(Charge-Coupled Device)イメージセンサなどの撮像素子を有し、撮像素子で撮像した画像の画像データを生成する。   The imaging unit 13 includes an imaging element such as a CMOS (Complementary Metal Oxide Semiconductor) image sensor or a CCD (Charge-Coupled Device) image sensor, and generates image data of an image captured by the imaging element.

表示部14は、図示の例では、表示パネル23及びタッチパネル24を有する、いわゆるタッチパネルモニタである。表示部14は、画像や文字などを表示パネル23に表示して情報を視覚的にユーザに提示し、また、提示した情報に対して表示画面になされるユーザ操作をタッチパネル24によって検出する。   In the illustrated example, the display unit 14 is a so-called touch panel monitor having a display panel 23 and a touch panel 24. The display unit 14 displays images, characters, and the like on the display panel 23 to visually present information to the user, and the touch panel 24 detects user operations performed on the display screen for the presented information.

記憶部15は、RAM(Random Access Memory)やROM(Read Only Memory)やフラッシュメモリなどの記憶媒体を有し、制御部18の制御プログラムやアプリケーションプログラムなどのソフトウェアを記憶し、また電子メールデータやWebデータや画像データなどの各種データを記憶する。   The storage unit 15 includes a storage medium such as a RAM (Random Access Memory), a ROM (Read Only Memory), and a flash memory, stores software such as a control program and application program of the control unit 18, and also stores e-mail data, Various data such as Web data and image data are stored.

外部入出力部16は、スマートフォン2に有線/無線接続される外部機器とのインターフェースの役割を果たす。   The external input / output unit 16 serves as an interface with an external device wired / wirelessly connected to the smartphone 2.

電源部17は、図示しないバッテリに蓄えられている電力をスマートフォン2の各部に供給する。   The power supply unit 17 supplies power stored in a battery (not shown) to each unit of the smartphone 2.

制御部18は、マイクロプロセッサを主体として構成され、記憶部15に記憶されている制御プログラムにしたがって動作し、スマートフォン2の各部を統括制御する。そして、制御部18は、記憶部15に記憶されたアプリケーションプログラムにしたがって動作するアプリケーション処理機能を有する。このアプリケーション処理機能によって、例えば電子メールの送受信やWebページの閲覧や画像の管理など、電話以外の付加的な機能が実現される。   The control unit 18 is configured mainly with a microprocessor, operates according to a control program stored in the storage unit 15, and controls each unit of the smartphone 2. The control unit 18 has an application processing function that operates according to the application program stored in the storage unit 15. With this application processing function, additional functions other than the telephone, such as e-mail transmission / reception, Web page browsing, and image management, are realized.

本遊戯システム1によって提供される「なりきり遊び」もまた、上記アプリケーション処理機能によって実現される。「なりきり遊び」のアプリケーションプログラムやプログラムの実行に用いられる演出画像及び演出音声を含む演出データが記憶部15に記憶され、このプログラムにしたがって動作する制御部18は、撮像部13及び表示部14並びに音声入出力部12といったスマートフォン2のハードウェアリソースを使用して「なりきり遊び」を実現する。   “Narikiri play” provided by the present game system 1 is also realized by the application processing function. Effect data including an effect image and effect sound used for executing the application program of “Narikiri play” and the program is stored in the storage unit 15, and the control unit 18 operating according to this program includes the imaging unit 13, the display unit 14, and Using the hardware resources of the smartphone 2 such as the voice input / output unit 12, “Nariki Play” is realized.

図3は、遊戯システム1によって提供される「なりきり遊び」の一例のフローを示す。   FIG. 3 shows a flow of an example of “successful play” provided by the game system 1.

まず、制御部18の制御のもと、撮像部13はプレーヤPを撮像し、表示部14は撮像によって得られたプレーヤ画像を表示パネル23にリアルタイムに表示する(ステップS1)。   First, under the control of the control unit 18, the imaging unit 13 images the player P, and the display unit 14 displays the player image obtained by the imaging on the display panel 23 in real time (step S1).

制御部18は、プレーヤ画像に基づいてプレーヤ動作を逐次認識する(ステップS2)。画像に基づく動作認識には公知のモーションキャプチャ技術を用いることができる。   The control unit 18 sequentially recognizes player operations based on the player images (step S2). A known motion capture technique can be used for motion recognition based on an image.

次に、制御部18は、認識したプレーヤ動作と所定動作との一致を判定する(ステップS3)。所定動作としては、例えば演出キャラクタに変身する「なりきり遊び」である場合には変身ポーズをとる動作、演出キャラクタの必殺技を繰り出す「なりきり遊び」である場合には必殺技を繰り出す動作などを例示することができる。   Next, the control unit 18 determines whether the recognized player action matches the predetermined action (step S3). Examples of the predetermined action include an action of taking a transformation pose in the case of “narikiri play” that transforms into a production character, and an action of delivering a special technique in the case of “narikiri play” in which the special character's special technique is delivered. can do.

そして、制御部18は、所定動作に一致するプレーヤ動作を検出した場合に、記憶部15に記憶された演出データに基づいて演出処理を実行する(ステップS4)。   And the control part 18 performs an effect process based on the effect data memorize | stored in the memory | storage part 15, when the player operation | movement corresponding to predetermined | prescribed operation | movement is detected (step S4).

図4は、演出処理の一例のフローを示し、図5及び図6は図4の演出処理における画像表示の変遷の一例を示す。   FIG. 4 shows a flow of an example of the effect process, and FIGS. 5 and 6 show an example of transition of image display in the effect process of FIG.

図4に示す例は、演出キャラクタに変身する「なりきり遊び」の演出処理である。記憶部15に記憶された演出データには、演出画像として、演出キャラクタのキャラクタ画像が含まれている。   The example shown in FIG. 4 is an effect process of “narikiri play” that transforms into an effect character. The effect data stored in the storage unit 15 includes a character image of the effect character as the effect image.

まず、制御部18は、所定動作に一致するプレーヤ動作を検出した際のプレーヤ画像に基づき、プレーヤ画像におけるプレーヤの身体各部位(例えば、顔や手や胸や腰など)を認識する(ステップSA1、図5(A)、図5(B))。   First, the control unit 18 recognizes each part of the player's body (for example, face, hand, chest, waist, etc.) in the player image based on the player image when the player action that matches the predetermined action is detected (step SA1). FIG. 5 (A) and FIG. 5 (B)).

次いで、制御部18は、プレーヤ画像におけるプレーヤの適宜な身体部位に、キャラクタ画像における対応する部位のパーツ画像を順次重ね、また、プレーヤの適宜な身体部位及びその周囲に閃光などの装飾画像を付加して表示パネル23に表示させ、最終的にはキャラクタ画像を表示パネル23に表示させる(ステップSA2、図5(C)〜図5(E))。パーツ画像を順次重ねて変身過程を演出することにより、興趣性が高められる。なお、本実施形態においては、前述のとおり、プレーヤ画像におけるプレーヤの適宜な身体部位に、キャラクタ画像における対応する部位のパーツ画像を順次重ねるものを示したが、これに限られず、例えば、より簡便なものとして、演出処理がスタートすると、プレーヤ画像が閃光などの装飾画像に覆われて視認不可能となり、装飾画像が消えるとキャラクタ画像が表示されている、という形態としても良い。   Next, the control unit 18 sequentially superimposes the part image of the corresponding part in the character image on the appropriate body part of the player in the player image, and adds a decoration image such as a flash to the appropriate body part of the player and its surroundings. Then, it is displayed on the display panel 23, and finally the character image is displayed on the display panel 23 (step SA2, FIG. 5C to FIG. 5E). Interestingness is enhanced by directing the parts image one after another and directing the transformation process. In the present embodiment, as described above, the part image of the corresponding part in the character image is sequentially superimposed on the appropriate body part of the player in the player image. However, the present invention is not limited to this. As a matter of course, the player image may be covered with a decorative image such as a flash when the rendering process is started and cannot be visually recognized, and the character image may be displayed when the decorative image disappears.

次いで、制御部18は、以上の合成処理によって生成される画像(本例では、キャラクタ画像)をプレーヤ動作に追従させて表示パネル23に表示させる追従処理を行う(ステップSA3)。具体的には、制御部18の制御のもとで撮像部13がプレーヤPを撮像し、制御部18は、撮像によって得られたプレーヤ画像に基づいてプレーヤ動作を逐次認識する。そして、制御部18は、認識したプレーヤ動作に追従するようにキャラクタ画像を変化させ、表示パネル23に表示させる(図6(A)〜図6(D))。   Next, the control unit 18 performs a follow-up process for causing the display panel 23 to display an image (a character image in this example) generated by the above-described combining process in accordance with the player action (step SA3). Specifically, the imaging unit 13 images the player P under the control of the control unit 18, and the control unit 18 sequentially recognizes the player operation based on the player image obtained by the imaging. Then, the control unit 18 changes the character image so as to follow the recognized player action, and displays it on the display panel 23 (FIGS. 6A to 6D).

演出処理の一環として、表示パネル23に仮想相手を表示させ、上記の追従処理を用い、パンチやキックなどのプレーヤ動作に追従させてキャラクタ画像を変化させ、仮想相手との間でのバトルを演出するようにしてもよい。   As part of the presentation process, the virtual opponent is displayed on the display panel 23, and the above tracking process is used to change the character image by following the player action such as punching and kicking to produce a battle with the virtual opponent. You may make it do.

図7は、演出処理の他の例のフローを示し、図8は図7の演出処理における画像表示の変遷の一例を示す。   FIG. 7 shows a flow of another example of the effect process, and FIG. 8 shows an example of the transition of image display in the effect process of FIG.

図7に示す例は、演出キャラクタに変身する「なりきり遊び」の演出処理である。本例では、記憶部15に記憶された演出データには、演出画像として、演出キャラクタのコスチューム画像が含まれている。   The example shown in FIG. 7 is the “Nariki Play” effect process that transforms into an effect character. In this example, the effect data stored in the storage unit 15 includes a costume image of the effect character as the effect image.

まず、制御部18は、所定動作に一致するプレーヤ動作を検出した際のプレーヤ画像に基づき、プレーヤ画像におけるプレーヤの身体各部位を認識する(ステップSB1、図8(A)、図8(B))。   First, the control unit 18 recognizes each part of the player's body in the player image based on the player image when the player motion that matches the predetermined motion is detected (step SB1, FIG. 8A, FIG. 8B). ).

次いで、制御部18は、プレーヤ画像におけるプレーヤの適宜な身体部位に、対応する部位のコスチューム画像を順次重ね、また、プレーヤの適宜な身体部位及びその周囲に閃光などの装飾画像を付加して表示パネル23に表示させ、最終的には演出キャラクタのコスチュームを着用した状態のプレーヤ画像を表示パネル23に表示させる(ステップSB2、図8(C)〜図8(E))。   Next, the control unit 18 sequentially superimposes the costume image of the corresponding part on the appropriate body part of the player in the player image, and adds and displays a decoration image such as a flash around the appropriate body part of the player and its surroundings. The player image is displayed on the panel 23, and finally the player image in a state where the costume of the effect character is worn is displayed on the display panel 23 (step SB2, FIGS. 8C to 8E).

次いで、制御部18は、以上の合成処理によって生成される画像をプレーヤ動作に追従させて表示パネル23に表示させる追従処理を行う(ステップSB3)。具体的には、制御部18の制御のもとで撮像部13がプレーヤPを撮像し、制御部18は、撮像によって得られたプレーヤ画像に基づいてプレーヤ動作を逐次認識する。そして、制御部18は、認識したプレーヤ動作にコスチュームが追従するようにコスチューム画像を変化させてプレーヤ画像に重ね、表示パネル23に表示させる。   Next, the control unit 18 performs a follow-up process for causing the image generated by the above combining process to follow the player operation and display it on the display panel 23 (step SB3). Specifically, the imaging unit 13 images the player P under the control of the control unit 18, and the control unit 18 sequentially recognizes the player operation based on the player image obtained by the imaging. Then, the control unit 18 changes the costume image so that the costume follows the recognized player action, superimposes it on the player image, and causes the display panel 23 to display the costume image.

図9は、演出処理の他の例のフローを示し、図10は図9の演出処理における画像表示の変遷の一例を示す。   FIG. 9 shows a flow of another example of the effect process, and FIG. 10 shows an example of the transition of image display in the effect process of FIG.

図9に示す例は、演出キャラクタの必殺技を繰り出す「なりきり遊び」の演出処理である。本例では、記憶部15に記憶された演出データには、演出画像として、特殊効果画像が含まれている。   The example shown in FIG. 9 is the “Nariki Play” effect process in which the effect character's special technique is delivered. In this example, the effect data stored in the storage unit 15 includes a special effect image as the effect image.

まず、制御部18は、所定動作に一致するプレーヤ動作を検出した際のプレーヤ画像に基づき、プレーヤ画像におけるプレーヤの身体各部位を認識する(ステップSC1、図10(A)、図10(B))。   First, the control unit 18 recognizes each part of the player's body in the player image based on the player image when the player motion that matches the predetermined motion is detected (step SC1, FIG. 10A, FIG. 10B). ).

次いで、制御部18は、プレーヤ画像におけるプレーヤの適宜な身体部位に、特殊効果画像を付加して表示パネル23に表示させる(ステップSC2、図10(C)、図10(D))。   Next, the control unit 18 adds a special effect image to an appropriate body part of the player in the player image and displays it on the display panel 23 (step SC2, FIG. 10C, FIG. 10D).

次いで、制御部18は、以上の合成処理によって生成される画像をプレーヤ動作に追従させて表示パネル23に表示させる追従処理を行う(ステップSC3)。具体的には、制御部18の制御のもとで撮像部13がプレーヤPを撮像し、制御部18は、撮像によって得られたプレーヤ画像に基づいてプレーヤ動作を逐次認識する。そして、制御部18は、認識したプレーヤ動作に追従して必殺技が進行するように特殊効果画像を変化させてプレーヤ画像に重ね、表示パネル23に表示させる(図10(E)、図10(F))。   Next, the control unit 18 performs a follow-up process for causing the image generated by the above combining process to be displayed on the display panel 23 following the player operation (step SC3). Specifically, the imaging unit 13 images the player P under the control of the control unit 18, and the control unit 18 sequentially recognizes the player operation based on the player image obtained by the imaging. Then, the control unit 18 changes the special effect image so as to follow the recognized player action, and superimposes it on the player image so as to display it on the display panel 23 (FIG. 10E, FIG. F)).

このように、プレーヤPを撮像して得られるプレーヤ画像からプレーヤ動作を認識し、所定動作に一致するプレーヤ動作を検出して演出処理を実行することにより、「なりきり遊び」における感情移入を促し、遊びとしての興趣性を高めることができる。   In this way, by recognizing the player action from the player image obtained by imaging the player P, detecting the player action that matches the predetermined action and executing the effect process, the emotional transfer in the “successful play” is promoted, It can enhance the fun as a play.

なお、図4〜図6又は図7〜図8に示した変身演出処理と図9〜図10に示した必殺技演出処理とを組み合わせ、変身演出処理においてキャラクタ画像又はコスチューム画像が重ねられたプレーヤ画像をプレーヤ動作に追従させる追従処理が行われている期間中に、プレーヤ動作の認識を行って必殺技演出処理に対応する所定動作を検出し、所定動作を検出した場合に、キャラクタ画像又はコスチューム画像が重ねられたプレーヤ画像に特殊効果画像を付加するようにしてもよい。   A player in which a character image or a costume image is superimposed in the transformation effect processing by combining the transformation effect processing shown in FIG. 4 to FIG. 6 or FIG. 7 to FIG. 8 with the special technique effect processing shown in FIG. 9 to FIG. When a follow-up process for causing the image to follow the player action is performed, the player action is recognized to detect a predetermined action corresponding to the special technique effect process, and when a predetermined action is detected, a character image or a costume is detected. A special effect image may be added to the player image on which the images are superimposed.

図11は、本発明の実施形態を説明するための、遊戯システムの他の例の構成を示す。   FIG. 11 shows a configuration of another example of the game system for explaining the embodiment of the present invention.

図11に示す遊戯システム101は、プレーヤPを撮像し、撮像によって得られたプレーヤ画像と演出画像とを合成して画像表示し、また演出音声を出力して、演出キャラクタになりきらせる「なりきり遊び」をプレーヤPに提供するものである。撮像及び画像表示並びに音声出力には、上述した遊戯システム1と同様にスマートフォン2が用いられている。以下の説明において、スマートフォン2の構成要素については図2を適宜参照するものとする。   The game system 101 shown in FIG. 11 captures the player P, displays the combined image of the player image obtained by the imaging and the effect image, displays the image, and outputs the effect sound to make the effect character completely. "Play" is provided to the player P. The smartphone 2 is used for imaging, image display, and audio output, as in the above-described game system 1. In the following description, FIG. 2 shall be referred to as appropriate for the components of the smartphone 2.

そして、遊戯システム101は、演出キャラクタに関連するグッズであってプレーヤPが所持しているグッズGに応じて、画像表示や音声出力による「なりきり遊び」の演出を変化させるように構成されている。   Then, the game system 101 is configured to change the effect of “narikiri” based on image display and sound output according to the goods G related to the effect character and possessed by the player P. .

具体的には、グッズGには種別毎に識別情報が付与されており、スマートフォン2は、グッズGの識別情報を取得する。スマートフォン2の記憶部15には、グッズ毎に設けられたグッズ関連演出データがグッズの識別情報に関連付けて記憶されている。スマートフォン2の制御部18は、取得した識別情報に対応するグッズ関連演出データに基づいて演出処理を実行し、プレーヤPが所持しているグッズGに応じて、画像表示や音声出力による「なりきり遊び」の演出を変化させる。   Specifically, identification information is assigned to the goods G for each type, and the smartphone 2 acquires the identification information of the goods G. The storage unit 15 of the smartphone 2 stores goods-related production data provided for each goods in association with the identification information of the goods. The control unit 18 of the smartphone 2 performs an effect process based on the goods-related effect data corresponding to the acquired identification information, and according to the goods G possessed by the player P, the “displaying play” is displayed by image display or sound output. ”Is changed.

グッズGとスマートフォン2との間での識別情報の授受は、例えば音声や光などを用いて行うことができる。音声を介した識別情報の授受では、グッズGから出力される音声をスマートフォン2のマイクロフォン21によって収集し、その音声に含まれる識別情報を音声認識によって取得することができる。また、光を介した識別情報の授受では、グッズGの発光をスマートフォン2の撮像部13によって撮像し、その発光パターンに含まれる識別情報をパターンマッチングによって取得することができる。   The exchange of identification information between the goods G and the smartphone 2 can be performed using, for example, voice or light. In the exchange of identification information via voice, the voice output from the goods G can be collected by the microphone 21 of the smartphone 2 and the identification information included in the voice can be acquired by voice recognition. In the exchange of identification information via light, the light emission of the goods G can be imaged by the imaging unit 13 of the smartphone 2, and the identification information included in the light emission pattern can be acquired by pattern matching.

また、グッズGとスマートフォン2との間での識別情報の授受は、赤外線通信やBluetooth(登録商標)、その他の機器同士の無線通信を用いて行うこともできる。一般に、スマートフォン2の外部入出力部16には赤外線通信やBluetooth(登録商標)などの送受信部が設けられており、赤外線通信やBluetooth(登録商標)による識別情報の授受においては、スマートフォン2の対応する受信部によってグッズGから送信される識別情報を受信すればよい。また、その他の機器同士の無線通信による識別情報の授受においては、対応する受信部を外部入出力部16に接続してグッズGから送信される識別情報を受信するようにすればよい。   The exchange of identification information between the goods G and the smartphone 2 can also be performed using infrared communication, Bluetooth (registered trademark), or wireless communication between other devices. In general, the external input / output unit 16 of the smartphone 2 is provided with a transmission / reception unit such as infrared communication or Bluetooth (registered trademark), and the smartphone 2 supports the transmission and reception of identification information by infrared communication or Bluetooth (registered trademark). The identification information transmitted from the goods G may be received by the receiving unit. In addition, in the exchange of identification information by wireless communication between other devices, a corresponding receiving unit may be connected to the external input / output unit 16 to receive identification information transmitted from the goods G.

グッズGとスマートフォン2との間での識別情報の授受は、プレーヤPに意識させることなく行われることが好ましい。かかる観点では、グッズGとしては玩具が好適であり、例えば操作に対する演出として音声を出力したり発光したりする玩具にあっては、それらの音声や光を用い、「なりきり遊び」の一環として、プレーヤPに意識させることなく識別情報の授受を行うことができる。   The exchange of identification information between the goods G and the smartphone 2 is preferably performed without making the player P aware of it. From such a viewpoint, a toy is suitable as the goods G. For example, in a toy that outputs sound or emits light as an effect for the operation, the sound and light are used, Identification information can be exchanged without making the player P aware of it.

なお、本例においては、グッズGとスマートフォン2との間での識別情報の授受が音声を介して行われるものとし、グッズGから出力される識別情報を含む音声をスマートフォン2のマイクロフォン21によって取得するものとして説明する。   In this example, it is assumed that the exchange of identification information between the goods G and the smartphone 2 is performed via voice, and the voice including the identification information output from the goods G is acquired by the microphone 21 of the smartphone 2. It will be described as being.

図12は、遊戯システム101によって提供される「なりきり遊び」の一例のフローを示す。   FIG. 12 shows a flow of an example of “successful play” provided by the game system 101.

図12に示す例は、グッズG毎の演出に加えて、グッズGに関連しないデフォルトの演出も用意されており、プレーヤPがグッズGを所持していない場合などにも「なりきり遊び」が行えるように構成されている。   In the example shown in FIG. 12, in addition to the production for each goods G, a default production not related to the goods G is also prepared, and even when the player P does not have the goods G, the “successful play” can be performed. It is configured as follows.

まず、制御部18の制御のもと、音声入出力部12は、プレーヤPが所持するグッズGから出力される音声をマイクロフォン21によって取得する(ステップSS1)。そして、制御部18は、取得された音声に含まれる識別情報を検出する(ステップSS2)。   First, under the control of the control unit 18, the voice input / output unit 12 acquires the voice output from the goods G possessed by the player P by the microphone 21 (step SS1). And the control part 18 detects the identification information contained in the acquired audio | voice (step SS2).

プレーヤPがグッズGを所持していない場合などであって識別情報が検出されない場合に、制御部18の制御のもと、撮像部13はプレーヤPを撮像し、表示部14は撮像によって得られたプレーヤ画像を表示パネル23にリアルタイムに表示する(ステップSS3)。   When the player P does not have the goods G and the identification information is not detected, the imaging unit 13 images the player P and the display unit 14 is obtained by imaging under the control of the control unit 18. The player image is displayed on the display panel 23 in real time (step SS3).

制御部18は、プレーヤ画像に基づいてプレーヤ動作を逐次認識し(ステップSS4)、認識したプレーヤ動作と所定動作との一致を判定する(ステップSS5)。そして、制御部18は、所定動作に一致するプレーヤ動作を検出した場合に、記憶部15に記憶されたデフォルトの演出データに基づいて演出処理を実行する(ステップSS6)。演出処理としては、上述した変身演出処理や必殺技演出処理を適用することができる。   The control unit 18 sequentially recognizes player actions based on the player image (step SS4), and determines whether the recognized player action matches a predetermined action (step SS5). When detecting a player action that matches the predetermined action, the control unit 18 executes the effect process based on the default effect data stored in the storage unit 15 (step SS6). As the effect process, the above-described transformation effect process and the special technique effect process can be applied.

一方、グッズGの識別情報を検出した場合に、制御部18は、検出した識別情報に関連付けて記憶部15に記憶されている演出データを読み出す(ステップSS7)。   On the other hand, when the identification information of the goods G is detected, the control unit 18 reads the effect data stored in the storage unit 15 in association with the detected identification information (step SS7).

そして、制御部18の制御のもと、撮像部13はプレーヤPを撮像し、表示部14は撮像によって得られたプレーヤ画像を表示パネル23にリアルタイムに表示する(ステップSS8)。   Under the control of the control unit 18, the imaging unit 13 images the player P, and the display unit 14 displays the player image obtained by the imaging on the display panel 23 in real time (step SS8).

制御部18は、プレーヤ画像に基づいてプレーヤ動作を逐次認識し(ステップSS9)、認識したプレーヤ動作と所定動作との一致を判定する(ステップSS10)。所定動作は、グッズGによらず共通の動作としてもよいが、グッズG毎に異なる動作としてもよい。グッズG毎に所定動作を異ならせることによって興趣性を高めることができる。   The control unit 18 sequentially recognizes player actions based on the player image (step SS9), and determines whether the recognized player action matches a predetermined action (step SS10). The predetermined operation may be a common operation regardless of the goods G, but may be an operation different for each goods G. Interestingness can be enhanced by changing the predetermined operation for each goods G.

そして、制御部18は、所定動作に一致するプレーヤ動作を検出した場合に、記憶部15から読み出されたグッズ関連演出データに基づいて演出処理を実行する(ステップSS11)。演出処理としては、上述した変身演出処理や必殺技演出処理を適用することができる。   When detecting a player action that matches the predetermined action, the control unit 18 executes an effect process based on the goods-related effect data read from the storage unit 15 (step SS11). As the effect process, the above-described transformation effect process and the special technique effect process can be applied.

このように、グッズGに応じて演出処理を変化させることにより、例えば演出キャラクタに変身する「なりきり遊び」であれば、複数の演出キャラクタや複数のコスチュームを用い、また、演出キャラクタの必殺技を繰り出す「なりきり遊び」では、複数の必殺技を用いて、多様な演出が可能となる。それにより、遊びとしての興趣性を高めることができる。   In this way, by changing the production process according to the goods G, for example, if it is “successful play” that transforms into a production character, a plurality of production characters and a plurality of costumes are used, and the directing skill of the production character is changed. In “Narikiri Play”, a variety of performances are possible using multiple special moves. Thereby, the interest property as play can be improved.

なお、本例においても、複数の演出処理を組み合わせることが可能である。例えば、グッズGのグッズ関連演出データが武器コスチュームといった演出キャラクタの追加のコスチューム画像であるものとして、変身演出処理においてキャラクタ画像又はコスチューム画像が重ねられたプレーヤ画像(合成画像)をプレーヤ動作に追従させる追従処理が行われている期間中に、上記グッズGの識別情報の検出及びプレーヤ動作の認識を行い、所定動作を検出した場合に、上記グッズGに応じた演出処理として追加のコスチューム画像を上記合成画像に付加するようにしてもよい。   Also in this example, it is possible to combine a plurality of effect processes. For example, assuming that the goods-related production data of goods G is an additional costume image of a production character such as a weapon costume, a player image (composite image) on which a character image or a costume image is overlaid in the transformation production process is made to follow the player operation. During the period in which the follow-up process is performed, the identification information of the goods G and the player motion are recognized, and when a predetermined motion is detected, an additional costume image is displayed as an effect process corresponding to the goods G. You may make it add to a synthesized image.

さらに、複数の演出処理を組み合わせる場合において、グッズGに応じて実行される演出処理を実行されている演出処理(または、直前の演出処理)との関係で変化させるように構成することもできる。この場合に、各グッズのグッズ関連演出データとして、他の演出データとの組み合わせによらない単独のグッズ関連演出データに加え、他の演出データとの組み合わせによる複数のグッズ関連演出データ(組み合わせグッズ関連演出データ)が用意される。そして、実行されている演出処理(または、直前の演出処理)において合成画像をプレーヤ動作に追従させる追従処理が行われている期間中にグッズGの識別情報が検出された場合には、実行されている演出処理(または、直前の演出処理)の演出データとの組み合わせに対応するグッズ関連演出データ(組み合わせグッズ関連演出データ)に基づいてグッズGに応じた演出処理が実行される。なお、直前の演出処理が一旦終了した後にグッズGの識別情報が検出された場合には、単独のグッズ関連演出データに基づいて演出処理が実行される。このように、グッズGに応じて実行される演出処理を実行されている演出処理(または、直前の演出処理)との関係で変化させることにより、一層多様な演出が可能となり、遊びとしての興趣性を高めることができる。その場合は、本遊戯システムを、プレーヤを撮像し、プレーヤ画像を取得する撮像部と、プレーヤを演出キャラクタになりきらせる演出画像を含む演出データを記憶した記憶部と、画像を表示する表示部と、制御部と、を備え、前記制御部は、前記プレーヤ画像に基づいてプレーヤ動作を認識し、所定動作に一致するプレーヤ動作を検出した場合に前記記憶部から前記演出データを読み出し、当該読み出した演出データに基づいて演出処理を実行し、前記演出処理は、前記プレーヤ画像に前記演出画像を合成して前記表示部に表示させる合成処理と、合成処理によって生成される画像を前記プレーヤ動作に追従させて前記表示部に表示させる追従処理を含み、さらに、プレーヤが所持する前記演出キャラクタのグッズの識別情報を取得する取得部を備え、また、前記演出データは、前記グッズ毎に設けられ且つ前記グッズの識別情報に関連付けて前記記憶部に記憶されたグッズ関連演出データを含み、前記記憶部は、前記グッズ関連演出データとして、前記取得部において前記グッズの識別情報が取得されたときに、前記取得された識別情報と当該識別情報が取得されたときに演出処理が実行されている演出データとの組み合わせによらず前記制御部により読み出される単独グッズ関連演出データと、前記取得された識別情報と当該識別情報が取得されたときに演出処理が実行されている演出データとの組み合わせが所定の組み合わせの場合に前記制御部により読み出される組み合わせグッズ関連演出データを記憶しており、前記制御部は、前記取得部によって前記グッズの識別情報が取得されたとき演出処理を実行しているか否かを判断し、演出処理を実行していないと判断したとき、前記取得された識別情報に関連付けられた単独グッズ関連演出データを前記記憶部から読み出し、当該読み出された単独グッズ関連演出データに基づいて演出処理を実行し、演出処理を実行していると判断し、かつ、前記取得された識別情報と演出処理が実行されている演出データの組み合わせが前記所定の組み合わせと一致するとき、前記取得された識別情報に関連付けられた組み合わせグッズ関連演出データを前記記憶部から読み出し、当該読み出された複数グッズ関連演出データに基づいて演出処理を実行する遊戯システムとして構成すればよい。また、グッズ関連演出データに基づく演出処理の実行は、前記取得部によって取得されたグッズの識別情報に対応する所定動作に一致するプレーヤ動作を検出した場合に実行されるようにしてもよい。また、本遊戯方法を、プレーヤを撮像してプレーヤ画像を取得する撮像ステップと、前記プレーヤ画像に基づいてプレーヤ動作を認識し、所定動作に一致するプレーヤ動作を検出した場合に、プレーヤを演出キャラクタになりきらせる演出画像を含む演出データに基づいて演出処理を実行する演出ステップと、を備え、前記演出処理は、前記プレーヤ画像に前記演出画像を合成して表示させる合成処理と、合成処理によって生成される画像を前記プレーヤ動作に追従させて表示させる追従処理を含み、また、前記演出データは、前記演出キャラクタのグッズ毎に設けられたグッズ関連演出データを含むものであり、さらに、プレーヤが所持する前記演出キャラクタのグッズの識別情報を取得する取得ステップを備え、前記グッズ関連演出データは、前記取得ステップにおいて前記グッズの識別情報が取得されたときに、前記取得された識別情報と当該識別情報が取得されたときに演出処理が実行されている演出データとの組み合わせによらず用いられる単独グッズ関連演出データと、前記取得された識別情報と当該識別情報が取得されたときに演出処理が実行されている演出データとの組み合わせが所定の組み合わせの場合に用いられる組み合わせグッズ関連演出データを含んでおり、演出ステップは、前記取得ステップによって前記グッズの識別情報が取得されたとき演出処理を実行しているか否かを判断する演出処理判断ステップを含み、当該演出処理判断ステップにおいて演出処理を実行していないと判断されたとき、前記取得された識別情報に関連付けられた単独グッズ関連演出データに基づいて演出処理を実行し、さらに、前記演出処理判断ステップにおいて演出処理が実行されていると判断されとき前記取得された識別情報と演出処理が実行されている演出データの組み合わせが前記所定の組み合わせと一致するかを判断する組み合わせ判断ステップを含み、前記組み合わせ判断ステップにおいて前記所定の組み合わせと一致すると判断されたとき前記取得された識別情報に関連付けられた複数グッズ関連演出データに基づいて演出処理を実行する遊戯方法とすればよい。このとき、演出ステップにおけるグッズ関連演出データに基づく演出処理の実行は、前記取得ステップによって取得されたグッズの識別情報に対応する所定動作に一致するプレーヤ動作を検出した場合に実行されるようにしてもよい。また、本プログラムを前記遊戯方法の各ステップをコンピュータに実行させるプログラムとすればよい。   Furthermore, in the case where a plurality of effect processes are combined, the effect process executed according to the goods G can be changed in relation to the effect process (or the immediately preceding effect process) being executed. In this case, as goods related production data for each goods, in addition to single goods related production data that is not combined with other production data, a plurality of goods related production data (combination goods related) Production data) is prepared. Then, when the identification information of the goods G is detected during the period in which the follow-up process for causing the composite image to follow the player operation in the effect process (or the effect process immediately before) being executed is executed. The effect process corresponding to the goods G is executed based on the goods related effect data (combination goods related effect data) corresponding to the effect data of the current effect process (or the immediately preceding effect process). In addition, when the identification information of goods G is detected after the last effect process is once complete | finished, an effect process is performed based on independent goods related effect data. As described above, by changing the effect process executed in accordance with the goods G in relation to the effect process (or the immediately preceding effect process) being performed, a variety of effects can be realized, and the entertainment as an entertainment. Can increase the sex. In this case, the present game system includes an imaging unit that captures an image of the player and acquires the player image, a storage unit that stores effect data including an effect image that makes the player become an effect character, and a display unit that displays the image. And a control unit, wherein the control unit recognizes a player action based on the player image, reads out the effect data from the storage unit when a player action matching a predetermined action is detected, and reads out the effect data. The effect process is executed based on the effect data, and the effect process includes combining the effect image with the player image and displaying the effect image on the display unit, and converting the image generated by the combining process into the player operation. Including a follow-up process to be followed and displayed on the display unit, and further to acquire identification information of goods of the effect character possessed by the player. The production data includes goods-related production data provided for each of the goods and stored in the storage unit in association with the identification information of the goods, and the storage unit includes the goods-related production data. As described above, when the identification information of the goods is acquired in the acquisition unit, the acquired identification information and the effect data in which the effect process is executed when the identification information is acquired When the combination of the single goods related effect data read by the control unit, the acquired identification information and the effect data for which the effect process is executed when the identification information is acquired is a predetermined combination, the control unit Combination goods-related production data read out by the storage unit, and the control unit uses the acquisition unit to identify the goods identification information. When it is acquired, it is determined whether or not the effect process is being executed, and when it is determined that the effect process is not being executed, the single merchandise related effect data associated with the acquired identification information is stored from the storage unit. Production data that is read and executed based on the read single merchandise related production data, is determined that the production process is being executed, and the acquired identification information and production data are being executed. When the combination matches the predetermined combination, the combination goods related effect data associated with the acquired identification information is read from the storage unit, and the effect processing is performed based on the read multiple goods related effect data. What is necessary is just to comprise as a game system to perform. Further, the execution of the effect process based on the goods-related effect data may be executed when a player action that matches a predetermined action corresponding to the goods identification information acquired by the acquisition unit is detected. In addition, the present game method is used to capture the player and acquire a player image. When the player motion is recognized based on the player image and a player motion matching the predetermined motion is detected, And an effect step of executing effect processing based on effect data including the effect image to be displayed. The effect processing is performed by combining the effect image with the player image and displaying the effect image. A follow-up process for causing the generated image to be displayed following the player action, and the effect data includes goods-related effect data provided for each of the effect character's goods. An acquisition step of acquiring the identification information of the goods of the performance character possessed, Is used regardless of the combination of the acquired identification information and the effect data for which the effect process is executed when the identification information is acquired when the goods identification information is acquired in the acquisition step. Combination merchandise related effect data used when the combination of the acquired identification information and the acquired identification information and the effect data for which the effect processing is executed when the identification information is acquired is a predetermined combination The effect step includes an effect process determination step for determining whether or not an effect process is executed when the identification information of the goods is acquired by the acquisition step, and the effect process is performed in the effect process determination step. When it is determined that the individual goods related to the acquired identification information is not executed. An effect process is executed based on the effect data. Further, when it is determined that the effect process is executed in the effect process determination step, a combination of the acquired identification information and the effect data on which the effect process is executed is A combination determination step for determining whether or not the combination matches a predetermined combination, and when the combination determination step determines that the combination matches the predetermined combination, based on a plurality of goods related effect data associated with the acquired identification information What is necessary is just to make it the game method which performs an effect process. At this time, the execution of the effect process based on the goods-related effect data in the effect step is executed when a player operation matching the predetermined operation corresponding to the goods identification information acquired in the acquisition step is detected. Also good. The program may be a program that causes a computer to execute each step of the playing method.

なお、さらなる変形例として、グッズ毎に設けられたグッズ関連演出データについて、単独グッズ関連演出データはなくし、組み合わせグッズ関連演出データのみを含むものとしても良い。また、組み合わせグッズ関連演出データについては、グッズ毎に複数用意してもよい。すなわち、組み合わせグッズ関連演出データとして、あるグッズの識別情報が取得されたときに、演出処理が実行されている演出データが、取得された識別情報aと第1の所定の組み合わせとなる第1の演出データと一致する場合に読み出される第1の組み合わせグッズ関連演出データと、取得された識別情報と第2の所定の組み合わせとなる第2の演出データと一致する場合に読み出される第2の組み合わせグッズ関連演出データが含まれるようにしても良い。この場合、グッズを1種類しか所有していなかったとしても、実行されている演出処理の演出データによって複数の演出を楽しむことができる。例えば、グッズとして1種類の変身用アイテムしかもっていなかったとしても、その変身用アイテムの識別情報を取得したときに実行されている演出データが、ヒーローA1に変身、なりきり遊びできるデータ(第1の演出データ)である場合は、ヒーローA2に変身、なりきり遊びできる演出データ(第1の組み合わせ関連演出データ)に基づいて演出処理が実行され、実行されている演出データが、ヒーローA1とは異なるヒーローB1に変身、なりきり遊びできる演出データ(第2の演出データ)である場合は、ヒーローA2とは異なるヒーローB2に変身、なりきり遊びができる演出データ(第2の組み合わせ関連演出データ)に基づいて演出処理が実行されるようにすることができ、1種類の変身用アイテムで複数の演出を楽しむことができるようになる。   As a further modification, the merchandise related effect data provided for each goods may include only the combined merchandise related effect data, without the single merchandise related effect data. Further, a plurality of combination goods related production data may be prepared for each goods. That is, when the identification information of a certain merchandise is acquired as combination merchandise related effect data, the effect data for which the effect processing is being executed becomes the first predetermined combination with the acquired identification information a. The first combination goods-related effect data that is read when it matches the effect data, and the second combination goods that is read when it matches the acquired identification information and the second effect data that is the second predetermined combination Related effect data may be included. In this case, even if only one type of goods is owned, a plurality of effects can be enjoyed by the effect data of the effect processing being executed. For example, even if there is only one type of transformation item as goods, the production data that is executed when the identification information of the transformation item is acquired can be transformed into the hero A1 and data that can be played completely (first) Production data), the production process is executed based on the production data (first combination-related production data) that can be transformed into the hero A2 and play completely, and the produced production data is different from the hero A1. In the case of production data (second production data) that can be transformed into hero B1 and play as it is (second production data), based on production data (second combination related production data) that can be transformed into hero B2 different from hero A2 Production processing can be performed, and enjoy multiple productions with one type of transformation item Door will be able to.

なお、遊戯システム1,101のハードウェアにスマートフォン2を用いるものとして説明したが、「なりきり遊び」の実現に使用されるスマートフォン2の種々のハードウェアリソース(音声入出力部12、撮像部13、表示部14、記憶部15、制御部18)と同等の機能を備えていれば、スマートフォン2に限られるものではない。   In addition, although demonstrated as what uses the smart phone 2 for the hardware of the game system 1,101, various hardware resources (the audio | voice input / output part 12, the imaging part 13, The smartphone 2 is not limited as long as the display unit 14, the storage unit 15, and the control unit 18) have the same functions.

また、上述のとおり、制御部18が実行する処理をプログラムとして提供することができ、プログラムは、例えばコンピュータが読取可能な一時的でない記録媒体に記録される。このような「コンピュータ読取可能な記録媒体」は、例えば、CD−ROM(Compact Disc-ROM)等の光学記録媒体や、メモリカード等の磁気記録媒体を含む。また、プログラムを、ネットワークを介したダウンロードによって提供することもできる。   Further, as described above, the processing executed by the control unit 18 can be provided as a program, and the program is recorded on a non-temporary recording medium that can be read by a computer, for example. Such “computer-readable recording medium” includes, for example, an optical recording medium such as a CD-ROM (Compact Disc-ROM) and a magnetic recording medium such as a memory card. In addition, the program can be provided by downloading via a network.

1 遊戯システム
2 スマートフォン
12 音声入出力部
13 撮像部
14 表示部
15 記憶部
16 外部入出力部
18 制御部
21 マイクロフォン
22 スピーカ
23 表示パネル
G グッズ
P プレーヤ
DESCRIPTION OF SYMBOLS 1 Game system 2 Smartphone 12 Voice input / output part 13 Imaging part 14 Display part 15 Storage part 16 External input / output part 18 Control part 21 Microphone 22 Speaker 23 Display panel G Goods P Player

Claims (15)

プレーヤを撮像し、プレーヤ画像を取得する撮像部と、
プレーヤを演出キャラクタになりきらせる演出画像を含む演出データを記憶した記憶部と、
画像を表示する表示部と、
制御部と、
を備え、
前記制御部は、前記プレーヤ画像に基づいてプレーヤ動作を認識し、所定動作に一致するプレーヤ動作を検出した場合に前記演出データに基づいて演出処理を実行し、
前記演出処理は、前記プレーヤ画像に前記演出画像を合成して前記表示部に表示させる合成処理と、合成処理によって生成される画像を前記プレーヤ動作に追従させて前記表示部に表示させる追従処理とを含む遊戯システム。
An imaging unit for imaging a player and acquiring a player image;
A storage unit storing effect data including an effect image that makes the player become an effect character;
A display for displaying an image;
A control unit;
With
The control unit recognizes a player action based on the player image, and executes an effect process based on the effect data when a player action that matches a predetermined action is detected.
The effect process includes a combining process for combining the effect image with the player image and causing the display unit to display the image, and a follow-up process for causing the display unit to display an image generated by the combining process following the player operation. A game system including
請求項1記載の遊戯システムであって、
プレーヤが所持する前記演出キャラクタのグッズの識別情報を取得する取得部をさらに備え、
前記演出データは、前記グッズ毎に設けられ且つ前記グッズの識別情報に関連付けて前記記憶部に記憶されたグッズ関連演出データを含み、
前記制御部は、前記取得部によって取得された前記識別情報に対応する前記グッズ関連演出データに基づいて前記演出処理を実行する遊戯システム。
A game system according to claim 1,
An acquisition unit for acquiring identification information of goods of the effect character possessed by the player;
The production data includes goods related production data provided for each of the goods and stored in the storage unit in association with the identification information of the goods,
The said control part is a game system which performs the said effect process based on the said goods related effect data corresponding to the said identification information acquired by the said acquisition part.
請求項2記載の遊戯システムであって、
前記所定動作は、前記グッズ毎に定められており、
前記制御部は、前記取得部によって取得された前記識別情報に対応する前記所定動作に一致するプレーヤ動作を検出した場合に前記演出処理を実行する遊戯システム。
A game system according to claim 2,
The predetermined operation is determined for each of the goods,
The game system in which the control unit executes the effect process when it detects a player motion that matches the predetermined motion corresponding to the identification information acquired by the acquisition unit.
請求項2又は3記載の遊戯システムであって、
前記グッズは玩具であって、前記識別情報は前記グッズの操作に伴い前記グッズから発せられる音声であり、
前記取得部は、前記音声を検出するマイクロフォンである遊戯システム。
The game system according to claim 2 or 3,
The goods is a toy, and the identification information is a voice emitted from the goods in accordance with the operation of the goods.
The game system, wherein the acquisition unit is a microphone that detects the sound.
請求項1から4のいずれか一項記載の遊戯システムであって、
前記演出画像は、前記演出キャラクタのキャラクタ画像を含み、
前記合成処理は、前記プレーヤ画像を前記キャラクタ画像に変化させる処理を含み、当該キャラクタ画像を用いる前記追従処理において前記プレーヤ動作に追従させて表示させる画像とする遊戯システム。
A game system according to any one of claims 1 to 4,
The effect image includes a character image of the effect character,
The composition system includes a process of changing the player image to the character image, and an image to be displayed following the player action in the tracking process using the character image.
請求項1から4のいずれか一項記載の遊戯システムであって、
前記演出画像は、前記演出キャラクタのコスチューム画像を含み、
前記合成処理は、前記プレーヤ画像に前記コスチューム画像を重ねる処理を含む遊戯システム。
A game system according to any one of claims 1 to 4,
The effect image includes a costume image of the effect character,
The game system includes a process of superimposing the costume image on the player image.
請求項1から6のいずれか一項記載の遊戯システムであって、
前記演出画像は、特殊効果画像を含み、
前記合成処理は、前記プレーヤ画像に前記特殊効果画像を付加する処理を含む遊戯システム。
A game system according to any one of claims 1 to 6,
The effect image includes a special effect image,
The game system includes a process of adding the special effect image to the player image.
プレーヤを撮像してプレーヤ画像を取得する撮像ステップと、
前記プレーヤ画像に基づいてプレーヤ動作を認識し、所定動作に一致するプレーヤ動作を検出した場合に、プレーヤを演出キャラクタになりきらせる演出画像を含む演出データに基づいて演出処理を実行する演出ステップと、
を備え、
前記演出処理は、前記プレーヤ画像に前記演出画像を合成して表示させる合成処理と、合成処理によって生成される画像を前記プレーヤ動作に追従させて表示させる追従処理とを含む遊戯方法。
An imaging step of imaging the player and obtaining a player image;
An effect step of recognizing a player action based on the player image and executing an effect process based on effect data including an effect image that causes the player to become an effect character when a player action that matches a predetermined action is detected. ,
With
The presentation process includes a combination process for combining and displaying the effect image on the player image, and a follow-up process for displaying an image generated by the combination process following the player operation.
請求項8記載の遊戯方法であって、
前記演出データは、前記演出キャラクタのグッズ毎に設けられたグッズ関連演出データを含むものであり、
プレーヤが所持する前記演出キャラクタのグッズの識別情報を取得する取得ステップをさらに備え、
前記演出ステップは、前記取得ステップで取得された前記識別情報に対応する前記グッズ関連演出データに基づいて前記演出処理を実行する遊戯方法。
A game method according to claim 8, wherein
The production data includes goods related production data provided for each goods of the production character,
An acquisition step of acquiring identification information of goods of the effect character possessed by the player;
The game method in which the effect step executes the effect process based on the goods related effect data corresponding to the identification information acquired in the acquisition step.
請求項9記載の遊戯方法であって、
前記所定動作は、前記グッズ毎に定められており、
前記演出ステップは、前記取得ステップで取得された前記識別情報に対応する前記所定動作に一致するプレーヤ動作を検出した場合に前記演出処理を実行する遊戯方法。
A game method according to claim 9, wherein
The predetermined operation is determined for each of the goods,
The game method of executing the effect process when the effect step detects a player action that matches the predetermined action corresponding to the identification information acquired in the acquisition step.
請求項9又は10記載の遊戯方法であって、
前記グッズは玩具であって、前記識別情報は前記グッズの操作に伴い前記グッズから発せられる音声である遊戯方法。
The game method according to claim 9 or 10, wherein
The game method, wherein the goods are toys, and the identification information is a sound emitted from the goods when the goods are operated.
請求項8から11のいずれか一項記載の遊戯方法であって、
前記演出画像は、前記演出キャラクタのキャラクタ画像を含み、
前記合成処理は、前記プレーヤ画像を前記キャラクタ画像に変化させる処理を含む遊戯方法。
A game method according to any one of claims 8 to 11,
The effect image includes a character image of the effect character,
The game method, wherein the combining process includes a process of changing the player image into the character image.
請求項8から11のいずれか一項記載の遊戯方法であって、
前記演出画像は、前記演出キャラクタのコスチューム画像を含み、
前記合成処理は、前記プレーヤ画像に前記コスチューム画像を重ねる処理を含む遊戯方法。
A game method according to any one of claims 8 to 11,
The effect image includes a costume image of the effect character,
The game method, wherein the combining process includes a process of superimposing the costume image on the player image.
請求項8から13のいずれか一項記載の遊戯方法であって、
前記演出画像は、特殊効果画像を含み、
前記合成処理は、前記プレーヤ画像に前記特殊効果画像を付加する処理を含む遊戯方法。
A game method according to any one of claims 8 to 13,
The effect image includes a special effect image,
The game method, wherein the combining process includes a process of adding the special effect image to the player image.
請求項8から14のいずれか一項記載の遊戯方法の各ステップをコンピュータに実行させるプログラム。   The program which makes a computer perform each step of the game method as described in any one of Claims 8-14.
JP2014126103A 2014-06-19 2014-06-19 Game system, game method and program Active JP6396694B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014126103A JP6396694B2 (en) 2014-06-19 2014-06-19 Game system, game method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014126103A JP6396694B2 (en) 2014-06-19 2014-06-19 Game system, game method and program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018161199A Division JP6625179B2 (en) 2018-08-30 2018-08-30 Game system, game method and program

Publications (2)

Publication Number Publication Date
JP2016004519A true JP2016004519A (en) 2016-01-12
JP6396694B2 JP6396694B2 (en) 2018-09-26

Family

ID=55223723

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014126103A Active JP6396694B2 (en) 2014-06-19 2014-06-19 Game system, game method and program

Country Status (1)

Country Link
JP (1) JP6396694B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101850860B1 (en) * 2016-08-26 2018-05-30 주식회사 임팩시스 Motion capture and Image Process System and implementation Method of the Same
WO2023189554A1 (en) * 2022-03-31 2023-10-05 ソニーグループ株式会社 Information processing device, information processing method, and program
JP7414707B2 (en) 2020-12-18 2024-01-16 トヨタ自動車株式会社 image display system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6625179B2 (en) * 2018-08-30 2019-12-25 株式会社バンダイ Game system, game method and program

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009049646A (en) * 2007-08-17 2009-03-05 Fujifilm Corp Imaging device, display method of through-image, and recording method for photographed image
JP2009059015A (en) * 2007-08-30 2009-03-19 Casio Comput Co Ltd Composite image output device and composite image output processing program
JP2009086785A (en) * 2007-09-28 2009-04-23 Casio Comput Co Ltd Composite image output device and composite image output processing program
JP2011130208A (en) * 2009-12-17 2011-06-30 Canon Inc Imaging apparatus, apparatus and method for processing image
JP2012253483A (en) * 2011-06-01 2012-12-20 Sony Corp Image processing apparatus, image processing method, and program
JP2013101527A (en) * 2011-11-09 2013-05-23 Sony Corp Information processing apparatus, display control method, and program
JP2013101526A (en) * 2011-11-09 2013-05-23 Sony Corp Information processing apparatus, display control method, and program
JP2013190974A (en) * 2012-03-13 2013-09-26 Satoru Ichimura Information processing apparatus, information processing method, and program

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009049646A (en) * 2007-08-17 2009-03-05 Fujifilm Corp Imaging device, display method of through-image, and recording method for photographed image
JP2009059015A (en) * 2007-08-30 2009-03-19 Casio Comput Co Ltd Composite image output device and composite image output processing program
JP2009086785A (en) * 2007-09-28 2009-04-23 Casio Comput Co Ltd Composite image output device and composite image output processing program
JP2011130208A (en) * 2009-12-17 2011-06-30 Canon Inc Imaging apparatus, apparatus and method for processing image
JP2012253483A (en) * 2011-06-01 2012-12-20 Sony Corp Image processing apparatus, image processing method, and program
JP2013101527A (en) * 2011-11-09 2013-05-23 Sony Corp Information processing apparatus, display control method, and program
JP2013101526A (en) * 2011-11-09 2013-05-23 Sony Corp Information processing apparatus, display control method, and program
JP2013190974A (en) * 2012-03-13 2013-09-26 Satoru Ichimura Information processing apparatus, information processing method, and program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101850860B1 (en) * 2016-08-26 2018-05-30 주식회사 임팩시스 Motion capture and Image Process System and implementation Method of the Same
JP7414707B2 (en) 2020-12-18 2024-01-16 トヨタ自動車株式会社 image display system
WO2023189554A1 (en) * 2022-03-31 2023-10-05 ソニーグループ株式会社 Information processing device, information processing method, and program

Also Published As

Publication number Publication date
JP6396694B2 (en) 2018-09-26

Similar Documents

Publication Publication Date Title
EP3047884B1 (en) Program, information-processing device, information-processing system, and avatar generating method
CN109107155B (en) Virtual article adjusting method, device, terminal and storage medium
CN111640202B (en) AR scene special effect generation method and device
JP6192264B2 (en) Portable terminal device, terminal program, augmented reality system, and clothing
JP6396694B2 (en) Game system, game method and program
CN111640200B (en) AR scene special effect generation method and device
CN108876878B (en) Head portrait generation method and device
JP6730461B2 (en) Information processing system and information processing apparatus
CN108933723A (en) message display method, device and terminal
JP6955541B2 (en) Game system, game method and program
CN108525306B (en) Game implementation method and device, storage medium and electronic equipment
KR20200034716A (en) Unlock augmented reality experiences through target image detection
KR101096365B1 (en) Mobile service method using logo and mobile communication device using the same
JP6625179B2 (en) Game system, game method and program
JP6386020B2 (en) Game system
JP7204853B2 (en) Game system, game method and program
CN105468249A (en) Intelligent interaction system and control method therefor
US20120252578A1 (en) Game device, game control method, and non-transitory infrmation recording medium on which a computer readable program is recorded
CN105279354B (en) User can incorporate the situation construct system of the story of a play or opera
CN112115398A (en) Virtual space providing system, virtual space providing method, and program
US20220323862A1 (en) Program, method, and information processing terminal
JP7323315B2 (en) Information processing device, information processing method and program
JP6818106B1 (en) Programs, methods, and viewing terminals
JP7312975B1 (en) Terminal device control program, terminal device, terminal device control method, server device control program, server device, and server device control method
JP7333529B1 (en) Terminal device control program, terminal device, terminal device control method, server device control program, server device, and server device control method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170613

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180517

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180712

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180801

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180830

R150 Certificate of patent or registration of utility model

Ref document number: 6396694

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250