JP6532205B2 - コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システム - Google Patents

コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システム Download PDF

Info

Publication number
JP6532205B2
JP6532205B2 JP2014197144A JP2014197144A JP6532205B2 JP 6532205 B2 JP6532205 B2 JP 6532205B2 JP 2014197144 A JP2014197144 A JP 2014197144A JP 2014197144 A JP2014197144 A JP 2014197144A JP 6532205 B2 JP6532205 B2 JP 6532205B2
Authority
JP
Japan
Prior art keywords
information
music
content
beat
character
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014197144A
Other languages
English (en)
Other versions
JP2016071433A (ja
Inventor
敬久 東風輪
敬久 東風輪
健太 菅野
健太 菅野
篤史 石塚
篤史 石塚
智治 藤田
智治 藤田
佑二 大西
佑二 大西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
IDEA FACTORY CO., LTD.
Original Assignee
IDEA FACTORY CO., LTD.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by IDEA FACTORY CO., LTD. filed Critical IDEA FACTORY CO., LTD.
Priority to JP2014197144A priority Critical patent/JP6532205B2/ja
Publication of JP2016071433A publication Critical patent/JP2016071433A/ja
Application granted granted Critical
Publication of JP6532205B2 publication Critical patent/JP6532205B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Studio Devices (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Circuits (AREA)

Description

本発明は、コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システムに関する。
従来から、アニメーション映画やビデオゲームにおいて、楽曲音と同期した映像を、当該楽曲音と同期して再生する同期再生が広く知られている。
これに関し、特許文献1には、キャラクタの1動作毎のモーションデータを複数登録しておき、楽曲データから得られたテンポ情報に基づいて、上記モーションデータをこのテンポ情報に同期するように圧縮または伸張して再生することにより、リズム感のあるキャラクタのダンス表示が可能となるキャラクタ舞踏動作表示装置が記載されている。
特開平10−319957号公報
特許文献1に記載のキャラクタ舞踏動作表示装置では、楽曲コンテンツにおいて楽曲に合わせて連続的にキャラクタを動かすことができるが、例えば、ある拍子の最後にキャラクタが右手を挙げており、次の拍子の開始時にはキャラクタが左手を挙げているというダンスコンテンツでは、キャラクタの動作の不連続性が目立つおそれがあった。また、当該ダンスコンテンツにおいて、キャラクタの動作の不連続性を解消するため、次の拍子の開始時の格好を補間する方法も考えられるが、その補間をするたびに、その補間のタイミングと拍子の開始とを同期させる必要があるという制約があった。
本発明はこのような事情に鑑みてなされたものであり、キャラクタの動作の不連続性を解消し、且つ、コンテンツの生成を容易にすることを目的の一つとし得る。
本発明の一側面に係るコンテンツ生成装置は、楽曲コンテンツの楽曲情報と、前記楽曲コンテンツの楽曲の拍情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を取得する情報取得部と、前記拍情報に基づく一つ以上の拍を含む拍子ごとに前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報のそれぞれが前記拍情報に関連付けられ、前記拍情報に関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成部と、を備え、前記コンテンツ生成部は、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成する。
本発明の一側面に係るコンテンツ生成方法は、楽曲コンテンツの楽曲情報と、前記楽曲コンテンツの楽曲の拍情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を取得する情報取得ステップと、前記拍情報に基づく一つ以上の拍を含む拍子ごとに前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報のそれぞれが前記拍情報に関連付けられ、前記拍情報に関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成ステップと、を含み、前記コンテンツ生成ステップは、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成する。
本発明の一側面に係るコンテンツ生成プログラムは、コンピュータに、楽曲コンテンツの楽曲情報と、前記楽曲コンテンツの楽曲の拍情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を取得する情報取得機能と、前記拍情報に基づく一つ以上の拍を含む拍子ごとに前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報のそれぞれが前記拍情報に関連付けられ、前記拍情報に関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成機能と、前記コンテンツ生成機能において、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成する機能と、を実現させる。
本発明の一側面に係るコンテンツ生成システムは、コンテンツ生成装置と、再生装置と、を備えるコンテンツ生成システムであって、前記コンテンツ生成装置は、楽曲コンテンツの楽曲情報と、前記楽曲コンテンツの楽曲の拍情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を取得する情報取得部と、前記拍情報に基づく一つ以上の拍を含む拍子ごとに前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報のそれぞれが前記拍情報に関連付けられ、前記拍情報に関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成部と、生成された前記楽曲コンテンツを前記再生装置に送信する送信部と、を備え、前記コンテンツ生成部は、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成し、前記再生装置は、前記コンテンツ生成装置から送信された前記楽曲コンテンツを再生する。
なお、本発明において、「部」、「装置」、「システム」とは、単に物理的手段を意味するものではなく、その「部」、「装置」、「システム」が有する機能をソフトウェアによって実現する場合も含む。また、1つの「部」、「装置」、「システム」が有する機能が2つ以上の物理的手段や装置により実現されても、2つ以上の「部」、「装置」、「システム」の機能が1つの物理的手段や装置により実現されても良い。
本発明によれば、仮想カメラ(仮想世界の中でのカメラ)の動作を拍子ごとに強制的に切り替えることにより、キャラクタの動作の不連続性を解消でき、且つ、コンテンツの生成を容易にすることができる。
本発明の実施形態に係るコンテンツ生成システムの全体構成図である。 本発明の実施形態に係るコンテンツ生成装置のハードウェア構成を概略的に示す構成図である。 本発明の実施形態に係るコンテンツ生成装置のブロック図である。 本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されている拍情報の一例を示す図である。図4(a)は、楽曲コンテンツのある楽曲が8拍を含む拍子で構成されている例を示す図である。図4(b)は、楽曲コンテンツのある楽曲が16拍を含む拍子で構成されている例を示す図である。 本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されている楽曲情報の一例を示す図である。図5(a)は、ある楽曲におけるある楽曲パートの楽曲情報の一例を示す図である。図5(b)は、図5(a)の楽曲とは異なる楽曲におけるある楽曲パートの楽曲情報の一例を示す図である。 本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されているカメラ動作情報の一例を示す図である。 本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されているキャラクタ情報の一例を示す図である。図7(a)は、キャラクタIDおよびキャラクタ名を示すキャラクタ情報の一例を示した図である。図7(b)は、キャラクタのダンス動作IDおよびキャラクタのダンス動作名を示すキャラクタ情報の一例を示した図である。図7(c)は、キャラクタのダンス位置IDおよびキャラクタのダンス位置名を示すキャラクタ情報の一例を示した図である。 本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されている演出情報の一例を示す図である。 本発明の実施形態に係る、拍子ごとに対応づけられる楽曲情報、カメラ動作情報、演出情報、及びキャラクタ情報を模式的に示した対応関係図である。 本発明の実施形態に係る再生装置により再生される楽曲コンテンツの再生画面の一例を示す図である。 本発明の実施形態に係る再生装置により再生される楽曲コンテンツの再生状況の一例を示す図である。図11(a)は、ある拍子に再生される楽曲コンテンツの一例を示している図である。図11(b)は、図11(a)の拍子の次の拍子に再生される楽曲コンテンツの一例を示している図である。図11(c)は、図11(b)の拍子の次の拍子に再生される楽曲コンテンツの一例を示している図である。 本発明の実施形態に係る楽曲コンテンツの再生処理フローの一例を示すフローチャートである。
以下、図面を参照して本発明の実施の形態を説明する。ただし、以下に説明する実施形態は、あくまでも例示であり、以下に明示しない種々の変形や技術の適用を排除する意図はない。即ち、本発明は、その趣旨を逸脱しない範囲で種々変形(各実施例を組み合わせる等)して実施することができる。また、以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付して表している。図面は模式的なものであり、必ずしも実際の寸法や比率等とは一致しない。図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることがある。
図1は、本発明の実施形態に係るコンテンツ生成システムの全体構成図である。図1に示すように、コンテンツ生成システム1は、例示的に、楽曲コンテンツを生成するコンテンツ生成装置3と、コンテンツ生成装置3により生成された楽曲コンテンツを再生する再生装置5と、ユーザが操作する入力装置9と、を備えて構成されている。
再生装置5は、画像を出力し、音声を出力する装置であり、楽曲コンテンツを再生する。例えば、再生装置5は、ディスプレイおよびスピーカを有するテレビ又はコンピュータディスプレイであってもよい。再生装置5は、コンテンツ生成装置3に有線ケーブル又は無線LAN(Local Area Network)により接続されてもよい。
入力装置9は、ユーザにより入力された操作情報に対応する制御信号をコンテンツ生成装置3に送信する装置である。入力装置9は、本実施形態においてはコンテンツ生成装置3との間で無線通信可能に構成される。入力装置9とコンテンツ生成装置3とは、例えば、Bluetooth(ブルートゥース)(登録商標)プロトコルなどを活用して無線接続を確立する。なお、入力装置9とコンテンツ生成装置3とは、有線ケーブルを介して上記制御信号を送信するように構成されてもよい。
コンテンツ生成装置3は、楽曲コンテンツを生成する装置である。コンテンツ生成装置3は、コンテンツ生成用のアプリケーションプログラムをロードすることでコンテンツ生成機能を発揮する。コンテンツ生成装置3は、たとえばゲーム機であり、パーソナルコンピュータなどであってもよい。
また、コンテンツ生成装置3は、USB(Universal Serial Bus)端子を有し、ケーブル7を介してパーソナルコンピュータなどの外部機器と接続し、外部機器から各種情報を取得できる。さらに、コンテンツ生成装置3はメディアドライブを有し、ROM媒体から各種情報を取得するように構成されている。またさらに、コンテンツ生成装置3はネットワーク経由で外部サーバなどから各種情報を取得するように構成されてもよい。なお、本実施形態においては、入力装置9、再生装置5、およびコンテンツ生成装置3は、別体であるが、これらは一体に構成されていてもよい。たとえば、入力装置9、再生装置5、およびコンテンツ生成装置3は、コンテンツ生成処理を実行する移動端末装置として構成されてもよい。
図2は、本発明の実施形態に係るコンテンツ生成装置のハードウェア構成を概略的に示す構成図である。図2に示すように、コンテンツ生成装置3は、例示的に、有線/無線インタフェース10、アンテナ11、データ処理部12、メモリ14、ハードディスクドライブ15、ディスクドライブ16、記録媒体着脱部18、及び制御部100を備えて構成されている。上記各構成は、バス19を介して、各種情報およびデータの出入力を行うように構成されている。
有線/無線インタフェース10は、外部の機器と有線または無線で接続して、データの送受信を行う手段である。有線/無線インタフェース10は、上記した所定のケーブル7を介して外部機器に接続し、外部機器から各種情報を取得する。また、有線/無線インタフェース10は、所定の無線通信プロトコルで入力装置9と接続する。入力装置9からの制御信号は、アンテナ11、有線/無線インタフェース10、そしてバス19を介して、制御部100に供給される。なお、有線/無線インタフェース10は、有線インタフェース部と無線インタフェース部とが一体として構成されていてもよく、別体として構成されていてもよい。
データ処理部12は、再生装置5で再生するコンテンツを構成する映像・音声データをバッファするフレームメモリ等を備えて構成される。
メモリ14は、RAM(ランダムアクセスメモリ)として構成され、たとえば、メインメモリおよびバッファメモリを備えて構成される。
ハードディスクドライブ15は、各種情報およびデータを記憶する補助記憶装置である。ハードディスクドライブ15は、たとえば、有線/無線インタフェース10を介して受信した各種情報およびデータを格納し、後述するとおり、記録媒体着脱部18がリムーバブル記録媒体から読み出す各種情報およびデータを格納する。
ディスクドライブ16は、読出専用のROMディスクを駆動して、データを読み出すデバイスである。ディスクドライブ16は、ROMディスクが装着されると、ROMディスクに格納されているデータを読み出す。ROMディスクは、たとえば光ディスクや光磁気ディスクなどである。
記録媒体着脱部18は、リムーバブル記録媒体が装着されると、リムーバブル記録媒体からデータを読み出すデバイスである。ここで、本実施形態におけるダンスゲームのプログラムは、リムーバブル記録媒体又はROMディスクに記録されていて、記録媒体着脱部18又はディスクドライブ16からハードディスクドライブ15にインストールされるように構成されていてもよい。また、当該プログラムは、ネットワーク経由で外部サーバなどから取得されてもよい。
制御部100は、CPUを備えて構成されており、コンテンツ生成装置3に含まれる上記各構成が実行する処理を制御する。また、制御部100は、当該CPUの中に複数のプロセッサコアを備えるように構成されている。さらに、制御部100は、メモリ14に接続するメモリコントローラを備えて構成されている。
図3は、本発明の実施形態に係るコンテンツ生成装置のブロック図である。図3に示すように、コンテンツ生成装置3のハードディスクドライブ15は、記憶部を備えており、当該記憶部は、例示的に、拍情報記憶部20と、楽曲情報記憶部22と、カメラ動作情報記憶部24と、キャラクタ情報記憶部26と、演出情報記憶部28と、を備えて構成されている。また、コンテンツ生成装置3の制御部100は、機能的に、受信部101と、情報管理部103と、情報取得部105と、コンテンツ生成部107と、送信部109と、を含んで構成される。上記機能ブロックは、制御部100が所定のソフトウェアプログラムを実行することにより実現される機能ブロックである。
記憶部は、例示的に、後述する拍情報、楽曲情報、カメラ動作情報、キャラクタ情報、および演出情報を記憶するブロックである。たとえば、記憶部は、拍情報、楽曲情報、カメラ動作情報、キャラクタ情報、および演出情報のそれぞれを互いに関連づけることなく記憶する。また、記憶部は、楽曲情報、カメラ動作情報、キャラクタ情報、および演出情報のうち少なくとも一つを拍情報と関連付けて記憶してもよい。
拍情報記憶部20は、楽曲コンテンツの楽曲の拍に関する情報(拍情報)を記憶するブロックである。
図4は、本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されている拍情報の一例を示す図である。特に、図4(a)は、楽曲コンテンツのある楽曲が8拍を含む拍子で構成されている例を示す図である。図4(b)は、楽曲コンテンツのある楽曲が16拍を含む拍子で構成されている例を示す図である。ここで、「拍子」とは、ダンスのデータを構成する最小単位をいう。
図4(a)に示すように、ある楽曲は8拍を含む、連続する拍子で構成されており、楽曲開始位置から当該拍子B1,B2,B3,B4,B5,B6,・・・と楽曲終了位置まで続く。このように、ある楽曲は、単一の拍子のみで構成される。
図4(b)に示すように、ある楽曲は16拍を含む、連続する拍子で構成されており、楽曲開始位置から当該拍子B11,B12,B13,・・・と楽曲終了位置まで続く。このように、図4(b)に示す楽曲は、図4(a)で示した拍子(8拍を含む拍子)の倍の16拍を含む拍子で構成される。
このように、最少単位の拍数(例えば8拍)とその整数倍の拍数(たとえば、16拍、24拍など)で構成することによって、各情報(各データ)を8拍単位でモジュール化することができ、様々な拍数を含む拍子が混在する楽曲を考慮せずに済むため、ダンスコンテンツを簡単に生成できる。なお、本実施形態では、ダンスのデータを構成する最小単位である拍子が含む最少の数を8拍で説明しているが、これに限定されず一以上の拍であればよい。
図3に戻り、楽曲情報記憶部22は、楽曲コンテンツの楽曲情報を記憶する。楽曲コンテンツの楽曲情報には、例示的に、楽曲ID、楽曲名、曲のテンポ、楽曲パートID、楽曲パート名、拍情報、楽曲の歌詞データ(テキストデータ)、および音声データが含まれる。拍情報は、例えば、ある楽曲パートにおける拍情報または拍子情報でもよいし、楽曲の他の単位における拍情報または拍子情報でもよい。楽曲情報記憶部22は、上記楽曲情報を互いに関連づけることなく記憶し、又は、上記楽曲情報の一部を互いに関連づけて記憶する。
楽曲情報記憶部22は、たとえば、上記楽曲情報のうち、楽曲IDおよび楽曲名を関連づけて記憶し、楽曲パートIDおよび楽曲パート名を関連づけて記憶する。また、楽曲情報記憶部22は、たとえば、楽曲パートIDおよび楽曲パート名を、楽曲の歌詞データ(テキストデータ)と音声データとのそれぞれに対応づけて記憶してもよい。なお、楽曲情報記憶部22は、後述するように、上記楽曲情報を図5に示す楽曲情報テーブルとして、互いに関連付けて記憶してもよい。
図5は、本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されている楽曲情報の一例を示す図である。特に、図5(a)は、ある楽曲におけるある楽曲パートの楽曲情報の一例を示す図である。図5(b)は、図5(a)の楽曲とは異なる楽曲におけるある楽曲パートの楽曲情報の一例を示す図である。
図5(a)は、楽曲T111の楽曲パートP113の楽曲情報テーブルを示している。図5(a)に示すように、当該テーブルは、例示的に、「楽曲ID」:T111と、「楽曲名」:楽曲111と、「テンポ」:5と、「パートID」:P113と、「パート名」:Aメロ002と、「拍情報」:8拍と、歌詞(テキスト)データと、音声データとを含んでいる。楽曲情報記憶部22は、「楽曲ID」:T111と、「楽曲名」:楽曲111と、「テンポ」:5と、「パートID」:P113と、「パート名」:Aメロ002と、「拍情報」:8拍と、歌詞(テキスト)データと、音声データとを関連づけて記憶している。なお、「テンポ」に関して、本実施形態に係るダンスゲーム内の設定として、たとえばテンポが最も速いものを10、最も遅いものを1とする場合、図5(a)の楽曲(楽曲パート)の「テンポ」は5であるため、中程度であることが理解できる。
図5(b)は、楽曲T231の楽曲パートP313の楽曲情報テーブルを示している。図5(b)に示すように、当該テーブルは、例示的に、「楽曲ID」:T231と、「楽曲名」:楽曲231と、「テンポ」:10と、「パートID」:P313と、「パート名」:Bサビ025と、「拍情報」:16拍と、歌詞(テキスト)データと、音声データとを含んでいる。楽曲情報記憶部22は、「楽曲ID」:T231と、「楽曲名」:楽曲231と、「テンポ」:10と、「パートID」:P313と、「パート名」:Bサビ025と、「拍情報」:16拍と、歌詞(テキスト)データと、音声データとを関連づけて記憶している。なお、図5(b)の楽曲(楽曲パート)のテンポは、「テンポ」:10であるため、本実施形態に係るダンスゲームにおいて最も早いテンポの楽曲であることが理解できる。
図3に戻り、カメラ動作情報記憶部24は、仮想カメラの動作情報を記憶する。当該仮想カメラの動作情報は、ユーザが楽曲コンテンツを視聴するための視点に対応する視点情報に対応する。ここで、視点とは、ユーザが楽曲コンテンツを視聴する際に、主にどこを見ているかという、注視点のことをいい、または、ユーザが楽曲コンテンツを視聴する際に、主にどの範囲を見ているかという、注視する範囲のことをいう。この注視する範囲は、再生装置5の楽曲コンテンツが表示されるディスプレイの一部であり、又はディスプレイ全体であってもよい。本実施形態において、ユーザが楽曲コンテンツ(ダンス動画)を視聴するための視点は、ダンス動画を構成する静止画および/または動画を撮像した仮想カメラの動作情報、たとえば仮想カメラの位置情報、方向に関する情報等に基づいている。
図6は、本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されているカメラ動作情報の一例を示す図である。図6に示すように、カメラ動作情報記憶部24は、当該カメラ動作情報テーブルとして、「動作ID」および「動作名」を互いに関連づけて記憶する。具体的には、カメラ動作情報記憶部24は、図6に示すように、「動作ID」:M01および「動作名」:前に固定、「動作ID」:M02および「動作名」:左に固定、「動作ID」:M03および「動作名」:右に固定、「動作ID」:M04および「動作名」:上に固定、「動作ID」:M05および「動作名」:下に固定、「動作ID」:M06および「動作名」:中央から左に移動、「動作ID」:M07および「動作名」:中央から右に移動、「動作ID」:M08および「動作名」:後ろから前に寄る、「動作ID」:M09および「動作名」:左後ろから左前に寄る、「動作ID」:M10および「動作名」:右後ろから右前に寄る、「動作ID」:M11および「動作名」:前から後ろに引く、「動作ID」:M12および「動作名」:左前から左後ろに引く、「動作ID」:M13および「動作名」:右前から右後ろに引く、を関連づけて記憶する。
カメラ動作情報のうち、「動作名」:「前に固定」に関して、後述するように楽曲コンテンツ内にはあるキャラクタが登場するが、たとえば、そのキャラクタの正面に仮想カメラが位置した場合、その位置を固定することを示している(たとえば図10,図11参照)。また、「動作ID」:「M11」および「動作名」:「前から後ろに引く」に関して、たとえば、当該キャラクタの正面に仮想カメラが位置した場合、その位置から後方に引く(その位置を基準としてキャラクタから離れていく)ことを示している。
図3に戻り、キャラクタ情報記憶部26は、楽曲コンテンツに含まれる(登場する)一以上のキャラクタのキャラクタ情報を記憶する。キャラクタ情報は、例示的に、キャラクタID,キャラクタ名、キャラクタのダンス動作を示すダンス動作ID,ダンス動作名、キャラクタのダンス位置(配置)を示すダンス位置(配置)ID,ダンス位置(配置)名を含む。キャラクタ情報記憶部26は、上記キャラクタ情報を互いに関連づけることなく記憶し、又は、上記キャラクタ情報の一部を互いに関連づけて記憶する。なお、キャラクタ情報記憶部26は、後述するように、上記キャラクタ情報を図7に示す各テーブルとして、互いに関連付けて記憶してもよい。
図7は、本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されているキャラクタ情報の一例を示す図である。特に、図7(a)は、キャラクタIDおよびキャラクタ名を関連づけて構成されるテーブルの一例を示した図である。図7(b)は、キャラクタのダンス動作IDおよびキャラクタのダンス動作名を関連づけて構成されるテーブルの一例を示した図である。図7(c)は、キャラクタのダンス位置IDおよびキャラクタのダンス位置名を関連づけて構成されるテーブルの一例を示した図である。
図7(a)に示すように、キャラクタIDおよびキャラクタ名のテーブルは、例示的に、「キャラクタID」:C001及び「キャラクタ名」:オトハ、「キャラクタID」:C002及び「キャラクタ名」:キョウカ、「キャラクタID」:C003及び「キャラクタ名」:カナデコ、「キャラクタID」:C004及び「キャラクタ名」:ネネ、「キャラクタID」:C005及び「キャラクタ名」:アリアが関連づけられて構成されている。
図7(b)に示すように、キャラクタのダンス動作IDおよびキャラクタのダンス動作名のテーブルは、例示的に、「ダンス動作ID」:D001及び「ダンス動作名」:アクティブ1、「ダンス動作ID」:D002及び「ダンス動作名」:アクティブ2、「ダンス動作ID」:D012及び「ダンス動作名」:キュート2、「ダンス動作ID」:D013及び「ダンス動作名」:キュート3、「ダンス動作ID」:D025及び「ダンス動作名」:ビューティ5が関連づけられて構成されている。ここで、「ダンス動作名」に関して、たとえば、「アクティブX(Xには数字が入る)」のダンス動作とは、活動的なダンス動作を示し、例えば、体を強く捻る、腕を激しく振るなど、活動的な観念を生じさせる動作をいう。また、「キュートX(Xには数字が入る)」のダンス動作とは、かわいらしさを感じさせるようなダンス動作を示している。
図7(c)に示すように、キャラクタのダンス位置IDおよびキャラクタのダンス位置名のテーブルは、例示的に、「ダンス位置ID」:P001及び「ダンス位置名」:ポジション001、「ダンス位置ID」:P005及び「ダンス位置名」:ポジション005、「ダンス位置ID」:P021及び「ダンス位置名」:ポジション021、「ダンス位置ID」:P032及び「ダンス位置名」:ポジション032、「ダンス位置ID」:P050及び「ダンス位置名」:ポジション050が関連づけられて構成されている。ここで、「ダンス位置」とは、後述するとおり、たとえば、複数のキャラクタがいる場合に、当該複数のキャラクタの配置、そして当該配置において、あるキャラクタに対して設定される位置に対応する情報である(図10および図11参照)。
図3に戻り、演出情報記憶部28は、楽曲コンテンツに含まれる演出(たとえば強調表示や効果音などの特殊効果)に関する情報を記憶する。
図8は、本発明の実施形態に係るコンテンツ生成装置のディスクドライブに記憶されている演出情報の一例を示す図である。図8に示すように、演出情報記憶部28は、演出情報テーブルとして、「演出ID」および「演出名」を互いに関連づけて記憶する。具体的には、演出情報記憶部28は、図8に示すように、「演出ID」:R001および「演出名」:強調表示1、「演出ID」:R002および「演出名」:強調表示2、「演出ID」:R003および「演出名」:強調表示3、「演出ID」:R004および「演出名」:強調表示4、「演出ID」:R005および「演出名」:強調表示5、「演出ID」:R006および「演出名」:強調表示6、「演出ID」:R101および「演出名」:効果音1、「演出ID」:R102および「演出名」:効果音2、「演出ID」:R103および「演出名」:効果音3、「演出ID」:R104および「演出名」:効果音4、「演出ID」:R105および「演出名」:効果音5を関連づけて記憶する。
演出情報のうち、「強調表示」は、後述するように本実施形態の楽曲コンテンツ(ダンス動画、ゲーム)においてキャラクタがダンスを行うが、このダンス又は楽曲に応じて、ユーザの興味を惹きつける、ユーザの興奮度を増すというような表示を追加する演出をいう。「強調表示」は、たとえば、ダンス又は楽曲に応じて、キャラクタの周囲を多数の星が舞うというような追加的な表示である。また、「効果音」は、たとえば、ダンスの盛り上がりに応じて、楽曲とは異なる音を追加する演出、又はダンスの盛り上がりに応じて、楽曲の音量を一時的にあげる演出をいう。
図3に戻り、受信部101は、外部装置からの各種情報、各種信号を受信するブロックである。たとえば、受信部101は、入力装置9からのユーザにより入力された操作情報に対応する制御信号を受信する。
情報管理部103は、コンテンツ生成装置3のハードディスクドライブ15に記録されている情報を管理するブロックである。たとえば、情報管理部103は、記憶部に記憶されている楽曲情報、仮想カメラ動作情報、キャラクタ情報、および演出情報のうち少なくとも一つを拍情報と関連付けるように管理する。具体的には、情報管理部103は、拍子ごとに楽曲情報、仮想カメラ動作情報、キャラクタ情報、及び演出情報のそれぞれを拍情報に関連付けて管理する。
図9は、本発明の実施形態に係る、拍子ごとに対応づけられる楽曲情報、仮想カメラ動作情報、演出情報、及びキャラクタ情報を模式的に示した対応関係図の一例である。図9では、8拍を含む連続する拍子で構成され、楽曲開始位置から当該拍子B1,B2,B3,・・・と楽曲終了位置まで続く楽曲を一例として説明する。なお、図9では、拍子が含む最少の数を8拍で説明しているが、これに限定されず一以上の拍であればよい。また、異なる複数の拍子を組み合わせて楽曲が構成されていてもよい。
図9に示すように、たとえば、情報管理部103は、楽曲情報、仮想カメラ動作情報、演出情報、及びキャラクタ情報を、拍子ごとに対応づけるように管理する。図9に示すように、楽曲情報1I1、仮想カメラ動作情報1I2、演出情報1I3、およびキャラクタ情報1I4が8拍(第1拍子)B1に関連づけられ、楽曲情報2I11、仮想カメラ動作情報2I12、演出情報2I13、およびキャラクタ情報2I14が8拍(第2拍子)B2に関連づけられ、楽曲情報3I21、仮想カメラ動作情報3I22、演出情報3I23、およびキャラクタ情報3I24が8拍(第3拍子)B3に関連づけられる。後述するように、コンテンツ生成部107は、これら拍子ごとに関連づけられた情報に基づいて楽曲コンテンツを生成する。
また、情報管理部103は、コンテンツ生成装置3のハードディスクドライブ15に記録されている情報を編集するブロックである。具体的には、情報管理部103は、管理されている楽曲情報、仮想カメラ動作情報、演出情報、及びキャラクタ情報のうち少なくとも一つを編集する。たとえば、ユーザがダンスゲームの映像、楽曲の構成の全体又は一部を変更したい場合(たとえば、楽曲のあるダンスモジュールを別のモジュールに変更する、登場するキャラクタの人数を変更する、あるキャラクタを他のキャラクタに変更する、仮想カメラの動作を変更する、演出を追加するなど)、ユーザの指示に基づいて、情報管理部103は、上記情報を編集する。
情報取得部105は、コンテンツ生成装置3のハードディスクドライブ15に記録されている情報を取得するブロックである。具体的には、情報取得部105は、拍情報記憶部20、楽曲情報記憶部22、カメラ動作情報記憶部24、キャラクタ情報記憶部26、および演出情報記憶部28のそれぞれに記憶されている情報を取得する。
コンテンツ生成部107は、楽曲コンテンツを生成するブロックである。具体的には、コンテンツ生成部107は、情報取得部105により取得された情報に基づいて楽曲コンテンツを生成する。
送信部109は、外部装置に各種コンテンツ、情報、および信号を送信するブロックである。具体的には、送信部109は、コンテンツ生成部107により生成された楽曲コンテンツを再生装置5に送信する。そして、再生装置5は、コンテンツ生成装置3からの楽曲コンテンツを再生する。
図10は、本発明の実施形態に係る再生装置により再生される楽曲コンテンツの再生画面の一例を示す図である。図10に示すように、再生装置5により再生される楽曲コンテンツは、ディスプレイD1に表示され、各ユーザ200A,B,Cは、その楽曲コンテンツを視聴している。その楽曲コンテンツでは、5人の女性キャラクタCがダンスをし、楽曲に対応する歌詞Tが表示され、多くの星が散りばめられたような特殊効果Rも施されている。
また、コンテンツ生成部107は、拍情報に基づく一つ以上の拍を含む拍子ごとに楽曲情報、仮想カメラ動作情報、キャラクタ情報、及び演出情報のそれぞれが拍情報に関連付けられ、当該拍情報に関連づけられた楽曲情報、仮想カメラ動作情報、およびキャラクタ情報に基づいて、拍子ごとに楽曲コンテンツを生成する。
具体的には、コンテンツ生成部107は、拍情報に基づく一つ以上の拍を含む拍子ごとに楽曲情報、仮想カメラ動作情報、およびキャラクタ情報のそれぞれが拍情報に関連付けられ、当該拍情報に関連づけられた楽曲情報、仮想カメラ動作情報、およびキャラクタ情報に基づいて、楽曲コンテンツにおける仮想カメラの動作が、拍子ごとに切り替わるように楽曲コンテンツを生成する。なお、演出情報はオプショナルな情報であるため、上記のとおり、コンテンツ生成部107は、演出情報を用いずに楽曲コンテンツを生成してもよい。
さらに、コンテンツ生成部107は、仮想カメラの動作が切り替わる前の拍子における最後の仮想カメラの動作と、当該拍子の直後の拍子における最初の仮想カメラの動作と、が異なるように楽曲コンテンツを生成する。具体的には、制御部100は、コンテンツ生成部107が、仮想カメラの動作が切り替わる前の拍子における最後の仮想カメラの動作と、当該拍子の直後の拍子における最初の仮想カメラの動作と、が同一になる仮想カメラ情報を選択できないように制御する。
図11は、本発明の実施形態に係る再生装置により再生される楽曲コンテンツの再生状況の一例を示す図である。図11(a)は、拍子N(1以上の整数)にディスプレイD11において再生される楽曲コンテンツを示し、図11(b)は、拍子N+1にディスプレイD12において再生される楽曲コンテンツを示し、図11(c)は、拍子N+2にディスプレイD13において再生される楽曲コンテンツを示す。図11(a),(b),(c)に示すように、拍子ごとに再生される楽曲コンテンツの仮想カメラの動作が切り替わっている。このように、コンテンツ生成部107は、拍子ごとに少なくとも楽曲情報、仮想カメラ動作情報、およびキャラクタ情報のそれぞれが拍情報に関連付けられ、当該拍情報に関連づけられた、少なくとも楽曲情報、仮想カメラ動作情報、およびキャラクタ情報に基づいて、楽曲コンテンツにおける仮想カメラの動作が、拍子ごとに切り替わるように楽曲コンテンツを生成する。
図12は、本発明の実施形態に係る楽曲コンテンツの再生処理フローの一例を示すフローチャートである。
まず、本実施形態においてユーザ200がダンスゲームを開始するための所定の処理(ゲームへのログインなど)は終了していることを前提に以下説明する。図12に示すように、まずユーザ200は、コンテンツ生成装置3に対し、入力装置9を介して楽曲情報などの各種情報の編集開始を指示する(ステップSP1)。
次に、コンテンツ生成装置3は、ユーザ200の指示に基づいて、上記情報の編集、管理を実行する(ステップSP2)。
次に、ユーザ200は、楽曲コンテンツ再生の指示をコンテンツ生成装置3に対して行う(ステップSP3)。
次に、コンテンツ生成装置3は、ハードディスクドライブ15に記録されている情報を取得する(ステップSP4)。次に、取得した情報に基づいて、楽曲コンテンツを生成する(ステップSP5)。
次に、コンテンツ生成装置3は、生成した楽曲コンテンツを再生装置5に送信する(ステップSP6)。次に、再生装置5は、コンテンツ生成装置3からの楽曲コンテンツを再生する(ステップSP7)。
以上、本発明の実施形態によれば、仮想カメラを拍子毎に切り替えるようにしたことにより、ダンスデータのモジュール化を実現した。また、本発明においては、各ダンスモジュールは、例えば、キャラクタが右手を挙げた状態、およびキャラクタが左手を挙げた状態のダンスコンテンツを拍子ごとにモジュール化され、それを拍子ごとに管理、編集される。そして、たとえ従来の右手を挙げた状態で終わったすぐ次に、左手を挙げた状態から始まるダンスコンテンツの場合であっても、仮想カメラの動作を拍子ごとに切り替えてしまうために、キャラクタの動作の不連続性を解消でき、且つ、コンテンツの生成を容易にすることができる。
<他の変形例>
なお、上記各実施形態は、本発明の理解を容易にするためのものであり、本発明を限定して解釈するものではない。本発明はその趣旨を逸脱することなく、変更/改良(たとえば、各実施形態を組み合わせること、各実施形態の一部の構成を省略すること)され得るとともに、本発明にはその等価物も含まれる。例えば、上述の各処理ステップは処理内容に矛盾を生じない範囲で任意に順番を変更して又は並列に実行することができる。
また、本実施形態に係る再生装置は、テレビ又はコンピュータディスプレイを一例に挙げたが、これに限定されず、例えばタブレット型端末やマルチメディア端末等であってもよい。
1: コンテンツ生成システム
3: コンテンツ生成装置
5: 再生装置
7: ケーブル
9: 入力装置
10: 有線/無線インタフェース
11: アンテナ
12: データ処理部
14: メモリ
15: ハードディスクドライブ
16: ディスクドライブ
18: 記録媒体着脱部
19: バス
20: 拍情報記憶部
22: 楽曲情報記憶部
24: カメラ動作情報記憶部
26: キャラクタ情報記憶部
28: 演出情報記憶部
100: 制御部
101: 受信部
103: 情報管理部
105: 情報取得部
107: コンテンツ生成部
109: 送信部

Claims (7)

  1. 楽曲コンテンツの楽曲情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を前記楽曲コンテンツの楽曲の一つ以上の拍を含む拍子ごとに予め関連付けて管理する情報管理部と、
    拍子ごとに関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成部と、を備え、
    前記コンテンツ生成部は、前記拍子の前後で、前記キャラクタの動作が不連続であってよく、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成する、
    コンテンツ生成装置。
  2. 前記コンテンツ生成部は、前記仮想カメラの動作が切り替わる前の拍子における最後の仮想カメラの動作と、当該拍子の直後の拍子における最初の仮想カメラの動作と、が異なるように楽曲コンテンツを生成する、
    請求項1に記載のコンテンツ生成装置。
  3. 記情報管理部は、管理された前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報のうち少なくとも一つを編集する、
    請求項1又は請求項2に記載のコンテンツ生成装置。
  4. 前記楽曲情報、前記仮想カメラ動作情報、及び前記キャラクタ情報のうち少なくとも一つを前記拍子ごとに関連付けて記憶する記憶部をさらに備える、
    請求項1乃至請求項3の何れか1項に記載のコンテンツ生成装置。
  5. 楽曲コンテンツの楽曲情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を前記楽曲コンテンツの楽曲の一つ以上の拍を含む拍子ごとに予め関連付けて管理する情報管理ステップと、
    前記拍子ごとに関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成ステップと、を含み、
    前記コンテンツ生成ステップは、前記拍子の前後で、前記キャラクタの動作が不連続であってよく、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成する、
    コンテンツ生成方法。
  6. コンピュータに、
    楽曲コンテンツの楽曲情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を前記楽曲コンテンツの楽曲の一つ以上の拍を含む拍子ごとに予め関連付けて管理する情報管理機能と、
    前記拍子ごとに関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成機能と、
    前記コンテンツ生成機能において、前記拍子の前後で、前記キャラクタの動作が不連続であってよく、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成する機能と、
    を実現させるためのコンテンツ生成プログラム。
  7. コンテンツ生成装置と、再生装置と、を備えるコンテンツ生成システムであって、
    前記コンテンツ生成装置は、
    楽曲コンテンツの楽曲情報と、仮想カメラの動作に対応する仮想カメラ動作情報と、前記楽曲コンテンツに含まれるキャラクタの動作を示すキャラクタ動作情報を含むキャラクタ情報と、を前記楽曲コンテンツの楽曲の一つ以上の拍を含む拍子ごとに予め関連付けて管理する情報管理部と、
    前記拍子ごとに関連づけられた前記楽曲情報、前記仮想カメラ動作情報、および前記キャラクタ情報に基づいて、前記拍子ごとに楽曲コンテンツを生成するコンテンツ生成部と、
    生成された前記楽曲コンテンツを前記再生装置に送信する送信部と、を備え、
    前記コンテンツ生成部は、前記拍子の前後で、前記キャラクタの動作が不連続であってよく、前記楽曲コンテンツにおける前記仮想カメラの動作が、前記拍子ごとに切り替わるように楽曲コンテンツを生成し、
    前記再生装置は、
    前記コンテンツ生成装置から送信された前記楽曲コンテンツを再生する、
    コンテンツ生成システム。
JP2014197144A 2014-09-26 2014-09-26 コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システム Active JP6532205B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014197144A JP6532205B2 (ja) 2014-09-26 2014-09-26 コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014197144A JP6532205B2 (ja) 2014-09-26 2014-09-26 コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システム

Publications (2)

Publication Number Publication Date
JP2016071433A JP2016071433A (ja) 2016-05-09
JP6532205B2 true JP6532205B2 (ja) 2019-06-19

Family

ID=55864710

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014197144A Active JP6532205B2 (ja) 2014-09-26 2014-09-26 コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システム

Country Status (1)

Country Link
JP (1) JP6532205B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7081922B2 (ja) * 2017-12-28 2022-06-07 株式会社バンダイナムコエンターテインメント プログラム、ゲーム装置及びゲームを実行するための方法
JP7464774B1 (ja) 2023-03-31 2024-04-09 株式会社Cygames 情報処理システム、情報処理方法、ゲーム装置および情報処理プログラム
CN117351120B (zh) * 2023-12-06 2024-03-19 青岛蓝飞互娱科技股份有限公司 一种3d游戏动画生成方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4755672B2 (ja) * 2008-06-17 2011-08-24 ヤフー株式会社 コンテンツ編集装置、方法及びプログラム
JP5206378B2 (ja) * 2008-12-05 2013-06-12 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP5554677B2 (ja) * 2010-10-07 2014-07-23 Kddi株式会社 映像コンテンツ生成システム、映像コンテンツ生成装置及びコンピュータプログラム

Also Published As

Publication number Publication date
JP2016071433A (ja) 2016-05-09

Similar Documents

Publication Publication Date Title
WO2018149175A1 (zh) 视频录制方法、装置和电子设备
JP6532205B2 (ja) コンテンツ生成装置、コンテンツ生成方法、コンテンツ生成プログラム、及びコンテンツ生成システム
KR20140145584A (ko) 재생속도 변경이 가능한 실시간 온라인 비디오 재생 방법 및 시스템
JP6282684B2 (ja) 情報処理プログラム、情報処理装置及び情報処理方法
KR20140132209A (ko) 멀티 트랙 미디어 파일이 기록된 기록 매체, 멀티 트랙 미디어 파일 편집 방법, 및 멀티 트랙 미디어 파일 편집 장치
US20190019533A1 (en) Methods for efficient annotation of audiovisual media
JP2011205601A (ja) 画像処理装置及び画像処理方法
JP6344379B2 (ja) 情報処理装置、及び情報処理方法
JP6027272B2 (ja) 2d−3d複合次元コンテンツファイルを用いた複合次元コンテンツサービス提供システム、そのサービス提供方法及びその複合次元コンテンツファイル
JP6161886B2 (ja) 音声出力システム、情報処理装置、情報処理プログラム、および音声出力制御方法
JPH1195778A (ja) 同期映像生成方法およびそれを用いたカラオケ装置
JP5351674B2 (ja) ゲーム装置、ゲーム制御方法、ならびに、プログラム
WO2018173312A1 (ja) 仮想現実視聴システム、再生同期方法および仮想現実視聴用プログラム
JP4382045B2 (ja) データ出力装置、データ出力方法、データ出力プログラム、および記録媒体
JP2009005012A (ja) データ配信装置、データ配信方法およびプログラム
JP2013232904A (ja) 画像処理装置、画像処理プログラム及び画像処理方法
Mallinder Live or Memorex. Changing perceptions of music practices
JP2013046661A (ja) ゲーム機における楽曲切り替え装置
US8116484B2 (en) Sound output device, control method for sound output device, and information storage medium
JP4607210B2 (ja) 再生装置、再生方法、ならびに、プログラム
CN103310815B (zh) 再现装置和再现装置的控制方法
JP4847999B2 (ja) 再生装置、再生システム、再生方法、ならびに、プログラム
JP4333532B2 (ja) 再生装置
JP5675302B2 (ja) コンテンツ再生装置およびコンテンツ再生方法
JP4880298B2 (ja) プログラム、情報記憶媒体、及びデータ再生システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170720

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190423

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190521

R150 Certificate of patent or registration of utility model

Ref document number: 6532205

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250