JP6721399B2 - Ｖｒカラオケ - Google Patents
Ｖｒカラオケ Download PDFInfo
- Publication number
- JP6721399B2 JP6721399B2 JP2016087786A JP2016087786A JP6721399B2 JP 6721399 B2 JP6721399 B2 JP 6721399B2 JP 2016087786 A JP2016087786 A JP 2016087786A JP 2016087786 A JP2016087786 A JP 2016087786A JP 6721399 B2 JP6721399 B2 JP 6721399B2
- Authority
- JP
- Japan
- Prior art keywords
- karaoke
- image
- stb
- lyrics
- hmd
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000000007 visual effect Effects 0.000 claims description 5
- 230000001360 synchronised effect Effects 0.000 claims description 2
- 101150110418 STB3 gene Proteins 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 101000603420 Homo sapiens Nuclear pore complex-interacting protein family member A1 Proteins 0.000 description 1
- 102100038845 Nuclear pore complex-interacting protein family member A1 Human genes 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
本発明は、仮想現実（ＶＲ）を利用したカラオケシステムに関するものである。
ＶＲ（仮想現実）技術の進歩により、仮想現実の環境でさまざまな映像が楽しめるようになってきた。
ＶＲを提供する手段として代表的なものに、ヘッドマウントディスプレイ（ＨＭＤ）がある。ＨＭＤを利用すれば、手軽にＶＲ環境を楽しむことができる。
ＶＲを提供する手段として代表的なものに、ヘッドマウントディスプレイ（ＨＭＤ）がある。ＨＭＤを利用すれば、手軽にＶＲ環境を楽しむことができる。
近年では、ＶＲは拡張現実（ＡＲ）とも相まって仮想体験の世界を大きくしており、まだまだ利用範囲が広がりそうである。
その代表的な応用例のひとつがゲームであり、ゲーム関連の展示会等では各社からＶＲを利用したゲームのデモンストレーションが行われているが、ゲーム以外にもカラオケ演奏への応用が提案されている。
アイドルと一緒にステージデビューも！？仮想空間で究極のヒトカラを体験！Project Morpheus向け「JOYSOUND VR」を東京ゲームショウ2015に出展http://www.xing.co.jp/news/archives/5938
特許文献１は、遊戯者に対し現実に近い仮想現実感を与えた環境の下でゲームやカラオケ等の遊戯を楽しませることを目的とし、
ヘッドマウンティング式ディスプレイを用いずに、カラオケボックス等の独立した遊戯室内の壁面に大型の表示画面を少なくとも３面配設し、遊戯者自身が特定の立体空間内に存在しているような画像を表示し、カラオケやゲーム等を多様な形態で楽しめる環境を作り出すように構成する。浮揚像を大型表示画面の前方に表示させ、現実感の増した遊戯空間を作り出す。通信衛星や双方向ネットワークを介してゲームソフト等のデータを提供機関から配信する。
ヘッドマウンティング式ディスプレイを用いずに、カラオケボックス等の独立した遊戯室内の壁面に大型の表示画面を少なくとも３面配設し、遊戯者自身が特定の立体空間内に存在しているような画像を表示し、カラオケやゲーム等を多様な形態で楽しめる環境を作り出すように構成する。浮揚像を大型表示画面の前方に表示させ、現実感の増した遊戯空間を作り出す。通信衛星や双方向ネットワークを介してゲームソフト等のデータを提供機関から配信する。
非特許文献１は、「東京ゲームショウ2015」のプレスリリースで、360°パノラマ動画と3D音響により再現された仮想空間で究極の「一人カラオケ」が体験できる次世代のホームカラオケである。
特許文献１は、ＨＭＤを使用せずにカラオケにおけるＶＲ（仮想現実）空間の提案であり、非特許文献１は、東京ゲームショウへの出展である。両社ともＶＲ空間でカラオケ歌唱を目指すものであるため、実際のサービス時には歌詞等の歌唱補助情報も合成して表示することになると思われる。
しかし、ＨＭＤで表示する場合、頭の動きに合わせて表示風景が変わるため、通常に合成された歌唱補助情報は、歌唱者の視野から外れるという問題があった。
しかし、ＨＭＤで表示する場合、頭の動きに合わせて表示風景が変わるため、通常に合成された歌唱補助情報は、歌唱者の視野から外れるという問題があった。
上記の課題に鑑み、本発明の請求項１は、
ＶＲコンテンツを再生できるネットワークカラオケシステムであって、
歌唱者が装着するＶＲヘッドマウントディスプレイ（ＨＭＤ）が接続され、
当該ＨＭＤに、ＨＭＤ装着者の頭の動きに合わせたＶＲ映像と、当該装着者の向きに拠らず当該装着者の視野内に常に楽曲の歌詞等演奏補助情報が表示されることを特徴とするネットワークカラオケシステムにおいて、
カラオケ端末装置にセットトップボックス（ＳＴＢ） が接続され、
前記ＳＴＢには歌唱者が装着するＶＲヘッドマウントディスプレイ（ＨＭＤ）が接続され、当該ＳＴＢは、第１のＶＲ 映像を蓄積し、
利用者の楽曲再生指示をカラオケ端末装置が受け付けると、当該カラオケ端末装置は前記ＳＴＢにＶＲ映像の同期再生を指示し当該楽曲の音声を再生するとともに、音声に同期した歌詞を生成して前記ＳＴＢに送信し、当該ＳＴＢは前記ＨＭＤから受け取った歌唱者の「向き情報」に合わせて当該歌唱者の可視相当領域を切り取った第２のＶＲ映像１を生成し、当該第２のＶＲ映像１にカラオケ端末装置から受信した歌詞情報を当該歌唱者の視野内に楽曲の歌詞が表示されるように合成して前記ＨＭＤへ送信することにより、
当該ＨＭＤに、当該歌唱者の頭の動きに合わせた第２のＶＲ映像１と、当該歌唱者の向きに拠らず当該歌唱者の移動する視野内に常に楽曲の歌詞等演奏補助情報が表示されることを特徴とするネットワークカラオケシステムである。
ＶＲコンテンツを再生できるネットワークカラオケシステムであって、
歌唱者が装着するＶＲヘッドマウントディスプレイ（ＨＭＤ）が接続され、
当該ＨＭＤに、ＨＭＤ装着者の頭の動きに合わせたＶＲ映像と、当該装着者の向きに拠らず当該装着者の視野内に常に楽曲の歌詞等演奏補助情報が表示されることを特徴とするネットワークカラオケシステムにおいて、
カラオケ端末装置にセットトップボックス（ＳＴＢ） が接続され、
前記ＳＴＢには歌唱者が装着するＶＲヘッドマウントディスプレイ（ＨＭＤ）が接続され、当該ＳＴＢは、第１のＶＲ 映像を蓄積し、
利用者の楽曲再生指示をカラオケ端末装置が受け付けると、当該カラオケ端末装置は前記ＳＴＢにＶＲ映像の同期再生を指示し当該楽曲の音声を再生するとともに、音声に同期した歌詞を生成して前記ＳＴＢに送信し、当該ＳＴＢは前記ＨＭＤから受け取った歌唱者の「向き情報」に合わせて当該歌唱者の可視相当領域を切り取った第２のＶＲ映像１を生成し、当該第２のＶＲ映像１にカラオケ端末装置から受信した歌詞情報を当該歌唱者の視野内に楽曲の歌詞が表示されるように合成して前記ＨＭＤへ送信することにより、
当該ＨＭＤに、当該歌唱者の頭の動きに合わせた第２のＶＲ映像１と、当該歌唱者の向きに拠らず当該歌唱者の移動する視野内に常に楽曲の歌詞等演奏補助情報が表示されることを特徴とするネットワークカラオケシステムである。
また、本発明の請求項２は、
前記請求項１記載のネットワークカラオケシステムにおいて、
歌唱時には、前記ＳＴＢは前記第２のＶＲ映像１と同じ「向き情報」に基づいた歌詞が付加されていない第２のＶＲ映像２を前記カラオケ装置に送信し、
当該カラオケ装置は、前記ＶＲ映像２に歌詞情報を付加してカラオケモニタに表示することにより、
当該ＨＭＤに表示される前記第２のＶＲ映像１と同じ「向き情報」に基づいた第２のＶＲ映像２が、カラオケモニタに表示されることを特徴とする請求項１記載のネットワークカラオケシステムである。
前記請求項１記載のネットワークカラオケシステムにおいて、
歌唱時には、前記ＳＴＢは前記第２のＶＲ映像１と同じ「向き情報」に基づいた歌詞が付加されていない第２のＶＲ映像２を前記カラオケ装置に送信し、
当該カラオケ装置は、前記ＶＲ映像２に歌詞情報を付加してカラオケモニタに表示することにより、
当該ＨＭＤに表示される前記第２のＶＲ映像１と同じ「向き情報」に基づいた第２のＶＲ映像２が、カラオケモニタに表示されることを特徴とする請求項１記載のネットワークカラオケシステムである。
また、本発明の請求項３は、
前記請求項２記載のネットワークカラオケシステムにおいて、
前記カラオケ装置は、前記ＳＴＢから受信した、歌詞表示を除いた第２のＶＲ映像２及びカラオケ音声とマイク音声を録画録音することができることを特徴とする請求項２記載のネットワークカラオケシステムである。
前記請求項２記載のネットワークカラオケシステムにおいて、
前記カラオケ装置は、前記ＳＴＢから受信した、歌詞表示を除いた第２のＶＲ映像２及びカラオケ音声とマイク音声を録画録音することができることを特徴とする請求項２記載のネットワークカラオケシステムである。
また、本発明の請求項４は、
前記請求項１乃至３記載のネットワークカラオケシステムにおいて、
カラオケ装置は、楽曲データが配信される際に、通常映像とＶＲ映像が配信された場合、
当該カラオケ装置にＳＴＢが接続されていれば、ＶＲ映像をＳＴＢに転送し、当該ＳＴＢは当該ＶＲ映像を保持し、当該カラオケ装置が当該楽曲を演奏するときには、当該ＳＴＢによりＶＲ映像を用いてカラオケ演奏を行ない、
当該カラオケ装置にＳＴＢが接続されていなければ、当該カラオケ装置はＶＲ映像の転送は行わず、当該楽曲が演奏されるときには、通常映像によりカラオケ演奏を行うことを特徴とする請求項１乃至３記載のネットワークカラオケシステムである。
前記請求項１乃至３記載のネットワークカラオケシステムにおいて、
カラオケ装置は、楽曲データが配信される際に、通常映像とＶＲ映像が配信された場合、
当該カラオケ装置にＳＴＢが接続されていれば、ＶＲ映像をＳＴＢに転送し、当該ＳＴＢは当該ＶＲ映像を保持し、当該カラオケ装置が当該楽曲を演奏するときには、当該ＳＴＢによりＶＲ映像を用いてカラオケ演奏を行ない、
当該カラオケ装置にＳＴＢが接続されていなければ、当該カラオケ装置はＶＲ映像の転送は行わず、当該楽曲が演奏されるときには、通常映像によりカラオケ演奏を行うことを特徴とする請求項１乃至３記載のネットワークカラオケシステムである。
これにより、カラオケ装置にヘッドマウントディスプレイ（ＨＭＤ）を接続して仮想現実（ＶＲ）映像を楽しむ際の不都合を解消することができる。
請求項１のイメージを図１で説明する。
カラオケ端末装置１には、モニタ２、アンプ５、ＳＴＢ３等が接続され、ＳＴＢ３経由で利用者の装着するＨＭＤ４に接続されている。
ＳＴＢ３には、ネットワークより配信された第１のＶＲ背景映像が格納されている。歌唱時には、ＨＭＤ４よりＨＭＤ装着者の頭の向きを示す「向き情報」がＳＴＢ３に送られ、ＳＴＢ３はこの「向き情報」を使用して、第１のＶＲ背景映像からＨＭＤ装着者の可視相当領域を切り取った第２のＶＲ背景映像を生成し、カラオケ装置１より送られた歌詞情報を当該第２のＶＲ背景映像に付加してＨＭＤ４へ送り、ＨＭＤ４はこれを表示する。これにより、ＨＭＤ４を装着した歌唱者の目には、頭の動きに合わせて見える映像が変化しても歌詞情報は視野から外れることなく定位置に歌詞を見ることができる。
カラオケ端末装置１には、モニタ２、アンプ５、ＳＴＢ３等が接続され、ＳＴＢ３経由で利用者の装着するＨＭＤ４に接続されている。
ＳＴＢ３には、ネットワークより配信された第１のＶＲ背景映像が格納されている。歌唱時には、ＨＭＤ４よりＨＭＤ装着者の頭の向きを示す「向き情報」がＳＴＢ３に送られ、ＳＴＢ３はこの「向き情報」を使用して、第１のＶＲ背景映像からＨＭＤ装着者の可視相当領域を切り取った第２のＶＲ背景映像を生成し、カラオケ装置１より送られた歌詞情報を当該第２のＶＲ背景映像に付加してＨＭＤ４へ送り、ＨＭＤ４はこれを表示する。これにより、ＨＭＤ４を装着した歌唱者の目には、頭の動きに合わせて見える映像が変化しても歌詞情報は視野から外れることなく定位置に歌詞を見ることができる。
本発明の請求項２においては、上記装着者に見えている映像をモニタ２にも表示させるというものであり、請求項３では、カラオケ装置が当該モニタ２に表示される映像を録画できるようにするというものである。
図２は、請求項４のイメージである。
前記請求項１乃至３の機能を実現するにあたり、その前段階として歌唱開始前までに楽曲データがカラオケセンター（未記載）からルータ９経由では配信される際、
当該楽曲にＶＲ背景映像がない場合には、通常の背景映像（Ｎｏｎ−ＶＲ映像）のみが配信され、カラオケ装置１は当該通常映像のみを使用してカラオケ演奏を行い、
当該楽曲にＶＲ背景映像がある場合にはＮＶＲ（Ｎｏｎ−ＶＲ）背景映像とＶＲ背景映像がカラオケ装置１に配信され、当該カラオケ装置１はＶＲ再生用のＳＴＢ３が接続されている場合には当該ＳＴＢ３にＶＲ背景映像を転送しておくというものである。
前記請求項１乃至３の機能を実現するにあたり、その前段階として歌唱開始前までに楽曲データがカラオケセンター（未記載）からルータ９経由では配信される際、
当該楽曲にＶＲ背景映像がない場合には、通常の背景映像（Ｎｏｎ−ＶＲ映像）のみが配信され、カラオケ装置１は当該通常映像のみを使用してカラオケ演奏を行い、
当該楽曲にＶＲ背景映像がある場合にはＮＶＲ（Ｎｏｎ−ＶＲ）背景映像とＶＲ背景映像がカラオケ装置１に配信され、当該カラオケ装置１はＶＲ再生用のＳＴＢ３が接続されている場合には当該ＳＴＢ３にＶＲ背景映像を転送しておくというものである。
これによりＶＲカラオケにおいても、ヘッドマウントディスプレイ（ＨＭＤ）を導入した際の不都合を解消することができ、関連市場が拡大する。
１・・・カラオケ端末装置
２・・・モニタ
３・・・ＳＴＢ
４・・・ＨＭＤ
５・・・アンプ
６・・・アクセスポイント
７・・・ＨＵＢ
８・・・スピーカ
９・・・ルータ
１０・・リモコン
２・・・モニタ
３・・・ＳＴＢ
４・・・ＨＭＤ
５・・・アンプ
６・・・アクセスポイント
７・・・ＨＵＢ
８・・・スピーカ
９・・・ルータ
１０・・リモコン
Claims (4)
- ＶＲコンテンツを再生できるネットワークカラオケシステムであって、
歌唱者が装着するＶＲヘッドマウントディスプレイ（ＨＭＤ）が接続され、
当該ＨＭＤに、ＨＭＤ装着者の頭の動きに合わせたＶＲ映像と、当該装着者の向きに拠らず当該装着者の視野内に常に楽曲の歌詞等演奏補助情報が表示されることを特徴とするネットワークカラオケシステムにおいて、
カラオケ端末装置にセットトップボックス（ＳＴＢ） が接続され、
前記ＳＴＢには歌唱者が装着するＶＲヘッドマウントディスプレイ（ＨＭＤ）が接続され、当該ＳＴＢは、第１のＶＲ 映像を蓄積し、
利用者の楽曲再生指示をカラオケ端末装置が受け付けると、当該カラオケ端末装置は前記ＳＴＢにＶＲ映像の同期再生を指示し当該楽曲の音声を再生するとともに、音声に同期した歌詞を生成して前記ＳＴＢに送信し、当該ＳＴＢは前記ＨＭＤから受け取った歌唱者の「向き情報」に合わせて当該歌唱者の可視相当領域を切り取った第２のＶＲ映像１を生成し、当該第２のＶＲ映像１にカラオケ端末装置から受信した歌詞情報を当該歌唱者の視野内に楽曲の歌詞が表示されるように合成して前記ＨＭＤへ送信することにより、
当該ＨＭＤに、当該歌唱者の頭の動きに合わせた第２のＶＲ映像１と、当該歌唱者の向きに拠らず当該歌唱者の移動する視野内に常に楽曲の歌詞等演奏補助情報が表示されることを特徴とするネットワークカラオケシステム。 - 前記請求項１記載のネットワークカラオケシステムにおいて、
歌唱時には、前記ＳＴＢは前記第２のＶＲ映像１と同じ「向き情報」に基づいた歌詞が付加されていない第２のＶＲ映像２を前記カラオケ装置に送信し、
当該カラオケ装置は、前記ＶＲ映像２に歌詞情報を付加してカラオケモニタに表示することにより、
当該ＨＭＤに表示される前記第２のＶＲ映像１と同じ「向き情報」に基づいた第２のＶＲ映像２が、カラオケモニタに表示されることを特徴とする請求項１記載のネットワークカラオケシステム。 - 前記請求項２記載のネットワークカラオケシステムにおいて、
前記カラオケ装置は、前記ＳＴＢから受信した、歌詞表示を除いた第２のＶＲ映像２及びカラオケ音声とマイク音声を録画録音することができることを特徴とする請求項２記載のネットワークカラオケシステム。 - 前記請求項１乃至３記載のネットワークカラオケシステムにおいて、
カラオケ装置は、楽曲データが配信される際に、通常映像とＶＲ映像が配信された場合、
当該カラオケ装置にＳＴＢが接続されていれば、ＶＲ映像をＳＴＢに転送し、当該ＳＴＢは当該ＶＲ映像を保持し、当該カラオケ装置が当該楽曲を演奏するときには、当該ＳＴＢによりＶＲ映像を用いてカラオケ演奏を行ない、
当該カラオケ装置にＳＴＢが接続されていなければ、当該カラオケ装置はＶＲ映像の転送は行わず、当該楽曲が演奏されるときには、通常映像によりカラオケ演奏を行うことを特徴とする請求項１乃至３記載のネットワークカラオケシステム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016025171 | 2016-02-12 | ||
| JP2016025171 | 2016-02-12 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017146578A JP2017146578A (ja) | 2017-08-24 |
| JP6721399B2 true JP6721399B2 (ja) | 2020-07-15 |
Family
ID=59681445
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016087786A Expired - Fee Related JP6721399B2 (ja) | 2016-02-12 | 2016-04-26 | Ｖｒカラオケ |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6721399B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102227998B1 (ko) * | 2018-09-06 | 2021-03-16 | 김창희 | 가상현실 노래방 시스템 및 그것을 이용한 vr 노래방 제공 방법 |
| CN110018571A (zh) * | 2018-12-31 | 2019-07-16 | 浙江理工大学 | 便携式虚拟现实ktv头盔 |
-
2016
- 2016-04-26 JP JP2016087786A patent/JP6721399B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2017146578A (ja) | 2017-08-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6565903B2 (ja) | 情報再生装置及び情報再生方法 | |
| JP5992210B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法 | |
| CN107277736B (zh) | 模拟系统、声音处理方法及信息存储介质 | |
| WO2012029790A1 (ja) | 映像提示装置、映像提示方法、映像提示プログラム、記憶媒体 | |
| KR101808452B1 (ko) | 하이브리드 ｖｒ 노래방 시스템 | |
| JP6721399B2 (ja) | Ｖｒカラオケ | |
| JP6646116B2 (ja) | 映像音声処理プログラム及びゲーム装置 | |
| JP6616023B2 (ja) | 音声出力装置、ヘッドマウントディスプレイ、音声出力方法及びプログラム | |
| WO2018008434A1 (ja) | 演奏上演装置 | |
| KR101809617B1 (ko) | 마이콘서트시스템 | |
| JP7503257B2 (ja) | コンテンツ収集・配信システム | |
| JP2007307098A (ja) | 仮想空間生成装置および方法 | |
| JP2014060690A (ja) | 音声出力システム、情報処理装置、情報処理プログラム、および音声出力制御方法 | |
| JP7053074B1 (ja) | 鑑賞システム、鑑賞装置及びプログラム | |
| JP2003009145A (ja) | パーソナライズ化される動作撮像システム | |
| JP3176560U (ja) | カラオケシステムとそのシステムを用いたカラオケ個室 | |
| JP2018028646A (ja) | 会場別カラオケ | |
| JP6927029B2 (ja) | 振動体感装置 | |
| JP2016166928A (ja) | 演出装置、演出方法、プログラム、ならびにアミューズメントシステム | |
| Collins et al. | Experimental sound mixing for The Well, a short film made for tablets | |
| KR20010111600A (ko) | 영화 상영시스템 | |
| JP2018036349A (ja) | いいとこ取りカラオケ | |
| WO2018198777A1 (ja) | 仮想現実画像提供装置および仮想現実画像提供用プログラム | |
| JP2004287362A (ja) | カラオケ装置 | |
| KR20100055662A (ko) | 클라이언트 단말 장치, 공연 감상 서비스 장치, 공연 감상 서비스 시스템 및 그 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190115 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191009 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191112 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191225 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200519 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200618 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6721399 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |