JP2021056906A - 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム - Google Patents

記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム Download PDF

Info

Publication number
JP2021056906A
JP2021056906A JP2019181022A JP2019181022A JP2021056906A JP 2021056906 A JP2021056906 A JP 2021056906A JP 2019181022 A JP2019181022 A JP 2019181022A JP 2019181022 A JP2019181022 A JP 2019181022A JP 2021056906 A JP2021056906 A JP 2021056906A
Authority
JP
Japan
Prior art keywords
data
recording
function
movement
playback device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019181022A
Other languages
English (en)
Other versions
JP6716004B1 (ja
Inventor
進之介 岩城
Shinnosuke Iwaki
進之介 岩城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Virtual Cast Inc
Original Assignee
Virtual Cast Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Virtual Cast Inc filed Critical Virtual Cast Inc
Priority to JP2019181022A priority Critical patent/JP6716004B1/ja
Application granted granted Critical
Publication of JP6716004B1 publication Critical patent/JP6716004B1/ja
Priority to CN202080060681.4A priority patent/CN114600449B/zh
Priority to PCT/JP2020/036810 priority patent/WO2021065868A1/ja
Publication of JP2021056906A publication Critical patent/JP2021056906A/ja
Priority to US17/686,792 priority patent/US11949847B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327—Table of contents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Processing Or Creating Images (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

【課題】再生装置が再生できる機能に応じて、ＶＲコンテンツを記録する記録装置を提供しつつ、可能な範囲だけＶＲコンテンツを再生する再生装置を提供することを目的とする。【解決手段】仮想空間内のオブジェクトの動きを記録する記録装置であって、当該記録装置が記録するオブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、記録装置は、制御部と、記憶部とを備え、制御部は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶部に記憶させ、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶部に記憶させる。【選択図】図４

Description

本開示は、ＶＲコンテンツの記録装置、再生装置、記録再生システム、記録方法、再生方法、記録プログラム及び再生プログラムに関する。
従来からＶＲ（仮想現実、バーチャル・リアリティ）技術を用いてオブジェクトとオブジェクトの動作をＶＲコンテンツとして記録し、再生装置により再生する技術が知られている。例えば、国際公開第２０１９／０６９４３６号（特許文献１）には、工場設備の稼働状況を示す時刻毎の３次元座標の情報を取得し、再生の指示に基づいて、工場設備の稼働状況を示す３次元形状の動作をシミュレートした映像を表示することが開示されている。
国際公開第２０１９／０６９４３６号
しかしながら、現在、ＶＲコンテンツの記録や再生処理の方式として様々な方式が混在している。例えば、記録装置により、ある動作のＶＲコンテンツが記録されており、再生装置がこのＶＲコンテンツを読み取り、当該動作を再現できる再生プログラムを有していない場合は、このＶＲコンテンツがそもそも再生できないおそれがある。
また、ＶＲコンテンツを記録する記録装置の機能がバージョンアップ等により充実化していき、記録装置がオブジェクトに設定できる機能が増えれば増えるほど、このＶＲコンテンツを再生するため、再生側にも同じ機能が必要となる。ここで、コンピュータを記録装置として動作させるプログラムと、再生装置として動作させるプログラムとを同一の事業者が提供する場合は、記録装置のプログラムのバージョンアップに伴い、再生装置側のプログラムについてもバージョンアップしていき、記録装置が設定できる機能を再生装置でも再現できることが期待される。
しかしながら、ユーザの嗜好にあわせて、再生装置として動作させるプログラムが様々な事業者によって提供され得る場合、再生装置のプログラムが、記録装置のプログラムのバージョンアップに対応しきれていないこともあり得る。その結果、再生装置のユーザが、ＶＲコンテンツを再生させることができないおそれもある。そこで、ＶＲコンテンツをすべて再現できないとしても、再生装置の機能に応じて、可能な範囲だけ再生する技術が望まれる。
本開示は、上記事情に鑑みてなされたものであり、記録装置に備わる機能に対して再生装置が対応しきれていない場合においても、ユーザがＶＲコンテンツを視聴することを可能とする技術を提供することを目的とする。
一実施の形態によると、仮想空間内のオブジェクトの動きを記録する記録装置が提供される。記録装置が記録するオブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、記録装置は、制御部と、記憶部とを備え、制御部は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶部に記憶させ、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶部に記憶させる。
一実施の形態によると、記録装置により記録したデータを再生する再生装置が提供される。再生装置は、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する。
一実施の形態によると、仮想空間内のオブジェクトの動きを記録する記録装置と、記録装置により記録したデータを再生する再生装置とを備えるシステムが提供される。記録装置が記録するオブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、記録装置は、制御部と、記憶部とを備え、制御部は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶部に記憶させ、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶部に記憶させる。再生装置は、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する。
一実施の形態によると、仮想空間内のオブジェクトの動きを記録する記録方法が提供される。記録方法により記録するオブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、記録方法は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶させ、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶させる。
一実施の形態によると、記録方法により記録したデータを再生する再生方法が提供される。再生方法は、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する。
一実施の形態によると、仮想空間内のオブジェクトの動きを記録するコンピュータにおいて実行される記録プログラムが提供される。記録プログラムにより記録するオブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、コンピュータは、プロセッサと、メモリとを備え、記録プログラムは、プロセッサに、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶させるステップを実行させ、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶させる。
一実施の形態によると、記録プログラムにより記録したデータを再生するコンピュータにおいて実行される再生プログラムが提供される。コンピュータは、プロセッサと、メモリとを備え、記録プログラムは、プロセッサに、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定するステップと、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生するステップとを実行させる。
本開示によれば、再生装置が再生できる機能に応じて、ＶＲコンテンツを記録する記録装置を提供しつつ、可能な範囲だけＶＲコンテンツを再生する再生装置を提供することができる。
本発明の第１実施形態における記録装置の機能的な構成を示す図である。 本発明の第１実施形態における再生装置の機能的な構成を示す図である。 本発明の第１の実施形態における記録装置に記憶されているデータのデータ構造の一例を表す図である。 本発明の第１の実施形態におけるコンテンツの記録再生システムの処理の流れの一例を示すフローチャートである。 本発明の第１の実施形態における再生装置の表示画面の一例を示す図である。 本発明の第２の実施形態におけるコンテンツの記録再生システムの全体の構成を示す図である。 本発明の第２実施形態における記録装置の機能的な構成を示す図である。 本発明の第２実施形態における再生装置の機能的な構成を示す図である。 本発明の第２の実施形態における記録装置に記憶されているデータのデータ構造の一例を表す図である。 本発明の第２の実施形態におけるコンテンツの記録再生システムの処理の流れの一例を示すフローチャートである。 本発明の第２の実施形態における再生装置の表示画面の一例を示す図である。 本発明の第３の実施形態における記録装置の機能的な構成を示す図である。 本発明の第３の実施形態における再生装置の機能的な構成を示す図である。 本発明の第３の実施形態における記録装置に記憶されているデータのデータ構造の一例を表す図である。 本発明の第３の実施形態におけるコンテンツの記録再生システムの処理の流れの一例を示すフローチャートである。 本発明の第３の実施形態における再生装置の表示画面の一例を示す図である。
まず、本明細書で利用する用語について説明する。「ＶＲコンテンツ」とは、３次元コンピュータグラフィックス（３ＤＣＧ）や音声などから成る、バーチャルリアリティ（ＶＲ）をユーザが体験するためのデータである。また、「３ＤＣＧ空間」とは、ディスプレイ上などに描画された３ＤＣＧによって表現される仮想空間である。また、「オブジェクト」とは、３ＤＣＧ空間内に配置されている仮想的な物体であり、アバターオブジェクトを含む。
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。
（第１の実施形態）
本開示の第１の実施形態である、記録装置によりＶＲコンテンツを記録し、再生装置により再生（タイムシフト再生）するコンテンツ記録再生システムについて説明する。
＜１ コンテンツ記録再生システムの構成＞
まず、図１を用いて本実施形態に係るコンテンツ視聴システムの構成、記録装置１０の機能的な構成及び再生装置２０の機能的な構成について説明する。
コンテンツ視聴システムは、図１に示す記録装置１０と、図２に示す再生装置２０とを含む。記録装置１０は仮想空間におけるオブジェクトの動作を記録してＶＲコンテンツとして記憶する。再生装置２０は、記録装置１０によって記録したＶＲコンテンツを読み出してオブジェクトの動作を再生する。
記録装置１０と再生装置２０とは、ネットワークを介して通信可能である。記録装置１０は、記録されるＶＲコンテンツをサーバ装置等にアップロードすることとしてもよい。再生装置２０は、サーバ装置等から、アップロードされたＶＲコンテンツを受信する。すなわち、記録装置１０によって記録したＶＲコンテンツは、記録媒体の配布又はインターネットなどのネットワークを介して再生装置２０に提供される。ＶＲコンテンツを格納した記録媒体は、ＢＤ−ＲＯＭ（Blu-ray（登録商標） Disc read only memory）、フレキシブルディスク、光磁気ディスク等の様に情報を光学的、電気的或いは磁気的に記録する記録媒体、ＲＯＭ、フラッシュメモリ等の様に情報を電気的に記録する半導体メモリ等、様々なタイプの記録媒体を用いてよい。また、ネットワークの通信回線は、有線でもよいし無線でもよい。
＜１．１ 記録装置１０の構成＞
図１は、記録装置１０の機能的な構成を示す図である。記録装置１０は仮想空間におけるオブジェクトの動作を記録してＶＲコンテンツとして記憶する装置であり、図１に示すように、記録装置１０は、記憶部１０１と、制御部１０２と、を備える。
当該仮想空間は、例えば、全天球状の構造を有することとしてもよい。仮想空間では、例えば、仮想空間の中心を原点とするＸＹＺ座標系が規定され、仮想空間に配置される各オブジェクトの位置は、仮想空間に規定されるＸＹＺ座標系における座標値として規定される。ＸＹＺ座標系は、例えば、現実空間におけるグローバル座標系に対応することとしてもよい。ＸＹＺ座標系は、仮想空間における座標系の一種であるため、ＸＹＺ座標系における水平方向、鉛直方向（上下方向）及び前後方向は、それぞれＸ軸、Ｙ軸及びＺ軸として規定される。したがって、ＸＹＺ座標系のＸ軸（水平方向）がグローバル座標系のＸ軸と平行であり、ＸＹＺ座標系のＹ軸（鉛直方向）がグローバル座標系のＹ軸と平行であり、ＸＹＺ座標系のＺ軸（前後方向）がグローバル座標系のＺ軸と平行であることとしてもよい。
記憶部１０１は、オブジェクトの動作をＶＲコンテンツとして記録するためのデータ及びプログラムを記憶し、具体的には、データ区分規則１０１１と、オブジェクト動きデータベース１０１２と、オブジェクト機能データベース１０１３とを記憶している。データ区分規則１０１１は、オブジェクトの動作を示すデータを再生する際、再生装置が特定可能なデータ区分に関する規則を保持するためのデータベースである。オブジェクト動きデータベース１０１２及びオブジェクト機能データベース１０１３は、オブジェクトの動作を示すためのデータを保持するデータベースである。詳細は後述する。
制御部１０２は、仮想空間におけるオブジェクトの動作をデータとして記憶部１０１に記憶する処理を行う。具体的に、制御部１０２は、記録装置１０のプロセッサがプログラムに従って処理を行うことにより、各種モジュールとして示す機能を発揮する。
データ取得モジュール１０２１は、仮想空間におけるオブジェクトの動作に関するデータを取得する処理を行う。データ取得モジュール１０２１は、例えば、記録装置１０のユーザがコントローラを操作することでオブジェクトを動かす操作を取得する。このようなコントローラとしては、ユーザの両手で把持されるものと、ユーザの右手または左手にそれぞれ把持されるハンドコントローラが含まれる。例えば、記録装置１０のユーザが、ハンドコントローラを把持したまま動かすことにより、現実空間におけるハンドコントローラの動きのトラッキング結果に基づいて、仮想空間でペンオブジェクトを動かすことができることとしてもよい。このとき、ハンドコントローラに備わるボタン等への入力操作を受け付けることにより、仮想空間でペンオブジェクトの動きと連動して線オブジェクトを生成することとしてもよい。データ取得モジュール１０２１は、この他に、ユーザの身体の一部または全身の動きをキャプチャした結果に基づいて、仮想空間におけるオブジェクトの動作に関するデータを取得することとしてもよい。また、記録装置１０のユーザがヘッドマウントデバイスを装着する場合に、ヘッドマウントデバイスの動きに基づいて、仮想空間におけるオブジェクトに対する入力操作を行うこと、オブジェクトを動かすこととしてもよい。
データ区分モジュール１０２２は、データ取得モジュール１０２１により取得した、仮想空間におけるオブジェクトの動作に関するデータについて、記憶部１０１に記憶されているデータ区分規則に基づいて区分する処理を行う。
データ書込モジュール１０２３は、区分する処理が行われたデータを、オブジェクト動きＤＢ１０１２及びオブジェクト機能ＤＢ１０１３に書き込む処理を行う。
なお、図示していないが、ある態様において、記録装置１０は通信部を有してよい。当該通信部はネットワークを介して、記録装置１０により記録したＶＲコンテンツを外部の装置へ送信する。
＜１．２ 再生装置２０の構成＞
再生装置２０は、据え置き型のモニタ、ユーザに装着しているヘッドマウントデバイスなど、仮想空間を生成してＶＲコンテンツを再生するための画像表示装置である。再生装置２０は、ヘッドマウントデバイスにより実現する場合、ユーザの顔の向きに合わせてコンテンツを連動させて３６０度の視界を表現することができる。ヘッドマウントデバイスは、表示部を備える所謂ヘッドマウントディスプレイであってもよく、表示部を有するスマートフォン等の端末を装着可能なヘッドマウント機器であってもよい。
図２は、再生装置２０の機能的な構成を示す図である。図２に示すように、再生装置２０は、ＶＲコンテンツを再生するための装置であり、メモリ２０１と、記憶部２０２と、プロセッサ２０３と、データ読込部２０４と、検知部２０５と、表示部２０６とを備える。例えば、再生装置２０は、据え置き型のモニタ、ユーザの頭に装着しているヘッドマウントデバイス等である。
メモリ２０１は、プログラム、および、プログラム等で処理されるデータ等を一時的に記憶するためのものであり、例えばＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の揮発性のメモリである。
記憶部２０２は、データを保存するための記憶装置であり、例えばフラッシュメモリ、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）である。
プロセッサ２０３は、プログラムに記述された命令セットを実行するためのハードウェアであり、演算装置、レジスタ、周辺回路などにより構成される。
データ読込部２０４は、記録装置１０により記録したオブジェクトの動作に関するデータを、再生装置２０が再生可能な範囲に応じて、所定の手順で読み込む。例えば、再生装置２０は、オブジェクトの動きに関するデータと、オブジェクトの機能に関するデータと、を順次に読み込む。
検知部２０５は、重力センサとジャイロセンサと加速度センサ等から構成され、再生装置２０の回転や傾きや振動を検知する。なお、検知部２０５は再生装置２０の変位を検知できるものであれば他の種類のセンサを用いてもよい。例えば、再生装置２０がヘッドマウントデバイスにより構成される場合、検知部２０５は、ヘッドマウントデバイスを装着するユーザの頭部の動きを検出する。また、例えば、再生装置２０がスマートフォン、タブレット端末等の携帯機器により実現される場合、検知部２０５は、再生装置２０の傾きを検出する。以上のように、検知部２０５は、再生装置２０に対するユーザの操作を検出することができる。
表示部２０６は、コンテンツ配信サーバ１０から配信されるコンテンツを表示する。一例では、再生装置２０をヘッドマウントデバイスとして構成する場合、表示部２０６は、ユーザの両目の前方に位置するように再生装置２０の本体に配置され、右目用の画像及び左目用の画像は表示部２０６にそれぞれ表示する。ユーザの各目がそれぞれの画像を視認すると、ユーザは、両目の視差に基づき当該画像を三次元の画像として認識し、仮想空間に没入することができる。
表示部２０６は、例えば、非透過型又は透過型の表示装置として実現されるものであり、有機ＥＬ（有機エレクトロルミネッセンス）又はＬＣＤ（液晶ディスプレイ）等を用いてよい。また、網膜投影型デバイスを適用してもよい。
なお、図示していないが、ある態様において、再生装置２０は通信部を有してよい。当該通信部により、記録装置１０により記録したＶＲコンテンツは外部の装置からネットワークを介して再生装置２０へ送信される。
＜２ データ構造について＞
以下、本開示の第１の実施形態に係る記録装置１０に記憶されたデータのデータ構造について図３を用いて説明する。
図３は、第１の実施形態における記録装置１０により記憶されたＶＲコンテンツを構成するデータのデータ構造の一例を表す図である。記憶装置１０の記憶部１０１には、データ区分規則１０１１、オブジェクト動きデータベース１０１２、オブジェクト機能データベース１０１３とが記憶されている。
データ区分規則１０１１は、オブジェクトの動作を示すデータを再生する際、再生装置が特定可能なデータ区分に関する規則を保持するためのデータベースである。具体的には、オブジェクトの動作を再生するためのデータを、オブジェクトの位置変動を示す「オブジェクトの動き」と、オブジェクトの動きで実現する機能に関する「オブジェクトの機能」に分ける。そして、「オブジェクトの機能」を再生するためのデータについて、レベルごとに階層分けをする。
オブジェクト動きデータベース１０１２は、ＶＲコンテンツを構成する各オブジェクトが、ＶＲコンテンツの再生を開始してからどのように配置され、移動され、変形されたかを保持するデータベースである。具体的には、ＶＲコンテンツの再生を開始してからの経過時間に応じて、ＶＲコンテンツを構成する各オブジェクトの座標の情報が保持される。すなわち、オブジェクト動きデータベース１０１１は、上記「オブジェクトの動き」を示すためのデータを保持するデータベースであり、項目「時刻」及び項目「座標」を含む。図示する例では、所定のオブジェクトの位置変動の例を示す。例えば、オブジェクトとして、「仮想空間におけるペン」を一例として挙げると、オブジェクト動きデータベース１０１２は、当該ペンの動きについて、各時刻でのペンの座標を記録する。
オブジェクト機能データベース１０１３は、上記「オブジェクトの機能」を示すためのデータを保持するデータベースであり、レベルごとに階層的に記憶される。オブジェクト機能データベース１０１３は、オブジェクトの動きで実現する機能に関する情報を含む。当該レベルは、オブジェクトの動作を再生するための各種データの必要度などによって決められる。図示する例では、レベルの値が小さいほど、データの必要性が高い例を示す。すなわち、レベル１の機能は、レベル２の機能よりも必要度が高い。
例えば、「仮想空間におけるペンを動かすことにより赤い線を引く」というペンの機能について、「ペンを動かす」機能に関するデータをレベル１のデータとし、「ペンで線を引く」機能に関するデータをレベル２のデータとし、「線を赤く描画する」機能に関するデータをレベル３のデータとして階層的に記憶する。すなわち、レベル２のデータの「ペンで線を引く」が、レベル１の「ペンを動かす」機能を前提としたものとした場合に、レベル１の機能のほうが、レベル２の機能よりもデータの必要度が高い。また、レベル３のデータ「線を赤く描画する」は、レベル２の「ペンで線を引く」を前提とした場合に、レベル２の機能のほうが、レベル３の機能よりもデータの必要度が高い。以上のように、レベルの階層が深まるにつれて（レベルの値が大きくなるにつれて）、その前段の階層における機能を前提とすることとしてもよい。
また、ある態様において、当該レベルは、バージョンアップする際に各機能の追加時点によって決められる。機能が追加される時点が早ければ早いほど、当該機能に関するデータのレベルが低くなる。また、当該新たな機能の区分に関するデータは、追加前の機能の区分に関するデータに続けて記憶される。例えば、バージョンアップする際、「線を赤く描画する」という新しい機能を追加する場合に、追加前に備えている機能である「ペンを動かす」、「ペンで線を引く」に関するデータをそれぞれレベル１、レベル２のデータとして記憶し、それに続けて、「線を赤く描画する」に関するデータをレベル３のデータとして記憶する。
＜３ 処理フロー＞
以下、本開示の第１の実施形態に係るコンテンツ記録再生システムの動作について、図４及び図５を参照しながら説明する。図４は、第１の実施形態におけるコンテンツの記録再生システムの処理の流れの一例を示すフローチャートであり、図５は、第１の実施形態における再生装置の表示画面の一例を示す図である。
図４のフローチャートは、記録装置１０及び再生装置２０の各動作の関連状態を示している。また、図４の説明では、記録装置１０と再生装置２０を互いに接続していない例を説明するが、これに限らずネットワークを介して通信可能に接続することとしてもよい。
まず、記録装置１０側の動作について説明する。
ステップＳ４１１において、記録装置１０は、仮想空間におけるオブジェクトの動作に関するデータを取得する。例えば、記録装置１０は、「仮想空間におけるペンを動かすことにより赤い線を引く」というペンの動作に関するデータを取得する。
ステップＳ４１２において、記録装置１０は、オブジェクトの動作に関するデータを、オブジェクトの動きに関するデータと、オブジェクトの機能に関するデータとに分けて記憶する。例えば、記録装置１０は、「仮想空間におけるペンを動かすことにより赤い線を引く」というペンの動作に関するデータを、ペンの位置変動に関するデータと、ペンを動かすことにより赤い線を引くことに関するデータとに分けて記憶する。
ステップＳ４１３において、記録装置１０は、オブジェクトの機能に関するデータについて、再生装置が再生できる機能の区分（レベル）に応じて階層的に記憶する。例えば、記録装置１０は、「仮想空間におけるペンを動かすことにより赤い線を引く」というペンの機能について、「ペンを動かす」機能に関するデータをレベル１のデータとし、「ペンで線を引く」機能に関するデータをレベル２のデータとし、「線を赤く描画する」機能に関するデータをレベル３のデータとして階層的に記憶する。
ステップＳ４１４において、記録装置１０は、オブジェクトの動きに関するデータと、階層分けがされたオブジェクトの機能に関するデータとを、記録装置１０の記憶部に書き込む。
次に、再生装置２０側の動作について説明する。
ステップＳ４２１において、再生装置２０は、記録装置１０により記録された、仮想空間におけるオブジェクトの動作に関するデータを読み込む。例えば、再生装置２０は、「仮想空間におけるペンを動かすことにより赤い線を引く」というペンの動作に関するデータを読み込む。
ステップＳ４２２において、再生装置２０は、オブジェクトの機能に関するデータのレベルについて、再生できる機能の区分（レベル）に応じて、各レベルが再生できるか否かを判断する。例えば、再生装置２０は、「線を赤く描画する」という再生機能を有するか否かに応じて、「線を赤く描画する」というレベル３のデータが再生できるか否かを判断する。
ステップＳ４２３において、再生装置２０は、オブジェクトの動きに関するデータと、オブジェクトの機能に関するデータのうち再生できると判断したレベルのデータと、を再生する。
例えば、図５（ａ）に示すように、再生装置２０は、「線を赤く描画する」という再生機能を有する場合に、ペンの位置変動に関するデータと、レベル１、レベル２、レベル３のデータとを再生し、「仮想空間におけるペンを動かすことにより赤い線を引く」というペンの動作を再生する。なお、図５（ａ）では、仮想空間においてペンオブジェクトを動かすことにより引かれた「赤い線」を、点線で示している。
また、図５（ｂ）に示すように、再生装置２０は、「仮想的なペンで線を引く」ことが再生可能で、「線を赤く描画する」という再生機能を有していない場合に、ペンの位置変動に関するデータと、レベル１、レベル２のデータとを再生し、「仮想空間におけるペンを動かすことにより線を引く」というペンの動作を再生する。
また、図５（ｃ）に示すように、再生装置２０は、「仮想的なペンを動かす」ことが再生可能で、「線を引く」という再生機能を有していない場合に、ペンの位置変動に関するデータと、レベル１のデータとを再生し、「仮想空間におけるペンを動かす」というペンの動作を再生する。
また、図示していないが、再生装置２０は、オブジェクトを動かす処理で利用できる機能が再生できない場合、再生できないことをユーザに通知する。これにより、再生装置のアップデートを促すことができる。
＜４ 効果の説明＞
以上のように、本開示の第１の実施形態に係るコンテンツ記録再生システムによれば、再生装置が再生できる機能に応じて、ＶＲコンテンツを記録する記録装置を提供しつつ、再生装置で再生が可能な範囲だけＶＲコンテンツを再生する技術を提供することができる。
（第２の実施形態）
本開示の第２の実施形態である、ＶＲコンテンツを再生しているユーザが入力したコメントオブジェクトを、記録装置が記録してコメント付きのＶＲコンテンツとして生成し、再生装置により再生するコンテンツ記録再生システムについて説明する。
まず、図６を用いて本実施形態に係るコンテンツ視聴システム２の構成について説明する。コンテンツ視聴システム２は、図７に示す記録装置３０と、図８に示す再生装置４０とを含み、記録装置３０と再生装置４０とは、ネットワークＮＷを介して通信可能に接続されている。図６では図示していないが、コンテンツ視聴システム２は、ＶＲコンテンツをユーザが視聴するためのユーザ端末と、ＶＲコンテンツをユーザ端末または再生装置４０へ配信するためのサーバ装置とが含まれることとしてもよい。記録装置３０は、ＶＲコンテンツを、ネットワークＮＷを介して再生装置４０へ配信する。記録装置３０は、ＶＲコンテンツを配信するためのサーバ装置等を経由して、ＶＲコンテンツを再生装置４０へ配信することとしてもよい。ＶＲコンテンツを視聴しているユーザは、再生装置４０によりコメントオブジェクトを入力して記録装置３０またはサーバ装置へ送信する。記録装置３０またはサーバ装置は、当該コメントオブジェクトを記録してコメント付きのＶＲコンテンツを生成する。再生装置４０は、ＶＲコンテンツを取得して再生する。ネットワークＮＷの通信回線は、有線でもよいし無線でもよい。なお、ＶＲコンテンツは、記録装置３０で記録され次第、ユーザ端末等へ配信されるライブ配信であってもよい。また、ＶＲコンテンツは、サーバ装置等へアップロードされ、サーバ装置等において、ユーザ端末からのアクセスを受け付けて、ユーザ端末で再生中のＶＲコンテンツに対するコメントの入力を受け付けることとしてもよい。記録装置３０またはサーバ装置は、ＶＲコンテンツの再生開始からの経過時間と、ユーザ端末から入力されるコメントとを対応付けて記憶する。
＜１．１ 記録装置３０の構成＞
図７は、記録装置３０の機能的な構成を示す図である。記録装置３０は仮想空間におけるオブジェクトの動作を記録してＶＲコンテンツとして記憶する装置であり、図７に示すように、記録装置３０は、記憶部３０１と、制御部３０２と、通信部３０３とを備える。
仮想空間の定義は、第１の実施形態における仮想空間と同様であるので、繰り返して説明しない。
記憶部３０１は、オブジェクトの動作をＶＲコンテンツとして記録するためのデータ及びプログラムを記憶し、具体的には、データ区分規則３０１１と、オブジェクト動きデータベース３０１２と、コメント表示機能データベース３０１３とを記憶している。データ区分規則３０１１は、コメント付きのＶＲコンテンツを再生する際、再生装置が特定可能なデータ区分に関する規則を保持するためのデータベースである。オブジェクト動きデータベース３０１２は、コメント以外のオブジェクトの動きを示すためのデータを保持するデータベースである。コメント表示機能ＤＢ３０１３は、ＶＲコンテンツを視聴しているユーザにより入力されたコメントを表示するためのデータを保持するデータベースである。詳細は後述する。
制御部３０２は、ＶＲコンテンツを視聴しているユーザにより入力されたコメントを記憶する処理を行う。具体的に、制御部３０２は、記録装置１０のプロセッサがプログラムに従って処理を行うことにより、各種モジュールとして示す機能を発揮する。
コメントデータ取得モジュール３０２１は、ＶＲコンテンツを視聴しているユーザにより入力されたコメントを取得する処理を行う。例えば、記録装置３０は、所定時刻のオブジェクトの動きに対してユーザが入力したコメントに関するデータを、ネットワークＮＷを介して取得する。
コメントデータ区分モジュール３０２２は、コメントデータ取得モジュール３０２１により取得したコメントデータについて、記憶部３０１に記憶されているデータ区分規則に基づいて区分する処理を行う。
コメントデータ書込モジュール３０２３は、区分処理されたコメントデータを記録してコメント付きのＶＲコンテンツとして生成する処理を行う。
通信部３０３は、ネットワークＮＷを介して再生装置４０と通信を行う。通信部３０３により、記録装置２０は再生装置４０へ、コメントが付いていないＶＲコンテンツや、生成されたコメント付きのＶＲコンテンツを送信する。また、記録装置２０は再生装置４０から、ユーザが入力したコメントデータを受信して記録する。
＜１．２ 再生装置４０の構成＞
図８は、再生装置４０の機能的な構成を示す図である。図８に示すように、再生装置４０は、仮想空間においてＶＲコンテンツを再生するための装置であり、メモリ４０１と、記憶部４０２と、プロセッサ４０３と、データ読込部４０４と、検知部４０５と、表示部４０６と、通信部４０７と、コメント入力部４０８とを備える。例えば、再生装置４０は、スマートフォン、タブレット端末、ラップトップＰＣ等であってもよいし、ユーザの頭に装着しているヘッドマウントデバイスであってもよい。
メモリ４０１と、記憶部４０２と、プロセッサ４０３と、データ読込部４０４と、検知部４０５と、表示部４０６は、第１の実施形態におけるメモリ２０１と、記憶部２０２と、プロセッサ２０３と、データ読込部２０４と、検知部２０５と、表示部２０６と同様であるので、繰り返して説明しない。
通信部４０７は、ネットワークＮＷを介して記録装置３０と通信を行う。通信部４０７により、再生装置４０は記録装置３０へ、ユーザが入力したコメントデータを送信する。また、再生装置４０は記録装置３０から、コメントが付いていないＶＲコンテンツや、生成されたコメント付きのＶＲコンテンツを受信する。
コメント入力部４０８は、ユーザのコメントを入力する操作を受け付けるための部品である。例えば、ユーザはキーボード、コントローラやタッチスクリーンなどによりコメントを入力してよい。
＜２ データ構造について＞
以下、本開示の第２の実施形態に係る記録装置３０に記憶されたデータのデータ構造について図９を用いて説明する。
図９は、第２の実施形態における記録装置３０により記憶されたコメント付きのＶＲコンテンツを構成するデータのデータ構造の一例を表す図である。記憶装置３０の記憶部３０１には、データ区分規則３０１１、オブジェクト動きデータベース３０１２、コメント表示機能データベース３０１３とが記憶されている。
データ区分規則３０１１は、コメント以外のオブジェクトの動きとコメントからなるＶＲコンテンツを再生する際、再生装置が特定可能なデータ区分に関する規則を保持するためのデータベースである。具体的には、コメント以外のオブジェクトの動きとコメントからなるＶＲコンテンツを再生するためのデータを、コメント以外のオブジェクトの位置変動を示す「オブジェクトの動き」と、コメントを表示する「コメント表示機能」に分ける。そして、「コメント表示機能」を再生するためのデータについて、レベルごとに階層分けをする。
オブジェクト動きデータベース３０１２は、上記「コメント以外のオブジェクトの動き」を示すためのデータを保持するデータベースである。オブジェクト動きデータベース３０１２は、項目「時刻」及び項目「座標」を含み、所定オブジェクトの位置変動を示す。「仮想空間におけるペン」をオブジェクトの一例として挙げると、当該ペンの動きについて、各時刻でのペンの座標を記録する。
コメント表示機能データベース３０１３は、上記「コメント表示機能」を示すためのデータを保持するデータベースであり、レベルごとに階層的に記憶される。コメント表示機能データベース３０１３は、コメントを表示する機能に関する情報を含む。当該レベルは、コメントを再生装置で表示するための各種データの必要度などによって決められる。図示する例では、レベルの値が小さいほど、データの必要性が高い例を示す。
例えば、「仮想空間においてユーザが指定した色（赤い文字）でコメントを表示する」というコメント表示機能について、「コメントを所定の色で表示する」機能に関するデータをレベル１のデータとし、「所定の色をユーザが指定した赤で表示する」機能に関するデータをレベル２のデータとして階層的に記憶する。すなわち、レベル２のデータの「（コメントの）所定の色をユーザが指定した色（赤）で表示する」が、レベル１の「コメントを所定の色で表示する」機能を前提とした場合に、レベル１の機能のほうが、レベル２の機能よりもデータの必要度が高い。
また、ある態様において、当該レベルは、バージョンアップする際に各機能の追加時点によって決められる。機能が追加される時点が早ければ早いほど、当該機能に関するデータのレベルが低くなる。また、当該新たな機能の区分に関するデータは、追加前の機能の区分に関するデータに続けて記憶される。例えば、バージョンアップする際、「コメントを太字で表示する」という新しい機能を追加する場合に、追加前に備えている機能である「コメントを所定の色で表示する」、「コメントをユーザが指定した色（赤い文字）で表示する」に関するデータをそれぞれレベル１、レベル２のデータとして記憶し、それに続けて、「コメントを太字で表示する」に関するデータをレベル３のデータとして記憶する。以上の処理において、コメントは、仮想空間に配置する例を説明したが、ユーザの端末または再生装置４０で、ＶＲコンテンツへのコメントを表示させる場合、当該コメントを仮想空間に配置するのではなく、ユーザの端末または再生装置４０で仮想空間の仮想カメラの設定に従って描画される画面に重畳させて、コメントを表示させることとしてもよい。
＜３ 処理フロー＞
以下、本開示の第２の実施形態に係るコンテンツ記録再生システムの動作について、図１０及び図１１を参照しながら説明する。図１０は、第２の実施形態におけるコンテンツの記録再生システムの処理の流れの一例を示すフローチャートであり、図１１は、第２の実施形態における再生装置の表示画面の一例を示す図である。図１０のフローチャートは、記録装置３０及び再生装置４０の各動作の関連状態を示している。
まず、記録装置３０側の動作について説明する。
ステップＳ１０３１において、記録装置３０は、コメントが付いていないＶＲコンテンツを再生装置４０へ送信する。当該コメントが付いていないＶＲコンテンツは、コメント以外のオブジェクトの動きに関するデータからなってよい。
ステップＳ１０３２において、記録装置３０は、ユーザにより入力されたコメントデータを受信する。
ステップＳ１０３３において、記録装置３０は、コメント以外のオブジェクトの動きに関するデータと、コメント表示機能に関するデータとを分けて記憶する。
ステップＳ１０３４において、記録装置３０は、コメント表示機能に関するデータについて、再生装置が再生できる機能の区分（レベル）に応じて階層的に記憶する。例えば、記録装置３０は、「コメントをユーザが指定した赤い文字で表示する」というコメント表示機能について、「コメントを所定の色で表示する」機能に関するデータをレベル１のデータとし、「コメントをユーザが指定した色（赤）で表示する」機能に関するデータをレベル２のデータとして階層的に記憶する。
ステップＳ１０３５において、記録装置３０は、オブジェクトの動きに関するデータと、階層分けがされたコメント表示機能に関するデータとを、コメント付きのＶＲコンテンツとして生成して記憶部に書き込む。記録装置３０は、記録装置３０に書き込まれたＶＲコンテンツは、ＶＲコンテンツを配信するためのサーバ装置等へ送信してもよい。
次に、再生装置４０側の動作について説明する。
ステップＳ１０４１において、再生装置４０は記録装置３０から、コメントが付いていないＶＲコンテンツを受信して再生する。当該コメントが付いていないＶＲコンテンツは、コメント以外のオブジェクトの動きに関するデータからなってよい。
ステップＳ１０４２において、再生装置４０は、ユーザのコメントを入力する操作を受け付ける。ユーザはコメントの表示態様を指定することができる。
ステップＳ１０４３において、再生装置４０は記録装置３０から、コメント付きのＶＲコンテンツを受信し、コメント表示機能に関するデータについて、各レベルが再生できるか否かを判断する。例えば、再生装置４０は、「ユーザが指定した色（赤）でコメントを表示する」という再生機能を有するか否かに応じて、「ユーザが指定した色（赤）でコメントを表示する」というレベル２のデータが再生できるか否かを判断する。
ステップＳ１０４４において、再生装置４０は、コメント以外のオブジェクトの動きに関するデータと、コメント表示機能に関するデータのうち再生できると判断したレベルのデータと、を再生する。
例えば、図１１（ａ）に示すように、再生装置４０は、「コメントをユーザが指定した色（赤い文字）で表示する」という再生機能を有する場合に、ペンの位置変動に関するデータと、レベル１、レベル２のデータとを再生し、ユーザが指定した表示態様のように、「このペンほしい！」というコメントを、ユーザが指定した色（赤い文字）で再生する。なお、図１１（ａ）の例では、コメントが、ユーザの指定した色で表示されていることを、斜体および下線で示している。
また、図１１（ｂ）に示すように、再生装置４０は、「コメントをユーザが指定した色（赤い文字）で表示する」という再生機能を有していない場合に、ペンの位置変動に関するデータと、レベル１のデータとを再生し、ユーザが指定した表示態様にかかわらず、「このペンほしい！」というコメントを所定の色（例えば、黒色などの予め定められた色）で再生する。
また、図示していないが、再生装置４０は、指定した態様のコメント表示機能が再生できない場合、再生できないことをユーザに通知する。これにより、再生装置のアップデートを促すことができる。
＜４ 効果の説明＞
以上のように、本開示の第２の実施形態に係るコンテンツ記録再生システム２によれば、再生装置が再生できる機能に応じて、ＶＲコンテンツを視聴しているユーザが入力したコメントオブジェクトを記録する記録装置を提供しつつ、可能な範囲だけコメントオブジェクトを含むＶＲコンテンツを再生する再生装置を提供することができる。
（第３の実施形態）
本開示の第３の実施形態である、ＶＲコンテンツを再生しているユーザが付与したギフトオブジェクトを、記録装置が記録してギフトオブジェクト付きのＶＲコンテンツとして生成し、再生装置により再生するコンテンツ記録再生システムについて説明する。
まず、図１２、図１３を用いて本実施形態に係るコンテンツ視聴システム３の構成について説明する。コンテンツ視聴システム３は、図１２に示す記録装置５０と、図１３に示す再生装置６０とを含み、記録装置５０と再生装置６０とは、ネットワークを介して通信可能に接続されている。記録装置５０は、ＶＲコンテンツを、ネットワークを介して再生装置６０へ配信する。ＶＲコンテンツを視聴しているユーザは、再生装置６０によりギフトオブジェクトを付与して記録装置５０へ送信する。記録装置５０は当該ギフトオブジェクトを記録してギフトオブジェクト付きのＶＲコンテンツとして生成する。
＜１．１ 記録装置５０の構成＞
図１２は、記録装置５０の機能的な構成を示す図である。記録装置５０は仮想空間におけるオブジェクトの動作を記録してＶＲコンテンツとして記憶する装置であり、図１２に示すように、記録装置５０は、記憶部５０１と、制御部５０２と、通信部５０３とを備える。
仮想空間の定義は、第１の実施形態における仮想空間と同様であるので、繰り返して説明しない。
記憶部５０１は、オブジェクトの動作をＶＲコンテンツとして記録するためのデータ及びプログラムを記憶する。記憶部５０１は、具体的には、データ区分規則５０１１と、オブジェクト動きデータベース５０１２と、ギフト表示機能データベース５０１３とを記憶している。データ区分規則５０１１は、ギフトオブジェクト付きのＶＲコンテンツを再生する際、再生装置が特定可能なデータ区分に関する規則を保持するためのデータベースである。オブジェクト動きデータベース５０１２は、ユーザが視聴しているＶＲコンテンツにおけるオブジェクトの動きを示すためのデータを保持するデータベースである。ギフト付与機能ＤＢ５０１３は、ＶＲコンテンツを視聴しているユーザにより付与されたギフトオブジェクトを表示するためのデータを保持するデータベースである。詳細は後述する。
制御部５０２は、ＶＲコンテンツを視聴しているユーザにより入力されたギフトオブジェクトを記憶する処理を行う。具体的に、制御部５０２は、記録装置５０のプロセッサがプログラムに従って処理を行うことにより、各種モジュールとして示す機能を発揮する。
ギフトデータ取得モジュール５０２１は、ＶＲコンテンツを視聴しているユーザにより付与されたギフトデータを取得する処理を行う。例えば、所定時刻のオブジェクトの動きに対してユーザがギフトを付与したことを、ネットワークを介して取得する。
ギフトデータ区分モジュール５０２２は、ギフトデータ取得モジュール５０２１により取得したギフトデータについて、記憶部５０１に記憶されているデータ区分規則に基づいて区分する処理を行う。
ギフトデータ書込モジュール５０２３は、区分処理されたギフトデータを記録してギフトオブジェクト付きのＶＲコンテンツとして生成する処理を行う。
通信部５０３は、ネットワークを介して再生装置６０と通信を行う。通信部５０３により、記録装置５０は再生装置６０へ、ギフトオブジェクトが付いていないＶＲコンテンツや、生成されたギフトオブジェクト付きのＶＲコンテンツを送信する。また、記録装置５０は再生装置６０から、ユーザが付与したギフトデータを受信して記録する。
＜１．２ 再生装置６０の構成＞
図１３は、再生装置６０の機能的な構成を示す図である。図１３に示すように、再生装置６０は、仮想空間においてＶＲコンテンツを再生するための装置であり、メモリ６０１と、記憶部６０２と、プロセッサ６０３と、データ読込部６０４と、検知部６０５と、表示部６０６と、通信部６０７と、ギフト付与部６０８とを備える。例えば、再生装置６０は、携帯端末、据え置き型の情報処理端末、ユーザの頭に装着しているヘッドマウントデバイス等である。
メモリ６０１と、記憶部６０２と、プロセッサ６０３と、データ読込部６０４と、検知部６０５と、表示部６０６と、通信部６０７は、第２の実施形態におけるメモリ４０１と、記憶部４０２と、プロセッサ４０３と、データ読込部４０４と、検知部４０５と、表示部４０６と、通信部４０７と同様であるので、繰り返して説明しない。
ギフト付与部６０８は、ユーザから、ＶＲコンテンツの配信者へギフトを付与する操作を受け付けるための部品である。例えば、ユーザはキーボード、コントローラやタッチスクリーンなどによりギフトを付与してよい。
＜２ データ構造について＞
以下、本開示の第３の実施形態に係る記録装置５０に記憶されたデータのデータ構造について図１４を用いて説明する。
図１４は、第３の実施形態における記録装置５０により記憶されたギフトオブジェクト付きのＶＲコンテンツを構成するデータのデータ構造の一例を表す図である。記憶装置３０の記憶部５０１には、データ区分規則５０１１、オブジェクト動きデータベース５０１２、ギフト付与機能データベース５０１３とが記憶されている。
データ区分規則５０１１は、ギフト以外のオブジェクトの動きとギフトオブジェクトからなるＶＲコンテンツを再生する際、再生装置が特定可能なデータ区分に関する規則を保持するためのデータベースである。具体的には、ギフト以外のオブジェクトの動きとギフトオブジェクトからなるＶＲコンテンツを再生するためのデータを、ギフトオブジェクト以外のオブジェクトの位置変動を示す「オブジェクトの動き」と、ギフトを付与する「ギフトを付与機能」に分ける。そして、「ギフトを付与機能」を再生するためのデータについて、レベルごとに階層分けをする。
オブジェクト動きデータベース５０１２は、上記「ギフトオブジェクト以外のオブジェクトの動き」を示すためのデータを保持するデータベースである。オブジェクト動きデータベース５０１２は、項目「時刻」及び項目「座標」を含み、所定オブジェクトの位置変動を示す。「仮想空間におけるペン」をオブジェクトの一例として挙げると、当該ペンの動きについて、各時刻でのペンの座標を記録する。
ギフト付与機能データベース５０１３は、上記「ギフト付与機能」を示すためのデータを保持するデータベースであり、レベルごとに階層的に記憶され、ギフトを付与する機能に関する。当該レベルは、ギフトを再生装置で表示するための各種データの必要度などによって決められる。データの必要度が高ければ高いほど、データのレベルの値が小さくなる。
例えば、「仮想空間においてユーザが指定した種類のギフトオブジェクトを表示する」というギフト付与機能について、「ギフトオブジェクトを所定の態様で表示する」機能に関するデータをレベル１のデータとし、「ユーザが指定した種類のギフトオブジェクトを表示する」機能に関するデータをレベル２のデータとして階層的に記憶する。
また、ある態様において、当該レベルは、バージョンアップする際に各機能の追加時点によって決められる。機能が追加される時点が早ければ早いほど、当該機能に関するデータのレベルが低くなる。また、当該新たな機能の区分に関するデータは、追加前の機能の区分に関するデータに続けて記憶される。
＜３ 処理フロー＞
以下、本開示の第３の実施形態に係るコンテンツ記録再生システムの動作について、図１５及び図１６を参照しながら説明する。図１５は、第３の実施形態におけるコンテンツの記録再生システムの処理の流れの一例を示すフローチャートであり、図１６は、第３の実施形態における再生装置の表示画面の一例を示す図である。図１５のフローチャートは、記録装置５０及び再生装置６０の各動作の関連状態を示している。
まず、記録装置５０側の動作について説明する。
ステップＳ１５５１において、記録装置５０は、ギフトオブジェクトが付いていないＶＲコンテンツを再生装置４０へ送信する。当該ギフトオブジェクトが付いていないＶＲコンテンツは、ギフトオブジェクト以外のオブジェクトの動きに関するデータからなってよい。例えば、ＶＲコンテンツがライブ配信によって生成される場合、記録装置５０は、記録装置５０のユーザの動きに応じてＶＲコンテンツを生成する。記録装置５０は、生成されたＶＲコンテンツを、サーバ装置等を経由することにより、または、サーバ装置等を経由することなく、ネットワークを介して再生装置６０へ送信する。
ステップＳ１５５２において、記録装置５０は、ユーザにより付与されたギフトデータを受信する。
ステップＳ１５５３において、記録装置５０は、ギフトオブジェクト以外のオブジェクトの動きに関するデータと、ギフト付与機能に関するデータとを分けて記憶する。
ステップＳ１５５４において、記録装置５０は、ギフト付与機能に関するデータについて、再生装置が再生できる機能の区分（レベル）に応じて階層的に記憶する。例えば、記録装置５０は、「仮想空間においてユーザが指定した種類のギフトオブジェクトを表示する」というギフト付与機能について、「ギフトオブジェクトを所定の態様で表示する」機能に関するデータをレベル１のデータとし、「ユーザが指定した種類のギフトオブジェクトを表示する」機能に関するデータをレベル２のデータとして階層的に記憶する。
ステップＳ１５５５において、記録装置５０は、オブジェクトの動きに関するデータと、階層分けがされたギフト付与機能に関するデータとを、ギフトオブジェクト付きのＶＲコンテンツとして生成して記憶部に書き込む。
次に、再生装置６０側の動作について説明する。
ステップＳ１５６１において、再生装置６０は記録装置５０から、ギフトオブジェクトが付いていないＶＲコンテンツを受信して再生する。当該ギフトオブジェクトが付いていないＶＲコンテンツは、ギフトオブジェクト以外のオブジェクトの動きに関するデータからなってよい。なお、ＶＲコンテンツに対して他のユーザがギフトオブジェクトを送信している場合、当該他のユーザが送信したギフトオブジェクトをＶＲコンテンツとともに再生装置６０で再生することとしてもよい。
ステップＳ１５６２において、再生装置６０は、ユーザのギフトを付与する操作を受け付ける。ユーザはギフトオブジェクトの表示態様を指定することができる。
ステップＳ１５６３において、再生装置６０は記録装置５０から、ギフトオブジェクト付きのＶＲコンテンツを受信し、ギフト付与機能に関するデータについて、各レベルが再生できるか否かを判断する。例えば、再生装置６０は、「所定の態様をユーザが指定した種類と表示する」という再生機能を有するか否かに応じて、「ユーザが指定した種類のギフトオブジェクトを表示する」というレベル２のデータが再生できるか否かを判断する。
ステップＳ１５６４において、再生装置６０は、ギフトオブジェクト以外のオブジェクトの動きに関するデータと、ギフト付与機能に関するデータのうち再生できると判断したレベルのデータと、を再生する。
例えば、図１６（ａ）に示すように、再生装置６０は、「ハート形のギフトオブジェクトを付与する」という再生機能を有する場合に、ペンの位置変動に関するデータと、レベル１、レベル２のデータとを再生し、ユーザが指定した種類の「ハート形のギフトオブジェクト」を付与することを再生する。
また、図１６（ｂ）に示すように、再生装置６０は、「ハート形のギフトオブジェクトを付与する」という再生機能を有していない場合に、ペンの位置変動に関するデータと、レベル１のデータとを再生し、ユーザが指定した種類にかかわらず、所定のギフトオブジェクトを付与することを再生する。
また、図示していないが、再生装置６０は、指定した種類のギフト付与機能が再生できない場合、ユーザが指定した種類にかかわらず所定のギフトオブジェクトを再生することとし、指定した種類のギフト付与機能が再生できないことをユーザに通知する。これにより、再生装置のアップデートを促すことができる。
＜４ 効果の説明＞
以上のように、本開示の第３の実施形態に係るコンテンツ記録再生システム３によれば、再生装置が再生できる機能に応じて、ＶＲコンテンツを視聴しているユーザが付与したギフトオブジェクトを記録する記録装置を提供しつつ、可能な範囲だけギフトオブジェクトを含むＶＲコンテンツを再生する再生装置を提供することができる。
＜付記＞
以上の各実施形態で説明した事項を以下に付記する。
（付記１）
仮想空間内のオブジェクトの動きを記録する記録装置（１０）であって、記録装置（１０）が記録するオブジェクトの動きのデータのデータ構造は、再生装置（２０）において当該オブジェクトの動きを再生させる処理に用いられるものであり、記録装置（１０）は、制御部と、記憶部とを備え、制御部は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶部に記憶させ（Ｓ４１２）、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶部に記憶させる（Ｓ４１３）。
（付記２）
（付記１）において、オブジェクトを動かす処理で利用できる機能について新たな機能が追加された場合、オブジェクトを動かす処理で利用できる機能について追加された区分のデータについては、追加前の区分のデータに続けて記憶部に記憶させる。
（付記３）
（付記１）に記載の記録装置（１０）により記録したデータを再生する再生装置（２０）であって、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し（Ｓ４２２）、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する（Ｓ４２３）。
（付記４）
（付記３）において、オブジェクトを動かす処理で利用できる機能が再生できない場合、再生できないことを通知する。
（付記５）
（付記１）〜（付記２）において、オブジェクトを動かす処理で利用できる機能とは、再生装置に、オブジェクトを動かす演者の操作によって生成された別のオブジェクトを表示することを含む。
（付記６）
（付記５）において、別のオブジェクトの表示態様に関するデータについては、再生装置が再生可能な態様の区分を再生装置が特定可能に記憶部に記憶させる。
（付記７）
（付記６）において、別のオブジェクトの表示態様に関するデータは、別のオブジェクトの色、大きさに関するデータを含む。
（付記８）
（付記１）〜（付記２）において、オブジェクトを動かす処理で利用できる機能とは、再生装置に、オブジェクトを動かす処理を視聴したユーザの操作によって生成された別のオブジェクトを表示することを含む。
（付記９）
（付記８）において、別のオブジェクトとは、ユーザの操作によって生成されたコメントオブジェクトであり（Ｓ１０３２）、再生装置において再生可能な水準を満たしている場合、ユーザが指定した表示態様のようにコメントオブジェクトを再生装置に表示させ、再生装置において再生可能な水準を満たしていない場合、ユーザが指定した表示態様にかかわらず、所定態様のコメントオブジェクトを再生装置に表示させる（Ｓ１０３４）。
（付記１０）
（付記８）において、別のオブジェクトとは、ユーザの操作によって生成されたギフトオブジェクトであり（Ｓ１５５２）、再生装置において再生可能な水準を満たしている場合、ユーザが指定した種類のギフトオブジェクトを再生装置に表示させ、再生装置において再生可能な水準を満たしていない場合、ユーザが指定したギフトオブジェクトの種類にかかわらず、所定のギフトオブジェクトを再生装置に表示させる（Ｓ１５５４）。
（付記１１）
仮想空間内のオブジェクトの動きを記録する記録装置（１０）と、記録装置（１０）により記録したデータを再生する再生装置（２０）とを備えるシステムであって、記録装置（１０）が記録するオブジェクトの動きのデータのデータ構造は、再生装置（２０）において当該オブジェクトの動きを再生させる処理に用いられるものであり、記録装置（１０）は、制御部と、記憶部とを備え、制御部は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶部に記憶させ（Ｓ４１２）、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶部に記憶させ（Ｓ４１３）、再生装置は、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し（Ｓ４２２）、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する（Ｓ４２３）。
（付記１２）
仮想空間内のオブジェクトの動きを記録する記録方法であって、記録方法により記録するオブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、記録方法は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶させ（Ｓ４１２）、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶させる（Ｓ４１３）。
（付記１３）
（付記１２）に記載の記録方法により記録したデータを再生する再生方法であり、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し（Ｓ４２２）、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する（Ｓ４２３）。
（付記１４）
仮想空間内のオブジェクトの動きを記録するコンピュータにおいて実行される記録プログラムであって、記録プログラムにより記録するオブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、コンピュータは、プロセッサと、メモリとを備え、記録プログラムは、プロセッサに、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶させるステップを実行させ（Ｓ４１２）、当該オブジェクトを動かす処理で利用できる機能に関するデータについては、再生装置が再生可能な機能の区分を再生装置が特定可能に記憶させる（Ｓ４１３）。
（付記１５）
（付記１４）に記載の記録プログラムにより記録したデータを再生するコンピュータにおいて実行される再生プログラムであって、コンピュータは、プロセッサと、メモリとを備え、記録プログラムは、プロセッサに、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定するステップ（Ｓ４２２）と、オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生するステップ（Ｓ４２３）とを実行させる。
１０ 記録装置、１０１ 記憶部、１０２ 制御部、２０ 再生装置、２０１ メモリ、２０２ 記憶部、２０３ プロセッサ、２０４ データ読込部、２０５ 検知部、２０６ 表示部

Claims (15)

  1. 仮想空間内のオブジェクトの動きを記録する記録装置であって、
    前記記録装置が記録する前記オブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、
    前記記録装置は、制御部と、記憶部とを備え、
    前記制御部は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶部に記憶させ、
    当該オブジェクトを動かす処理で利用できる機能に関するデータについては、前記再生装置が再生可能な機能の区分を前記再生装置が特定可能に前記記憶部に記憶させる、ことを特徴とする記録装置。
  2. 前記オブジェクトを動かす処理で利用できる機能について新たな機能が追加された場合、前記オブジェクトを動かす処理で利用できる機能について追加された区分のデータについては、追加前の区分のデータに続けて前記記憶部に記憶させる、ことを特徴とする請求項１に記載の記録装置。
  3. 請求項１に記載の記録装置により記録したデータを再生する再生装置であって、
    オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し、
    オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する、ことを特徴とする再生装置。
  4. 前記オブジェクトを動かす処理で利用できる機能が再生できない場合、再生できないことを通知する、ことを特徴とする請求項３に記載の再生装置。
  5. 前記オブジェクトを動かす処理で利用できる機能とは、前記再生装置に、オブジェクトを動かす演者の操作によって生成された別のオブジェクトを表示することを含む、ことを特徴とする請求項１〜２に記載の記録装置。
  6. 前記別のオブジェクトの表示態様に関するデータについては、前記再生装置が再生可能な態様の区分を前記再生装置が特定可能に前記記憶部に記憶させる、ことを特徴とする請求項５に記載の記録装置。
  7. 前記別のオブジェクトの表示態様に関するデータは、前記別のオブジェクトの色、大きさに関するデータを含むことを特徴とする請求項６に記載の記録装置。
  8. 前記オブジェクトを動かす処理で利用できる機能とは、前記再生装置に、オブジェクトを動かす処理を視聴したユーザの操作によって生成された別のオブジェクトを表示することを含む、ことを特徴とする請求項１〜２に記載の記録装置。
  9. 前記別のオブジェクトとは、ユーザの操作によって生成されたコメントオブジェクトであり、
    再生装置において再生可能な水準を満たしている場合、ユーザが指定した表示態様のようにコメントオブジェクトを前記再生装置に表示させ、
    再生装置において再生可能な水準を満たしていない場合、ユーザが指定した表示態様にかかわらず、所定態様のコメントオブジェクトを前記再生装置に表示させる、ことを特徴とする請求項８に記載の記録装置。
  10. 前記別のオブジェクトとは、ユーザの操作によって生成されたギフトオブジェクトであり、
    再生装置において再生可能な水準を満たしている場合、ユーザが指定した種類のギフトオブジェクトを前記再生装置に表示させ、
    再生装置において再生可能な水準を満たしていない場合、ユーザが指定したギフトオブジェクトの種類にかかわらず、所定のギフトオブジェクトを前記再生装置に表示させる、ことを請求項８に記載の記録装置。
  11. 仮想空間内のオブジェクトの動きを記録する記録装置と、前記記録装置により記録したデータを再生する再生装置とを備えるシステムであって、
    前記記録装置が記録する前記オブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、
    前記記録装置は、制御部と、記憶部とを備え、
    前記制御部は、オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶部に記憶させ、
    当該オブジェクトを動かす処理で利用できる機能に関するデータについては、前記再生装置が再生可能な機能の区分を前記再生装置が特定可能に前記記憶部に記憶させ、
    前記再生装置は、オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し、
    オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する、ことを特徴とするシステム。
  12. 仮想空間内のオブジェクトの動きを記録する記録方法であって、
    前記記録方法により記録する前記オブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、
    前記記録方法は、
    オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶させ、
    当該オブジェクトを動かす処理で利用できる機能に関するデータについては、前記再生装置が再生可能な機能の区分を前記再生装置が特定可能に記憶させる、ことを特徴とする方法。
  13. 請求項１２に記載の記録方法により記録したデータを再生する再生方法であり、
    オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定し、
    オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生する、ことを特徴とする再生方法。
  14. 仮想空間内のオブジェクトの動きを記録するコンピュータにおいて実行される記録プログラムであって、
    前記記録プログラムにより記録する前記オブジェクトの動きのデータのデータ構造は、再生装置において当該オブジェクトの動きを再生させる処理に用いられるものであり、
    前記コンピュータは、プロセッサと、メモリとを備え、前記記録プログラムは、前記プロセッサに、
    オブジェクトと関連付けて、当該オブジェクトの動きに関するデータと、当該オブジェクトを動かす処理で利用できる機能に関するデータとを記憶させるステップを実行させ、
    当該オブジェクトを動かす処理で利用できる機能に関するデータについては、前記再生装置が再生可能な機能の区分を前記再生装置が特定可能に記憶させる、ことを特徴とする記録プログラム。
  15. 請求項１４に記載の記録プログラムにより記録したデータを再生するコンピュータにおいて実行される再生プログラムであって、
    前記コンピュータは、プロセッサと、メモリとを備え、前記記録プログラムは、前記プロセッサに、
    オブジェクトを動かす処理で利用できる機能に関するデータのうち、再生装置において再生可能な機能を特定するステップと、
    オブジェクトの動きのデータと、特定された機能に関するデータとによりオブジェクトの動きを再生するステップとを実行させる、ことを特徴とする再生プログラム。

JP2019181022A 2019-09-30 2019-09-30 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム Active JP6716004B1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2019181022A JP6716004B1 (ja) 2019-09-30 2019-09-30 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム
CN202080060681.4A CN114600449B (zh) 2019-09-30 2020-09-29 记录装置、播放装置、系统、记录方法、播放方法、存储介质
PCT/JP2020/036810 WO2021065868A1 (ja) 2019-09-30 2020-09-29 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム
US17/686,792 US11949847B2 (en) 2019-09-30 2022-03-04 Recording device, reproduction device, system, recording method, reproduction method, recording program, and reproduction program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019181022A JP6716004B1 (ja) 2019-09-30 2019-09-30 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020099858A Division JP2021057003A (ja) 2020-06-09 2020-06-09 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム

Publications (2)

Publication Number Publication Date
JP6716004B1 JP6716004B1 (ja) 2020-07-01
JP2021056906A true JP2021056906A (ja) 2021-04-08

Family

ID=71131593

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019181022A Active JP6716004B1 (ja) 2019-09-30 2019-09-30 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム

Country Status (4)

Country Link
US (1) US11949847B2 (ja)
JP (1) JP6716004B1 (ja)
CN (1) CN114600449B (ja)
WO (1) WO2021065868A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6716004B1 (ja) 2019-09-30 2020-07-01 株式会社バーチャルキャスト 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム
JP7199791B2 (ja) * 2020-12-18 2023-01-06 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
JP6883140B1 (ja) * 2020-12-18 2021-06-09 グリー株式会社 情報処理システム、情報処理方法およびコンピュータプログラム
JP2022102041A (ja) * 2020-12-25 2022-07-07 時男 後藤 三次元アノテーション描写システム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000123191A (ja) * 1998-10-19 2000-04-28 Canon Inc 情報処理装置及び方法及び情報伝送システム
JP2002063034A (ja) * 2000-08-22 2002-02-28 Dainippon Printing Co Ltd 描画システム及び記録媒体
JP2002260004A (ja) * 2001-03-06 2002-09-13 Sharp Corp アニメーション再生端末、アニメーションの再生方法、および、そのプログラム
JP2005267655A (ja) * 2002-08-29 2005-09-29 Sharp Corp コンテンツ再生装置、コンテンツ再生方法、コンテンツ再生プログラム、コンテンツ再生プログラムを記録した記録媒体、および携帯通信端末
JP6446154B1 (ja) * 2018-05-09 2018-12-26 グリー株式会社 アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007334966A (ja) * 2006-06-13 2007-12-27 Toshiba Corp 情報記録装置及び情報再生装置
JP2008165420A (ja) * 2006-12-27 2008-07-17 Toshiba Corp 再生装置および再生方法
JP2008199314A (ja) * 2007-02-13 2008-08-28 Sony Corp 情報処理装置および情報処理方法、情報処理システム、プログラム、並びに、プログラム格納媒体
JP2014187559A (ja) * 2013-03-25 2014-10-02 Yasuaki Iwai 仮想現実提示システム、仮想現実提示方法
JP6305758B2 (ja) * 2013-12-25 2018-04-04 株式会社ミクシィ 管理システム、管理システムによる管理方法、管理装置、管理装置の制御方法及びプログラム
JP6723743B2 (ja) * 2015-12-28 2020-07-15 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
US20180314322A1 (en) * 2017-04-28 2018-11-01 Motive Force Technology Limited System and method for immersive cave application
CN111183401B (zh) 2017-10-05 2021-07-06 三菱电机株式会社 监视系统及监视方法
CN112585673A (zh) * 2018-08-29 2021-03-30 索尼公司 信息处理设备、信息处理方法及程序
JP6716004B1 (ja) 2019-09-30 2020-07-01 株式会社バーチャルキャスト 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム
WO2021261081A1 (ja) * 2020-06-24 2021-12-30 ソニーグループ株式会社 情報処理装置、情報処理方法および記録媒体
CN112199016B (zh) * 2020-09-30 2023-02-21 北京字节跳动网络技术有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000123191A (ja) * 1998-10-19 2000-04-28 Canon Inc 情報処理装置及び方法及び情報伝送システム
JP2002063034A (ja) * 2000-08-22 2002-02-28 Dainippon Printing Co Ltd 描画システム及び記録媒体
JP2002260004A (ja) * 2001-03-06 2002-09-13 Sharp Corp アニメーション再生端末、アニメーションの再生方法、および、そのプログラム
JP2005267655A (ja) * 2002-08-29 2005-09-29 Sharp Corp コンテンツ再生装置、コンテンツ再生方法、コンテンツ再生プログラム、コンテンツ再生プログラムを記録した記録媒体、および携帯通信端末
JP6446154B1 (ja) * 2018-05-09 2018-12-26 グリー株式会社 アクターの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム

Also Published As

Publication number Publication date
WO2021065868A1 (ja) 2021-04-08
JP6716004B1 (ja) 2020-07-01
US11949847B2 (en) 2024-04-02
CN114600449A (zh) 2022-06-07
CN114600449B (zh) 2024-06-14
US20220385878A1 (en) 2022-12-01

Similar Documents

Publication Publication Date Title
WO2021065868A1 (ja) 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム
US11256474B2 (en) Multi-dimensional reference element for mixed reality environments
JP6518582B2 (ja) 情報処理装置および操作受付方法
US11609675B2 (en) Placement of objects in an augmented reality environment
JP4138747B2 (ja) 最適な再生モードでコンテンツを再生できるコンテンツ再生装置
EP2887322B1 (en) Mixed reality holographic object development
CN105359082B (zh) 用于用户接口导航的系统和方法
CN107590771A (zh) 具有用于在建模3d空间中投影观看的选项的2d视频
CN109407821B (zh) 与虚拟现实视频的协作交互
US10861249B2 (en) Methods and system for manipulating digital assets on a three-dimensional viewing platform
US20230073750A1 (en) Augmented reality (ar) imprinting methods and systems
US11395089B2 (en) Mixing audio based on a pose of a user
WO2017029918A1 (ja) 動画を特定の視野で表示するシステム、方法、及びプログラム
US20230260233A1 (en) Coordination of Interactions of Virtual Objects
WO2021131266A1 (ja) プログラム、情報処理装置及び方法
US20230351711A1 (en) Augmented Reality Platform Systems, Methods, and Apparatus
JP2021057003A (ja) 記録装置、再生装置、システム、記録方法、再生方法、記録プログラム、再生プログラム
Campbell A Rift in our Practices, Toward Preserving Virtual Reality
WO2020068917A1 (en) Intermediary emergent content
WO2022193931A1 (zh) 一种虚拟现实设备及媒资播放方法
Oliver et al. Palma360: A 360-degree Web-based Multi-device Hypervideo
JP7047168B1 (ja) コンテンツ提供システム、コンテンツ提供方法、及びコンテンツ提供プログラム
JP2017041872A (ja) 動画を特定の視野で表示するシステム、方法、及びプログラム
George Using Object Recognition on Hololens 2 for Assembly
Haghanikar Emerging Technologies: A Twist on EdTech Solutions

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190930

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190930

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191029

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20200127

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200406

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200601

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200609

R150 Certificate of patent or registration of utility model

Ref document number: 6716004

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250