JP2023531929A - コンピュータシミュレーションメタデータに基づくビデオテンプレートの選択 - Google Patents

コンピュータシミュレーションメタデータに基づくビデオテンプレートの選択 Download PDF

Info

Publication number
JP2023531929A
JP2023531929A JP2022578857A JP2022578857A JP2023531929A JP 2023531929 A JP2023531929 A JP 2023531929A JP 2022578857 A JP2022578857 A JP 2022578857A JP 2022578857 A JP2022578857 A JP 2022578857A JP 2023531929 A JP2023531929 A JP 2023531929A
Authority
JP
Japan
Prior art keywords
video
template
metadata
identifying
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022578857A
Other languages
English (en)
Inventor
カーン、ムハンマッド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment LLC
Original Assignee
Sony Interactive Entertainment LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment LLC filed Critical Sony Interactive Entertainment LLC
Publication of JP2023531929A publication Critical patent/JP2023531929A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/53Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45Controlling the progress of the video game
    • A63F13/49Saving the game status; Pausing or ending the game
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45Controlling the progress of the video game
    • A63F13/49Saving the game status; Pausing or ending the game
    • A63F13/497Partially or entirely replaying previous game actions
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/53Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/63Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor by the player, e.g. authoring using a level editor
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/67Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor adaptively or by learning from player actions, e.g. skill level adjustment or by storing successful combat sequences for re-use
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G06V20/47Detecting features for summarising video content
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/303Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display
    • A63F2300/307Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display for displaying an additional window with a view from the top of the game field, e.g. radar screen
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Data Mining & Analysis (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Mathematical Physics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Processing Or Creating Images (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

【解決手段】コンピュータゲームメタデータを使用して、ユーザに配信するビデオテンプレートが選択され(502)、テンプレートにプレーヤまたはゲームのビデオが取り込まれる。各テンプレート(例えば300)は、独特のテキスト、オーディオ、及びオーバーレイなど、言い換えると、ゲームプレイの過程で収集されたメタデータに依存する独自のスタイルに、関連付けられ得る。【選択図】図1

Description

本出願は、概してコンピュータシミュレーションメタデータに基づいてビデオテンプレートを選択することに関する。
コンピュータゲームなどのコンピュータシミュレーションでは、ゲームプレイ中にメタデータが頻繁に生成される。メタデータは、ゲームで何が起こっているか、例えば、使用された武器、弾薬の残量、キャラクタの取る行動、オーディオ、ビデオアスペクトなどを、記述する。
本明細書で理解されるように、ゲーマーがビデオを生成するために使用することができるゲーマー用のビデオテンプレートが、コンピュータゲームからのメタデータを使用して選択され得る。各テンプレートは、独特のテキスト、オーディオ、及びオーバーレイなど、言い換えると、ゲームプレイの過程で収集されたメタデータに依存する独自のスタイルに、関連付けられ得る。
従って、一態様では、デバイスは、少なくとも1つのプロセッサを含み、少なくとも1つのプロセッサは、コンピュータゲームのプレイにより生成されたメタデータを識別し、メタデータに少なくとも部分的に基づいて、ユーザデバイスに提供するビデオテンプレートを識別する命令で、プログラムされる。ビデオテンプレートは、少なくとも第1のテンプレート部分を含む。
第1のテンプレート部分は、例えば、テキスト、またはオーバーレイ、またはオーディオ、またはウィジェットであり得る。
例示的な実施態様では、ビデオテンプレートは第1のビデオテンプレートであり、メタデータは第1のメタデータであり、命令は、コンピュータゲームのプレイにより生成された第2のメタデータを識別することを、実行可能であり得る。命令は、第2のメタデータに少なくとも部分的に基づいて、ユーザデバイスに提供する第2のビデオテンプレートを識別することを、実行可能であり得る。第2のビデオテンプレートは、第1のテンプレート部分とは異なる第2のテンプレート部分を少なくとも含む。
例示的な実施態様では、命令は、入力を受信し、入力に応答し、メタデータに基づいてビデオテンプレートを調整することを、実行可能であり得る。必要に応じて、命令は、ビデオテンプレートで提示用のビデオを自動的に生成することを、実行可能であり得る。または、命令は、ビデオを識別する入力をユーザから受信し、ビデオをビデオテンプレートに統合することを、実行可能であり得る。ビデオテンプレートは、少なくとも部分的に機械学習アルゴリズムを使用して、識別され得る。
別の態様では、デバイスは、少なくとも1つのプロセッサを含み、少なくとも1つのプロセッサは、ゲームプレイビデオの少なくとも1つのビデオクリップを識別し、システムサーバから受信した少なくとも1つのビデオテンプレートを使用して、ビデオクリップを提示する命令で、プログラムされる。
別の態様では、方法は、コンピュータゲームメタデータを使用して、ユーザに配信するビデオテンプレートを選択し、テンプレートにプレーヤまたはゲームのビデオを取り込むことを含む。方法は、ゲームプレイ中に収集されたメタデータに依存する独特のスタイルに、各テンプレートを関連付けることも含む。
本出願の詳細は、その構造及び動作の両方に関して、添付図面を参照して最もよく理解することができ、図面では、同様の参照番号は同様の部分を指す。
本発明の原理に従った実施例を含む例示的なシステムのブロック図である。 例示的なコンピュータゲームシステムのブロック図である。 例示的なビデオテンプレートを示す。 ビデオテンプレートサーバ及びゲームメタデータレポジトリのブロック図である。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 例示的なビデオテンプレートを示すスクリーンショットである。 例示的なビデオテンプレートを示すスクリーンショットである。 例示的なビデオテンプレートを示す。 例示的なビデオテンプレートを示す。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 本発明の原理と一致する例示的なユーザインターフェース(UI)のスクリーンショットである。 本発明の原理と一致する例示的なユーザインターフェース(UI)のスクリーンショットである。 本発明の原理と一致する例示的なユーザインターフェース(UI)のスクリーンショットである。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 例示的なビデオクリップを示す。 本発明の原理と一致する例示的なUIのスクリーンショットである。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 本発明の原理と一致する例示的なユーザインターフェース(UI)のスクリーンショットである。 本発明の原理と一致する例示的なユーザインターフェース(UI)のスクリーンショットである。 本発明の原理と一致する例示的なユーザインターフェース(UI)のスクリーンショットである。 編集用の例示的なモバイルデバイスUIのスクリーンショットである。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 本発明の原理と一致する例示的なロジックを、例示的なフローチャート形式で示す。 本発明の原理と一致する例示的なUIのスクリーンショットである。
本開示は、概して、限定ではないが、コンピュータゲームネットワークなどの一般消費者向け電子製品(CE)デバイスネットワークの態様を含むコンピュータエコシステムに関する。本明細書のシステムは、サーバコンポーネントとクライアントコンポーネントとを含み得、これらは、クライアントコンポーネントとサーバコンポーネントとの間でデータを交換できるように、ネットワークを介して接続され得る。クライアントコンポーネントは、1つ以上のコンピューティングデバイスを含み得、これには、Sony PlayStation(登録商標)などのゲームコンソール、またはMicrosoftもしくはNintendoもしくは他の製造者により製造されたゲームコンソール、仮想現実(VR)ヘッドセット、拡張現実(AR)ヘッドセット、ポータブルテレビ(例えばスマートテレビ、インターネット対応テレビ)、ラップトップ及びタブレットコンピュータなどのポータブルコンピュータ、ならびにスマートフォン及び下記に論述される追加例を含む他のモバイルデバイスが含まれる。これらのクライアントデバイスは、様々な動作環境で作動し得る。例えば、クライアントコンピュータのうちのいくつかは、例を挙げると、Linux(登録商標)オペレーティングシステム、Microsoftのオペレーティングシステム、もしくはUnix(登録商標)オペレーティングシステム、またはApple社もしくはGoogleにより製造されたオペレーティングシステムを、採用し得る。これらの動作環境を使用して、Microsoft製もしくはGoogle製もしくはMozilla製のブラウザ、または下記に論述されるインターネットサーバによりホストされるウェブサイトにアクセスできる他のブラウザプログラムなど、1つ以上ブラウジングプログラムが実行され得る。また、本発明の原理による動作環境を使用して、1つ以上のコンピュータゲームプログラムが実行され得る。
サーバ及び/またはゲートウェイは、1つ以上のプロセッサを含み得、1つ以上のプロセッサは、インターネットなどのネットワークを介してデータを送受信するようにサーバを構成する命令を実行する。または、クライアント及びサーバは、ローカルイントラネットまたは仮想プライベートネットワークを介して接続され得る。サーバまたはコントローラは、Sony PlayStation(登録商標)といったゲームコンソール、パーソナルコンピュータなどにより、インスタンス化され得る。
ネットワークを介してクライアントとサーバとの間で情報が交換され得る。そのために、及びセキュリティのために、サーバ及び/またはクライアントは、ファイアウォール、ロードバランサ、テンポラリストレージ、及びプロキシ、ならびに信頼性及びセキュリティのための他のネットワークインフラストラクチャを含み得る。1つ以上のサーバは、オンラインソーシャルウェブサイトなどの安全なコミュニティを、ネットワークメンバーに提供する方法を実施する装置を形成し得る。
プロセッサは、アドレスライン、データライン、及び制御ラインなどの様々なライン、ならびにレジスタ及びシフトレジスタにより、ロジックを実行することができるシングルチッププロセッサまたはマルチチッププロセッサであり得る。
ある実施形態に含まれるコンポーネントは、他の実施形態で任意の好適な組み合わせで使用されてもよい。例えば、本明細書で説明される及び/または図に描かれる様々なコンポーネントのいずれも、組み合わされてもよく、交換されてもよく、または他の実施形態から除外されてもよい。
「A、B、及びCのうちの少なくとも1つを有するシステム」(同様に「A、B、またはCのうちの少なくとも1つを有するシステム」及び「A、B、Cのうちの少なくとも1つを有するシステム」)には、Aを単独で、Bを単独で、Cを単独で、AとBを一緒に、AとCを一緒に、BとCを一緒に、及び/またはAとBとCを一緒に有するシステムなどが含まれる。
ここで具体的に図1を参照すると、例示的なシステム10が示されており、システム10は、上記で言及され下記でさらに説明される、本発明の原理による例示的なデバイスのうちの1つ以上を含み得る。システム10に含まれる例示的なデバイスのうちの第1のデバイスは、オーディオビデオデバイス(AVD)12などの一般消費者向け電子製品(CE)デバイスであり、例えば、TVチューナ(同等にTVを制御するセットトップボックス)を備えたインターネット対応TVなどであるが、これに限定されない。あるいは、AVD12は、コンピュータ制御型インターネット対応(「スマート」)電話、タブレットコンピュータ、ノートブックコンピュータ、HMD、装着可能コンピュータ制御型デバイス、コンピュータ制御型インターネット対応ミュージックプレーヤ、コンピュータ制御型インターネット対応ヘッドホン、埋め込み可能皮膚デバイスといったコンピュータ制御型インターネット対応埋め込み可能デバイスなどであってもよい。いずれにせよ、AVD12は、本発明の原理を実施する(例えば本発明の原理を実施するために他のCEデバイスと通信し、本明細書に説明されるロジックを実行し、本明細書に説明される任意の他の機能及び/または動作を実行する)ように構成されることを理解されたい。
従って、このような原理を実施するために、AVD12は、図1に示されるコンポーネントのうちのいくつかまたはすべてにより、確立され得る。例えば、AVD12は、1つ以上のディスプレイ14を含み得、これは、高解像度フラットスクリーンまたは「4K」以上の超高解像度フラットスクリーンで実装され得、ディスプレイ上のタッチを介してユーザ入力信号を受信するタッチ対応であり得る。AVD12は、本発明の原理に従ってオーディオを出力するための1つ以上のスピーカ16と、AVD12を制御するためにAVD12に可聴コマンドを入力する、例えばオーディオ受信器/マイクロホンなどの少なくとも1つの追加入力デバイス18と、を含み得る。例示的なAVD12はまた、1つ以上のプロセッサ24の制御下で、インターネット、WAN、LANなどの少なくとも1つのネットワーク22を介して通信するための1つ以上のネットワークインターフェース20を含み得る。グラフィックプロセッサ24Aも含まれ得る。よって、インターフェース20は、限定ではないが、Wi-Fi送受信器であり得、Wi-Fi送受信器は、限定ではないが、メッシュネットワーク送受信器などの無線コンピュータネットワークインターフェースの実施例である。プロセッサ24は、本発明の原理を実施するためにAVD12を制御するが、これには、例えばディスプレイ14を制御してディスプレイ14に画像を提示し、ディスプレイ14から入力を受信するなど、本明細書に説明されるAVD12の他の素子が含まれることを理解されたい。さらに、ネットワークインターフェース20は、有線もしくは無線のモデムもしくはルータであり得、または、無線電話送受信器、もしくは上記のWi-Fi送受信器などの他の好適なインターフェースであり得ることに、留意されたい。
上記に加えて、AVD12はまた、別のCEデバイスに物理的に接続するための高解像度マルチメディアインターフェース(HDMI(登録商標))ポートまたはUSBポート、及び/または、ヘッドホンを介してユーザにAVD12からのオーディオを提供するようにヘッドホンをAVD12に接続するためのヘッドホンポートなど、1つ以上の入力ポート26を含み得る。例えば、入力ポート26は、オーディオビデオコンテンツのケーブルまたは衛星ソース26aに、有線または無線を介して接続され得る。よって、ソース26aは、別個のもしくは統合されたセットトップボックス、または衛星受信器であり得る。または、ソース26aは、コンテンツを含むゲームコンソールまたはディスクプレーヤであり得る。ソース26aは、ゲームコンソールとして実装される場合、CEデバイス44に関連して後述されるコンポーネントのうちのいくつかまたはすべてを含み得る。
AVD12はさらに、一時的信号ではないディスクベースストレージまたはソリッドステートストレージなどの1つ以上のコンピュータメモリ28を含み得、これらは、いくつかの事例では、AVDのシャーシ内にスタンドアロンデバイスとして、またはAVプログラムを再生するためにAVDのシャーシの内部もしくは外部のパーソナルビデオレコーディングデバイス(PVR)もしくはビデオディスクプレーヤとして、またはリムーバブルメモリ媒体として、具現化される。また、いくつかの実施形態では、AVD12は、位置受信器または所在地受信器を含み得、これは、例えば携帯電話受信器、GPS受信器、及び/または高度計30などであるがこれらに限定されず、衛星または携帯電話基地局から地理的位置情報を受信し、情報をプロセッサ24に提供し、及び/またはプロセッサ24と連動してAVD12が配置されている高度を特定するように構成される。コンポーネント30はまた、AVD12の位置及び配向を3次元で特定するために、加速度計、ジャイロスコープ、及び磁力計の組み合わせを通常含む慣性測定ユニット(IMU)により、実装されてもよい。
AVD12の説明を続けると、いくつかの実施形態では、AVD12は、1つ以上のカメラ32を含み得、これは、熱画像カメラ、ウェブカメラなどのデジタルカメラ、及び/またはAVD12に統合されたカメラであり得、本発明の原理に従って写真/画像及び/またはビデオを収集するようにプロセッサ24により制御可能であり得る。AVD12には、ブルートゥース(登録商標)及び/または近距離無線通信(NFC)技術をそれぞれ使用して他のデバイスと通信を行うブルートゥース(登録商標)送受信器34及び他のNFC素子36も含まれ得る。例示的なNFC素子は、無線周波数識別(RFID)素子であり得る。
さらにまた、AVD12は、プロセッサ24に入力を提供する1つ以上の補助センサ37(例えば加速度計、ジャイロスコープ、サイクロメータなどのモーションセンサ、あるいは磁気センサ、赤外線(IR)センサ、光学センサ、速度及び/またはケイデンスセンサ、ジェスチャセンサ(例えばジェスチャコマンドを感知するセンサ)など)を含み得る。AVD12は、プロセッサ24への入力を提供する地上波(OTA)TV放送を受信するために、OTA TV放送ポート38を含み得る。前述に加えて、AVD12は、赤外線データ協会(IRDA)デバイスなどの赤外線(IR)送信器及び/またはIR受信器及び/またはIR送受信器42も含み得ることに留意されたい。バッテリ(図示せず)は、運動エネルギーを電力に変換してバッテリを充電し及び/またはAVD12に電力を供給し得る運動エネルギーハーベスタのように、AVD12に電力を供給するために提供され得る。
さらに図1を参照すると、AVD12に加えて、システム10は、1つ以上の他のCEデバイス類を含み得る。一実施例では、第1のCEデバイス44は、AVD12に直接送信される、及び/または後述のサーバを通して送信されるコマンドを介して、AVD12にコンピュータゲームのオーディオ及びビデオを送信するのに使用され得るコンピュータゲームコンソールであり得、一方で、第2のCEデバイス46は、第1のCEデバイス44と同様のコンポーネントを含み得る。示される実施例では、第2のCEデバイス46は、プレーヤにより操作されるコンピュータゲームコントローラ、またはプレーヤ47により装着されるヘッドマウントディスプレイ(HMD)として、構成され得る。示される実施例では、2つのCEデバイス44、46のみが示されるが、より少ないデバイスまたはより多いデバイスが使用されてもよいことが理解されよう。CEデバイスは、AVD12に関して示されるコンポーネントのうちのいくつかまたはすべてを実装し得る。下記の図に示されるコンポーネントのうちのいずれかは、AVD12の事例で示されるコンポーネントのうちのいくつかまたはすべてを組み込み得る。
ここで、前述の少なくとも1つのサーバ50を参照すると、これは、少なくとも1つのサーバプロセッサ52と、ディスクベースストレージまたはソリッドステートストレージなどの少なくとも1つの有形コンピュータ可読記憶媒体54と、少なくとも1つのネットワークインターフェース56とを含み、少なくとも1つのネットワークインターフェース56は、サーバプロセッサ52の制御下で、ネットワーク22を介して図1の他のデバイスとの通信を可能にし、実際に、本発明の原理に従ってサーバとクライアントデバイスとの間の通信を促進し得る。ネットワークインターフェース56は、例えば、有線もしくは無線のモデムもしくはルータ、Wi-Fi送受信器、または例えば無線電話送受信器などの他の好適なインターフェースであり得ることに、留意されたい。
従って、いくつかの実施形態では、サーバ50は、インターネットサーバまたはサーバ「ファーム」全体であり得、例えばネットワークゲームアプリケーションなどの例示的な実施形態で、システム10のデバイスがサーバ50を介して「クラウド」環境にアクセスできるように、「クラウド」機能を含み実行し得る。または、サーバ50は、1つ以上のゲームコンソール、または図1に示される他のデバイスと同じ部屋もしくはその近くにある他のコンピュータにより、実施され得る。
図2は、Sony PlayStation(登録商標)ブランドのコンソールなどの例示的なコンピュータシミュレーションコンソール200を示し、これは、1つ以上のゲームコントローラ204の制御下で、ディスプレイデバイス202に提示するためのコンピュータゲームのビデオ及びオーディオを提供する。付加的または代替的に、コンピュータゲームビデオは、例えばコントローラ204の制御下で、1つ以上のネットワークサーバ206により提供され得る。ディスプレイ202に提示されるゲームビデオ(「ゲームプレイ」)のクリップ208は、本明細書でさらに説明されるように、ユーザの使用のために記録され得る。同様に、例えば、ユーザがプレーヤまたはゲーマーとしての役割を果たしているクリップ210は、コンソール200、シミュレーションコントローラ204、または他のデバイスの一部であり得るカメラ212により生成され得る。
図3は、ビデオテンプレート300を示し、これは、図2に示されるクリップ208、210などの短い形式のビデオ(例えば最大60分であるが、通常はより短く、例えば15秒であるビデオ)を作成するための簡潔なインターフェースを促進する。本明細書で認識されるように、このようなクリップは、メッセージ及び迅速な消費に最適である。テンプレート300は、短い形式で編集が容易なバイラルビデオを作成する方法を提供する。テンプレート300は、カスタムオンラインサービスを介して配信され得る。
図3に示されるように、テンプレート300は、追加効果とともに、ビデオクリップ自体が関連付けられ得る領域302を含む。すぐに共有できるビデオクリップを素早く作成するために、これらの効果には、領域302とは別であり得る、または領域302にオーバーレイされ得る1つ以上のグラフィックオーバーレイ304、ならびにテキスト306、音楽308、及びフィルタ310が含まれ得る。テンプレート300はまた、配色213により特徴付けられ得、ゲームデータ(例えば武器装填)などの情報を表面化するために選択できるセレクタボタンなどのアクティブ要素314を含み得る。アクティブ要素314は、データを含むウェブページへのハイパーリンクで確立され得、これにより、追加データは「表面化」するように一覧化され得る。
テンプレート300は、現行のインターネットミームまたはトレンドを反映し得、ゲーム設計者は、これを使用して作成を行い、例えば図2に示されるサーバ206または本明細書でさらに論述されるクリップサーバに投稿することができる。プレーヤは、サーバに接続して、任意の新たなテンプレートをプルダウンすることができる。テンプレートは本質的に季節的または一時的であり得るため、これらが利用可能な間だけ人々により使用され得る。
本明細書で詳細に論述されるように、テンプレート300は、ゲームメタデータに基づいて提供され得る。すなわち、ゲームプレイを記述するメタデータに応じて、テンプレート群から特定のテンプレートが、クリップを作成する目的のプレーヤに提供され得る。図4にさらに例示される。
ビデオテンプレートサーバ400は、複数のテンプレート402を含み得る。データストアは、ゲームメタデータレポジトリ404を確立し得る。ユーザデバイス406(コンピュータゲームコンポーネントなど)は、ゲームプレイメタデータをレポジトリに提供し、メタデータに基づいて1つ以上のテンプレート402を受信し得る。
図5は、本明細書で説明されるコンピューティングデバイスのいずれかにより実行され得る、上記で論述されたロジックを示す。ブロック500から始まり、ゲームプレイ中にメタデータが収集される。メタデータは、ゲームプレイ中にプレーヤが行うアクションにより生成され、メタデータは、これらのアクション、ならびに背景プレゼンテーションなどの自動化ゲームアクションを示す。例えば、メタデータは通常、武器使用の時間及び性質、その結果(命中または失敗)、ならびに配色などの背景情報を記述する。メタデータは、プレーヤのスコア、及びゲームプレイの上達の進捗などの他の統計情報も示し得る。メタデータは、時間経過に伴うスコア、及びプレーヤが逆転して勝利したか、ゲーム全体でリードして勝利したか、「ボスキル」(すなわち手ごわいプレーヤに対する成功)なども含み得る。これらは、ゲームプレイメタデータが運び得る情報の非限定的な実施例である。
ブロック502に進むと、ゲームメタデータは、ビデオテンプレートタイプに関連付けられる。従って、例えば、メタデータの第1の集合(例えば未熟なプレーヤによりプレイされる静かなゲームを示す)は、第1のテンプレートタイプまたはスタイルに関連付けられ得、一方、メタデータの第2の集合(例えば熟練プレーヤによりプレイされる激しいゲームを示す)は、第2のテンプレートタイプまたはスタイルに関連付けられ得る。第1のテンプレートタイプは、ゲームプレイからのビデオを使用してビデオクリップを生成するのに、和やかなオーディオ、励ましのテキスト、1つ以上の調整可能なウィジェット(下記でさらに説明される)、及び全体に寒色のグラフィックを含み得、一方で、第2のテンプレートタイプは、ビデオクリップを生成するのに、激しいオーディオ、激励するテキスト、ウィジェット、及び全体に暖色のグラフィックを含み得る。ユーザがクリップを選択すると、オーディオ、オーバーレイ、テキストなどを含む統合クリップを構築するための特定のテンプレートが返され、ユーザはこれを受信する。特定のテンプレートスタイルの実施例には、ジョークテンプレート、または定型化した対抗スタイルが挙げられる。
ブロック504では、ゲームプレイ(及び/またはユーザ)のビデオも収集されて、メタデータに関連付けられることが示される。プレイの白熱した期間などのゲームプレイのクリップは、これらのビデオから導出される。従って、ビデオが生成された時に生成されるメタデータが保存され、よって、ユーザは、メタデータをビデオに関連付けることができる。ユーザは、テンプレート(複数可)を使用してビデオを作成し、ゲームシステムのみで共有できること、またはインターネットを介して一般公開で共有できることを、知らされ得る。従って、上記のオーバーレイは、モバイルデバイスまたはゲームコンソールで実行されるゲームシステムクライアントアプリを介したURLまたはリンクであり得る。
上記のメタデータをテンプレートのタイプまたはスタイルに関連付けることは、ゲーム開発者により手動で行われ得る。図6及び図7は、ニューラルネットワークを含む機械学習(ML)エンジンを使用して、メタデータをテンプレートのタイプまたはスタイルに関連付ける代替的な方法を示す。図6のブロック600から始まり、メタデータのグラウンドトゥルース集合がMLエンジンに入力される。ブロック602では、メタデータ集合ごとの付随するグラウンドトゥルーステンプレートもMLエンジンに入力されることが示され、ブロック604では、MLエンジンがグラウンドトゥルースでトレーニングを行う。
図7のブロック700では、ゲームプレイ中に、ゲームメタデータが生成されると収集される。ブロック702に進むと、MLエンジンは、メタデータをテンプレートに関連付ける。上記のように、関連付けは手動でも行われ得る。その後、ブロック704にて、テンプレートはユーザ/プレーヤに利用可能な状態となり、ブロック706にて、ユーザ/プレーヤは、テンプレートに提示させるゲームプレイのビデオクリップを選択することにより、テンプレートを使用する。
図8は、前述のように選択されたビデオテンプレートを使用してビデオクリップを自動的に生成するための、本明細書で説明されるいずれかのディスプレイなどのディスプレイ800に提示され得るユーザインターフェースを示す。ゲームアクション802は、ゲームプレイ中に生成されたメタデータに基づいて識別されたビデオテンプレート804と共に提示される。ビデオクリップ806は、選択基準に基づいて自動的に選択されており、表示されるテンプレート804を使用して提示されている。プレーヤは、808でクリップ全体を保存することを選択するように促され得、または810でクリップの最大15秒のみを保存することを選択してもよく、または他のセグメントを保存対象に選択してもよい。非限定的な選択基準には、ゲームプレイ全体のビデオ、例えばモーションベクトルまたはヒストグラム分析により示される最もアクション満載のシーケンスのビデオ、ボスキルが発生したセグメントのビデオ、大量の武器が発射されたシーケンスのビデオなどが含まれ得る。
図9は、ディスプレイ900に提示され得るUIを示し、これにより、ユーザは、ビデオテンプレート904を使用して提示するゲームプレイ902のクリップを選択することが可能となる。UIは、ユーザがタイトルを入力できるフィールド906と、ゲームプレイビデオのどの部分をテンプレート904内のクリップに使用するかを特定する1つ以上のセレクタ908とを含み得る。セレクタには、「今起こったことを見せる」、「最後のN分間を見せる」などが含まれ得るが、これらに限定されない。
ユーザはまた、910で、ビデオクリップを共有したいかどうかを特定するように促され得、クリップを誰と共有したいか、例えば「システム内のすべてのプレーヤ」、特定のユーザなどを識別するセレクタ912が提示され得る。
図10は、本明細書で企図されるさらなる原理を示す。ビデオテンプレートユーザインターフェース(UI)1000は、本明細書で説明されるディスプレイのうちのいずれかなどのディスプレイ1002に提示される。第1のセレクタ1004が提示され、これにより、ユーザは、最後に選択されたクリップに類似するより多くのクリップを表示するように、実行中のプロセッサに命令することが可能となり得る。第2のセレクタ1006が提示され、これにより、ユーザは、最後に選択されたクリップに似ていないより多くのクリップを表示するように、実行中のプロセッサに命令することが可能となり得る。
ウィジェット1008が提示され、これにより、ユーザは、様々なメタデータを提示するように選択することが可能となり得る。例えば、示される実施形態では、ウィジェット1008により、ユーザは、ビデオクリップとともに、アクションの要約、武器の装備、ボスキル数などを提示するように選択することが可能となり得、これにより、ビデオテンプレートが関連付けられたメタデータの一部が「表面化」される。
さらに、調整ウィジェット1010、示される実施例ではスライダが提示され、ユーザはこれを操作して、メタデータに関連付けられた制御範囲を、例えばゲームプレイ全体に、または現在のシーンのみに、調整するように選択することができる。ユーザは、スライダを左から右に動かして、制御範囲を広げることができる。調整は、メタデータにより示される類似クリップの検索、クリップの短縮または延長、クリップの選択に使用されるアクション強度の増減、及びテンプレート特徴とメタデータとの関連付けの増減を含み得る。この最後の点に関しては、テンプレート特徴とメタデータとの関連付けを減らすように選択することにより、結果、より一般的なテンプレートが配信され得、一方、テンプレート特徴とメタデータとの関連付けを増やすように選択することにより、結果、特定のゲームプレイアクションとより密接に結びついたテンプレートが配信され得る。
図11は、本明細書で説明されるいずれかのディスプレイなどのディスプレイ1102に提示され得るUI1100を示し、これにより、ゲーム観覧者は、観覧者側に表示されるものを調整することが可能となる。UI1100は、セレクタ1104を含み、これにより、観覧者は、表示されている現在のアクションに類似するビデオを、より多くまたはより少なく有することが可能となり得る。ウィジェット1106が提示され、これにより、観覧者は、武器の使用など、観覧されているゲームに関連付けられたメタデータを表面化することが可能となり得る。評価セレクタ1108が提示され、これにより、観覧者は、ゲームを気に入ったか否かを示すことが可能となり得、例えばゲームサーバに、高評価(または低評価)を示す信号が提供される。また、調整器1110が提示され、これにより、観覧者は、図10を参照して前述されたように、メタデータを調整することが可能となり得る。
図12は、コミュニティ及び高評価などの好ましいコミュニティ行動を促進すること、他のコンテンツのクリエイタを促進すること、ならびにコミュニティチャレンジに参加することにより、共有コミュニティを構築するさらなる原理を示す。ブロック1200から始まり、好ましいコミュニティメンバーは、「ゴールド」ステータスが与えられ得、これを、優れたビデオの他のクリエイタに提供することができる。ブロック1202で、ゴールドステータスを受け入れたユーザは、報酬を受け取り得、言い換えると、ブロック1202でゴールドステータスの支払いを行って、ブロック1204でゴールドステータスが授与され得る。ブロック1206では、「ゴールド」ステータスへのサブスクリプションを購入することにより、ゴールドユーザのビデオは、より多く注目を集めるようにゲームシステム内で宣伝され得、他のクリエイタにギフトとして贈られ得ることが、示される。
図13は例示する。本明細書で説明されるいずれかのディスプレイなどのディスプレイ1302に、UI1300が提示され、これにより、ユーザは、ゴールドユーザMoのビデオをブラウズするように1304で選択することが可能となる。ユーザは、セレクタ1306を使用して、ゴールドユーザまたは関連ビデオの高評価または低評価を、選択することができる。ゴールドユーザのビデオをトピックまたはゲームタイトルでブラウズするリスト1308、1310が、ユーザに提示され得る。
図13では、ユーザは、Moのビデオをトピック#2でブラウズすることを選択した。これにより、図14に示されるUI1400が提示され得、トピック#2のMoのビデオは、作者及びタイトルで一覧化されている。ユーザは、ビデオのうちの1つを選択して視聴することができる。
図15は、本明細書で説明されるいずれかのディスプレイなどのディスプレイ1502に提示され得るビデオテンプレートUI1500を示し、これにより、ユーザは、他のユーザが作成したビデオを視聴し、気に入ったものに賛成票を投じることが可能となる。従って、UI1500は、別のユーザ、この事例ではユーザ「J」の武器装備に関するビデオを視聴するためのプロンプト1504を含み得る。UI1500は、リスト1506を含み得、リスト1506は、リストに示されるデータを表面化するように選択することができるエントリを有する。評価セレクタ1508が提供され得、これにより、ユーザは、ビデオを気に入ったか否かを示すことが可能となる。
従って、前述の図は、トピックまたはゲームでチャネルをブラウズすることにより、ビデオを視聴する方法を開示する。ビデオクリップを視聴する方法は、すばやく視聴またはスキップすることができるビデオの連続ストリームであり得、最も高評価のコンテンツまたは精選されたコンテンツが、他のコンテンツよりも多く表示される。体験を向上させるために、ゲームプレイデータがビデオの上にオーバーレイされてもよい。
図16は、ブロック1600で、ユーザ及び観覧者の「高評価」及び「低評価」の指示が受信され得、これを使用して、ブロック1602で、ビデオクリップテンプレートが修正される、及び/または新たなテンプレートが作成されることを示す。よって、フィードバックにより、プレーヤの好みを学習し、これに応じてテンプレートを変更することができる。例えば、ユーザが遠距離キルを好むことをフィードバックが示す場合、このようなキルがその後検索され、これに応じてテンプレートが作成または変更される。
本発明の原理はさらに、プレーヤのビデオクリップに対戦相手のビュービデオを組み込むことは興味深くあり得ること、ならびに、例えばユーザのゲームプレイビデオをクラウドにアップロードすることにより、ユーザの(オプトイン)ビデオを対戦相手と共有する機会がユーザに与えられるべきであり、これにより、他の(よりベテランの)ユーザによるその後の手動編集、またはすべてのビューを使用した自動ビデオリキャップの生成が促進されることを、理解している。図17に例示される。
複数のセグメントを有するゲームプレイビデオクリップ1700が、図17に示される。第1のセグメント1702は、ユーザの記録されたゲームプレイからの短いクリップを、例えば時間1~時間2に含む。第1のセグメント1702の直後に続く第2のセグメント1704は、ユーザの対戦相手の記録されたゲームプレイからの短いクリップを、例えば時間2~時間3に含む。第2のセグメント1704の直後に続く第3のセグメント1706は、ユーザの記録されたゲームプレイからの短いクリップを、例えば時間3~時間4に含む。
図18は、図17に示されるクリップ1700を生成するための、本明細書で説明されるいずれかのディスプレイなどのディスプレイ1802に提示され得るUI1800を示す。UI1800は、手動編集セレクタ1804を含み、これにより、ゲームプレイビデオを手動編集してクリップを生成することが可能となり得る。UI1800はまた、セレクタ1806を含み、これにより、ユーザは、編集を自分だけに限定することが可能となり得る。
さらに、UI1800は、自動リキャップセレクタ1808を含み、これにより、ユーザは、関連プロセッサにゲームプレイビデオの部分からビデオクリップを自動的に構築させることを、選択することが可能となり得る。UI1800はまた、手動編集セレクタ1810を含み、これは、別のユーザ(示される実施例ではユーザA)が、図17に示されるクリップ1700を生成するために、選択ユーザのゲームプレイビデオを編集する権利を有することを示し得る。
図19は、ゲームプレイをリキャップすることにより、図17のクリップ1700などのクリップを自動的に生成することを示す。ブロック1900から始まり、ゲーム内の様々なビューが識別される。ビューには、ユーザビュー、ユーザの1人以上の対戦相手のビュー、及びゲームの1人以上の観覧者のビューが含まれ得る。
ブロック1902に進むと、図17の全体的なクリップ1700を生成するために使用する各ビューのクリップが識別される。この識別は、「興味深い」クリップのグラウンドトゥルース集合を使用してトレーニングされたMLエンジンにより、またはクリップの記録中に生成された高評価の数が最も多い「N」個のクリップを選択することにより、または、例えばボスキルのクリップをすべて選択する、武器発射のクリップをすべて選択するなど、ヒューリスティックな相関ルールを使用して、行われ得る。その後、ブロック1904で、ブロック1902で識別されたクリップを使用して、図17の全体的なビデオクリップ1700が、好ましくはシームレスな時系列で生成され得る。
図20は、図17に示されるクリップ1700を手動生成するための、本明細書で説明されるいずれかのディスプレイなどのディスプレイ2002に提示され得るUI2000を示す。図20では、ユーザのゲームプレイビデオからのセグメントに関する時系列リスト2004が提示され、図17の全体的なクリップ1700の一部となるセグメントを選択することができる。同様に、ユーザの対戦相手のゲームプレイビデオからのセグメントに関する対応時系列リスト2006が提示され、図17の全体的なクリップ1700の一部となるセグメントを選択することができる。
図21は、本明細書で説明されるいずれかのディスプレイなどのディスプレイ2102に提示され得るビデオテンプレートUI2100を示す。UI2100は、前述のようにビデオテンプレートウィジェットを使用することでメタデータの特定の要素が表面化されたことを示し、示される実施例では「ボス」に対する1秒あたりのダメージ(DPS)などの経時的な武器効率のグラフ2104が示される。グラフ2104は、ビデオクリップにオーバーレイすることができる。グラフ2104のデータポイント間に補間が使用され、フレーム間の穴が埋められ得ることに、留意されたい。「ライフメーター」もビデオテンプレートに表示され、ゲームプレイクリップにオーバーレイされ得る。
データは、特定のフォーマット/データモデルでゲームにストリーミングされ得、視聴されているものにタグ付けをするために、一意的なコードが追加され得る。よって、タグ付けシステムが確立され得、ユーザ/プレーヤは、ビデオを作成/共有する時にタグのリストから選択を行い、ビデオプレーヤにビデオが表示される状況に影響を与える。例えば、特定のビデオが作成され、「チュートリアル」とタグ付けされ得る。または、ビデオは、「WeeklyHighlightChallenge」とタグ付けされ得る。
図22は、モバイルデバイス2200でクラウドを介してゲームプレイビデオを編集する共同編集及びモバイル編集の原理を示す。前述のように、ユーザは自分のゲームプレイビデオキャプチャをクラウド、すなわちシステムサーバに、保存することができる。ビデオがクラウドに保存されると、モバイルバージョンの上記ロジックは、モバイルデバイス2200にリスト2202または他のデータ構造を提示し、これにより、ユーザは、クラウドからコンテンツをプル/ストリーミングして、モバイルデバイス2200上で容易に編集することが可能となる。
図23では、さらにこれが例示される。ゲームプレイビデオキャプチャがクラウドに保存され、ゲームプレイデータがゲームシステムから利用可能になると、ユーザは、モバイルデバイスでUI2300を使用して、アクティビティ2302(示される実施例では「昨晩の襲撃」)に基づいて、ビデオを検索し共有し得る。次に、「襲撃」または他のアクティビティにおけるチームメンバーの各視点からのビデオを使用して、選択されたアクティビティは編集され得る。
図23は、さらなる編集機能を示す。マスク/アバターは、カメラのキャプチャに基づき得、またはオーディオのみに基づき得る。マスクは、ピクチャインピクチャビデオでナレーションを行うプレーヤの顔、またはクイックメッセージ/面白いメッセージで使用されるプレーヤの顔を、覆い隠すために使用され得る。マスクまたはアバターは、セレクタ2304を選択することにより、カメラからのユーザ画像の上でアニメーション化され得る。別のセレクタ2306を選択すると、ゲームプレイ中にキャプチャされたオーディオに基づいてキャラクタモデルがアニメーション化され得る。オーディオは、リスト2308から選択され得る。口調、及び録音された音声のエネルギーレベルなどに基づいて、キャラクタモデルの口及び表情(怒りまたは笑いなど)がアニメーション化され得る。
図24にさらに例示される。ブロック2400で、オーディオ選択が受信され得る。ブロック2402で、使用されるゲームプレイビデオクリップが識別され、次いで、ブロック2400で受信されたオーディオのビートに合うように、ブロック2404でビデオカットが提案され得る。ビート検出は、よって、編集/カットに最適なポイントを定義する。ユーザは、自分のお気に入りの曲を選択してビデオモンタージュで使用することができ、次に、ロジックは、結果得られるビデオが音楽のビートに合わせて最適に編集されるように、ユーザが「カット」または編集を配置するべき場所を自動的に提案する。
図25及び図26は、仮想現実(VR)ゲームプレイビデオクリップの編集に関する原理を示す。ブロック2500から始まり、VRシーンが記録されたゲームプレイからキャプチャされ、ブロック2502で、編集用に作り直される。特定のシーンがキャプチャされ得、またはVRゲームプレイビデオ全体が作り直され得、ブロック2504で、複数のビューが編集者に利用可能となる。本明細書で説明される原理と一致した編集を行うために、ブロック2506で、ビューが1つ以上のエディタデバイスに提示される。
図26に示されるように、VR編集モードになると、編集者は、セレクタ2600を使用して、リストからVRビューを選択することができる。編集者はまた、シーンに対し、シーンの様々な深度レベルで(2606)、セレクタ2602を使用してオーバーレイを追加し、セレクタ2604を使用してオブジェクトを追加することができる。
VR編集モードにより、仮想クラウドへのアクセス、及びクラウドを介したキャプチャされたゲームエクスペリエンスのナビゲーションが、可能となる。編集者は、異なる「アクティビティ」間で前後にズームし、そのアクティビティの複数のビューを見ることができる。
いくつかの例示的な実施形態を参照して本発明の原理が説明されたが、これらは限定することを意図しておらず、各種の代替的な構成が本明細書で特許請求される主題を実施するために使用されてもよいことが理解されよう。

Claims (20)

  1. 少なくとも1つのプロセッサを備えたデバイスであって、
    前記少なくとも1つのプロセッサは、命令でプログラム化され、前記命令は、
    コンピュータゲームのプレイにより生成されたメタデータを識別することと、
    前記メタデータに少なくとも部分的に基づいて、ユーザデバイスに提供するためのビデオテンプレートを識別することであって、前記ビデオテンプレートは少なくとも第1のテンプレート部分を含む、前記識別することと、
    を実行する、デバイス。
  2. 前記ビデオテンプレートは第1のビデオテンプレートであり、前記メタデータは第1のメタデータであり、前記命令は、
    コンピュータゲームのプレイにより生成された第2のメタデータを識別することと、
    前記第2のメタデータに少なくとも部分的に基づいて、ユーザデバイスに提供するための第2のビデオテンプレートを識別することであって、前記第2のビデオテンプレートは、前記第1のテンプレート部分とは異なる第2のテンプレート部分を少なくとも含む、前記識別することと、
    を実行可能である、請求項1に記載のデバイス。
  3. 前記第1のテンプレート部分は、テキストを含む、請求項1に記載のデバイス。
  4. 前記第1のテンプレート部分は、オーバーレイを含む、請求項1に記載のデバイス。
  5. 前記第1のテンプレート部分は、オーディオを含む、請求項1に記載のデバイス。
  6. 前記命令は、
    入力を受信することと、
    前記入力に応じて、メタデータに基づいてビデオテンプレートを調整することと、
    を実行可能である、請求項1に記載のデバイス。
  7. 前記命令は、
    前記ビデオテンプレートで、提示用のビデオを自動的に生成すること、
    を実行可能である、請求項1に記載のデバイス。
  8. 前記命令は、
    ビデオを識別する入力をユーザから受信することと、
    前記ビデオを前記ビデオテンプレートに統合することと、
    を実行可能である、請求項1に記載のデバイス。
  9. 前記命令は、
    少なくとも部分的に機械学習アルゴリズムを使用して、前記ビデオテンプレートを識別すること、
    を実行可能である、請求項1に記載のデバイス。
  10. 少なくとも1つのプロセッサを備えたデバイスであって、
    前記少なくとも1つのプロセッサは、命令でプログラム化され、前記命令は、
    ゲームプレイビデオの少なくとも1つのビデオクリップを識別することと、
    システムサーバから受信した少なくとも1つのビデオテンプレートを使用して、前記ビデオクリップを提示することと、
    を実行する、デバイス。
  11. 前記命令は、
    コンピュータゲームのプレイにより生成されたメタデータを識別することであって、前記コンピュータゲームの前記プレイは、前記ゲームプレイビデオを確立するために記録される、前記識別することと、
    前記メタデータに少なくとも部分的に基づいて、ユーザデバイスに提供するための前記ビデオテンプレートを識別することであって、前記ビデオテンプレートは少なくとも第1のテンプレート部分を含む、前記識別することと、
    を実行可能である、請求項10に記載のデバイス。
  12. 前記ビデオテンプレートは第1のビデオテンプレートであり、前記メタデータは第1のメタデータであり、前記命令は、
    コンピュータゲームのプレイにより生成された第2のメタデータを識別することと、
    前記第2のメタデータに少なくとも部分的に基づいて、ユーザデバイスに提供するための第2のビデオテンプレートを識別することであって、前記第2のビデオテンプレートは、前記第1のテンプレート部分とは異なる第2のテンプレート部分を少なくとも含む、前記識別することと、
    を実行可能である、請求項11に記載のデバイス。
  13. 前記第1のテンプレート部分は、前記メタデータの少なくとも一部を表面化するように動作可能なウィジェットを含む、請求項11に記載のデバイス。
  14. 前記第1のテンプレート部分は、オーバーレイを含む、請求項11に記載のデバイス。
  15. 前記第1のテンプレート部分は、オーディオを含む、請求項11に記載のデバイス。
  16. 前記命令は、
    入力を受信することと、
    前記入力に応じて、メタデータに基づいてビデオテンプレートを調整することと、
    を実行可能である、請求項11に記載のデバイス。
  17. 前記命令は、
    前記ビデオテンプレートで、提示用のビデオを自動的に生成すること、
    を実行可能である、請求項11に記載のデバイス。
  18. 前記命令は、
    ビデオを識別する入力をユーザから受信することと、
    前記ビデオを前記ビデオテンプレートに統合することと、
    を実行可能である、請求項11に記載のデバイス。
  19. 前記命令は、
    少なくとも部分的に機械学習アルゴリズムを使用して、前記ビデオテンプレートを識別すること、
    を実行可能である、請求項11に記載のデバイス。
  20. コンピュータゲームメタデータを使用して、ユーザに配信するビデオテンプレートを選択し、前記テンプレートにプレーヤまたはゲームのビデオを取り込むことと、
    ゲームプレイ中に収集された前記メタデータに依存する独特のスタイルに、各テンプレートを関連付けることと、
    を含む、方法。
JP2022578857A 2020-06-25 2021-05-25 コンピュータシミュレーションメタデータに基づくビデオテンプレートの選択 Pending JP2023531929A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US16/912,679 US11554324B2 (en) 2020-06-25 2020-06-25 Selection of video template based on computer simulation metadata
US16/912,679 2020-06-25
PCT/US2021/034118 WO2021262377A1 (en) 2020-06-25 2021-05-25 Selection of video template based on computer simulation metadata

Publications (1)

Publication Number Publication Date
JP2023531929A true JP2023531929A (ja) 2023-07-26

Family

ID=79032149

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022578857A Pending JP2023531929A (ja) 2020-06-25 2021-05-25 コンピュータシミュレーションメタデータに基づくビデオテンプレートの選択

Country Status (5)

Country Link
US (1) US11554324B2 (ja)
EP (1) EP4172812A1 (ja)
JP (1) JP2023531929A (ja)
CN (1) CN115777100A (ja)
WO (1) WO2021262377A1 (ja)

Family Cites Families (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1485146A (en) * 1920-05-18 1924-02-26 Mundell Roscoe Educational and game cards
US1412204A (en) * 1920-12-27 1922-04-11 Lee M Derby Game apparatus
US1486690A (en) * 1923-09-21 1924-03-11 Scheliga Paulo Educational device
US2128749A (en) * 1936-10-22 1938-08-30 Koch Otto Ludwig Spelling game
US2739815A (en) * 1952-09-04 1956-03-27 Arthur M Fay Agitating receptacle and game pieces
US3429572A (en) * 1965-10-11 1969-02-25 Robert B Mars Educational game
GB1115042A (en) * 1966-05-18 1968-05-22 Ernest Charles Green Games and teaching apparatus
US3482333A (en) * 1967-10-26 1969-12-09 James G Trager Jr Pack of cards for sentence building game
US3618231A (en) * 1970-06-03 1971-11-09 Helen G Nason Educational game
US5273431A (en) * 1992-09-08 1993-12-28 Charouhas Thomas G Educational game and method of playing said game
US5310347A (en) * 1992-11-23 1994-05-10 Chester Brand Card game for spelling improvement and education
US5427529A (en) * 1994-04-25 1995-06-27 Dunse; Walter D. Ball and stick letter game and method of play
US6853385B1 (en) * 1999-11-09 2005-02-08 Broadcom Corporation Video, audio and graphics decode, composite and display system
US6731677B1 (en) * 1999-03-04 2004-05-04 Sarnoff Corporation Method and apparatus for carrying digital data as analog video
US6774908B2 (en) * 2000-10-03 2004-08-10 Creative Frontier Inc. System and method for tracking an object in a video and linking information thereto
AU2002351310A1 (en) 2001-12-06 2003-06-23 The Trustees Of Columbia University In The City Of New York System and method for extracting text captions from video and generating video summaries
US7001183B2 (en) * 2002-06-10 2006-02-21 Peter Dowrick Diagnostically and audibly responsive computer learning memory game and system provided therefor
US6940540B2 (en) * 2002-06-27 2005-09-06 Microsoft Corporation Speaker detection and tracking using audiovisual data
US7674184B2 (en) * 2002-08-01 2010-03-09 Creative Kingdoms, Llc Interactive water attraction and quest game
US20040152055A1 (en) * 2003-01-30 2004-08-05 Gliessner Michael J.G. Video based language learning system
US20040224292A1 (en) * 2003-05-09 2004-11-11 Fazio Gene Steve Method and system for coaching literacy
US20050069849A1 (en) * 2003-09-30 2005-03-31 Iode Design Computer-based method of improving reading comprehension
US8764455B1 (en) * 2005-05-09 2014-07-01 Altis Avante Corp. Comprehension instruction system and method
US20090150760A1 (en) 2005-05-11 2009-06-11 Planetwide Games, Inc. Creating publications using game-based media content
US20080233547A1 (en) * 2007-03-22 2008-09-25 Marilu Patterson Reading motivational system
US20090047641A1 (en) * 2007-08-17 2009-02-19 Hayes Y Sabine Alphabet computer game
US9032296B1 (en) * 2007-08-29 2015-05-12 The Directv Group, Inc. User interface for displaying highlights of an event or plurality of events
US20090100362A1 (en) 2007-10-10 2009-04-16 Microsoft Corporation Template based method for creating video advertisements
US8724909B2 (en) * 2008-06-03 2014-05-13 Kooaba Ag Method and system for generating a pictorial reference database using geographical information
US9953450B2 (en) * 2008-06-11 2018-04-24 Nawmal, Ltd Generation of animation using icons in text
US8805110B2 (en) * 2008-08-19 2014-08-12 Digimarc Corporation Methods and systems for content processing
US8520979B2 (en) * 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
US20100092933A1 (en) * 2008-10-15 2010-04-15 William Kuchera System and method for an interactive phoneme video game
US9898675B2 (en) * 2009-05-01 2018-02-20 Microsoft Technology Licensing, Llc User movement tracking feedback to improve tracking
US8742814B2 (en) * 2009-07-15 2014-06-03 Yehuda Binder Sequentially operated modules
US8699779B1 (en) * 2009-08-28 2014-04-15 United Services Automobile Association (Usaa) Systems and methods for alignment of check during mobile deposit
US20110123967A1 (en) * 2009-11-24 2011-05-26 Xerox Corporation Dialog system for comprehension evaluation
US20110302397A1 (en) * 2010-04-12 2011-12-08 Mitola Iii Joseph Method and Apparatus for Improved Secure Computing and Communications
US8726161B2 (en) 2010-10-19 2014-05-13 Apple Inc. Visual presentation composition
US9691289B2 (en) * 2010-12-22 2017-06-27 Brightstar Learning Monotonous game-like task to promote effortless automatic recognition of sight words
US8548206B2 (en) * 2011-01-20 2013-10-01 Daon Holdings Limited Methods and systems for capturing biometric data
US10133950B2 (en) * 2011-03-04 2018-11-20 Qualcomm Incorporated Dynamic template tracking
US9300947B2 (en) * 2011-03-24 2016-03-29 Kodak Alaris Inc. Producing 3D images from captured 2D video
US10592596B2 (en) * 2011-12-28 2020-03-17 Cbs Interactive Inc. Techniques for providing a narrative summary for fantasy games
US20130171592A1 (en) * 2011-12-30 2013-07-04 Logical Choice Technologies, Inc. Method and System for Presenting Interactive, Three-Dimensional Tools
US10579904B2 (en) * 2012-04-24 2020-03-03 Stmicroelectronics S.R.L. Keypoint unwarping for machine vision applications
US20140121540A1 (en) * 2012-05-09 2014-05-01 Aliphcom System and method for monitoring the health of a user
US8961183B2 (en) * 2012-06-04 2015-02-24 Hallmark Cards, Incorporated Fill-in-the-blank audio-story engine
US8821271B2 (en) * 2012-07-30 2014-09-02 Cbs Interactive, Inc. Techniques for providing narrative content for competitive gaming events
US20150262501A1 (en) * 2013-03-15 2015-09-17 Verbum, Llc Continuous User Control of Rapid Serial Visual Presentation of Text
US20140330132A1 (en) * 2013-05-02 2014-11-06 Aza Raskin Physiological characteristic detection based on reflected components of light
US9247136B2 (en) * 2013-08-21 2016-01-26 Xerox Corporation Automatic mobile photo capture using video analysis
CN104424271B (zh) * 2013-08-29 2018-10-16 北大方正集团有限公司 出版物数字资源的自动采集方法及系统
US9355306B2 (en) * 2013-09-27 2016-05-31 Konica Minolta Laboratory U.S.A., Inc. Method and system for recognition of abnormal behavior
US20150104762A1 (en) * 2013-10-14 2015-04-16 Apollo Group, Inc. Adaptive Grammar Instruction
CN105765512A (zh) * 2014-01-30 2016-07-13 施政 在交互面上用物理物体进行计算机编程的系统及方法
US9183831B2 (en) * 2014-03-27 2015-11-10 International Business Machines Corporation Text-to-speech for digital literature
WO2015156177A1 (ja) * 2014-04-07 2015-10-15 株式会社ソニー・コンピュータエンタテインメント ゲーム動画配信装置、ゲーム動画配信方法、ゲーム動画配信プログラム
US20150379092A1 (en) * 2014-06-26 2015-12-31 Hapara Inc. Recommending literacy activities in view of document revisions
US20170228600A1 (en) * 2014-11-14 2017-08-10 Clipmine, Inc. Analysis of video game videos for information extraction, content labeling, smart video editing/creation and highlights generation
WO2016123205A1 (en) * 2015-01-28 2016-08-04 Hahn Bruce C Deep reading machine and method
US10549203B2 (en) * 2015-09-30 2020-02-04 Sony Interactive Entertainment America Llc Systems and methods for providing time-shifted intelligently synchronized game video
US10549204B2 (en) * 2015-09-30 2020-02-04 Sony Interactive Entertainment America Llc Systems and methods for providing augmented data-feed for game play re-creation and dynamic replay entry points
US10783460B1 (en) * 2015-12-15 2020-09-22 Amazon Technologies, Inc. Computer generation of itineraries
US10424217B1 (en) * 2015-12-22 2019-09-24 Educational Testing Service Systems and methods for ability-appropriate text generation
US20170214768A1 (en) * 2016-01-21 2017-07-27 Ooka Island Inc. Modular content deployment and playback control system for educational application
WO2017165538A1 (en) * 2016-03-22 2017-09-28 Uru, Inc. Apparatus, systems, and methods for integrating digital media content into other digital media content
US10580319B2 (en) * 2016-05-20 2020-03-03 Creative Styles LLC Interactive multimedia story creation application
US10220299B2 (en) * 2016-09-07 2019-03-05 ThinAir Gaming LLC Training systems and methods
US10419312B2 (en) * 2017-03-21 2019-09-17 Motorola Solutions, Inc. System, device, and method for real-time conflict identification and resolution, and information corroboration, during interrogations
US20180280788A1 (en) * 2017-03-29 2018-10-04 Peek-A-Boo Learning, Llc Children's learning game
US10796591B2 (en) * 2017-04-11 2020-10-06 SpoonRead Inc. Electronic document presentation management system
CN107220590B (zh) * 2017-04-24 2021-01-05 广东数相智能科技有限公司 一种基于活体检测的防作弊网络调研方法、装置及系统
US10765954B2 (en) * 2017-06-15 2020-09-08 Microsoft Technology Licensing, Llc Virtual event broadcasting
US10579878B1 (en) * 2017-06-28 2020-03-03 Verily Life Sciences Llc Method for comparing videos of surgical techniques
JP6947560B2 (ja) * 2017-07-14 2021-10-13 グリー株式会社 ゲーム処理プログラム、ゲーム処理方法及びゲーム処理装置
US11113985B2 (en) * 2017-08-30 2021-09-07 Focus Reading Technology Inc. Visual acuity measurement apparatus
US10417335B2 (en) * 2017-10-10 2019-09-17 Colossio, Inc. Automated quantitative assessment of text complexity
CN108255922A (zh) * 2017-11-06 2018-07-06 优视科技有限公司 视频识别方法、设备、客户端装置、电子设备及服务器
US20190246071A1 (en) * 2018-02-07 2019-08-08 Osram Sylvania Inc. Building Monitoring System
US10237615B1 (en) * 2018-02-15 2019-03-19 Teatime Games, Inc. Generating highlight videos in an online game from user expressions
US10945033B2 (en) * 2018-03-14 2021-03-09 Idomoo Ltd. System and method to generate a customized, parameter-based video
US10449461B1 (en) * 2018-05-07 2019-10-22 Microsoft Technology Licensing, Llc Contextual in-game element recognition, annotation and interaction based on remote user input
JP6793151B2 (ja) * 2018-05-23 2020-12-02 日本電信電話株式会社 オブジェクトトラッキング装置、オブジェクトトラッキング方法およびオブジェクトトラッキングプログラム
US11026585B2 (en) * 2018-06-05 2021-06-08 Synaptive Medical Inc. System and method for intraoperative video processing
JP7172472B2 (ja) * 2018-11-09 2022-11-16 富士通株式会社 ルール生成装置、ルール生成方法及びルール生成プログラム
US11093749B2 (en) * 2018-12-20 2021-08-17 L'oreal Analysis and feedback system for personal care routines
US11154768B2 (en) * 2019-01-07 2021-10-26 Lane Thomas Hauck Educational game and method of making same
US11380214B2 (en) * 2019-02-19 2022-07-05 International Business Machines Corporation Memory retention enhancement for electronic text
US10850197B1 (en) * 2019-05-13 2020-12-01 Disney Enterprises, Inc. Guided interactions with books
US11007445B2 (en) * 2019-08-16 2021-05-18 Lenovo (Singapore) Pte. Ltd. Techniques for curation of video game clips
CN112492346A (zh) * 2019-09-12 2021-03-12 上海哔哩哔哩科技有限公司 确定游戏视频中精彩时刻的方法和游戏视频的播放方法
US11130060B2 (en) * 2019-10-17 2021-09-28 Dell Products L.P. Lighting effects for application events
US20210134177A1 (en) * 2019-10-30 2021-05-06 Yap Technology, Ltd. System and method for displaying voice-animated multimedia content
US11154773B2 (en) * 2019-10-31 2021-10-26 Nvidia Corpration Game event recognition
US11158350B2 (en) * 2019-11-21 2021-10-26 Vooks, Inc. Systems and methods for protocol for animated read along text
US11915432B2 (en) * 2020-01-16 2024-02-27 Samsung Electronics Co., Ltd. Method and apparatus for tracking target
US11170471B2 (en) * 2020-01-20 2021-11-09 Nvidia Corporation Resolution upscaling for event detection
US11141658B2 (en) * 2020-01-30 2021-10-12 Dell Products L.P. Gameplay event detection and gameplay enhancement operations
US20210402297A1 (en) * 2020-06-30 2021-12-30 Sony Interactive Entertainment LLC Modifying computer simulation video template based on feedback
GB2598079B (en) * 2020-06-30 2022-12-07 Games Global Operations Ltd Multimedia compositing and storage management system
US11364443B2 (en) * 2020-06-30 2022-06-21 Sony Interactive Entertainment LLC Selection of video widgets based on computer simulation metadata
US20210402309A1 (en) * 2020-06-30 2021-12-30 Sony Interactive Entertainment LLC Generating video clip of computer simulation from multiple views
US11935181B2 (en) * 2020-11-30 2024-03-19 Sony Interactive Entertainment LLC In-game dynamic camera angle adjustment
US20220254082A1 (en) * 2021-02-05 2022-08-11 Sony Interactive Entertainment Inc. Method of character animation based on extraction of triggers from an av stream

Also Published As

Publication number Publication date
WO2021262377A1 (en) 2021-12-30
US11554324B2 (en) 2023-01-17
CN115777100A (zh) 2023-03-10
EP4172812A1 (en) 2023-05-03
US20210402299A1 (en) 2021-12-30

Similar Documents

Publication Publication Date Title
JP6434583B2 (ja) 第2のユーザによる第1のユーザのゲームプレーの遠隔制御
US10843088B2 (en) Sharing recorded gameplay
CN103886009B (zh) 基于所记录的游戏玩法自动产生为云游戏建议的小游戏
US10709980B2 (en) Web explorer for gaming platform interface
WO2022006118A1 (en) Modifying computer simulation video template based on feedback
US11845012B2 (en) Selection of video widgets based on computer simulation metadata
JP2023501442A (ja) プレーヤの年齢、国、法的要件に基づいて再生を自動編集するためのesrbレイティングを使用したユーザー生成コンテンツ
US20210402309A1 (en) Generating video clip of computer simulation from multiple views
US20220254082A1 (en) Method of character animation based on extraction of triggers from an av stream
US11554324B2 (en) Selection of video template based on computer simulation metadata
KR20160067282A (ko) 인스턴트 메시징을 통한 게임 영상 공유 장치 및 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240416