JPWO2020171968A5 - - Google Patents

Download PDF

Info

Publication number
JPWO2020171968A5
JPWO2020171968A5 JP2021549083A JP2021549083A JPWO2020171968A5 JP WO2020171968 A5 JPWO2020171968 A5 JP WO2020171968A5 JP 2021549083 A JP2021549083 A JP 2021549083A JP 2021549083 A JP2021549083 A JP 2021549083A JP WO2020171968 A5 JPWO2020171968 A5 JP WO2020171968A5
Authority
JP
Japan
Prior art keywords
digital content
content stream
scene
context
request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021549083A
Other languages
Japanese (ja)
Other versions
JP2022520992A (en
Publication date
Priority claimed from US16/280,211 external-priority patent/US11159595B2/en
Application filed filed Critical
Publication of JP2022520992A publication Critical patent/JP2022520992A/en
Publication of JPWO2020171968A5 publication Critical patent/JPWO2020171968A5/ja
Pending legal-status Critical Current

Links

Claims (15)

デジタルコンテンツにコンテキスト層を提供するシステムであって、
デジタルコンテンツストリームに関するコンテキスト情報であって、前記コンテキスト情報の異なるセットは前記デジタルコンテンツストリームの異なる所定の部分に関連付けられる、前記コンテキスト情報、
前記コンテキスト情報に関する１つ以上の優先順位付けパラメータを含むユーザプロファイル、及び
前記デジタルコンテンツストリームとのインタラクションに関してリアルタイムに生成されるメタデータ、
を格納するメモリと、
前記デジタルコンテンツストリームの観客に関連する観客デバイスから通信ネットワークを介して送信される要求を受信する通信インタフェースであって、前記要求は前記ユーザプロファイルに関連付けられ、前記デジタルコンテンツストリーム内の指定されたシーンについてのコンテキストに関係する、前記通信インタフェースと、
前記観客デバイスからの前記要求に応答して、前記メモリに格納される命令を実行するプロセッサと、
を含み、
前記プロセッサによる前記命令の実行は、
前記指定されたシーンが前記デジタルコンテンツストリームの前記所定の部分のうちの少なくとも１つに関連付けられていることを識別し、
前記デジタルコンテンツストリームのうちの前記少なくとも１つの所定の部分に関連する、前記格納されたコンテキスト情報セットのうちの１つ以上を取得し、
前記ユーザプロファイル中の前記１つ以上の優先順位付けパラメータに従って前記取得されたコンテキスト情報セットを優先順位付けし、
履歴データまたは統計データに基づいて前記デジタルコンテンツストリームとの今後のインタラクションに関する予測を行い、
前記観客デバイスに提供される前記デジタルコンテンツストリームについてのコンテキスト層を生成し、前記コンテキスト層を生成することは前記予測に基づいて前記優先順位付けされたコンテキスト情報セットをフィルタリングすることを含み、前記生成されたコンテキスト層は前記デジタルコンテンツストリーム内の前記シーンの少なくとも一部にオーバーレイされる、少なくとも前記フィルタリングされたコンテキスト情報セットの提示を含み、
前記シーンが前記メタデータに基づいて前記少なくとも１つの所定の部分に関連付けられていることを識別する、前記システム。 A system for providing a contextual layer to digital content, comprising:
context information about a digital content stream, wherein different sets of the context information are associated with different predetermined portions of the digital content stream;
a user profile including one or more prioritization parameters relating to said contextual information; and real-time generated metadata relating to interactions with said digital content stream;
a memory for storing
a communication interface for receiving a request transmitted over a communication network from a spectator device associated with a spectator of said digital content stream, said request being associated with said user profile and directed to a specified scene within said digital content stream; said communication interface relating to the context of
a processor that executes instructions stored in the memory in response to the request from the spectator device;
including
Execution of the instructions by the processor includes:
identifying that the designated scene is associated with at least one of the predetermined portions of the digital content stream;
obtaining one or more of the stored sets of contextual information associated with the at least one predetermined portion of the digital content stream;
prioritizing the obtained set of context information according to the one or more prioritization parameters in the user profile;
making predictions about future interactions with said digital content stream based on historical or statistical data;
generating a context layer for the digital content stream provided to the spectator device, generating the context layer includes filtering the prioritized set of context information based on the prediction; a contextual layer comprising a presentation of at least the filtered set of contextual information overlaid on at least a portion of the scene within the digital content stream;
The system, identifying that the scene is associated with the at least one predetermined portion based on the metadata. 前記デジタルコンテンツストリームの１つ以上の所定の部分は、１つ以上のデジタルオブジェクトを含む、請求項１に記載のシステム。 2. The system of claim 1, wherein one or more predetermined portions of the digital content stream includes one or more digital objects. 前記デジタルオブジェクトのそれぞれは、それぞれのコンテキスト情報セットに関連付けられる、請求項２に記載のシステム。 3. The system of claim 2, wherein each of said digital objects is associated with a respective set of contextual information. 前記観客デバイスからの前記要求は、前記１つ以上のデジタルオブジェクトの中から選択されるデジタルオブジェクトに関係する、請求項３に記載のシステム。 4. The system of claim 3, wherein the request from the spectator device relates to digital objects selected from among the one or more digital objects. 前記メモリは、複数のユーザデバイスによる前記デジタルコンテンツストリームとの以前のインタラクションに関する前記履歴データまたは前記統計データをさらに格納し、前記プロセッサは、前記シーンが前記履歴データまたは前記統計データに基づいて前記少なくとも１つの所定の部分に関連付けられていることを識別する、請求項１に記載のシステム。 The memory further stores the historical data or the statistical data relating to previous interactions with the digital content stream by a plurality of user devices, and the processor determines the scene based on the historical data or the statistical data. 2. The system of claim 1, identifying that it is associated with one predetermined portion. 前記要求は、前記デジタルコンテンツストリーム内の前記シーンに関連する時点または仮想位置を指定する、請求項１に記載のシステム。 2. The system of claim 1, wherein the request specifies a point in time or virtual location associated with the scene within the digital content stream. 前記プロセッサは、前記指定された時点、または前記指定された仮想位置に基づいて、前記シーンが前記少なくとも１つの所定の部分に関連付けられていることをさらに識別する、請求項６に記載のシステム。 7. The system of claim 6, wherein the processor further identifies that the scene is associated with the at least one predetermined portion based on the specified point in time or the specified virtual location. デジタルコンテンツにコンテキスト層を提供する方法であって、
デジタルコンテンツストリームに関するコンテキスト情報であって、前記コンテキスト情報の異なるセットは前記デジタルコンテンツストリームの異なる所定の部分に関連付けられる、前記コンテキスト情報、
前記コンテキスト情報に関する１つ以上の優先順位付けパラメータを含むユーザプロファイル、及び
前記デジタルコンテンツストリームとのインタラクションに関してリアルタイムに生成されるメタデータ、
をメモリに格納することと、
前記デジタルコンテンツストリームの観客に関連する観客デバイスから通信ネットワークを介して送信される要求を受信することであって、前記要求は前記ユーザプロファイルに関連付けられ、前記デジタルコンテンツストリーム内の指定されたシーンについてのコンテキストに関係する、前記受信することと、
前記観客デバイスからの前記要求に応答して前記メモリに格納される命令を実行することと、
を含み、
プロセッサによる前記命令の実行は、
前記指定されたシーンが前記デジタルコンテンツストリームの前記所定の部分のうちの少なくとも１つに関連付けられていることを識別し、前記シーンが前記少なくとも１つの所定の部分に関連付けられていることを識別することは前記メタデータに基づき、
前記デジタルコンテンツストリームのうちの前記少なくとも１つの所定の部分に関連する、前記格納されたコンテキスト情報セットのうちの１つ以上を取得し、
前記ユーザプロファイル中の前記１つ以上の優先順位付けパラメータに従って前記取得されたコンテキスト情報セットを優先順位付けし、
履歴データまたは統計データに基づいて前記デジタルコンテンツストリームとの今後のインタラクションに関する予測を行い、
前記観客デバイスに提供される前記デジタルコンテンツストリームについてのコンテキスト層を生成し、前記コンテキスト層を生成することは前記予測に基づいて前記優先順位付けされたコンテキスト情報セットをフィルタリングすることを含み、前記生成されたコンテキスト層は前記デジタルコンテンツストリーム内の前記シーンの少なくとも一部にオーバーレイされる、少なくとも前記フィルタリングされたコンテキスト情報セットの提示を含む、前記方法。 A method for providing a contextual layer to digital content, comprising:
context information about a digital content stream, wherein different sets of the context information are associated with different predetermined portions of the digital content stream;
a user profile including one or more prioritization parameters relating to said contextual information; and real-time generated metadata relating to interactions with said digital content stream;
in memory; and
receiving a request transmitted over a communication network from a spectator device associated with a spectator of said digital content stream, said request associated with said user profile for a specified scene within said digital content stream; said receiving, relating to the context of
executing instructions stored in the memory in response to the request from the spectator device;
including
Execution of the instructions by the processor includes:
identifying that the designated scene is associated with at least one of the predetermined portions of the digital content stream; identifying that the scene is associated with the at least one predetermined portion; Based on said metadata,
obtaining one or more of the stored sets of contextual information associated with the at least one predetermined portion of the digital content stream;
prioritizing the obtained set of context information according to the one or more prioritization parameters in the user profile;
making predictions about future interactions with said digital content stream based on historical or statistical data;
generating a context layer for the digital content stream provided to the spectator device, generating the context layer includes filtering the prioritized set of context information based on the prediction; presenting at least the filtered set of contextual information, wherein a filtered context layer is overlaid on at least a portion of the scene within the digital content stream. 前記デジタルコンテンツストリームの１つ以上の所定の部分は、１つ以上のデジタルオブジェクトを含む、請求項８に記載の方法。 9. The method of claim 8 , wherein one or more predetermined portions of the digital content stream comprise one or more digital objects. 前記デジタルオブジェクトのそれぞれは、それぞれのコンテキスト情報セットに関連付けられる、請求項９に記載の方法。 10. The method of claim 9 , wherein each of said digital objects is associated with a respective set of contextual information. 前記観客デバイスからの前記要求は、前記１つ以上のデジタルオブジェクトの中から選択されるデジタルオブジェクトに関係する、請求項１０に記載の方法。 11. The method of claim 10 , wherein the request from the spectator device pertains to digital objects selected from among the one or more digital objects. 複数のユーザデバイスによる前記デジタルコンテンツストリームとの以前のインタラクションに関する前記履歴データまたは前記統計データを格納することをさらに含み、前記シーンが前記少なくとも１つの所定の部分に関連付けられていることを識別することは、前記履歴データまたは前記統計データに基づく、請求項８に記載の方法。 further comprising storing the historical data or the statistical data regarding previous interactions with the digital content stream by a plurality of user devices, and identifying that the scene is associated with the at least one predetermined portion. is based on the historical data or the statistical data. 前記要求は、前記デジタルコンテンツストリーム内の前記シーンに関連する時点または仮想位置を指定する、請求項８に記載の方法。 9. The method of claim 8 , wherein the request specifies a point in time or virtual location relative to the scene within the digital content stream. 前記シーンが前記少なくとも１つの所定の部分に関連付けられていることを識別することは、前記指定された時点、または前記指定された仮想位置に基づく、請求項１３に記載の方法。 14. The method of claim 13 , wherein identifying that the scene is associated with the at least one predetermined portion is based on the specified point in time or the specified virtual location. デジタルコンテンツにコンテキスト層を提供する方法を実行するプロセッサによって実行可能なプログラムが具現化された非一時的コンピュータ可読記憶媒体であって、
前記方法は、
デジタルコンテンツストリームに関するコンテキスト情報であって、前記コンテキスト情報の異なるセットは前記デジタルコンテンツストリームの異なる所定の部分に関連付けられる、前記コンテキスト情報、
前記コンテキスト情報に関する１つ以上の優先順位付けパラメータを含むユーザプロファイル、及び
前記デジタルコンテンツストリームとのインタラクションに関してリアルタイムに生成されるメタデータ、
を格納することと、
前記デジタルコンテンツストリームの観客に関連する観客デバイスから通信ネットワークを介して送信される要求を受信することであって、前記要求は前記ユーザプロファイルに関連付けられ、前記デジタルコンテンツストリーム内の指定されたシーンについてのコンテキストに関係する、前記受信することと、
前記観客デバイスからの前記要求に応答して、前記指定されたシーンが前記デジタルコンテンツストリームの前記所定の部分のうちの少なくとも１つに関連付けられていることを識別することであって、前記シーンが前記少なくとも１つの所定の部分に関連付けられていることを識別することは前記メタデータに基づく、前記識別することと、
前記デジタルコンテンツストリームの前記少なくとも１つの所定の部分に関連する前記格納されたコンテキスト情報セットのうちの１つ以上を取得することと、
前記ユーザプロファイル内の前記１つ以上の優先順位付けパラメータに従って前記取得されたコンテキスト情報セットを優先順位付けすることと、
履歴データまたは統計データに基づいて前記デジタルコンテンツストリームとの今後のインタラクションに関する予測を行うことと、
前記観客デバイスに提供される前記デジタルコンテンツストリームについてのコンテキスト層を生成することであって、前記コンテキスト層を生成することは前記予測に基づいて前記優先順位付けされたコンテキスト情報セットをフィルタリングすることを含み、前記生成されたコンテキスト層は前記デジタルコンテンツストリーム内の前記シーンの少なくとも一部にオーバーレイされる、少なくとも前記フィルタリングされたコンテキスト情報セットの提示を含む、前記生成することと、
を含む、前記非一時的コンピュータ可読記憶媒体。 A non-transitory computer-readable storage medium embodying a program executable by a processor to perform a method for providing a contextual layer to digital content, comprising:
The method includes:
context information about a digital content stream, wherein different sets of the context information are associated with different predetermined portions of the digital content stream;
a user profile including one or more prioritization parameters relating to said contextual information; and real-time generated metadata relating to interactions with said digital content stream;
and storing
receiving a request transmitted over a communication network from a spectator device associated with a spectator of said digital content stream, said request associated with said user profile for a specified scene within said digital content stream; said receiving, relating to the context of
identifying, in response to the request from the spectator device, that the specified scene is associated with at least one of the predetermined portions of the digital content stream, the scene comprising: identifying associated with the at least one predetermined portion is based on the metadata;
obtaining one or more of the stored sets of context information associated with the at least one predetermined portion of the digital content stream;
Prioritizing the obtained set of context information according to the one or more prioritization parameters in the user profile;
making predictions about future interactions with the digital content stream based on historical or statistical data;
generating a context layer for the digital content stream provided to the spectator device, generating the context layer filtering the prioritized set of context information based on the prediction; said generating, wherein said generated context layer includes a presentation of at least said filtered set of context information overlaid on at least a portion of said scene within said digital content stream;
the non-transitory computer-readable storage medium comprising:
JP2021549083A 2019-02-20 2020-02-06 Context layer for digital content Pending JP2022520992A (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US16/280,211 2019-02-20
US16/280,211 US11159595B2 (en) 2019-02-20 2019-02-20 Contextual layer for digital content
PCT/US2020/017058 WO2020171968A1 (en) 2019-02-20 2020-02-06 Contextual layer for digital content

Publications (2)

Publication Number Publication Date
JP2022520992A JP2022520992A (en) 2022-04-04
JPWO2020171968A5 true JPWO2020171968A5 (en) 2023-02-07

Family

ID=72042412

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021549083A Pending JP2022520992A (en) 2019-02-20 2020-02-06 Context layer for digital content

Country Status (5)

Country Link
US (1) US11159595B2 (en)
EP (1) EP3928487B1 (en)
JP (1) JP2022520992A (en)
CN (1) CN114073056B (en)
WO (1) WO2020171968A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11159595B2 (en) 2019-02-20 2021-10-26 Sony Interactive Entertainment LLC Contextual layer for digital content

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6421733B1 (en) * 1997-03-25 2002-07-16 Intel Corporation System for dynamically transcoding data transmitted between computers
US6999083B2 (en) * 2001-08-22 2006-02-14 Microsoft Corporation System and method to provide a spectator experience for networked gaming
US7385622B2 (en) * 2002-01-31 2008-06-10 Tandberg Telecom As Method and system for presenting a video call management console
US20070255697A1 (en) * 2002-04-05 2007-11-01 Lisa Seeman System and method for enhancing source content
US7676194B2 (en) * 2003-08-22 2010-03-09 Rappaport Theodore S Broadband repeater with security for ultrawideband technologies
US7458894B2 (en) * 2004-09-15 2008-12-02 Microsoft Corporation Online gaming spectator system
WO2007009225A1 (en) * 2005-07-22 2007-01-25 Kangaroo Media Inc. System and methods for enhancing the experience of spectators attending a live sporting event
US7632186B2 (en) * 2005-11-21 2009-12-15 Microsoft Corporation Spectator mode for a game
US8784196B2 (en) * 2006-04-13 2014-07-22 Igt Remote content management and resource sharing on a gaming machine and method of implementing same
US8992304B2 (en) * 2006-04-13 2015-03-31 Igt Methods and systems for tracking an event of an externally controlled interface
US10026255B2 (en) * 2006-04-13 2018-07-17 Igt Presentation of remotely-hosted and locally rendered content for gaming systems
US8157647B2 (en) * 2007-10-17 2012-04-17 Igt Tournament manager for use in casino gaming system
US20100241663A1 (en) * 2008-02-07 2010-09-23 Microsoft Corporation Providing content items selected based on context
US8522312B2 (en) * 2008-05-13 2013-08-27 At&T Mobility Ii Llc Access control lists and profiles to manage femto cell coverage
US7900179B2 (en) * 2008-05-27 2011-03-01 Globalfoundries Inc. Method for prioritizing nodes for rerouting and device therefor
US8088001B2 (en) * 2008-08-18 2012-01-03 Igt Casino gaming exchange market
US8740701B2 (en) * 2009-06-15 2014-06-03 Wms Gaming, Inc. Controlling wagering game system audio
US20110231396A1 (en) * 2010-03-19 2011-09-22 Avaya Inc. System and method for providing predictive contacts
US10786736B2 (en) * 2010-05-11 2020-09-29 Sony Interactive Entertainment LLC Placement of user information in a game space
US20120209839A1 (en) * 2011-02-15 2012-08-16 Microsoft Corporation Providing applications with personalized and contextually relevant content
US20130246339A1 (en) * 2011-09-13 2013-09-19 Kenny Richard Kendrena Systems and methods for categorizing and presenting performance assessment data
ES2905831T3 (en) * 2011-10-21 2022-04-12 Fraunhofer Ges Forschung Resource management concept
ES2429663B1 (en) * 2012-02-28 2015-04-13 Telefónica, S.A. METHOD AND SYSTEM FOR PLANNING THE DESCENDING LINK IN LONG-TERM EVOLUTION NETWORKS (LTE) BASED ON QUALITY OF SERVICE (QOS)
US20130300832A1 (en) * 2012-05-14 2013-11-14 Sstatzz Oy System and method for automatic video filming and broadcasting of sports events
US8935303B2 (en) * 2012-12-28 2015-01-13 Telefonica, S.A. Method and system of optimizing a ranked list of recommended items
US9244977B2 (en) * 2012-12-31 2016-01-26 Google Inc. Using content identification as context for search
US20140371875A1 (en) * 2013-06-12 2014-12-18 Tecbak System and method for controlling joint access to an apparatus
WO2015042389A1 (en) * 2013-09-20 2015-03-26 Convida Wireless, Llc Mobile network operator (mno) control of wifi qos based on traffic detection and dscp mapping in trusted wlan access and networks
US20150161249A1 (en) * 2013-12-05 2015-06-11 Lenovo (Singapore) Ptd. Ltd. Finding personal meaning in unstructured user data
US9665924B2 (en) * 2015-04-01 2017-05-30 Microsoft Technology Licensing, Llc Prioritized requesting of mapping layers
US9873056B2 (en) * 2015-09-15 2018-01-23 Square Enix Holdings Co., Ltd. Game system including third party input
US10112113B2 (en) * 2016-03-30 2018-10-30 Sony Interactive Entertainment Inc. Personalized data driven game training system
US10409852B2 (en) * 2016-12-30 2019-09-10 Atlassian Pty Ltd Method, apparatus, and computer program product for user-specific contextual integration for a searchable enterprise platform
US11159856B2 (en) * 2017-07-10 2021-10-26 Sony Interactive Entertainment LLC Non-linear content presentation and experience
US10657677B2 (en) * 2017-12-04 2020-05-19 International Business Machines Corporation Cognitive situation-aware vision deficiency remediation
US10565761B2 (en) * 2017-12-07 2020-02-18 Wayfair Llc Augmented reality z-stack prioritization
US11051190B2 (en) * 2018-03-19 2021-06-29 Motorola Solutions, Inc. Adaptive talkgroup selection and resource assignment for listening posts
US10521963B1 (en) * 2018-06-08 2019-12-31 Verizon Patent And Licensing Inc. Methods and systems for representing a pre-modeled object within virtual reality data
US11020671B2 (en) * 2018-07-12 2021-06-01 Microsoft Technology Licensing, Llc System and method for enhancing participation in online multiplayer sessions
US11159595B2 (en) 2019-02-20 2021-10-26 Sony Interactive Entertainment LLC Contextual layer for digital content

Similar Documents

Publication Publication Date Title
CN111800442B (en) Network system, mirror image management method, device and storage medium
JP2022031324A5 (en) Image communication system, image communication terminal, image communication method, program, and recording medium
KR102321364B1 (en) Method for synthesizing a 3d backgroud content and device thereof
JP2003058382A (en) Preferential execution controlling method in information processing system, device and program therefor
CN108960889B (en) Method and device for controlling voice speaking room progress in virtual three-dimensional space of house
US11412270B2 (en) Method and apparatus for processing multimedia file, storage medium, and electronic apparatus
CN111294647B (en) Video processing method, device and equipment and storage medium
US10325390B2 (en) Geometric work scheduling with dynamic and probabilistic work trimming
CN111324630B (en) MPI-based neural network architecture search parallelization method and equipment
US11393134B2 (en) Customizing soundtracks and hairstyles in modifiable videos of multimedia messaging application
CN110297927A (en) Article dissemination method, device, equipment and storage medium
CN108881894A (en) The multimedia Quality of experience of VR determines method and device
KR101403579B1 (en) Method for providing on-line game supporting item customaizing by user and the system there of
JPWO2020171968A5 (en)
CN110659119B (en) Picture processing method, device and system
JP2010028705A (en) Video summarization device and video summarization program
CN110622517A (en) Video processing method and device
US20220182467A1 (en) Remote Processing of Augmented Reality Workloads
CN114422862A (en) Service video generation method, device, equipment, storage medium and program product
CN106909473A (en) A kind of node restart after data processing method and equipment
CN117112119B (en) Picture display method and device
WO2023221949A1 (en) Model scheduling method and device, and storage medium
CN116501384A (en) Program instruction execution method, device, equipment and storage medium
CN116634191A (en) Data storage method and device, electronic equipment and storage medium
CN117407713A (en) Training management method and related device for distributed model training