JP7118966B2 - メディアアセットの着目オブジェクトの移動の経路を予測し、移動の経路におけるオーバーレイの設置を回避することによって、オーバーレイによるメディアアセットの妨害を最小化するためのシステムおよび方法 - Google Patents

メディアアセットの着目オブジェクトの移動の経路を予測し、移動の経路におけるオーバーレイの設置を回避することによって、オーバーレイによるメディアアセットの妨害を最小化するためのシステムおよび方法 Download PDF

Info

Publication number
JP7118966B2
JP7118966B2 JP2019531300A JP2019531300A JP7118966B2 JP 7118966 B2 JP7118966 B2 JP 7118966B2 JP 2019531300 A JP2019531300 A JP 2019531300A JP 2019531300 A JP2019531300 A JP 2019531300A JP 7118966 B2 JP7118966 B2 JP 7118966B2
Authority
JP
Japan
Prior art keywords
location
frame
interest
media asset
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019531300A
Other languages
English (en)
Other versions
JP2020513711A (ja
Inventor
ヴィクラム マカム グプタ,
ビシュワス シャラダナガル パンチャクシャライアー,
Original Assignee
ロヴィ ガイズ, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ロヴィ ガイズ, インコーポレイテッド filed Critical ロヴィ ガイズ, インコーポレイテッド
Publication of JP2020513711A publication Critical patent/JP2020513711A/ja
Application granted granted Critical
Publication of JP7118966B2 publication Critical patent/JP7118966B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Analysis (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

オーバーレイおよび二次コンテンツの他の形態が、多くの場合、家への電話の通知または消費しているメディアに関する通知等の通知をユーザに伝達するために、メディアアセットを経由して提供される。そのようなオーバーレイは、オーバーレイが視聴しているメディアアセット内の着目オブジェクトを遮断し得るので、妨害性であり得る。関連技術分野では、重要な静的オブジェクトが、識別され、オーバーレイの設置は、これらの静的オブジェクトを回避する様式で実施される。しかしながら、関連技術分野は、非静的オブジェクトが向かって移動し得る場所を予測せず、したがって、依然として、ユーザのメディアの楽しみに対して妨害性であるオーバーレイの設置をもたらし得る。
このおよび他の目的のために、システムおよび方法が、メディアアセットの着目オブジェクトの移動の経路を予測し、移動の経路におけるオーバーレイの設置を回避することによって、オーバーレイによるメディアアセットの妨害を最小化するために、本明細書で提供される。例えば、サッカーボールが着目オブジェクトであり、サッカーボールが競技場の左側から競技場の右側まで進行している場合、競技場の右側の上のオーバーレイの設置は、ボールが競技場を横断して進むにつれて、オーバーレイが妨害性にならないように回避され得る。
本開示のいくつかの側面では、メディアガイドアプリケーションは、メディアアセットの第1のフレーム内の着目オブジェクトを検出し得る。着目オブジェクトは、着目オブジェクトの内容を反映するメタデータを使用すること、画像認識ソフトウェアおよび補助情報を使用し、着目オブジェクトの内容を決定すること、フレームの前景にあるオブジェクトを決定すること、または任意の他の様式によって等、任意の公知の様式で検出され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、第1のフレーム内の着目オブジェクトの第1の場所を決定し得、メディアアセットの第2のフレーム内の着目オブジェクトの第2の場所を決定し得る。サッカーの例から続けて、メディアガイドアプリケーションは、フレームの特徴に対して場所を決定し得る(例えば、ボールが競技場の左側または競技場の右側にあるか?)。代替として、メディアガイドアプリケーションは、画像自体の座標に対して場所を決定し得る(例えば、ボールがフレームの左上象限またはフレームの右上象限内にあるか?)。
いくつかの実施形態では、メディアガイドアプリケーションは、第1の場所および第2の場所に基づいて、メディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算し得る。例として、メディアガイドアプリケーションは、最初に、オーバーレイの中に含まれるべきコンテンツの量を決定することによって、この計算を実施し得る。コンテンツの量は、オーバーレイが短い通信(例えば、電話番号または1人のユーザから別のユーザへのショートメッセージの通知)またはある大量の情報(例えば、画面の半分を要求する映画の予告編)であるかどうかに応じて変動し得る。
メディアガイドアプリケーションは、次いで、ユーザプロファイル(例えば、メディアアセットを消費するユーザのプロファイル)の情報に基づいて、ユーザがオーバーレイのコンテンツを消費するために必要とするであろう第1の時間量を決定し得る。例えば、メディアガイドアプリケーションは、ユーザプロファイルが、ユーザが読むのが遅いことを反映し、したがって、ユーザが5文字の通知を読むために10秒全体を要し得ることを決定し得る。
メディアガイドアプリケーションは、(例えば、オブジェクトの速度に基づいて)着目オブジェクトが予測場所に到達する前に経過するであろう第2の時間量も決定し得、第2の時間量が第1の時間量を超えることを決定することに応答して、第2の時間量より小さい期間にわたって、予測場所でメディアアセットの上にオーバーレイを表示のために生成し得る。例えば、メッセージが画面の象限を占め、ユーザがオーバーレイのコンテンツを消費し終わるであろう前にサッカーボールが画面の右上象限に到達しないであろう場合、オーバーレイは、画面の右上象限の上に表示のために生成され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、第1の場所、第2の場所、および予測場所のうちのいずれとも重複しない場所でメディアアセットの上にオーバーレイを表示のために生成し得る。例えば、オーバーレイは、サッカーボールまたはサッカーボールを追いかけている選手のパスを完全に回避する様式で設置され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、(例えば、オーバーレイの境界を決定することによって)オーバーレイのサイズを決定し得る。メディアガイドアプリケーションは、第1のフレームと比較して、第2のフレームにおいて変化していない、オーバーレイのサイズに対応する第2のフレーム内の領域を識別し得る。例えば、メディアガイドアプリケーションは、スポーツの試合の選手もボールも両方のフレームの左上象限になく、したがって、左上象限がある期間にわたって空いていることを決定し得る。メディアガイドアプリケーションは、領域が第1の場所、第2の場所、および予測場所のうちのいずれかと重複するかどうか(例えば、選手もボールも画面の左上象限に向かって進行していないこと)を決定することに進み得る。メディアガイドアプリケーションは、領域が第1の場所、第2の場所、および予測場所のうちのいずれとも重複しないことを決定することに応答して、オーバーレイの表示のための生成を実施し得、(例えば、個人または着目オブジェクトが領域内にない、もしくはないであろうため、オーバーレイがスポーツイベントの任意の有意義な部分の上にあろう可能性がないため)オーバーレイを領域内のメディアアセットの上に表示のために生成させ得る。
いくつかの実施形態では、メディアガイドアプリケーションは、着目オブジェクトが第3のフレームの予測場所内にないことを決定し得る。例えば、着目オブジェクトがサッカー選手であり、メディアガイドアプリケーションが、サッカー選手が画面の左上象限にいるであろうが、サッカー選手が画面の左上象限にいないことを予測した場合、メディアガイドアプリケーションは、着目オブジェクトが第3のフレームの予測場所内にないことを決定するであろう。着目オブジェクトが第3のフレームの予測場所内にないことを決定することに応答して、メディアガイドアプリケーションは、(例えば、着目オブジェクトが潜在的にオーバーレイの下にあるため、オーバーレイが妨害性ではないことを確実にするために)メディアアセットの上にオーバーレイを表示のために生成することを止め得る。
いくつかの実施形態では、着目オブジェクトが第3のフレームの予測場所内にないことを決定することにさらに応答して、メディアガイドアプリケーションは、着目オブジェクトの予測場所の計算が失敗したことを示すデータを用いて、着目オブジェクトの予測場所を計算するために使用されるモデルを更新し得、更新されたモデルに基づいて、メディアアセットの第4のフレーム内の着目オブジェクトの更新された予測場所を決定し得る。例えば、スポーツイベントにおける選手の移動についての新しいデータは、メディアガイドアプリケーションに選手の将来の移動についてのその予測を変更させ得る。したがって、メディアガイドアプリケーションは、更新された予測場所に重複しない場所でメディアアセットの上にオーバーレイを表示のために生成し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、メディアアセットがライブメディアアセット放送(例えば、テレビチャネルを経由した放送)であることを決定し得る。メディアガイドアプリケーションは、メディアアセットが複数のタイプのうちのあるタイプ(例えば、コンサートのライブ放送とは対照的にスポーツイベント)であることも決定し得る。メディアガイドアプリケーションは、したがって、あるタイプに基づいて、複数の候補着目オブジェクトから着目オブジェクトを判別することによって、第1のフレーム内の着目オブジェクトを検出し得る。
例えば、コンサートにおいて、演奏しているバンドのファンが、群衆の中で巨大なビーチボールを投げ得、サッカーの試合では、サッカーボールが、蹴られる。メディアガイドアプリケーションは、コンサートの主な目的が音楽の発表であるので、ボールがコンサートにおいて着目オブジェクトではないことを決定し得る。しかしながら、メディアガイドアプリケーションは、サッカーの試合の主な目的がサッカーボールの移動であるので、ボールがサッカーの試合において着目オブジェクトであることを決定し得る。メディアガイドアプリケーションは、第1の場所および第2の場所に基づいて、着目オブジェクトの同一性およびあるタイプの両方に基づくメディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算し得る。例えば、サッカーの試合におけるボールの移動は、規則的であり得、ボールは、直線パスで進行する一方で、ビリヤードの試合における移動は、不規則的であり得、ボールは、予測を変化させるであろうその経路に沿ってそれが遭遇する多くの衝突に基づいて進行する。
いくつかの実施形態では、メディアガイドアプリケーションは、第1の場所および第2の場所に基づいて、メディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算するとき、第1の場所を第2の場所と比較し、第1の場所と第2の場所との間の距離およびメディアオブジェクトが進行している方向を決定し得る。メディアガイドアプリケーションはまた、第1のフレームのタイムスタンプを第2のフレームのタイムスタンプと比較し、第1のフレームおよび第2のフレームが放送された時間の間の時間差も決定し得る。この情報を用いて、メディアガイドアプリケーションは、距離、方向、および時間差に基づいて、着目オブジェクトの速度を決定し得、第3のフレームの予測タイムスタンプも決定し得る。メディアガイドアプリケーションは、速度が実質的に維持される(例えば、摩擦等の自然力に起因する速度の自然損失を差し引いて、速度が維持される)場合、着目オブジェクトが第3のフレーム内にあろう場所に基づいて、予測場所を決定し得る。
いくつかの実施形態では、メディアアセットは、スポーツイベントのライブ放送であり、着目オブジェクトは、スポーツイベントに参加している個人であり、第1の場所および第2の場所は、等しい。メディアガイドアプリケーションは、個人のプロファイル(例えば、スポーツ選手に対応する統計ライン)にアクセスし得、プロファイルの情報に基づいて、個人がスポーツイベントに参加しているときに進行する傾向がある優先方向を決定し得る。例えば、メディアアセットがアメリカンフットボールの試合であり、個人が、多くの場合、その左に走る場合、メディアガイドアプリケーションは、この情報に基づいて、個人が次のフレーム内でいるであろう場所のその予測を形成し得る。したがって、メディアガイドアプリケーションは、予測場所を優先方向に基づかせることによって、メディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算し得る。
いくつかの実施形態では、メディアアセットは、スポーツイベントのライブ放送であり、着目オブジェクトは、ボールである。メディアガイドアプリケーションは、メディアアセットの第4のフレームにおいて、第3の位置における個人を検出し得、メディアアセットの第5のフレームにおいて、第4の位置における個人を検出し得る。メディアガイドアプリケーションは、第3の位置と第4の位置との間の個人の移動に基づいて、個人がボールと相互作用する可能性が高いことを決定し得る。例えば、メディアガイドアプリケーションは、選手がサッカーボールに急速に接近しており、したがって、ボールが方向を間もなく変更するであろうことを決定し得る。したがって、メディアガイドアプリケーションは、第3の位置と第4の位置との間の個人の移動に基づいて、ボールのメディアアセットの第6のフレームのための更新された予測位置を計算し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、第3の位置、第4の位置、第4のフレームのタイムスタンプ、および第5のフレームのタイムスタンプに基づいて、個人の第1の速度を決定することによって、第3の位置と第4の位置との間の個人の移動に基づいて、ボールのメディアアセットの第6のフレームのための更新された予測位置を計算し得る。メディアガイドアプリケーションは、第4のフレームおよび第5のフレーム内のボールの場所に基づいて、ボールの第2の速度も決定し得る。メディアガイドアプリケーションは、第1の速度および第2の速度(例えば、選手と衝突する前のボールの速度、ならびにボールと衝突する前の選手の速度)を組み合わせることによって、更新された予測位置を計算し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、メディアアセット内の着目オブジェクトを検出し得る。メディアガイドアプリケーションは、着目オブジェクトの予測される移動の経路を決定し得、移動の経路と重複しない場所でメディアアセットの上にオーバーレイを表示のために生成し得る。
本発明は、例えば、以下を提供する。
(項目1)
方法であって、前記方法は、
メディアアセット内の着目オブジェクトを検出することと、
前記着目オブジェクトの予測される移動の経路を決定することと、
前記移動の経路と重複しない場所で前記メディアアセットの上にオーバーレイを表示のために生成することと
を含む、方法。
(項目2)
メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化する方法であって、前記方法は、
メディアアセットの第1のフレーム内の着目オブジェクトを検出することと、
前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定することと、
前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定することと、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算することと、
前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上にオーバーレイを表示のために生成することと
を含む、方法。
(項目3)
前記オーバーレイのサイズを決定することと、
前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別することであって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、ことと、
前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれかと重複するかどうかを決定することと
をさらに含み、
前記オーバーレイを表示のために生成することは、前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しないことを決定することに応答して実施され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、項目2に記載の方法。
(項目4)
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することと、
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めることと
をさらに含む、項目2に記載の方法。
(項目5)
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
前記更新された予測場所に重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
をさらに含む、項目4に記載の方法。
(項目6)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
前記オーバーレイの中に含まれるべきコンテンツの量を決定することと、
ユーザプロファイルの情報に基づいて、前記ユーザが前記コンテンツを消費するために必要とするであろう第1の時間量を決定することと、
前記着目オブジェクトが前記予測場所に到達する前に経過するであろう第2の時間量を決定することと、
前記第2の時間量が前記第1の時間量を超えることを決定することに応答して、前記第2の時間量より小さい期間にわたって、前記予測場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
を含む、項目2に記載の方法。
(項目7)
前記メディアアセットがライブメディアアセット放送であることを決定することと、
前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定することと
をさらに含み、
前記第1のフレーム内の前記着目オブジェクトを検出することは、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別することを含み、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記着目オブジェクトの同一性および前記あるタイプの両方に基づく、項目2に記載の方法。
(項目8)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記メディアオブジェクトが進行している方向を決定することと、
前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定することと、
前記距離、前記方向、および前記時間差に基づいて、前記着目オブジェクトの速度を決定することと、
前記第3のフレームの予測タイムスタンプを決定することと、
前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定することと
を含む、項目2に記載の方法。
(項目9)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記方法は、
前記個人のプロファイルにアクセスすることと、
前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定することと
をさらに含み、
前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記予測場所を前記優先方向に基づかせることをさらに含む、項目2に記載の方法。
(項目10)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記方法は、
前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出することと、
前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出することと、
前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定することと、
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算することと
をさらに含む、項目2に記載の方法。
(項目11)
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールのメディアアセットの前記第6のフレームのための前記更新された予測位置を計算することは、
前記第3の位置、前記第4の位置、前記第4のフレームのタイムスタンプ、および前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定することと、
前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定することと、
前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定することと
を含む、項目10に記載の方法。
(項目12)
メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化するためのシステムであって、前記システムは、
オブジェクト検出回路と、
表示回路と、
制御回路と
を備え、
前記制御回路は、
前記オブジェクト検出回路を使用して、メディアアセットの第1のフレーム内の着目オブジェクトを検出することと、
前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定することと、
前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定することと、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの予測場所を計算することと、
前記表示回路を使用して、前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上にオーバーレイを表示のために生成することと
を行うように構成されている、システム。
(項目13)
前記制御回路は、
前記オーバーレイのサイズを決定することと、
前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別することであって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、ことと、
前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれかと重複するかどうかを決定することと
を行うようにさらに構成され、
前記制御回路は、前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しないことを決定することに応答して、前記オーバーレイを表示のために生成することを実施するようにさらに構成され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、項目12に記載のシステム。
(項目14)
前記制御回路は、
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することと、
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めることと
を行うようにさらに構成されている、項目12に記載のシステム。
(項目15)
前記制御回路は、前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
前記更新された予測場所に重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
を行うようにさらに構成されている、項目14に記載のシステム。
(項目16)
前記制御回路は、前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、
前記オーバーレイの中に含まれるべきコンテンツの量を決定することと、
ユーザプロファイルの情報に基づいて、前記ユーザが前記コンテンツを消費するために必要とするであろう第1の時間量を決定することと、
前記着目オブジェクトが前記予測場所に到達する前に経過するであろう第2の時間量を決定することと、
前記第2の時間量が前記第1の時間量を超えることを決定することに応答して、前記第2の時間量より小さい期間にわたって、前記予測場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
を行うようにさらに構成されている、項目12に記載のシステム。
(項目17)
前記制御回路は、
前記メディアアセットがライブメディアアセット放送であることを決定することと、
前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定することと
を行うようにさらに構成され、
前記制御回路は、前記第1のフレーム内の前記着目オブジェクトを検出するとき、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別するようにさらに構成され、
前記制御回路は、前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、前記計算を前記着目オブジェクトの同一性および前記あるタイプの両方に基づかせるようにさらに構成されている、項目12に記載のシステム。
(項目18)
前記制御回路は、前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、
前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記メディアオブジェクトが進行している方向を決定することと、
前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定することと、
前記距離、前記方向、および前記時間差に基づいて、前記着目オブジェクトの速度を決定することと、
前記第3のフレームの予測タイムスタンプを決定することと、
前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定することと
を行うようにさらに構成されている、項目12に記載のシステム。
(項目19)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記制御回路は、
前記個人のプロファイルにアクセスすることと、
前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定することと
を行うようにさらに構成され、
前記制御回路は、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、前記予測場所を前記優先方向にさらに基づかせるようにさらに構成されている、項目12に記載のシステム。
(項目20)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記制御回路は、
前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出することと、
前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出することと、
前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定することと、
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算することと
を行うようにさらに構成されている、項目12に記載のシステム。
(項目21)
前記制御回路は、前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算するとき、
前記第3の位置、前記第4の位置、前記第4のフレームのタイムスタンプ、および前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定することと、
前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定することと、
前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定することと
を行うようにさらに構成されている、項目20に記載のシステム。
(項目22)
メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化するためのシステムであって、前記システムは、
メディアアセットの第1のフレーム内の着目オブジェクトを検出する手段と、
前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定する手段と、
前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定する手段と、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算する手段と、
前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上に前オーバーレイを表示のために生成する手段と
を備えている、システム。
(項目23)
前記オーバーレイのサイズを決定する手段と、
前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別する手段であって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、手段と、
前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれかと重複するかどうかを決定する手段と
をさらに備え、
前記オーバーレイを表示のために生成することは、前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しないことを決定することに応答して実施され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、項目22に記載のシステム。
(項目24)
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定する手段と、
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止める手段と
をさらに備えている、項目22に記載のシステム。
(項目25)
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
前記更新された予測場所に重複しない場所で前記メディアアセットの上に前オーバーレイを表示のために生成することと
を行う手段をさらに備えている、項目24に記載のシステム。
(項目26)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、
前記オーバーレイの中に含まれるべきコンテンツの量を決定する手段と、
ユーザプロファイルの情報に基づいて、前記ユーザが前記コンテンツを消費するために必要とするであろう第1の時間量を決定する手段と、
前記着目オブジェクトが前記予測場所に到達する前に経過するであろう第2の時間量を決定する手段と、
前記第2の時間量が前記第1の時間量を超えることを決定することに応答して、前記第2の時間量より小さい期間にわたって、前記予測場所で前記メディアアセットの上に前記オーバーレイを表示のために生成する手段と
を備えている、項目22に記載のシステム。
(項目27)
前記メディアアセットがライブメディアアセット放送であることを決定する手段と、
前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定する手段と
をさらに備え、
前記第1のフレーム内の前記着目オブジェクトを検出する前記手段は、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別する手段を備え、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、前記着目オブジェクトの同一性および前記あるタイプの両方に基づいて前記計算を実施する手段を備えている、項目22に記載のシステム。
(項目28)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、
前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記メディアオブジェクトが進行している方向を決定する手段と、
前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定する手段と、
前記距離、前記方向、および前記時間差に基づいて、前記着目オブジェクトの速度を決定する手段と、
前記第3のフレームの予測タイムスタンプを決定する手段と、
前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定する手段と
を備えている、項目22に記載のシステム。
(項目29)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記システムは、
前記個人のプロファイルにアクセスする手段と、
前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定する手段と
をさらに備え、
前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、前記予測場所を前記優先方向に基づかせるための手段をさらに備えている、項目22に記載のシステム。
(項目30)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記システムは、
前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出する手段と、
前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出する手段と、
前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定する手段と、
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算する手段と
をさらに備えている、項目22に記載のシステム。
(項目31)
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算する前記手段は、
前記第3の位置、前記第4の位置、前記第4のフレームのタイムスタンプ、および前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定する手段と、
前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定する手段と、
前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定する手段と
を備えている、項目30に記載のシステム。
(項目32)
記憶された命令を伴うメモリを備えている非一過性の機械読み取り可能な媒体であって、前記命令は、メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化するためのものであり、前記命令は、
メディアアセットの第1のフレーム内の着目オブジェクトを検出するための命令と、
前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定するための命令と、
前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定するための命令と、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算するための命令と、
前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上に前オーバーレイを表示のために生成するための命令と
を備えている、非一過性の機械読み取り可能な媒体。
(項目33)
前記命令は、
前記オーバーレイのサイズを決定するための命令と、
前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別するための命令であって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、命令と、
前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれかと重複するかどうかを決定するための命令と
をさらに備え、
前記オーバーレイを表示のために生成するための前記命令は、前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しないことを決定することに応答して、表示のために生成を実施するための命令を備え、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、項目32に記載の非一過性の機械読み取り可能な媒体。
(項目34)
前記命令は、
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定するための命令と、
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めるための命令と、
をさらに備えている、項目32に記載の非一過性の機械読み取り可能な媒体。
(項目35)
前記命令は、前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
前記更新された予測場所に重複しない場所で前記メディアアセットの上に前オーバーレイを表示のために生成することと
を行うための命令をさらに備えている、項目34に記載の非一過性の機械読み取り可能な媒体。
(項目36)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、
前記オーバーレイの中に含まれるべきコンテンツの量を決定するための命令と、
ユーザプロファイルの情報に基づいて、前記ユーザが前記コンテンツを消費するために必要とするであろう第1の時間量を決定するための命令と、
前記着目オブジェクトが前記予測場所に到達する前に経過するであろう第2の時間量を決定するための命令と、
前記第2の時間量が前記第1の時間量を超えることを決定することに応答して、前記第2の時間量より小さい期間にわたって、前記予測場所で前記メディアアセットの上に前記オーバーレイを表示のために生成するための命令と
を備えている、項目32に記載の非一過性の機械読み取り可能な媒体。
(項目37)
前記命令は、
前記メディアアセットがライブメディアアセット放送であることを決定するための命令と、
前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定するための命令と
をさらに備え、
前記第1のフレーム内の前記着目オブジェクトを検出する前記手段は、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別するための命令を備え、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、前記着目オブジェクトの同一性および前記あるタイプの両方に基づいて前記予測場所の計算を実施するための命令を備えている、項目32に記載の非一過性の機械読み取り可能な媒体。
(項目38)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、
前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記メディアオブジェクトが進行している方向を決定するための命令と、
前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定するための命令と、
前記距離、前記方向、および前記時間差に基づいて、前記着目オブジェクトの速度を決定するための命令と、
前記第3のフレームの予測タイムスタンプを決定するための命令と、
前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定するための命令と
を備えている、項目32に記載のシステム。
(項目39)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記命令は、
前記個人のプロファイルにアクセスするための命令と、
前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定するための命令と
をさらに備え、
前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、前記予測場所を前記優先方向に基づかせるための命令をさらに備えている、項目32に記載の非一過性の機械読み取り可能な媒体。
(項目40)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記命令は、
前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出するための命令と、
前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出するための命令と、
前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定するための命令と、
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算するための命令と
をさらに備えている、項目32に記載の非一過性の機械読み取り可能な媒体。
(項目41)
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算するための前記命令は、
前記第3の位置、前記第4の位置、前記第4のフレームのタイムスタンプ、および前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定するための命令と、
前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定するための命令と、
前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定するための命令と
を備えている、項目40に記載の非一過性の機械読み取り可能な媒体。
(項目42)
メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化する方法であって、前記方法は、
メディアアセットの第1のフレーム内の着目オブジェクトを検出することと、
前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定することと、
前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定することと、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算することと、
前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上に前オーバーレイを表示のために生成することと
を含む、方法。
(項目43)
前記オーバーレイのサイズを決定することと、
前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別することであって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、ことと、
前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれかと重複するかどうかを決定することと
をさらに含み、
前記オーバーレイを表示のために生成することは、前記領域が前記第1の場所、前記第2の場所、および前記予測場所のうちのいずれとも重複しないことを決定することに応答して実施され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、項目42に記載の方法。
(項目44)
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することと、
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めることと
をさらに含む、項目42および43のいずれかに記載の方法。
(項目45)
前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
前記更新された予測場所に重複しない場所で前記メディアアセットの上に前オーバーレイを表示のために生成することと
をさらに含む、項目44に記載の方法。
(項目46)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
前記オーバーレイの中に含まれるべきコンテンツの量を決定することと、
ユーザプロファイルの情報に基づいて、前記ユーザが前記コンテンツを消費するために必要とするであろう第1の時間量を決定することと、
前記着目オブジェクトが前記予測場所に到達する前に経過するであろう第2の時間量を決定することと、
前記第2の時間量が前記第1の時間量を超えることを決定することに応答して、前記第2の時間量より小さい期間にわたって、前記予測場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
を含む、項目42-45のいずれかに記載の方法。
(項目47)
前記メディアアセットがライブメディアアセット放送であることを決定することと、
前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定することと
をさらに含み、
前記第1のフレーム内の前記着目オブジェクトを検出することは、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別することを含み、
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記着目オブジェクトの同一性および前記あるタイプの両方に基づく、項目42-46のいずれかに記載の方法。
(項目48)
前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記メディアオブジェクトが進行している方向を決定することと、
前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定することと、
前記距離、前記方向、および前記時間差に基づいて、前記着目オブジェクトの速度を決定することと、
前記第3のフレームの予測タイムスタンプを決定することと、
前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定することと
を含む、項目42-47のいずれかに記載の方法。
(項目49)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記方法は、
前記個人のプロファイルにアクセスすることと、
前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定することと
をさらに含み、
前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記予測場所を前記優先方向に基づかせることをさらに含む、項目42-48のいずれかに記載の方法。
(項目50)
前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記方法は、
前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出することと、
前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出することと、
前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定することと、
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算することと
をさらに含む、項目42-49のいずれかに記載の方法。
(項目51)
前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算することは、
前記第3の位置、前記第4の位置、前記第4のフレームのタイムスタンプ、および前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定することと、
前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定することと、
前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定することと
を含む、項目50に記載の方法。
図1は、本開示のいくつかの実施形態による、メディアアセットの過去のフレームおよび現在のフレームを使用し、メディアアセットの将来のフレーム内の着目オブジェクトの場所を予測することの例証的実施形態を描写する。
図2は、本開示のいくつかの実施形態による、メディアガイドアプリケーションリスト項目および他のメディアガイド情報を提供するために使用され得る表示画面の例証的実施形態を示す。
図3は、本開示のいくつかの実施形態による、メディアガイドアプリケーションリスト項目を提供するために使用され得る表示画面の別の例証的実施形態を示す。
図4は、本開示のいくつかの実施形態による、例証的ユーザ機器(UE)デバイスのブロック図である。
図5は、本開示のいくつかの実施形態による、例証的メディアシステムのブロック図である。
図6は、本開示のいくつかの実施形態による、メディアアセットの所与のフレームの着目オブジェクトを覆い隠さないオーバーレイを表示のためにメディアアセットの上に生成するためのプロセスの例証的フローチャートを描写する。
図7は、本開示のいくつかの実施形態による、メディアアセットの将来のフレーム内の着目オブジェクトの予測場所を計算するためのプロセスの例証的フローチャートを描写する。
図8は、本開示のいくつかの実施形態による、着目オブジェクトの速度に基づいて、着目オブジェクトの予測場所を計算するためのプロセスの例証的フローチャートを描写する。
図1は、メディアアセットの過去のフレームおよび現在のフレームを使用し、メディアアセットの将来のフレーム内の着目オブジェクトの場所を予測することの例証的実施形態を描写する。メディアアセットは、フレーム110、フレーム120、およびフレーム130等の複数のフレームを含み得る。フレーム110は、第1の時間に(例えば、過去に)ユーザ機器によって表示されたフレームを描写し、フレーム120は、第2の時間に(例えば、現在)ユーザ機器によって表示されるフレームを描写し、フレーム130は、第3の時間に(例えば、将来)ユーザ機器によって表示されるであろうフレームを描写する。
描写されるように、メディアアセットは、サッカーの試合である。しかしながら、メディアアセットは、図2-5に関して下で定義されるように、任意のメディアアセットであり得る。メディアアセットは、個人102、ボール104、および個人106を含み、そのうちのいずれかまたは全ては、メディアアセットの着目オブジェクトであり得る。個人およびボール使用は、単に例証的であり、メディアアセットは、そのうちのいずれかが着目オブジェクトであり得る任意の他のエンティティを含み得る。本明細書で定義されるように、用語「着目オブジェクト」は、覆い隠された場合、メディアアセットを消費するユーザに楽しみまたは理解の損失を引き起こすであろうメディアアセット内の生体または非生体エンティティである。例えば、選手が、サッカーの試合でゴールを得点している間にオーバーレイで覆われた場合、観客は、そのサッカーの試合を消費することにける楽しみの損失を被るであろう。しかしながら、サッカーの試合のサイドライン上の選手がオーバーレイによって覆われた場合、覆われた選手がサッカーの試合の表示されたフレームのいかなる重要な部分の一部でもなかったので、観客は、そのサッカーの試合を消費することにける楽しみの損失を被らないであろう。
いくつかの実施形態では、メディアガイドアプリケーションは、メディアアセットの第1のフレーム内の着目オブジェクトを検出し得る。メディアガイドアプリケーションは、ユーザ機器またはユーザ機器の遠隔にあるサーバのいずれかに据え付けられ得る制御回路によって実行され得る。メディアガイドアプリケーション、制御回路、種々のユーザ機器、およびサーバの機能性は、図2-5に関して下で詳細に説明される。メディアガイドアプリケーションは、任意の公知の様式で着目オブジェクトを検出し得る。いくつかの実施形態では、着目オブジェクトは、前景オブジェクトであり得る。例えば、1つのオブジェクトが、フレーム110の前景において目立っている場合、または、フレーム110内で中心に置かれるか、フレーム110内でズームインされるか、または別様に誇張されている(例えば、個人102等のオブジェクト以外のオブジェクトがぼけている)場合、1つのオブジェクトは、着目オブジェクトであることが決定され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、顔認識またはオブジェクト認識を採用し、フレーム(例えば、フレーム110)内の個人、文字、および/またはオブジェクトの同一性を決定し得る。例えば、顔特性またはオブジェクト特性を決定するための公知の技法は、(例えば、特性をデータベースのエントリに記憶された既知のエンティティの特性と比較することによって)メディアガイドアプリケーションに、これらの特性が既知のエンティティのそれらに合致することを決定させ得る。
メディアガイドアプリケーションは、フレームのエンティティの同一性を学習した後、これらの同一性をメディアアセットまたはメディアアセットの一部(例えば、所与のフレームもしくは場面)のメタデータと比較し、これらの同一性が、所与の表示されたフレームには特に着目されるものとしてメタデータによって示されているかどうかを学習し得る。この比較に基づいて、メディアガイドアプリケーションは、所与のエンティティが着目オブジェクトであることを決定し得る。
メディアガイドアプリケーションは、加えて、または代替として、メディアアセットのタイプを使用し、所与の既知のエンティティが着目オブジェクトであるかどうかを決定し得る。例えば、メディアガイドアプリケーションは、エンティティがボール104であることを決定し得る。メディアガイドアプリケーションは、その中でボール104が提示されているメディアアセットが、タイプ「スポーツ」であることを決定し得る。メディアガイドアプリケーションは、データベースを調べることによって、ボールがタイプ「スポーツ」のメディアアセットには極めて重要であることを決定し得、したがって、ボール104が着目オブジェクトであると結論を下し得る。同様に、メディアアセットがタイプ「音楽」である場合、メディアガイドアプリケーションは、データベースを調べ、ボールがタイプ「音楽」のメディアアセットには重要ではないことを学習し得、したがって、ボール104が着目オブジェクトではないと結論を下し得る。
メディアアセットのフレームのエンティティが着目オブジェクトであることを決定する多くの他の方法がある。例えば、メディアガイドアプリケーションは、ユーザからオブジェクトが着目されることを明示的または暗示的に述べる指示を受信し得る(例えば、ユーザが、オブジェクトに関する決まり文句を声に出して発声し、メディアガイドアプリケーションが、発声を検出する)。さらに、クラウドソースによるデータが、エンティティが着目されることを示し得る。メディアガイドアプリケーションが、クラウドソースによるデータに基づいて、エンティティが着目されることを決定し得る方法の議論は、現在係属中である2016年5月26日に出願された米国特許出願第15/165,061号(その内容は、その全体として参照することによって本明細書に組み込まれる)で詳細に説明される。メディアアセットの所与のフレーム内に2以上の着目オブジェクトが存在し得る。実際に、いくつかの実施形態では、メディアガイドアプリケーションは、メディアアセットの所与のフレーム内のオブジェクトの多くまたは全てが着目されることを決定し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、第1のフレーム内の着目オブジェクトの第1の場所を決定し得、メディアアセットの第2のフレーム内の着目オブジェクトの第2の場所を決定し得る。例えば、ボール104が着目オブジェクトであると仮定されたい。メディアガイドアプリケーションは、フレーム110および後続のフレーム120の両方の中でボール104の場所を決定し得る。メディアガイドアプリケーションは、任意の参照点を使用して、場所を決定し得る。例えば、メディアガイドアプリケーションは、座標系(例えば、XおよびY座標、または3次元系ではZ座標)を使用して、フレーム110および120の境界を参照して場所を決定し得る。メディアガイドアプリケーションは、スポーツの試合の競技場または任意の他の有界エリアの座標等の他の参照点を使用し得る。(例えば、フレーム110、120、および130に図示されるような)有界エリアの象限等のあまり粒度の細かくない座標が、使用され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、第1の場所および第2の場所に基づいて、メディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算し得る。例えば、着目オブジェクトがボール104である場合、メディアガイドアプリケーションは、ボール104の運動を表すベクトルを決定するために、過去のフレーム110および現在のフレーム120内のボール104の場所を比較し得る。図1に描写されるように、ボール104は、フレーム110に対して、フレーム120内で上および右に移動した。したがって、上および右を指し示すベクトルは、ボール104が進行している方向を表す。ボール104の予測場所が、したがって、この方向に基づいて計算され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、着目オブジェクトが進行している速さも計算し得る。例えば、メディアガイドアプリケーションは、フレーム120のアクティビティとフレーム110のアクティビティとで経過した時間量を決定し得る。メディアガイドアプリケーションは、(例えば、フレーム110およびフレーム120に関連付けられるメタデータに組み込まれるような)フレーム110およびフレーム120に関連付けられるタイムスタンプを使用して、時間経過を決定し得る。代替として、メディアガイドアプリケーションは、リアルタイムで、フレーム110の表示とフレーム120の表示との間で経過した時間量を計算することによって、時間経過を決定し得る。時間経過を決定する任意の他の機構が、時間経過を決定するためにメディアガイドアプリケーションによって使用され得る。
メディアガイドアプリケーションは、時間経過を決定することに加えて、速さを決定するために、着目オブジェクト(例えば、ボール104)が(例えば、フレーム110とフレーム120との間で)進行した距離も決定し得る。例として、ボール104が進行した距離を決定するために、メディアガイドアプリケーションは、フレーム110内のボール104の座標と、フレーム120内のボール104の座標とを計算し得、次いで、それぞれの座標の比較に基づいて距離を計算し得る。ボール104の座標は、任意の有界空間を参照して決定され得る。例えば、メディアガイドアプリケーションは、所与のフレーム(例えば、フレーム110およびフレーム120)の境界に対するx-y(またはメディアアセットが3次元メディアアセットである場合はx-y-z)軸上の座標を決定し得る。他の有界空間も、ボール104が進行した距離を決定するために使用され得る。例えば、座標は、ボール104が進行した距離を決定するために、サッカー場を参照して、または任意の他の有界空間を参照して、決定され得る。
メディアガイドアプリケーションは、フレーム110と120との間でボール104が要した計算された時間、および進んだ距離に基づいて、ボール104の速さを決定し得る。メディアガイドアプリケーションは、加えて、ボール104の速さと併せてボール104が進行した方向を考慮することによって、ボール104の速度を計算し得る。ボール104の速度についての情報を用いて、メディアガイドアプリケーションは、ボール104が将来のフレーム(例えば、フレーム130)における到着し得る位置を予測し得る。メディアガイドアプリケーションは、フレーム120と、表示されるであろう予測が行われているフレーム(例えば、フレーム130)との間の時間経過を決定し、次いで、計算された速度をその時間経過に適用することによって、位置を予測し得る。例として、図1に描写されるように、メディアガイドアプリケーションは、フレーム120におけるボール104の速度と、フレーム130およびフレーム120のタイムスタンプ間のタイムスタンプ差とに基づいて、フレーム130内で、ボール104が画面の右上象限まで進行するであろうことを予測し得る。
メディアガイドアプリケーションは、追加のデータを使用して、ボール104(または任意の他の着目オブジェクト)の予測場所の計算の正確度を向上させ得る。例えば、追加のフレームがフレーム120およびフレーム110を越えて考慮された場合、メディアガイドアプリケーションは、(例えば、草からの摩擦がボール104を徐々に減速させるので)ボール104の速さが他のフレームから計算されるようなボール104の速さに対して減速または加速させられたかどうかを決定し得る。この情報を使用して、メディアガイドアプリケーションは、ボール104の加速または減速を決定し、それに応じて、所与のフレームにおけるボール104の予測場所を調節する。
いくつかの実施形態では、メディアガイドアプリケーションは、着目オブジェクトの予測移動が干渉される可能性が高いことを決定し得る。例えば、メディアガイドアプリケーションは、選手106がボール104に急速に接近しており、したがって、ボール104が方向を間もなく変更するであろうことを決定し得る。したがって、メディアガイドアプリケーションは、予期される干渉に基づいて、ボール104の更新された予測位置を計算し得る。メディアガイドアプリケーションは、ボール104に関して上で説明されるような同一の様式で、個人106の速度を決定することによってボール104の更新された経路を計算し得る。メディアガイドアプリケーションは、次いで、ボール104と個人106との速度を組み合わせ、結果として生じた速度に到達することによって、ボール104の更新された予測経路を計算し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、第1の場所、第2の場所、および予測場所のうちのいずれとも重複しない場所でメディアアセットの上にオーバーレイ(例えば、オーバーレイ108)を表示のために生成し得る。例えば、オーバーレイは、ボール104またはボール104を追いかけている選手(例えば、個人106)の経路を完全に回避する様式で設置され得る。個人106の経路(すなわち、メディアアセットの異なる時間における個人106の予測場所の組)は、ボール104の経路と同一の様式で計算され得る。
いくつかの実施形態では、オーバーレイ108が着目オブジェクトを覆い隠さないであろうことを確実にするために、メディアガイドアプリケーションは、(例えば、オーバーレイの境界を決定することによって)オーバーレイ108のサイズを決定し得る。オーバーレイ108にわたるサイズは、表示のために生成されるオーバーレイ108の特性を定義するオーバーレイ108に関連付けられるメタデータに基づいて決定され得る。メディアガイドアプリケーションは、オーバーレイ108のサイズに基づいて、オーバーレイ108によって覆い隠されるであろう所与のフレームの量を決定し得る。
メディアガイドアプリケーションは、次いで、着目オブジェクトを覆い隠さないであろう領域を識別し得る。この目的のために、メディアガイドアプリケーションは、着目オブジェクトがその予測経路上で進行しないであろうフレーム130の領域を決定し得る。図1を見ると、ボール104が着目オブジェクトである場合、ボール104は、ボール104の予測経路に基づいて、フレーム130の左上象限を通して進行しないであろう。したがって、メディアガイドアプリケーションは、フレーム130の左上象限内でオーバーレイ108を生成することを決定し得る。所与のフレーム内に複数の着目オブジェクト(例えば、個人102、ボール104、および個人106)がある場合、メディアガイドアプリケーションは、個人102、ボール104、および個人106のうちのいずれも含まないオーバーレイ108に適合するであろう場所を識別し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、第1のフレームと比較して第2のフレームにおいて変化していないオーバーレイのサイズに対応する第2のフレーム内の領域を識別し得る。例えば、たとえ個人106が着目オブジェクトではなくても、視聴者のメディアアセットの楽しみは、個人106が覆い隠されていなければ最大化され得る。したがって、メディアガイドアプリケーションは、スポーツの試合の選手もボールも両方のフレーム110およびフレーム120の左上象限になく、両方のフレームの左上象限に移動がなく、したがって、左上象限がある期間にわたって空いていることを決定し得る。メディアガイドアプリケーションは、領域がいかなる移動するオブジェクトとも重複しないことを決定することに応答して、オーバーレイ108の表示のための生成を実施し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、オーバーレイ108が表示のために生成されているべき時間の長さに基づいて、フレーム130上にオーバーレイ108を設置すべき場所を決定し得る。例えば、オーバーレイ108が、わずか2秒間表示されるべきショートメッセージを含み、オーバーレイ108が表示されるべき場所までボール104が進行するために3秒かかるであろう場合、オーバーレイ108がボール108の予測移動経路上にあるにもかかわらず、楽しみの損失がないであろう。
いくつかの実施形態では、フレーム130の上にオーバーレイ108を表示のために生成しているべき時間量は、事前にプログラムされ得、したがって、メディアガイドアプリケーションは、明示的命令からこの時間量を決定し得る。いくつかの実施形態では、メディアガイドアプリケーションは、オーバーレイ108が表示のために生成されているべき時間の長さを計算し得る。メディアガイドアプリケーションは、最初にオーバーレイの中に含まれるべきコンテンツの量(例えば、テキストの量、画像の量、オーバーレイ内の組み込まれたビデオの長さ等)を決定することによって、この計算を実施し得る。コンテンツの量に基づいて、メディアガイドアプリケーションは、オーバーレイ108が表示のために生成されているべき時間の長さを決定し得る。いくつかの実施形態では、オーバーレイ108は、所定の長さのビデオであり得、したがって、オーバーレイ108がフレーム130にわたって表示のために生成されているべき時間量は、その所定の長さと等しい(または実質的に等しい)ように計算され得る。
オーバーレイ108が、テキストメッセージ、ソーシャルメディア更新、ニュース、または他のテキストデータ等のテキストデータを含むとき等のいくつかの実施形態では、メディアガイドアプリケーションは、ユーザがオーバーレイ108のコンテンツを消費するであろう速度に基づいて、オーバーレイ108が表示のために生成されているべき時間の長さを決定し得る。メディアガイドアプリケーションは、ユーザプロファイル(例えば、メディアアセットを消費するユーザのプロファイル)の情報に基づいて、ユーザがオーバーレイのコンテンツを消費するために必要とするであろう第1の時間量を決定し得る。例えば、メディアガイドアプリケーションは、ユーザプロファイルが、(例えば、ユーザが他のテキストデータを消費した速度に基づいて)ユーザが読む速さを反映していることを決定し得る。メディアガイドアプリケーションは、オーバーレイ108内で表示のために生成されるべきテキストコンテンツの量に基づいて、かつユーザプロファイルの情報に基づいて、それによって、ユーザがオーバーレイ108のコンテンツを消費するために要するであろう時間の長さを計算し得る。
メディアガイドアプリケーションは、(例えば、上で説明される同一の様式で)着目オブジェクトが予測場所に到達する前に経過するであろう第2の時間量も決定し得、ボール104がオーバーレイ108に到達する前にユーザがオーバーレイ108のコンテンツを消費するであろう秒数を決定することに応答して、ボール104がオーバーレイ108に到達するために予測される時間未満である期間にわたって、予測場所でメディアアセットの上にオーバーレイを表示のために生成し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、着目オブジェクトが第3のフレームの予測場所内にないことを決定し得る。例えば、着目オブジェクトが個人106であり、メディアガイドアプリケーションが、個人106がフレーム130の左上象限にいるであろうと予測したが、個人106がフレーム130の左上象限にいない場合、メディアガイドアプリケーションは、着目オブジェクトが第3のフレームの予測場所にないことを決定するであろう。着目オブジェクトが第3のフレームの予測場所にないことを決定することに応答して、メディアガイドアプリケーションは、着目オブジェクトがもしかするとオーバーレイの下にあるので、オーバーレイが妨害性ではないことを確実にするために、オーバーレイ108の表示のための生成を止め得る。代替として、メディアガイドアプリケーションは、着目オブジェクトが第3のフレームの予測場所にないことを決定することに応答して、オーバーレイ108が個人106(および/または任意の他の移動するオブジェクトもしくは着目オブジェクト)の視聴を妨害しているかどうかを決定し得、オーバーレイ108の表示のための生成を止めることを、オーバーレイが個人106(および/または任意の他の移動するオブジェクトもしくは着目オブジェクト)の視聴を妨害している状態に限定し得る。
上から続けて、メディアガイドアプリケーションが、着目オブジェクトの予測場所が正しくないことを検出する場合、メディアガイドアプリケーションは、着目オブジェクトの予測場所の計算が失敗したことを示すデータを用いて、着目オブジェクトの予測場所を計算するために使用されるモデルを更新し得、更新されたモデルに基づいて、メディアアセットの第4のフレーム内の着目オブジェクトの更新された予測場所を決定し得る。例えば、スポーツイベントにおける選手の移動についての新しいデータは、メディアガイドアプリケーションに選手の将来の移動についてのその予測を変更させ得る。したがって、メディアガイドアプリケーションは、着目オブジェクトの更新された予測場所に基づいて、オーバーレイ108を表示のために生成し得る。
いくつかの実施形態では、メディアアセットは、スポーツイベントのライブ放送であり、着目オブジェクトは、スポーツイベントに参加している個人であり、第1の場所および第2の場所は、等しい。例えば、アメリカンフットボールの試合では、選手は、試合が開始するまで静止することになっているので、フレーム間を移動しないこともあり、試合が、まだ開始していないこともある。メディアガイドアプリケーションは、例えば、個人102のプロファイル(例えば、スポーツ選手に対応する統計ライン)にアクセスし得、プロファイルの情報に基づいて、個人102がスポーツイベントに参加するときに進行する傾向がある優先方向を決定し得る。例えば、メディアガイドアプリケーションが、個人102がアメリカンフットボールでランニングバックのポジションをプレーすることを決定し、メディアガイドアプリケーションが、個人102のプロファイルの統計に基づいて、個人102がプレーの90%超でその左に走ることを決定する場合、メディアガイドアプリケーションは、この情報に基づいて、個人が次のフレーム内でいるであろう場所のその予測を形成し得る。したがって、メディアガイドアプリケーションは、オーバーレイ108がフレーム130の左側の上に表示のために生成される場合に、個人102との起こり得る重複を回避するために、フレーム130の右側でフレーム130内にオーバーレイ108を表示のために生成し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、ユーザがメディアアセットに非常に熱中していることを決定し得る。メディアガイドアプリケーションは、応答して、ユーザの関心が閾値を下回るまでオーバーレイ108を表示のために生成することを控え得る。ユーザの熱中度のレベルを決定するステップは、2016年10月25日に出願された米国特許出願第15/333,911号(その開示は、その全体として参照することによって本明細書に組み込まれる)で議論されている。いくつかの実施形態では、メディアガイドアプリケーションは、オーバーレイ108の重要性が高いかどうか(例えば、オーバーレイ108が緊急事態をシグナリングしているかどうかと対比して、オーバーレイ108が単純な着信Eメール通知であるかどうか)を決定し得る。オーバーレイ108の重要性が高いことを決定することに応答して、メディアガイドアプリケーションは、ユーザのメディアアセットへの高いレベルの関心にもかかわらず、メディアアセットの上にオーバーレイ108を表示のために生成し得る。他の実施形態では、メディアガイドアプリケーションは、ユーザが閾値期間にわたってメディアアセットに高い関心を持っていることを決定し得、応答して、ユーザがメディアアセットに高い関心を持っているにもかかわらず、メディアアセットの上にオーバーレイ108を表示のために生成し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、オーバーレイ108が、メディアアセットの着目オブジェクトを妨害することなくメディアアセットの上に表示のために生成されることができないことを決定し得る。応答して、メディアガイドアプリケーションは、着目オブジェクトを妨害することを回避するために、二次デバイス(例えば、ユーザのタブレットまたは携帯電話)上にオーバーレイ108のコンテンツを表示のために生成し得る。いくつかの実施形態では、メディアガイドアプリケーションは、加えて、または代替として、単純に信号(例えば、色付き点滅または縮小サイズオーバーレイ108)を使用し、メッセージが着信しているという事実をユーザに警告し、ユーザが、積極的に、メディアアセットを妨害しないであろう便利な時間にオーバーレイ108が表示のために生成されるようにすることを可能にし得る。
いくつかの実施形態では、メディアガイドアプリケーションは、着目オブジェクトが子供による視聴のために不適切である(例えば、裸の女性)ことを決定し得る。メディアガイドアプリケーションは、子供が部屋に進入するような時間までオーバーレイ108を表示のために生成することを控え得、応答して、子供の視界から着目オブジェクトを覆い隠すために、着目オブジェクトの上にオーバーレイ108を表示のために生成し得る。
いくつかの実施形態では、メディアガイドアプリケーションは、オーバーレイ108のコンテンツをメディアアセットに関連させ得る。例えば、メディアアセットがロンドンでのサッカーの試合である場合、メディアガイドアプリケーションは、ユーザが食事することを楽しむであろうロンドンのレストランについての情報等のロンドンに関するコンテンツを伴うオーバーレイ108を表示のために生成し得る。
任意の所与のコンテンツ配信システムにおいてユーザに利用可能なコンテンツの量は、膨大であり得る。その結果、多くのユーザは、ユーザがコンテンツの選択を効率的にナビゲートし、所望し得るコンテンツを容易に識別することを可能にするインターフェースを通したメディアガイドの形態を所望している。そのようなガイドを提供するアプリケーションは、本明細書では、双方向メディアガイドアプリケーションと称されるが、時として、メディアガイドアプリケーションまたはガイドアプリケーションと称されることもある。
双方向メディアガイドアプリケーションは、それらがガイドを提供するコンテンツに応じて、種々の形態をとり得る。1つの典型的なタイプのメディアガイドアプリケーションは、双方向テレビ番組ガイドである。双方向テレビ番組ガイド(時として、電子番組ガイドと称される)は、とりわけ、ユーザが、多くのタイプのコンテンツまたはメディアアセット間をナビゲートし、それを見つけることを可能にする周知のガイドアプリケーションである。双方向メディアガイドアプリケーションは、ユーザが、コンテンツ間をナビゲートし、それを見つけ、選択することを可能にするグラフィカルユーザインターフェース画面を生成し得る。本明細書で参照されるように、用語「メディアアセット」および「コンテンツ」は、テレビ番組、ならびに有料番組、オンデマンド番組(ビデオオンデマンド(VOD)システムにおけるような)、インターネットコンテンツ(例えば、ストリーミングコンテンツ、ダウンロード可能コンテンツ、ウェブキャスト等)、ビデオクリップ、オーディオ、コンテンツ情報、写真、回転画像、ドキュメント、再生リスト項目、ウェブサイト、記事、書籍、電子書籍、ブログ、広告、チャットセッション、ソーシャルメディア、アプリケーション、ゲーム、および/または任意の他のメディアもしくはマルチメディア、ならびに/もしくはそれらの組み合わせ等の電子的に消費可能なユーザアセットを意味すると理解されたい。ガイドアプリケーションは、ユーザが、コンテンツ間をナビゲートし、それを見つけることも可能にする。本明細書で参照されるように、用語「マルチメディア」は、上で説明される少なくとも2つの異なるコンテンツ形態、例えば、テキスト、オーディオ、画像、ビデオ、または双方向コンテンツ形態を利用するコンテンツを意味すると理解されたい。コンテンツは、ユーザ機器デバイスによって、録画、再生、表示、またはアクセスされ得るが、ライブパーフォーマンスの一部であることもできる。
本明細書で議論される実施形態のいずれかを実施するためのメディアガイドアプリケーションおよび/または任意の命令は、コンピュータ読み取り可能な媒体上にエンコードされ得る。コンピュータ読み取り可能な媒体は、データを記憶することが可能な任意のメディアを含む。コンピュータ読み取り可能な媒体は、限定ではないが、電気もしくは電磁信号の伝搬を含む一過性であり得る、または限定ではないが、ハードディスク、フロッピー(登録商標)ディスク、USBドライブ、DVD、CD、メディアカード、レジスタメモリ、プロセッサキャッシュ、ランダムアクセスメモリ(「RAM」)等の揮発性および不揮発性コンピュータメモリもしくは記憶デバイスを含む非一過性であり得る。
インターネット、モバイルコンピューティング、および高速無線ネットワークの出現に伴って、ユーザは、従来は使用しなかったユーザ機器デバイス上でメディアにアクセスするようになっている。本明細書で参照されるように、語句「ユーザ機器デバイス」、「ユーザ機器」、「ユーザデバイス」、「電子デバイス」、「電子機器」、「メディア機器デバイス」、または「メディアデバイス」は、テレビ、スマートTV、セットトップボックス、衛星テレビに対応するための統合型受信機デコーダ(IRD)、デジタル記憶デバイス、デジタルメディア受信機(DMR)、デジタルメディアアダプタ(DMA)、ストリーミングメディアデバイス、DVDプレーヤ、DVDレコーダ、接続型DVD、ローカルメディアサーバ、BLU-RAY(登録商標)プレーヤ、BLU-RAY(登録商標)レコーダ、パーソナルコンピュータ(PC)、ラップトップコンピュータ、タブレットコンピュータ、ウェブTVボックス、パーソナルコンピュータテレビ(PC/TV)、PCメディアサーバ、PCメディアセンター、ハンドヘルドコンピュータ、固定電話、携帯情報端末(PDA)、携帯電話、ポータブルビデオプレーヤ、ポータブル音楽プレーヤ、ポータブルゲーム機、スマートフォン、または任意の他のテレビ機器、コンピューティング機器、もしくは無線デバイス、および/またはそれらの組み合わせ等の上で説明されるコンテンツにアクセスするための任意のデバイスを意味すると理解されたい。いくつかの実施形態では、ユーザ機器デバイスは、正面画面および裏面画面、複数の正面画面、または複数の角度付き画面を有し得る。いくつかの実施形態では、ユーザ機器デバイスは、正面カメラおよび/または裏面カメラを有し得る。これらのユーザ機器デバイス上で、ユーザは、テレビを通して利用可能な同一のコンテンツ間をナビゲートし、それを見つけることが可能であり得る。その結果として、メディアガイドは、これらのデバイス上でも利用可能であり得る。提供されるガイドは、テレビのみを通して利用可能なコンテンツ、他のタイプのユーザ機器デバイスのうちの1つ以上のもののみを通して利用可能なコンテンツ、もしくはテレビおよび他のタイプのユーザ機器デバイスのうちの1つ以上のものの両方を通して利用可能なコンテンツのためのものであり得る。メディアガイドアプリケーションは、ユーザ機器デバイス上で、オンラインアプリケーション(すなわち、ウェブサイト上で提供される)として、または独立型アプリケーションもしくはクライアントとして提供され得る。メディアガイドアプリケーションを実装し得る種々のデバイスおよびプラットフォームは、下でより詳細に説明される。
メディアガイドアプリケーションの機能のうちの1つは、メディアガイドデータをユーザに提供することである。本明細書で参照されるように、語句「メディアガイドデータ」または「ガイドデータ」は、コンテンツに関連する任意のデータもしくはガイドアプリケーションを動作させることにおいて使用されるデータを意味すると理解されたい。例えば、ガイドデータは、番組情報、ガイドアプリケーション設定、ユーザ選好、ユーザプロファイル情報、メディアリスト項目、メディア関連情報(例えば、放送時間、放送チャネル、タイトル、内容、評価情報(例えば、ペアレンタルコントロール評価、批評家の評価等)、ジャンルまたはカテゴリ情報、俳優情報、放送会社またはプロバイダのロゴのロゴデータ等)、メディア形式(例えば、標準解像度、高解像度、3D等)、広告情報(例えば、テキスト、画像、メディアクリップ等)、オンデマンド情報、ブログ、ウェブサイト、およびユーザが所望のコンテンツ選択間をナビゲートし、それを見つけるために役立つ任意の他のタイプのガイドデータを含み得る。
図2-3は、メディアガイドデータを提供するために使用され得る例証的表示画面を示す。図2-3に示される表示画面は、任意の好適なユーザ機器デバイスまたはプラットフォーム上に実装され得る。図2-3の表示は、フル画面表示として図示されているが、それらは、表示されているコンテンツ上にも完全または部分的にオーバーレイされ得る。ユーザは、表示画面に提供された選択可能なオプション(例えば、メニューオプション、リスト項目オプション、アイコン、ハイパーリンク等)を選択することによって、またはリモートコントロールもしくは他のユーザ入力インターフェースまたはデバイス上の専用ボタン(例えば、「ガイド」ボタン)を押し下げることによって、コンテンツ情報にアクセスする要望を示し得る。ユーザの指示に応答して、メディアガイドアプリケーションは、グリッド内の時間およびチャネル別、時間別、チャネル別、ソース別、コンテンツタイプ別、カテゴリ別(例えば、映画、スポーツ、ニュース、子供向け、または他の番組カテゴリ)、または他の所定、ユーザ定義、もしくは他の編成基準等のいくつかの方法のうちの1つにおいて編成されたメディアガイドデータを表示画面に提供し得る。
図2は、単一表示内の異なるタイプのコンテンツへのアクセスも可能にする時間およびチャネル別に配置された番組リスト項目表示200の例証的グリッドを示す。表示200は、以下、すなわち、(1)各チャネル/コンテンツタイプ識別子(列内のセル)が利用可能な異なるチャネルまたはコンテンツのタイプを識別するチャネル/コンテンツタイプ識別子204の列、および(2)各時間識別子(行内のセル)が番組の時間帯を識別する時間識別子206の行を伴うグリッド202を含み得る。グリッド202は、番組リスト項目208等の番組リスト項目のセルも含み、各リスト項目は、リスト項目の関連チャネルおよび時間の上に提供される番組のタイトルを提供する。ユーザ入力デバイスを用いて、ユーザは、ハイライト領域210を移動させることによって番組リスト項目を選択することができる。ハイライト領域210によって選択される番組リスト項目に関する情報が、番組情報領域212内に提供され得る。領域212は、例えば、番組タイトル、番組内容、番組が提供される時間(該当する場合)、番組が放送されるチャネル(該当する場合)、番組の評価、および他の所望の情報を含み得る。
線形番組(例えば、所定の時間に複数のユーザ機器デバイスに伝送されるようにスケジュールされ、スケジュールに従って提供されるコンテンツ)にアクセスを提供することに加えて、メディアガイドアプリケーションは、非線形番組(例えば、任意の時間においてユーザ機器デバイスにもアクセス可能であり、スケジュールに従って提供されないコンテンツ)へのアクセスも提供する。非線形番組は、オンデマンドコンテンツ(例えば、VOD)、インターネットコンテンツ(例えば、ストリーミングメディア、ダウンロード可能メディア等)、ローカルで記憶されたコンテンツ(例えば、上で説明される任意のユーザ機器デバイスまたは他の記憶デバイス上に記憶されたコンテンツ)、または時間的制約のない他のコンテンツを含む異なるコンテンツソースからのコンテンツを含み得る。オンデマンドコンテンツは、映画または特定のコンテンツプロバイダ(例えば、「The Sopranos」や「Curb Your Enthusiasm」を提供するHBO On Demand)によって提供される任意の他のコンテンツを含み得る。HBO ON DEMANDは、Time Warner Company L.P.、他によって所有されるサービスマークであり、THE SOPRANOSおよびCURB YOUR ENTHUSIASMは、Home Box Office,Inc.によって所有される商標である。インターネットコンテンツは、チャットセッションまたはウェブキャスト等のウェブイベント、もしくはインターネットウェブサイトまたは他のインターネットアクセス(例えば、FTP)を通して、ストリーミングコンテンツまたはダウンロード可能なコンテンツとしてオンデマンドで利用可能なコンテンツを含み得る。
グリッド202は、オンデマンドリスト項目214、録画コンテンツリスト項目216、およびインターネットコンテンツリスト項目218を含む非線形番組のメディアガイドデータを提供し得る。異なるタイプのコンテンツソースからのコンテンツのためのメディアガイドデータを組み合わせる表示は、時として、「混合メディア」表示と称されることもある。表示200とは異なる表示され得るメディアガイドデータのタイプの種々の順列は、ユーザ選択またはガイドアプリケーション定義に基づき得る(例えば、録画および放送リスト項目のみの表示、オンデマンドおよび放送リスト項目のみの表示等)。例証されるように、リスト項目214、216、および218は、これらのリスト項目の選択が、それぞれ、オンデマンドリスト項目、録画リスト項目、またはインターネットリスト項目専用の表示へのアクセスを提供し得ることを示すように、グリッド202内に表示される時間帯全体に及ぶものとして示されている。いくつかの実施形態では、これらのコンテンツタイプのリスト項目は、グリッド202に直接含まれ得る。ユーザがナビゲーションアイコン220のうちの1つを選択することに応答して、追加のメディアガイドデータが表示され得る(ユーザ入力デバイス上の矢印キーを押し下げることによって、ナビゲーションアイコン220を選択することと同様に表示に影響を及ぼし得る)。
表示200は、ビデオ領域222、広告224、およびオプション領域226も含み得る。ビデオ領域222は、ユーザが、ユーザに現在利用可能である番組、今後利用可能となる番組、もしくは利用可能であった番組を視聴および/またはプレビューすることを可能にし得る。ビデオ領域222のコンテンツは、グリッド202に表示されるリスト項目のうちの1つに対応するか、またはそれから独立し得る。ビデオ領域を含むグリッド表示は、時として、ピクチャインガイド(PIG)表示と称されることもある。PIG表示およびそれらの機能性は、2003年5月13日発行のSatterfield、他の米国特許第6,564,378号、および2001年5月29日発行のYuen、他の米国特許第6,239,794号(それらの全体として参照することによって本明細書に組み込まれる)でより詳細に説明されている。PIG表示は、本明細書に説明される実施形態の他のメディアガイドアプリケーション表示画面に含まれ得る。
広告224は、(例えば、サブスクリプションプログラミングのための)視聴者のアクセス権に応じて、視聴のために現在利用可能であり、将来視聴のために利用可能となり、または決して視聴のために利用可能になり得ず、グリッド202内のコンテンツリスト項目のうちの1つ以上のものに対応する、もしくは無関係であり得るコンテンツのための広告を提供し得る。広告224は、グリッド202内に表示されるコンテンツに関連する、または無関係である製品もしくはサービスのためのものでもあり得る。広告224は、選択可能であり、コンテンツについてのさらなる情報を提供する製品またはサービスについての情報を提供するコンテンツ、製品、もしくはサービスの購入を可能にする広告に関連するコンテンツを提供する等を行い得る。広告224は、ユーザのプロファイル/選好、監視されたユーザアクティビティ、提供される表示のタイプ、または他の好適な標的化広告ベースに基づいて、標的化され得る。
広告224は、長方形またはバナー形状として示されているが、広告は、ガイドアプリケーション表示内に任意の好適なサイズ、形状、および場所で提供され得る。例えば、広告224は、グリッド202に水平に隣接する長方形として提供され得る。これは、時として、パネル広告と称されることもある。加えて、広告は、コンテンツもしくはガイドアプリケーション表示の上にオーバーレイされ、または表示内に組み込まれ得る。広告は、テキスト、画像、回転画像、ビデオクリップ、または上で説明される他のタイプのコンテンツも含み得る。広告は、ガイドアプリケーションを有するユーザ機器デバイス内に、ユーザ機器に接続されるデータベース内に、遠隔場所(ストリーミングメディアサーバを含む)内に、または他の記憶手段上に、もしくはこれらの場所の組み合わせで、記憶され得る。メディアガイドアプリケーションの中に広告を提供することは、例えば、2003年1月17日出願のKnudson、他の米国特許出願公開第2003/0110499号、2004年6月29日発行のWard,III、他の米国特許第6,756,997号、および2002年5月14日発行のSchein、他の米国特許第6,388,714号(それらの全体として参照することによって本明細書に組み込まれる)でより詳細に議論されている。広告は、本明細書に説明される実施形態の他のメディアガイドアプリケーション表示画面内に含まれ得ることを理解されたい。
オプション領域226は、ユーザが、異なるタイプのコンテンツ、メディアガイドアプリケーション表示、および/またはメディアガイドアプリケーション特徴にアクセスすることを可能にし得る。オプション領域226は、表示200(および本明細書に説明される他の表示画面)の一部であり得るか、または、画面上のオプションを選択すること、もしくはユーザ入力デバイス上の専用または割当可能ボタンを押し下げることによって、ユーザによって呼び出され得る。オプション領域226内の選択可能オプションは、グリッド202内の番組リスト項目に関連する特徴に関し得るオプション、またはメインメニュー表示から利用可能なオプションを含み得る。番組リスト項目に関連する特徴は、他の放送時間または番組の受信方法の検索、番組の録画、番組の連続録画の有効化、番組および/またはチャネルをお気に入りとして設定、番組の購入、もしくは他の特徴を含み得る。メインメニュー表示から利用可能なオプションは、検索オプション、VODオプション、ペアレンタルコントロールオプション、インターネットオプション、クラウドベースのオプション、デバイス同期オプション、第2の画面デバイスオプション、種々のタイプのメディアガイドデータ表示にアクセスするオプション、プレミアムサービスにサブスクライブするオプション、ユーザのプロファイルを編集するオプション、ブラウザオーバーレイにアクセスするオプション、または他のオプションを含み得る。
メディアガイドアプリケーションは、ユーザの選好に基づいて個人化され得る。個人化されたメディアガイドアプリケーションは、ユーザが、メディアガイドアプリケーションを用いて個人化された「体験」を生成するように、表示および特徴をカスタマイズすることを可能にする。この個人化された体験は、ユーザがこれらのカスタマイズを入力することを可能にすることによって、および/または種々のユーザ選好を決定するためにメディアガイドアプリケーションがユーザアクティビティを監視することによって、生成され得る。ユーザは、ログインすることによって、または別様にガイドアプリケーションに対して自らを識別することによって、それらの個人化されたガイドアプリケーションにアクセスし得る。メディアガイドアプリケーションのカスタマイズは、ユーザプロファイルに従って作成され得る。カスタマイズは、提示方式(例えば、表示の色方式、テキストのフォントサイズ等)、表示されるコンテンツリスト項目の側面(例えば、HDTV番組のみまたは3D番組のみ、お気に入りチャネル選択に基づいたユーザ指定の放送チャネル、チャネルの表示の並び替え、推奨コンテンツ等)、所望の録画特徴(例えば、特定のユーザに対する録画または連続録画、録画品質等)、ペアレンタルコントロール設定、インターネットコンテンツのカスタマイズされた提示(例えば、ソーシャルメディアコンテンツ、電子メール、電子的に配信された記事等の提示)、および他の所望のカスタマイズを変化させることを含み得る。
メディアガイドアプリケーションは、ユーザが、ユーザプロファイル情報を提供することを可能にし得るか、またはユーザプロファイル情報を自動的にコンパイルし得る。メディアガイドアプリケーションは、例えば、ユーザがアクセスするコンテンツ、および/またはユーザがガイドアプリケーションと行い得る他の相互作用を監視し得る。加えて、メディアガイドアプリケーションは、特定のユーザに関連する他のユーザプロファイルの全体または一部を取得し(例えば、www.allrovi.com等のユーザがアクセスするインターネット上の他のウェブサイトから、ユーザがアクセスする他のメディアガイドアプリケーションから、ユーザがアクセスする他の双方向アプリケーションから、ユーザの別のユーザ機器デバイスから等)、および/またはメディアガイドアプリケーションがアクセスし得る他のソースから、ユーザについての情報を取得し得る。結果として、ユーザは、ユーザの異なるユーザ機器デバイスにわたって、統一されたガイドアプリケーション体験を提供されることができる。このタイプのユーザ体験は、図5に関連して下でより詳細に説明される。追加の個人化されたメディアガイドアプリケーション特徴は、2005年7月11日出願のEllis、他の米国特許出願第2005/0251827号、2007年1月16日出願のBoyer、他の米国特許第7,165,098号、および2002年2月21日出願のEllis、他の米国特許出願第2002/0174430号(それらの全体として参照することによって本明細書に組み込まれる)でより詳細に説明されている。
メディアガイドを提供するための別の表示配置が、図3に示されている。ビデオモザイク表示300は、コンテンツのタイプ、ジャンル、および/または他の編成基準に基づいて編成されたコンテンツ情報のための選択可能オプション302を含む。表示300では、テレビリスト項目オプション304が、選択され、したがって、リスト項目306、308、310、および312を放送番組リスト項目として提供する。表示300では、リスト項目は、カバーアート、コンテンツからの静止画像、ビデオクリップのプレビュー、コンテンツからのライブビデオ、またはリスト項目中のメディアガイドデータによって記述されているコンテンツをユーザに示す他のタイプのコンテンツを含むグラフィック画像を提供し得る。グラフィックリスト項目は、それぞれ、リスト項目に関連付けられるコンテンツに関するさらなる情報を提供するために、テキストも伴い得る。例えば、リスト項目308は、メディア部分314およびテキスト部分316を含む2以上の部分を含み得る。メディア部分314および/またはテキスト部分316は、コンテンツをフル画面で視聴するために、またはメディア部分314に表示されるコンテンツに関連する情報を閲覧するために(例えば、ビデオが表示されるチャネルのリスト項目を閲覧するように)、選択可能であり得る。
表示300内のリスト項目は、異なるサイズである(すなわち、リスト項目306は、リスト項目308、310、および312より大きい)が、所望に応じて、全てのリスト項目が同一のサイズであり得る。リスト項目は、コンテンツプロバイダの所望に応じて、またはユーザ選好に基づいて、ユーザの関心の程度を示すように、またはあるコンテンツを強調するように、異なるサイズであるか、またはグラフィック的に強調され得る。コンテンツリスト項目をグラフィック的に強調するための種々のシステムおよび方法は、例えば、2009年11月12日に出願されたYatesの米国特許出願公開第2010/0153885号(その全体として参照することによって本明細書に組み込まれる)で議論されている。
ユーザは、そのユーザ機器デバイスのうちの1つ以上のものから、コンテンツおよびメディアガイドアプリケーション(ならびに上および下で説明されるその表示画面)にアクセスし得る。図4は、例証的ユーザ機器デバイス400の汎用実施形態を示す。ユーザ機器デバイスのより具体的な実装は、図5に関連して下で議論される。ユーザ機器デバイス400は、入出力(以下「I/O」)パス402を介して、コンテンツおよびデータを受信し得る。I/Oパス402は、処理回路406および記憶装置408を含む制御回路404に、コンテンツ(例えば、放送番組、オンデマンド番組、インターネットコンテンツ、ローカルエリアネットワーク(LAN)または広域ネットワーク(WAN)を経由して利用可能なコンテンツ、および/または他のコンテンツ)およびデータを提供し得る。制御回路404は、I/Oパス402を使用して、コマンド、要求、および他の好適なデータを送受信するために使用され得る。I/Oパス402は、制御回路404(具体的には、処理回路406)を1つ以上の通信パス(下で説明される)に接続し得る。I/O機能は、これらの通信パスのうちの1つ以上のものによって提供され得るが、図面が複雑になり過ぎることを回避するため、図4では単一パスとして示されている。
制御回路404は、処理回路406等の任意の好適な処理回路に基づき得る。本明細書で参照されるように、処理回路とは、1つ以上のマイクロプロセッサ、マイクロコントローラ、デジタル信号プロセッサ、プログラマブル論理デバイス、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)等に基づく回路を意味すると理解され、マルチコアプロセッサ(例えば、デュアルコア、クアドコア、ヘクサコア、または任意の好適な数のコア)またはスーパーコンピュータを含み得る。いくつかの実施形態では、処理回路は、複数の別個のプロセッサまたは処理ユニット、例えば、複数の同一のタイプの処理ユニット(例えば、2つのIntel Core i7プロセッサ)または複数の異なるプロセッサ(例えば、Intel Core i5プロセッサおよびIntel Core i7プロセッサ)にわたって分散され得る。いくつかの実施形態では、制御回路404は、メモリ(すなわち、記憶装置408)に記憶されたメディアガイドアプリケーションに対する命令を実行する。具体的には、制御回路404は、メディアガイドアプリケーションによって、上および下で議論される機能を果たすように命令され得る。例えば、メディアガイドアプリケーションは、制御回路404に、メディアガイド表示を生成するための命令を提供し得る。いくつかの実装では、制御回路404によって実施される任意のアクションは、メディアガイドアプリケーションから受信される命令に基づき得る。
クライアントサーバベースの実施形態では、制御回路404は、ガイドアプリケーションサーバまたは他のネットワークもしくはサーバと通信するための好適な通信回路を含み得る。上で述べられる機能性を実施するための命令は、ガイドアプリケーションサーバ上に記憶され得る。通信回路は、ケーブルモデム、総合デジタル通信網(ISDN)モデム、デジタルサブスクライバ回線(DSL)モデム、電話モデム、イーサネット(登録商標)カード、または他の機器との通信用の無線モデム、もしくは任意の他の好適な通信回路を含み得る。そのような通信は、インターネットまたは任意の他の好適な通信ネットワークもしくはパスを伴い得る(図5に関連してより詳細に説明される)。加えて、通信回路は、ユーザ機器デバイスのピアツーピア通信、または互いから遠隔の場所にあるユーザ機器デバイスの通信を可能にする回路を含み得る(下でより詳細に説明される)。
メモリは、制御回路404の一部である記憶装置408として提供される電子記憶デバイスであり得る。本明細書で参照されるように、語句「電子記憶デバイス」または「記憶デバイス」とは、ランダムアクセスメモリ、読み取り専用メモリ、ハードドライブ、光学ドライブ、デジタルビデオディスク(DVD)レコーダ、コンパクトディスク(CD)レコーダ、BLU-RAY(登録商標)ディスク(BD)レコーダ、BLU-RAY(登録商標) 3Dディスクレコーダ、デジタルビデオレコーダ(DVR、または時として、パーソナルビデオレコーダもしくはPVRと呼ばれることもある)、ソリッドステートデバイス、量子記憶デバイス、ゲームコンソール、ゲームメディア、または任意の他の好適な固定もしくはリムーバブル記憶デバイス、および/またはそれらの任意の組み合わせ等の電子データ、コンピュータソフトウェア、もしくはファームウェアを記憶するための任意のデバイスを意味すると理解されたい。記憶装置408は、本明細書に説明される種々のタイプのコンテンツ、ならびに上で説明されるメディアガイドデータを記憶するために使用され得る。不揮発性メモリも、(例えば、ブートアップルーチンおよび他の命令を起動するために)使用され得る。図5に関連して説明されるクラウドベースの記憶装置が、記憶装置408を補完するために使用される、または記憶装置408の代わりに使用され得る。
制御回路404は、1つ以上のアナログチューナ、1つ以上のMPEG-2デコーダ、もしくは他のデジタルデコード回路、高解像度チューナ、または任意の他の好適な同調もしくはビデオ回路、もしくはそのような回路の組み合わせ等のビデオ生成回路および同調回路を含み得る。(例えば、記憶するために、無線、アナログ、またはデジタル信号をMPEG信号に変換するための)エンコード回路も、提供され得る。制御回路404は、コンテンツをユーザ機器400の好ましい出力形式に上方変換および下方変換するためのスケーリング回路も含み得る。回路404は、デジタル信号とアナログ信号との間で変換するためのデジタル/アナログ変換回路ならびにアナログ/デジタル変換回路も含み得る。同調およびエンコード回路は、コンテンツを受信して表示、再、または録画するために、ユーザ機器デバイスによって使用され得る。同調およびエンコード回路は、ガイドデータを受信するためにも使用され得る。例えば、同調、ビデオ生成、エンコード、デコード、暗号化、解読、スケーリング、およびアナログ/デジタル回路を含む本明細書に説明される回路は、1つ以上の汎用もしくは特殊プロセッサ上で起動するソフトウェアを使用して実装され得る。複数のチューナが、同時同調機能(例えば、視聴および録画機能、ピクチャインピクチャ(PIP)機能、多重チューナ録画機能等)に対処するように提供され得る。記憶装置408が、ユーザ機器400とは別のデバイスとして提供される場合、同調およびエンコード回路(複数のチューナを含む)は、記憶装置408に関連付けられ得る。
ユーザは、ユーザ入力インターフェース410を使用して、命令を制御回路404に送信し得る。ユーザ入力インターフェース410は、リモートコントロール、マウス、トラックボール、キーパッド、キーボード、タッチスクリーン、タッチパッド、スタイラス入力、ジョイスティック、音声認識インターフェース、または他のユーザ入力インターフェース等の任意の好適なユーザインターフェースであり得る。ディスプレイ412は、独立型デバイスとして提供されるか、またはユーザ機器デバイス400の他の要素と統合され得る。例えば、ディスプレイ412は、タッチスクリーンまたはタッチセンサ式ディスプレイであり得る。そのような状況では、ユーザ入力インターフェース410は、ディスプレイ412と統合され、または組み合わせられ得る。ディスプレイ412は、モニタ、テレビ、モバイルデバイス用の液晶ディスプレイ(LCD)、非晶質シリコンディスプレイ、低温ポリシリコンディスプレイ、電子インクディスプレイ、電気泳動ディスプレイ、アクティブマトリクスディスプレイ、エレクトロウェッティングディスプレイ、電気流体ディスプレイ、ブラウン管ディスプレイ、発光ダイオードディスプレイ、エレクトロルミネセントディスプレイ、プラズマディスプレイパネル、高性能アドレッシングディスプレイ、薄膜トランジスタディスプレイ、有機発光ダイオードディスプレイ、表面伝導型電子放出素子ディスプレイ(SED)、レーザテレビ、カーボンナノチューブ、量子ドットディスプレイ、干渉変調器ディスプレイ、もしくは視覚的画像を表示するための任意の他の好適な機器のうちの1つ以上のものであり得る。いくつかの実施形態では、ディスプレイ412は、HDTV対応型であり得る。いくつかの実施形態では、ディスプレイ412は、3Dディスプレイであり得、双方向メディアガイドアプリケーションおよび任意の好適なコンテンツは、3Dで表示され得る。ビデオカードまたはグラフィックカードは、ディスプレイ412への出力を生成し得る。ビデオカードは、3Dシーンおよび2Dグラフィックのレンダリング加速、MPEG-2/MPEG-4デコード、TV出力、または複数のモニタを接続する能力等の種々の機能を提供し得る。ビデオカードは、制御回路404に関連する上で説明される任意の処理回路であり得る。ビデオカードは、制御回路404と統合され得る。スピーカ414は、ユーザ機器デバイス400の他の要素と統合されたものとして提供され得る、または独立型ユニットであり得る。ディスプレイ412上に表示されるビデオおよび他のコンテンツのオーディオコンポーネントは、スピーカ414を通して再生され得る。いくつかの実施形態では、オーディオは、スピーカ414を介して音声を処理および出力する受信機(図示せず)に配布され得る。
ガイドアプリケーションは、任意の好適なアーキテクチャを使用して実装され得る。例えば、それは、ユーザ機器デバイス400上で完全に実装される独立型アプリケーションであり得る。そのようなアプローチでは、アプリケーションの命令は、ローカルで(例えば、記憶装置408内に)記憶され、アプリケーションによって使用するためのデータは、周期的にダウンロードされる(例えば、帯域外フィードから、インターネットリソースから、または別の好適なアプローチを使用して)。制御回路404は、記憶装置408からアプリケーションの命令を読み出し、本明細書で議論される表示のうちのいずれかを生成するための命令を処理し得る。処理された命令に基づいて、制御回路404は、入力が入力インターフェース410から受信されるときに実施するアクションを決定し得る。例えば、表示上のカーソルの上/下への移動は、入力インターフェース410が上/下ボタンが選択されたことを示すとき、処理された命令によって示され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、クライアントサーバベースのアプリケーションである。ユーザ機器デバイス400上に実装されるシックまたはシンクライアントによって使用するためのデータは、ユーザ機器デバイス400の遠隔にあるサーバに要求を発行することによって、オンデマンドで読み出される。クライアントサーバベースのガイドアプリケーションの一例では、制御回路404は、遠隔サーバによって提供されるウェブページを解釈するウェブブラウザを起動する。例えば、遠隔サーバは、記憶デバイス内にアプリケーションのための命令を記憶し得る。遠隔サーバは、回路(例えば、制御回路404)を使用して、記憶された命令を処理し、上および下で議論される表示を生成し得る。クライアントデバイスは、遠隔サーバによって生成される表示を受信し得、表示のコンテンツを機器デバイス400上でローカルで表示し得る。このように、命令の処理が、サーバによって遠隔で実施される一方で、結果として生じる表示は、機器デバイス400上にローカルで提供される。機器デバイス400は、入力インターフェース410を介して、ユーザからの入力を受信し、対応する表示を処理および生成するために、それらの入力を遠隔サーバに伝送し得る。例えば、機器デバイス400は、上/下ボタンが入力インターフェース410を介して選択されたことを示す通信を遠隔サーバに伝送し得る。遠隔サーバは、その入力に従って命令を処理し、入力に対応するアプリケーションの表示を生成し得る(例えば、カーソルを上/下に移動させる表示)。生成された表示は、次いで、ユーザへの提示のために、機器デバイス400に伝送される。
いくつかの実施形態では、メディアガイドアプリケーションは、インタープリタまたは仮想マシン(制御回路404によって起動される)によって、ダウンロードされ、解釈または別様に起動される。いくつかの実施形態では、ガイドアプリケーションは、ETVバイナリ交換形式(ETV Binary Interchange Format/EBIF)でエンコードされ、好適なフィードの一部として制御回路404によって受信され、制御回路404上で起動するユーザエージェントによって解釈され得る。例えば、ガイドアプリケーションは、EBIFアプリケーションであり得る。いくつかの実施形態では、ガイドアプリケーションは、制御回路404によって実行されるローカル仮想マシンまたは他の好適なミドルウェアによって受信および起動される一連のJAVA(登録商標)ベースのファイルによって定義され得る。そのような実施形態のうちのいくつか(例えば、MPEG-2または他のデジタルメディアエンコードスキームを採用するもの)では、ガイドアプリケーションは、例えば、番組のMPEGオーディオおよびビデオパケットを用いたMPEG-2オブジェクトカルーセルにおいてエンコードおよび伝送され得る。
図4のユーザ機器デバイス400は、ユーザテレビ機器502、ユーザコンピュータ機器504、無線ユーザ通信デバイス506、または非ポータブルゲーム機等のコンテンツにアクセスするために好適な任意の他のタイプのユーザ機器として、図5のシステム500に実装されることができる。簡単にするために、これらのデバイスは、本明細書では総称して、ユーザ機器またはユーザ機器デバイスと称され得、上で説明されるユーザ機器デバイスに実質的に類似し得る。メディアガイドアプリケーションが実装され得るユーザ機器デバイスは、独立型デバイスとして機能し得る、またはデバイスのネットワークの一部であり得る。デバイスの種々のネットワーク構成が実装され得、下でより詳細に議論される。
図4に関連して上で説明されるシステム特徴のうちの少なくともいくつかを利用するユーザ機器デバイスは、単に、ユーザテレビ機器502、ユーザコンピュータ機器504、または無線ユーザ通信デバイス506として分類されないこともある。例えば、ユーザテレビ機器502は、いくつかのユーザコンピュータ機器504のように、インターネットコンテンツのアクセスを可能にするインターネット対応型であり得る一方で、ユーザコンピュータ機器504は、あるテレビ機器502のように、テレビ番組へのアクセスを可能にするチューナを含み得る。メディアガイドアプリケーションは、種々の異なるタイプのユーザ機器上で同一レイアウトを有し得るか、またはユーザ機器の表示能力に合わせられ得る。例えば、ユーザコンピュータ機器504上では、ガイドアプリケーションは、ウェブブラウザによってアクセスされるウェブサイトとして提供され得る。別の例では、ガイドアプリケーションは、無線ユーザ通信デバイス506用に縮小され得る。
システム500では、典型的には、各タイプのユーザ機器デバイスが1つを上回って存在するが、図面が複雑になり過ぎることを回避するように、それぞれ1つだけが図5に示されている。加えて、各ユーザは、2以上のタイプのユーザ機器デバイスと、また、各タイプのユーザ機器デバイスのうちの2以上のものとを利用し得る。
いくつかの実施形態では、ユーザ機器デバイス(例えば、ユーザテレビ機器502、ユーザコンピュータ機器504、無線ユーザ通信デバイス506)は、「第2の画面デバイス」と称され得る。例えば、第2の画面デバイスは、第1のユーザ機器デバイス上に提示されるコンテンツを補完し得る。第2の画面デバイス上に提示されるコンテンツは、第1のデバイス上に提示されるコンテンツを補完する任意の好適なコンテンツであり得る。いくつかの実施形態では、第2の画面デバイスは、第1のデバイスの設定および表示選好を調節するためのインターフェースを提供する。いくつかの実施形態では、第2の画面デバイスは、他の第2の画面デバイスと相互作用するため、またはソーシャルネットワークと相互作用するために構成される。第2の画面デバイスは、第1のデバイスと同一の部屋内に、第1のデバイスと異なる部屋であるが、同一の家または建物内に、もしくは第1のデバイスと異なる建物内に位置することができる。
ユーザは、家庭内デバイスおよび遠隔デバイスにわたって一貫したメディアガイドアプリケーション設定を維持するために、種々の設定も設定し得る。設定は、本明細書に説明されるもの、ならびにお気に入りのチャネルおよび番組、番組を推奨するためにガイドアプリケーションが利用する番組選好、表示選好、および他の望ましいガイド設定を含む。例えば、ユーザが、そのオフィスのパーソナルコンピュータ上で、例えば、ウェブサイトwww.allrovi.comの上で、チャネルをお気に入りとして設定した場合、同一のチャネルが、ユーザの家庭内デバイス(例えば、ユーザテレビ機器およびユーザコンピュータ機器)上で、ならびに所望に応じて、ユーザのモバイルデバイス上でお気に入りとして表示されるであろう。したがって、同一または異なるタイプのユーザ機器デバイスであるかどうかにかかわらず、1つのユーザ機器デバイス上で行われる変更は、別のユーザ機器デバイス上のガイド体験を変更することができる。加えて、行われる変更は、ユーザによって入力される設定、ならびにガイドアプリケーションによって監視されるユーザアクティビティに基づき得る。
ユーザ機器デバイスは、通信ネットワーク514に結合され得る。すなわち、ユーザテレビ機器502、ユーザコンピュータ機器504、および無線ユーザ通信デバイス506は、それぞれ、通信パス508、510、および512を介して、通信ネットワーク514に結合される。通信ネットワーク514は、インターネット、携帯電話ネットワーク、モバイルボイスまたはデータネットワーク(例えば、4GまたはLTEネットワーク)、ケーブルネットワーク、公衆交換電話ネットワーク、または他のタイプの通信ネットワーク、もしくは通信ネットワークの組み合わせを含む1つ以上のネットワークであり得る。パス508、510、および512は、別個または一緒に、衛星パス、光ファイバパス、ケーブルパス、インターネット通信をサポートするパス(例えば、IPTV)、フリースペース接続(例えば、放送または他の無線信号用)、もしくは任意の他の好適な有線または無線通信パス、もしくはそのようなパスの組み合わせ等の1つ以上の通信パスを含み得る。パス512は、図5に示される例示的実施形態では、無線パスであることを示すように破線で描かれ、パス508および510は、有線パスであることを示すように実線として描かれている(しかし、これらのパスは、所望に応じて、無線パスであり得る)。ユーザ機器デバイスとの通信は、これらの通信パスのうちの1つ以上のものによって提供され得るが、図5では、図面が複雑になり過ぎることを回避するように、単一パスとして示されている。
通信パスは、ユーザ機器デバイスの間には描かれていないが、これらのデバイスは、パス508、510、および512に関連して上で説明されるもの、ならびにUSBケーブル、IEEE 1394ケーブル、無線パス(例えば、Bluetooth(登録商標)、赤外線、IEEE 802-11x等)等の他の短距離ポイントツーポイント通信パス、もしくは有線または無線パスを介した他の短距離通信等の通信パス等を介して、互いに直接通信し得る。BLUETOOTH(登録商標)は、Bluetooth(登録商標) SIG,INC.によって所有される認証マークである。ユーザ機器デバイスはまた、通信ネットワーク514を介した間接パスを通して、互いに直接通信し得る。
システム500は、通信パス520および522を介して、通信ネットワーク514にそれぞれ結合されるコンテンツソース516およびメディアガイドデータソース518を含む。パス520および522は、パス508、510、および512に関連して上で説明される通信パスのうちのいずれかを含み得る。コンテンツソース516およびメディアガイドデータソース518との通信は、1つ以上の通信パスを介して交信され得るが、図5では、図面が複雑になり過ぎることを回避するように、単一パスとして示される。加えて、コンテンツソース516およびメディアガイドデータソース518の各々が2つ以上存在し得るが、図5では、図面が複雑になり過ぎることを回避するように、各1つだけが示されている。(異なるタイプのこれらのソースの各々が下で議論される)。所望に応じて、コンテンツソース516およびメディアガイドデータソース518は、1つのソースデバイスとして統合され得る。ソース516および518と、ユーザ機器デバイス502、504、および506との間の通信は、通信ネットワーク514を通したものとして示されるが、いくつかの実施形態では、ソース516および518は、パス508、510、および512に関連して上で説明されるもの等の通信パス(図示せず)を介して、ユーザ機器デバイス502、504、および506と直接通信し得る。
システム500は、通信パス526を介して通信ネットワーク514に結合される広告ソース524も含み得る。パス526は、パス508、510、および512に関連して上で説明される通信パスのうちのいずれかを含み得る。広告ソース524は、広告を特定の状況下で特定のユーザに伝送し得る広告割当アプリケーションを含み得る。例えば、ケーブルオペレータは、特定のチャネル上の特定のタイムスロット中に広告を挿入する権利を有し得る。したがって、広告ソース524は、これらのタイムスロット中に広告をユーザに伝送し得る。別の例として、広告ソースは、特定の番組を視聴することが既知であるユーザ(例えば、リアリティ番組を視聴する10代の若者)の人口統計に基づいて、広告を標的化し得る。さらに別の例として、広告ソースは、メディアアセットを視聴するユーザ機器の場所(例えば、東海岸または西海岸)に応じて、異なる広告を提供し得る。
いくつかの実施形態では、広告ソース524は、標的化広告を提供するために、ユーザに関連付けられる広告好適性スコアを含むユーザ情報を維持するように構成され得る。加えて、または代替として、広告ソース524に関連付けられるサーバは、広告好適性スコアを導出するために使用され得る未加工情報を記憶するように構成され得る。いくつかの実施形態では、広告ソース524は、未加工情報に関して要求を別のデバイスに伝送し、広告好適性スコアを計算し得る。広告ソース524は、特定のユーザ(例えば、ユーザの第1のサブセット、第2のサブセット、または第3のサブセット)のための広告好適性スコアを更新し、標的製品の広告を適切なユーザに伝送し得る。
コンテンツソース516は、テレビ配信施設、ケーブルシステムヘッドエンド、衛星配信施設、番組ソース(例えば、NBC、ABC、HBO等のテレビ放送会社)、中間配信施設および/またはサーバ、インターネットプロバイダ、オンデマンドメディアサーバ、および他のコンテンツプロバイダを含む1つ以上のタイプのコンテンツ配信機器を含み得る。NBCは、National Broadcasting Company,Inc.によって所有される商標であり、ABCは、American Broadcasting Company,INC.によって所有される商標であり、HBOは、Home Box Office,Inc.によって所有される商標である。コンテンツソース516は、コンテンツの発信元であることも(例えば、テレビ放送会社、ウェブキャストプロバイダ等)、コンテンツの発信元でないこともある(例えば、オンデマンドコンテンツプロバイダ、ダウンロード用放送番組のコンテンツのインターネットプロバイダ等)。コンテンツソース516は、ケーブルソース、衛星プロバイダ、オンデマンドプロバイダ、インターネットプロバイダ、オーバーザトップコンテンツプロバイダ、または他のコンテンツのプロバイダを含み得る。コンテンツソース516は、ユーザ機器デバイスのうちのいずれかから遠隔の場所にある異なるタイプのコンテンツ(ユーザによって選択されるビデオコンテンツを含む)を記憶するために使用される遠隔メディアサーバも含み得る。コンテンツの遠隔記憶および遠隔に記憶されたコンテンツをユーザ機器に提供するためのシステムならびに方法は、2010年7月20日出願のEllis、他の米国特許出願第7,761,892号(その全体として参照することによって本明細書に組み込まれる)に関連して、より詳細に議論されている。
メディアガイドデータソース518は、上で説明されるメディアガイドデータ等のメディアガイドデータを提供し得る。メディアガイドデータは、任意の好適なアプローチを使用して、ユーザ機器デバイスに提供され得る。いくつかの実施形態では、ガイドアプリケーションは、データフィード(例えば、継続フィードまたはトリクルフィード)を介して、番組ガイドデータを受信する独立型双方向テレビ番組ガイドであり得る。番組スケジュールデータおよび他のガイドデータは、テレビチャネルのサイドバンド上で、帯域内デジタル信号を使用して、帯域外デジタル信号を使用して、または任意の他の好適なデータ伝送技術によって、ユーザ機器に提供され得る。番組スケジュールデータおよび他のメディアガイドデータは、複数のアナログまたはデジタルテレビチャネル上でユーザ機器に提供され得る。
いくつかの実施形態では、メディアガイドデータソース518からのガイドデータは、クライアントサーバアプローチを使用して、ユーザの機器に提供され得る。例えば、ユーザ機器デバイスが、メディアガイドデータをサーバからプルし得るか、またはサーバが、メディアガイドデータをユーザ機器デバイスにプッシュし得る。いくつかの実施形態では、ユーザの機器上に常駐するガイドアプリケーションクライアントは、必要に応じて、例えば、ガイドデータが古くなっているとき、またはユーザ機器デバイスが、データを受信する要求をユーザから受信するとき、ソース518とセッションを開始し、ガイドデータを取得し得る。メディアガイドは、任意の好適な頻度で(例えば、継続的に、毎日、ユーザ規定期間で、システム規定期間で、ユーザ機器からの要求に応答して等)ユーザ機器に提供され得る。メディアガイドデータソース518は、ユーザ機器デバイス502、504、および506に、メディアガイドアプリケーション自体、またはメディアガイドアプリケーションのソフトウェア更新を提供し得る。
いくつかの実施形態では、メディアガイドデータは、視聴者データを含み得る。例えば、視聴者データは、現在および/または履歴ユーザアクティビティ情報(例えば、ユーザが典型的に鑑賞するコンテンツ、ユーザがコンテンツを鑑賞する時刻、ユーザがソーシャルネットワークと相互作用するかどうか、ユーザがソーシャルネットワークと相互作用し、情報をポストする時間、ユーザが典型的に鑑賞するコンテンツのタイプ(例えば、有料TVまたは無料TV)、気分、脳の活動情報等)を含み得る。メディアガイドデータは、サブスクリプションデータも含み得る。例えば、サブスクリプションデータは、所与のユーザがサブスクライブするソースもしくはサービスおよび/または所与のユーザが以前にサブスクライブしていたが、後にアクセスを打ち切ったソースもしくはサービス(例えば、ユーザがプレミアムチャネルをサブスクライブしているかどうか、ユーザがプレミアムレベルのサービスを追加したかどうか、ユーザがインターネット速度を加速させたかどうか)を識別し得る。いくつかの実施形態では、視聴者データおよび/またはサブスクリプションデータは、1年を上回る期間の間の所与のユーザのパターンを識別し得る。メディアガイドデータは、所与のユーザがサービス/ソースへのアクセスを打ち切るであろう可能性を示すスコアを生成するために使用されるモデル(例えば、残存者モデル)を含み得る。例えば、メディアガイドアプリケーションは、所与のユーザが特定のサービスまたはソースへのアクセスを打ち切るであろうかどうかの可能性を示す値またはスコアを生成するためのモデルをともに使用して、サブスクリプションデータとともに視聴者データを処理し得る。特に、より高いスコアは、ユーザが特定のサービスまたはソースへのアクセスを打ち切るであろうより高いレベルの信頼性を示し得る。スコアに基づいて、メディアガイドアプリケーションは、ユーザがアクセスを打ち切る可能性が高いであろうものとしてスコアによって示される特定のサービスまたはソースをユーザが維持するように勧誘する宣伝および広告を生成し得る。
メディアガイドアプリケーションは、例えば、ユーザ機器デバイス上に実装される独立型アプリケーションであり得る。例えば、メディアガイドアプリケーションは、記憶装置408内に記憶され、ユーザ機器デバイス400の制御回路404によって実行され得るソフトウェアまたは実行可能命令の組として実装され得る。いくつかの実施形態では、メディアガイドアプリケーションは、クライアント-サーバアプリケーションであり得、その場合、クライアントアプリケーションのみが、ユーザ機器デバイス上に常駐し、サーバアプリケーションは、遠隔サーバ上に常駐する。例えば、メディアガイドアプリケーションは、部分的に、ユーザ機器デバイス400の制御回路404上のクライアントアプリケーションとして、および遠隔サーバの制御回路上で起動するサーバアプリケーション(例えば、メディアガイドデータソース518)として部分的に遠隔サーバ上で、実装され得る。遠隔サーバの制御回路(メディアガイドデータソース518等)によって実行されると、メディアガイドアプリケーションは、制御回路に、ガイドアプリケーション表示を生成し、生成された表示をユーザ機器デバイスに伝送するように命令し得る。サーバアプリケーションは、メディアガイドデータソース518の制御回路に、ユーザ機器上での記憶のためのデータを伝送するように命令し得る。クライアントアプリケーションは、受信用ユーザ機器の制御回路に、ガイドアプリケーション表示を生成するように命令し得る。
ユーザ機器デバイス502、504、および506に配信されるコンテンツおよび/またはメディアガイドデータは、オーバーザトップ(OTT)コンテンツであり得る。OTTコンテンツ配信は、上で説明される任意のユーザ機器デバイスを含むインターネット対応型ユーザデバイスが、ケーブルまたは衛星接続を経由して受信されるコンテンツに加えて、上で説明される任意のコンテンツを含むインターネットを経由して転送されるコンテンツを受信することを可能にする。OTTコンテンツは、インターネットサービスプロバイダ(ISP)によって提供されるインターネット接続を介して配信されるが、第三者も、コンテンツを配布する。ISPは、視聴能力、著作権、またはコンテンツの再配布に責任がないこともあり、OTTコンテンツプロバイダによって提供されるIPパケットのみを転送し得る。OTTコンテンツプロバイダの例は、IPパケットを介してオーディオおよびビデオを提供するYOUTUBE(登録商標)、NETFLIX、ならびにHULUを含む。Youtubeは、Google Inc.によって所有される商標であり、Netflixは、Netflix,Inc.によって所有される商標であり、Huluは、Hulu,LLC.によって所有される商標である。OTTコンテンツプロバイダは、加えて、または代替として、上で説明されるメディアガイドデータを提供し得る。コンテンツおよび/またはメディアガイドデータに加えて、OTTコンテンツのプロバイダは、メディアガイドアプリケーション(例えば、ウェブベースのアプリケーションまたはクラウドベースのアプリケーション)を配布することができる、またはコンテンツは、ユーザ機器デバイス上に記憶されたメディアガイドアプリケーションによって表示されることができる。
メディアガイドシステム500は、いくつかのアプローチまたはネットワーク構成を例証することを意図しており、それによって、ユーザ機器デバイスおよびコンテンツならびにガイドデータのソースは、コンテンツにアクセスし、メディアガイドを提供する目的のために、互いに通信し得る。本明細書に説明される実施形態は、これらのアプローチのうちのいずれか1つまたは一部において、もしくはコンテンツを配信し、メディアガイドを提供するための他のアプローチを採用するシステムにおいて、適用され得る。以下の4つのアプローチは、図5の汎用例の具体的例証を提供する。
あるアプローチでは、ユーザ機器デバイスは、ホームネットワーク内で互いに通信し得る。ユーザ機器デバイスは、上で説明される短距離ポイントツーポイント通信方式を介して、ホームネットワーク上に提供されるハブまたは他の類似デバイスを通した間接パスを介して、もしくは通信ネットワーク514を介して、互いに直接通信することができる。1つの家庭内の複数の個人の各々が、ホームネットワーク上の異なるユーザ機器デバイスを動作させ得る。結果として、種々のメディアガイド情報または設定が、異なるユーザ機器デバイスの間で通信されることが望ましくあり得る。例えば、2005年7月11日出願のEllis、他の米国特許公開第2005/0251827号でより詳細に説明されるように、ホームネットワーク内の異なるユーザ機器デバイス上で、ユーザが一貫したメディアガイドアプリケーション設定を維持することが望ましくあり得る。ホームネットワーク内の異なるタイプのユーザ機器デバイスも、互いに通信し、コンテンツを伝送し得る。例えば、ユーザは、ユーザコンピュータ機器からポータブルビデオプレーヤまたはポータブル音楽プレーヤにコンテンツを伝送し得る。
第2のアプローチでは、ユーザは、複数のタイプのユーザ機器を有し得、それによって、コンテンツにアクセスし、メディアガイドを取得する。例えば、一部のユーザは、家庭内およびモバイルデバイスによってアクセスされるホームネットワークを有し得る。ユーザは、遠隔デバイス上に実装されるメディアガイドアプリケーションを介して、家庭内デバイスを制御し得る。例えば、ユーザは、そのオフィスのパーソナルコンピュータ、またはPDAもしくはウェブ対応携帯電話等のモバイルデバイスを介して、ウェブサイト上のオンラインメディアガイドアプリケーションにアクセスし得る。ユーザは、オンラインガイドアプリケーション上で種々の設定(例えば、録画、リマインダ、または他の設定)を設定して、ユーザの家庭内機器を制御し得る。オンラインガイドは、直接、またはユーザの家庭内機器上のメディアガイドアプリケーションと通信することによって、ユーザの機器を制御し得る。ユーザ機器デバイスが互いから遠隔の場所にある、ユーザ機器デバイスの通信のための種々のシステムおよび方法は、例えば、Ellis、他の2011年10月25日発行の米国特許第8,046,801号(その全体を参照することによって本明細書に組み込まれる)で議論されている。
第3のアプローチでは、家庭内外のユーザ機器デバイスのユーザは、コンテンツソース516と直接通信し、コンテンツにアクセスするために、そのメディアガイドアプリケーションを使用することができる。具体的には、家庭内では、ユーザテレビ機器502およびユーザコンピュータ機器504のユーザは、メディアガイドアプリケーションにアクセスし、所望のコンテンツ間をナビゲートし、それを見つけ得る。ユーザはまた、無線ユーザ通信デバイス506を使用して、家庭外のメディアガイドアプリケーションにアクセスし、所望のコンテンツ間をナビゲートし、それを見つけ得る。
第4のアプローチでは、ユーザ機器デバイスは、クラウドコンピューティング環境内で動作し、クラウドサービスにアクセスし得る。クラウドコンピューティング環境では、コンテンツ共有、記憶、または配布のための種々のタイプのコンピューティングサービス(例えば、ビデオ共有サイトまたはソーシャルネットワーキングサイト)が、「クラウド」と称されるネットワークアクセス可能コンピューティングおよび記憶リソースの集合によって提供される。例えば、クラウドは、通信ネットワーク514を介したインターネット等のネットワークを介して接続される種々のタイプのユーザおよびデバイスにクラウドベースのサービスを提供する中央にまたは分散場所に位置し得るサーバコンピューティングデバイスの集合を含むことができる。これらのクラウドリソースは、1つ以上のコンテンツソース516および1つ以上のメディアガイドデータソース518を含み得る。加えて、または代替として、遠隔コンピューティングサイトは、ユーザテレビ機器502、ユーザコンピュータ機器504、および無線ユーザ通信デバイス506等の他のユーザ機器デバイスを含み得る。例えば、他のユーザ機器デバイスは、ビデオの記憶されたコピーまたはストリーミングされたビデオへのアクセスを提供し得る。そのような実施形態では、ユーザ機器デバイスは、中央サーバと通信することなく、ピアツーピア様式で動作し得る。
クラウドは、ユーザ機器デバイスのために、他の例の中でもとりわけ、コンテンツ記憶、コンテンツ共有、またはソーシャルネットワーキングサービス等のサービスへのアクセス、ならびに上で説明される任意のコンテンツへのアクセスを提供する。サービスは、クラウドコンピューティングサービスプロバイダを通して、またはオンラインサービスの他のプロバイダを通して、クラウド内で提供されることができる。例えば、クラウドベースのサービスは、コンテンツ記憶サービス、コンテンツ共有サイト、ソーシャルネットワーキングサイト、または他のサービスを含むことができ、それを介して、ユーザ供給コンテンツは、接続されたデバイス上で他者によって視聴するために配布される。これらのクラウドベースのサービスは、ユーザ機器デバイスが、コンテンツをローカルで記憶し、ローカルで記憶されたコンテンツにアクセスするのではなく、コンテンツをクラウドに記憶し、コンテンツをクラウドから受信することを可能にし得る。
ユーザは、カムコーダ、ビデオモード付きデジタルカメラ、オーディオレコーダ、携帯電話、およびハンドヘルドコンピューティングデバイス等の種々のコンテンツ捕捉デバイスを使用して、コンテンツを録画し得る。ユーザは、直接、例えば、ユーザコンピュータ機器504から、またはコンテンツ捕捉特徴を有する無線ユーザ通信デバイス506からのいずれかにおいて、クラウド上のコンテンツ記憶サービスにコンテンツをアップロードすることができる。代替として、ユーザは、最初に、コンテンツをユーザコンピュータ機器504等のユーザ機器デバイスに転送することができる。コンテンツを記憶するユーザ機器デバイスは、通信ネットワーク514上のデータ伝送サービスを使用して、コンテンツをクラウドにアップロードする。いくつかの実施形態では、ユーザ機器デバイス自体が、クラウドリソースであり、他のユーザ機器デバイスは、直接、ユーザがコンテンツを記憶したユーザ機器デバイスから、コンテンツにアクセスすることができる。
クラウドリソースは、例えば、ウェブブラウザ、メディアガイドアプリケーション、デスクトップアプリケーション、モバイルアプリケーション、および/またはそれらのアクセスアプリケーションの任意の組み合わせを使用して、ユーザ機器デバイスによってアクセスされ得る。ユーザ機器デバイスは、アプリケーション配信のために、クラウドコンピューティングに依拠するクラウドクライアントであり得るか、またはユーザ機器デバイスは、クラウドリソースにアクセスすることなく、ある機能性を有し得る。例えば、ユーザ機器デバイス上で起動するいくつかのアプリケーションは、クラウドアプリケーション、すなわち、インターネットを経由してサービスとして配信されるアプリケーションであり得る一方で、他のアプリケーションは、ユーザ機器デバイス上に記憶および起動され得る。いくつかの実施形態では、ユーザデバイスは、コンテンツを複数のクラウドリソースから同時に受信し得る。例えば、ユーザデバイスは、オーディオを1つのクラウドリソースからストリーミングする一方で、コンテンツを第2のクラウドリソースからダウンロードすることができる。または、ユーザデバイスは、より効率的なダウンロードのために、コンテンツを複数のクラウドリソースからダウンロードすることができる。いくつかの実施形態では、ユーザ機器デバイスは、図4に関連して説明される処理回路によって実施される処理動作等の処理動作のために、クラウドリソースを使用することができる。
本明細書で参照されるように、用語「~に応答して」は、「~の結果として開始される」ことを指す。例えば、第2のアクションに応答して実施されている第1のアクションは、第1のアクションと第2のアクションとの間に介在ステップを含み得る。本明細書で参照されるように、用語「~に直接応答して」は、「~によって引き起こされる」ことを指す。例えば、第2のアクションに直接応答して実施されている第1のアクションは、第1のアクションと第2のアクションとの間に介在ステップを含まないこともある。
図6は、本開示のいくつかの実施形態による、メディアアセットの所与のフレームの着目オブジェクトを覆い隠さないオーバーレイを表示のためにメディアアセットの上に生成するためのプロセスの例証的フローチャートを描写する。図6のプロセス600は、上で説明されるメディアガイドアプリケーションの機能性に基づいて、メディアガイドアプリケーションによって命令される通りに制御回路404によって実行され得る。制御回路404は、フレーム110、フレーム120、およびフレーム130を表示のために生成するユーザ機器にローカルで、またはユーザ機器から遠隔に(例えば、通信ネットワーク514を介してアクセス可能なサーバにおいて)実装され得る。ユーザ機器は、ユーザテレビ機器502、ユーザコンピュータ機器504、および/または無線ユーザ通信デバイス506の機能性のうちのいずれかもしくは全てを含み得る。
プロセス600は、制御回路404が、メディアアセットの第1のフレーム(例えば、フレーム110)内の着目オブジェクト(例えば、個人102、ボール104、および/または個人106)を検出し得る602から開始する。例えば、個人102は、顔認識、フレーム110に関連付けられるメタデータ等の任意の組み合わせに基づいて、着目オブジェクトであると決定され得る。制御回路404が着目オブジェクトを検出し得る様式は、図1を参照して詳細に説明され、602に同等に適用される。
プロセス600は、制御回路404が第1のフレーム内の着目オブジェクトの第1の場所(例えば、フレーム110の左下象限)を決定し得る604に続く。606において、制御回路は、メディアアセットの第2のフレーム(例えば、フレーム120)内の着目オブジェクト(例えば、個人102)の第2の場所も決定し得る。制御回路404がフレーム110および120のうちのいずれかの中の着目オブジェクトの場所を決定し得る様式は、図1を参照して詳細に説明され、604および606に同等に適用される。
608では、制御回路404は、第1の場所および第2の場所に基づいて、メディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算し得る。予測場所が計算され得る様式は、上記図1を参照して詳細に説明され、608に同等に適用される。さらに、下で説明されるプロセス700および800は、予測場所が計算され得る様式をさらに詳述する。610では、制御回路404は、第1の場所、第2の場所、および予測場所のうちのいずれとも重複しない場所でメディアアセットの上にオーバーレイを表示のために生成し得る。
図7は、本開示のいくつかの実施形態による、メディアアセットの将来のフレーム内の着目オブジェクトの予測場所を計算するためのプロセスの例証的フローチャートを描写する。図7のプロセス700は、上で説明されるメディアガイドアプリケーションの機能性に基づいて、メディアガイドアプリケーションによって命令される通りに制御回路404によって実行され得る。制御回路404は、フレーム110、フレーム120、およびフレーム130を表示のために生成するユーザ機器にローカルで、またはユーザ機器から遠隔に(例えば、通信ネットワーク514を介してアクセス可能なサーバにおいて)実装され得る。ユーザ機器は、ユーザテレビ機器502、ユーザコンピュータ機器504、および/または無線ユーザ通信デバイス506の機能性のうちのいずれかもしくは全てを含み得る。
プロセス700は、制御回路404が、第1の場所および第2の場所に基づいて、メディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算するためのサブルーチンを開始し得る702から開始する。例えば、702は、プロセス600の608を実行するためのサブルーチンであり得る。
704では、制御回路404は、オーバーレイ(例えば、オーバーレイ108)の中に含まれるべきコンテンツの量を決定し得る。例えば、上で説明されるように、オーバーレイ108は、少ないコンテンツ(例えば、着信電話通知)または大量のコンテンツ(例えば、映画の予告編もしくは長いEメール)を有し得る。制御回路404がオーバーレイ108の中に含まれるべきコンテンツの量を決定し得る様式は、図1に関して上で詳細に説明され、704に同等に適用される。
プロセス700は、制御回路404が、ユーザプロファイルの情報に基づいて、ユーザがコンテンツを消費するために必要とするであろう第1の時間量を決定し得る706に続く。例えば、制御回路404は、ユーザが毎分10個の言葉の速さで読むことを決定し得、したがって、オーバーレイ108の中に含まれる言葉の数を計算し、そこから、ユーザがオーバーレイ108のコンテンツを消費するために要するであろう時間の長さを決定し得る。制御回路404が第1の時間量を決定し得る他の様式は、図1に関して上で詳細に説明され、706に同等に適用される。
708では、制御回路404は、着目オブジェクト(例えば、ボール104)が予測場所に到達する前に経過するであろう第2の時間量を決定し得る。例えば、プロセス800に関して下で説明されるであろうように、ボール104が予測場所に到達するための時間量は、ボール104の速度に基づいて計算され得る。第2の時間量が決定され得る様式は、図1に関して上で詳細に説明され、708に同等に適用される。
710では、制御回路404は、第2の時間量が第1の時間量を超えるかどうかを決定し得る(例えば、ボール104は、予測場所に到達するために、ユーザがオーバーレイ108のコンテンツを消費するために必要とするよりも長い時間を要するであろうか?)。第2の時間が第1の時間を超える場合、プロセス700は、制御回路404が、第2の時間量より小さい期間(例えば、ユーザがオーバーレイ108のコンテンツを読むために十分に長いが、ボール104が予測場所に到達するときにオーバーレイ108がボール104を覆い隠すであろうほど長くはない期間)にわたって、予測場所でメディアアセットの上にオーバーレイを表示のために生成し得る712に続く。第2の時間が第1の時間を超えない場合、制御回路404は、着目オブジェクトの予測経路のいかなる点も覆い隠さないフレームの一部において、メディアアセットの上にオーバーレイを表示のために生成し得る。
図8は、本開示のいくつかの実施形態による、着目オブジェクトの速度に基づいて、着目オブジェクトの予測場所を計算するためのプロセスの例証的フローチャートを描写する。図8のプロセス800は、上で説明されるメディアガイドアプリケーションの機能性に基づいて、メディアガイドアプリケーションによって命令される通りに制御回路404によって実行され得る。制御回路404は、フレーム110、フレーム120、およびフレーム130を表示のために生成するユーザ機器にローカルで、またはユーザ機器から遠隔に(例えば、通信ネットワーク514を介してアクセス可能なサーバにおいて)実装され得る。ユーザ機器は、ユーザテレビ機器502、ユーザコンピュータ機器504、および/または無線ユーザ通信デバイス506の機能性のうちのいずれかもしくは全てを含み得る。
802では、制御回路404は、第1の場所および第2の場所に基づいて、メディアアセットの第3のフレーム内の着目オブジェクトの予測場所を計算するためのサブルーチンを開始し得る。例えば、802は、プロセス600の608を実行するためのサブルーチンであり得る。
804では、制御回路404は、第1の場所を第2の場所と比較し、第1の場所と第2の場所との間の距離およびメディアオブジェクトが進行している方向を決定し得る。例えば、上記図1に関して説明されるように、制御回路404は、第1の場所と第2の場所との間の距離および方向の両方を表すベクトルを計算し得る。
806では、制御回路404は、第1のフレーム(例えば、フレーム110)のタイムスタンプを第2のフレームのタイムスタンプと比較し、第1のフレームおよび第2のフレーム(例えば、フレーム120)が放送された時間の間の時間差を決定し得る。808では、制御回路404は、距離、方向、および時間差に基づいて、着目オブジェクトの速度を決定し得る。例えば、制御回路404は、距離を時間で除算することによって速さを計算し得、方向を速さに付加し、速度を形成し得る。距離、方向、および速度を計算する様式は、図1に関して上で説明され、804、806、および808に同等に適用される。
810では、制御回路404は、第3のフレーム(例えば、フレーム130が表示のために生成されるであろう時間)の予測タイムスタンプを決定する。812では、制御回路404は、速度が実質的に維持される(例えば、摩擦等の自然力に起因する速度の自然損失を差し引いて、速度が維持される)場合に着目オブジェクトが第3のフレーム内にあろう場所に基づいて、予測場所を決定する。例えば、図1に関して上で詳細に議論されるように、制御回路404は、ボール104の速度を使用し、その予測経路が維持される場合にボール104が将来の時間において進行するであろう距離を決定し得る。
随意に、プロセス800は、814に続く。814では、制御回路404は、別のオブジェクト(例えば、個人106)が着目オブジェクトの予測経路上の着目オブジェクトと衝突しそうかどうかを決定する。プロセス800は、制御回路404が、別のオブジェクトが着目オブジェクトと衝突する可能性が低いことを決定する場合、終了する。制御回路404が、別のオブジェクトが着目オブジェクトと衝突する可能性が高いことを決定する場合、プロセス800は、816に続く。
816では、制御回路404は、別のオブジェクト(例えば、個人106)の速度を決定する。818では、制御回路404は、別のオブジェクトの速度を着目オブジェクトの速度と組み合わせ、複合速度を算出する。例えば、ボール104の速度および個人106の速度は、複合速度(例えば、フレーム120の左上象限の方向にいる個人106の速度に基づく、フレーム120の左上象限の方向への新しい速さ)を算出するように組み合わせられ得る。820では、制御回路404は、複合速度に基づいて、着目オブジェクトの更新された予測位置を計算し得る。着目オブジェクトの更新された予測位置を計算する様式は、図1に関して詳細に説明され、816、818、および820に同等に適用される。
プロセス600-800またはその任意のステップは、図1および4-5に示されるデバイスのうちのいずれかの上で実施されるか、または、それによって提供され得ることを理解されたい。例えば、プロセス600-800のうちのいずれかは、ユーザ機器502、504、506(図5)および/または推奨を選択するためのユーザ機器上で実装される制御回路によって指示される通りに制御回路404(図4)によって実行され得る。加えて、プロセス600-800の1つ以上のステップが、任意の他のプロセスもしくは実施形態の1つ以上のステップに組み込まれるか、もしくはそれと組み合わせられ得る。
図6-8の各々のステップまたは説明は、本開示の任意の他の実施形態と併用され得ることが考慮される。加えて、図6-8に関連して説明されるステップおよび説明は、本開示の目的を促すために、代替順序で、または並行して、行われ得る。例えば、これらのステップの各々は、システムまたは方法の遅延を低減させる、もしくは速度を増加させるように、任意の順序で、または並行して、もしくは実質的に同時に実施され得る。さらに、図1および4-5に関連して議論されるデバイスまたは機器のうちのいずれかは、図6-8のステップのうちの1つ以上のものを実施するために使用され得ることに留意されたい。
本発明に関与する方法は、コンピュータ使用可能および/または読み取り可能な媒体を含むコンピュータプログラム製品で具現化され得ることが、当業者に明白であろう。例えば、そのようなコンピュータ使用可能媒体は、CD-ROMディスクもしくは従来のROMデバイス等の読み取り専用メモリデバイス、またはその上に記憶されたコンピュータ読み取り可能なプログラムコードを有するハードドライブデバイスもしくはコンピュータディスケット等のランダムアクセスメモリから成り得る。さらに、本発明に関与する方法、技法、およびプロセスは、処理回路を使用して実行され得ることも理解されたい。例えば、着目オブジェクトの速度を計算するステップは、例えば、図4の処理回路406によって実施され得る。処理回路は、例えば、ユーザ機器400、メディアコンテンツソース516、またはメディアガイドデータソース518内の汎用プロセッサ、カスタマイズされた集積回路(例えば、ASIC)、またはフィールドプログラマブルゲートアレイ(FPGA)であり得る。例えば、本明細書に説明されるようなメディアアセットのタイプは、図4の記憶装置408または図5のメディアガイドデータソース518の中に記憶され、そこから読み出され得る。さらに、処理回路またはコンピュータプログラムは、図4の記憶装置408または図5のメディアガイドデータソース518内に記憶されたオーバーレイ108に関連付けられる設定等の設定を更新し得る。
上で議論されるプロセスは、限定的ではなく例証的であることを意図している。当業者は、本明細書で議論されるプロセスのステップが、本発明の範囲から逸脱することなく、省略される、修正される、組み合わせられる、および/または再配置され得、任意の追加のステップが、実施され得ることを理解するであろう。より一般的には、上記開示は、限定的ではなく例証的であるように意図されている。続く請求項のみが、本発明が含むものに関する境界を設定するように意図されている。さらに、いずれか1つの実施形態で説明される特徴および限定は、本明細書の任意の他の実施形態に適用され得、一実施形態に関するフローチャートまたは例は、好適な様式でいずれかの他の実施形態と組み合わせられる、異なる順序で行われる、または並行して行われ得ることに留意されたい。加えて、本明細書に説明されるシステムおよび方法は、リアルタイムで実施され得る。さらに、上で説明されるシステムおよび/または方法は、他のシステムならびに/もしくは方法に適用され得る、またはそれらに従って使用され得ることにも留意されたい。
本開示のいくつかの部分は、「慣例」を参照し得るが、任意のそのような参照は、文脈を本開示の発明に提供する目的のためにすぎず、最新技術を構成するものに関していかなる承認も形成しない。

Claims (51)

  1. 方法であって、前記方法は、
    メディアアセット内の着目オブジェクトを検出することと、
    第1のフレーム内の前記着目オブジェクトの第1の場所を決定することと、
    前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定することと、
    前記第1のフレーム内の前記着目オブジェクトの前記第1の場所および前記第2のフレーム内の前記着目オブジェクトの前記第2の場所に基づいて前記メディアアセットの将来のフレームにおける前記オブジェクトの将来の場所を予測することによって、前記着目オブジェクトの予測される移動の経路を決定することと、
    オーバーレイのコンテンツを消費するためにユーザが必要とするであろう第1の時間量を決定し、前記着目オブジェクトが予測場所に到達する前に経過するであろう第2の時間量を決定することと、
    前記第2の時間量が前記第1の時間量を超えることが決定された場合、前記第2の時間量未満の期間にわたって前記予測場所で前記メディアアセットの上にオーバーレイを表示のために生成することと、
    前記第2の時間量が前記第1の時間量を超えないことが決定された場合、前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
    を含む、方法。
  2. 前記メディアアセット内の着目オブジェクトを検出することは、前記メディアアセットの前記第1のフレーム内の前記着目オブジェクトを検出することを含み、
    前記将来のフレームにおける前記着目オブジェクトの将来の場所を予測することは、前記第1の場所および前記第2の場所に基づいて、前記第1のフレームおよび前記第2のフレームの後に表示される前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所と、前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しない前記オーバーレイの場所とを計算することを含む、請求項1に記載の方法。
  3. 前記オーバーレイのサイズを決定することと、
    前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別することであって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、ことと、
    前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれかと重複するかどうかを決定することと
    をさらに含み、
    前記オーバーレイを表示のために生成することは、前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しないことを決定することに応答して実施され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、請求項2に記載の方法。
  4. 前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することと、
    前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めることと
    をさらに含む、請求項2に記載の方法。
  5. 前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
    前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
    前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
    前記更新された予測場所に重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
    をさらに含む、請求項4に記載の方法。
  6. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
    前記オーバーレイの中に含まれるべきコンテンツの量を決定することと、
    ユーザプロファイルの情報に基づいて、前記第1の時間量を決定することと
    を含む、請求項2に記載の方法。
  7. 前記メディアアセットがライブメディアアセット放送であることを決定することと、
    前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定することと
    をさらに含み、
    前記第1のフレーム内の前記着目オブジェクトを検出することは、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別することを含み、
    前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記着目オブジェクトの同一性および前記あるタイプの両方に基づいて実施される、請求項2に記載の方法。
  8. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
    前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記着目オブジェクトが進行している方向を決定することと、
    前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定することと、
    前記距離および前記方向および前記時間差に基づいて、前記着目オブジェクトの速度を決定することと、
    前記第3のフレームの予測タイムスタンプを決定することと、
    前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定することと
    を含む、請求項2に記載の方法。
  9. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記方法は、
    前記個人のプロファイルにアクセスすることと、
    前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定することと
    をさらに含み、
    前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記予測場所を前記優先方向に基づかせることをさらに含む、請求項2に記載の方法。
  10. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記方法は、
    前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出することと、
    前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出することと、
    前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定することと、
    前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算することと
    をさらに含む、請求項2に記載の方法。
  11. 前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールのメディアアセットの前記第6のフレームのための前記更新された予測位置を計算することは、
    前記第3の位置および前記第4の位置および前記第4のフレームのタイムスタンプおよび前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定することと、
    前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定することと、
    前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定することと
    を含む、請求項10に記載の方法。
  12. メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化するためのシステムであって、前記システムは、
    オブジェクト検出回路と、
    表示回路と、
    制御回路と
    を備え、
    前記制御回路は、
    前記オブジェクト検出回路を使用して、メディアアセットの第1のフレーム内の着目オブジェクトを検出することと、
    前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定することと、
    前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定することと、
    前記第1の場所および前記第2の場所に基づいて、前記第1のフレームおよび前記第2のフレームの後に表示される前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算することと、
    前記オーバーレイのコンテンツを消費するためにユーザが必要とするであろう第1の時間量を決定し、前記着目オブジェクトが予測場所に到達する前に経過するであろう第2の時間量を決定することと、
    前記第2の時間量が前記第1の時間量を超えることが決定された場合、前記第2の時間量未満の期間にわたって前記予測場所で前記メディアアセットの上にオーバーレイを表示のために生成することと、
    前記第2の時間量が前記第1の時間量を超えないことが決定された場合、前記表示回路を使用して、前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上にオーバーレイを表示のために生成することと
    を行うように構成されている、システム。
  13. 前記制御回路は、
    前記オーバーレイのサイズを決定することと、
    前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別することであって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、ことと、
    前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれかと重複するかどうかを決定することと
    を行うようにさらに構成され、
    前記制御回路は、前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しないことを決定することに応答して、前記オーバーレイを表示のために生成することを実施するようにさらに構成され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、請求項12に記載のシステム。
  14. 前記制御回路は、
    前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することと、
    前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めることと
    を行うようにさらに構成されている、請求項12に記載のシステム。
  15. 前記制御回路は、前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
    前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
    前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
    前記更新された予測場所に重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
    を行うようにさらに構成されている、請求項14に記載のシステム。
  16. 前記制御回路は、前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、
    前記オーバーレイの中に含まれるべきコンテンツの量を決定することと、
    ユーザプロファイルの情報に基づいて、前記第1の時間量を決定することと
    を行うようにさらに構成されている、請求項12に記載のシステム。
  17. 前記制御回路は、
    前記メディアアセットがライブメディアアセット放送であることを決定することと、
    前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定することと
    を行うようにさらに構成され、
    前記制御回路は、前記第1のフレーム内の前記着目オブジェクトを検出するとき、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別するようにさらに構成され、
    前記制御回路は、前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、前記計算を前記着目オブジェクトの同一性および前記あるタイプの両方に基づかせるようにさらに構成されている、請求項12に記載のシステム。
  18. 前記制御回路は、前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、
    前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記着目オブジェクトが進行している方向を決定することと、
    前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定することと、
    前記距離および前記方向および前記時間差に基づいて、前記着目オブジェクトの速度を決定することと、
    前記第3のフレームの予測タイムスタンプを決定することと、
    前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定することと
    を行うようにさらに構成されている、請求項12に記載のシステム。
  19. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記制御回路は、
    前記個人のプロファイルにアクセスすることと、
    前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定することと
    を行うようにさらに構成され、
    前記制御回路は、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するとき、前記予測場所を前記優先方向にさらに基づかせるようにさらに構成されている、請求項12に記載のシステム。
  20. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記制御回路は、
    前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出することと、
    前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出することと、
    前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定することと、
    前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算することと
    を行うようにさらに構成されている、請求項12に記載のシステム。
  21. 前記制御回路は、前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算するとき、
    前記第3の位置および前記第4の位置および前記第4のフレームのタイムスタンプおよび前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定することと、
    前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定することと、
    前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定することと
    を行うようにさらに構成されている、請求項20に記載のシステム。
  22. メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化するためのシステムであって、前記システムは、
    メディアアセットの第1のフレーム内の着目オブジェクトを検出する手段と、
    前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定する手段と、
    前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定する手段と、
    前記第1の場所および前記第2の場所に基づいて、前記第1のフレームおよび前記第2のフレームの後に表示される前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算する手段と、
    前記オーバーレイのコンテンツを消費するためにユーザが必要とするであろう第1の時間量を決定し、前記着目オブジェクトが予測場所に到達する前に経過するであろう第2の時間量を決定する手段と、
    前記第2の時間量が前記第1の時間量を超えることが決定された場合、前記第2の時間量未満の期間にわたって前記予測場所で前記メディアアセットの上に前記オーバーレイを表示のために生成する手段と、
    前記第2の時間量が前記第1の時間量を超えないことが決定された場合、前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上にオーバーレイを表示のために生成する手段と
    を備えている、システム。
  23. 前記オーバーレイのサイズを決定する手段と、
    前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別する手段であって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、手段と、
    前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれかと重複するかどうかを決定する手段と
    をさらに備え、
    前記オーバーレイを表示のために生成することは、前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しないことを決定することに応答して実施され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、請求項22に記載のシステム。
  24. 前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定する手段と、
    前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止める手段と
    をさらに備えている、請求項22に記載のシステム。
  25. 前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
    前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
    前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
    前記更新された予測場所に重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
    を行う手段をさらに備えている、請求項24に記載のシステム。
  26. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、
    前記オーバーレイの中に含まれるべきコンテンツの量を決定する手段と、
    ユーザプロファイルの情報に基づいて、前記第1の時間量を決定する手段と
    を備えている、請求項22に記載のシステム。
  27. 前記メディアアセットがライブメディアアセット放送であることを決定する手段と、
    前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定する手段と
    をさらに備え、
    前記第1のフレーム内の前記着目オブジェクトを検出する前記手段は、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別する手段を備え、
    前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、前記着目オブジェクトの同一性および前記あるタイプの両方に基づいて前記計算を実施する手段を備えている、請求項22に記載のシステム。
  28. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、
    前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記着目オブジェクトが進行している方向を決定する手段と、
    前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定する手段と、
    前記距離および前記方向および前記時間差に基づいて、前記着目オブジェクトの速度を決定する手段と、
    前記第3のフレームの予測タイムスタンプを決定する手段と、
    前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定する手段と
    を備えている、請求項22に記載のシステム。
  29. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記システムは、
    前記個人のプロファイルにアクセスする手段と、
    前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定する手段と
    をさらに備え、
    前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算する前記手段は、前記予測場所を前記優先方向に基づかせるための手段をさらに備えている、請求項22に記載のシステム。
  30. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記システムは、
    前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出する手段と、
    前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出する手段と、
    前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定する手段と、
    前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算する手段と
    をさらに備えている、請求項22に記載のシステム。
  31. 前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算する前記手段は、
    前記第3の位置および前記第4の位置および前記第4のフレームのタイムスタンプおよび前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定する手段と、
    前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定する手段と、
    前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定する手段と
    を備えている、請求項30に記載のシステム。
  32. 記憶された命令を伴うメモリを備えている非一過性の機械読み取り可能な媒体であって、前記命令は、メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化するためのものであり、前記命令は、
    メディアアセットの第1のフレーム内の着目オブジェクトを検出するための命令と、
    前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定するための命令と、
    前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定するための命令と、
    前記第1の場所および前記第2の場所に基づいて、前記第1のフレームおよび前記第2のフレームの後に表示される前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算するための命令と、
    前記オーバーレイのコンテンツを消費するためにユーザが必要とするであろう第1の時間量を決定し、前記着目オブジェクトが予測場所に到達する前に経過するであろう第2の時間量を決定するための命令と、
    前記第2の時間量が前記第1の時間量を超えることが決定された場合、前記第2の時間量未満の期間にわたって前記予測場所で前記メディアアセットの上に前記オーバーレイを表示のために生成するための命令と、
    前記第2の時間量が前記第1の時間量を超えないことが決定された場合、前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上にオーバーレイを表示のために生成するための命令と
    を備えている、非一過性の機械読み取り可能な媒体。
  33. 前記命令は、
    前記オーバーレイのサイズを決定するための命令と、
    前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別するための命令であって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、命令と、
    前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれかと重複するかどうかを決定するための命令と
    をさらに備え、
    前記オーバーレイを表示のために生成するための前記命令は、前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しないことを決定することに応答して、表示のために生成を実施するための命令を備え、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、請求項32に記載の非一過性の機械読み取り可能な媒体。
  34. 前記命令は、
    前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定するための命令と、
    前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めるための命令と、
    をさらに備えている、請求項32に記載の非一過性の機械読み取り可能な媒体。
  35. 前記命令は、前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
    前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
    前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
    前記更新された予測場所に重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
    を行うための命令をさらに備えている、請求項34に記載の非一過性の機械読み取り可能な媒体。
  36. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、
    前記オーバーレイの中に含まれるべきコンテンツの量を決定するための命令と、
    ユーザプロファイルの情報に基づいて、前記第1の時間量を決定するための命令と
    を備えている、請求項32に記載の非一過性の機械読み取り可能な媒体。
  37. 前記命令は、
    前記メディアアセットがライブメディアアセット放送であることを決定するための命令と、
    前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定するための命令と
    をさらに備え、
    前記第1のフレーム内の前記着目オブジェクトを検出する前記命令は、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別するための命令を備え、
    前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、前記着目オブジェクトの同一性および前記あるタイプの両方に基づいて前記予測場所の計算を実施するための命令を備えている、請求項32に記載の非一過性の機械読み取り可能な媒体。
  38. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、
    前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記着目オブジェクトが進行している方向を決定するための命令と、
    前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定するための命令と、
    前記距離および前記方向および前記時間差に基づいて、前記着目オブジェクトの速度を決定するための命令と、
    前記第3のフレームの予測タイムスタンプを決定するための命令と、
    前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定するための命令と
    を備えている、請求項32に記載の非一過性の機械読み取り可能な媒体。
  39. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記命令は、
    前記個人のプロファイルにアクセスするための命令と、
    前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定するための命令と
    をさらに備え、
    前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算するための前記命令は、前記予測場所を前記優先方向に基づかせるための命令をさらに備えている、請求項32に記載の非一過性の機械読み取り可能な媒体。
  40. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記命令は、
    前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出するための命令と、
    前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出するための命令と、
    前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定するための命令と、
    前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算するための命令と
    をさらに備えている、請求項32に記載の非一過性の機械読み取り可能な媒体。
  41. 前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算するための前記命令は、
    前記第3の位置および前記第4の位置および前記第4のフレームのタイムスタンプおよび前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定するための命令と、
    前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定するための命令と、
    前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定するための命令と
    を備えている、請求項40に記載の非一過性の機械読み取り可能な媒体。
  42. メディアアセットの着目オブジェクトの移動の経路を予測し、前記移動の経路におけるオーバーレイの設置を回避することによって、前記オーバーレイによる前記メディアアセットの妨害を最小化する方法であって、前記方法は、
    制御回路を使用して、メディアアセットの第1のフレーム内の着目オブジェクトを検出することと、
    前記第1のフレーム内の前記着目オブジェクトの第1の場所を決定することと、
    前記メディアアセットの第2のフレーム内の前記着目オブジェクトの第2の場所を決定することと、
    前記第1の場所および前記第2の場所に基づいて、前記第1のフレームおよび前記第2のフレームの後に表示される前記メディアアセットの第3のフレーム内の前記着目オブジェクトの予測場所を計算することと、
    前記オーバーレイのコンテンツを消費するためにユーザが必要とするであろう第1の時間量を決定し、前記着目オブジェクトが予測場所に到達する前に経過するであろう第2の時間量を決定することと、
    前記第2の時間量が前記第1の時間量を超えることが決定された場合、前記第2の時間量未満の期間にわたって前記予測場所で前記メディアアセットの上にオーバーレイを表示のために生成することと、
    前記第2の時間量が前記第1の時間量を超えないことが決定された場合、前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しない場所で前記メディアアセットの上にオーバーレイを表示のために生成することと
    を含む、方法。
  43. 前記オーバーレイのサイズを決定することと、
    前記オーバーレイのサイズに対応する前記第2のフレーム内の領域を識別することであって、前記領域は、前記第1のフレームと比較して、前記第2のフレームにおいて変化していない、ことと、
    前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれかと重複するかどうかを決定することと
    をさらに含み、
    前記オーバーレイを表示のために生成することは、前記領域が前記第1の場所および前記第2の場所および前記予測場所のうちのいずれとも重複しないことを決定することに応答して実施され、前記オーバーレイは、前記領域内で前記メディアアセットの上に表示のために生成される、請求項42に記載の方法。
  44. 前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することと、
    前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することに応答して、前記メディアアセットの上に前記オーバーレイを表示のために生成することを止めることと
    をさらに含む、請求項42および43のいずれかに記載の方法。
  45. 前記着目オブジェクトが前記第3のフレームの前記予測場所内にないことを決定することにさらに応答して、
    前記着目オブジェクトの前記予測場所の計算が失敗したことを示すデータを用いて、前記着目オブジェクトの前記予測場所を計算するために使用されるモデルを更新することと、
    前記更新されたモデルに基づいて、前記メディアアセットの第4のフレームにおける前記着目オブジェクトの更新された予測場所を決定することと、
    前記更新された予測場所に重複しない場所で前記メディアアセットの上に前記オーバーレイを表示のために生成することと
    をさらに含む、請求項44に記載の方法。
  46. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
    前記オーバーレイの中に含まれるべきコンテンツの量を決定することと、
    ユーザプロファイルの情報に基づいて、前記第1の時間量を決定することと
    を含む、請求項42~45のいずれかに記載の方法。
  47. 前記メディアアセットがライブメディアアセット放送であることを決定することと、
    前記メディアアセットが複数のタイプのうちのあるタイプのものであることを決定することと
    をさらに含み、
    前記第1のフレーム内の前記着目オブジェクトを検出することは、前記あるタイプに基づいて、複数の候補着目オブジェクトから前記着目オブジェクトを判別することを含み、
    前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記着目オブジェクトの同一性および前記あるタイプの両方に基づいて実施される、請求項42~46のいずれかに記載の方法。
  48. 前記第1の場所および前記第2の場所に基づいて、前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、
    前記第1の場所を前記第2の場所と比較し、前記第1の場所と前記第2の場所との間の距離および前記着目オブジェクトが進行している方向を決定することと、
    前記第1のフレームのタイムスタンプを前記第2のフレームのタイムスタンプと比較し、前記第1のフレームと前記第2のフレームとが放送された時間の間の時間差を決定することと、
    前記距離および前記方向および前記時間差に基づいて、前記着目オブジェクトの速度を決定することと、
    前記第3のフレームの予測タイムスタンプを決定することと、
    前記速度が実質的に維持される場合、前記着目オブジェクトが前記第3のフレーム内にあろう場所に基づいて、前記予測場所を決定することと
    を含む、請求項42~47のいずれかに記載の方法。
  49. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、前記スポーツイベントに参加している個人であり、前記第1の場所および前記第2の場所は、等しく、前記方法は、
    前記個人のプロファイルにアクセスすることと、
    前記プロファイルの情報に基づいて、前記個人が前記スポーツイベントに参加しているときに進行する傾向がある優先方向を決定することと
    をさらに含み、
    前記メディアアセットの前記第3のフレーム内の前記着目オブジェクトの前記予測場所を計算することは、前記予測場所を前記優先方向に基づかせることをさらに含む、請求項42~48のいずれかに記載の方法。
  50. 前記メディアアセットは、スポーツイベントのライブ放送であり、前記着目オブジェクトは、ボールであり、前記方法は、
    前記メディアアセットの第4のフレームにおいて、第3の位置における個人を検出することと、
    前記メディアアセットの第5のフレームにおいて、第4の位置における前記個人を検出することと、
    前記第3の位置と前記第4の位置との間の前記個人の移動に基づいて、前記個人が前記ボールと相互作用する可能性が高いことを決定することと、
    前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの第6のフレームのための更新された予測位置を計算することと
    をさらに含む、請求項42~49のいずれかに記載の方法。
  51. 前記第3の位置と前記第4の位置との間の前記個人の前記移動に基づいて、前記ボールの前記メディアアセットの前記第6のフレームのための前記更新された予測位置を計算することは、
    前記第3の位置および前記第4の位置および前記第4のフレームのタイムスタンプおよび前記第5のフレームのタイムスタンプに基づいて、前記個人の第1の速度を決定することと、
    前記第4のフレームおよび前記第5のフレーム内の前記ボールの場所に基づいて、前記ボールの第2の速度を決定することと、
    前記第1の速度と前記第2の速度とを組み合わせることによって、前記更新された予測位置を決定することと
    を含む、請求項50に記載の方法。
JP2019531300A 2016-12-13 2016-12-13 メディアアセットの着目オブジェクトの移動の経路を予測し、移動の経路におけるオーバーレイの設置を回避することによって、オーバーレイによるメディアアセットの妨害を最小化するためのシステムおよび方法 Active JP7118966B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2016/066281 WO2018111232A1 (en) 2016-12-13 2016-12-13 Systems and methods for minimizing obstruction of a media asset by an overlay by predicting a path of movement of an object of interest of the media asset and avoiding placement of the overlay in the path of movement

Publications (2)

Publication Number Publication Date
JP2020513711A JP2020513711A (ja) 2020-05-14
JP7118966B2 true JP7118966B2 (ja) 2022-08-16

Family

ID=57750625

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019531300A Active JP7118966B2 (ja) 2016-12-13 2016-12-13 メディアアセットの着目オブジェクトの移動の経路を予測し、移動の経路におけるオーバーレイの設置を回避することによって、オーバーレイによるメディアアセットの妨害を最小化するためのシステムおよび方法

Country Status (7)

Country Link
US (3) US11076200B2 (ja)
EP (1) EP3556101B1 (ja)
JP (1) JP7118966B2 (ja)
KR (1) KR102589628B1 (ja)
CN (1) CN110178375B (ja)
CA (1) CA3046752A1 (ja)
WO (1) WO2018111232A1 (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3556101B1 (en) 2016-12-13 2022-07-20 Rovi Guides, Inc. Systems and methods for minimizing obstruction of a media asset by an overlay by predicting a path of movement of an object of interest of the media asset and avoiding placement of the overlay in the path of movement
US10728624B2 (en) * 2017-12-29 2020-07-28 Rovi Guides, Inc. Systems and methods for modifying fast-forward speeds based on the user's reaction time when detecting points of interest in content
US11805283B2 (en) 2019-01-25 2023-10-31 Gracenote, Inc. Methods and systems for extracting sport-related information from digital video frames
US10997424B2 (en) 2019-01-25 2021-05-04 Gracenote, Inc. Methods and systems for sport data extraction
US11036995B2 (en) 2019-01-25 2021-06-15 Gracenote, Inc. Methods and systems for scoreboard region detection
US11087161B2 (en) * 2019-01-25 2021-08-10 Gracenote, Inc. Methods and systems for determining accuracy of sport-related information extracted from digital video frames
US11010627B2 (en) 2019-01-25 2021-05-18 Gracenote, Inc. Methods and systems for scoreboard text region detection
US10951563B2 (en) 2019-06-27 2021-03-16 Rovi Guides, Inc. Enhancing a social media post with content that is relevant to the audience of the post
US10893329B1 (en) * 2019-09-03 2021-01-12 International Business Machines Corporation Dynamic occlusion of livestreaming
WO2022018629A1 (en) * 2020-07-20 2022-01-27 Sky Italia S.R.L. Smart overlay : positioning of the graphics with respect to reference points
EP4183135A1 (en) * 2020-07-20 2023-05-24 Sky Italia S.r.L. Smart overlay : dynamic positioning of the graphics
WO2022025883A1 (en) * 2020-07-29 2022-02-03 Google Llc Non-occluding video overlays
CN114902649A (zh) * 2020-10-30 2022-08-12 谷歌有限责任公司 非遮挡视频叠加
US11617017B2 (en) * 2021-06-30 2023-03-28 Rovi Guides, Inc. Systems and methods of presenting video overlays
US11432047B1 (en) * 2021-11-04 2022-08-30 Rovi Guides, Inc. Systems and methods for selectively and automatically enabling and disabling features of a chat application
KR102670709B1 (ko) * 2021-12-15 2024-05-30 주식회사 엠브레이스 방송영상의 영역 및 객체 인식을 이용한 가상광고 삽입 시스템 및 방법
JP7524501B2 (ja) * 2022-06-28 2024-07-29 楽天グループ株式会社 動画に提供情報を重畳する動画配信

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080231751A1 (en) 2007-03-22 2008-09-25 Sony Computer Entertainment America Inc. Scheme for determining the locations and timing of advertisements and other insertions in media
US20160066024A1 (en) 2014-07-23 2016-03-03 Comigo Ltd. Reducing interference of an overlay with underlying content

Family Cites Families (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6239794B1 (en) 1994-08-31 2001-05-29 E Guide, Inc. Method and system for simultaneously displaying a television program and information about the program
JP3800640B2 (ja) * 1995-07-04 2006-07-26 ソニー株式会社 画像情報の動き検出方法及びその装置、画像情報の符号化方法及びその装置、画像情報伝送システム、画像情報記録システム並びに記録媒体
US6388714B1 (en) 1995-10-02 2002-05-14 Starsight Telecast Inc Interactive computer system for providing television schedule information
US5969755A (en) * 1996-02-05 1999-10-19 Texas Instruments Incorporated Motion based event detection system and method
US6177931B1 (en) 1996-12-19 2001-01-23 Index Systems, Inc. Systems and methods for displaying and recording control interface with television programs, video, advertising information and program scheduling information
US6564378B1 (en) 1997-12-08 2003-05-13 United Video Properties, Inc. Program guide system with browsing display
MXPA00008584A (es) 1998-03-04 2002-05-08 United Video Properties Inc Sistema de guias de programacion con publicidad dirigida.
US6233283B1 (en) * 1998-06-23 2001-05-15 Lucent Technologies Inc. Layered video coding using perceptual coding criteria for error resilience in packet networks
CN1867068A (zh) 1998-07-14 2006-11-22 联合视频制品公司 交互式电视节目导视系统及其方法
AR020608A1 (es) 1998-07-17 2002-05-22 United Video Properties Inc Un metodo y una disposicion para suministrar a un usuario acceso remoto a una guia de programacion interactiva por un enlace de acceso remoto
MX355835B (es) 1998-07-17 2018-05-02 Rovi Guides Inc Un sistema de guias de programacion televisiva interactivas que tiene multiples dispositivos dentro de una residencia de un grupo familiar.
US7165098B1 (en) 1998-11-10 2007-01-16 United Video Properties, Inc. On-line schedule system with personalization features
US20020070957A1 (en) * 2000-12-12 2002-06-13 Philips Electronics North America Corporation Picture-in-picture with alterable display characteristics
US7206029B2 (en) * 2000-12-15 2007-04-17 Koninklijke Philips Electronics N.V. Picture-in-picture repositioning and/or resizing based on video content analysis
CN101257609B (zh) 2001-02-21 2014-03-19 联合视频制品公司 具有个人视频记录特征的交互式节目导视器的系统和方法
KR20020078707A (ko) * 2001-04-09 2002-10-19 (주)버추얼미디어 스포츠 동영상에서의 통계 정보 자동 추출 장치 및 방법
DE10139048A1 (de) 2001-08-08 2003-02-20 Bosch Gmbh Robert Verfahren und Vorrichtung zur Durchführung eines automatischen Ladezustandsausgleichs
WO2003079271A1 (en) * 2002-03-15 2003-09-25 Metatv System and method for construction, delivery and display of itv content
US7450768B2 (en) * 2002-10-02 2008-11-11 Ricoh Company, Ltd. Apparatus and method for processing image data based on object movement speed within a frame
EP1416727A1 (en) 2002-10-29 2004-05-06 Accenture Global Services GmbH Moving virtual advertising
NZ525956A (en) * 2003-05-16 2005-10-28 Deep Video Imaging Ltd Display control system for use with multi-layer displays
US20070210937A1 (en) * 2005-04-21 2007-09-13 Microsoft Corporation Dynamic rendering of map information
US20100153885A1 (en) 2005-12-29 2010-06-17 Rovi Technologies Corporation Systems and methods for interacting with advanced displays provided by an interactive media guidance application
KR100810345B1 (ko) * 2006-08-03 2008-03-04 삼성전자주식회사 멀티미디어 이동형 단말을 위한 지능적 디스플레이 방법
US8312486B1 (en) * 2008-01-30 2012-11-13 Cinsay, Inc. Interactive product placement system and method therefor
GB0809631D0 (en) * 2008-05-28 2008-07-02 Mirriad Ltd Zonesense
US20110178854A1 (en) * 2008-09-04 2011-07-21 Somertech Ltd. Method and system for enhancing and/or monitoring visual content and method and/or system for adding a dynamic layer to visual content
WO2010030569A2 (en) * 2008-09-09 2010-03-18 Dilithium Networks, Inc. Method and apparatus for transmitting video
JP4591586B2 (ja) 2008-09-22 2010-12-01 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
KR101854141B1 (ko) * 2009-01-19 2018-06-14 삼성전자주식회사 디스플레이 정보 제어 장치 및 방법
US20100329571A1 (en) * 2009-06-24 2010-12-30 General Electric Company Shape based registration
TW201106250A (en) * 2009-08-13 2011-02-16 Wistron Corp Electronic device and method for simultaneously displaying widget and video signal in display device
US9111287B2 (en) * 2009-09-30 2015-08-18 Microsoft Technology Licensing, Llc Video content-aware advertisement placement
JP5551913B2 (ja) * 2009-10-13 2014-07-16 株式会社クローラ研究所 動画追尾による情報提供システム
CN101794451A (zh) 2010-03-12 2010-08-04 上海交通大学 基于运动轨迹的跟踪方法
JP5465620B2 (ja) * 2010-06-25 2014-04-09 Kddi株式会社 映像コンテンツに重畳する付加情報の領域を決定する映像出力装置、プログラム及び方法
US9009339B2 (en) * 2010-06-29 2015-04-14 Echostar Technologies L.L.C. Apparatus, systems and methods for accessing and synchronizing presentation of media content and supplemental media rich content
CN101930779B (zh) * 2010-07-29 2012-02-29 华为终端有限公司 一种视频批注方法及视频播放器
US8736767B2 (en) * 2010-09-29 2014-05-27 Sharp Laboratories Of America, Inc. Efficient motion vector field estimation
WO2012147276A1 (ja) * 2011-04-28 2012-11-01 パナソニック株式会社 映像表示装置および映像表示方法
US9396757B2 (en) * 2011-06-21 2016-07-19 Nokia Technologies Oy Video remixing system
US9930311B2 (en) * 2011-10-20 2018-03-27 Geun Sik Jo System and method for annotating a video with advertising information
US20170374431A1 (en) * 2016-06-23 2017-12-28 Overplay, Inc. System and method for providing a platform for optimizing overlay location over programming content
US20150226828A1 (en) 2012-08-31 2015-08-13 Fox Sports Productions, Inc. Systems and methods for tracking and tagging objects within a broadcast
US10771801B2 (en) * 2012-09-14 2020-09-08 Texas Instruments Incorporated Region of interest (ROI) request and inquiry in a video chain
US9973722B2 (en) * 2013-08-27 2018-05-15 Qualcomm Incorporated Systems, devices and methods for displaying pictures in a picture
EP3103258B1 (en) 2014-02-07 2020-07-15 Sony Interactive Entertainment America LLC Scheme for determining the locations and timing of advertisements and other insertions in media
KR102268668B1 (ko) * 2014-03-12 2021-06-24 삼성메디슨 주식회사 대상체에 대한 복수의 상이한 영상들을 디스플레이하는 방법 및 장치
CN105022756B (zh) * 2014-04-29 2019-06-21 腾讯科技(深圳)有限公司 一种网页显示方法及装置
CN104103081A (zh) * 2014-07-14 2014-10-15 西安电子科技大学 一种虚拟的多摄像机目标跟踪视频素材产生方法
CN104238911B (zh) * 2014-08-20 2018-04-06 小米科技有限责任公司 加载图标显示方法和装置
CN104333449B (zh) * 2014-09-29 2018-11-06 形山科技(深圳)有限公司 一种图片保密方法及系统
US20160112727A1 (en) * 2014-10-21 2016-04-21 Nokia Technologies Oy Method, Apparatus And Computer Program Product For Generating Semantic Information From Video Content
CN104408644A (zh) 2014-11-11 2015-03-11 北京百度网讯科技有限公司 媒体对象展示的控制方法、装置及媒体对象展示系统
CN105867762A (zh) * 2015-12-31 2016-08-17 乐视网信息技术(北京)股份有限公司 播放中视频的显示方法及装置
US9668023B1 (en) 2016-05-26 2017-05-30 Rovi Guides, Inc. Systems and methods for providing real-time presentation of timely social chatter of a person of interest depicted in media simultaneous with presentation of the media itself
US9961378B1 (en) 2016-10-25 2018-05-01 Rovi Guides, Inc. Systems and methods for causing a user to view secondary content that relates to a media asset from which a user has switched away
EP3556101B1 (en) 2016-12-13 2022-07-20 Rovi Guides, Inc. Systems and methods for minimizing obstruction of a media asset by an overlay by predicting a path of movement of an object of interest of the media asset and avoiding placement of the overlay in the path of movement

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080231751A1 (en) 2007-03-22 2008-09-25 Sony Computer Entertainment America Inc. Scheme for determining the locations and timing of advertisements and other insertions in media
US20160066024A1 (en) 2014-07-23 2016-03-03 Comigo Ltd. Reducing interference of an overlay with underlying content

Also Published As

Publication number Publication date
CN110178375A (zh) 2019-08-27
US12015819B2 (en) 2024-06-18
CN110178375B (zh) 2022-03-25
KR102589628B1 (ko) 2023-10-13
EP3556101A1 (en) 2019-10-23
CA3046752A1 (en) 2018-06-21
EP3556101B1 (en) 2022-07-20
JP2020513711A (ja) 2020-05-14
US20190349626A1 (en) 2019-11-14
US11076200B2 (en) 2021-07-27
US20230239531A1 (en) 2023-07-27
US11611794B2 (en) 2023-03-21
KR20190094395A (ko) 2019-08-13
WO2018111232A1 (en) 2018-06-21
US20210400333A1 (en) 2021-12-23

Similar Documents

Publication Publication Date Title
JP7118966B2 (ja) メディアアセットの着目オブジェクトの移動の経路を予測し、移動の経路におけるオーバーレイの設置を回避することによって、オーバーレイによるメディアアセットの妨害を最小化するためのシステムおよび方法
US11956564B2 (en) Systems and methods for resizing content based on a relative importance of the content
US11580699B2 (en) Systems and methods for changing a users perspective in virtual reality based on a user-selected position
CN109074828B (zh) 用于提供取代广告内容进行回放的用户相关内容的播放列表的系统和方法
US10158917B1 (en) Systems and methods for generating customized shared viewing experiences in virtual reality environments
JP2019520009A (ja) 別のデバイスに双方向特徴を伝送するための方法およびシステム
US20230244762A1 (en) Systems And Methods For Intelligently Accessing Media Content Based On Rights
US20230209151A1 (en) Systems and methods for enabling and monitoring content creation while consuming a live video
KR20200087814A (ko) 짧은 미디어 시청 프로파일 및 긴 미디어 시청 프로파일에 기초하여 추천들을 제공하기 위한 시스템들 및 방법들
CN111684767B (zh) 动态调整事件的通知频率的系统和方法
JP7295108B2 (ja) ビンジウォッチング一時停止位置推奨を提供するためのシステムおよび方法
KR20180021669A (ko) 유저 프로파일에 기초한 미디어 자산을 위한 이미지의 자동 포맷팅을 위한 시스템 및 방법
US9069764B2 (en) Systems and methods for facilitating communication between users receiving a common media asset
WO2016160802A1 (en) System and method for selecting sound logos for media content
KR20240118900A (ko) 이전에 시청된 콘텐트의 시청 상태를 업데이트하기 위한 진행 표시줄을 제공하기 위한 시스템 및 방법
CA3087039A1 (en) Systems and methods for generating customized shared viewing experiences in virtual reality environments
JP6704357B2 (ja) 選択されたメディアアセットに対するアクチュエータの機能性を自動的に修正するためのシステムおよび方法
US10382812B1 (en) Methods and systems for selecting a destination for storage of a media asset based on trick-play likelihood
KR102452342B1 (ko) 스토리라인 선택 인터페이스를 제공하기 위한 시스템 및 방법
CN107710767B (zh) 使得用户能够在封闭网络中接收对于内容的访问的系统和方法
US9782681B2 (en) Methods and systems for controlling media guidance application operations during video gaming applications
US10382821B1 (en) Methods and systems for selecting a destination for storage of a media asset based on wireless access likelihood

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190814

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191212

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210909

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20211202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220308

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220705

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220803

R150 Certificate of patent or registration of utility model

Ref document number: 7118966

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150