JP2017525272A - メタデータに従ったビデオコンテンツの拡張 - Google Patents

メタデータに従ったビデオコンテンツの拡張 Download PDF

Info

Publication number
JP2017525272A
JP2017525272A JP2017500890A JP2017500890A JP2017525272A JP 2017525272 A JP2017525272 A JP 2017525272A JP 2017500890 A JP2017500890 A JP 2017500890A JP 2017500890 A JP2017500890 A JP 2017500890A JP 2017525272 A JP2017525272 A JP 2017525272A
Authority
JP
Japan
Prior art keywords
video content
metadata
hierarchical order
processor
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017500890A
Other languages
English (en)
Inventor
アハメド,サミール
ルヴィオン,クリストフ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2017525272A publication Critical patent/JP2017525272A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44012Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4854End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4856End-user interface for client configuration for language selection, e.g. for the menu or subtitles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8453Structuring of content, e.g. decomposing content into time segments by locking or enabling a set of features, e.g. optional functionalities in an executable program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本明細書において方法及び装置の様々な態様が説明される。いくつかの方法は、ビデオコンテンツを受信し、メタデータフィールドの階層的順序を含むメタデータを受信し、メタデータフィールドの少なくとも1つと関連する設定に従ってビデオコンテンツの少なくとも一部に拡張操作を実行することを含む。拡張操作は、ビデオコンテンツの1つ以上の視覚的特徴を変更するように構成されたビデオ処理操作を含むことができる。メタデータフィールドに関連する設定は、ビデオコンテンツとメタデータを受信するデバイスで事前に定義されることができる。拡張操作は、ビデオコンテンツにおける時間コードに基づく時刻に実行することができる。拡張操作は、被写体の境界で定められた領域で実行することができる。階層的順序は、ディスプレイ技術のタイプに対応することができる。階層的順序は、ディスプレイ製造業者と関連する情報に対応することができる。

Description

本開示は、一般にビデオコンテンツに関連し、より具体的にはメタデータに従ったビデオコンテンツの拡張に関連する。
関連出願の参照
本出願は、ここに完全に参照により組み込まれる2014年7月7日に出願された米国仮出願62/021,685号の利益を主張する。
この出願は、共に出願された「ビデオコンテンツのメタデータ拡張(METADATA ENHANCEMENT OF VIDEO CONTENT)」という名称の米国出願にも関連し、ここに全体として参照として組み込まれる。
従来のシステムにおいて、ビデオコンテンツを表示するデバイスは、ユーザから様々な入力を受信し、ビデオコンテンツの表示に関連する設定(settings)を調整する。例えば、表示されるビデオコンテンツの輝度が増すように、ユーザはデバイスの設定を調整することができる。別の実例として、表示されるビデオコンテンツのコントラストを下げるように、ユーザはデバイスの設定を調整することができる。これらの設定は、表示されるビデオコンテンツすべてに典型的に影響を及ぼし、ユーザによってこれらの設定が変更されるまで持続される。これらの設定は、典型的には、ビデオコンテンツの特定の部分には影響を与えない。従来のシステムでは、表示されたビデオコンテンツへの変更は、ビデオコンテンツを送信するサーバにおいて行うことができる。例えば、サーバは、ビデオコンテンツにこれらの変更を埋め込み、その次に、表示のために受信デバイスにこの変更したビデオコンテンツを送信することができる。しかしながら、そのような変更をビデオコンテンツに埋め込むことは、送信されるビデオコンテンツのデータサイズを実質的に増加させる可能性がある。その上、すべての受信デバイスが、ビデオコンテンツに埋め込まれたすべての変更を、正しくデコードし、処理し、そして表示することができるように構成されているとは限らない。従来のシステムは、改善されたユーザ体験を提供するそのような制限を克服する拡張から利益を得ることができる。
方法及び装置の様々な態様が本開示の全体にわたって説明される。以下の説明は、様々な非制限的な実例を提供し、本開示の範囲を制限する意図ではない。ある態様において、ビデオコンテンツを受信し、メタデータフィールドの階層的順序を含むメタデータを受信し、メタデータフィールドの少なくとも1つと関連する設定に従ってビデオコンテンツの少なくとも一部に拡張操作を実行することを含む方法を、本開示は提供する。別の態様において、メモリとメモリに通信可能に接続された少なくとも1つのプロセッサを含む装置を、本開示は提供する。ビデオコンテンツを受信し、メタデータフィールドの階層的順序を含むメタデータを受信し、メタデータフィールドの少なくとも1つに関連した設定に従って、ビデオコンテンツの少なくとも一部分に拡張操作を実行するように、少なくとも1つのプロセッサは構成されている。
さらに別の態様において、本開示は、ビデオコンテンツを送信し、メタデータフィールドの階層的順序を含むメタデータを送信することを含む方法を提供し、拡張操作は、メタデータフィールドの少なくとも1つと関連する設定に従ってビデオコンテンツの少なくとも一部で操作可能である。さらなる態様において、本開示は、メモリ及びメモリと通信可能に接続された少なくとも1つのプロセッサを含む装置を提供する。少なくとも1つのプロセッサは、ビデオコンテンツを送信し、メタデータフィールドの階層的順序を含むメタデータを送信するように構成され、拡張操作は、メタデータフィールドの少なくとも1つに関連する設定に従ってビデオコンテンツの少なくとも一部で操作可能である。
前述のものは、ここでより詳細に説明される様々な構成要件の単なる概要に過ぎない。追加の構成要件もここで説明される。ここで説明される実施形態は、ここで明示的に説明されないとしても、任意のコンビネーション又はサブコンビネーションとして実装することができる。本開示のこれらの及び別の態様は、以下の詳細な説明を検討することによりさらに完全に理解される。添付図面と共に本開示の特定の実例としての実施形態の以下の説明を検討することにより、本開示の別の態様、構成要件、及び実施形態は、当業者に取って明白となる。
本開示のいくつかの態様によるサーバと通信するデバイスの実例を説明する図である。 本開示のいくつかの態様によるデータの流れの実例を説明する図である。 本開示のいくつかの態様によるメタデータフィールドの実例を説明する図である。 本開示のいくつかの態様によるいくつかの拡張操作に関連するビデオコンテンツの一部の実例を説明する図である。 本開示のいくつかの態様によるデバイスによって実行される方法及び/又はプロセスの実例を説明するフローチャートである。 本開示のいくつかの態様によるデバイスによって実行される方法及び/又はプロセスの実例を説明するフローチャートである。 本開示のいくつかの態様によるデバイスによって実行される方法及び/又はプロセスの実例を説明するフローチャートである。 本開示のいくつかの態様によるサーバによって実行される方法及び/又はプロセスの実例を説明するフローチャートである。 本開示のいくつかの態様によるデバイスのハードウェア実装の実例を説明する図である。 本開示のいくつかの態様によるサーバのハードウェア実装の実例を説明する図である。
添付図面と関連して以下で説明する詳細な説明は、様々な構成の説明として意図し、実施することができるここで説明した概念の構成のみを表すことを意図していない。詳細な説明は、様々な概念の完全な理解を提供することを目的とした特定の詳細を含む。しかしながら、これらの特定の詳細が無くてもこれらの概念を実施できることが、当業者に明らかになる。場合によっては、既知の構造やコンポーネントが、そのような概念を分かりにくくすることを避けるために、ブロック図において示される。
図1は、本開示のいくつかの態様によるサーバ102と通信するデバイス110、114、118、122の実例を説明する図100である。説明の役に立つ目的で、デバイス110は、スマートフォンでも良く、別のデバイス114は、デスクトップコンピュータで良く、さらに別のデバイス118は、ラップトップコンピュータでも良く、及びさらなるデバイス122はセットトップボックスでも良い。デバイス110、114、118、122の各々は、それぞれ通信可能にディスプレイ112、116、120、124に接続されても良い。ディスプレイ112、116、120、124は、様々な情報を表示するように構成することができる。図1で説明した非制限的な実例は、4つのデバイス110、114、118、122を示しているが、当業者であれば、本開示の範囲を逸脱することなくいくつものデバイスを実装することができることも理解できる。
サーバ102は、デバイス110、114、118、122と関連してローカルに(例えば、同じネットワーク内及び/又は同じ物理的場所内)又はリモートに(例えば、異なるネットワーク内及び/又は異なる物理的場所内)に設置できる。例えば、サーバ102は、インターネットベース(例えば「クラウド」ベースの)コンピューティング環境104に関連することができる。デバイス110、114、118、122とサーバ102の間のコミュニケーションは、有線接続及び/又はワイヤレス接続を経由して実行することができる。そのような通信は、様々なタイプの技術を使って実行することができる。当業者は、様々なタイプの通信技術が本開示の範囲を逸脱することなく使用できることを理解できる。たとえ図1に説明されていなくても、本開示の範囲を逸脱することなく、そのような通信は、様々な他のコンピュータ、サーバ、ゲートウェイ、ルーター、及び他のハードウェアデバイスによって促進することができる。
図2は、本開示のいくつかの態様によるいくつかのデータの流れの実例を説明する図200である。上述のサーバ102は、ビデオコンテンツソース204及びメタデータソース208を含むことができる。ビデオコンテンツソース204は、ビデオコンテンツを保存するように構成することができる。ここで使用される「ビデオコンテンツ(video content)」という用語は、ビデオ、ビデオストリーム、ビデオクリップ、動画、映画、及び/又は他の適切なタイプのメディアとして当業者に知られている特徴を有する任意のデータを指すことができる。ビデオコンテンツは、ジャンル、様々なシーン、様々な手段、様々な被写体、様々な特殊属性、及び他の多くの特徴を含むことができ、それらは、以下でさらに詳細に説明される。ここで使用される「メタデータ(metadata)」という用語は、他のデータに関する情報又はさらなる態様を提供するデータを指すことができる。様々なタイプのメタデータが存在し、それらは、本開示の範囲内にある。例えば、メタデータは、構造的データ(structural metadata)(データ構造のデザイン及び仕様に関連する)、記述的メタデータ(descriptive metadata)(アプリケーションデータ又はデータコンテンツの個々のインスタンスに関連する)、及び/又はメタデータの任意の他の適切なタイプも含むことができる。メタデータは、本開示の範囲を逸脱することなく情報の様々なタイプを提供するように構成することができる。例えば、メタデータは、ビデオコンテンツの様々な態様に関連する情報を提供するように構成することができる。ビデオコンテンツのそのような態様は、ジャンル、主題、シーン、被写体、特殊属性、及びビデオコンテンツの様々な他の態様を含むことができる。メタデータに含まれる情報は、本開示の範囲から逸脱することなく、様々な構成で配置することができる。例えば、情報は、以下でより詳細に説明されるように、メタデータフィールドの階層的順序で構成することができる。
サーバ102は、ビデオコンテンツ206をビデオコンテンツソース204からデバイス218のプロセッサ220へ送信することができる。図2を参照して説明されるデバイス218は、本開示の範囲から逸脱することなく、図1を参照して上述されたデバイス110、114、118、122と同じ又は異なることができることを当業者は理解できる。いくつかの構成において、サーバ102は、メタデータソース208からデバイス218のプロセッサ220にメタデータ210送信することもできる。いくつかの他の構成において、メタデータは、1つ以上の他のサーバからプロセッサ220に送信することができる。例えば、1つ以上の他のサーバ212は、これらのそれぞれのメタデータソース214からデバイス218のプロセッサ220へメタデータ216を送信することができる。メタデータは、本開示の範囲から逸脱することなくいくつかの実施形態において、プロセッサ220に送信することができる。例えば、メタデータは、ブロードキャストストリームとして、ネットワーキングデバイスを介して利用可能なリソースから暗号化データ又は暗号化ファイル及びそれらの適切な変形として、ビデオ情報、パケットヘッダ、パケットペイロード、パケットのフィールド、ビデオ/オーディオ/メタデータのインターリーブされたパケットの部分、ビデオストリームから分離されたデータストリーム、記憶媒体中の一部の領域を送信するために使用されるトランスポートパケット中で送信することができる。
プロセッサ220は、ビデオプロセッサ、ビデオデコーダ、又は処理システムの任意の他の適切なタイプでも良い。プロセッサ220は、本開示の範囲を逸脱することなく、様々な操作を実行することができる。いくつかの構成において、プロセッサ220は、ビデオコンテンツ206及びメタデータ210、216を受信し、ビデオコンテンツ206の少なくとも一部に様々な拡張操作(EO:Enhancement Operations)を実行することができる。そのようなEOは、メタデータ210、216の一部と関連する設定に従って実行することができる。例えば、プロセッサ220は、少なくとも1つのメタデータフィールドに関連する設定に従って、ビデオコンテンツ206の少なくとも一部にEOを実行することができる。メタデータの各特定のフィールドに対してプロセッサ220によって実行されるEOを示す設定は、テーブル、又はメタデータフィールドをEOにマッピングする任意の他の適切な手段に含めることができる。そのようなテーブルは、デバイス218のメモリコンポーネントに保存され、プロセッサ220中に事前構成又は事前定義され、別のソースからデバイス218へ送信され、及び/又はインターネット又は他の通信ネットワーク経由で別のデバイスから読み出されることができる。
EOは、ビデオコンテンツ206の一部の1つ以上の視覚的特徴(visual characteristics)を変更する操作を含むことができる。例えば、様々なEOは、ビデオコンテンツ206の任意の一部の1つ以上の下記の視覚的特徴を変更する:色、鮮明さ、ブロッキング/デブロッキング、詳細な拡張、テクスチャ、輝度、フィルム粒子追加(film grain addition)、モスキートノイズリダクション(mosquito noise reduction)、動き補正(motion compensation)、アップスケーリング(up-scaling)、ダウンスケーリング(down-scaling)、フレームレート、ルミナンス、クロミナンス、ブロックサイズ、ビットデプス(深度)(bit depth)、モーションベクタ、ノイズリダクションパラメータ、動き推定、量子化レベル、ハイダイナミックレンジの色情報、及びビデオコンテンツの他の適切な視覚的特徴。EOの様々な非制限的な実例がここに提供されるが、このような実例は、本開示の範囲を制限することはなく、そして、EOの追加の及び代替の実施形態が存在し、それらは、本開示の範囲を逸脱しないと当業者は理解できる。いくつかの構成において、プロセッサ220は、受信したビデオコンテンツの解析に応答して、自動的にそのようなEOを実行することができる。いくつかの他の構成において、ユーザによって提供されることがある1つ以上の外部コマンド及び/又は1つ以上の事前設定基準に応答して、プロセッサ220は、そのようなEOを実行することができる。
デバイス218のプロセッサ220によって、EOが実行された後で、拡張されたビデオコンテンツは、ユーザへの表示のためにプロセッサ220から送信することができる。いくつかの構成において、プロセッサ220は、拡張されたビデオコンテンツ222を、デバイス218に統合されたディスプレイのような内部ディスプレイ224に送信することができる。例えば、図1を参照して、拡張されたビデオコンテンツは、デバイス110のディスプレイ112上に表示することができる。他のいくつかの構成において、拡張されたビデオコンテンツ226は、プロセッサ220から、デバイス218に通信可能に接続されたディスプレイのような外部ディスプレイ228へ送信することができる。例えば、図1を参照して、拡張されたビデオコンテンツは、デバイス122と通信可能に接続されたディスプレイ124上に表示することができる。
図2で説明し、本開示のいたるところで説明するように、EOはサーバ102においてよりむしろデバイス218において実行される。本開示のそのような態様は、従来のシステムと比較して、いくつかの利点を提供する。従来のシステムおいて、表示されたビデオコンテンツに対する変更は、ビデオコンテンツを送信するサーバにおいて実行することができた。そのようなサーバは、ビデオコンテンツにそのような修正を埋め込むことができ、その次に、受信するデバイスに変更されたビデオコンテンツを送信することができる。しかしながら、ビデオコンテンツにそのような変更を埋め込むことは、送信されるビデオコンテンツのデータサイズを実質的に増加させることがある。言い換えれば、従来のシステムは、変更されたビデオコンテンツを送信するための増加した送信能力(例えば、バンド幅)を要求することがある。その上、すべての受信するデバイスが、ビデオコンテンツに埋め込まれたすべての変更を正しくデコードし、処理し、そして表示することができるとは限らない。このような状況において、ユーザは、変更されたビデオコンテンツを体験することができないので、ビデオコンテンツに埋め込まれた変更は、ユーザ体験を改善しない。
本開示は、従来のシステムと比較していくつかの利点を提供する。第1に、本開示のいくつかの態様によると、ビデオコンテンツは、サーバ102よりもデバイス218において拡張され、このことは、従来の技術と比較して、送信されるビデオコンテンツのデータサイズが実質的に増加することを要求しない。そのため、メタデータは、従来のシステムと比較して、送信能力(例えば、バンド幅)において実質的な増強を要求することはない。第2に、本開示のいくつかの態様によると、ビデオコンテンツは、デバイス218において互換性があり、且つサポートされた拡張操作に従って拡張される。その結果、ビデオコンテンツに対する拡張は、そのような特定のデバイス218に適合している。第3に、メタデータ210、216に含まれるメタデータフィールドは、以下でより詳細に説明されるように、表示のある態様(例えば、ディスプレイ技術など)に従って、様々な階層的順序で配置することができる。上述のものは、従来のシステムと比較した本開示の利点の制限のないいくつかの実例であり、当業者は、様々な他の利点も容易に理解できる。
図3は、メタデータフィールド(MFs)の実例を説明する図300である。例えば、MFは、MF301、MFN+1302、MFN+2303、MFN+3304、MFN+4305及びMFN+5306を含むことができる。図3を参照してここで説明した実例は、ある数のMFを示しているが(例えば、6つのMF)、当業者は、メタデータ(上述のように)は、本開示の範囲を逸脱することなく任意の数のMFも含むことができることを理解できる。各MFは、ビデオコンテンツに対応する特定の特徴に関連することができる。MF301は、ビデオコンテンツに対応する特定のジャンルと関連することができる。一般に、「ジャンル(genre)」は、ビデオコンテンツの全体の特徴づけ(characterization)を指す。ジャンルの制限のない実例は、アドベンチャ、アクション、ロマンス、コメディ、ホラー、SF、幻想的作品、ドキュメンタリ、ドラマなどを含む。MFN+1302は、ビデオコンテンツに対応する特定の主題と関連することができる。一般に「主題(subject:テーマ)」は、ビデオコンテンツが関連する題材の特徴づけを指す。主題の制限のない実例は、戦争、海洋学、古代文明、航空学などを含む。MFN+2303は、ビデオコンテンツに対応する特定のシーンに関連することができる。一般に「シーン(scene:場面)」は、ビデオコンテンツの特定の部分の特徴づけを指す。シーンは、シーンが表示される間の時間セグメントによって表現することができる。シーンは、特定の期間(例えば、開始時間と終了時間)によって境界を定めることができる。ビデオコンテンツは、境界が定められた期間を示す時間コードを含むことができる。MFN+3304は、ビデオコンテンツに対応する特定の被写体に関連することができる。一般に、「被写体(object:物体、オブジェクト)」は、ビデオコンテンツに含まれる特定のアイテム(item:項目)を指す。被写体は、表示されたコンテンツの3点以上によって境界を定めることができる。被写体は、本開示の範囲から逸脱することなく形状において対称又は不規則であり得る。MFN+4305は、ビデオコンテンツに対応する特殊属性(special attribute)に関連することができる。特殊属性の非制限的な実例は、ペアレンタルコントロール、ビデオコンテンツの年齢に適しているかの情報、クローズドキャプション(字幕)などを含むことができる。MFN+5306は、ビデオコンテンツのいくつかの他の属性(attributes:アトリビュート)とも関連することができる。そのような他の属性は、ビデオコンテンツの任意の態様に対応する任意のデータを含むことができる。
階層的順序は、2つ以上のMF中に存在することができる。一般に、「階層的順序(hierarchical order)」及び/又は「階層(化)(hierarchy)」は、列(sequence)、構成(arrangement)、優先順位(priority:プライオリティ)、組織(organization)、グループ化(grouping)、ランキング(ranking)及び/又はメタデータのMF301〜306の構成を指すことができる。例えば、MF301は、Xという階層値を持つことができ、MFN+1302は、X+1という階層値を持つことができ、MFN+2303はX+2という階層値を持つことができ、MFN+3304は、X+3という階層値を持つことができ、MFN+4305は、X+4という階層値を持つことができ、MFN+5306は、X+5という階層値を持つことができる。言い換えれば、MFN+5306は、MFN+4305より階層において高く、MFN+4305は、MFN+3304より階層において高く、MFN+3304はMFN+2303より階層において高く、MFN+2303はMFN+1302より階層において高く、MFN+1302は、MF301より階層において高くあり得る。図3に説明された階層的順序は、非制限的実例であり、MF301〜306の階層的順序に対する代替の構成は本開示の範囲内にあることを当業者は理解できる。
いくつかの構成において、MF301〜306の階層的順序は、ビデオコンテンツを表示するために使用されるディスプレイ技術のタイプに対応することができる。例えば、図1を参照して、セットトップボックス122のディスプレイ124は、メタデータがスマートフォン110によって受信されたときのMF301〜306の階層的順序と比較して、メタデータがセットトップボックス122によって受信されたときは、表示が異なるよりも、異なるディスプレイ技術を有することができる。
いくつかの構成において、MF301〜306の階層的順序は、ビデオコンテンツを表示するのに使用されるディスプレイの製造業者に関連する情報に対応することもできる。例えば、図1を参照して、デスクトップコンピュータ114のディスプレイ116は、ラップトップコンピュータ118のディスプレイ120の製造業者と異なる製造業者であることもある。そのような場合、デスクトップコンピュータ114のディスプレイ116の製造業者に対応する情報は、ラップトップコンピュータ118のディスプレイ120の製造業者に対応する情報と異なり得る。その結果、ラップトップコンピュータ118によってメタデータが受信されたときのMF301〜306の階層的順序と比較して、デスクトップコンピュータ114によってメタデータが受信されたときでは、MF301〜306の階層的順序が異なり得る。
いくつかの構成において、MF301〜306の階層的順序は、ビデオコンテンツのカラリスト(colorist)に関連する情報に対応することができる。カラリストは、ビデオコンテンツの創作に従事し、ビデオコンテンツの任意の部分に色を追加することができる、個人、会社、組織、コンピュータソフトウェア、又は他のエンティティを指す。例えば、第1のカラリストは、ビデオコンテンツの第1のセグメントの創作に従事し、第2のカラリスト(第1のカラリストとは異なる)は、ビデオコンテンツの第2のセグメント(第1のセグメントとは異なる)の創作に従事することができる。その結果、MF301〜306の階層的順序は、第2のセグメントに対するMF301〜306の階層的順序と比較して第1のセグメントに対して、異なり得る。
図4は、いくつかのEOに関するビデオコンテンツの一部の実例を説明する図400である。MF301〜306がプロセッサ220によって受信されたとき、プロセッサ220は、MF301〜306に含まれる情報を読み取り、MF301〜306の少なくとも1つに関連する設定に従って、ビデオコンテンツの任意の一部に1つ以上のEOを実行することができる。例えば、プロセッサ220は、MF(ジャンル)301が「アクション」ジャンルを示すことを検出できる。プロセッサ220は、「アクション」というジャンルを持つビデオコンテンツに対して「鮮明さ(シャープネス)を増加する(increase sharpness)」のEOを実行するように構成することができる。その結果、「アクション」というジャンルを示すMF(ジャンル)301を読み取った後、プロセッサ220は、メタデータフィールド(例えば、MF(ジャンル)301)に関連する設定に従って、ビデオコンテンツに対して「鮮明さを増加する」のEOを実行することができる。
プロセッサ220は、他のMF302〜306の1つ以上に含まれる情報も読み取り、それらMF302〜306に関連するそれぞれの設定に従って、ビデオコンテンツの任意の一部にいくつかのEOを実行することができる。例えば、MFN+1(主題)302は、「戦争(war)」という主題を示すことができる。プロセッサ220は、「戦争」の主題を持つビデオコンテンツに対して「輝度(ブライトネス)を増加する(increase brightness)」のEOを実行するように構成することができる。その結果、「戦争」の主題を示すMFN+1(主題)302を読み取った後、メタデータフィールド(例えば、MFN+1(主題)302)に関連する設定に従って、ビデオコンテンツに対して「輝度を増加する」のEOをプロセッサ220は実行することができる。
状況次第で、2つ以上のMF301〜306に含まれる情報は、お互いに矛盾しない。すなわち、状況次第で、いくつかのMF301〜306に関連する設定に従って実行されたEOは、相互に排他的ではない。実例として、MFN+2(シーン)303は、時刻Tと時刻TX+Yの間で境界を定められたシーンと関連する情報を含むことができる。この情報の読み取りに応じて、プロセッサ220は、時刻Tと時刻TX+Yとの間の期間の間、「コントラストを増加する(increase contrast)」のEOを実行するように構成することができる。「コントラストを増加する」は、上述の他のいずれのEO(例えば、「鮮明さを増加する」、「輝度を増加する」)とも矛盾しないので、その結果、プロセッサ220は、メタデータフィールド(例えば、MFN+2(シーン)303)に関連する設定に従って、時刻Tと時刻TX+Yの間の期間の間、「コントラストを増加する」のEOの実行を進めることができる。
しかしながら、いくつかの他の状況においては、2つ以上のMF301〜306に含まれる情報は、相互に矛盾し得る。すなわち、状況次第で、いくつかのMF301〜306に関連する設定に従って実行されたEOは、相互に排他的である。実例として、MFN+3(被写体)304は、3つ以上の点で境界が定められた被写体に関連する情報を含むことができる。図4に説明されるように、そのような被写体の実例は、トラック402を取り囲む4つの点404〜407で境界が定められたトラック402であり得る。いくつかの構成において、プロセッサ220は、被写体認識(object-recognition)を実行するように構成することができ、それによって、ビデオコンテンツにおけるそのような被写体を特定することを容易にすることができる。MFN+3(被写体)304に含まれる情報の読み取りに応じて、プロセッサ220は、これらの点によって境界が定められた被写体(例えば、トラック402)に対して、「コントラストを減少する(reduce contrast)」のEOを実行することを検討することができる。「コントラストを減少する」は、少なくとも1つの上述のEO(例えば、「コントラストを増加する」)と矛盾するので、その結果、プロセッサ220は、EOのいずれを実行するかを決定しなければならない。そのような状況において、第2のメタデータフィールド(例えば、X+2という階層値を持つ、MFN+2(シーン)303)と比較して階層的順序において、高い第1のメタデータフィールド(例えば、X+3という階層値を持つ、MFN+3(被写体)304)を、プロセッサ220は決定する。その結果、第2のメタデータフィールド(例えば、MFN+2(シーン)303)に関連する設定に従って「コントラストを増加する」のEOよりむしろ、第1のメタデータフィールド視覚的特徴(例えば、MFN+3(被写体)304)に関連する設定に従って、ビデオコンテンツの対応する部分(例えば、トラック402である被写体)に「コントラストを減少する」のEOを、プロセッサ220は実行する。
上述の非制限的な実例は、各MF301〜306に関連して単一の(single)EOを実行するプロセッサ220について説明した。しかしながら、プロセッサ220は、本開示の範囲から逸脱することなくMF301〜306のいずれかに関連して2つ以上のEOを実行することができる。例えば、いくつかの構成において、MFN+3(被写体)304に含まれる情報の受信に応じて、「コントラストを減少する」の実行と同様に「輝度を増加する」を実行するように、プロセッサ220は構成することができる。上述のものは、相互に比較して同じ優先順位を持つ2つのEOの実例である。しかしながら、いくつかの他の実例において、2つ以上のEOは、相互に比較して異なる優先順位を持つことができる。そのような実例において、プロセッサ220は、メタデータフィールド(例えば、MFN+3(被写体)304)が2つ以上のEOに関連しているか決定し、そして、いずれかのEOを実行する前に、2つの(又はそれ以上の)EOの優先順位に基づいて2つの(又はそれ以上の)EOの少なくとも1つを選択する。例えば、「輝度を増加する」のEOが、「コントラストを減少する」のEOより高い優先順位を持つ場合、その結果、プロセッサ220は、「コントラストを減少する」のEOを実行する前に、「輝度を増加する」のEOを最初に実行することを選択できる。
図5は、本開示のいくつかの態様による方法及び/又はプロセスの実例を説明する図500である。そのような方法及び/又はプロセスは、デバイス(例えば、上述のデバイス218)によって実行することができる。ブロック502において、デバイスは、ビデオコンテンツを受信する。ここで使われるように「ビデオコンテンツ(video content)」という用語は、ビデオ、ビデオストリーム、ビデオクリップ、動画、映画、及び他の適切なタイプのメディアとして当業者に知られている特徴を有する任意のデータを指すことができる。上述のようなジャンル、様々なシーン、様々は主題、様々な被写体、様々な特殊属性、および多くの他の特徴などの様々な特徴を、ビデオコンテンツは含むことができる。
ブロック504において、メタデータフィールドの階層的順序を備えたメタデータをデバイスが受信する。ここで使用される「メタデータ(metadata)」という用語は、他のデータに関する情報又は他のデータのさらなる態様を提供する任意のデータを指すことができる。例えば、メタデータは、ビデオコンテンツの様々な態様に関連する情報を提供するように構成することができる。ビデオコンテンツのそのような態様は、より詳細が以下で説明されるように、ジャンル、主題、シーン、被写体、特殊属性、及び様々な他の態様を含むことができる。メタデータに含まれる情報は、本開示の範囲を逸脱することなく、様々な構成にアレンジすることができる。
ブロック506において、デバイスは、メタデータフィールドの少なくとも1つに関連する設定に従ってビデオコンテンツの少なくとも一部にEOを実行する。階層的順序は、2つ以上のMFの中に存在し得る。一般に、用語、「階層的順序」及び/又は「階層」は、列、構成、優先順位、組織、グループ化、ランキング、及び/又はメタデータのMF301〜306の構成を指すことができる。例えば、図3を参照して、MF(ジャンル)301は、Xという階層値を持つことができ、MFN+1(主題)302は、X+1という階層値を持つことができ、MFN+2(シーン)303はX+2という階層値を持つことができ、MFN+3(被写体)304は、X+3という階層値を持つことができ、MFN+4(特殊)305は、X+4という階層値を持つことができ、MFN+5(その他)306は、X+5という階層値を持つことができる。MF301〜306がプロセッサ220によって受信されたとき、プロセッサ220は、MF301〜306に含まれる情報を読み取り、MF301〜306の少なくとも1つに関連する設定に従ってビデオコンテンツの任意の一部に1つ以上のEOを実行することができる。例えば、プロセッサ220は、MF301が「アクション」ジャンルを示していることを検出することができる。プロセッサ220は、「アクション」のジャンルを持つビデオコンテンツに対して「鮮明さを増加する」のEOを実行するように構成することができる。その結果、「アクション」のジャンルを示すMF301を読み取った後に、プロセッサ220は、メタデータフィールド(例えば、MF(ジャンル)301)に関連する設定に従ってビデオコンテンツに対して「鮮明さを増加する」のEOを実行することができる。
図6は、本開示の様々な態様による様々な方法及び/又はプロセスの実例を説明する図600である。そのような方法及び/又はプロセスは、デバイス(例えば、上述のデバイス218)によって実行することができる。ブロック602において、デバイスはビデオコンテンツを受信する。ブロック604において、デバイスは、メタデータフィールドの階層的順序を備えたメタデータを受信する。ブロック602、604に関連していくつかの態様が上述され、従って、それらは繰り返さない。いくつかの構成において、ブロック606において、第2のメタデータフィールドと比較して階層的順序において第1のメタデータフィールドが高いことをデバイスは決定する。例えば、図3を参照して、第2のメタデータフィールド(例えば、X+2の階層値を持つ、MFN+2(シーン)303)と比較して、階層的順序において第1のメタデータフィールド(例えば、X+3の階層値を持つMFN+3(被写体)304)が高いことを、デバイスは決定することができる。
ブロック608において、第2のメタデータフィールドに関連した設定よりもむしろ第1のメタデータフィールドに関連した設定に従って、ビデオコンテンツの一部にEOをデバイスが実行することができる。再び図3を参照して、第2のメタデータフィールド(例えば、MFN+2(シーン)303)に関連する設定に従った「コントラストを増加する」のEOよりむしろ第1のメタデータフィールド(例えば、MFN+3(被写体)304)に関連する設定に従ってビデオコンテンツの対応する一部(例えば、トラック402である被写体)に「コントラストを減少する」のEOをデバイスが実行することができる。
図7は、本開示の様々な態様による様々な方法及び/又はプロセスの実例を説明する図700である。そのような方法及び/又はプロセスは、デバイス(例えば、上述のデバイス218)によって実行することができる。ブロック702において、デバイスは、ビデオコンテンツを受信する。ブロック704において、デバイスは、メタデータフィールドの階層的順序を備えたメタデータを受信する。ブロック702、704に関連する様々な態様が、上述され、従って、繰り返さない。いくつかの構成において、メタデータフィールドは、2つ以上のEOに関連することができ、これらの2つ以上のEOは、互いに関連する異なる優先順位を有することができる。例えば、特定のメタデータフィールドは、「輝度を増加する」のEO及び「コントラストを減少する」のEOに関連することができる。「輝度を増加する」のEOが「コントラストを減少する」のEOの優先順位より高い優先順位を有する場合、その結果、「コントラストを減少する」のEOを実行する前に、「輝度を増加する」のEOを実行するようにデバイスは選択する。その結果、ブロック708において、メタデータフィールドに関連する設定に従って、ビデオコンテンツに「輝度を増加する」のEOを、デバイスは実行する。
図8は、本開示のいくつかの態様による様々な方法及び/又はプロセスの実例を示す図800である。そのような方法及び/プロセスは、サーバ(例えば、上述のデバイス218)によって実行することができる。ブロック802において、サーバはビデオコンテンツを送信することができる。ブロック804において、サーバは、メタデータフィールドの階層的順序を備えたメタデータを送信することができる。EOは、メタデータフィールドの少なくとも1つに関連した設定に従ってビデオコンテンツの少なくとも一部に操作することができる。ブロック802、804に関連する様々な態様が、さらに上述されているので、繰り返さない。
図5〜図8を参照して説明された方法及び/又はプロセスは、説明の目的で提供され、本開示の範囲を制限することを意図していない。図5〜図8を参照して説明された方法及び/又はプロセスは、本開示の範囲から逸脱せずその中に説明されたものから異なる順番に実行することができる。その上、図5〜図8を参照して説明したいくつかの又はすべての方法及び/又はプロセスは、本開示の範囲を逸脱することなく単独で及び/又は一緒に実行することができる。説明した方法における、ステップの特定の順序又は階層は、実例としてのプロセスの説明であることを理解されたい。設計上の選択に基づいて、方法におけるステップの特定の順序又は階層は、再配置することができる。添付する方法クレームは、サンプルの順序における様々なステップの要素を表し、明確にここで説明した場合を除いて、提示した特定の順序又は階層を制限するつもりではない。
図9は、デバイス218のハードウェア実装の実例を説明する図900である。デバイス218は、トランシーバ912を含むことができる。トランシーバ912は、別の装置と通信し、データを受信し及び/又はデータを送信するように構成することができる。トランシーバ912は、サーバ102のような他の装置及び/又はでデバイスと通信する手段を提供する。トランシーバ912は、様々なタイプの技術を使用してそのような通信を実行するように構成することができる。そのような通信を実行する多くのタイプの技術が本開示の範囲から逸脱することなく使用できることを当業者であれば理解できる。デバイス218は、メモリ904、1つ以上のプロセッサ220、コンピュータ読み取り可能媒体906、ディスプレイ112、及びバスインタフェース910も含むことができる。バスインタフェース910は、バス908とトランシーバ912の間のインタフェースを備えることができる。メモリ904、1つ以上のプロセッサ220、コンピュータ読み取り可能媒体906、ディスプレイ112、及びバスインタフェース910は、バス908を経由して一緒に接続することができる。バス908は、タイミングソース、周辺装置、電圧調整器、及び/又は電源管理回路のような様々な他の回路とリンクすることもできる。プロセッサ220は、トランシーバ912及び/又はメモリ904と通信可能に接続することができる。
ここで説明された機能、方法、プロセス、特徴及び/又は態様の任意の1つ以上を実行するように構成され、実行する手段を提供する様々な他の回路を、プロセッサ220が含むことができることを、当業者であれば理解できる。いくつかの構成において、プロセッサ220は、メタデータ回路/モジュール914を含むことができる。メタデータフィールドの階層的順序を備えたメタデータを受信し、メタデータ及び/又はメタデータフィールドに関してここに説明された機能、方法、プロセス、特徴及び/又は態様の1つ以上を実行するように構成された様々な回路、ソフトウェアモジュール、及び/又はハードウェアモジュールを、メタデータ回路/モジュール914は含む。いくつかの構成において、プロセッサ220は、拡張操作回路/モジュール916を含むことができる。少なくとも1つのメタデータフィールドに関連する設定に従ってビデオコンテンツの少なくとも一部に少なくとも1つの拡張操作を実行するように構成された様々な回路、ソフトウェアモジュール、及び/又はハードウェアモジュールを、拡張操作回路/モジュール916は含むことができる。
コンピュータ読み取り可能媒体906は、様々な命令を含むことができる。ここで説明された様々な機能を実行し及び/又は様々な態様を可能にするように構成されたコンピュータ実行可能コードを、命令は含むことができる。コンピュータ実行可能コードは、デバイス218の様々なハードウェアコンポーネント(例えば、プロセッサ220)によって実行することができる。命令は、様々なソフトウェアプログラム及び/又はソフトウェアモジュールの一部であり得る。上述の機能、方法、プロセス、特徴及び/又は態様の任意の1つ以上を実行するように構成されたコンピュータ実行可能コードを含む様々な命令もコンピュータ読み取り可能媒体906が含むことができることを当業者であれば理解できる。メモリ904は、様々なメモリモジュールを含むことができる。メモリモジュールは、保存し、そこからプロセッサ220によって、様々な値及び/又は情報を読み取るように構成することができる。メモリモジュールは、コンピュータ読み取り可能媒体906に含まれるコンピュータ実行可能コードの実行に応じて、様々な値及び/又は情報を保存し、そこから読み取るように構成することもできる。上述の任意の特徴、機能、方法、プロセス、及び/又は態様に関して、メモリ904は、情報をその中に保存し、そこから情報を読み取るように構成することができることは、当業者であれば理解できる。
デバイス218は、本開示の範囲を逸脱することなく代替の及び/又は追加の要素を含むことができることを、当業者であれば理解できる。本開示の様々な態様によれば、要素又は要素の部分、又は要素の任意の組合せは、1つ以上のプロセッサ220を含む処理システムと実装することができる。マイクロプロセッサ、マイクロコントローラ、デジタルシグナルプロセッサ(DPS)、フィールドプログラマブルゲートアレイ(FPGA)、プログラムマブルロジックデバイス(PLD)、状態機械、ゲートロジック、ディスクリートハードウェア回路、及び本開示の中で説明した様々な機能を実行するように構成された他の適切なハードウェアを、1つ以上のプロセッサ220の実例は含む。ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語、又は他を指すとしても、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行ファイル(executable)、実行スレッド、プロシージャ、機能などを意味すると、ソフトウェアは広く解釈されるべきである。ソフトウェアは、コンピュータ読み取り可能媒体906上に存在し得る。コンピュータ読み取り可能媒体906は、非一時的コンピュータ読み取り可能媒体であり得る。例として、磁気記憶デバイス(例えば、ハードディスク、フロッピーディスク、磁気ストライプ)、光ディスク(例えば、コンパクトディスク(CD)又はデジタル多用途ディスク(DVD))、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、又はキーデバイス)、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、プログラマブルROM(PROM)、消去可能PROM(EPROM)、電気的消去可能PROM(EEPROM)、レジスタ、リムーバブルディスク、及びコンピュータによってアクセス及び読み取り可能なソフトウェア及び/又は命令を保存することができる任意の他の適切な媒体を、非一時的コンピュータ読み取り可能媒体は含む。コンピュータ読み取り可能媒体906は、実例として、搬送波、送信線、及びコンピュータによってアクセス及び読み取り可能なソフトウェア及び/又は命令を送信する他の適切な媒体を含むこともできる。コンピュータ読み取り可能媒体906は、コンピュータプログラム製品に組み込むことができる。実例として制限なく、コンピュータプログラム製品は、パッケージマテリアル中のコンピュータ読み取り可能媒体を含むことができる。特定のアプリケーション及び全体のシステムに課された全体の設計上の制約に依存して、本開示を通して示された説明された機能性を最適に実装するかを、当業者は認識することができる。
図10は、サーバ102のハードウェア実装の実例を説明する図1000である。サーバ102は、トランシーバ1012を含むことができる。トランシーバ1012は、他の装置と通信して、データを受信し、及び/又はデータを送信するように構成することができる。トランシーバ1012は、デバイス218などの他の装置及び/又はデバイスと通信する手段を備える。トランシーバ1012は、様々なタイプの技術を使用してそのような通信を実行するように構成することができる。そのような通信を実行する多くのタイプの技術が本開示の範囲から逸脱することなく使用できることを、当業者は理解することができる。サーバ102は、メモリ1004、1つ以上のプロセッサ1002、コンピュータ読み取り可能媒体1006、及びバスインタフェース1010も含むことができる。バスインタフェース1010は、バス1008とトランシーバ1012の間のインタフェースを提供することができる。メモリ1004、1つ以上のプロセッサ1002、コンピュータ読み取り可能媒体1006、及びバスインタフェース1010は、バス1008を経由して一緒に接続することができる。バス1008は、タイミングソース、周辺機器、電圧調整器、及び/又は電源管理回路などの様々な他の回路とリンクすることができる。プロセッサ1002は、トランシーバ1012及び/又はメモリ1004と通信可能に接続することができる。
ここで説明された機能、方法、プロセス、特徴及び/又は態様の任意の1つ以上を実行するように構成され、実行する手段を提供する様々な他の回路を、プロセッサ1002が含むことができることを、当業者は理解できる。いくつかの構成において、プロセッサ1002は、メタデータ回路/モジュール1014を含むことができる。メタデータ回路/モジュール1014は、メタデータフィールドの階層的順序を備えるメタデータを生成及び/又は送信するように構成された様々な回路、ソフトウェアモジュール、及び/又はハードウェアモジュールを含むことができる。メタデータ及び/又はメタデータフィールドに関してここで説明した、機能、方法、プロセス、特徴及び/又は態様の1つ以上を実行するように構成された様々な回路、ソフトウェアモジュール、及び/又はハードウェアモジュールを、メタデータ回路/モジュール1014は含むことができる。
コンピュータ読み取り可能媒体1006は、様々な命令を含むことができる。ここで説明した様々な機能を実行し、及び/又は様々な態様を可能にするように構成されたコンピュータ実行可能コードを、命令は含むことができる。コンピュータ実行可能コードは、サーバ102の様々なハードウェアコンポーネント(例えば、プロセッサ1002)によって実行することができる。命令は、様々なソフトウェアプログラム及び/又はソフトウェアモジュールの一部であり得る。コンピュータ読み取り可能媒体1006は、ここに説明された機能、方法、プロセス、特徴及び/又は態様の任意の1つ以上を実行するように構成されたコンピュータ実行可能コードを含む様々な命令を含むことができることを、当業者は理解できる。メモリ1004は、様々なメモリモジュールを含むことができる。メモリモジュールは、プロセッサ1002によって様々な値及び/又は情報を保存し、そこから読み出すように構成することができる。メモリモジュールは、コンピュータ読み取り可能媒体1006に含まれるコンピュータ実行可能コードの実行に応じて、様々な値及び/又は情報を保存し、そこから読み出すことができるように構成することもできる。メモリ1004は、ここに説明された特徴、機能、方法、プロセス、及び/又は態様のいずれかに関して、その中に情報を保存し、その中から情報を読み出すように構成することができることを当業者はまた理解できる。
サーバ102は、本開示の範囲から逸脱することなく代替の及び/又は追加の要素を含むことができることを当業者はまた理解できる。本開示のいくつかの態様によれば、要素又は要素の部分、又は要素の組合せは、1つ以上のプロセッサ1002を含む処理システムと実装することができる。1つ以上のプロセッサ1002の実例は、マイクロプロセッサ、マイクロコントローラ、DPS、FPGA、PLD、状態機械、ゲートロジック、ディスクリートハードウェア回路、及び本開示の中で説明した様々な機能を実行するように構成された他の適切なハードウェアを含む。ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語、又は他を指すとしても、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行ファイル(executable)、実行スレッド、プロシージャ、機能などを意味すると、ソフトウェアは広く解釈されるべきである。ソフトウェアは、コンピュータ読み取り可能媒体1006上に存在する。コンピュータ読み取り可能媒体1006は、非一時的コンピュータ読み取り可能媒体であり得る。例として、磁気記憶デバイス(例えば、ハードディスク、フロッピーディスク、磁気ストライプ)、光ディスク(例えば、CD又はDVD)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、又はキーデバイス)、RAM、ROM、PROM、EPROM、EEPROM、レジスタ、リムーバブルディスク、及びコンピュータによってアクセス及び読み取り可能なソフトウェア及び/又は命令を保存することができる任意の他の適切な媒体を、非一時的コンピュータ読み取り可能媒体は含む。コンピュータ読み取り可能媒体1006は、実例として、搬送波、送信線、及びコンピュータによってアクセス及び読み取り可能なソフトウェア及び/又は命令を送信する他の適切な媒体を含むこともできる。コンピュータ読み取り可能媒体1006は、コンピュータプログラム製品に組み込むことができる。例として制限なく、コンピュータプログラム製品は、パッケージマテリアル中のコンピュータ読み取り可能媒体を含むことができる。当業者は、特定のアプリケーション及び全体のシステムに課された全体のデザインの制約に依存して、本開示を通して示された説明された機能性を最適に実装するかを認識することができる。
上述の説明は、当業者がここで説明された様々な態様を実施することを可能にする。これらの態様への様々な変更は、当業者にとって容易に明らかであり、ここで定義した一般的な原理は、他の態様に適応することができる。それ故、請求項は、ここで示された態様に限定されることを意図しておらず、文言請求項と一貫性のある全範囲で認められることを意図しており、単一の要素の参照は、特にそのような言明が無い限り、「1つの及びただ1つの(one and only one)」を意味することを意図しておらず、むしろ「1つ以上(one or more)」の意味を意図している。当業者に既知であるか又はその後既知となる本開示を通して説明した様々な態様の要素に対するすべての構造的及び機能的均等物は、特に参照として組み込まれ、請求項によって包含されることを意図する。
上述の説明は、当業者がここで説明された様々な態様を実施することを可能にする。これらの態様への様々な変更は、当業者にとって容易に明らかであり、ここで定義した一般的な原理は、他の態様に適応することができる。それ故、請求項は、ここで示された態様に限定されることを意図しておらず、文言請求項と一貫性のある全範囲で認められることを意図しており、単一の要素の参照は、特にそのような言明が無い限り、「1つの及びただ1つの(one and only one)」を意味することを意図しておらず、むしろ「1つ以上(one or more)」の意味を意図している。当業者に既知であるか又はその後既知となる本開示を通して説明した様々な態様の要素に対するすべての構造的及び機能的均等物は、特に参照として組み込まれ、請求項によって包含されることを意図する。
ここで例としていくつかの付記を記載する。
(付記1)
データ処理方法(500)であって、
ビデオコンテンツを受信すること(502)と、
メタデータフィールドの階層的順序を備えるメタデータを受信すること(504)と、
前記メタデータフィールドの少なくとも1つに関連する設定に従って、前記ビデオコンテンツの少なくとも一部に拡張操作を実行すること(506)と、
を含む、方法。
(付記2)
第2のメタデータフィールドと比較して前記階層的順序において第1のメタデータフィールドが高い位置にあることを決定し(606)、
前記拡張操作を実行することが、前記第2のメタデータフィールドに関連する設定よりも前記第1のメタデータフィールドに関連する設定に従って、前記ビデオコンテンツの前記一部に前記拡張操作を実行すること(608)をさらに含む、付記1に記載の方法(600)。
(付記3)
少なくとも1つのメタデータフィールドは、2つ以上の拡張操作に関連し、
前記ビデオコンテンツの前記一部に対して前記2つ以上の拡張操作の優先順位に基づいて前記2つ以上の拡張操作のうち少なくとも1つを選択すること(706)をさらに含む、付記1に記載の方法(700)。
(付記4)
前記拡張操作は、前記ビデオコンテンツにおける時間コードに基づく時刻において実行される、付記1に記載の方法(500)。
(付記5)
前記拡張操作は、前記ビデオコンテンツにおける被写体の境界が定められた領域に実行される、付記1に記載の方法(500)。
(付記6)
前記拡張操作は、前記ビデオコンテンツの前記一部の1つ以上の視覚的特徴を変更するように構成されたビデオ処理操作を含む、付記1に記載の方法(500)。
(付記7)
前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイ技術のタイプに対応する、付記1に記載の方法(500)。
(付記8)
前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイの製造業者に関連する情報に対応する、付記1に記載の方法(500)。
(付記9)
前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツのカラリストに関連する情報に対応する、付記1に記載の方法(500)。
(付記10)
前記少なくとも1つのメタデータフィールドと関連した前記設定は、前記ビデオコンテンツ及び前記メタデータを受信するデバイスにおいて事前に定義される、付記1に記載の方法(500)。
(付記11)
データ処理装置(218)であって、メモリ(904)と前記メモリ(904)に通信可能に接続された少なくとも1つのプロセッサ(220)を備えるデータ処理装置(218)であって、
前記少なくとも1つのプロセッサが、
ビデオコンテンツを受信し、
メタデータフィールドの階層的順序を備えたメタデータを受信し、
前記メタデータの少なくとも1つに関連する設定に従って、前記ビデオコンテンツの少なくとも一部に拡張操作を実行するように構成された、装置。
(付記12)
前記少なくとも1つのプロセッサ(220)が、
第2のメタデータフィールドと比較して前記階層的順序において第1のメタデータフィールドが高い位置にあることを決定し、
前記拡張操作を実行することが、前記第2のメタデータフィールドに関連する設定よりも前記第1のメタデータフィールドに関連する設定に従って、前記ビデオコンテンツの前記一部に前記拡張操作を実行することをさらに含む、付記11に記載の装置(218)。
(付記13)
少なくとも1つのメタデータフィールドは、2つ以上の拡張操作に関連し、
前記少なくとも1つのプロセッサ(220)は、
前記ビデオコンテンツの前記一部に対して前記2つ以上の拡張操作の優先順位に基づいて、前記2つ以上の拡張操作のうち少なくとも1つを選択する、付記11に記載の装置(218)。
(付記14)
前記拡張操作は、前記ビデオコンテンツにおける時間コードに基づく時刻において実行される、付記11に記載の装置(218)。
(付記15)
前記拡張操作は、前記ビデオコンテンツにおける被写体の境界が定められた領域に実行される、付記11に記載の装置(218)。
(付記16)
前記拡張操作は、前記ビデオコンテンツの前記一部の1つ以上の視覚的特徴を変更するように構成されたビデオ処理操作を含む、付記11に記載の装置(218)。
(付記17)
前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイ技術のタイプに対応する、付記11に記載の装置(218)。
(付記18)
前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイの製造業者に関連する情報に対応する、付記11に記載の装置(218)。
(付記19)
前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツのカラリストに関連する情報に対応する、付記11の装置(218)。
(付記20)
前記少なくとも1つのメタデータフィールドと関連した前記設定は、前記ビデオコンテンツ及び前記メタデータを受信するデバイスにおいて事前に定義される、付記11に記載の装置(218)。

Claims (20)

  1. データ処理方法(500)であって、
    ビデオコンテンツを受信すること(502)と、
    メタデータフィールドの階層的順序を備えるメタデータを受信すること(504)と、
    前記メタデータフィールドの少なくとも1つに関連する設定に従って、前記ビデオコンテンツの少なくとも一部に拡張操作を実行すること(506)と、
    を含む、方法。
  2. 第2のメタデータフィールドと比較して前記階層的順序において第1のメタデータフィールドが高い位置にあることを決定し(606)、
    前記拡張操作を実行することが、前記第2のメタデータフィールドに関連する設定よりも前記第1のメタデータフィールドに関連する設定に従って、前記ビデオコンテンツの前記一部に前記拡張操作を実行すること(608)をさらに含む、請求項1に記載の方法(600)。
  3. 少なくとも1つのメタデータフィールドは、2つ以上の拡張操作に関連し、
    前記ビデオコンテンツの前記一部に対して前記2つ以上の拡張操作の優先順位に基づいて前記2つ以上の拡張操作のうち少なくとも1つを選択すること(706)をさらに含む、請求項1に記載の方法(700)。
  4. 前記拡張操作は、前記ビデオコンテンツにおける時間コードに基づく時刻において実行される、請求項1に記載の方法(500)。
  5. 前記拡張操作は、前記ビデオコンテンツにおける被写体の境界が定められた領域に実行される、請求項1に記載の方法(500)。
  6. 前記拡張操作は、前記ビデオコンテンツの前記一部の1つ以上の視覚的特徴を変更するように構成されたビデオ処理操作を含む、請求項1に記載の方法(500)。
  7. 前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイ技術のタイプに対応する、請求項1に記載の方法(500)。
  8. 前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイの製造業者に関連する情報に対応する、請求項1に記載の方法(500)。
  9. 前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツのカラリストに関連する情報に対応する、請求項1に記載の方法(500)。
  10. 前記少なくとも1つのメタデータフィールドと関連した前記設定は、前記ビデオコンテンツ及び前記メタデータを受信するデバイスにおいて事前に定義される、請求項1に記載の方法(500)。
  11. データ処理装置(218)であって、メモリ(904)と前記メモリ(904)に通信可能に接続された少なくとも1つのプロセッサ(220)を備えるデータ処理装置(218)であって、
    前記少なくとも1つのプロセッサが、
    ビデオコンテンツを受信し、
    メタデータフィールドの階層的順序を備えたメタデータを受信し、
    前記メタデータの少なくとも1つに関連する設定に従って、前記ビデオコンテンツの少なくとも一部に拡張操作を実行するように構成された、装置。
  12. 前記少なくとも1つのプロセッサ(220)が、
    第2のメタデータフィールドと比較して前記階層的順序において第1のメタデータフィールドが高い位置にあることを決定し、
    前記拡張操作を実行することが、前記第2のメタデータフィールドに関連する設定よりも前記第1のメタデータフィールドに関連する設定に従って、前記ビデオコンテンツの前記一部に前記拡張操作を実行することをさらに含む、請求項11に記載の装置(218)。
  13. 少なくとも1つのメタデータフィールドは、2つ以上の拡張操作に関連し、
    前記少なくとも1つのプロセッサ(220)は、
    前記ビデオコンテンツの前記一部に対して前記2つ以上の拡張操作の優先順位に基づいて、前記2つ以上の拡張操作のうち少なくとも1つを選択する、請求項11に記載の装置(218)。
  14. 前記拡張操作は、前記ビデオコンテンツにおける時間コードに基づく時刻において実行される、請求項11に記載の装置(218)。
  15. 前記拡張操作は、前記ビデオコンテンツにおける被写体の境界が定められた領域に実行される、請求項11に記載の装置(218)。
  16. 前記拡張操作は、前記ビデオコンテンツの前記一部の1つ以上の視覚的特徴を変更するように構成されたビデオ処理操作を含む、請求項11に記載の装置(218)。
  17. 前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイ技術のタイプに対応する、請求項11に記載の装置(218)。
  18. 前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツを表示するために使用されるディスプレイの製造業者に関連する情報に対応する、請求項11に記載の装置(218)。
  19. 前記メタデータフィールドの前記階層的順序は、前記ビデオコンテンツのカラリストに関連する情報に対応する、請求項11の装置(218)。
  20. 前記少なくとも1つのメタデータフィールドと関連した前記設定は、前記ビデオコンテンツ及び前記メタデータを受信するデバイスにおいて事前に定義される、請求項11に記載の装置(218)。
JP2017500890A 2014-07-07 2015-04-30 メタデータに従ったビデオコンテンツの拡張 Pending JP2017525272A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462021685P 2014-07-07 2014-07-07
US62/021,685 2014-07-07
PCT/US2015/028594 WO2016007210A1 (en) 2014-07-07 2015-04-30 Enhancing video content according to metadata

Publications (1)

Publication Number Publication Date
JP2017525272A true JP2017525272A (ja) 2017-08-31

Family

ID=53059538

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017500890A Pending JP2017525272A (ja) 2014-07-07 2015-04-30 メタデータに従ったビデオコンテンツの拡張

Country Status (6)

Country Link
US (1) US10757472B2 (ja)
EP (1) EP3167620A1 (ja)
JP (1) JP2017525272A (ja)
KR (1) KR20170031160A (ja)
CN (1) CN106664441A (ja)
WO (2) WO2016007210A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10708564B2 (en) * 2015-05-11 2020-07-07 Samsung Electronics Co., Ltd. Image processing apparatus and image processing method based on metadata
CN109151489B (zh) * 2018-08-14 2019-05-31 广州虎牙信息科技有限公司 直播视频图像处理方法、装置、存储介质和计算机设备

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6092089A (en) * 1997-07-09 2000-07-18 International Business Machines Corp. Augmenting comment field of postscript files to enable document management
US6466624B1 (en) 1998-10-28 2002-10-15 Pixonics, Llc Video decoder with bit stream based enhancements
US7036106B1 (en) * 2000-02-17 2006-04-25 Tensilica, Inc. Automated processor generation system for designing a configurable processor and method for the same
US7444656B2 (en) * 2001-08-02 2008-10-28 Intellocity Usa, Inc. Post production visual enhancement rendering
US7558326B1 (en) * 2001-09-12 2009-07-07 Silicon Image, Inc. Method and apparatus for sending auxiliary data on a TMDS-like link
JP4885456B2 (ja) * 2003-03-03 2012-02-29 ノキア コーポレイション ブロードバンド信号で搬送されるトランスポートストリーム用の階層的モードを指示する方法、システムおよびネットワークエンティティ
JP4872253B2 (ja) * 2004-10-12 2012-02-08 ソニー株式会社 多重化装置、多重化方法、プログラム、および記録媒体
US20070028161A1 (en) * 2005-07-26 2007-02-01 Haugh Julianne F Displaying text in variable width display fields
US7658087B1 (en) * 2005-12-28 2010-02-09 Mcmurray Fabrics, Inc. Light weight fine gauge double faced textile article
US20070268406A1 (en) 2006-05-22 2007-11-22 Broadcom Corporation, A California Corporation Video processing system that generates sub-frame metadata
US7805684B2 (en) * 2006-09-01 2010-09-28 Nokia Corporation Mobile communications terminal
US10298834B2 (en) * 2006-12-01 2019-05-21 Google Llc Video refocusing
US20080208751A1 (en) * 2007-02-27 2008-08-28 General Instrument Corporation Method, Apparatus and System for Providing Added Value Content to Feature Content End Users
EP2183898B1 (en) * 2007-07-05 2016-09-14 Coherent Logix Incorporated Mobile television broadcast system
US8954874B2 (en) * 2007-12-05 2015-02-10 Verizon Patent And Licensing Inc. Methods and systems for providing one or more topic specific portals
WO2009095732A1 (en) * 2008-01-31 2009-08-06 Thomson Licensing Method and system for look data definition and transmission over a high definition multimedia interface
US20090213270A1 (en) 2008-02-22 2009-08-27 Ryan Ismert Video indexing and fingerprinting for video enhancement
WO2010065344A1 (en) * 2008-11-25 2010-06-10 Refocus Imaging, Inc. System of and method for video refocusing
JP4758491B2 (ja) * 2009-03-19 2011-08-31 財団法人21あおもり産業総合支援センター 色順次表示方式液晶表示装置
JP2010288079A (ja) * 2009-06-11 2010-12-24 Sony Corp 画像処理装置及び画像処理方法
US8280222B2 (en) 2009-10-06 2012-10-02 Sony Corporation Use of metadata in video to establish TV settings
CN102893602B (zh) * 2010-02-22 2016-08-10 杜比实验室特许公司 具有使用嵌入在比特流中的元数据的呈现控制的视频显示
US20110289121A1 (en) * 2010-05-18 2011-11-24 Rovi Technologies Corporation Metadata modifier and manager
EP2413286A1 (en) * 2010-07-29 2012-02-01 LiberoVision AG Image processing method and device for instant replay
US9549197B2 (en) * 2010-08-16 2017-01-17 Dolby Laboratories Licensing Corporation Visual dynamic range timestamp to enhance data coherency and potential of metadata using delay information
US8984577B2 (en) * 2010-09-08 2015-03-17 Microsoft Technology Licensing, Llc Content signaturing
US8863165B2 (en) * 2010-11-01 2014-10-14 Gracenote, Inc. Method and system for presenting additional content at a media system
US8804045B2 (en) * 2010-12-07 2014-08-12 At&T Intellectual Property I, L.P. Apparatus and method for reducing distortion in images
WO2012150602A1 (en) * 2011-05-03 2012-11-08 Yogesh Chunilal Rathod A system and method for dynamically monitoring, recording, processing, attaching dynamic, contextual & accessible active links & presenting of physical or digital activities, actions, locations, logs, life stream, behavior & status
US8898705B2 (en) * 2012-03-28 2014-11-25 United Video Properties, Inc. System and methods for modifying improperly formatted metadata
US20130283330A1 (en) * 2012-04-18 2013-10-24 Harris Corporation Architecture and system for group video distribution
US9454398B2 (en) * 2013-05-08 2016-09-27 Andrew John Hacker Enhanced data container with extensible characteristics and a system and method of processing and communication of same
US10462108B1 (en) * 2012-05-08 2019-10-29 Andrew J. Hacker Enhanced data container with extensible characteristics and a system and method of processing and communication of same
JPWO2013168354A1 (ja) * 2012-05-10 2016-01-07 パナソニックIpマネジメント株式会社 電源電圧の安定化構造を持つ三次元集積回路、及びその製造方法
US9418031B2 (en) * 2012-12-31 2016-08-16 Verizon Patent And Licensing Inc. Media content asset recovery methods and systems
CA2905330A1 (en) * 2013-03-15 2014-09-25 Thx Ltd Method and system for modifying a sound field at specified positions within a given listening space
US11016718B2 (en) * 2013-06-13 2021-05-25 Jawb Acquisition Llc Conforming local and remote media characteristics data to target media presentation profiles
US20150026718A1 (en) * 2013-07-19 2015-01-22 United Video Properties, Inc. Systems and methods for displaying a selectable advertisement when video has a background advertisement
EP3090564A1 (en) * 2014-01-03 2016-11-09 Thomson Licensing Method and apparatus for video optimization using metadata
US9564136B2 (en) * 2014-03-06 2017-02-07 Dts, Inc. Post-encoding bitrate reduction of multiple object audio
US20160150294A1 (en) * 2014-11-20 2016-05-26 Adobe Systems Incorporated Video Content Metadata for Enhanced Video Experiences

Also Published As

Publication number Publication date
US10757472B2 (en) 2020-08-25
KR20170031160A (ko) 2017-03-20
WO2016007211A1 (en) 2016-01-14
WO2016007210A1 (en) 2016-01-14
EP3167620A1 (en) 2017-05-17
US20170201794A1 (en) 2017-07-13
CN106664441A (zh) 2017-05-10

Similar Documents

Publication Publication Date Title
TWI749426B (zh) 用於媒體資料之嵌入式呈現引擎
US20160110414A1 (en) Information searching apparatus and control method thereof
US10904642B2 (en) Methods and apparatus for updating media presentation data
JP2016507917A (ja) 電子デバイス、リソース表示方法、プログラム及び記録媒体
WO2017095885A1 (en) Method and apparatus for transmitting video data
US20180089183A1 (en) System for optimizing access to an indexed database
US11620324B2 (en) Media asset access control system
KR20180105690A (ko) 통신 장치, 통신 제어 방법, 및 컴퓨터 프로그램
US10250657B2 (en) Streaming media optimization
US20230275942A1 (en) Group curated media channels
US20230253016A1 (en) Systems and methods for modifying a segment of an uploaded media file
US20140223028A1 (en) Sharing Data Among Smart Devices and a Cloud Network
US20110296030A1 (en) Single rui renderer on a variety of devices with different capabilities
JP2017525272A (ja) メタデータに従ったビデオコンテンツの拡張
US20120254288A1 (en) Recompositing an rui in real-time
US20150063435A1 (en) Techniques for reference based transcoding
US11336928B1 (en) Predictive caching of identical starting sequences in content
US10341687B1 (en) Assigning videos to single-stream and multi-stream decoders
US20120254766A1 (en) Method to embellish an existing rui
US20230048393A1 (en) Thumbnail Image Replacement
US9473556B1 (en) Content discovery using description sequences
US20230089154A1 (en) Virtual and index assembly for cloud-based video processing
CN117714696A (zh) 一种视频码率计算方法及系统
CN113204403A (zh) 用于呈现图像的装置、方法和计算机可读介质
TW201626804A (zh) 根據可用頻寬之視訊內容串流及下載