CN105830461A - 使用对媒体文件格式的约束以提升性能 - Google Patents

使用对媒体文件格式的约束以提升性能 Download PDF

Info

Publication number
CN105830461A
CN105830461A CN201480069471.6A CN201480069471A CN105830461A CN 105830461 A CN105830461 A CN 105830461A CN 201480069471 A CN201480069471 A CN 201480069471A CN 105830461 A CN105830461 A CN 105830461A
Authority
CN
China
Prior art keywords
bit stream
constraint
data
frame
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480069471.6A
Other languages
English (en)
Other versions
CN105830461B (zh
Inventor
S.卡努穆里
S.萨赫瓦尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105830461A publication Critical patent/CN105830461A/zh
Application granted granted Critical
Publication of CN105830461B publication Critical patent/CN105830461B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/11—File system administration, e.g. details of archiving or snapshots
    • G06F16/116—Details of conversion of file system types or formats
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G06F16/2365—Ensuring data consistency and integrity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4516—Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Storage Device Security (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

一种处理已编码的媒体的处理器被配置为对所述已编码的比特流应用约束。这样的约束不是所述已编码的媒体与之相符的标准的规范所要求的那些约束；作为代替，这样的约束反映了被不充分地约束并且被处理器应用以确保处理器不经历性能降级或者错误的标准的部分。可以例如作为读、写或者解码比特流之前的预处理步骤、或者与比特流被解码同时地、或者与比特流被从传输接收同时地应用所述约束。

Description

使用对媒体文件格式的约束以提升性能
背景技术
诸如是音频和视频和静止图像之类的数字媒体数据通常被编码成被传输或者被存储在数据文件中的比特流，其中，已编码的比特流遵守已建立的标准。这样的标准的一些示例是从ISO/IEC14496-12（也称为MPEG-4第12部分或者ISOBMFF）和ISO/IEC23001-7（也称为CENC）导出的格式。
标准通常允许媒体文件格式方面的某些灵活性，以使得两个媒体文件可以具有不同的格式，但两者仍然将与该标准相符。然而，这样的灵活性可能意味着相符的文件格式被不充分地约束。当媒体文件格式被不充分地约束时，解码器、播放器和其他应用和/或设备可能经历错误、性能问题或者甚至安全性问题。
发明内容
提供本概要以便以简化形式介绍下面在详细描述中进一步描述的概念的选择。本概要不旨在标识所要求保护的主题的关键特征或者基本特征，其也不旨在用于限制所要求保护的主题的范围。
一种处理已编码的媒体的处理器被配置为对所述已编码的比特流应用约束。特别地，所述处理器分析已编码的比特流以验证所述已编码的比特流满足所述约束，以及如果可能，则将所述比特流配备为遵守所述约束。这样的约束不是所述已编码的媒体与之相符的标准的规范所要求的那些约束；作为代替，这样的约束反映了被不充分地约束并且被所述处理器应用以确保所述处理器不经历性能降级、错误或者其他处理问题的标准的部分。可以例如作为读、写或者解码比特流之前的预处理步骤、或者与比特流被解码同时地、或者与比特流被从传输接收同时地应用所述约束。
如果这样的约束未被已编码的比特流满足，则处理器可以采取行动。例如，如果文件被解码以便回放，则回放可以被终止，或者可以从回放中省略媒体的一部分。如果文件被传输或者存储，则这样的存储或者传输可以被终止。
所述处理器可以是例如解码器、比特流源、回放应用、播放器设备等、或者其他操纵已编码的比特流的应用的一部分。例如，文件共享实用程序可以处理已下载的媒体文件（在接收它们之后）以应用指定的约束。
由解码器或者其他媒体处理器实施的约束包括但不限于：对从数据到相关数据的偏移量的约束；用于解决使用不同规则导出的隐含值之间的冲突的约束；用于确保与样本数据相关的辅助数据出现在所述比特流中的约束；以及用于限制被嵌套的数据结构的范围的约束；用于限制版本控制的约束；以及使用应用级知识来直接访问比特流中的数据（代替于处理对该数据的中间引用）。
作为在解码器中实施这样的约束的可替换项，可以修改标准的规范，以及编码器可以被构建为在编码过程中强制施行这样的约束。因此，可以生成已知为遵守这样的约束的已编码的比特流。
在下面的描述中参考了附图，附图形成说明书的一部分，并且在附图中作为图示示出了本技术的具体示例实施方案。要理解，可以使用其他实施例，以及可以做出结构性改变，而不脱离本公开内容的范围。
附图说明
图1是具有约束的媒体处理可以在其中被实施的示例操作环境的方框图。
图2是描述解码器的示例实施方案的流程图。
图3是图示出解码器的示例实施方案的数据流图。
图4是这样的系统的部件可以利用其被实施的示例计算设备的方框图。
具体实施方式
下面的小节提供具有约束的媒体处理系统可以在其中被实施的示例操作环境。
参考图1，示例媒体处理系统包括计算设备100，计算设备100包括硬件102以及操作系统104和媒体处理器106。在该示例中，媒体处理器是运行在设备的操作系统上的应用，以及操作系统管理对硬件102的资源的访问。在下面通过图4的示例计算机硬件描述描述硬件102。
媒体处理器可以实施例如读取媒体数据108的解码器，所述媒体数据108已被编码成与所述编码器被实施为处置的标准数据形式相符的比特流。
已编码的比特流一般地表示诸如是音频、视频、静止图像、文本和辅助信息之类的已编码的数字媒体数据。如果存在诸如是音频和视频之类的多个媒体流，则已编码的数据的流被复用成单个比特流。已编码的比特流一般地被传输或者存储在数据文件中。已编码的比特流和它们被存储在其中的文件一般地遵守已建立的标准。
用于对音频和视频数据进行编码的这样的标准的一些示例是从ISO/IEC14496-12（也称为MPEG-4第12部分或者ISOBMFF）和ISO/IEC23001-7（也称为CENC）导出的格式。
许多这样的标准指定了数据的结构，其通常被称为分组但可以被称为诸如是框（box）之类的其他名称，所述框包括提供关于分组和/或已编码的媒体数据的数据的元数据（有时被称为实质数据（essencedata））和/或与已编码的媒体数据相关联的辅助信息（诸如是加密信息、关联的文本或者其他数据）。元数据和/或辅助信息可以由具有值的已命名的字段定义。在已编码的比特流内，某些结构通常包括其他结构，所述其他结构可以包括另外其他的结构等等。一个结构通常可以直接或者间接地引用另一个结构。例如，视频数据的分组直接或者间接地与将使之与其同步的音频数据的另一分组相关。作为另一示例，已加密的数据的分组与用于对该数据进行解密的信息相关。
标准的规范定义了哪些结构是所要求的、哪些结构是可选的以及各种结构、字段和字段值意味着什么。因此，规范定义了对与标准相符的结构的约束。然而，针对相符的比特流的规范可以依然保持为被不充分地约束。如在本文中描述的，未在标准的规范中阐明的附加的约束在媒体处理器中被实施，并且用于进一步约束另外的相符的比特流。
解码器可以是在应用约束112的同时从已编码的比特流读取和解码媒体数据以产生输出110的任何应用的部分。约束112是如下面描述的限制被不充分地约束的标准的方面的参数。
标准中对充分的约束的缺乏增大了当媒体数据被解码时错误114或者其他性能降级将发生的风险。附加地，因为相符的比特流可以被故意地制作为利用被不充分地约束的标准并且因此攻击解码器或者解码器在其上运行的设备的弱点，所以增大了安全性风险。例如，比特流可以在一个点处包括对数据从其中被检索的比特流中的另一个点的引用。如果该引用点在比特流中的深处，则大的延迟、缓冲器超限或者其他问题可能发生。一个示例约束将限制这样的引用可以在其中发生的范围。
由解码器或者其他媒体处理器实施的约束包括但不限于：对从数据到相关数据的偏移量的约束；用于解决使用不同规则导出的隐含值之间的冲突的约束；用于确保与样本数据相关的辅助数据出现在所述比特流中的约束；用于在冲突的辅助数据或者元数据被编码在比特流中的情况下解决冲突的约束；以及用于限制被嵌套的数据结构的范围的约束；用于限制版本控制的约束；以及使用应用级知识来直接访问比特流中的数据（代替于处理对该数据的中间引用）。
在另一个实施方案中，媒体处理器可以实施媒体文件处理器，所述媒体文件处理器是接收已编码的媒体数据的应用。媒体文件处理器就其读取已编码的数据流和应用如下面所描述的约束的能力而言可以以与媒体文件解码器类似的方式被实施。这样的媒体文件处理器可以作为管理媒体数据的应用（诸如是媒体文件共享应用）的部分分析所存储或者传输的比特流以应用约束。
现在参考图2，现在将描述一个示例流程图，其描述了媒体数据解码器的示例操作。在该示例中，假设比特流由数据分组的序列形成，以及每个分组被顺序地读取。该过程通过从比特流读取200下一个将被处理的分组开始。分组然后被分析202以确定其是否遵守由解码器应用的约束。在对分组进行分析期间，处理器可以使用来自较旧的分组的信息，或者如果处理要求某些未来的分组则可以延迟对当前分组的处理。如在204处所确定的，如果约束不被满足，则回放可以被终止206。否则，对分组（以及更早的分组）的处理在208处继续。这样的处理可能涉及对当前分组进行缓存以便稍后结合其他随后的分组进行处理。在缓存或者以其他方式处理所读取的分组之后，如在210处所确定的，如果来自比特流的一个或多个分组依然剩余将被处理，则下一个分组被从比特流读取200。
现在参考图3，现在将描述媒体解码器的一个示例实施方案的数据流图。媒体解码器包括分组处理器300，分组处理器300在输入处接收已编码的比特流301，以及提取和输出分组元数据302和实质（实际的视频、图像或者音频）数据304，分组元数据302和实质数据304两者都被置于缓冲器306中。可以为分组元数据和实质数据提供分开的缓冲器。约束处理器308分析分组元数据302以确定约束是否被满足。约束处理器可以对指示约束未被满足的事件310进行信号通知（在这样的情况出现时）。来自缓冲器306的数据被解码器312处理，所述解码器312产生诸如是已解码的音频、图像或者视频数据之类的输出数据314。
针对ISO/IEC14496-12和23001-7的约束示例
给定一个示例实施方案和操作，现在将描述各种种类的约束的一些示例。这些示例与从ISO/IEC14496-12（也称为MPEG-4第12部分或者ISOBMFF）和ISO/IEC23001-7（也称为CENC）导出的格式相关。
约束1
在ISOBMFF中，数据分组中的一种种类的结构是“saio”框，“saio”框被包含在称为“moov”或者“moof”框的另一个结构内。“saio”框对在已编码的比特流内可以在哪里找到辅助信息的（一个或者多个）偏移量的信息进行信号通知。“saio”框在CENC中用于对可以在找到样本加密数据（初始化向量，子样本数据）处的（一个或者多个）偏移量进行信号通知。
在ISOBMFF中，数据分组中的另一种类的结构是“saiz”框，“saiz”框也被包含在称为“moov”或者“moof”框的另一个结构内。“saiz”框对每个样本的辅助信息的大小进行信号通知。“saiz”框被CENC用于对每个样本的样本加密数据的大小进行信号通知。
CENC规范指出，不对字段“aux_info_type”进行信号通知或者利用“cenc”的值对字段“aux_info_type”进行信号通知的“saio”和“saiz”框是携带样本加密数据作为样本辅助信息的框。
与ISOBMFF和CENC相符的已编码的比特流被不充分地约束，因为指示可以在哪里找到辅助信息的偏移量不被约束，这意味着辅助信息可以在已编码的比特流中的任何地方。
下面的五个示例是对使用“saio”和“saiz”框来信号通知的辅助信息的位置应用约束的可替换的方式。具体的感兴趣的辅助信息是样本加密数据。
1）使用“saio”/“saiz”框来指示的辅助信息全部应当出现在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之内。
2）使用“saio”/“saiz”框来指示的辅助信息全部应当出现在以下位置中的一个位置中：
a.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之内
b.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之外和之后，并且在由父项“moov”/“moof”框表示的任何样本的样本数据之前。
3）使用“saio”/“saiz”框来指示的辅助信息全部应当出现在以下位置中的一个位置中：
a.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之内
b.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之外和之后；此外，对于任何样本的辅助信息应当出现在对于该样本的样本数据之前。
4）对于样本的使用“saio”/“saiz”框来指示的辅助信息应当出现在以下位置中的一个位置中：
a.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之内
b.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之外和之后，并且在由父项“moov”/“moof”框表示的对于任何样本的样本数据之前。
5）对于样本的使用“saio”/“saiz”框来指示的辅助信息应当出现在以下位置中的一个位置中：
a.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之内
b.在父项“moov”/“moof”框（“saio”/“saiz”框在其下被找到）之外和之后；此外，对于样本的辅助信息应当出现在对于该样本的样本数据之前。
上面的约束的集合中的每个集合帮助简化解码器的实施方案和建立对使用“saio”和“saiz”框来指示的偏移量和大小的边界检查。在对于辅助信息的位置的任何约束不出现的情况下，存在解码器将被呈现为具有任意的偏移量值的风险，对于任意的偏移量值，解码器可能不得不直到达到比特流中的该位置之前都对数据进行缓存和/或促使在存储装置中进行的查找操作，以读取该位置处的数据。除使性能降级之外，这样的偏移量可以被操纵为在播放器应用或者所述应用在其上运行的计算机设备上利用安全性弱点和策划的攻击。
约束2
对于标准的规范通常允许数据被省略，以及这样的数据不存在会导致值被隐含，并且在标准的规范中阐述隐含值。然而，对于规范中的不同规则来说有可能提供冲突的隐含值。因此，另一个约束是一种用于解决从来自规范的两个或更多个规则导出的隐含值之间的冲突的机制。
特别地，在“saio”和“saiz”框的ISOBMFF规范定义中，字段“aux_info_type”（其指示在由这些框指示的位置处传达的信息的性质）是可选的。当该字段被省略时，ISOBMFF阐明，通过以下方式获得隐含值：
“如果aux_info_type和aux_info_type_parameter被省略，则aux_info_type的值或者是（a）在诸如是受保护的内容之类的经变换的内容的情况下，被包括在保护方案信息框中的scheme_type”，或者是（b）样本项类型。”。
在ISOBMFF中，可以存在针对特定轨道被信号通知的许多保护方案信息框（“sinf”框）。每个框可以对不同的“scheme_type”进行信号通知。ISOBMFF不澄清应当如何解决伴随隐含的导出的冲突。
CENC规范允许使用“saio”和“saiz”框而不明确对“aux_info_type”字段进行信号通知。根据CENC规范，当“scheme_type”字段是“cenc”时，对于“aux_info_type”字段来说，如果为空则隐含了“cenc”的值。然而，可能存在可以独立于CENC被定义并且可以定义不同的隐含导出的其他方案（和/或样本项）。
相应地，在支持ISOBMFF和CENC的实施方案中，将被应用以解决这样的冲突的约束的示例是以下：
1）来自CENC的隐含导出应当优先于全部其他的隐含导出，以及，从ISOBMFF导出的全部新规范应当要求对“aux_info_type”字段进行明确的信号通知。
2）对于隐含导出的优先级的次序应当是基于“sinf”框出现在父项“trak”框内的次序的。来自样本项类型的隐含导出将具有比从“sinf”框导出的任何隐含导出更低的优先级。
在没有用于解决导出隐含值方面的冲突的约束的情况下，诸如是对于上面的针对ISOBMFF的约束，播放器可能不能够恰当地支持与规范相符的内容。特别地，如果不提供用于解决对于隐含导出的冲突的逻辑，则错误很可能将发生。
约束3
如果已编码的比特流中的数据的出现的次序被用于约束隐含值的导出，诸如是在上面的约束2中，则可以应用另一个约束以确保期望的出现的次序。
作为示例，在约束2中，在与CENC相符的数据流中，可以不指定“saio”和“saiz”框中的“aux_info_type”字段，以及父项“trak”框中的“sinf”框的次序可以用于导出对于该字段的值。附加约束可以用于确保特定的“sinf”框出现在数据流中，以解决“aux_info_type”字段的隐含导出。因此，对于与CENC相符的数据流，解码器可以强制施行下面的约束：如果任何“saio”或者“saiz”框不对“aux_info_type”字段进行明确信号通知，则表示“cenc”的“scheme_type”的“sinf”框应当是父项“trak”框中的全部“sinf”框中的第一个“sinf”框。
约束4：
如果诸如是“saio”框之类的结构表示对于多个样本的数据，则与ISOBMFF和CENC相符的数据流在辅助信息与样本之间的关联上也被不充分地约束。特别地，对于一个样本的辅助信息的所指定的位置来说，有可能与对于另一个样本的辅助信息的所指定的位置相同或者重叠。
作为示例，下面的约束中的一个约束可以被解码器用于与ISOBMFF或者CENC相符的数据来约束对辅助信息的引用：
1）在“saio”框中被信号通知的任何“entry_count”字段应当具有等于1的值；或者
2）在“saio”框中被信号通知的任何偏移量值应当使得在对于任何两个样本的辅助信息的位置中不存在任何重叠。
约束5：
与ISOBMFF和CENC相符的数据流在将辅助信息和样本相关联方面还被不充分地约束，因为对于所要求的辅助信息来说，有可能不出现在已编码的比特流中。例如，如果一个结构不覆盖对于该结构所预期的全部样本，并且对于样本的辅助信息由表示样本的结构定义，则未被结构表示/覆盖的样本将不与正确的辅助信息相关联。特别地说，ISOBMFF允许构造不覆盖全部样本的“saiz”框。在这样的情况下，解码器实施方案对样本的辅助信息的不存在情况进行处置。如果辅助信息是处理样本所要求的（样本加密数据是其一个示例），则解码器在没有辅助信息的情况下不能处理样本，并且对错误进行信号通知。解码器可以具有附加的检查，以便如果样本未被加密则允许解码，但如果样本被加密了则对错误进行信号通知。
为处置该问题，可以被解码器应用的约束的一个示例是下面的示例：
对于出现在“样本表”框中的“样本辅助信息大小”框，“样本辅助信息大小”框内的“sample_count”字段值应当与“样本大小”框或者“压缩样本大小”框内的“sample_count”字段值相同。对于出现在“轨道片段”框中的“样本辅助信息大小”框，“样本辅助信息大小”框内的“sample_count”字段值应当与“轨道片段”框的“轨道片段运行”框内的“sample_count”字段值的和相同。
约束6
在某些情况下，辅助信息的位置可以是明确的和/或通过多种方式导出的。如果解码器被实施为支持这些附加模式，则这样的灵活性将增大对于解码器的实施方案的成本。尽管这样的附加模式可能非常不频繁地出现，但任何解码器如果其不支持这些附加模式则将产生错误。
作为示例，ISOBMFF规范当使用CENC方案来对样本加密数据进行信号通知时允许“saiz”框（包含加密数据）不出现在“traf”框（包含具有对应的已加密的样本数据的“saio”框）内，但可以从针对“moov”框中的轨道而信号通知的“saiz”框导出该信息。
为减少解码器实施的模式的数量，可以对辅助信息的位置放置约束。在该示例中，当使用CENC方案来对样本加密数据进行信号通知时，“saiz”框的出现可以被约束为在“traf”框内。一种用于在CENC中描述这样的约束的方法是指出以下内容：对于“traf”框内的每个“saio”框，相同的“traf”框内应当存在匹配（相同的“aux_info_type”和“aux_info_type_parameter”字段，不论是被明确信号通知的还是被隐含导出的）的“saiz”框。
约束7
比特流规范可以在其中被不充分地约束的另一个领域是在版本的定义和使用方面。解码器可以被实施为处置仅在实施时已知的版本；然而，如果新的版本被定义，则解码器可能是过时的。此外，解码器可能会接收到具有无效的版本号的比特流。
作为示例，ISOBMFF规范包括被进行版本控制的“saio”框的定义。“saio”框的当前定义不指示使用现有定义定义了“saio”的哪些版本。当前规范仅针对两个版本而提供，从而允许其他版本号用于未来的使用；然而，规范未清楚地命令其他版本（被预留给未来的使用的）不应当在被产生为与当前规范相符的比特流中被使用。解码器可以被实施为进行以下两者：使用指示版本是否被预留以用于未来使用的信息，以及相应地接受或者拒绝指示版本的比特流。
作为示例，用于处置与ISOBMFF相符的数据的约束可以是用于实施以下各项的：
1）“saio”的定义应当仅在版本0和1被使用时是适用的。全部其他版本被预留以用于未来的使用。
b）“saio”的定义应当对于全部版本是适用的。
约束8
还可能期望的是，约束结构如何被包含在其他结构内。结构的这样的嵌套如果被允许是零个或者无限的则在解码器实施方案中引入复杂度，并且可能由于需要缓存和/或搜索相互相关的数据结构而引起性能降级和/或定向攻击。具有零个被嵌套的结构的结构表示可能不受支持的退化情况，而具有较大数量的被嵌套的结构的结构可以造成性能问题。
例如，根据ISOBMFF规范，零个或者更多“traf”框可以被包含在“moof”框内。可以在解码器中对“moof”框内的“traf”框的数量应用约束。这样的约束的示例定义包括以下各项：
1）“moof”框内应当存在一个且仅一个“traf”框
2）“moof”框内应当存在至少一个“traf”框，以及应当存在针对每个“track_ID”的最多一个“traf”框
3）“moof”框内应当存在至少一个“traf”框。
约束9
与约束8类似，根据ISOBMFF规范，零个或多个“trun”框可以被包含在“traf”框内。可以在解码器中对“traf”框内的“trun”框的数量应用约束。这样的约束的示例定义包括以下各项：
1）“traf”框内应当存在一个且仅一个“trun”框。
2）“traf”框内应当存在至少一个“trun”框。
约束10
也与约束8类似，根据ISOBMFF规范，零个或多个样本可以被包含在“trun”框内。可以在解码器中对“trun”框内的样本的数量应用约束。这样的约束的示例定义是以下的示例定义：在“trun”框中被信号通知的sample_count字段应当大于0。
上面的对分别“moof”框、“traf”框和“trun”框中的“traf”框、“trun”框和样本的数量的约束8到10帮助避免了退化情况（例如，不具有样本的“moof”框）。支持退化情况是对解码器实施方案的不必要的负担。作为代替，包括这些情况的比特流可以被检测和拒绝。
约束11
比特流规范可以通过其被不充分地约束的另一种方式是，结构是否可以包含混合类型的数据。例如，如果结构可以包含已加密的和未加密的样本两者，则使得解码器实施方案更复杂。
作为示例，ISOBMFF规范允许“traf”框包括已加密的样本和未加密的样本两者。可以在解码器中被实施的约束的示例定义是以下的示例定义：“traf”框不应当同时具有非零个明文样本和非零个已加密的样本（即，或者“traf”框中的全部样本是明文样本，或者“traf”框中的全部样本是已加密的样本）。
由标准引入的另一个复杂度在于，可以存在从一个数据结构到将从其检索相关数据的另一个数据结构的多个间接的引用。其他应用级规范可以约束对标准的使用，以使得这样的引用被进一步约束。特别地，这样的规范可以对于给定的数据结构定义与该数据结构相关的数据的已知位置。已知的应用级规范的附加约束可以用于从已知的位置直接获得相关数据，而不处理从一个数据结构到其他数据的间接引用。
例如，根据CENC规范，“saio”和“saiz”框对样本加密数据的位置进行信号通知。然而，使用来自“saio”和“saiz”框的信息得到样本加密数据的解码器可能具有取决于偏移量如何被构造的安全性风险、实施方案复杂度和性能害处。诸如是CFF和PIFF之类的应用级规范将样本加密数据的存储约束在“moof”框内。例如，根据CFF，样本加密数据被存储在“senc”框内。
在该示例中，如果使用将样本加密数据的存储约束到已明确标识的框的应用级规范实施解码器，则解码器可以直接解析该“senc”框，以使用来自“saio”和“saiz”框的信息得到样本加密数据和避免得到样本加密数据所涉及的安全性风险和性能害处。
前述示例旨在图示而非限制用于实施对已编码的比特流的约束的技术。这些约束涉及例如限制对附加数据的引用的范围和约束数据以限制被解码器支持的模式的数量。通过应用这样的约束，降低了解码器的实施方案复杂度，以及提高了性能和安全性。
作为在解码器中实施这样的约束的可替换项，可以修改标准的规范，以及可以将编码器构建为在编码过程中强制施行这样的约束。因此，可以生成已知为遵守这样的约束的已编码的比特流。
现在已描述了示例实施方案，图4图示出了这样的技术可以在其中被实施的示例计算机的示例。这是计算机的仅一个示例，并且不旨在建议关于这样的计算机的使用或者功能性的范围的任何限制。
下面的描述旨在提供对可以利用其来实施这样的系统的合适计算机的简要、一般性描述。所述计算机可以是各种各样的通用或者专用计算硬件配置中的任一项。可能合适的众所周知的计算机的示例包括但不限于游戏控制台、机顶盒、个人计算机、手持型或者膝上型设备（例如，媒体播放器、笔记本计算机、蜂窝电话、个人数字助理、话音记录器）、服务器计算机、多处理器系统、基于微处理器的系统、可编程消费性电子产品、网络PC、迷你计算机、大型计算机、包括以上系统或者设备中的任一项的分布式计算环境等等。
参考图4，采用基本配置的示例计算机400包括至少一个处理单元402和存储器404。该计算机可以具有多个处理单元402。处理单元402可以包括独立于彼此操作的一个或多个处理核（未示出）。还提供了诸如是图形处理单元420之类的附加协同处理单元。取决于计算机的配置和类型，存储器404可以是易失性的（诸如是RAM）、非易失性的（诸如是ROM、闪存等）或者两者的某种组合。在图4中通过虚线406图示出了该配置。计算机400可以包括附加存储装置（可移除的和/或非可移除的），其包括但不限于磁盘或光盘或者磁带。在图4中通过可移除存储器408和非可移除存储器410图示出了这样的附加存储装置。
计算机存储介质是在其中可以由计算机存储和从可寻址物理存储位置检索数据的任何介质。计算机存储介质包括易失性的和非易失性的、可移除的和非可移除的存储介质。所存储的数据可以包括但不限于计算机程序指令、数据结构、程序模块或者其他数据。存储器404、可移除存储器408和非可移除存储器410全部是计算机存储介质的示例。计算机存储介质的示例包括但不限于，RAM、ROM、EEPROM、闪存或者其他存储器技术、CD-ROM、数字多功能光盘（DVD）或者其他光学地或者磁光学地记录的存储器设备；盒式磁带、磁带和磁盘存储装置。
计算机400还可以包含允许该设备通过通信介质与其他设备通信的（一个或者多个）通信连接412。通信介质通常在诸如是载波或者其他传输机制之类的已调制数据信号中携带计算机程序指令、数据结构、程序模块或者其他数据，并且包括任何信息传输介质。术语“已调制数据信号”意味着这样的信号，即：使其特性中的一个或多个特性以使得将信息编码在信号中的方式被设置或者改变，因此改变信号的接收设备的配置或者状态。作为示例而非限制，通信介质包括诸如是有线网络或者直接有线连接之类的有线介质、以及诸如是声学、RF、红外和其他无线介质之类的无线介质。通信连接412是与通信介质接合以便通过通信介质传输数据并且从通信介质接收数据的设备，诸如是网络接口。
计算机400可以具有诸如是键盘、鼠标、笔、相机、触摸输入设备等的各种（一个或者多个）输入设备414。可以还包括诸如是显示器、扬声器、打印机等的（一个或者多个）输出设备416。这些设备全部是本领域中众所周知的，并且不需要在这里详尽地讨论。各种输入和输出设备可以实施自然用户界面（NUI），其是使用户能够摆脱由诸如是鼠标、键盘、遥控器等的输入设备施加的人为约束以“自然的”方式与设备交互的任何界面技术。
NUI方法的示例包括那些依赖于语音识别、触摸和触笔识别、在屏幕上和邻近屏幕处的手势识别、空中手势、头和眼睛跟踪、话音和语音、视觉、触摸、手势和机器智能的NUI方法，并且可以包括对以下各项的使用：触摸敏感的显示器、话音和语音识别、意图和目标理解、使用深度相机（诸如是立体相机系统、红外相机系统和其他相机系统以及这些项的组合）的运动手势检测、使用加速度计或者陀螺仪的运动手势检测、脸部识别、三维显示器、头、眼睛和凝视跟踪、沉浸式增强现实和虚拟现实系统（其全部提供更自然的界面），以及用于使用电场感测电极来感测脑活动的技术（EEG和相关方法）。
在计算机上操作的该系统的每个部件一般由被一个或多个处理单元执行的一个或多个计算机程序实施。所述计算机程序可以包括计算机可执行指令和/或计算机解释指令。这样的指令当被处理单元处理时指导处理单元执行特定任务或者实施特定抽象数据类型。可以在分布式计算环境中实践计算机系统，其中，由通过通信网络链接的远程处理设备执行任务。在分布式计算环境中，程序模块可以位于本地以及包括存储器存储设备的远程计算机存储介质两者处。
可替换地或者附加地，本文中描述的功能性可以至少部分上由一个或多个硬件逻辑部件执行。例如并且非限制性地，可以被使用的硬件逻辑部件的说明性类型包括现场可编程门阵列（FPGA）、专用集成电路（ASIC）、专用标准产品（ASSP）、片上系统（SOC）、复杂可编程逻辑设备（CPLD）等。
所附权利要求的前序中的术语“制品”、“过程”、“机器”和“物质的组成”旨在将权利要求限于被认为落在通过使用35U.S.C.§101中的这些术语定义的可专利主题的范围内的主题。
本文中描述的前述替换实施例中的任一个实施例或者全部实施例可以以任何期望的组合被使用，以形成附加的混合实施例。应当理解，在所附权利要求中定义的主题不必限于上面描述的具体实施方案。上面描述的具体实施方案仅作为示例公开。

Claims (10)

1.一种计算机实施的过程，包括：
接收已编码的数据的比特流，所述已编码的数据与已定义的标准相符并且包括数据分组；
针对与附加约束的相符性而分析所述比特流；以及
如果所述比特流与所述附加约束相符，则处理所述比特流。
2.根据权利要求1所述的计算机实施的过程，其中，处理所述比特流包括对所述比特流进行解码。
3.根据权利要求1所述的计算机实施的过程，其中，处理所述比特流包括存储所述比特流。
4.根据权利要求1所述的计算机实施的过程，其中，所述附加约束包括除已定义的标准之外的约束。
5.根据权利要求4所述的计算机实施的过程，其中，所述附加约束包括对从数据到相关数据的偏移量的约束。
6.根据权利要求4所述的计算机实施的过程，其中，所述附加约束包括用于解决使用不同规则导出的隐含值之间的冲突的约束。
7.根据权利要求4所述的计算机实施的过程，其中，所述附加约束包括用于确保与样本数据相关的辅助数据出现在所述比特流中的约束。
8.根据权利要求4所述的计算机实施的过程，其中，所述附加约束包括用于限制被嵌套的数据结构的范围的约束。
9.一种制品，包括：
计算机存储介质；
计算机程序指令，其存储在所述计算机存储介质上，所述计算机程序指令当被处理设备处理时指导所述处理设备执行包括以下各项的过程：
接收已编码的数据的比特流，所述已编码的数据与已定义的标准相符并且包括数据分组；
针对与附加约束的相符性而分析所述比特流；以及
如果所述比特流与所述附加约束相符，则处理所述比特流。
10.一种计算机，包括：
在具有操作系统的硬件上执行的媒体处理器，所述媒体处理器被配置为接收已编码的数据的比特流，所述已编码的数据与已定义的标准相符并且包括数据分组，所述媒体处理器针对与附加约束的相符性而分析所述比特流，以及如果所述比特流与所述附加约束相符，则处理所述比特流。
CN201480069471.6A 2013-12-18 2014-12-11 使用对媒体文件格式的约束以提升性能 Active CN105830461B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/133,234 US9330101B2 (en) 2013-12-18 2013-12-18 Using constraints on media file formats to improve performance
US14/133234 2013-12-18
PCT/US2014/069637 WO2015094872A1 (en) 2013-12-18 2014-12-11 Using constraints on media file formats to improve performance

Publications (2)

Publication Number Publication Date
CN105830461A true CN105830461A (zh) 2016-08-03
CN105830461B CN105830461B (zh) 2018-10-23

Family

ID=52392201

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480069471.6A Active CN105830461B (zh) 2013-12-18 2014-12-11 使用对媒体文件格式的约束以提升性能

Country Status (4)

Country Link
US (2) US9330101B2 (zh)
EP (1) EP3085107A1 (zh)
CN (1) CN105830461B (zh)
WO (1) WO2015094872A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110651482A (zh) * 2017-03-30 2020-01-03 联发科技股份有限公司 发信isobmff的球面区域信息的方法和装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9330101B2 (en) 2013-12-18 2016-05-03 Microsoft Technology Licensing, Llc Using constraints on media file formats to improve performance

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050281289A1 (en) * 2004-06-21 2005-12-22 Huang Jau H System and method for embedding multimedia processing information in a multimedia bitstream
CN1860786A (zh) * 2003-10-23 2006-11-08 交互设备有限公司 使用不同的编解码器压缩媒体信号各部分的系统和方法
US20100115631A1 (en) * 2008-10-31 2010-05-06 Lee Milstein System and method for playing content on certified devices

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2268816B (en) * 1992-07-14 1996-01-17 Sony Broadcast & Communication Controlling equipment
US6011868A (en) * 1997-04-04 2000-01-04 Hewlett-Packard Company Bitstream quality analyzer
US6295604B1 (en) * 1998-05-26 2001-09-25 Intel Corporation Cryptographic packet processing unit
EP1195767A1 (en) * 2000-09-27 2002-04-10 Deutsche Thomson-Brandt Gmbh Method and apparatus for evaluating for the purpose of decoding a bitstream having a data structure fulfilling the requirements of two different data structure standards, and storage medium containing such bitstream
US7599434B2 (en) 2001-09-26 2009-10-06 Reynolds Jodie L System and method for compressing portions of a media signal using different codecs
CN100484229C (zh) * 2002-04-26 2009-04-29 松下电器产业株式会社 逆多路复用装置及多路复用装置
KR101066366B1 (ko) * 2003-02-26 2011-09-20 엔엑스피 비 브이 멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체
US7822680B1 (en) * 2003-12-31 2010-10-26 Fannie Mae System and method for managing data pertaining to a plurality of financial assets for multifamily and housing developments
US7746853B2 (en) * 2004-08-16 2010-06-29 Cisco Technology, Inc. Method and apparatus for transporting broadcast video over a packet network including providing conditional access
US20060078288A1 (en) * 2004-10-12 2006-04-13 Huang Jau H System and method for embedding multimedia editing information in a multimedia bitstream
US8615038B2 (en) * 2004-12-06 2013-12-24 Nokia Corporation Video coding, decoding and hypothetical reference decoder
JP4264833B2 (ja) * 2005-06-17 2009-05-20 ソニー株式会社 記録装置および方法、プログラム、並びに記録媒体
US20070198401A1 (en) * 2006-01-18 2007-08-23 Reto Kunz System and method for automatic evaluation of credit requests
US20070258586A1 (en) * 2006-04-28 2007-11-08 Chien-Chung Huang Personal video recorder having dynamic security functions and method thereof
KR101410229B1 (ko) * 2007-08-20 2014-06-23 삼성전자주식회사 오디오 신호의 연속 정현파 신호 정보를 인코딩하는 방법및 장치와 디코딩 방법 및 장치
US8718388B2 (en) * 2007-12-11 2014-05-06 Cisco Technology, Inc. Video processing with tiered interdependencies of pictures
US20100274708A1 (en) * 2008-05-29 2010-10-28 Allen Lewis J Apparatus and method for creating a collateral risk score and value tolerance for loan applications
US8775566B2 (en) 2008-06-21 2014-07-08 Microsoft Corporation File format for media distribution and presentation
KR100958176B1 (ko) * 2008-11-26 2010-05-14 주식회사 코아로직 멀티미디어 데이터 처리장치, 그 처리장치를 포함하는 멀티미디어 시스템, 및 멀티미디어 데이터 레코딩 방법
EP2197153B1 (en) * 2008-12-15 2012-07-04 Koninklijke KPN N.V. Method and device for reliable multicast using UDP
US8904191B2 (en) * 2009-01-21 2014-12-02 Microsoft Corporation Multiple content protection systems in a file
US8270495B2 (en) * 2009-02-13 2012-09-18 Cisco Technology, Inc. Reduced bandwidth off-loading of entropy coding/decoding
US8243623B2 (en) * 2009-03-31 2012-08-14 Intel Corporation Combined device and service discovery technique in stations supporting tunneled direct link setup (TDLS)
KR20110138276A (ko) * 2009-04-09 2011-12-26 노키아 코포레이션 미디어 파일 스트리밍을 위한 시스템, 방법 및 장치
US7990976B2 (en) * 2009-05-13 2011-08-02 Telefonaktiebolaget L M Ericsson (Publ) Negotiated secure fast table lookups for protocols with bidirectional identifiers
US20130290492A1 (en) 2009-06-12 2013-10-31 Cygnus Broadband, Inc. State management for video streaming quality of experience degradation control and recovery using a video quality metric
US20110246660A1 (en) * 2009-09-29 2011-10-06 Nokia Corporation Systems, Methods, and Apparatuses for Media File Streaming
US8594200B2 (en) * 2009-11-11 2013-11-26 Mediatek Inc. Method of storing motion vector information and video decoding apparatus
US20120233345A1 (en) 2010-09-10 2012-09-13 Nokia Corporation Method and apparatus for adaptive streaming
US9215471B2 (en) * 2010-11-12 2015-12-15 Microsoft Technology Licensing, Llc Bitstream manipulation and verification of encoded digital media data
KR101920439B1 (ko) * 2011-04-28 2019-02-14 삼성전자주식회사 공용 인터페이스를 통해 수신 제한 모듈로 암호화된 데이터를 전송하기 위한 데이터 전송 장치 및 그에 적용되는 방법, 수신 제한 모듈 그리고 시스템.
US9445136B2 (en) 2011-09-21 2016-09-13 Qualcomm Incorporated Signaling characteristics of segments for network streaming of media data
WO2013044250A1 (en) * 2011-09-22 2013-03-28 E-Credit Express A system and method of expedited credit and loan processing
CN115086767A (zh) 2012-01-19 2022-09-20 Vid拓展公司 使用移动设备接收多媒体内容的方法及该移动设备
WO2013163555A1 (en) 2012-04-26 2013-10-31 Huawei Technologies Co., Ltd. System and method for signaling segment encryption and key derivation for adaptive streaming
US8812839B2 (en) * 2012-07-31 2014-08-19 Adobe Systems Incorporated System and method for local generation of streaming content with a hint track
US9043825B2 (en) 2012-08-28 2015-05-26 Microsoft Technology Licensing, Llc Content carried ratings based control
US9407500B2 (en) * 2013-01-25 2016-08-02 Dell Products L.P. System and method for determining the configuration of switches in virtual link trunking environments
US9727510B2 (en) * 2013-03-15 2017-08-08 Micron Technology, Inc. System and method for independent, direct and parallel communication among multiple field programmable gate arrays
JP6652320B2 (ja) * 2013-12-16 2020-02-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 送信方法、受信方法、送信装置及び受信装置
US9330101B2 (en) 2013-12-18 2016-05-03 Microsoft Technology Licensing, Llc Using constraints on media file formats to improve performance

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1860786A (zh) * 2003-10-23 2006-11-08 交互设备有限公司 使用不同的编解码器压缩媒体信号各部分的系统和方法
US20050281289A1 (en) * 2004-06-21 2005-12-22 Huang Jau H System and method for embedding multimedia processing information in a multimedia bitstream
US20100115631A1 (en) * 2008-10-31 2010-05-06 Lee Milstein System and method for playing content on certified devices

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110651482A (zh) * 2017-03-30 2020-01-03 联发科技股份有限公司 发信isobmff的球面区域信息的方法和装置
CN110651482B (zh) * 2017-03-30 2022-02-22 联发科技股份有限公司 发信isobmff的球面区域信息的方法和装置

Also Published As

Publication number Publication date
US20150169594A1 (en) 2015-06-18
US20160323349A1 (en) 2016-11-03
WO2015094872A1 (en) 2015-06-25
EP3085107A1 (en) 2016-10-26
CN105830461B (zh) 2018-10-23
US9330101B2 (en) 2016-05-03
US9876837B2 (en) 2018-01-23

Similar Documents

Publication Publication Date Title
CN101467462B (zh) 在变换的数字媒体内容中保留关于数字媒体权限的信息
CN107004070B (zh) 利用硬件受保护的数字权限管理进行的媒体解码控制
CN102918539B (zh) 用于保护重放内容的方法、装置和设备
US20060227121A1 (en) Systems and methods for providing a dual mode input device in a computing system
US20180091856A1 (en) Video censoring
US8363831B2 (en) Method and apparatus for allowing software access to navigational data in a decrypted media stream while protecting stream payloads
US9823869B2 (en) System and method of protecting data in dynamically-allocated regions of memory
CN106575300A (zh) 用于识别文档中的对象的基于图像的搜索
US20180341779A1 (en) Augmented reality captcha
KR20160083759A (ko) 주석 제공 방법 및 장치
CN106688015B (zh) 处理用于当解码图像时对于块的操作的参数
CN105830461A (zh) 使用对媒体文件格式的约束以提升性能
US11546141B1 (en) Cryptographic protection for portions of media
WO2017061654A1 (ko) 하이브리드 어플리케이션의 웹 리소스 보안방법 및 그에 따른 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
KR101809662B1 (ko) 이미지 파일의 일부 영역을 보안하는 방법 및 시스템
CN111967001A (zh) 一种基于双容器的解码与编码安全隔离方法
EP3155821B1 (en) Video content tracking
KR101771348B1 (ko) 패키지 파일에 대한 패킹 방법 및 시스템
CN112434327A (zh) 信息保护方法、装置及电子设备
EP3189666B1 (en) Partial headers for system set-up
KR102527985B1 (ko) 실시간 drm 기반 영상 스트리밍 시스템 및 그의 영상 스트리밍 방법
CN110830744B (zh) 一种安全交互系统
CN101593534B (zh) 编码控制的多媒体播放系统
KR101833386B1 (ko) 사용자의 고유 식별자가 삽입된 디지털 컨텐츠의 다운로드를 위한 컨텐츠 제공 방법 및 시스템
Slocum Quality of Experience and Security for Augmented and Virtual Reality Applications

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant