CN102132247B - 传播地图 - Google Patents

传播地图 Download PDF

Info

Publication number
CN102132247B
CN102132247B CN200980132406.2A CN200980132406A CN102132247B CN 102132247 B CN102132247 B CN 102132247B CN 200980132406 A CN200980132406 A CN 200980132406A CN 102132247 B CN102132247 B CN 102132247B
Authority
CN
China
Prior art keywords
map
change
possible change
propagating
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200980132406.2A
Other languages
English (en)
Other versions
CN102132247A (zh
Inventor
何杉
杰弗里·A·布卢姆
邹德坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kingtype Elmore
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=41707386&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN102132247(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN102132247A publication Critical patent/CN102132247A/zh
Application granted granted Critical
Publication of CN102132247B publication Critical patent/CN102132247B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/10091—Air intakes; Induction systems characterised by details of intake ducts: shapes; connections; arrangements
    • F02M35/10144—Connections of intake ducts to each other or to another device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/10209—Fluid connections to the air intake system; their arrangement of pipes, valves or the like
    • F02M35/10236—Overpressure or vacuum relief means; Burst protection
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/10242—Devices or means connected to or integrated into air intakes; Air intakes combined with other engine or vehicle parts
    • F02M35/10288—Air intakes combined with another engine part, e.g. cylinder head cover or being cast in one piece with the exhaust manifold, cylinder head or engine block
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/10314—Materials for intake systems
    • F02M35/10321—Plastics; Composites; Rubbers
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/10314—Materials for intake systems
    • F02M35/10327—Metals; Alloys
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/1034—Manufacturing and assembling intake systems
    • F02M35/10347—Moulding, casting or the like
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/1034—Manufacturing and assembling intake systems
    • F02M35/10354—Joining multiple sections together
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F02—COMBUSTION ENGINES; HOT-GAS OR COMBUSTION-PRODUCT ENGINE PLANTS
    • F02M—SUPPLYING COMBUSTION ENGINES IN GENERAL WITH COMBUSTIBLE MIXTURES OR CONSTITUENTS THEREOF
    • F02M35/00—Combustion-air cleaners, air intakes, intake silencers, or induction systems specially adapted for, or arranged on, internal-combustion engines
    • F02M35/10—Air intakes; Induction systems
    • F02M35/104—Intake manifolds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/0028—Adaptive watermarking, e.g. Human Visual System [HVS]-based watermarking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G06T1/0085—Time domain based watermarking, e.g. watermarks spread over several images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2201/00—General purpose image data processing
    • G06T2201/005—Image watermarking
    • G06T2201/0202—Image watermarking whereby the quality of watermarked images is measured; Measuring quality or performance of watermarking methods; Balancing between quality and robustness

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Manufacturing & Machinery (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

一种方法，其包括：接收原始编码视频流作为一个输入，访问被划分为码片的编码数据(该码片被进一步划分为块)，接收可能的改变或水印的列表作为另一输入，访问至少一个块，解码每个码片，制作完成每个码片，从列表中提取施加到至少一个块的那些改变，并且使用用于至少一个块的改变从帧间预测或帧内预测来构造传播地图。该方法还进一步包括：使用传播地图解码亮度数据，将亮度数据与保真度阈值进行比较，并且将可能的改变或水印施加到不超过保真度阈值的那些。

Description

传播地图
相关申请的交叉引用
本申请要求2008年8月19日提交的题为“A PROPAGATION MAP”的美国临时专利申请No.61/189,370的权益和优先权。在此针对所有目的通过引用而明确地并入该临时申请的全部内容。
技术领域
本发明涉及一种用于在AVC水印加注中产生并使用传播地图(propagation map)的处理。
背景技术
视频画面被编码为一个或多个非重叠的码片(slice)，并且每个码片包括整数个宏块。在H.264中存在五种类型的编码码片(参见Iain E.G.Richardson，H.264 and MPEG-4 Video Compression：Video Coding for Next-generationMultimedia，John Wiley and Sons，2003)。此外，存在一些修改H.264/AVC编码视频的视频处理应用。数字水印加注是一种这样的应用。不幸的是，数字水印加注的应用可能在显示视频图像中引起令人讨厌的伪像。因此，存在对于预测、特征化并预防与数字水印加注相关联的令人讨厌的伪像的需要。
发明内容
一种方法，包括：访问可以被划分为块的编码数据，访问对于编码数据的可能的改变的列表，构造通过实施至少一个可能的改变而将引起的、对编码数据的作为结果的改变的传播地图，以及基于传播地图施加可能的改变之一。该编码数据可以是视频数据，其中帧被划分为码片，码片进一步被划分为块，并且所述改变可以表示可能的水印。该方法进一步包括：构造反映由于帧间预测引起的传播的传播地图，其中作为结果的改变包括直接块和至少一个相邻块。帧间预测可以是时间帧间预测，其中作为结果的改变可以包括直接块和至少一个相邻块。该方法可以进一步并入帧内预测来构造传播地图，其中作为结果的改变可以包括直接块和至少一个相邻块。然后例如可以使用作为结果的传播地图，以便确定将由可能的改变引起的对保真度的影响，由此提供消除与保真度阈值有关的可能的改变的手段。
附图说明
现在将参考附图通过示例描述本发明。
图1示出了宏块分区(partition)和子宏块分区的示例。
图2表示一帧中的相邻运动矢量。
图3表示有方向性的分段预测。
图4表示帧内预测所涉及的相邻块。
图5是传播地图的图示。
图6是图示传播地图的构造的框图。
图7是用于算法的链接列表的图示。
图8图示了基于AVC解码器的传播地图构造。
图9图示了传播地图初始化。
图10图示了用于产生最终的传播地图列表的步骤。
图11图示了传播更新处理。
图12图示了用于帧内预测的传播地图更新。
图13图示了用于帧间/帧内预测的优化的传播地图更新。
具体实施方式
现在将描述解决与数字水印加注应用相关联的伪像产生问题的本发明实施例，在数字水印加注应用中，水印加注处理修改了压缩流中的运动矢量。由运动矢量(mv)修改引起的这些伪像不仅改变当前块(即，运动矢量所属的块)的重构的像素，而且还引起其他块中亮度或色度的改变，这是因为重构的mv或者当前块的重构的像素在运动矢量预测或块预测中可能用作其他块的参考。其他块中的这些改变可能进一步传播。
具体地，本发明创建传播地图，该传播地图指示单个改变将如何通过画面传播。在下文中提出传播地图的表示方法(representation)、以及用于建立传播地图以便跟踪受影响的块及其改变的算法。本发明设想将传播地图构造并入H.264解码器。这样的传播地图在许多方面都是有用的。该传播地图可以被用来(1)检查由改变导致的可视失真，(2)检查导致与传播地图重叠的改变，(3)检查落入前一改变的传播路径中的改变，(4)识别多个改变(该多个改变组合使得第三块受到影响)以便当采用这些改变来进行水印加注时改进检测区域，以及(5)有时避免改变。传播路径是一个块中的单个改变如何传播到其他块。
本发明认识到存在一些修改H.264/AVC编码视频的、诸如数字水印加注之类的视频处理应用，并且保真度改变预测符(predictor)可以是确保所选择的水印加注不降低视频质量的参数。本发明还提供了这样的手段：用于特征化与直接做出改变的区域的解码相关联的保真度改变，而且还进一步捕获可能传播到画面的其它区域的一些改变。这样，根据本发明的地图指示改变将传播到的区域，并且可以对所有那样的区域应用保真度评估。此外，设想在水印加注应用中，在一个码片中可能做出多个改变。考虑到此，本发明被设计为在存在对于需要得知改变将对解码影像(其中给定的码片可能经历多个改变)有什么影响、并且存在用于在内容的未标记的版本上表示合成改变的手段的情况下将其应用于水印加注。然而，如果前一改变已经传播到当前区域并且做出了另一改变，则作为结果的解码影像可能包括这两个改变的影响。如果第一改变是已知的，则可以预测该结果，但是在没有是否将采用第一改变的先验知识的情况下也是可能的。如果可以将改变制成地图以指示改变将传播到的所有区域，则可以避免在该传播路径内部做出其他改变。这些问题的组合也可能发生。如果间接地修改了画面的区域，由于不同区域中的改变已经传播到当前区域，则对于当前区域可以检查或确定该改变的保真度影响的评估。然而，可能存在多个改变，所有改变都可能传播到当前区域。如果将所有改变的传播路径都制成地图，则可以识别这些重叠传播的区域并且可以考虑影响的所有组合。
可以在H.264标准中利用本发明进行块改变预测。帧间预测的宏块被编码为来自参考帧/画面的预测与残差之和。运动矢量定义要被用作预测的参考帧中的像素块。另外，在H.264标准中，画面/帧被划分为码片。码片是宏块的序列，其中宏块可以在一帧内按照光栅扫描顺序被寻址/编号。每个宏块包括一个16*16的亮度阵列并且可以以四种方式之一被划分：一个16*16宏块、两个8*16宏块分区、两个16*8宏块分区、或四个8*8宏块分区。如果选择8*8模式，则可以进一步将四个8*8宏块分区中的每一个划分为四个子宏块分区之一：一个8*8、两个4*8、两个8*4或四个4*4。阵列还可以是相关联的色度数据。宏块分区和子宏块分区如图1所示地进行索引编制。在图1中，以示例a-d示出了四个示例宏块分区，其中示例a是16*16亮度样本的1个宏块分区，示例b是16*8亮度样本的2个宏块分区，示例c是8*16亮度样本的2个宏块分区，以及示例d是8*8亮度样本的4个宏块分区。示例e表示8*8亮度样本的1个子宏块分区，示例f表示8*4亮度样本的2个子宏块分区，示例g表示4*8亮度样本的子宏块分区，以及示例h表示4*4亮度样本的4个子宏块分区。结果，通过(帧#、宏块#、宏块分区索引、(子宏块索引))的组合可以唯一地标记(reference)每个宏块分区和子宏块分区。以类似的方式划分相关联的色度样本，并且通过要编码的视频格式来确定实际块和子块的大小。
分区(mv)的运动矢量被编码为运动矢量预测(MVp)与运动矢量差值(mvd)之和。该预测基于同一帧/画面中相邻分区A、B、C和D(如图2所示)的运动矢量。mv预测可以根据ITU-T推荐H.264|ISO/IEC 14496-10国际标准第1修改的第8.4.1.3章中的已知规则来执行。该规则假设可得到相邻的A、B和C并使用对应的运动矢量mvA、mvB和mvC。然而，在实践中，这些块中的一些或全部可能是不可得到的。当相邻的A不可得到时，可以假设mvA＝0。当相邻的B不可得到时，可以假设mvB＝0。当相邻的C不可得到时，如果相邻的D是可得到的，则可以假设mvC＝mvD，否则可以假设mvC＝0。用于产生预测MVp的规则可以如下：
a.在图3中，对于16*8分区，从相邻的B预测用于上面的16*8分区的MVp，而从相邻的A预测用于下面的16*8分区的MVp。
b.在图3中，对于8*16分区，从相邻的A预测用于左边的8*16分区的MVp，而从相邻的C预测用于右边的8*16分区的MVp。
c.对于除了16*8和8*16分区的大小的传送的分区，可以从存储在列表中的多个不同参考帧之一来预测B码片。每个分区具有不同的参考索引，该不同的参考索引指示应当使用列表中的哪个参考帧。如果当前分区的参考索引匹配相邻的A、B或C的参考索引中的一个并且仅匹配一个，则将该相邻分区的运动矢量用作MVp。否则，将MVp设置为用于相邻分区A、B和C的运动矢量的中值。
i.如果紧接在当前块之上存在不止一个分区，则使用最左边的分区
作为相邻的B；如果紧接在当前块的左边存在不止一个分区，则使用最上面的分区作为相邻的A。
ii.如果两个相邻分区B和C不可得到而A可得到，则不是取(0，0，mvA)的中值(其将为0)，而是设置MVp＝mvA。
如果利用直接预测模式对块进行编码，则将不存在为该块传送的运动矢量。相反，其运动矢量将基于之前解码的块来计算。存在两种直接预测模式：空间直接模式和时间直接模式。
在空间直接模式中，首先考虑列表1中的第一参考帧，该列表1存储了用于双向预测模式中一个方向预测的多个不同的参考帧。可以识别在该帧中位于相同位置(co-located)的块，并且检查或估算其运动矢量。如果运动矢量在范围[-1，1]之内并且它们的参考索引为0(连同其他条件)，则意味着该运动是固定的并且是小的，并且其运动矢量被设置为0。否则，该运动是明显的，并且在从相邻部分预测运动矢量时以与上述方式相同的方式来预测运动矢量。
在时间直接模式中，当前块的运动矢量可以从列表1中的第一参考中位于相同位置的块的运动矢量直接导出。由于该模式不涉及相邻块的运动矢量，因此其将是B码片中的传播源。
关于帧内预测，帧内预测的宏块被编码为来自当前帧/画面内的预测和残差之和。如果一个或多个参考块在一改变的传播地图上，则预测可能受该改变的影响，在此情况下，当前块也将在该传播地图上。这可能是三种类型的帧内预测：帧内4*4、帧内8*8、以及帧内16*16。在帧内4*4模式下，对于16个4*4块中的每一个来预测宏块。涉及图4所示的所有4个相邻块A、B、C和D，存在总共8种模式(ITU-T推荐H.264|ISO/IEC 14496-10国际标准第1修改的每个表8-2)。这8种模式连同所涉及的(多个)相邻块被列在下面的表1中(从ITU-T推荐H.264|ISO/IEC 14496-10国际标准第1修改的表8-2修改而得)。在该表中，与该标准的表8-2不同，对于帧内4*4_DC模式可以区分三种不同的情况：模式2-使用A和B两者；模式9-仅使用A；模式10-仅使用B。4*4_DC模式的第四种情况是既不使用A也不使用B，其不影响传播地图并且因而可以被忽略。
表1：4*4帧内预测模式
 帧内预测模式(4*4)   名称   所涉及的(多个)相邻块
  0   帧内4*4垂直  B
  1   帧内4*4水平  A
  2   帧内4*4_DC(1)  A，B
  3   帧内4*4对角线-左下  B，C
  4   帧内4*4对角线-右下  B，A，D
  5   帧内4*4垂直-右  B，A，D
  6   帧内4*4水平-下  B，A，D
  7   帧内4*4垂直-左  B，C
  8   帧内4*4水平-上  A
  9   帧内4*4_DC(2)  A
  10   帧内4*4_DC(3)  B
在帧内8*8模式下，对于4个8*8块中的每一个来预测宏块。涉及图4所示的所有4个相邻块A、B、C和D，存在总共8种模式(ITU-T推荐H.264|ISO/IEC 14496-10国际标准第1修改的每个表8-3)。这8种模式连同所涉及的(多个)相邻块被列在下面的表2中(从ITU-T推荐H.264|ISO/IEC14496-10国际标准第1修改的表8-3修改而得)。类似于4*4帧内预测情况，对于帧内8*8_DC模式也可以区分三种不同的情况。注意，由于在预测之前执行滤波操作，因此每个模式所涉及的相邻块与4*4预测不同。
表2：8*8帧内预测模式
 帧内预测模式(8*8)   名称   所涉及的(多个)相邻块
  0   帧内8*8垂直   B，C，D
  1   帧内8*8水平   A，D
  2   帧内8*8_DC(1)   A，B，C，D
  3   帧内8*8对角线-左下   B，C，D
  4   帧内8*8对角线-右下   A，B，C，D
  5   帧内8*8垂直-右   A，B，C，D
  6   帧内8*8水平-下   A，B，C，D
  7   帧内8*8垂直-左   B，C，D
  8   帧内8*8水平-上   A，D
  9   帧内8*8_DC(2)   A，D
  10   帧内8*8_DC(3)   B，C，D
在帧内16*16模式下，作为整体来预测宏块。涉及图4所示的3个相邻块A、B和D，存在4种模式(ITU-T推荐H.264|ISO/IEC 14496-10国际标准第1修改的每个表8-4)。表3列出了预测模式。为了保持其与4*4和8*8预测一致，仍使用模式2、9和10来指示DC预测的三种情况。
表3：16*16帧内预测模式
  帧内预测模式(16*16)   名称   所涉及的(多个)相邻块
  0   帧内16*16垂直   B
  1   帧内16*16水平   A
  2   帧内16*16_DC(1)   A，B
  3   帧内16*16平面   A，B，D
  9   帧内16*16_DC(2)   A
  10   帧内16*16_DC(3)   B
具体地，参考组件是如图4所示的相邻块A的最右列、相邻块B的最后的行、相邻块C的最后的行、以及相邻块D的最后的(右下)像素。如果C不可得到，则通过复制由B的最后的行的最右边的像素来替代C中的参考像素。
在H.264/AVC水印加注系统中，之前的步骤已经创建了可能修改的列表。每个可能修改由块标识符、哪个运动矢量可以被修改的指示、以及该运动矢量的替换值组成。注意，在该点上，对于单个块，可能存在多个可能修改。在稍后的步骤中，将精简(prune)可能修改的列表，使得没有块具有不止一个修改。该列表中的每个条目表示对与B码片帧间预测的宏块相关联的运动矢量的改变。改变帧间预测的块的运动矢量将具有利用与在编码期间打算使用(intend)的参考不同的参考重构该块的效果，因此将很可能改变解码后的像素值。该改变可能以2种方式传播：(1)如果使用帧间预测来编码第二块并且从当前块来预测其运动矢量，则该第二块也将使用与打算使用的参考不同的参考；以及(2)如果使用帧内预测来编码第二块并且从当前块预测其像素值，则该第二块的重构的像素将与打算使用的像素不同。第一种传播，即向相邻运动矢量的传播，可以以相同方式再次传播到下一组相邻块。第二种传播，即直接向像素值的传播，可以仅仅进一步传播到也使用帧内预测的相邻块。
在H.264/AVC水印加注系统中，一次可以估算可能的改变之一。对于每个条目，可以假设做出可能的改变并且然后跟踪该改变将如何传播到帧/画面中的其它块。传播地图是被用来表示该信息的工具。稍后，当评估可能的改变的保真度影响时，仅需考虑该可能的改变的传播路径上的块，这是因为没有其他块将被影响。类似地，可以快速确定可能的改变是否处于任何之前选择的改变的传播路径上、或者可能的改变的传播地图是否与任何之前选择的改变的传播地图重叠。
图5(a)图示了传播地图的一个示例。该传播地图500与一个B码片块510相关联，该B码片块510的运动矢量已经被直接改变。该图中的其它块520是将由于传播而被间接改变的块。当一个块由于直接的修改或者由于其落入另一改变的传播路径中而改变时，该改变具有进一步传播到其相邻块的可能。图5(b)图示了传播地图的另一示例，其中，当仅仅一个块530被直接改变时，四个相邻块540的亮度值由于该传播而可能被修改。被改变的块的传播地图P表示其亮度值由于传播而也被改变的块p的集合。利用指示初始改变、当前块的预测模式、以及当前块中的改变的数据结构来表示传播地图中的每个块，并且传播地图中的每个块被表示为：
p＝{head_node_info，mode，cur_node_info}.
“head_node”按照发起改变的运动矢量的位置和替换值而唯一性地识别被改变的块。传播地图P中的所有节点将具有相同的“head_node”。元素“mode”指示当前块的预测模式，其可以是帧内预测或帧间预测。元素“cur_node”记录关于当前块的信息。其对于帧间预测的块包含原始和新的运动矢量，对于帧内预测的块包含帧内预测模式和参考块。
图6示出了用于构造传播地图的方法。在610，利用改变后的块p初始化传播地图P。在估算框620，进行确定以估算块p是否为空。如果块p不为空，则在框630中检查其四个相邻块αi，i＝1，...，4(如图5b中所定义的)中的每一个。这些检查中每一个检查的目标是确定对块p的改变是否将传播到相邻块αi。为了这样做，处理器等可以将使用与p相关联的原始值进行的解码以及使用改变后的值进行的解码进行比较。如果块αi是帧间预测的块，则在帧间预测路径640中，可以检查或确定使用p的新的运动矢量预测的运动矢量和其他相邻块的运动矢量。如果与原始运动矢量不同，则改变将传播到该相邻块，并且块αi在传播框660中被附加到传播地图P。如果αi在帧内预测路径650中进行帧内预测并且使用块p作为预测中的参考，则改变将传播到该相邻块，并且块αi在传播框660中被附加到传播地图P。在已经检查了所有四个相邻块之后，考虑P中的下一元素。该处理重复，直至在结束框670处P中没有新的元素可到达为止。
现在将描述将传播地图构造集成到H.264解码器中。如之前所述类似，该集成在H.264/AVC水印加注系统的背景下出现。
传播地图P被表示为链接的列表，其整体上将识别受可能的修改影响的宏块/分区。当解码器按照光栅扫描顺序处理B码片的宏块时，可以继续将受影响的宏块/分区添加到对应的链接的列表。将参考图示该链接的列表的图7来描述详细的集成算法。
给出B码片中可能修改的列表，包含l个条目，每个条目对应于具有一个替换值的可修改的运动矢量，可以构造l个链接的列表(710)，并且每个列表可以被初始化为包含其本身可以作为可能的修改的至少一个节点(720)。在表4中示出节点p的数据结构，其包含宏块/分区的位置信息、原始运动矢量信息以及新的运动矢量信息。由于建立传播地图的处理被置于AVC解码器中，因此该信息中的大多数可以直接从该解码器获得。基于传播地图的应用可以添加其他信息。
表4：用于每个传播地图的链接的列表的数据结构
图8示出了解码器810中基于AVC解码器的传播地图构造的概览。注意，在一个码片内执行运动矢量预测和帧内预测。因此，一个运动矢量改变的传播不能向当前码片的外部传播。因此，可以逐码片地构造传播地图。对于图像序列中的每个码片，标准的H.264/AVC解码器通过三个步骤进行循环：(1)码片初始化830，(2)码片解码器840，以及(3)码片制成(setdown)850。传播地图构造在一次处理一个码片的该背景下发生。
传播地图构造将原始编码视频流作为一个输入。另一输入是所有可能的修改的列表。该处理可以被描述为图8中三个步骤的序列：(1)传播地图初始化835，(2)传播地图建立器845，以及(3)传播地图输出855，其中最终的输出被用来解码YUV以用于亮度估算。估算在水印嵌入期间通过修改运动矢量值而引起的改变的处理在这里被称为LumEval。LumEval测量每个块的亮度改变量，其可以被用来估算这些改变，诸如水印加注应用中的保真度评估。
在图9中图示了传播地图初始化835，并且传播地图初始化835被集成到H.264/AVC解码器的码片初始化处理830中。在框930中，该初始化从可能修改的列表中提取被施加到当前B-码片中的块的那些修改。然后其在框940中读入可改变的块中的条目的集合，并且在框950中对于每个可能修改建立一个传播地图。
当解码器处理每个宏块时，被集成到码片解码器840中的图10中的传播地图建立器向可能的修改的传播地图添加块。在一个码片中考虑的每个宏块由框1001表示。当解码一个块时，关于已经使用多个不同编码情况中的哪一个情况进行确定。所述情况是帧间预测、具有空间直接模式的帧间预测、以及用于不同帧内预测类型1021的框1020中的帧内预测。图10示出了帧间预测路径1005，其中在直接/跳跃(direct/skip)判定框1006中关于块是否以直接模式进行帧间预测做出确定。如果帧间预测的块不是以直接模式进行帧间预测的，则根据传播更新处理1008更新传播地图。此外，如果在确定框1007中不是对帧间预测的块进行空间预测的，则帧间预测的块将不受对相邻块进行的改变的影响，并且将不是任何传播地图的一部分。检查所有其他的块以便确定它们是否受到之前的改变的影响。通过传播更新处理1008检查如在直接/跳跃判定框1006中所示的未使用直接模式的帧间预测的块，并且在图11中描述该处理。
在图11中，在框1101中首先识别相邻块。该识别基于如较早描述的运动矢量预测MVp以及如图2所示的相邻块的可获得性。这里重要的且受关注的是可能影响当前MVp的确定的相邻块，并且这样的相邻块被称为所识别的相邻块。在所有传播地图列表中的采样1102以及检查相邻框1103确定这些所识别的相邻块中的哪些处于所述传播地图中的任一个中。如果所识别的相邻块落入一个传播地图中，这暗示着该相邻块已经受到在该地图前的该可能修改的影响。因此，该改变具有传播到当前块的可能性。如果在框1103中没有相邻块落入传播地图，则在框1102中采样下一地图。对于落入现有的传播地图的所识别的相邻块的每个实例，执行存储在传播地图列表中的运动矢量的提取1104。利用修改后的相邻块的运动矢量，执行当前块的重新计算1105。在框1106中，将用于当前块的该运动矢量预测与原始的运动矢量进行比较。如果它们不同，则在该传播地图前的改变将影响当前块，并且在框1107中当前块被添加到对应的传播地图。
为了仅根据帧内预测来更新传播地图，通过图12中描述的传播地图更新处理1022来检查利用三种模式/类型1021(即，4*4，8*8或16*16)中任何一种进行的所有帧内预测块。与帧间预测块检查类似，首先，识别当前块的相邻块。该识别基于如上所述的帧内预测模式。这里，在框1201中，关注可能影响当前分区的像素预测的相邻块，并且这样的相邻块被称为所识别的相邻块。在框1202中采样并且在框1204中检查该列表中的每一个传播地图。如果任何所识别的相邻块与一个传播地图重叠，则在框1206中将当前节点添加到该传播地图。
图8中示出的最后步骤是码片制成850。这可以是一旦码片已经被解码AVC解码器810的标准步骤。传播地图构造的最后步骤是传播地图的输出。该步骤被集成到码片制成850中。优选的包含像素值的解码yuv文件还可以被输出以进行进一步的分析。
重要的是注意到在上述算法中，可以设想对于每一个宏块分区遍历l个传播地图的所有节点的需要。这可能招致高的计算成本。为了加速该处理，基于两种观测来公式化改进的算法。首先是当前分区的父分区(parents)(所识别的相邻块)可能仅驻留在宏块的相同行内或上一行内；这样，在父分区搜索期间可以排除距离当前块多于一行的列表i的节点。其次是如果列表i对于一整行宏块都未被更新，则对可改变的块的修改的影响将不能传播到码片中的剩余块。因此，传播地图i完成并且不需要对于当前码片内的未来块检查该传播地图i。在图13中呈现修改后的算法，其反映传播更新处理1008和1022。
为了根据帧内预测和帧间预测更新传播地图，图13在框1301以首先识别可能影响当前分区的像素预测的相邻块开始。这样的相邻块被称为所识别的相邻块。然后在框1302中采样该列表中的传播地图。如果在判定框1303中在最后一行宏块中没有更新，则采样下一传播地图。如果存在更新，则在框1304执行检查。如果任何所识别的相邻块重叠或匹配在当前采样的传播地图i中的当前和最后行中的块，则处理前进到框1305中的比较步骤。如果原始的运动矢量和修改后的运动矢量不同，则在框1306将具有修改后的运动矢量的当前节点连同来自帧内预测的更新一起添加到传播地图。
在H.264/MPEG-4 AVC(AVC)标准的背景下使用在本申请中描述的几种实现方式和特征。然而，可能在另一标准(现有的或将来的)的背景下、或者在不涉及标准的背景下使用这些实现方式和特征。然而，所描述的实现方式的各特征和各方面还可以被适配用于其他的实现方式。
这里描述的实现方式可以例如在方法或处理、装置、软件程序、数据流或信号中实现。即使仅仅在单种实现方式形式的背景下讨论(例如，仅作为方法讨论)，所讨论的实现方式或特征也可以以其他形式实现(例如，装置或程序)。装置可以以例如适当硬件、软件和固件来实现。方法可以在例如诸如计算机或其他处理设备之类的装置中实现。另外，方法可以通过处理设备或其他装置执行指令来实现，并且这样的指令可以存储在诸如CD或其他计算机可读存储设备之类的计算机可读介质上、或集成电路上。此外，计算机可读介质可以存储由实现方式产生的数据值。
对于本领域技术人员应该显而易见的是，实现方式还可以产生被格式化为承载可以被例如存储或传输的信息的信号。该信息可以包括例如用于执行方法的指令、或由所描述的实现方式之一产生的数据。例如，信号可以被格式化为承载已加注水印的流、未加注水印的流、或水印加注信息。
另外，可以在编码器、解码器、处理来自解码器的输出的后处理器、或向编码器提供输入的预处理器的一个或多个中实现许多实施例。此外，根据该公开设想其他实现方式。例如，通过组合、删除、修改或增补所公开的实现方式的各种特征，可以建立其他的实现方式。

Claims (15)

1.一种在水印编码的视频中生成并使用传播地图的方法，包括：
访问被划分为码片的编码的视频数据；
编译对编码的视频数据的可能的改变的列表，其中所述改变是视频水印；
构造通过实施至少一个可能的改变将引起的、对编码的视频数据的作为结果的改变的传播地图；以及
基于传播地图施加可能的改变之一，其中传播地图是用于表示并指示潜在的改变在画面中将如何进行传播的工具。
2.如权利要求1所述的方法，其中编译步骤包括以下之一：
产生可能的改变的列表；
从现有列表中访问可能的改变；或
产生一些可能的改变并从现有列表中访问其他的可能的改变。
3.如权利要求2所述的方法，其中码片包括块，并且其中该方法还包括以下步骤：
响应于至少一个作为结果的改变，确定当所述作为结果的改变影响或包括码片中的直接块和至少一个相邻块时是否使用帧间预测来构造传播地图。
4.如权利要求1所述的方法，还包括：
响应于传播地图，确定由可能的改变之一引起的任何可视失真的程度；以及
基于可视失真的程度消除可能的改变之一。
5.如权利要求1所述的方法，还包括以下步骤：
响应于传播地图，确定可能的改变之一可能落入之前改变的传播路径的程度；以及
基于路径重叠的程度消除一个可能的改变。
6.如权利要求1所述的方法，还包括：
响应于传播地图，对于可能的改变中的每一个确定用于检测的区域；以及
基于该检测区域选择可能的改变之一。
7.如权利要求1所述的方法，还包括以下步骤：
响应于至少一个作为结果的改变，确定当所述作为结果的改变包括或影响直接块和至少一个相邻块时是否使用帧内预测构造传播地图，其中相应码片包括所述直接块和所述至少一个相邻块。
8.如权利要求3所述的方法，还包括以下步骤：
响应于传播地图，确定当所述作为结果的改变包括或影响直接块和至少一个相邻块时是否使用帧内预测构造传播地图。
9.如权利要求1所述的方法，还包括以下步骤：
响应于传播地图，确定可能的改变对保真度的影响；以及
基于保真度阈值消除可能的改变。
10.如权利要求6所述的方法，还包括：
基于传播地图，确定可能的改变对保真度的影响；
基于保真度阈值消除可能的改变；
识别所选择的码片和与其相关联的运动矢量改变，以便构造传播地图，其中所选择的码片是B码片；以及
在解码器中采用传播地图。
11.如权利要求1所述的方法，其中所述码片包括块，并且其中该方法还包括以下步骤：
基于传播地图确定可能的改变之一的传播路径与前一改变的传播路径重叠的程度，以便得出落在所述前一改变和所述可能的改变之一的传播路径之外的某个块；以及
基于对所述某个块的改变，消除一个可能的改变。
12.一种构建视频水印的传播地图的方法，包括：
访问或产生对数据的可能的改变的列表，其中所述可能的改变是视频水印，而所述数据是视频数据；
初始化(610)施加第一可能的改变将引起的对数据的修改的传播地图(P)，该传播地图是由该改变修改的数据的不同分区(p)的集合；
在逐个分区的基础上确定(620)一独立分区是否为空，空是指对该独立分区不存在改变；
如果该独立分区不为空，则确定(630)该独立分区的相邻分区(α)是否被修改；
如果独立的相邻分区(αi)被修改，则将该独立的相邻分区(αi)添加(660)到传播地图(P)；以及
通过添加被修改的独立的相邻分区来更新(670)传播地图，直到下一独立分区为空为止；
其中传播地图是用于表示并指示潜在的改变在画面中将如何进行传播的工具。
13.如权利要求12所述的方法，包括：
基于独立分区及其相邻分区的运动矢量差，来确定(640)独立的相邻分区(αi)是否被修改。
14.如权利要求12所述的方法，包括：
基于独立分区及其相邻分区的运动矢量信息，来确定(640)独立的相邻分区(αi)是否被修改。
15.如权利要求12所述的方法，包括：
基于使用独立分区(p)作为参考的帧间预测，来确定(650)独立的相邻分区(αi)是否被修改。
CN200980132406.2A 2008-08-19 2009-08-19 传播地图 Active CN102132247B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US18937008P 2008-08-19 2008-08-19
US61/189,370 2008-08-19
PCT/US2009/004715 WO2010021700A1 (en) 2008-08-19 2009-08-19 A propagation map

Publications (2)

Publication Number Publication Date
CN102132247A CN102132247A (zh) 2011-07-20
CN102132247B true CN102132247B (zh) 2014-09-10

Family

ID=41707386

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980132406.2A Active CN102132247B (zh) 2008-08-19 2009-08-19 传播地图

Country Status (7)

Country Link
US (1) US9042455B2 (zh)
EP (1) EP2318919B1 (zh)
JP (1) JP5536064B2 (zh)
KR (1) KR101612729B1 (zh)
CN (1) CN102132247B (zh)
BR (1) BRPI0916944B1 (zh)
WO (1) WO2010021700A1 (zh)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102187583B (zh) 2008-08-19 2013-09-11 汤姆森特许公司 基于上下文的自适应二进制算术编码（cabac）的视频流兼容性
US9042455B2 (en) 2008-08-19 2015-05-26 Thomson Licensing Propagation map
KR101611375B1 (ko) * 2008-08-19 2016-04-11 톰슨 라이센싱 압축된 비디오에서 구문 요소의 ｃａｂａｃ/ａｖｃ 준수 워터마킹
CN102187673B (zh) * 2008-08-19 2014-07-30 汤姆森特许公司 亮度评估
CN102132564B (zh) * 2008-08-20 2013-09-11 汤姆森特许公司 用于压缩视频的水印制作的水印选取
TW201121331A (en) * 2009-12-10 2011-06-16 Novatek Microelectronics Corp Picture decoder
BR112012019745B1 (pt) 2010-02-09 2020-11-10 Contentarmor Método de detecção de marca dágua utilizando um mapa de propagação
CN102939751B (zh) * 2010-03-31 2016-03-16 法国电信 通过向前运动补偿、对应的流和计算机程序实施预测的用于对图像序列进行编码和解码的方法和装置
EP2564591A4 (en) 2010-04-29 2014-06-11 Thomson Licensing PROCESS FOR PROCESSING AN IMAGE
KR20120016991A (ko) * 2010-08-17 2012-02-27 오수미 인터 프리딕션 방법
US9049455B2 (en) * 2010-12-28 2015-06-02 Panasonic Intellectual Property Corporation Of America Image coding method of coding a current picture with prediction using one or both of a first reference picture list including a first current reference picture for a current block and a second reference picture list including a second current reference picture for the current block
US10171813B2 (en) 2011-02-24 2019-01-01 Qualcomm Incorporated Hierarchy of motion prediction video blocks
EP3703368B1 (en) 2011-03-06 2022-11-02 LG Electronics Inc. Intra prediction method for chrominance blocks
US9366448B2 (en) 2011-06-20 2016-06-14 Honeywell International Inc. Method and apparatus for configuring a filter change notification of an HVAC controller
US8892223B2 (en) 2011-09-07 2014-11-18 Honeywell International Inc. HVAC controller including user interaction log
US9002523B2 (en) 2011-12-14 2015-04-07 Honeywell International Inc. HVAC controller with diagnostic alerts
US10747243B2 (en) 2011-12-14 2020-08-18 Ademco Inc. HVAC controller with HVAC system failure detection
US9206993B2 (en) 2011-12-14 2015-12-08 Honeywell International Inc. HVAC controller with utility saver switch diagnostic feature
US10533761B2 (en) 2011-12-14 2020-01-14 Ademco Inc. HVAC controller with fault sensitivity
US8902071B2 (en) 2011-12-14 2014-12-02 Honeywell International Inc. HVAC controller with HVAC system fault detection
US20130158720A1 (en) 2011-12-15 2013-06-20 Honeywell International Inc. Hvac controller with performance log
US10139843B2 (en) 2012-02-22 2018-11-27 Honeywell International Inc. Wireless thermostatic controlled electric heating system
US9442500B2 (en) 2012-03-08 2016-09-13 Honeywell International Inc. Systems and methods for associating wireless devices of an HVAC system
US10452084B2 (en) 2012-03-14 2019-10-22 Ademco Inc. Operation of building control via remote device
US9488994B2 (en) 2012-03-29 2016-11-08 Honeywell International Inc. Method and system for configuring wireless sensors in an HVAC system
US9477239B2 (en) 2012-07-26 2016-10-25 Honeywell International Inc. HVAC controller with wireless network based occupancy detection and control
US9594384B2 (en) 2012-07-26 2017-03-14 Honeywell International Inc. Method of associating an HVAC controller with an external web service
US9915742B2 (en) * 2012-12-20 2018-03-13 Exxonmobil Upstream Research Company Method and system for geophysical modeling of subsurface volumes based on label propagation
US10094585B2 (en) 2013-01-25 2018-10-09 Honeywell International Inc. Auto test for delta T diagnostics in an HVAC system
CN103152578B (zh) * 2013-03-25 2016-05-18 中国传媒大学 基于混合编解码的h.264视频水印嵌入及提取方法
US9584119B2 (en) 2013-04-23 2017-02-28 Honeywell International Inc. Triac or bypass circuit and MOSFET power steal combination
US9806705B2 (en) 2013-04-23 2017-10-31 Honeywell International Inc. Active triac triggering circuit
US10811892B2 (en) 2013-06-28 2020-10-20 Ademco Inc. Source management for a power transformation system
US11054448B2 (en) 2013-06-28 2021-07-06 Ademco Inc. Power transformation self characterization mode
US9983244B2 (en) 2013-06-28 2018-05-29 Honeywell International Inc. Power transformation system with characterization
US9673811B2 (en) 2013-11-22 2017-06-06 Honeywell International Inc. Low power consumption AC load switches
US9857091B2 (en) 2013-11-22 2018-01-02 Honeywell International Inc. Thermostat circuitry to control power usage
US10649418B2 (en) 2013-12-11 2020-05-12 Ademco Inc. Building automation controller with configurable audio/visual cues
US9628074B2 (en) 2014-06-19 2017-04-18 Honeywell International Inc. Bypass switch for in-line power steal
EP2960854A1 (en) * 2014-06-27 2015-12-30 Thomson Licensing Method and device for determining a set of modifiable elements in a group of pictures
US9683749B2 (en) 2014-07-11 2017-06-20 Honeywell International Inc. Multiple heatsink cooling system for a line voltage thermostat
KR102273670B1 (ko) * 2014-11-28 2021-07-05 삼성전자주식회사 움직임 보상 정보를 수정하는 데이터 처리 시스템과 데이터 처리 방법
US10488062B2 (en) 2016-07-22 2019-11-26 Ademco Inc. Geofence plus schedule for a building controller
MX2020013646A (es) * 2018-06-27 2021-03-25 Panasonic Ip Corp America Metodo de codificacion de datos tridimensionales, metodo de decodificacion de datos tridimensionales, dispositivo codificador de datos tridimensionales y dispositivo decodificador de datos tridimensionales.
KR20240050597A (ko) 2022-10-12 2024-04-19 주식회사 케이티 공간 모델을 생성하는 장치, 방법 및 컴퓨터 프로그램

Family Cites Families (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US637960A (en) * 1899-05-20 1899-11-28 Market Street Railway Company Electrically-operated switch mechanism.
US6850252B1 (en) * 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
US5659631A (en) 1995-02-21 1997-08-19 Ricoh Company, Ltd. Data compression for indexed color image data
AU700251B2 (en) * 1995-06-06 1998-12-24 Globalstar L.P. Satellite repeater diversity resource management system
GB2308042B (en) * 1995-12-05 2000-02-16 Motorola Ltd Radio communication system
US6009176A (en) * 1997-02-13 1999-12-28 International Business Machines Corporation How to sign digital streams
JP3696723B2 (ja) * 1997-09-02 2005-09-21 ソニー株式会社 画像データ処理装置及び方法
US6373960B1 (en) 1998-01-06 2002-04-16 Pixel Tools Corporation Embedding watermarks into compressed video data
JPH11331822A (ja) 1998-05-15 1999-11-30 Matsushita Electric Ind Co Ltd 監視カメラ装置
US6553127B1 (en) * 1998-05-20 2003-04-22 Macrovision Corporation Method and apparatus for selective block processing
JPH11341450A (ja) 1998-05-26 1999-12-10 Nippon Hoso Kyokai <Nhk> 電子透かし埋め込み装置および電子透かし抽出装置
JP3156667B2 (ja) * 1998-06-01 2001-04-16 日本電気株式会社 電子透かし挿入システム、電子透かし特性表作成装置
JP2001119557A (ja) 1999-10-19 2001-04-27 Nippon Hoso Kyokai <Nhk> 電子透かし埋め込み装置および方法
JP2001275115A (ja) 2000-03-23 2001-10-05 Nec Corp 電子すかしデータ挿入装置および検出装置
US6687384B1 (en) * 2000-03-27 2004-02-03 Sarnoff Corporation Method and apparatus for embedding data in encoded digital bitstreams
US7346776B2 (en) * 2000-09-11 2008-03-18 Digimarc Corporation Authenticating media signals by adjusting frequency characteristics to reference values
JP3431593B2 (ja) * 2000-10-31 2003-07-28 株式会社東芝 コンテンツ生成装置、電子透かし検出装置、コンテンツ生成方法、電子透かし検出方法及び記録媒体
US7113612B2 (en) * 2001-03-22 2006-09-26 Victor Company Of Japan, Ltd. Apparatus for embedding and reproducing watermark into and from contents data
US20030070075A1 (en) * 2001-10-04 2003-04-10 Frederic Deguillaume Secure hybrid robust watermarking resistant against tampering and copy-attack
JP4276395B2 (ja) 2001-10-19 2009-06-10 セイコーエプソン株式会社 画像処理装置および画像処理プログラム
JP4079620B2 (ja) 2001-10-30 2008-04-23 ソニー株式会社 電子透かし埋め込み処理装置、および電子透かし埋め込み処理方法、並びにコンピュータ・プログラム
JP3854502B2 (ja) 2001-12-12 2006-12-06 興和株式会社 電子透かしの埋め込み方法および抽出方法
JP4107851B2 (ja) 2002-02-13 2008-06-25 三洋電機株式会社 電子透かし埋め込み方法およびその方法を利用可能な符号化装置と復号装置
US7656950B2 (en) * 2002-05-29 2010-02-02 Diego Garrido Video interpolation coding
US7003131B2 (en) * 2002-07-09 2006-02-21 Kaleidescape, Inc. Watermarking and fingerprinting digital content using alternative blocks to embed information
AU2003281133A1 (en) * 2002-07-15 2004-02-02 Hitachi, Ltd. Moving picture encoding method and decoding method
WO2004043074A1 (en) * 2002-11-04 2004-05-21 Tandberg Telecom As Inter-network and inter-protocol video conference privacy method, apparatus and computer program product
JP4024153B2 (ja) 2003-01-10 2007-12-19 三洋電機株式会社 電子透かし埋め込み方法およびその方法を利用可能な符号化装置と復号装置
US20060075239A1 (en) 2003-01-23 2006-04-06 Koninklijke Philips Electronics, N.V. Embedding multiple watermarks
FR2853792A1 (fr) * 2003-04-11 2004-10-15 France Telecom Procede de tatouage d'une sequence video a selection adaptative de la zone d'insertion du tatouage, procede de detection, dispositifs, support de donnees et programmes d'ordinateur correspondants
DE602004022548D1 (de) * 2003-06-25 2009-09-24 Thomson Licensing Decodierungsverfahren und -vorrichtung zum erkennen von wasserzeichen in einem komprimierten videobitstrom
US6900748B2 (en) * 2003-07-17 2005-05-31 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Method and apparatus for binarization and arithmetic coding of a data value
US6894628B2 (en) * 2003-07-17 2005-05-17 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and methods for entropy-encoding or entropy-decoding using an initialization of context variables
US7188254B2 (en) 2003-08-20 2007-03-06 Microsoft Corporation Peer-to-peer authorization method
EP1515506A1 (en) 2003-09-09 2005-03-16 Alcatel A method of establishing a data packet communication session between a terminal arrangements of a data packet network and an exchange therefore
US7646881B2 (en) * 2003-09-29 2010-01-12 Alcatel-Lucent Usa Inc. Watermarking scheme for digital video
US7286710B2 (en) * 2003-10-01 2007-10-23 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Coding of a syntax element contained in a pre-coded video signal
US7379608B2 (en) 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
US7693330B2 (en) * 2004-03-15 2010-04-06 Vincent So Anti-piracy image display methods and systems with sub-frame intensity compensation
KR100647948B1 (ko) * 2004-03-22 2006-11-17 엘지전자 주식회사 적응적 인트라 매크로 블록 리프레쉬 방법
US7706663B2 (en) * 2004-10-12 2010-04-27 Cyberlink Corp. Apparatus and method for embedding content information in a video bit stream
US7159501B1 (en) * 2004-11-08 2007-01-09 The United States Of America As Represented By The Secretary Of The Navy Stackable in-line surface missile launch system for a modular payload bay
GB2421134A (en) * 2004-12-09 2006-06-14 Sony Uk Ltd Detection of payload data from a watermarked image by calculation of payload probability values
JP2006287364A (ja) 2005-03-31 2006-10-19 Toshiba Corp 信号出力装置及び信号出力方法
JP4498970B2 (ja) 2005-04-15 2010-07-07 三菱電機株式会社 符号化データの変更装置、変更方法及び変更プログラム
US7630512B2 (en) * 2005-05-26 2009-12-08 Alcatel-Lucent Usa Inc. Method for performing recoverable video and image watermarking which survives block-based video and image compression
KR100995226B1 (ko) 2005-07-22 2010-11-17 미쓰비시덴키 가부시키가이샤 화상 부호화 장치, 화상 복호 장치, 화상 부호화 방법, 화상 복호 방법, 화상 부호화 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체, 화상 복호 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체
US20080165849A1 (en) * 2005-07-22 2008-07-10 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
JP4360363B2 (ja) 2005-08-19 2009-11-11 日本電信電話株式会社 電子透かし埋め込み方法及び装置及びプログラム
US7778261B2 (en) * 2005-11-15 2010-08-17 ArcSoft (Shanghai) Technology Using PSTN to communicate IP address for point-to-point text, voice, video, or data communication
EP1958430A1 (en) * 2005-12-05 2008-08-20 Thomson Licensing Watermarking encoded content
JP4580898B2 (ja) 2006-06-05 2010-11-17 株式会社東芝 電子透かし埋め込み装置
CN101461248B (zh) * 2006-06-09 2011-04-06 汤姆森许可贸易公司 自适应地确定用于视频图像编码的比特预算的方法和设备
US8401535B2 (en) * 2006-06-19 2013-03-19 Samsung Electronics Co., Ltd. System, a method, and an apparatus for sharing an updated content with peers
CN101502123B (zh) 2006-11-30 2011-08-17 松下电器产业株式会社 编码装置
WO2008118146A1 (en) 2007-03-23 2008-10-02 Thomson Licensing Modifying a coded bitstream
US8824567B2 (en) * 2007-04-04 2014-09-02 Ittiam Systems (P) Ltd. Method and device for tracking error propagation and refreshing a video stream
KR101518999B1 (ko) 2007-06-14 2015-05-12 톰슨 라이센싱 코딩된 비트스트림의 수정
KR101571573B1 (ko) 2007-09-28 2015-11-24 돌비 레버러토리즈 라이쎈싱 코오포레이션 부가적인 정보 역량을 이용한 멀티미디어 코딩 및 디코딩
KR100969412B1 (ko) * 2008-03-18 2010-07-14 삼성전기주식회사 다층 인쇄회로기판 및 그 제조방법
WO2010003152A1 (en) * 2008-07-03 2010-01-07 Verimatrix, Inc. Efficient watermarking approaches of compressed media
US9042455B2 (en) 2008-08-19 2015-05-26 Thomson Licensing Propagation map
CN102187673B (zh) * 2008-08-19 2014-07-30 汤姆森特许公司 亮度评估
CN102132564B (zh) 2008-08-20 2013-09-11 汤姆森特许公司 用于压缩视频的水印制作的水印选取
DE102009004827B4 (de) * 2009-01-13 2017-02-02 Benteler Automobiltechnik Gmbh Stoßfänger
PL2413612T3 (pl) * 2010-07-30 2015-07-31 Deutsche Telekom Ag Sposoby i urządzenia do czasowej synchronizacji między strumieniem bitów wideo i wyjściową sekwencją wideo
GB2495467B (en) * 2011-09-02 2017-12-13 Skype Video coding
GB2495469B (en) * 2011-09-02 2017-12-13 Skype Video coding

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
H.264/AVC video authentication using skipped macroblocks for an erasable watermark;Profrock, D等;《Visual Communications and Image Processing 》;20051231;第5960卷;第1480－1489页 *
Profrock, D等.H.264/AVC video authentication using skipped macroblocks for an erasable watermark.《Visual Communications and Image Processing 》.2005,第5960卷

Also Published As

Publication number Publication date
BRPI0916944B1 (pt) 2020-07-21
KR20110048044A (ko) 2011-05-09
JP2012500569A (ja) 2012-01-05
JP5536064B2 (ja) 2014-07-02
CN102132247A (zh) 2011-07-20
EP2318919A4 (en) 2012-01-25
US20110176610A1 (en) 2011-07-21
BRPI0916944A2 (pt) 2015-11-24
US9042455B2 (en) 2015-05-26
WO2010021700A1 (en) 2010-02-25
KR101612729B1 (ko) 2016-04-15
EP2318919A1 (en) 2011-05-11
EP2318919B1 (en) 2018-10-24

Similar Documents

Publication Publication Date Title
CN102132247B (zh) 传播地图
US11785229B2 (en) Picture coding supporting block partitioning and block merging
KR101633443B1 (ko) 휘도 평가
CN106416243A (zh) 利用基于帧内图像区块复制预测的视频编码方法
TWI621351B (zh) 影像預測解碼裝置、影像預測解碼方法及影像預測解碼程式
KR102267770B1 (ko) 픽쳐들의 그룹에서 변경가능 엘리먼트들의 세트를 결정하기 위한 방법 및 디바이스
CN115152227A (zh) 并行处理的选择性切换

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160811

Address after: Rennes

Patentee after: Kingtype Elmore

Address before: I Si Eli Murli Nor, France

Patentee before: Thomson Licensing Corp.