CN101485200B - 视频信号处理设备和视频信号处理方法 - Google Patents

视频信号处理设备和视频信号处理方法 Download PDF

Info

Publication number
CN101485200B
CN101485200B CN200780025668XA CN200780025668A CN101485200B CN 101485200 B CN101485200 B CN 101485200B CN 200780025668X A CN200780025668X A CN 200780025668XA CN 200780025668 A CN200780025668 A CN 200780025668A CN 101485200 B CN101485200 B CN 101485200B
Authority
CN
China
Prior art keywords
video signal
epb
encoded video
countermeasure
incident
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200780025668XA
Other languages
English (en)
Other versions
CN101485200A (zh
Inventor
鹿岛浩司
隈智
江岛公志
北村卓也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101485200A publication Critical patent/CN101485200A/zh
Application granted granted Critical
Publication of CN101485200B publication Critical patent/CN101485200B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明涉及视频信号处理设备和视频信号处理方法、视频信号编码设备和视频信号编码方法以及程序，其当编码视频信号被智能渲染编辑时可解决有关的EPB问题。在提取处理过程中，如果H.264/AVC流中已经采取了EPB问题出现防止对策，则执行智能渲染编辑而不监视EPB问题的出现。如果没有采取所述对策，则在执行智能渲染编辑的同时还监视EPB问题的出现。并且，当发生插入EPB的EPB问题时，相应于所插入的EPB的填充符或预定参数被删除。当发生删除EPB的EPB问题时，相应于被删除的EPB的填充符被插入。本发明可应用于使用H.264/AVC方案处理视频信号的装置。

Description

视频信号处理设备和视频信号处理方法
技术领域
本发明涉及视频信号处理设备和视频信号处理方法、视频信号编码设备和视频信号编码方法以及程序，并且尤其涉及允许无需完全解码就能以逐帧画面为基础编辑编码视频信号的视频信号处理设备和视频信号处理方法、视频信号编码设备和视频信号编码方法以及程序。
背景技术
例如，在进行编辑从而从使用MPEG2或类似方法压缩和编码的视频信号(此后称为编码视频信号)中提取预定片段的情况下，当以GOP(Group of Pictures，画面组)为单位执行提取时，可以不解码所述编码视频信号以相对较小的计算量进行编辑。
另一方面，当以比GOP更精细的单位，即以帧为单位执行提取时，由于画面之间引用关系的存在，需要进行解码处理。最简单的方法是在解码所有编码数据之后提取预定片段。
然而，即使所有编码数据都被解码，在提取之后的重新编码是必要的，从而可能导致额外计算并增加了完成该系列处理所需的时间。
因此，有一种叫做智能渲染(smart rendering)编辑的技术，作为尽可能快速地进行编辑从而从编码视频信号中以帧为单位提取预定片段的方法(参见，例如专利文档1)。
在智能渲染编辑中，例如，进行编辑以从如图1的部分A所示的顺序编码视频信号中提取任意片段的情况下，只有分别包括所提取片段的前端和末端的GOP被单独解码以提取所期望的帧，所述帧被重新编码。
此外，在不同于位于所提取片段前端的GOP和末端的GOP的中间部分，编码视频信号如同不经过解码就被提取。
因此，如图1B部分所示，相应于智能渲染编辑之后的所提取片段的编码视频信号中，被重新编码的各部分(重新编码部分)以及夹在重新编码部分之间且没有被重新编码的部分(中间部分)。注意到在重新编码部分和中间部分都发生编码视频信号内预定参数的重写。
同时，当前情况下，MPEG2方法被用作标准视频信号压缩-编码方法。然而，将来期望可提供比MPEG2方法更高的压缩比而不降低图像质量的H.264/AVC方法将更加流行。
在H.264/AVC方法中，详细说明了在如图2的部分A所示的预定数据序列(0x00，0x00，0xXX(其中XX为00，01，02或03))被包括在通过编码视频信号获得的编码串中，如图2的部分B所示，被称为EPB(Emulation Prevention Byte，竞争阻止字节)的0x03被插入0x00、0x00和0xXX之间，以阻止在H.264/AVC方法中指定的开始代码(0x00，0x00，0x01)的伪发生。因此，在H.264/AVC编码的视频信号中，预定数据序列中插入有EPB。
专利文档1：日本未审查专利申请公开号：2004-104361
发明内容
技术问题
如上所述，当编码视频信号受到智能渲染编辑时，发生参数的重写。因此，当H.264/AVC编码视频信号受到智能渲染编辑时，也发生参数的重写。参数的重写可导致预定数据序列被修改，使得已经被插入的EPB消失(因为不再需要)，或者相反地，使得EPB被插入(因为出现预定数据序列)。以这种方式，由智能渲染编辑导致的EPB的消失或EPB的插入在此后被称作EPB问题。
在出现EPB问题的情况下，编码视频信号的数据长度改变。因此，经过智能渲染编辑后的编码视频信号将违反预定标准并且不能满足虚拟参考解码器(Hypothetical Reference Decoder，HRD)条件。
因此，期望发展一种当编码视频信号受到智能渲染编辑时防止出现EPB问题的方法，以及一种解决已经出现的EPB问题的方法。
本发明是在这种情况下做出的，当编码视频信号受到智能渲染编辑时，意图防止出现EPB问题，或解决已经出现的EPB问题。
技术方案
本发明的第一方面的视频信号处理设备是视频信号处理设备，其对以编码视频信号的帧为单位指定的片段执行智能渲染编辑，包括：确定装置，用于确定在输入的编码视频信号中是否已经采取了EPB问题出现防止对策；智能渲染编辑装置，用于解码和重新编码以所输入的编码视频信号的帧为单位指定的片段的前端部分和末端部分，以及将所述片段的不包含在所述前端部分或所述末端部分中的中间部分直接输出而不解码所述中间部分；以及EPB问题解决装置，用于检测表示第一事件或第二事件的EPB问题的出现，所述第一事件中，通过根据重新编码而重写编码视频信号中的预定参数，新EPB被插入到经过编辑的编码视频信号中，所述第二事件中，编辑之前已经存在的EPB消失，当发生所述第一事件时，删除预先插入到所述编码视频信号中的相应于所述插入的EPB的填充符或预定数据，以及当所述第二事件发生时，将相应于已经消失的EPB的填充符插入所述编码视频信号中，其中当通过所述确定装置确定所输入的编码视频信号中已经采取了EPB问题出现防止对策时，所述EPB问题解决装置的处理过程被省略。
确定装置可基于表示是否已经采取了EPB问题出现防止对策的信息来确定是否已经采取了EPB问题出现防止对策，所述信息包含在输入的编码视频信号中。
EPB问题出现防止对策可包括对预定参数的比特长度限制。
本发明第一方面的视频信号处理方法是视频信号处理设备的视频信号处理方法，所述视频信号处理设备对以编码视频信号的帧为单位指定的片段执行智能渲染编辑，包括步骤：确定所输入的编码视频信号中是否已经采取了EPB问题出现防止对策；无论是否已经采取所述EPB问题出现防止对策，都执行智能渲染编辑，其中以所输入的编码视频信号的帧为单位指定的片段的前端部分和末端部分被解码和重新编码，以及其中没有包括在所述片段的前端部分或末端部分中的中间部分未经解码而被直接输出；以及仅当确定没有采取EPB问题出现防止对策时，才执行如下问题解决过程：检测表示第一事件或第二事件的EPB问题的出现，所述第一事件中，通过根据所述重新编码而重写所述编码视频信号中的预定参数，新EPB被插入到经过编辑的编码视频信号中，所述第二事件中，在编辑之前已经存在的EPB消失，当所述第一事件发生时，删除预先插入所述编码视频信号中的相应于所述插入的EPB的填充符或预定数据，以及当所述第二事件发生时，将相应于已经消失的EPB的填充符插入到所述编码视频信号中。
本发明第一方面的程序是用于控制视频信号处理设备的程序，视频信号处理设备对以编码视频信号的帧为单位指定的片段执行智能渲染编辑，该程序使计算机执行包括如下步骤的处理：确定所输入的编码视频信号中是否已经采取了EPB问题出现防止对策；无论是否已经采取所述EPB问题出现防止对策，都执行智能渲染编辑，其中以所输入的编码视频信号的帧为单位指定的片段的前端部分和末端部分被解码和重新编码，以及其中未包含在片段的前端部分或末端部分中的中间部分未经解码而被直接输出；以及仅当确定没有采取EPB问题出现防止对策时，才执行如下EPB问题解决过程：检测表示第一事件或第二事件的EPB问题的出现，所述第一事件中，通过根据所述重新编码而重写所述编码视频信号中的预定参数，新EPB被插入到经过编辑的编码视频信号中，所述第二事件中，在编辑之前已经存在的EPB消失，当所述第一事件发生时，删除预先插入所述编码视频信号中的相应于所述插入的EPB的填充符或预定数据，以及当所述第二事件发生时，将相应于已经消失的EPB的填充符插入到所述编码视频信号中。
在本发明的第一方面，确定在输入的编码视频信号中是否采取了EPB问题出现防止对策；仅当确定没有采取EPB问题出现防止对策时，EPB问题的出现表示第一事件，其中通过根据重新编码重写编码视频信号中的预定参数，新EPB被插入到经过编辑的编码视频信号中，或者表示第二事件，其中检测到编辑之前已经存在的EPB消失；以及当发生第一事件时，预先插入编码视频信号中的相应于插入的EPB的填充符或预定数据被删除。可替换地，当发生第二事件时，执行EPB问题解决进程，其中相应于已经消失的EPB的填充符被插入到编码视频信号中。
本发明第二方面的视频信号编码设备是根据预定编码方案对视频信号进行编码的视频信号编码设备，包括设置装置，用于设置包含在作为编码结果而获得的编码视频信号中的预定参数的比特长度在小于预定编码方案所允许的范围内，作为智能渲染编辑中的EPB问题出现防止对策；和编码装置，用于根据所述设置的结果而编码所述视频信号，以及在作为编码结果而获得的所述编码视频信号中包括表示预定参数的比特长度受到限制的信息。
所述设置装置能够模拟紧接在所述编码视频信号中所述预定参数之前的数据序列，并且能够设置所述预定参数的比特长度，使得无论所述预定参数被设置为何值，都不会出现其中将要插入EPB的数据序列。
本发明第二方面的视频信号编码方法是视频信号编码设备的视频信号编码方法，视频信号编码设备根据预定的编码方案对视频信号进行编码，包括以下步骤：设置包含在作为编码结果而获得的编码视频信号中的预定参数的比特长度在小于预定编码方案所允许的范围内，作为智能渲染编辑中的EPB问题出现防止对策；以及根据所述设置的结果而编码所述视频信号，以及在作为编码结果而获得的所述编码视频信号中包括表示预定参数的比特长度受到限制的信息。
本发明第二方面的程序是用于控制视频信号编码设备的程序，视频信号编码设备根据预定的编码方案对视频信号进行编码，所述程序使得计算机执行包括下述步骤的处理：设置包含在作为编码结果而获得的编码视频信号中的预定参数的比特长度在小于预定编码方案所允许的范围内，作为智能渲染编辑中的EPB问题出现防止对策；以及根据所述设置的结果而编码所述视频信号，以及在作为编码结果而获得的所述编码视频信号中包括表示预定参数的比特长度受到限制的信息。
在本发明的第二方面，作为智能渲染编辑中的EPB问题出现防止对策，作为编码结果而获得的编码视频信号中包含的预定参数的比特长度被设置在小于预定编码所允许的范围的范围内；根据设置的结果对视频信号进行编码；以及表示所述预定参数的比特长度受到限制的信息被包括在作为编码结果而得到的编码视频信号中。
有益效果
根据本发明的第一方面，可以解决当编码视频信号被智能渲染编辑时出现的EPB问题。
根据本发明的第二方面，可对视频信号进行编码使得当执行智能渲染编辑时不引起EPB问题。
附图说明
图1是解释智能渲染编辑的图；图2是解释EPB问题的图；图3是示出本发明所应用的编辑设备的示例结构的方块图；图4是解释编辑设备所执行的提取处理过程的流程图；图5是示出通用个人计算机的示例结构的方块图；图6是解释作为EPB问题出现防止对策的参数比特长度设置过程。
附图标记
10-编辑设备，11-操作输入单元，12-控制单元，13-切换单元，14-解码器，15-编码器，16-重写单元，50-个人计算机，51-CPU
具体实施方式
下面将参照附图具体解释本发明所应用的具体实施例。
图3示出了编辑设备的示例结构，其构成了本发明的一个实施例。编辑设备10被设计为通过使用智能渲染编辑从前一级输入的根据H.264/AVC方案编码的编码视频信号(也描述为H.264/AVC流)中提取以帧为单位的任意指定片段。
编辑设备10由下述构成：操作输入单元11，其输入用户的操作以指定提取片段；控制单元12，其控制编辑设备10的各个单元；切换单元13，其在H.264/AVC流中将包括位于提取片段前端的帧的GOP和包括位于提取片段末端的帧的GOP输出到重新渲染路径，并且提取片段中的不被重新编码的中间部分输出到智能渲染路径；解码器14，其解码通过重新渲染路径的H.264/AVC流输入；编码器15，其再次对包含在作为解码的结果而获得的视频信号的提取片段中的画面进行编码；和重写单元16，其根据智能渲染编辑来重写重新编码部分和中间部分中的预定参数，以将所述结果输出至后续级。
注意到编辑设备10的输入被认为包括，采取了应对实行智能渲染编辑时出现的EPB问题的对策(此后称为EPB问题出现防止对策，其详细信息将在下面描述)的H.264/AVC流，以及没有采取EPB问题出现防止对策的H.264/AVC流。假设采取了EPB问题出现防止对策的H.264/AVC流中嵌入有表示该事实的智能渲染指示符。
需要在重写单元16中重写的参数包括至少如下三种参数：cpb_removal_delay@Picture Timing(画面时序)SEI(此后称作参数P1)frame_num@Slice header(片段首部)(此后称作参数P2)pic_order_cnt_lsb@Slice header(此后称作参数P3)
上述参数P1至P3的比特长度分别由参数P1’至P3’指定如下：参数P1’：cpb_removal_delay_length_minus1@HRD参数参数P2’：log2_max_frame_num_minus4@Sequence parameterset(序列参数设置)参数P3’：log2_max_pic_order_cnt_lsb_minus4@Sequenceparameter set(序列参数设置)
这样，制订了EPB问题出现防止对策，从而将每个参数P1至P3的比特长度限制在小于H.264/AVC方法所允许的比特长度范围内，使得无论参数P1至P3被重写为何值，都不会出现EPB问题。
注意除了上述参数P1至P3的比特长度限制以外，可增加下面的1至3项作为EPB问题出现防止对策：1.统一设置CpbSize和TraceBitRate，使得在例如LP、SP和HQ的单个模式中可执行智能渲染编辑而无需重写。2.插入SEI。缓冲周期SEI/每个GOP恢复点SEI/每个GOP画面时序SEI/每个画面3.插入HRD参数。
注意下面将参照图5和图6来描述为每个参数P1至P3设置比特长度限制的方法。
接下来，将参照参数图4的流程图解释由编辑设备10执行的从H.264/AVC流中提取以帧为单位指定的任意片段的处理(此后简称提取处理)。
注意，开始该处理之前，假设用户已经使用操作输入单元11指定了将从顺序H.264/AVC流中提取的片段，并且已经将该操作的信息通知所述控制单元12。
在步骤S1，切换单元13根据控制单元12的控制来检测嵌入在前一级输入的H.264/AVC流中的智能渲染指示符，以确定是否已经采取了EPB问题出现防止对策。如果确定已经采取了EPB问题出现防止对策，则处理继续到步骤S2，其中执行智能渲染编辑。连续地执行智能渲染编辑，直到在步骤S3确定编辑处理结束为止。
具体地说，通过使用切换单元13，通过重新渲染路径将包括位于前一级输入的H.264/AVC流的提取片段前端的帧的GOP输出到解码器14，并被解码器14解码。作为解码结果而获得的视频信号被输出至编码器15。包含在作为解码结果而获得的视频信号的提取片段中的画面被编码器15提取和再次编码。结果被输出至重写单元16，并且由重写单元16重写预定参数，其然后被输出至下一级。注意，由于将重写参数的比特长度受到EPB问题出现防止对策的限制，不会出现EPB问题。
然后，从前一级输入的H.264/AVC流中的中间部分(其跟随着GOP输出到重新渲染路径)通过智能渲染路径被输出至重写单元16。尽管使用重写单元16将预定参数以类似于重新编码部分的方式重写，但是因为将被重写的参数的比特长度受到EPB问题出现防止对策的限制，所以不会出现EPB问题。
随后，跟随中间部分通过智能渲染路径输出的GOP通过重新渲染路径输出至解码器14，并且被解码器14解码。作为解码结果而获得的视频信号被输出至编码器15。包含在作为解码结果而获得的视频信号的提取片段中的帧被编码器15提取和再次编码。结果被输出至重写单元16，并且由重写单元16重写预定参数。注意，由于将要重写的参数的比特长度受到EPB问题出现防止对策的限制，所以不会出现EPB问题。因此，智能渲染编辑被执行而不会导致EPB问题。
相反，如果在步骤S1确定在前一级输入的H.264/AVC流中没有采取EPB问题出现防止对策，处理进行至步骤S4。可能存在即使不采用EPB问题出现防止对策也不会出现EPB问题的情况。因此，在步骤S4，执行智能渲染编辑。然后，所述处理进行到步骤S6，直到在步骤S5确定智能渲染编辑结束。
在步骤S6，重写单元16确定是否由于在智能渲染编辑处理过程中重写参数而出现EPB问题。如果确认没有出现EPB问题，则处理返回步骤S4并且重复后续处理。如果在步骤S6确定出现了EPB问题，则处理进行至步骤S7。
在步骤S7，重写单元16确定出现的EPB问题是由插入EPB还是删除EPB导致的。如果确定是由插入EPB导致的，则处理进行至步骤S8。在步骤S8，重写单元16确定H.264/AVC流中是否存在相应于至少所述插入的EPB的可删除的填充符。如果确定存在填充符，处理进行至步骤S9，其中相应于插入的EPB的填充符被从H.264/AVC流中删除。因此，解决了插入EPB引发的EPB问题，并且智能渲染编辑结束。
另一方面，如果在步骤S7确定出现的EPB问题是由于删除EPB而引发的，则处理进行至步骤S10。在步骤S10，重写单元16确定相应于被删除的EPB的填充符是否可被插入到该H.264/AVC流中。如果确定可以插入填充符，处理进行至步骤S11，其中相应于被删除的EPB的填充符被插入该H.264/AVC流中。因此，解决了EPB消失的EPB问题，并且智能渲染编辑结束。
注意，如果在步骤S8确定H.264/AVC流中没有相应于至少所述插入的EPB的可删除填充符，或者如果在步骤S10确定相应于所述删除的EPB的填充符无法插入H.264/AVC流中，则不可能解决所出现的EPB问题。因此，当前正在处理的智能渲染编辑被放弃，并且处理进行至步骤S12。在步骤S12，当前正在处理的智能渲染编辑被停止，并且全部提取片段从切换单元13输出到重新渲染路径，以解码和重新编码全部的提取片段。相应的，重新渲染编辑结束。
然而，如果在步骤S8还确定在H.264/AVC流中不存在相应于至少所述插入的EPB的可删除填充符，只要不破坏标准，可以通过仅减少插入其中的具有冗余参数等的EPB来实现智能渲染编辑。
这里，待删除的冗余参数的例子可包括具有表示该参数存在的标志信息的例子。通过将表示该参数存在的标志信息从1(存在)修改为0(不存在)，该参数被视作不存在，并且可以类似于填充符的方式删除该参数的比特长度。
另一个例子为具有指明参数的比特长度的比特长度信息的例子。通过将某个参数的比特长度信息修改为短值，可以类似于填充符的方式删除原始比特长度和变化后的比特长度之间的差。
如上面解释的那样，根据编辑设备10的插入处理，可以解决当编码视频信号被智能渲染编辑时出现的EPB问题，并且，当不可能解决该EPB问题时，可使用重新渲染编辑替代。
接下来，将参照图5和图6解释设置参数P1至P3的比特长度的过程，其作为EPB问题出现防止对策而被限制。
通过，例如图5所示架构的通用目的个人计算机来执行程序，从而实现设置参数P1至P3的比特长度的过程。
个人计算机50包括内建CPU(中央处理单元)51。CPU 51通过总线54连接到输入/输出接口55。总线54连接到ROM(只读存储器)52和RAM(随机存取存储器)53。
输入/输出接口55连接到下列单元：输入单元56，其包括例如键盘或鼠标的输入装置，用户通过该输入装置输入操作命令；输出单元57，包括诸如CRT(阴极射线管)显示器或LCD(液晶显示器)的显示器，其上显示有操作屏幕等；存储单元58，其存储程序或各种数据，例如硬盘驱动器；以及通信单元59，其包括调制解调器、LAN(局域网)适配器等，并且通过诸如因特网的网络执行通信处理。输入/输出接口55还进一步连接到驱动器60，其从记录介质61读取和记录数据，所述记录介质61可以为例如磁盘(包括软盘)、光盘(包括CD-ROM(压缩盘只读存储器)和DVD(数字通用盘))、磁光盘(包括MD(迷你盘))或半导体存储器。
程序提供给个人计算机50，程序使个人计算机50执行设置参数P1至P3的比特长度的过程，且程序存储在记录介质61中，由驱动器60读取并安装在存储单元58内建的硬盘驱动器中。安装在存储单元58中的程序被从存储单元58加载到RAM53，用于根据CPU51的指令而执行，指令相应于来自用户的输入到输入单元56的命令。
注意到个人计算机50除了执行设置参数P1至P3的比特长度的处理外，还可以根据H.264/AVC方案对视频信号进行编码。
接下来，将参照图6的流程图来解释设置参数P1至P3的比特长度的过程，其通过个人计算机50执行程序而实现。注意到该处理过程为需要在智能渲染编辑中重写的每个参数P1至P3而执行。此外，在智能渲染编辑中需要重写的参数不限于上述的参数P1至P3。下面将在参数P1(cpb_removal_delay@Picture timing SEI)的上下文中进行描述。
在步骤S21，CPU 51执行的程序集中在H.264/AVC编码视频信号的数据串中的参数P1，并且指定紧接在参数P1之前的位置，在该位置已经建立了字节对准(byte alignment)。
在步骤S22，程序产生一个图案，其中连续的0x00被布置为紧接在H.264/AVC编码视频信号的数据串中指定的字节对准位置之前，以及将其作为待考虑的图案。程序还进一步产生图案，其中EPB将被插入紧接在H.264/AVC编码视频信号的数据串中指定的字节对准位置之前的位置，以及将其作为待考虑的图案。
在步骤S23，程序产生图案，其中从紧接在H.264/AVC编码视频信号的数据串中指定的字节对准位置之后的位置直到紧接在感兴趣的参数P1之前的位置，布置连续的0x00，并将其作为待考虑的图案。程序进一步产生图案，其中从紧接在H.264/AVC编码视频信号的数据串中指定的字节对准位置之后的位置直到紧接在感兴趣的参数P1之前的位置，插入EPB，并将其作为待考虑的图案。
在步骤S24，所述程序为步骤S22的处理得到的图案和步骤S23的处理得到的图案的所有组合的每一个组合，在H.264/AVC方案允许的比特长度范围内顺序地改变参数P1的值，并检查是否可以根据预定数据序列(0x00，0x00，0xXX)的出现而插入EPB。注意到参数P1发生变化的比特长度范围可比H.264/AVC方案的规范受到更多限制，同时还考虑到最短比特长度或参数P1的值的卷包(wraparound)的可用性。
在步骤S25，基于步骤24的处理，对步骤S22处理过程得到的图案和步骤S23处理过程得到的图案的任意组合，程序确定是否存在参数P1的比特长度，对其不发生根据预定数据序列的出现而插入EPB。如果确定存在对其不出现EPB插入的参数P1的比特长度，则处理进行到步骤S26，其中该比特长度被设置为作为EPB问题出现防止对策的参数P1的比特长度。然后，在编码过程中，该比特长度反映在指示参数P1的比特长度的参数P1’中。
注意到如果在步骤S25确定不存在对其不出现EPB插入的参数P1的比特长度，则步骤S26被跳过，且处理结束，而没有设置作为EPB问题出现防止对策的参数P1的比特长度。
此后，以类似于上述解释的方式来设置参数P2和P3的比特长度(或在某些情况下不设置)。
并且，在所有参数P1至P3的比特长度已经设定的情况下，设定的比特长度反映在编码视频信号包含的参数P1’至P3’中。指示已经采取了EPB问题出现防止对策的智能渲染指示符被进一步嵌入在编码视频信号中。
注意到，例如，指明参数P1至P3的比特长度的参数P1’至P3’分别具有下述值：参数P1’：cpb_removal_delay_length_minus1＝15：dpb_output_delay_length_munus1＝5参数P2’：log2_max_frame_num_minus4＝0参数P3’：log2_max_pic_order_cnt_lsb_minus4＝0
在上述参数P1’的特定例子中，分别给出了两个限制，即5和15，因为通过将紧接在cpb_removal_delay_length_minus1之后的dpb_output_delay_length_munus1中写入的值相加而获得的值必须小于或等于20。
如上面解释的那样，根据参数比特长度设置处理，可设定参数P1至P3的比特长度，使得无论它们变化到什么值，都不会出现EPB问题。
注意到，如上所述，可由个人计算机50执行程序而实现设置参数P1至P3的比特长度的处理，并且可替代地使用内建H.264/AVC编码器所配备的数字视频相机、视频记录器等以硬件或软件来执行。
本说明书中，基于程序所执行的步骤包括以这里描述的次序顺序执行的处理过程，并且还包括并行或单独执行的处理过程，而不必是顺序的。
注意到本发明的实施例不限于上述实施例，并且在不脱离本发明范围的情况下可进行各种修改。

Claims (4)

1.一种视频信号处理设备，其对以编码视频信号的帧为单位指定的片段进行智能渲染编辑，包括：
确定装置，用于确定在输入的编码视频信号中是否已经采取了EPB(竞争阻止字节)问题出现防止对策；
智能渲染编辑装置，用于解码和重新编码以所输入的编码视频信号的帧为单位指定的所述片段的前端部分和末端部分，以及将所述片段的未包含在所述前端部分或所述末端部分中的中间部分直接输出而不解码所述中间部分；以及
EPB问题解决装置，用于检测表示第一事件或第二事件的EPB问题的出现，所述第一事件中，通过根据重新编码而重写编码视频信号中的预定参数，新EPB被插入到经过编辑的视频信号中，所述第二事件中，编辑之前已经存在的EPB消失，当发生所述第一事件时，删除预先插入到所述编码视频信号中的相应于所述插入的EPB的填充符或预定数据，以及当所述第二事件发生时，将相应于已经消失的EPB的填充符插入所述编码视频信号中，
其中当通过所述确定装置确定所输入的编码视频信号中已经采取了EPB问题出现防止对策时，所述EPB问题解决装置的处理过程被省略。
2.根据权利要求1的视频信号处理设备，其中所述确定装置基于表示是否已经采取了EPB问题出现防止对策的信息来确定是否已经采取了EPB问题出现防止对策，所述信息包含在所输入的编码视频信号中。
3.根据权利要求1的视频信号处理设备，其中所述EPB问题出现防止对策包括对所述预定参数的比特长度限制。
4.一种对以编码视频信号的帧为单位指定的片段执行智能渲染编辑的视频信号处理设备的视频信号处理方法，包括步骤：
确定所输入的编码视频信号中是否已经采取了EPB(竞争阻止字节)问题出现防止对策；
无论是否已经采取所述EPB问题出现防止对策，执行智能渲染编辑，其中以所输入的编码视频信号的帧为单位指定的所述片段的前端部分和末端部分被解码和重新编码，以及其中未包含在所述片段的前端部分或末端部分中的中间部分未经解码而被直接输出；以及
仅当确定没有采取EPB问题出现防止对策时，执行如下EPB问题解决过程：检测表示第一事件或第二事件的EPB问题的出现，所述第一事件中，通过根据所述重新编码而重写所述编码视频信号中的预定参数，新EPB被插入到经过编辑的编码视频信号中，所述第二事件中，在编辑之前已经存在的EPB消失，当所述第一事件发生时，删除预先插入所述编码视频信号中的相应于所述插入的EPB的填充符或预定数据，以及当所述第二事件发生时，将相应于已经消失的EPB的填充符插入到所述编码视频信号中。
CN200780025668XA 2006-07-13 2007-07-13 视频信号处理设备和视频信号处理方法 Expired - Fee Related CN101485200B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP193126/2006 2006-07-13
JP2006193126A JP4229149B2 (ja) 2006-07-13 2006-07-13 ビデオ信号処理装置およびビデオ信号処理方法、ビデオ信号符号化装置およびビデオ信号符号化方法、並びにプログラム
PCT/JP2007/063947 WO2008007756A1 (en) 2006-07-13 2007-07-13 Video signal processing device, video signal processing method, video signal encoding device, video signal encoding method, and program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN2010101678697A Division CN101841716B (zh) 2006-07-13 2007-07-13 视频信号处理设备和视频信号处理方法、视频信号编码设备和视频信号编码方法、及程序

Publications (2)

Publication Number Publication Date
CN101485200A CN101485200A (zh) 2009-07-15
CN101485200B true CN101485200B (zh) 2010-11-17

Family

ID=38923312

Family Applications (2)

Application Number Title Priority Date Filing Date
CN2010101678697A Expired - Fee Related CN101841716B (zh) 2006-07-13 2007-07-13 视频信号处理设备和视频信号处理方法、视频信号编码设备和视频信号编码方法、及程序
CN200780025668XA Expired - Fee Related CN101485200B (zh) 2006-07-13 2007-07-13 视频信号处理设备和视频信号处理方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN2010101678697A Expired - Fee Related CN101841716B (zh) 2006-07-13 2007-07-13 视频信号处理设备和视频信号处理方法、视频信号编码设备和视频信号编码方法、及程序

Country Status (5)

Country Link
US (1) US8320744B2 (zh)
JP (1) JP4229149B2 (zh)
KR (1) KR20090039710A (zh)
CN (2) CN101841716B (zh)
WO (1) WO2008007756A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5139187B2 (ja) * 2008-07-18 2013-02-06 株式会社日立国際電気 画像圧縮装置
EP3116230B1 (en) 2014-03-07 2019-05-08 Sony Corporation Method and apparatus for splicing in a compressed video bitstream
US9911460B2 (en) * 2014-03-24 2018-03-06 Microsoft Technology Licensing, Llc Fast and smart video trimming at frame accuracy on generic platform
US9854261B2 (en) 2015-01-06 2017-12-26 Microsoft Technology Licensing, Llc. Detecting markers in an encoded video signal
WO2016207861A1 (en) * 2015-06-25 2016-12-29 Nokia Technologies Oy Method, apparatus, and computer program product for predictive customizations in self and neighborhood videos

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100555164B1 (ko) * 1997-07-25 2006-03-03 소니 가부시끼 가이샤 편집 장치, 편집 방법, 재부호화 장치, 재부호화 방법, 스플라이싱 장치 및 스플라이싱 방법
KR100574186B1 (ko) * 1997-10-03 2006-04-27 소니 가부시끼 가이샤 부호화 스트림 스플라이싱 장치 및 방법과 부호화 스트림 생성 장치 및 방법과 편집 장치 및 방법 및 편집 시스템
JP2000032393A (ja) * 1998-07-09 2000-01-28 Sony Corp 画像情報処理装置および方法、並びに提供媒体
JP4482811B2 (ja) 1999-02-09 2010-06-16 ソニー株式会社 記録装置及び方法
JP2001157161A (ja) 1999-11-25 2001-06-08 Matsushita Electric Ind Co Ltd 画像編集装置、画像編集方法及びプログラム記録媒体
JP3586235B2 (ja) 2001-11-09 2004-11-10 株式会社東芝 Ｍｐｅｇストリームデータ記録装置、ｍｐｅｇストリームデータ記録方法、及びｍｐｅｇストリームデータ編集方法
JP4148679B2 (ja) 2001-12-27 2008-09-10 株式会社東芝 画像編集装置および方法
ATE348484T1 (de) 2002-01-22 2007-01-15 Microsoft Corp Verfahren zur verhinderung von startkode- emulation und stopfdaten
JP4448334B2 (ja) * 2002-04-19 2010-04-07 マイクロソフト コーポレーション バイト整列されていない（ｎｏｎ−ｂｙｔｅ−ａｌｉｇｎｅｄｐｏｓｉｔｉｏｎｓ）のポジション、および／またはビット・シフトされたポジション（ｂｉｔ−ｓｉｆｔｅｄｐｏｓｉｔｉｏｎｓ）を含む位置におけるスタート・コード・エミュレーションを防ぐための方法およびシステム
JP4029699B2 (ja) 2002-09-06 2008-01-09 ソニー株式会社 データ編集装置、データ編集方法、及びプログラム
US7436328B2 (en) * 2003-07-09 2008-10-14 Texas Instruments Incorporated Video coding with start code emulation prevention
US8625680B2 (en) * 2003-09-07 2014-01-07 Microsoft Corporation Bitstream-controlled post-processing filtering
MXPA06002495A (es) * 2003-09-07 2006-06-20 Microsoft Corp Capa de porcion en codificador/descodificador (codec) de video.
JP4743119B2 (ja) * 2004-08-25 2011-08-10 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
JP4221667B2 (ja) * 2004-08-25 2009-02-12 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
JP4174728B2 (ja) * 2004-08-25 2008-11-05 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
JP4492484B2 (ja) * 2005-08-22 2010-06-30 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
JP4207072B2 (ja) * 2006-04-07 2009-01-14 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
JP4221676B2 (ja) * 2006-09-05 2009-02-12 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム

Also Published As

Publication number Publication date
WO2008007756A1 (en) 2008-01-17
US20090202219A1 (en) 2009-08-13
CN101841716B (zh) 2012-11-21
CN101485200A (zh) 2009-07-15
JP2008022361A (ja) 2008-01-31
KR20090039710A (ko) 2009-04-22
US8320744B2 (en) 2012-11-27
JP4229149B2 (ja) 2009-02-25
CN101841716A (zh) 2010-09-22

Similar Documents

Publication Publication Date Title
JP4950059B2 (ja) 映像システムにおけるビットアキュレートシミュレーションのためのフィルムグレインｓｅｉメッセージ挿入
JP5332773B2 (ja) 画像処理装置および方法
JP5131101B2 (ja) 動画像編集装置および動画像編集プログラム
CN101485200B (zh) 视频信号处理设备和视频信号处理方法
JP2006081146A (ja) シーンチェンジ情報をビデオビットストリーム中に埋め込むシステムおよびその方法
US7113542B2 (en) Image editing apparatus and image editing method
JP2010022003A (ja) 動画ファイル再生装置、動画ファイル再生方法、プログラム
KR100289519B1 (ko) 복호화방법및그장치
KR20010037661A (ko) 디지털 비디오 코딩 방법 및 장치
CN108550369B (zh) 一种可变长度的全景声信号编解码方法
CN112019878B (zh) 一种视频解码和编辑的方法、装置、设备和存储介质
CN109274902B (zh) 视频文件处理方法和装置
CN101383964A (zh) 一种对压缩视频流进行编辑、解码的方法、装置和系统
EP1681874A1 (en) Method for cliping video assisted by clip identifier
US7634169B2 (en) Method to reproduce a multimedia data flow on a client terminal, corresponding device, system and signal
CN116033113B (zh) 一种视频会议辅助信息传输方法和系统
CN102802023A (zh) 一种快速防止出现伪起始码的方法及装置
JP2003009146A (ja) コマンドフレーム及びコマンドフレームを連結する方法
CN112449190B (zh) 一种并发视频会话ipb帧图像组的解码方法
JP2005295143A (ja) 画像符号化装置及びその制御方法、プログラム
US20090217157A1 (en) Method for editing multimedia pages on a terminal using pre-stored parameters of objects appearing in scenes
CN116320442A (zh) 一种视频流数据的生成方法、装置及介质
CN118118914A (zh) 一种针对编码后视频的改写方法
CN118400535A (zh) H265编码透明通道传输的方法、终端设备及存储介质
WO2005038643A1 (fr) Procede de formation d'un flux de donnees qui peut etre accede de maniere aleatoire et procede de decodage correspondant

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20101117

Termination date: 20130713