CN1256782A - 编辑系统,编辑控制装置,和编辑控制方法 - Google Patents

编辑系统,编辑控制装置,和编辑控制方法 Download PDF

Info

Publication number
CN1256782A
CN1256782A CN99800241A CN99800241A CN1256782A CN 1256782 A CN1256782 A CN 1256782A CN 99800241 A CN99800241 A CN 99800241A CN 99800241 A CN99800241 A CN 99800241A CN 1256782 A CN1256782 A CN 1256782A
Authority
CN
China
Prior art keywords
baseband signal
bit stream
coding
coded bit
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN99800241A
Other languages
English (en)
Other versions
CN1157727C (zh
Inventor
吉成博美
村上芳弘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1256782A publication Critical patent/CN1256782A/zh
Application granted granted Critical
Publication of CN1157727C publication Critical patent/CN1157727C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036Insert-editing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/40Combinations of multiple record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/40Combinations of multiple record carriers
    • G11B2220/41Flat as opposed to hierarchical combination, e.g. library of tapes or discs, CD changer, or groups of record carriers that together store one title

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种使用流与材料存档器/服务器连接的拼接器/转换编码器21,并且使用基带信号与编辑器和转接器22连接。在至少包括一编辑点的预定时间中,拼接器/转换编码器21执行转换编码。在输入流中,多路复用用于编辑的两个节目,通过解码所述节目产生的基带信号(Sa,Sb)送给编辑器和转接器22,使得编辑如同传统编辑设备。编辑结果的基带信号(Sc)返回到拼接器/转换编码器21,并且使用由解码获得的编解码信息,信号Sc被再编码成输出流。

Description

编辑系统,编辑控制装置, 和编辑控制方法
                         技术领域
本发明涉及处理比特流的编辑系统,编辑控制装置,编辑控制方法。
                         背景技术
用诸如最近用于数字广播的MPEG(运动画面专家组)系统的压缩技术,很多节目能够通过限定的传输介质(无线传输介质或有线传输介质)被广播。同样,当广播提供者传输节目时,卫星电路的转发器的租费是昂贵的。于是,从花费方面来看,压缩占用的带宽是有效的。这种情况与使用地面波或商业线路电路的材料传输相同。这样,当数据从一场所传输到广播站,或数据在广播站之间传输时,使用MPEG流是有意义的。
将诸如MPEG系统的压缩技术应用到广播站中的画面材料的主要益处是减少画面材料存档器(archiver)/服务器的存储容量。当不需要非线性编辑操作时,画面材料被存档在运行成本低的磁带上。然而,由于在近些年已经需要非线性编辑操作,需要减少非线性记录介质(硬盘、DVD等)的存储容量。
下面,参照图15,将描述对应于MPEG标准的传输系统的概况。该传输系统具有编码器部分110和解码器部分120。编码器部分110具有视频数据部分和音频数据部分。视频数据部分包括视频编码器111和分组器112。视频编码器111对输入视频数据DV编码,并且输出视频基本流ES。分组器112将从视频编码器111接收的视频基本流ES分组,将其加上首标等,并且输出视频分组基本流PES。编码器部分110的音频数据部分包括音频编码器113和分组器114。音频编码器113对输入音频数据DA编码,并且输出音频基本流ES。分组器114对从音频编码器113接收的音频基本流ES分组,将其加上首标等,并且输出音频分组基本流PES。编码器部分110还具有多路复用器115。多路复用器115多路复用从分组器112和114接收的基本流,产生传输流分组(每个传输流分组由188个字节组成),并且将它们作为传输流TS输出。
示于图15的传输系统的解码器部分120包括:多路分解器121;拆分组器122和124;视频解码器123;音频解码器125。多路分解器121将通过传输介质116接收的传输流分解成视频PES和音频PES。拆分组器122和124分别对视频PES和音频PES拆分组。视频解码器123对从拆分组器122接收的视频ES解码。音频解码器125将从拆分组器124接收的音频ES解码。视频解码器123输出基带视频信号DV。音频解码器125输出基带音频信号DA。解码器部分120称为IRD(集成接收器/解码器)。
着重于视频数据,将描述示于图15的系统的操作。在编码器部分110中,视频编码器111对每个画面具有相同比特量的输入视频数据DV编码,将每个画面转化成对应于其冗余的比特量,并且将结果数据作为视频基本流输出。分组器112吸收(平均)时基上视频基本流的比特量的波动,并且将结果数据作为视频分组基本流输出。传输流多路复用器115多路复用从分组器112接收的视频分组基本流和从分组器114接收的音频分组基本流,产生作为传输流分组的多路复用数据,并且作为传输流TS通过传输介质116将它们提供给解码器120。
在解码器部分120中,传输流多路分解器121将传输流多路分解为视频分组基本流和音频分组基本流。拆分组器122对视频分组基本流拆分组,并且将结果数据作为视频基本流输出。视频解码器123对视频基本流解码,并且将结果数据作为视频数据DV输出。
解码器部分120从使用例如1.75M比特VBV(Video Buffering Verifier,视频缓冲检验器)缓冲器,以固定比特率接收的流中执行可变比特量提取处理,用于每个再现的画面。这样,编码器部分110应该控制每个画面的产生的比特量,以便避免VBV缓冲器上溢或下溢。这样的控制处理称为VBV缓冲器处理。
如上所述,从有效利用多通道广播系统的有限传输资源以及减少传输电路的运行成本来看,使用编码流是很有吸引力的。然而,对应于高效压缩系统的MPEG流具有对广播材料的限制。
MPEG系统的压缩技术具有下列特征:(1)在MPEG系统中,对应于每个GOP(Group Of Picture,画面组)的帧相关,执行编码处理。(2)已经对应于MPEG格式编码的每个画面具有可变比特长度。(3)在MPEG2格式中,控制(VBV缓冲器处理)比特率,使得满足目的IRD的缓冲条件。(4)当执行对应于MPEG2格式的编码处理用于传输数据时,对应于传输路径的容量控制数据的比特率。
由于MPEG系统的特征,当接收和编辑MPEG比特流时,将发生下列问题。换言之,当为每帧编辑数据时,在MPEG流解码成基带信号后,应该编辑该数据。下面,产生的基带信号应该编码成MPEG流。于是,只要执行包括转接操作的编辑操作时,就重复编码处理和解码处理。正常地,当执行基带信号到MPEG流的解码-编码链时,产生的画面质量大大下降。当在任意位置转接编码比特流时,即使它是编码单元的末端(实际上,甚至在不使用GOP相关的封闭(closed)GOP结构中),失去缓冲控制操作的连续性。于是,不满足VBV缓冲器的限制。结果,由于缓冲器上溢或下溢,解码的画面冻结或断裂。
由于这些问题,据说基本上不能够作为MPEG流编辑数据。于是,即使执行对应于MPEG系统的压缩多通道广播,使用编辑基带材料并且最后将编辑的数据编码成MPEG流的装置。当原始材料是MPEG流时,在基带信号被解码成基带信号后,它由传统基带编辑设备编辑。于是,在执行编辑操作后,产生的画面质量大大下降。此外,当执行特殊效果诸如增益调节时或当插入广播站的登录标志时,不能使用MPEG流。
下面,用广播站中编辑系统的几个例子具体描述这些问题。图16示出主服务器和编辑工作台的接口。每个主服务器具有MPEG流存档器。在广播站中,数据作为基带信号被发送。在图16中,标号101是广播站中的主存档器/服务器。存档器/服务器101是具有存储部分的非线性存档器。存储部分存储MPEG压缩流的材料,以便减少该材料的数据量。存档器和服务器均存储画面材料。然而,存档器是专门存储画面材料的设备。相反,服务器对应于从外部设备接收的请求输出画面材料。按照本发明,由于存档器和服务器均具有作为画面存储部分的功能,本发明能够应用到存档器和服务器二者。于是,在本说明书中,使用术语存档器/服务器。
存档器/服务器101具有对从存储部分接收的MPEG流解码的MPEG解码器。由MPEG解码器产生的基带视频数据S1和S2输入到编辑工作台102。在广播站中传输路径的传输协议基于基带信号。编辑工作台102执行用于连接视频数据S1和S2的编辑操作(拼接编辑操作,AB滚动操作等)。已被编辑的视频数据S3(基带信号)输入给存储器/服务器103。存档器/服务器103具有MPEG编码器。MPEG编码器将编辑结果作为MPEG流提供给存储部分。
图17示出了编辑工作台102的结构的例子。由于基带信号的视频数据的数据量大(即其比特率高),磁带介质用作记录介质。换言之,视频数据S1被记录到线性存储器104a。视频数据S2被记录到线性存储器104b。线性存储器104a和104b起播放机的作用。视频数据Sa和Sb被提供给编辑器和转接器105。视频数据Sc作为编辑器和转接器105的编辑结果记录到具有记录器功能的线性存储器104c。线性存储器104c输出编辑的数据作为视频数据S3。
如图18所示,编辑工作台102可以包括使用非线性记录介质(硬盘,光盘等)的非线性存储器106a、106b和106c。然而,当用非线性记录介质处理基带信号时,由于基带信号的数据量大,记录介质是昂贵的。于是,线性存储器被放置到每个编辑工作台的结构是不实际的。在示于图16的编辑系统中,只要执行编辑操作时,就出现解码-编码链。于是,材料的画面质量累加地劣化。
图19示出了在广播站中传输路径的传输协议是MPEG流的情况下,主服务器和编辑工作台的接口。存档器/服务器131和存档器/服务器133存储作为MPEG流的材料。存档器/服务器131将MPEG流输出到编辑工作台132。存档器/编辑器131从编辑工作台132接收MPEG流。于是,存档器/编辑器131和存档器/编辑器133没有MPEG解码器和MPEG编码器。对于MPEG流,两个或多个画面材料能够作为流TS1和TS2被多路复用。在这种多通道系统中,能够有效使用传输路径。流TS1和TS2可以是基本流或传输流。
图20和21分别示出了示于图19中的系统的编辑工作台132的第一例子和第二例子。在示于图20的第一例子中,流TS1被解码成流TS1a和TS1b。MPEG解码器134a和134b将流TS1a和TS1b转换成各基带信号。产生的基带信号存储在线性存储器135a和135b中。由具有播放机功能的线性存储器135a和135b获得的基带视频信号Sa和Sb提供给基带编辑器和转接器136。基带编辑器和转接器136将编辑结果作为视频数据Sc提供给具有记录器功能的线性存储器135c。从线性存储器135c接收的视频数据提供给MPEG编码器134c。MPEG编码器134c将编码数据作为MPEG流TS2输出。
在示于图21中的编辑工作台132的第二例子中,非线性存储器137a、137b和137c分别用来替代线性存储器135a、135b和135c。在示于图21的例中,MPEG流能够通过广播站的传输路径被发送,使得能够容易构建多通道系统。然而,在示于图20和21中的第一和第二例子中,只要执行编辑操作时,就出现解码-编码链。于是,材料的画面质量不可忽视地劣化。此外,画面质量累加地劣化。还有,当用非线性记录介质处理基带信号时,由于基带信号的数据量大,并且非线性记录介质昂贵,放置在每个广播站中的非线性记录介质的示于图21中的第二例子是不实际的。
为了防止材料由解码-编码链引起劣化,材料被存档为基带材料。在此情况下,由于画面材料的数据量变大,难以将它存储在非线性记录介质上。
作为解决材料劣化和记录容量的问题的手段,最好将数据编辑为数据流。然而,为了做到这一点,存在由MPEG流的特征引起的问题。为了解决这些问题,有几个方法。对于上溢的问题,计数每个画面的比特数目。模拟VBV缓冲器以便插入虚拟数据。然而,对于下溢问题,不知道有解决的方法。在此情况下,画面冻结。
另一方面,知道一种比特率控制方法。在此方法中,执行编码处理之前,指定转接点,使得预定缓冲量发生在转接点。在此方法中,将解决VBV缓冲器的问题。然而,仅在预定转接点处解决了此问题。于是,限制了该方法的范围。
此外,为了解决解码-编码链引起的画面质量下降的问题,当对流解码时,编码处理和解码处理需要的信息被提取并且与基带信号多路复用。该信息称为编解码信息。当用编解码信息执行再编码处理时,改善画面重构的精度。该处理称为转换(trans)编解码处理。编解码信息包含运动矢量、量化步长、画面类型等的信息。
编解码信息的信息量不小。这样,由于基带信号没有足够的编解码信息被多路复用的辅助区,剩余的编解码信息应该与有效画面区多路复用,或者通过另外的线路发送。
图22示出了用转换编码处理构建编辑工作台的结构的例子。执行转换编码处理,以防止材料的画面质量相应于每个编辑操作由解码编码链引起的累加劣化。在图22中,编解码信息通过不同于材料信号线的路径被发送。MPEG解码器134a和134b将流TS1a和TS1b转换成作为基带视频数据Sa和Sb的各基带信号。基带视频数据Sa和Sb提供给基带编辑器和转接器136。基带编辑器和转接器136将编辑结果作为视频数据Sc提供给MPEG编码器134c。MPEG编码器134c再编码视频数据Sc,并且将再编码数据作为MPEG流TS2输出。
示于图22的编辑工作台还具有:信息检测器141a和141b;信号线142a、142b和142c;信息估计器144;和编解码信息适配器143。信息检测器141a和141b从流或解码器134a和134b中分别检测在MPEG解码器134a和134b中使用的编解码信息。信号线142a、142b和142c传输编解码信息。信息估计器144允许编码器134c使用编解码信息。编解码信息适配器143有组织地将编解码信息与基带编辑器和转接器136的编辑信息连接。
当编解码信息通过另外的线发送时,编辑器和转接器136执行编辑操作。为了处理通过另外系统发送的编解码信息,应该添加诸如编解码信息适配器143的特殊结构。换言之,不能使用处理基带信号的传统编辑工作台。
图23示出了使得该问题被解决的编辑工作台的结构。换言之,在示于图23中的结构中,编解码信息与基带信号的有效区域多路复用。示于图23的编辑工作台具有信息检测器141a和141b,信息检测器141a和141b分别检测来自输入流TS1a和TS1b或解码器134a和134b的编解码信息。施加器145a和145b分别将检测的编解码信息与作为基带信号的视频数据Sa和Sb多路复用。多路复用的基带信号提供给基带编辑器和转接器136。作为多路复用方法的例子,编解码信息随着视频数据的每个采样的最低有效位被随机地多路复用。
基带编辑器和转接器136输出其中已经多路复用编解码信息的视频数据。视频数据提供给分离器146。分离器146将从视频数据中分离出编解码信息,该视频数据是从基带编辑器和转接器136中接收的。由分离器146分离的视频数据Sc提供给MPEG编码器134c。MPEG编码器134c使用从分离器146接收的编解码信息,再编码视频数据Sc。
图24示出了非线性存储器147和148添加到示于图23结构的结构。非线性存储器147输出已经被记录并且再现给MPEG解码器134a和134b的流。非线性存储器148记录由MPEG编码器134c再编码的流。
如图23和24所示,当编解码信息与基带信号多路复用、然后传输多路复用信号时基带编辑器和转接器136不需要诸如编解码信息适配器的特殊设备。然而,在编解码信息插入画面信号的有效区域内的方法中,即使编解码信息被转换成任意数据,然后与画面信号多路复用,画面失真,并且S/N(信号/噪声)比下降。
在示于图23和24的结构中,当编解码信息与基带信号多路复用时,在编辑工作台中设置多路复用装置。图25示出了在存档器/服务器中设置用于多路复用和多路分解编解码信息的装置的结构例子。参照图25,存档器/服务器151包括:MPEG解码器155a和156a;信息检测器155b和156b;施加器157a和157b。MPEG解码器155a和156a将从存储部分154接收的MPEG流解码。信息检测器155b和156b从各流中检测编解码信息。施加器157a和157b将编解码信息与作为基带信号的视频数据多路复用。
其中已经多路复用编解码信息的视频数据S11和S12提供给编辑工作台152。编辑工作台152处理基带信号。作为示于图24的结构,编辑工作台152包括线性存储器及基带编辑器和转接器。
作为基带信号的视频数据S13提供给将视频数据作为编辑结果存储的存档器/服务器153,视频数据S13中已经多路复用从视频工作台152接收的编解码信息。分离器158从视频数据S13中分离编解码信息。MPEG编码器159使用编解码信息再编码产生的视频数据。从MPEG编码器159接收的流存储到存储部分160中。
然而,实际上,示于图25的结构没有正确地起作用。换言之,示于图25的结构中的连接是无效的。在编辑工作台152中,视频数据记录到诸如记录基带信号的VTR(录像机)的传统记录介质。当然,传统VTR不支持提取编解码信息并且将提取的编解码信息提供给下一阶段的功能。此外,由于大部分传统数字VTR使用不是MPEG系统的压缩系统,在信号有效区域多路复用的信息用与视频数据相同的方式压缩和解压缩。于是,由于编解码信息被压缩和解压缩,产生的视频数据失真。因此,不能使用编解码信息。即使编解码信息叠加在视频数据的最低有效位上,最低有效位由VTR的压缩处理和解压缩处理改变。
另一方面,在示于图23和24的结构中,传送流。附加的结构部件诸如MPEG解码器和再编码器放置在编辑工作台中。于是,排除了传统VTR与其中已经多路复用编解码信息的基带信号连接的可能性。然而,如上所述,当编解码信息被插入画面信号的有效区域内时,产生的画面失真,并且其S/N比率下降。
因此,本发明的一个目的是提供一种编辑系统、编辑控制装置和编辑控制方法,使得有效使用存储介质和传输介质、抑制画面质量下降、及使用传统基带编辑设备。
本发明的另一个目的是提供一种编辑系统、编辑控制装置和编辑控制方法,使得不需要从编辑设备中获得编辑位置信息而检测编辑位置。
本发明的另一个目的是提供一种编辑系统、编辑控制装置和编辑控制方法,使得用于再编码处理的编解码信息使用在小于一画面的单元中,并且使得再编码画面的画面质量避免下降。
                     本发明的公开
本发明的权利要求1是一种编辑系统,具有用于编辑基带信号的编辑设备和连接到所述编辑设备的编辑控制设备,其中所述编辑控制设备包括:第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给编辑设备;编码装置,用于用在所述第一解码装置和所述第二解码装置中使用的编解码信息,再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号,并且输出第三编码比特流;控制装置,用于对应于从外部设备接收的编辑位置信息,选择由所述第一编码装置和所述第二编码装置使用的编解码信息。
本发明的权利要求8是一种编辑控制装置,包括:第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给编辑设备;编码装置,用于再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号、和在所述第一解码装置和所述第二解码装置中使用的编解码信息,并且输出第三编码比特流;控制装置,用于对应于从外部设备接收的编辑位置信息,选择由所述第一编码装置和所述第二编码装置使用的编解码信息。
本发明的权利要求15是一种编辑控制方法,包括以下步骤:输入其中对第一材料已经编码的第一编码比特流和其中对第二材料已经编码的第二编码比特流;将所述第一编码比特流和所述第二编码比特流分别被解码的第一基带信号和第二基带信号发送给编辑设备;从所述编辑设备接收作为所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号;对应于从外部设备接收的编辑位置信息选择解码所述第一编码比特流和所述第二编码比特流使用的编解码信息的所需编解码信息;和用所述选择的编码信息再编码所述第三基带信号,并且输出第三编码比特流。
本发明的权利要求16是一种编辑控制装置,具有用于编辑基带信号的编辑设备和连接到所述编辑设备的编辑控制设备,其中所述编辑控制设备包括:第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给编辑设备;比较装置,用于在所述第一基带信号和所述第三基带信号、所述第二基带信号和所述第三基带信号相位匹配的状态下,比较所述第一基带信号、所述第二基带信号和所述第三基带信号,以便检测编辑位置;控制装置,用于对应于所述编辑位置的信息,选择在再编码处理中使用的编解码信息;和编码装置,用于使用所述选择的编解码信息,再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号,并且输出第三编码比特流。
本发明的权利要求19是一种编辑控制装置,包括:第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给编辑设备;比较装置,用于在所述第一基带信号和所述第三基带信号、所述第二基带信号和所述第三基带信号相位匹配的状态下,比较所述第一基带信号、所述第二基带信号和所述第三基带信号,以便检测编辑位置;控制装置,用于对应于所述编辑位置的信息,选择在再编码处理中使用的编解码信息;和编码装置,用于使用所述选择的编解码信息,再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号,并且输出第三编码比特流。
本发明的权利要求22是一种编辑控制方法,包括以下步骤:输入其中对第一材料已经编码的第一编码比特流和其中对第二材料已经编码的第二编码比特流;将所述第一编码比特流和所述第二编码比特流分别被解码的第一基带信号和第二基带信号发送给编辑设备;存储所述第一基带信号、所述第二基带信号和在所述第一基带信号和所述第二基带信号的所述解码处理中使用的编解码信息;从所述编辑设备接收作为所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号;在所述第一基带信号和所述第三基带信号相位匹配的状态下,比较所述第一基带信号和所述第三基带信号,并且在所述第二基带信号和所述第三基带信号相位匹配的状态下,比较所述第二基带信号和所述第三基带信号,以便检测编辑位置;对应于检测的编辑位置,选择在所述第三基带信号的所述再编码处理中使用的编解码消息;用所述选择的编码信息再编码所述第三基带信号,和输出第三编码比特流。
按照本发明,由于所述编辑控制的所述输入/输出信号格式是编码的位流,能够容易地多路复用多个画面材料的编码数据。于是,能够有效使用传输介质。此外,所述编辑控制装置使用基带信号与所述编辑设备连接。此外,编解码信息不与基带信号多路复用。还有,不必要通过另外的信号线传输转换编码处理使用的编解码信息。于是,能够避免增加信号线的数目。因此,传统的基带编辑装置能够直接作为编辑设备使用。
此外,由于输出到编辑设备的第一基带信号和第二基带信号与从所述编辑设备接收的第三基带信号在它们的相位匹配的状态下,进行比较,能够检测编辑位置。于是,能够略去将编辑位置信息传输给编辑装置的线。此外,不必要将编辑位置信息解译成为流的时基信息。
此外,能够为每个块及每个画面确定用于再编码处理的编解码信息的使用的有效性。这样,即使在画面中编辑点处共存两个原始材料,也能够抑制再编码处理引起的画面质量的下降。
                      附图简要描述
图1是按照本发明第一实施例的广播站的整个系统结构方框图;
图2是按照本发明第一实施例的编辑工作台的例子方框图;
图3是按照本发明第一实施例的编辑工作台的另一例子方框图;
图4是按照本发明的广播网络的例子方框图;
图5是按照本发明第一实施例的作为主要部分的拼接器/转换编码器的例子方框图;
图6是拼接器/转换编码器的管理信息产生部分的结构例子方框图;
图7是按照本发明第一实施例的作为主要部分的拼接器/转换编码器结构的另一例子方框图;
图8是按照本发明第二实施例的作为主要部分的拼接器/转换编码器结构的另一例子方框图;
图9是用于解释基带信号流水关系和再使用编解码信息的处理的简图;
图10是表示画面和宏块之间关系的简图;
图11是表示确定再使用编解码信息的处理的流程图;
图12是表示示于图11的画面子程序的流程图;
图13是示于图11的宏块子程序的流程图;
图14是解释用于每个宏块的编解码信息再使用的简图;
图15是表示传统MPEG编码/解码系统的方框图;
图16是用于解释本发明的作为参考的广播站中系统结构例子的方框图;
图17是示于图16的编辑工作台结构的例子方框图;
图18是示于图16的编辑工作台的另一例子方框图;
图19是用于解释本发明的作为参考的广播站中系统结构的另一例子方框图;
图20是示于图19的编辑工作台的例子的方框图;
图21是示于图19的编辑工作台的另一例子的方框图;
图22是用于解释本发明的作为参考的编辑工作台结构的一个例子方框图;
图23是用于解释本发明的作为参考的编辑工作台结构的另一例子方框图;
图24是非线性存储器添加到示于图23的结构的结构方框图;
图25是用于解释本发明的作为参考的广播站中系统的结构方框图。
                   实现本发明的最佳方式
下面,参照附图,将描述本发明的实施例。图1示出了按照本发明的编辑系统的结构。存档器/服务器1和存档器/服务器3分别具有存储部分4和5。存储部分4和5存储例如MPEG流的编码比特流的画面材料。由于MPEG流已经对应于MPEG格式压缩,非线性记录介质能够用作存储部分4和5。存档器和服务器均存储画面材料。然而,存档器是专门存储画面材料的设备。相反,服务器对应于从外部设备接收的请求输出画面材料。按照本发明,由于存档器和服务器均具有作为画面存储部分的功能,本发明能够应用于存档器和服务器二者中。于是,在本说明书中,使用术语存档器/服务器。
在从存档器/服务器1到编辑工作台2到存档器/服务器3的传输路径中,传输编码比特流(例如MPEG流)。这样,由于多路复用多个通道,能够有效利用传输资源。换言之,在从存档器/服务器1发送的流TS1中,多路复用两个或多个原始视频/音频材料。流TS2是作为编辑结果的流。然而,当必要时,能够多路复用编辑结果和两个或多个视频/音频材料。在此例中,流TS1和TS2是传输流。或者,流TS1和TS2可以被分组成基本流。
编辑工作台2结构示于图2或图3。在示于图2的例中,编辑工作台2具有拼接器/转换编码器21及基带编辑器和转接器22。拼接器/转换编码器21输入流TS1和输出流TS2。基带编辑器和转接器22输入作为基带信号的视频数据Sa和Sb,并且输出视频数据Sc,使得使用基带信号与拼接器/转换编码器21连接。拼接器/转换编码器21起编辑控制装置的作用。基带编辑器和转接器22起编辑设备的作用。
拼接器/转换编码器21基本上是一转换编码器,执行用于将输入流转换成输出给编辑器和转接器22的基带信号的解码处理,并且执行用于将从编辑器和转接器22接收的基带信号转换成输出流的再编码处理。如同后面将要描述的,可以在包括编辑点的预定区域中执行转换编码处理。输入流或转换编码处理的输出信号可以被转接。换言之,拼接器/转换编码器21可以起拼接器的作用。这样,在此例中,使用术语“拼接器/转换编码器”。
在示于图3的编辑工作台的另一个例子中,非线性存储器23a和23b添加到示于图2的结构中。非线性存储器23a记录从存档器/服务器1接收的流TS1,并且将流TS11提供给拼接器/转换编码器21。非线性存储器23b记录从拼接器/转换编码器21接收的流TS12,并且输出流TS2。
如同从图2和3清楚看出的,拼接器/转换编码器21的输入/输出信号是MPEG流。这样,由于容易地多路复用多个通道,能够有效使用传输资源。此外,基带编辑器和转接器22能够使用基带信号与拼接器/转换编码器21连接。
此外,由于拼接器/转换编码器21执行转换编码处理,不需要将再编码处理所需要的编解码信息输出给编辑器和转接器22。这样,用传统基带信号编辑设备作为基带编辑器和转接器22,能够构成编辑系统。
此外,拼接器/转换编码器21使输入流ST1的MPEG画面(包括编解码信息)与基带输入/输出信号的帧(或场)相关。当编辑器和转接器22需要时间码信息时,它从拼接器/转换编码器21到编辑器和转接器22通过它们之间连接的双向信号线发送。时间码信息对应于MPEG画面和拼接器/转换编码器21中定义的时间码之间的关系。换言之,在拼接器/转换编码器21中使用的MPEG画面的时间管理信息正好对应于在编辑器和转接器22的编辑操作中使用的时间管理信息(时间码)。
通过增加基带信号Sc的输出时间和基带编辑器和转接器22的系统延迟,获得从基带编辑器和转接器22的编辑基带信号Sc的返回时间。通过记录拼接器/转换编码器21的基带信号的输出时间,使再编码处理需要的编解码信息能够容易地与返回的基带信号Sc的帧相关。
此外,拼接器/转换编码器21从基带编辑器和转接器22或控制基带编辑器和转接器22的主CPU(或控制机),接收作为传统时间码的诸如提示信息的编辑位置信息,并且使编辑位置信息与MPEG画面相关。换言之,拼接器/转换编码器21对应于提示信息检测编辑帧,并且选择在再编码处理中使用的编解码信息。编解码信息例如包含运动矢量、画面类型、量化步长和量化标度。
为了使时间码和MPEG画面相关,表示任何材料的PTS(表示时戳)和时间码之间关系的相关表被插入例如输入流。相关表可以以各种方式传输。例如,相关表可以作为段类型独立分组传输。或者,相关表可以放置在诸如流语法的扩展的用户区中。
作为另一个替换方法,与MPEG画面相关的时间码可以插入流中,并且可以传输产生的流。在此情况下,不需要相关表。传输时间信息不限定于时间码。在编辑操作期间,仅对应于时间码的画面索引可以在足够的时间指定范围内传输。此外,用诸如PTS、画面类型、GOP和对应于下拉操作和字段倒转操作的重复第一字段信息作为MPEG流语法(编码数据流的规则),时间码能够与提示信息相关。
图4示出了按照本发明的广播系统的结构概况。参照图4,中心站31通过传输网络33连接到多个局部站32a、32b、32c、32d...。MPEG比特流通过传输网络传输。对于MPEG比特流,很多通道能够被多路复用并且传输。中心站31具有从通信/广播卫星34接收无线波的天线35。在中心站31中,由天线35接收的节目材料、通过微波电路36从一场所接收的现场材料和从存档器/服务器41接收的节目材料和CM材料作为MPEG流提供给拼接器/转换编码器42。
如上所述,拼接器/转换编码器42具有与基带编辑器和转接器43的基带接口。拼接器/转换编码器42选择输入节目材料,并且产生广播节目(作为MPEG位流)。中心站31将广播节目通过网络33传送给局部站32a,32b,...。
在局部站32a中,从中心站31接收的MPEG流和从CM服务器46a接收的CM(商业信息)材料输入给拼接器/转换编码器44a。拼接器/转换编码器44a和CM插入调度器(scheduler)45a用基带接口连接。CM服务器46a存储由局部站32a创建的CM材料。CM插入调度器45a用局部站32a的局部CM替换包含在从中心站31接收的节目比特流中的CM。对于变换编码处理,局部CM能够几乎无劣变地被替换。同样,在其它局部站32b、32c...中,能够替换它们的局部CM。
除了局部CM的替换,中心站31和局部站32a、32b...能够将它们的登录标志插入节目比特流。此外,本发明与地面波广播一起能够应用到CATV系统的控制台(head end stations)和电缆操作员(cable operator)之间的关系。
图5和7示出了拼接器/转换编码器21结构的第一例子和第二例子。在示于5的第一例子中,输入MPEG比特流被完全转换编码。在示于图7的第二例子中,在部分转换编码输入MPEG比特流之后,转接(拼接)产生的比特流。
接着,将描述图5所示拼接器/转换编码器结构的第一例子。一MPEG比特流TS1,诸如存档器/服务器的输出信号、从卫星接收的信号或通过微波电路接收的信号输入给拼接器/转换编码器。流TS1是已经多路复用的多个节目(节目材料)的流。在流TS1中,至少已经多路复用两个节目。在此例中,流TS1是传输流。或者,流TS1可以是时分多路复用基本流ES。然而,在基本流ES的情况下,需要识别当前输入流的识别标签或输入信息。
标号51是滤波器,提取要编辑的两个节目的分组。在传输流TS的情况下,用PID(分组ID),可以提取希望的节目。在基本流ES的情况下,如上所述,需要诸如识别标签的信息。
MPEG解码器52a和52b对由滤波器51提取的两个流A和B解码。MPEG解码器52a获得节目A的基带视频/音频数据Sa。MPEG解码器52b获得节目B的基带视频/音频数据Sb。基带数据Sa和Sb输出到外部编辑器和转接器22。
基带编辑器和转接器22将已经编辑的返回基带视频/音频数据Sc输出给拼接器/转换编码器。基带数据Sc提供给MPEG再编码器53。再编码器53通过路径54从信息缓冲器55接收对应于基带数据Sc的视频帧的用于MPEG再编码处理的编解码信息。对应于用于再编码处理的编解码信息,数据Sc被再编码用于所需比特量。再编码器53输出作为输入流A和B的AB滚动编辑操作的结果的流TS2。用于再编码处理的编解码信息例如包含运动矢量、画面类型、量化步长大小、和量化级。对于转换编码处理,能够抑制由于解码编码链导致的画面质量的下降。
拼接器/转换编码器仅使用基带数据Sa、Sb、Sc与编辑器和转接器22连接。于是,不需要将编解码信息与基带数据叠加。在图5和7中,略去了对应于从编辑器和转接器22的请求将时间码传输到拼接器/转换编码器21的传输路径。
在MPEG解码器52a和52b中使用的编解码信息输入给信息缓冲器55。写地址WAD和写启动WE从写控制器56提供给信息缓冲器55。此外,读地址RAD从读控制器57提供给信息缓冲器55。信息缓冲器55应该与流Sc的编辑点同步,将用于再编码处理的编解码信息提供给再编码器53。当返回在编辑点处(点内)视频数据Sb已经连接到视频数据Sa的视频数据Sc时,用于再编码视频数据Sa的编解码信息转接到用于再编码视频数据Sb的编解码信息。信息缓冲器55的存储容量可以相应于编辑器和转接器22的系统延迟(几个帧的时间段)。
从拼接器/转换编码器21接收的视频数据Sa和视频数据Sb的相位和从基带编辑器和转接器22返回的视频数据Sc的相位由管理表62管理。于是,写控制器56和读控制器57连接到管理表62。管理表62用输入流的画面计数值和返回视频数据Sc的帧计数值控制信息缓冲器55的写/读操作。帧计数器58对视频数据Sc的帧数目计数,并且用对应于计数值的读地址发送读请求REQ到管理表62。管理表62具有环形缓冲器的结构,其中输入信息连续写到递增的地址中,并且读指针对应于读请求REQ递增。从信息缓冲器55读出由读指针表示的地址的再编码信息,并且通过路径54发送给MPEG再编码器53。与管理表62相关,设置管理信息产生部分61。提示信息输入给管理信息产生部分61(后面将描述)。
用于编辑节目的提示信息从编辑器和转接器22或控制主机提供给拼接器/转换编码器的管理信息产生部分61。提示信息通常是用时间码指定的编辑位置信息。实际上,提示信息包含点内/点外(in-point/out-point)信息。对应于提示信息,检测编辑帧。选择编解码信息,使得与基带数据Sc同步使用。当由读控制器57读预定编解码信息时,表示能够使用编解码信息的启动信号从读控制器57提供给再编码器53。
再编码器53连接到比特量估计器59。比特量估计器59执行VBV缓冲器处理。换言之,用比特量估计器59,再编码器53合适地执行再编码处理,以便解码MPEG比特流TS2的解码器的缓冲器不上溢或下溢。为了实现这一点,在编辑点附近目标比特量(用于指定和加权产生的比特量的信息)提供给比特量估计器53。在管理表62的相关索引时隙写入目标比特量。当执行再编码处理时,满足目标产生的比特量。在正常编码处理中,当再编码器53的产生的比特量不够指定的目标比特量时,添加虚拟数据。相反,当产生的比特量超过目标比特量(换言之,在解码器的缓冲器将下溢的情况下)时,执行宏块跳跃处理或用于使得预测偏差(即,预测画面的宏块MB和相关的一个考虑画面之间的差值)为零的处理。当这种处理不防止缓冲器下溢时,再现画面受解码器侧的处理方法影响。正常地,直到数据存储到缓冲器,再现的画面冻结。
图6示出了管理信息产生部分61的详细结构。作为编辑位置信息的提示信息提供给解译器71。当必要时,解译器71对提示信息解译。从解译器71输出的结果信息提供给映射设备72。映射设备72将表示为时间码的提示信息映射到由滤波器51提取的输入流73的时戳PTS的标度(再现输出信号的时间管理信息)。
画面计数器74从输入流73中检测画面首标,并且计数画面的数目。由画面计数器74计数的画面数目提供给画面/帧索引产生器75。画面/帧索引产生器75产生画面的索引,以便排列画面和管理表62的信息。管理表62对应于索引排列所述内容,并且用作为从帧计数器58接收的视频数据Sc的帧计数值的地址输出管理信息。
时戳读取器76从输入流73中读出时戳PTS。时戳PTS和映射设备72的输出信号提供给再编码方案规划器77。映射设备72的输出信号是表示视频帧的编辑点的时间码已经映射到时戳的标度的结果。于是,再编码方案规划器77使一编辑点与输入流73的画面相关。再编码方案规划器77的输出信号写入对应于索引的管理表62的相关地址。
标号78是画面比特量计数器,对输入流73所产生比特量计数。画面比特量计数器78将计数结果提供给VBV缓冲器模拟器79。VBV缓冲器模拟器79模拟VBV缓冲器。VBV缓冲器具有解码器侧缓冲器的存储容量。在编码器的编码处理中估计VBV缓冲器的存储容量。当模拟VBV缓冲器时,解码器侧的缓冲器能够防止下溢或上溢。VBV缓冲器模拟器79的模拟结果提供给再编码方案规划器77。再编码方案规划器77在编辑点附近指定和加权产生的比特量,以便执行再编码处理。指定的和加权的比特量写入到管理表62的相关索引时隙。
图7示出了拼接器/转换编码器21的结构的第二个例子。在此例中,在受编辑操作影响的所需最小区域内执行转换编码处理。输入流用转换编码流转接。在此例中,能够显著地抑制用转换编码处理不能解决的画面质量的下降。
示于图7的第二例子和示于图5的第一例子之间的差别在于从滤波器51接收的输入流73存储在画面缓冲器63中,以及从画面缓冲器63接收的流由转接电路66转接到从再编码器53接收的流。
在示于图7的第二例子中,设置写控制器64和读控制器65。写控制器64控制画面缓冲器63的写操作。读控制器65控制画面缓冲器63的读操作。用管理表62控制写控制器64和读控制器65。控制画面缓冲器63,使得上述编解码信息写入到信息缓冲器55,并且从信息缓冲器55读出用于再编码处理的编解码信息。
在视频数据Sa转接到视频数据Sb的视频数据Sc的情况下,在编辑点附近执行转换编码处理之前,转接电路66对应于从画面缓冲器63接收的数据Sa选择流。在执行转换编码处理之后,转接电路66对应于从画面缓冲器63接收的数据Sb选择流。对应于从读控制器65接收的控制信号67控制转接电路66的选择操作。画面缓冲器63的存储容量可以等效于编辑器和控制器22的系统延迟(几个帧的时间段)加上编码处理的延迟(几个画面)。这样,画面缓冲器63不会对系统结构产生不利影响。
下面,将描述本发明的第二实施例。第二实施例的编辑系统结构概况与第一实施例的(看图1、2和3)相同。第二实施例如同第一实施例能够应用到广播系统(看图4)。在本发明的第一实施例中,编码原始材料的流。存储编码处理的编解码信息。仅解码的基带信号提供给编辑设备。编辑设备编辑基带信号,将作为编辑结果的基带信号的相位与对应于提示信息存储的编解码信息匹配,再编码作为编辑结果的基带信号,并且将再编码的信号作为流输出。按照第一实施例,由于数据作为流被传输,能够减少存储装置的记录介质的存储容量。此外,能够有效使用传输介质。此外,对于转换编码处理,能够显著抑制画面质量的下降。还有,传统基带编辑设备能够直接用作编辑设备。
在第一实施例中,由于处理基带信号的传统编辑设备用时间码表示编辑位置,应该解译编辑位置信息,以便将编辑位置信息映射到流上。此外,编辑位置信息包含用于帧或场(以及当使用转接功能诸如划变处理(wipe process)时的期间)的编辑位置。于是,编辑位置信息不表示帧(或流中画面)中的转接转变状态。于是,用于再编码处理的编解码信息不能很好地在帧中使用。
另一方面,按照本发明的第二实施例,能够解决这些问题。换言之,没有编辑位置信息,输出到编辑设备的第一和第二基带信号以及从编辑设备返回的第三基带信号在这些信号的相位匹配的状态下能够比较。于是,能够略去用于将编辑位置信息传输到编辑设备的线。此外,不必要将编辑位置信息解译成为流的时间轴。
此外,能够为每个块以及每个画面确定用于再编码处理的编解码信息使用的有效性。这样,即使两个原始材料在编辑点处共存在画面中也能够抑制再编码处理导致的画面质量下降。
于是,在第二实施例中,示于图1、2和3的拼接器/转换编码器21将输出基带信号Sa、Sb和返回基带信号Sc比较。对应于比较结果,拼接器/转换编码器21检测编辑位置,并且选择用于再编码处理的编解码信息。编辑位置信息包含用于每个帧(画面)的编辑位置和用于每个画面的每个较小块的编辑数据。编解码信息例如包含运动矢量、画面类型、量化步长大小、和量化标度。为了检测编辑位置,需要存储原始材料的画面缓冲器。每个画面缓冲器和信息缓冲器的存储容量如同等效于编辑器和转接器22的系统延迟(约几个帧)那么小。
图8示出了按照本发明第二实施例拼接器/转换编码器21的结构例子。在示于图8的例子中,输入MPEG比特流完全转换编码。或者,输入MPEG比特流被部分转换编码之后,可以转接(拼接)流。换言之,在包含编辑点的预定区域中,选择已经转换编码的基带信号Sc的流。在除了预定区域之外的区域中,选择输入流。通过转接装置执行这些操作。在部分转换编码输入流的例子中,由于对流的一部分执行解码编码链,明显抑制了画面质量的下降。
下面,参照图8,将描述拼接器/转换编码器的结构例子。输入MPEG比特流TS1,该比特流例如是存档器/服务器的输出信号、从卫星接收的信号或通过微波电路接收的信号。流TS1是已经多路复用多个节目(节目材料)的流。在流TS1中,至少已经多路复用两个节目。流TS1可以是已经时分多路复用信号的基本流ES。在基本流ES的情况下,需要识别当前输入流的识别标记或输入信息。
标号251是提取要编辑的两个节目(原始材料)A和B的分组的滤波器。在传输流TS的情况下,滤波器251对应于PID(分组ID)提取所需节目。在基本流ES的情况下,如上所述,需要诸如识别标记的信息。滤波器251输出已经多路复用选择的两个节目A和B的流268。
由滤波器251提取的两个节目A和B分别由MPEG解码器252a和252b解码。MPEG解码器252a获得节目A的基带视频/音频数据Sa。MPEG解码器252b获得节目B的基带视频/音频数据Sb。这些基带信号Sa和Sb输出到外部编辑器和转接器22。此外,基带数据Sa和Sb存储到画面缓冲器263。设置写控制器264和读控制器265。写控制器264控制画面缓冲器263的写操作。读控制器265控制画面缓冲器263的读操作。写地址WAD和写启动WE从写控制器264提供给画面缓冲器263。同样,读地址RAD从读控制器265提供给画面缓冲器263。
在MPEG解码器252a和252b的解码处理中使用的编解码信息输出给信息缓冲器255。写地址WAD和写启动WE从写控制器256提供给信息缓冲器255。读地址RAD从读控制器257提供给信息缓冲器255。信息缓冲器255应该与流Sc的编辑点同步地将用于再编码处理的编解码信息提供给再编码器253。当返回视频数据Sb已经在编辑点(点内)处连接到视频数据Sa的视频数据Sc时,用于再编码视频数据Sa的编解码信息转接到用于再编码视频数据Sb的编解码信息。
如上所述,信息缓冲器255和画面缓冲器263的存储容量可以对应于编辑器和转接器22的系统延迟(用于几个帧的时间段)。于是,信息缓冲器255和画面缓冲器263对系统结构没有不利影响。
基带编辑器和转接器22将已经编辑的返回基带视频/音频数据Sc输出给拼接器/转换编码器。基带数据Sc提供给MPEG再编码器253。再编码器253从信息缓冲器255通过路径254、对应于基带数据Sc的视频帧接收用于MPEG再编码处理的编解码信息。对应于用于再编码处理的编解码信息,为了所需比特量再编码数据Sc。再编码器253输出作为输入流A和B的AB滚动编辑操作的结果的流TS2。用于再编码处理的编解码信息例如包含运动矢量、画面类型、量化步长大小、和量化级。对于转换编码处理,能够抑制由解码编辑链引起的画面质量下降。
选择编解码信息,以便与基带数据Sc同步使用编解码信息。当读控制器257读出预定编解码信息时,读控制器257提供给再编码器253一表示编解码信息能够使用的启动信号。
输入流268和作为解码结果的基带信号Sa和Sb在时基上以1∶1∶1的关系相关。当在MPEG解码器252a和252b的解码处理中使用的编解码信息存储到信息缓冲器255时,编解码信息对应于排列标签被存储,使得它们在时基上具有1对1的关系。为了存储编解码信息以及管理从拼接器/转换编码器21接收的视频数据Sa和视频数据Sb的相位和从基带编辑器和转接器22返回的视频数据Sc的相位,设置管理表262。管理表262控制信息缓冲器255和画面缓冲器263的写/读操作。写控制器256和264和读控制器257和265连接到管理表261。
管理表261用输入流的画面计数值和返回视频数据Sc的帧计数值,控制信息缓冲器255和画面缓冲器263的写/读操作。帧计数器258对视频数据Sc的帧数目计数,并且用对应于计数值的读地址将读请求REQ发送给管理表262。画面计数器271从输入流268中检测画面首标,并且对画面数目计数。由画面计数器271计数的画面的数目提供给画面/帧索引产生器272。画面/帧索引产生器272产生对应于画面的索引,以便排列用于画面和信息的管理表261。
管理表261用索引排列内容,并且用作为从帧计数器258接收的视频数据Sc的帧数目的计数值的地址输出管理信息。管理表261具有环形缓冲器的结构,其中输入信息连续写入到递增的地址,并且读指针对应于读请求REQ递增。由读指针表示的地址的再编码信息从信息缓冲器255读出,并且通过路径254发送给MPEG再编码器253。画面缓冲器263以与信息缓冲器255相同方式被控制。
再编码器253连接到比特量估计器259。比特量估计器259执行VBV缓冲器处理。换言之,用比特量估计器259,再编码器253合适地执行再编码处理,以便对MPEG比特流TS2解码的解码器的缓冲器不上溢或下溢。当执行再编码处理时,满足目标产生的比特量。在正常编码处理中,当再编码器253的产生的比特量不够指定的目标比特量时,添加虚拟数据。相反,当产生的比特量超过目标比特量(换言之,在解码器的缓冲器将下溢的情况下)时,执行宏块跳跃处理或用于使得预测偏差(即,预测画面的宏块MB和相关的一个考虑画面之间的差值)为零的处理。当这种处理没有防止缓冲器下溢时,由解码器侧的处理方法影响再现画面。正常地,直到数据存储到缓冲器中再现图像冻结。
标号273是画面比特量计数器,对输入流268的产生的比特量计数。画面比特量计数器273将计数结果提供给VBV缓冲器模拟器274。VBV缓冲器模拟器274模拟VBV缓冲器。VBV缓冲器模拟器274的模拟结果提供给再编码方案规划器275。再编码方案规划器275在编辑点附近指定和加权产生的比特量,以便执行再编码处理。在管理表261的相关索引时隙处指定和加权的比特量写到管理表261的相关索引时隙。在编辑点附近处目标比特量(指定和加权比特量的信息)提供给比特量估计器253,以便再编码器253的再编码的产生比特量变得合适。
示于图8的拼接器/转换编码器检测编辑点,无需从编辑设备接收的编辑位置信息,以便获得基带信号Sc的编辑状态。为了实现这一点,示于图8的拼接器/转换编辑器配备有比较部分270。比较部分270接收两个原始基带信号Sa和Sb以及返回基带信号Sc。从画面缓冲器263接收两个原始基带信号Sa和Sb。从编辑器和转接器22返回基带信号Sc。此外,比较部分270从信息缓冲器255接收附加信息诸如GOP首标、画面首标、宏块类型和运动矢量。比较部分270对应于输出到编辑器和转接器22的信号Sa和Sb以及从编辑器和转接器22的返回信号Sc的匹配,检测编辑点。此外,比较部分270确定用于再编码处理的编解码信息是否能够用于每个画面和用于每个宏块。
图9示出了按照本发明的第二实施例的、作为基带信号Sa(称为画面picA)和基带信号Sb(称为画面picB)的编辑结果的基带信号Sc(称为画面picC)的例子。存储编解码信息用于基带信号Sa和基带信号Sb的每个画面或每个宏块。在示于图9的例子中,在编辑点处执行用于两个画面的划去处理、交叉淡变处理等,而不是从画面picA到画面picB的转接。换言之,编辑点之前,画面picC的每帧与画面picA的每帧匹配。在编辑点处,画面picC的帧是画面帧picA和画面picB帧的编辑结果。在编辑点之后,画面picC的每个帧与画面picB的每帧匹配。存储用于基带信号Sa和Sb的每个画面或每个宏块的编解码信息。
比较部分270确定画面picA与画面picC在它们相位匹配的状态下是否匹配。此外,比较部分270确定画面picB与画面picC在它们相位匹配的状态下是否匹配。当画面picA与画面picC不匹配时或当画面picB与画面picC不匹配时,比较部分270检测编辑点的帧。实际上,当一个画面的帧的象素和另一个画面的相关帧象素之间的差值是0时,比较部分270确定两个画面匹配。否则,比较部分270确定两个画面不匹配。例如,在两个画面的相位匹配的情况下,一个画面的每个象素和另外画面的每个象素连续提供给减法电路。当两个象素的差值是零时,比较部分270确定两个画面不匹配。或者,当不匹配的象素数目变成预定值时,比较部分270可以确定两个画面不匹配。
当检测到这样的编辑点时,选择再编码器253的再编码处理使用的编解码信息。当为每个帧转接画面时,为每个帧选择再使用的编解码信息。然而,当两个画面放置在编辑点处的画面中如图9的示例时,对于为每个帧选择编解码信息的处理,不能足够防止再编码处理引起的画面质量下降。
于是,按照本发明的第二实施例,为每个宏块确定编解码信息(用于再编码处理)的再使用。接着,将描述用于再使用每个宏块的编解码信息的估计处理和确定处理。这些处理由比较部分270执行。
如图10所示,画面picA(或画面picB)的宏块(由MBA或MBB表示)和画面picC的宏块(由MBC表示),在宏块MBA(MBB)的空间位置与宏块MBC的空间位置匹配的情况下,被比较。在此例中,每个宏块的大小是(16×16)。用与每帧相同方式执行用于每个宏块的匹配/不匹配的确定。
图11是用于确定是否能够再使用编解码信息的过程的流程图。当从编辑器和转接器接收已经编辑的视频信号Sc(画面picC)时,开始该处理。在步骤S1,从画面缓冲器263读出原始画面A和B。
在步骤S2(作为比较步骤),比较画面A和C。当在步骤S2的确定结果是否定(即,画面A和C不匹配)时,流程进行到步骤S3。在步骤S3,比较画面B和C。当在步骤S3的确定结果是否定(即,画面B和C不匹配)时,流程进行到步骤S4。在步骤S4,比较宏块MBA和MBC。当在步骤S4的确定结果是否定(即,宏块MBA和MBC不匹配)时,流程进行到步骤S5。在步骤S5中,比较宏块MBB和MBC。如上所述,两个宏块在它们的空间位置相同的状态下被比较。
当在步骤S2的确定结果是肯定(即,picA=picC)时,用解码画面A使用的编解码信息,再编码画面C。在MPEG系统中,有三种类型的画面,它们是作为帧内编码画面的I(内部)画面、作为帧间前向预测编码画面的P(预测)画面和B(双向预测)画面。对应于画面类型,编解码信息再使用的条件不同。于是,当在步骤S2的确定结果是肯定时,流程进行到作为帧画面子程序(后面将要描述)的步骤S6。
后面,流程进行到步骤S7。在步骤S7,确定画面C的预测帧画面是否是画面A的帧画面(即,PIC(FW/BW),PIC Fg≠0?)。当在步骤S7的确定结果是肯定时(即,满足条件),相关帧画面的编解码信息被准备为每个帧画面再使用编解码信息(在步骤S8)。当再使用用于每个帧画面的编解码信息时,用于一侧帧画面的编解码信息可以用于再编码双向预测帧画面。
当在步骤S7的确定结果是否定(即,不满足在步骤S7的条件)时,如同在步骤S2中picA=picC?的条件不满足,流程进行到步骤S3。换言之,当画面C的预测帧画面不是画面A的帧画面时,搜索下个条件。
当在步骤S3的确定结果是肯定(即,picB=picC)时,用画面B的编解码信息,再编码画面C。在此情况下,对应于画面类型,编解码信息的再使用的条件不同。这样,流程进行到作为帧画面子程序的步骤S6。此后,流程进行到步骤S9。在步骤S9,如同用于画面A的步骤S7,确定画面C的预测帧画面是否是画面B的帧画面。当在步骤S9的确定结果是肯定的(即,满足在步骤S9的条件)时,流程进行到步骤S8。在步骤S8中,相关帧画面的编解码信息准备为每个帧画面再使用编解码信息。实际上,从信息缓冲器255读出相关帧画面的编解码信息,并且提供给再编码器253。
当在步骤S9的确定结果是否定(即,在步骤S9的条件不满足)时,如同条件picB≠picC的情况,流程进行到步骤S4。换言之,当条件(picA≠picC)和(picB≠picC)满足时,确定两个画面的宏块是否匹配(MBA=MBC)。如图9所示,当画面A和B共存于画面C的编辑点处帧画面中时,满足条件(picA≠picC)和(picB≠picC)。在此情况下,为每个宏块再使用编解码信息。
当在步骤S4的确定结果是肯定(即,MBA=MBC)时,用宏块MBA的编解码信息,再编码宏块MBC。在MPEG系统中,与画面类型不同,有四个宏块类型,它们是帧内编码宏块、用于用过去的宏块预测将来宏块的前向帧间预测宏块,用于用将来宏块预测过去宏块的后向帧间预测宏块,和用于用过去宏块和将来宏块预测所考虑的宏块的内插宏块。
I画面仅包含帧内编码宏块。P画面包含帧内编码宏块和前向帧间预测宏块。B画面包含所有四种类型的宏块。对应于宏块类型,编解码信息的再使用的条件不同。于是,当在步骤S4的确定结果是否定时,流程进行到作为宏块子程序(后面将描述)的步骤S10。
后面,流程进行到步骤S11。在步骤S11,确定画面C的预测宏块是否是画面A的宏块(即,MB(FW/BW),MB Fg≠0?)。当在步骤S11的确定结果是肯定时,流程进行到步骤S12。在步骤S12,相关宏块的编解码信息被准备用于每个宏块的再使用编解码信息。当再使用每个宏块的编解码信息时,可以使用双向预测宏块的一侧宏块的编解码信息。
当在步骤S11确定结果是否定(即,画面C的预测宏块不是画面A的宏块)时,流程进行到步骤S13。在步骤S13,不再使用编解码信息。在此情况下,不执行转换编码处理。而是简单执行编码处理。
当在步骤S4的确定结果是否定(即,MBA≠MBC)时,流程进行到步骤S5。在步骤S5,确定条件MBB=MBC是否满足。当在步骤S5的确定结果是否定(即,MBB≠MBC)时,流程进行到步骤S13。在步骤S13,不再使用编解码信息。当在步骤S5的确定结果是肯定(即,MBB=MBC)时,用宏块MBB的编解码信息,再编码宏块MBC。在此情况下,对应于宏块类型,编解码信息的再使用的条件不同。于是,流程进行至为宏块子程序的步骤S10。此后,流程进行到步骤S14。在步骤S14,如同步骤S11,确定画面C的预测宏块是否是画面B的宏块。当在步骤S14的确定结果是肯定(即,满足步骤S14的条件)时,流程进行到步骤S12。在步骤S12,相关宏块的编解码信息被准备为每个宏块的再使用编解码信息。实际上,从信息缓冲器255读出相关宏块的编解码信息,并且提供给再编码器253。当在步骤S14的确定结果是否定(即,在步骤S14的条件不满足)时,流程进行到步骤S13。在步骤S13,不再使用编解码信息。
接着,参照图12,将详细描述在步骤S6的帧画面子程序。在步骤S21,确定考虑的帧画面是否是I画面。对应于存储在信息缓冲器255中的画面首标的信息,确定画面类型。当在步骤S21的确定结果是肯定(即,考虑的帧画面是I画面)时,流程进行到步骤S22。在步骤S22,画面标志PIC Fg设定到“1”。表示每个画面的预测帧画面是否出现的画面标志PIC Fg定义如下:
PIC Fg=0:相关帧画面不出现。
PIC Fg=1:相关帧画面出现在考虑的帧中。
PIC Fg=2:是P画面的预测帧画面出现在前向中。
PIC Fg=3:是B画面的预测帧画面出现在前向中。
PIC Fg=4:是B画面的预测帧画面出现在后向中。
PIC Fg=5:是B画面预测帧画面出现在前向和后向中。
在步骤S22,当再使用编解码信息时,设定表示预测帧画面的画面标志PIC Fg。画面标志用来确定编解码信息是否被再使用。此外,画面标志用来定义从信息缓冲器255提供给再编码器253的编解码信息。
当在步骤S21的确定结果是否定(即,考虑的帧画面不是I画面)时,流程进行到步骤S23。在步骤S23,确定考虑的帧画面是否是P画面。当在步骤S23的确定结果是肯定(即,考虑的帧画面是P画面)时,流程进行到步骤S24。在步骤S24,搜索和检测预测帧画面。在此情况下,由于帧画面已经编码,使得它用过去帧画面预测,从过去帧画面中检测基于编码处理的预测帧画面。对应于包含在GOP首标中的GOP序列的信息,确定过去预测帧画面的位置。
在步骤S25,确定画面C的预测帧画面是否出现在画面A(在示于图11的接着步骤S2的子程序的情况下)或画面B(在示于图11的接着步骤S3的子程序的情况下)中。在预测帧画面与画面A或B的帧画面的位置在时基上相同的情况下,通过将预测帧画面与画面A或B的帧画面比较执行该确定。当在步骤S25的确定结果是肯定(即,预测帧画面出现在画面A或B中)时,流程进行到步骤S22。在步骤S22,如上所述,画面标志设定为“2”。当在步骤S25的确定结果是否定(即,预测帧画面不出现在画面A或B中)时,画面标志PIC Fg设定为“0”(在步骤S26)。
当在步骤S23的确定结果是否定(即,考虑的帧画面不是P画面,而是B画面)时,流程进行到步骤S27。在步骤S27,搜索和检测预测帧画面。此后,流程进行到步骤S28。在步骤S28,确定画面C的预测帧画面是否出现在画面A或B中。当在步骤S28的确定结果是否定(即,画面C的预测帧画面不出现在画面A或B中)时,流程进行到步骤S26。在步骤S26,画面标志PICFg设定为“0”。当在步骤S28的确定结果是肯定(即,画面C的预测帧画面出现在画面A或B中)时,流程进行到步骤S22。在步骤S22,如上所述,根据是B画面的预测帧画面是否出现在后向(过去)、前向(将来)或在前向/后向,画面标志PIC Fg分别设定为“3”、“4”或“5”。
用这种方式,为每帧画面执行对再编码信息的再使用的确定。在示于图9的例子中,在编辑点处的帧画面是B画面。在B画面的情况下,如同图12的流程图所示的,搜索编辑点的前向中的预测帧画面(P画面)和编辑点的后向中的预测帧画面(P画面)。比较在前向中的预测帧画面和在画面A中的帧画面。当它们匹配时,确定预测帧画面出现在前向中。此外,比较后向中帧画面和A画面中的帧画面。当它们匹配时,确定预测帧画面出现在后向中。在编辑点的前向和后向中的帧画面可匹配画面A中的帧画面。在示于图9的例子中,由于两个帧画面共存于所考虑的帧画面中,在步骤S2和S3中的条件不满足。于是,执行每个宏块的确定处理。
图13示出了用于每个宏块的编解码信息的再使用确定处理的流程图(在步骤S10的宏块子程序)。在步骤S31、S32和S33,确定宏块类型。宏块类型包含在MPEG2语法的宏块层的宏块模式中。对应于该信息,确定宏块类型。
在步骤S31,确定所考虑的宏块是否是帧内编码的宏块(I MB)。当在步骤S31的确定结果是否定(即,所考虑的宏块不是I MB)时,流程进行到步骤S32。在步骤S32,确定所考虑的宏块是否是内插(双向)宏块Bid MB。当在步骤S32处的确定结果是否定(即,所考虑的宏块不是Bid MB)时,流程进行到步骤S33。在步骤S33,确定所考虑的宏块是否是后向帧内预测宏块(或简称后向宏块如图13所示)。当在步骤S33的确定结果是否定(即,所考虑的宏块不是I MB,也不是Bid MB,也不是后向宏块)时,所考虑的宏块是前向帧间预测宏块(或简称前向宏块如图13所示)。
确定编解码信息是否能够被每个宏块类型再使用。当在步骤S31的确定结果是肯定(即,所考虑的宏块是I MB)时,流程进行到步骤S34。在步骤S34,宏块标志MB Fg设定为“1”。当在步骤S31的确定结果是否定(即,所考虑的宏块不是I MB)时,选择运动矢量。确定对应于预测宏块的宏块是否出现在由运动矢量运动的位置处的画面A或B中。当这些条件满足时,能够再使用编解码信息。
用于每个宏块的表示预测宏块是否出现在画面A或B的宏块标志MB Fg定义如下:
MB Fg=0:相关宏块没有出现。
MB Fg=1:相关宏块出现在所考虑的帧中。
MB Fg=2:相关宏块出现在编辑点的前向中。
MB Fg=3:相关宏块出现在编辑点的后向中。
MB Fg=4:相关宏块出现在编辑点的前向和后向中。
MB Fg=5:宏块出现在编辑点的前向和后向的前向侧。
MB Fg=6:宏块出现在编辑点的前向和后向的后向侧。
宏块标志用来确定编解码信息是否能够被每个宏块再使用。此外,宏块标志用来定义从信息缓冲器255提供给再编码器253的编解码信息。
当在步骤S32的确定结果是肯定(即,所考虑的宏块是双向宏块)时,准备前向运动矢量和后向运动矢量(步骤S35)。用这些运动矢量,搜索和检测预测宏块(步骤S36)。由于预测宏块的位置对应于GOP序列,对应于包含在GOP首标中GOP序列的信息,检测预测宏块。
此后,流程进行到步骤S37。在步骤S37,确定预测宏块是否出现在画面A中(在示于图11中接着步骤S4的子程序的情况下)或是否出现在画面B中(在示于图11中接着步骤S5的子程序的情况下)。通过比较预测宏块和等效于画面A或B中的宏块的画面块,执行该确定,所述画面块出现在由运动矢量运动的预测宏块的位置处。
当在步骤S37的确定结果是肯定(即,预测宏块出现在画面A和/或画面B中)时,流程进行到步骤S38。在步骤S38,宏块标志MB Fg设定为“4”,“5”,“6”。当在步骤S37的确定结果是否定(即,对应于该预测宏块的宏块不出现)时,流程进行到步骤S39。在步骤S39,宏块标志MB Fg设定到“0”。当宏块标志MB Fg设定为“0”时,它表示编解码信息不能够被每个宏块使用。
当如图14所示,帧画面A和B共存时,执行确定用于每个宏块。在示于图14的例子中,表示在编辑点附近处的帧画面。在示于图14的例子中,所考虑的帧画面的画面类型是B画面。此外,表示编辑点的前向和后向中的两个宏块。在编辑点的帧画面中,在帧画面A中的宏块MB与画面块比较,运些画面块等效于由运动矢量运动的位置处过去的帧画面A中的宏块。(在图14中,这些宏块由GOOD表示)。此外,这些宏块与画面块比较,这些画面块对应于由后向运动矢量运动的位置处将来帧画面B中的宏块。在此情况下,这些块均与画面块(由NG表示)不匹配。于是,在此情况下,宏块标志MB Fg设定为“5”。
在编辑点处帧画面B中的宏块MB与画面块比较,这些画面块等效于在由前向运动矢量和后向运动矢量运动的位置处帧画面A和B中的宏块。如图14所示,一宏块与由后向运动矢量运动的将来帧画面(此例中,P画面)中的宏块匹配。于是,在此情况下,宏块标志MB Fg设定为“6”。当帧画面A和B不共存时,等效于宏块的画面块出现在编辑点的前向和后向中,所述宏块对应于预测宏块。于是,宏块MB Fg设定为“4”。
在图13中,当在步骤S33的确定结果是肯定(即,帧画面C的所考虑的宏块是后向宏块)时,流程进行到步骤S41。在步骤S41,准备后向运动矢量。搜索和检测等效于由运动矢量运动的位置处将来帧画面A或B中的宏块的画面块(步骤S42)。此后,流程进行到步骤S43。在步骤S43中,所检测的画面块与所考虑的宏块的预测宏块比较,并且确定等效于与所述预测宏块对应的宏块的画面块是否出现。
当在步骤S43的确定结果是肯定(即,等效于与预测宏块对应的宏块的画面块出现)时,流程进行到步骤S44。在步骤S44,宏标志MB Fg设定为“3”。当在步骤S43的确定结果是否定(即,等效于与预测宏块对应的宏块的画面块不出现)时,流程进行到步骤S39。在步骤S39,宏块标志MB Fg设定为“0”。
当在步骤S33的确定结果是否定(即,在帧画面C中所考虑的宏块不是后向宏块,而是前向宏块)时,流程进行到步骤S45。在步骤S45,准备前向运动矢量。此后,流程进行到步骤S46。在步骤S46,搜索和检测等效于由运动矢量运动的位置处过去帧画面A或B中的宏块的画面块。此后,流程进行到步骤S47。在步骤S47,所检测的宏块与所考虑的宏块的预测宏块比较,并且确定等效于与所述预测宏块对应的宏块的画面块是否出现。
当在步骤S47的确定结果是肯定(等效于与预测宏块对应的宏块的画面块出现)时,流程进行到步骤S48。在步骤S48,宏标志MB Fg设定为“2”。当在步骤S47的确定结果是否定(即,等效于相关宏块的画面块不出现)时,流程进行到步骤S39。在步骤S39,宏块标志MB Fg设定为“0”。
用这种方式,确定用于每个宏块的编解码信息的再使用的有效性。于是,如图9所示,即使两个原始帧画面存在于编辑点处的帧画面中,用每个宏块的编解码信息,能够再编码帧画面。于是,编解码信息比用于每帧画面的再编码处理的情况能够更好的使用。因此,能够抑制画面质量的下降。
在上述描述中,尽管MPEG系统用作压缩编码系统,也能够使用另一个压缩编码系统。
在按照本发明的编辑控制装置,使用编码流执行与存档器/服务器等的输入/输出连接。用基带信号执行与编辑设备的连接。此外,用转换编码处理,能够明显抑制由于解码编码链引起的画面质量的下降。由于不需要将用于转换编码处理的再编码信息添加到基带信号,和将产生的信号发送到外部编辑设备或存储设备,能够执行编辑操作而不影响外部设备。于是,诸如画面材料的材料能够作为流被存储。此外,不需要改变广播站或工作台中编辑设备的结构。从用户的观点看,包括编辑设备和编辑控制设备的编辑系统将数据编辑为流。然而,编辑系统实际上将数据编辑为基带信号。
此外,使基带信号和比特流相关。于是,仅对于需要的画面执行转换编码处理,并且与相关比特流转接。因此,能够显著抑制由于转换编码处理引起的失真。此外,虽然直接存储和编辑压缩材料,也直接存储和编辑基带材料。
此外,按照本发明,由于编辑系统直接处理MPEG流,能够为设置在广播站中的网络电路实现多通道系统。于是,能够有效使用广播站的材料传输资源。鉴于用于地面波广播的中心站和局部站之间的关系和用于CATV系统的控制台和电缆操作员之间的关系,按照本发明,中心站的CM能够用局部站的CM代替。此外,能够对产生的比特流无劣变地将广播站的登录标志插入。
此外,按照本发明,如第二实施例所述的,当从编码比特流解码的基带信号被编辑,然后再编码成流,不需要从编辑设备接收编辑位置信息。于是,能够略去用于传输编辑位置信息的传输线。此外,能够略去用于将作为时间码的编辑信息解译成时基上的流的处理。
此外,按照如第二实施例所述的本发明,当为转换编码处理再使用编解码信息时,也能够在比画面更小的数据单元(即,用于每个宏块以及每个画面)中选择编解码信息。于是,即使两个或多个原始材料共存于编辑点处的帧画面中,能够抑制再编码处理引起的画面质量的下降。

Claims (27)

1、一种编辑系统,具有用于编辑基带信号的编辑设备和连接到所述编辑设备的编辑控制设备,
其中,所述编辑控制设备包括:
第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;
第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给所述编辑设备;
编码装置,用于用在所述第一解码装置和所述第二解码装置中使用的编解码信息,再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号,并且输出第三编码比特流;和
控制装置,用于对应于从外部设备接收的编辑位置信息,选择由所述第一编码装置和所述第二编码装置使用的编解码信息。
2、如权利要求1所述的编辑系统,还包括:
选择装置,用于选择预定区域中的所述第三编码比特流,该预定区域包括所述第一基带信号和所述第二基带信号连接处的编辑位置,和用于在除了所述预定区域的区域中选择所述第一编码比特流和所述第二编码比特流之一。
3、如权利要求1所述的编辑系统,还包括:
用于使所述第一和第二编码比特流与所述第一和第二基带信号相关的装置。
4、如权利要求1所述的编辑系统,
其中,从材料存储设备中输入所述第一编码比特流和所述第二编码比特流,和
其中,所述第三编码比特流输出到所述材料存储设备。
5、如权利要求1所述的编辑系统,
其中,所述第一编码比特流是从另一个站通过传输介质接收的广播信号,和
其中,所述第二编码比特流是插入所述广播信号中的广播材料。
6、如权利要求5所述的编辑系统,
其中,所述广播材料是CM(商业消息)材料。
7、如权利要求5所述的编辑系统,
其中,所述广播材料是站登录标志。
8、一种编辑控制装置,包括:
第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;
第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给编辑设备;
编码装置,用于用在所述第一解码装置和所述第二解码装置中使用的编解码信息,再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号,并且输出第三编码比特流;和
控制装置,用于对应于从外部设备接收的编辑位置信息,选择由所述第一编码装置和所述第二编码装置使用的编解码信息。
9、如权利要求8所述的编辑控制装置,还包括:
选择装置,用于选择预定区域中的所述第三编码比特流,该预定区域包括所述第一基带信号和所述第二基带信号连接处的编辑位置,和用于在除了所述预定区域的区域中选择所述第一编码比特流和所述第二编码比特流之一。
10、如权利要求8所述的编辑控制装置,还包括:
用于使所述第一和第二编码比特流与所述第一和第二基带信号相关的装置。
11、如权利要求8所述的编辑控制装置,
其中,从材料存储设备中输入所述第一编码比特流和所述第二编码比特流,和
其中,所述第三编码比特流输出到所述材料存储设备。
12、如权利要求8所述的编辑控制装置,
其中,所述第一编码比特流是从另一个站通过传输介质接收的广播信号,和
其中,所述第二编码比特流是插入所述广播信号中的广播材料。
13、如权利要求12所述的编辑控制装置,
其中,所述广播材料是CM(商业消息)材料。
14、如权利要求12所述的编辑控制装置,
其中,所述广播材料是站登录标志。
15、一种编辑控制方法,包括以下步骤:
输入其中对第一材料已经编码的第一编码比特流和其中对第二材料已经编码的第二编码比特流;
将所述第一编码比特流和所述第二编码比特流分别被解码的第一基带信号和第二基带信号发送给编辑设备;
从所述编辑设备接收作为所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号;
对应于从外部设备接收的编辑位置信息选择解码所述第一编码比特流和所述第二编码比特流使用的编解码信息的所需编解码信息;和
用所述选择的编码信息再编码所述第三基带信号,并且输出第三编码比特流。
16、一种具有用于编辑基带信号的编辑设备和连接到所述编辑设备的编辑控制设备的编辑控制装置,
其中,所述编辑控制设备包括:
第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;
第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给编辑设备;
比较装置,用于在所述第一基带信号和所述第三基带信号、所述第二基带信号和所述第三基带信号相位匹配的状态下,比较所述第一基带信号、所述第二基带信号和所述第三基带信号,以便检测编辑位置;
控制装置,用于对应于所述编辑位置的信息,选择在再编码处理中使用的编解码信息;和
编码装置,用于使用所述选择的编解码信息,再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号,并且输出第三编码比特流。
17、如权利要求16所述的编辑系统,还包括:
选择装置,用于选择预定区域中的所述第三编码比特流,该预定区域包括所述第一基带信号和所述第二基带信号连接处的编辑位置,和用于在除了所述预定区域的区域中选择所述第一编码比特流和所述第二编码比特流之一。
18、如权利要求16所述的编辑系统,还包括:
用于使所述第一基带信号、所述第二基带信号和所述第三基带信号在时基上相关的装置;
用于以这样一种方式存储所述第一基带信号和所述第二基带信号的装置,该方式为所述第一基带信号和所述第二基带信号对应于排列标签在时基上相关;和
用于以这样一种方式存储在所述第一编码比特流和所述第二编码比特流的解码处理中获得的编解码信息的装置,该方式为所述编解码信息与所述排列标签在时基上相关。
19、一种编辑控制装置,包括:
第一解码装置,用于对材料已经被编码的第一编码比特流解码,并且输出第一基带信号;
第二解码装置,用于对材料已经被编码的第二编码比特流解码,并且将第二基带信号输出给编辑设备;
比较装置,用于在所述第一基带信号和所述第三基带信号、所述第二基带信号和所述第三基带信号相位匹配的状态下,比较所述第一基带信号、所述第二基带信号和所述第三基带信号,以便检测编辑位置;
控制装置,用于对应于所述编辑位置的信息,选择在再编码处理中使用的编解码信息;和
编码装置,用于使用所述选择的编解码信息,再编码作为从所述编辑设备接收的所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号,并且输出第三编码比特流。
20、如权利要求19所述的编辑控制装置,还包括:
选择装置,用于选择预定区域中的所述第三编码比特流,该预定区域包括所述第一基带信号和所述第二基带信号连接处的编辑位置,和用于在除了所述预定区域的区域中选择所述第一编码比特流和所述第二编码比特流之一。
21、如权利要求19所述的编辑控制装置,还包括:
用于使所述第一基带信号、所述第二基带信号和所述第三基带信号在时基上相关的装置;
用于以这样一种方式存储所述第一基带信号和所述第二基带信号的装置,该方式为所述第一基带信号和所述第二基带信号对应于排列标签在时基上相关;和
用于以这样一种方式存储在所述第一编码比特流和所述第二编码比特流的解码处理中获得的编解码信息的装置,该方式为所述编解码信息与所述排列标签在时基上相关。
22、一种编辑控制方法,包括以下步骤:
输入其中对第一材料已经编码的第一编码比特流和其中对第二材料已经编码的第二编码比特流;
将所述第一编码比特流和所述第二编码比特流分别被解码的第一基带信号和第二基带信号发送给编辑设备;
存储所述第一基带信号、所述第二基带信号和在所述第一基带信号和所述第二基带信号的所述解码处理中使用的编解码信息;
从所述编辑设备接收作为所述第一基带信号和所述第二基带信号的编辑结果的第三基带信号;
在所述第一基带信号和所述第三基带信号相位匹配的状态下,比较所述第一基带信号和所述第三基带信号,并且在所述第二基带信号和所述第三基带信号相位匹配的状态下,比较所述第二基带信号和所述第三基带信号,以便检测编辑位置;
对应于所述检测的编辑位置,选择在所述第三基带信号的所述再编码处理中使用的编解码信息;和
用所述选择的编码信息再编码所述第三基带信号,和输出第三编码比特流。
23、如权利要求22所述的编辑控制方法,还包括以下步骤:
使所述第一基带信号、所述第二基带信号和所述第三基带信号在时基上相关;和
用于以这样一种方式存储在所述第一编码比特流和所述第二编码比特流的解码处理中获得的编解码信息,该方式为所述编解码信息与所述排列标签在时基上相关。
24、如权利要求22所述的编辑控制方法,
其中,当检测编辑位置时,对每个画面执行比较,每个画面的编辑位置被检测,对应于每个检测的编辑位置为每个画面选择编解码信息。
25、如权利要求22所述的编辑控制方法,
其中,在已经在帧间预测编码处理中编码的画面被再编码的情况下,当在所述第三基带信号中对应于预测画面的相关画面出现在所述第一基带信号或所述第二基带信号中时,再使用所述编解码信息。
26、如权利要求25所述的编辑控制方法,
其中,在已经在帧间预测编码处理中编码的画面被再编码的情况下,当在所述第三基带信号中对应于预测画面的相关画面出现在所述第一基带信号或所述第二基带信号中时,再使用所述编解码信息,
其中,当所述相关画面没出现在所述第一基带信号或所述第二基带信号中时,确定对应于小于所述画面的预测块的块是否出现在所述第一基带信号或所述第二基带信号中,和
其中,当所述相关块出现在所述第一基带信号或所述第二基带信号中时,再使用每个块的编解码信息。
27、如权利要求26所述的编辑控制方法,
其中,当已经执行帧间预测编码处理和运动补偿处理时,确定对应于所述预测块的块是否出现在由运动矢量运动的位置。
CNB998002410A 1998-01-19 1999-01-19 编辑系统、编辑控制装置和编辑控制方法 Expired - Fee Related CN1157727C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP769098 1998-01-19
JP7689/1998 1998-01-19
JP7690/1998 1998-01-19
JP768998 1998-01-19

Publications (2)

Publication Number Publication Date
CN1256782A true CN1256782A (zh) 2000-06-14
CN1157727C CN1157727C (zh) 2004-07-14

Family

ID=26342024

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB998002410A Expired - Fee Related CN1157727C (zh) 1998-01-19 1999-01-19 编辑系统、编辑控制装置和编辑控制方法

Country Status (7)

Country Link
US (2) US7305040B1 (zh)
EP (1) EP0982726A4 (zh)
JP (1) JP3716328B2 (zh)
KR (1) KR100548665B1 (zh)
CN (1) CN1157727C (zh)
CA (1) CA2284216A1 (zh)
WO (1) WO1999036912A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101052127B (zh) * 2006-04-07 2010-09-22 索尼株式会社 信息处理装置和信息处理方法
CN101141641B (zh) * 2006-09-05 2010-09-22 索尼株式会社 信息处理设备和信息处理方法
CN101141642B (zh) * 2006-09-05 2011-01-19 索尼株式会社 信息处理装置及方法

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000165802A (ja) * 1998-11-25 2000-06-16 Matsushita Electric Ind Co Ltd ストリーム編集装置と編集方法
DE10119214A1 (de) * 2001-04-19 2002-10-24 Highlight Comm Ag Pfaeffikon Verfahren zum Komprimieren von Videodaten
US7266150B2 (en) * 2001-07-11 2007-09-04 Dolby Laboratories, Inc. Interpolation of video compression frames
JP4120934B2 (ja) * 2003-06-16 2008-07-16 ソニー株式会社 画像処理装置および画像処理方法、記録媒体、並びに、プログラム
JP4470431B2 (ja) * 2003-10-01 2010-06-02 ソニー株式会社 データ処理装置およびその方法
US7502368B2 (en) * 2004-04-08 2009-03-10 John Sanders Method and apparatus for switching a source of an audiovisual program configured for distribution among user terminals
US8279928B2 (en) * 2006-05-09 2012-10-02 Canon Kabushiki Kaisha Image encoding apparatus and encoding method, image decoding apparatus and decoding method
JP4325657B2 (ja) * 2006-10-02 2009-09-02 ソニー株式会社 光ディスク再生装置、信号処理方法、およびプログラム
US9872066B2 (en) * 2007-12-18 2018-01-16 Ibiquity Digital Corporation Method for streaming through a data service over a radio link subsystem
US8290036B2 (en) * 2008-06-11 2012-10-16 Optibase Technologies Ltd. Method, apparatus and system for concurrent processing of multiple video streams
US9185426B2 (en) 2008-08-19 2015-11-10 Broadcom Corporation Method and system for motion-compensated frame-rate up-conversion for both compressed and decompressed video bitstreams
US20100046623A1 (en) * 2008-08-19 2010-02-25 Chen Xuemin Sherman Method and system for motion-compensated frame-rate up-conversion for both compressed and decompressed video bitstreams
US8510107B2 (en) * 2009-11-18 2013-08-13 General Instrument Corporation Audio data bit rate detector
US8755444B2 (en) 2010-08-06 2014-06-17 Qualcomm Incorporated Two-stage entropy decoding
CN102098500A (zh) * 2011-03-02 2011-06-15 天津大学 一种提高八视点自由立体视频网络传输性能的纠错方法
CN102164286B (zh) * 2011-05-27 2012-09-26 天津大学 一种八视点自由立体视频传输错误隐藏方法
US9183049B1 (en) 2013-01-25 2015-11-10 Amazon Technologies, Inc. Processing content using pipelines
US9223621B1 (en) * 2013-01-25 2015-12-29 Amazon Technologies, Inc. Organizing content using pipelines
US8813245B1 (en) 2013-01-25 2014-08-19 Amazon Technologies, Inc. Securing content using pipelines

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69122595T2 (de) 1990-12-27 1997-03-20 Toshiba Kawasaki Kk Aufzeichnungs- und Abspielgerät
US5265122A (en) * 1992-03-19 1993-11-23 Motorola, Inc. Method and apparatus for estimating signal weighting parameters in a diversity receiver
JP3196906B2 (ja) 1992-08-21 2001-08-06 富士ゼロックス株式会社 画像信号の符号化装置
JPH06253331A (ja) * 1993-03-01 1994-09-09 Toshiba Corp 可変長符号化信号に対応した編集装置
JP3163830B2 (ja) 1993-03-29 2001-05-08 ソニー株式会社 画像信号伝送方法及び装置
NL9301358A (nl) 1993-08-04 1995-03-01 Nederland Ptt Transcodeerinrichting.
US5715009A (en) 1994-03-29 1998-02-03 Sony Corporation Picture signal transmitting method and apparatus
US5940130A (en) 1994-04-21 1999-08-17 British Telecommunications Public Limited Company Video transcoder with by-pass transfer of extracted motion compensation data
JP3200515B2 (ja) * 1994-06-15 2001-08-20 日本電信電話株式会社 符号化復号化画像の処理方法
DE69529579D1 (de) 1994-06-17 2003-03-13 Snell & Wilcox Ltd Komprimieren eines aus kompressionskodierten Videosignalen nach deren Teildekodierung kombinierten Signales
US5828421A (en) * 1994-10-11 1998-10-27 Hitachi America, Ltd. Implementation efficient digital picture-in-picture decoding methods and apparatus
JP3588153B2 (ja) * 1994-10-31 2004-11-10 三洋電機株式会社 データ編集方法及び編集装置
GB9501736D0 (en) 1995-01-30 1995-03-22 Snell & Wilcox Ltd Video signal processing
GB2307613B (en) * 1995-08-31 2000-03-22 British Broadcasting Corp Switching bit-rate reduced signals
JP3277787B2 (ja) 1995-12-21 2002-04-22 ソニー株式会社 音声・映像データ記録・再生装置
JPH09322078A (ja) * 1996-05-24 1997-12-12 Toko Inc 画像伝送装置
US6137834A (en) * 1996-05-29 2000-10-24 Sarnoff Corporation Method and apparatus for splicing compressed information streams
JPH1098713A (ja) * 1996-09-20 1998-04-14 Sony Corp 映像信号切換装置
US6262777B1 (en) * 1996-11-15 2001-07-17 Futuretel, Inc. Method and apparatus for synchronizing edited audiovisual files
JPH10150647A (ja) * 1996-11-19 1998-06-02 Fujitsu Ltd ビデオ会議システム
US6038256A (en) * 1996-12-31 2000-03-14 C-Cube Microsystems Inc. Statistical multiplexed video encoding using pre-encoding a priori statistics and a priori and a posteriori statistics
JP2933132B2 (ja) * 1997-01-09 1999-08-09 日本電気株式会社 多地点テレビ会議制御装置及び画面合成符号化方法
EP1445773A1 (en) * 1997-07-25 2004-08-11 Sony Corporation Encoding device and encoding method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101052127B (zh) * 2006-04-07 2010-09-22 索尼株式会社 信息处理装置和信息处理方法
CN101141641B (zh) * 2006-09-05 2010-09-22 索尼株式会社 信息处理设备和信息处理方法
CN101141642B (zh) * 2006-09-05 2011-01-19 索尼株式会社 信息处理装置及方法

Also Published As

Publication number Publication date
WO1999036912A1 (fr) 1999-07-22
EP0982726A4 (en) 2003-06-04
CN1157727C (zh) 2004-07-14
KR100548665B1 (ko) 2006-02-03
KR20010005525A (ko) 2001-01-15
EP0982726A1 (en) 2000-03-01
US7920634B2 (en) 2011-04-05
US20060120466A1 (en) 2006-06-08
JP3716328B2 (ja) 2005-11-16
CA2284216A1 (en) 1999-07-22
US7305040B1 (en) 2007-12-04

Similar Documents

Publication Publication Date Title
CN1157727C (zh) 编辑系统、编辑控制装置和编辑控制方法
CN1255800C (zh) 产生要记录的信息信号的方法和设备
CN1148955C (zh) 编码数据流接合设备和方法及编码数据流生成设备和方法
CN1089527C (zh) 图像编码方法、图像编码装置及图像记录载体
CN1305039C (zh) 信号记录/再生装置和方法
CN1161989C (zh) 编辑装置、编辑方法、接续装置、接续方法、编码装置和编码方法
CN1152569C (zh) 产生多路数据、再生编码数据及时钟转换的装置和方法
CN1129318C (zh) 再现设备与再现方法
CN1171452C (zh) 多种传输、记录并控制图像数据显示的装置和方法
CN1684518A (zh) 高保真代码转换
CN1239025C (zh) 使用画面类型转换的图象处理
CN1143301C (zh) 视频数据记录设备、重放设备、录放设备,和相应的方法
CN1951113A (zh) 流产生装置、流产生方法、编码装置、编码方法、记录介质及其程序
CN101036391A (zh) 画面编码装置和画面解码装置
CN1992869A (zh) 重放设备、重放方法以及重放程序
US8676038B2 (en) Recording/reproducing apparatus, recording apparatus, reproducing apparatus, recording method, reproducing method and computer program
CN1788496A (zh) 图像处理设备和方法、信息处理设备和方法、信息记录设备和方法、信息再现设备和方法、信息存储介质、以及程序
CN1237793C (zh) 用于对运动图像数据的进行编码的方法
CN1101478A (zh) 图像信号的传输和解码
CN1184809C (zh) 数据处理设备、数据处理方法、记录设备和记录方法
CN1867054A (zh) 数字视频记录装置及其记录方法
CN1163068C (zh) 数字信号处理装置和方法、数字信号记录和重放装置
CN1237066A (zh) 运动图像编码方法及装置和记录介质
US20080152313A1 (en) Image processing apparatus
CN1229991C (zh) 记录设备和记录方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040714

Termination date: 20140119