CN101557490A - 信息处理装置和信息处理方法 - Google Patents

信息处理装置和信息处理方法 Download PDF

Info

Publication number
CN101557490A
CN101557490A CNA200910134427XA CN200910134427A CN101557490A CN 101557490 A CN101557490 A CN 101557490A CN A200910134427X A CNA200910134427X A CN A200910134427XA CN 200910134427 A CN200910134427 A CN 200910134427A CN 101557490 A CN101557490 A CN 101557490A
Authority
CN
China
Prior art keywords
data
coding
video data
point
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA200910134427XA
Other languages
English (en)
Other versions
CN101557490B (zh
Inventor
水野博志
一之濑勉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101557490A publication Critical patent/CN101557490A/zh
Application granted granted Critical
Publication of CN101557490B publication Critical patent/CN101557490B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/142Detection of scene cut or scene change
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

本发明提供了信息处理装置和信息处理方法,其中,该信息处理装置包括:数据采集单元,控制包括视频数据的记录介质并采集编码对象数据;特征提取单元,接收编码对象数据,并作为用于编码的预处理,提取编码对象数据中至少包括可分割点的特征点;存储单元,存储编码对象数据;存储器单元,存储关于由特征提取单元提取的特征点的信息;分割单元,将编码对象数据分割成预定数量的分割数据;以及编码单元,将分割数据编码成分割编码数据。分割单元基于编码单元的总数和关于特征点的信息来确定可向编码单元大体上均等地分配编码对象数据的分割点,然后,向编码单元分配分割单元。通过本发明,能够有效地执行减少处理时间。

Description

信息处理装置和信息处理方法
相关申请的交叉参考
本发明包含于2008年4月11日向日本专利局提交的日本优先专利申请JP 2008-103981的主题,其全部内容结合于此作为参考。
技术领域
本发明涉及信息处理装置和信息处理方法,更具体地,涉及提取视频数据的特征信息从而能够以减少的处理时间来进行有效编码的信息处理装置和信息处理方法。
背景技术
在现有技术中,在创建诸如光盘的记录介质的站点处所使用的编写系统(authoring system)使用例如MPEG(运动图像专家组)来分别对视频数据、音频数据等执行编码(压缩编码)。然后,编写系统对通过各种编码获得的各编码数据进行多路复用并且将多路复用流存储在记录介质中。
如此配置的编写系统分别向视频数据、音频数据等分配可记录在记录介质中的比特量,然后,对各数据中的每个执行编码,从而使编码数据落在所分配的比特量的范围内。
例如,日本未审查专利申请公开第2000-278042号描述了所谓的“二次编码(two-pass encoding)”作为用于视频数据的编码方法。二次编码是由临时(初步)编码和实际编码组成的一种方法。
下文中,将临时编码称为第一次编码,而将实际编码称为第二次编码,接下来将示意性地描述二次编码。
编码器对一系列编码对象视频数据执行第一次编码,在第一次编码中保持了特定编码条件。此时,逐帧地顺序检测在第一次编码时获得的各种数据(例如,所生成的比特量)。
然后,编码器基于逐帧生成的、如此检测到的比特量来向构成视频数据的每个帧分配比特。即,编码器逐帧地设置在第二次编码中所使用的目标比特量。
此外,编码器分配在第二次编码中所使用的图片类型。图片类型的分配意味着向每帧分配编码类型。
具体地,在MPEG中,以编码类型(即,I-图(帧内图)、P-图(预测图)以及B-图(双向预测图))中的任一编码类型来对每个帧进行编码。I-图表示在不使用其他帧的图像数据的情况下直接对一帧图像数据进行编码的编码类型。即,I-图表示帧内编码的编码类型。此外,P-图和B-图表示帧间编码的编码类型。即,P-图基本上表示获得在I-图或P图的一帧图像数据和临时在前的预测帧图像数据之间的差分(预测误差)然后对差分进行编码的编码类型。此外,B-图基本上表示获得在临时在前或在后I-图或P-图的一帧图像数据和预测帧图像数据之间的差分然后对差分进行编码的编码类型。
因此,图片类型的的分配意味着向三个编码类型(即,I-图、P-图和B-图)中的任一个分配每个帧。换句话说,可以将图片类型的分配当作设置每个GOP(图片组)的结构。
以这种方式,在第一次编码之后,使用第一次编码的结果逐帧地执行目标比特量的设置和图片类型的分配。
然后,设置至少包括图片类型和每帧的目标比特量的编码条件,然后,根据所设置的编码条件来执行第二次编码。
即,编码器对与在第一次编码中所使用的数据相同的视频数据执行第二次编码,并输出所得到的编码后的视频数据。具体地,编码器依次对构成视频数据的每帧的数据进行编码以具有分配的图片类型和目标比特量。结果,从编码器输出由I-图、B-图和P-图中的任一个的连续配置的编码帧数据形成的比特流,来作为编码后的视频数据。
例如,在日本未审查专利申请公开第2002-326864号和日本未审查专利申请公开第2001-53570号中描述了用于视频数据的其他编码方法。
在JP-A-2002-326864中描述的方法依次执行以下的第一至第三处理。即,在第一处理中,对视频数据的所有区间都执行第一次编码。在第二处理中,仅对在视频数据内的特定区间部分地执行第二次编码。在第三处理中,用第二次编码后的视频数据来代替仅在第一次编码后的视频数据内的特定区间中的数据,然后输出所得到的数据作为最终编码视频数据。
另外,在JP-A-2001-53570中描述了以下方法。即,JP-A-2001-53570描述了一种方法,其中,设置目标比特量,从而在第一次编码视频数据内,分配的比特量从如果比特量减少也不会成问题的区间开始减少并且所减少的比特量被分配给另一个成问题的区间,然后,根据如此设置的目标比特量来执行第二次编码。
因此,编码在比特量计算等中使用了高负载。鉴于此,例如,当使用作为应用在蓝光(商标)中的一种编解码器的MPEG-4AVC(H.264/AVC)来执行编码时,处理负载高于应用在DVD(数字通用光盘)中的MPEG-2,结果,编码时间延长。
为了对上述问题进行补偿,存在以并行处理的方式分布并执行编码以减少编码时间的方法。例如,提供了多个类似配置的编码PC(个人计算机),然后,对均等分配给编码PC的素材(material)执行并行处理。因此,有效地处理H.264/AVC编码以能够减少编码时间。
专利文献4:日本未审查专利申请公开第2006-74461号
发明内容
顺便提及,当在分布式编码(distributed encoding)中执行并行处理时,在用于编码的预处理中,可能必需通过搜索不影响图像质量的点来预先确定编码对象视频数据的分割点。
然而,在用单个或多个处理装置来执行高处理负载的图像压缩的现有编写系统(诸如,AVC编解码器)中,已单独执行了视频数据的采集、视频数据记录设备中与其相关联的控制和视频数据的预处理/压缩。结果,即使当执行分布式编码时,其已经花费了能够实时执行压缩的另一个编解码器压缩装置的处理时间的几倍(例如,实际时间的三倍)的时间。
需要提供一种能够通过提取编码对象视频数据的特征作为用于编码的预处理、用减少的处理时间来有效地执行编码的信息处理装置和信息处理方法。
根据本发明的实施例,信息处理装置包括:数据采集单元,控制记录有视频数据的记录介质的再生,并采集编码对象数据;特征提取单元,接收编码对象数据,并提取编码对象数据中至少包括可分割点的特征点,作为用于编码的预处理;存储单元,存储编码对象数据;存储器单元,存储关于由特征提取单元提取的特征点的信息;分割单元,将编码对象数据分割成预定数量的分割数据;以及多个编码单元,将分割数据编码成分割编码数据,其中,分割单元基于多个编码单元的总数和关于特征点的信息来确定可以向编码单元基本均等地分配编码对象数据的分割点,然后,向编码单元分配分割数据。
另外,根据本发明的另一个实施例,信息处理方法包括以下步骤:控制记录有视频数据的记录介质的再生并采集编码对象数据;接收编码对象数据,并提取编码对象数据中至少包括可分割点的特征点作为用于编码的预处理;存储编码对象数据;存储关于所提取特征点的信息;将编码对象数据分割成预定数量的分割数据;以及使用多个编码装置将分割数据编码成分割编码数据,其中,分割编码对象数据包括:基于多个编码装置的总数和关于特征点的信息来确定可向编码单元基本均等地分配编码对象数据的分割点,然后,向编码装置分配分割数据。
附图说明
图1是示出应用了根据实施例的信息处理装置的工作室侧(studio-side)编写系统的配置实例的框图;
图2是示出了在工作室侧编写系统中执行的处理实例的流程图;
图3是示出了工厂侧(plant-side)编写系统的配置实例的框图;
图4是示出了在工厂侧编写系统中执行的处理实例的流程图;
图5是示出应用了根据实施例的信息处理装置的视频数据采集装置的配置实例的框图;
图6是示出了在编码对象视频数据中的候选分割点、分割点、分割处理区间的概念示图;
图7是示出了2-3下拉(pulldown)视频数据的概念示图;
图8是示出了在编写系统中的视频信号处理装置的配置实例的框图;
图9是示出了当以分布式的方式来对视频信号进行编码时的视频信号分布式处理装置的配置实例的框图;
图10是示出了根据实施例的信息处理装置的处理实例的流程图;以及
图11是示出了根据实施例的信息处理装置的配置实例的框图。
具体实施方式
下文,将参照附图详细描述本发明的具体实施例。此处,将首先描述编写系统的整体配置,然后描述以并行处理(包括用于编码的特征预处理)对视频数据进行编码的信息处理系统。
图1是示出应用了根据本实施例的信息处理装置的安装在工作室侧处的编写系统(下文中,称为“工作室侧编写系统”)的配置实例的示图。
工作室侧编写系统10被形成为使菜单信号处理装置11~编写应用执行装置18通过网络19互相连接,并且此外,DLT(数字线性磁带)21、HDD(硬盘驱动器)22和网络23通过写入器20连接至下载器16。
工作室侧编写系统10生成将被记录在光盘(未示出)中的多路复用流来作为文件,并将文件存储在DLT 21、HDD 22和网络23中的任一个中。注意,在网络23中存储数据是指通过网络23将数据传送到连接至网络23的另一个装置(例如,稍后将描述的图3中所示的工厂侧编写系统30),然后,将所传送的数据保持(存储)在另一个装置中。
在工作室侧编写系统10中,菜单信号处理装置11被编写应用执行装置18控制以切换其操作,并且例如,对从磁带录像机(未示出)等提供的菜单屏的视频数据执行编码,然后将所得到的编码视频数据存储在文件服务器17中。
副标题信号处理装置12被编写应用执行装置18控制以切换其操作,并且例如,对从磁带录像机(未示出)等提供的诸如标题的视频数据执行编码,然后将所得到的编码视频数据存储在文件服务器17中。
音频信号处理装置13被编写应用执行装置18控制以切换其操作,并且例如,对从磁带录像机(未示出)等提供的音频数据执行编码,然后将所得到的编码音频数据存储在文件服务器17中。
视频信号处理装置14被编写应用执行装置18控制,以对在将被记录在光盘(未示出)中的编辑对象(数据)内的主要视频数据执行编码,然后将所得到的编码视频数据存储在文件服务器17中。注意,稍后将参照图8描述视频信号处理装置14的具体配置实例。
多路复用器15被编写应用执行装置18控制,以对上述被存储在文件服务器17中的编码音频数据和编码视频数据进行多路复用,然后生成所得到的多路复用流来作为文件。注意,下文中,将以上的文件称为多路复用流文件。
由多路复用器15生成的多路复用流文件通过网络19被提供给下载器16。下载器16通过写入器20将多路复用流文件至少存储在DLT 21、HDD 22和网络23中的任一个中。
以这种方式,例如,向稍后将描述的图3所示的工厂侧编写系统30提供被至少存储在DLT 21、HDD 22和网络23中的任一个中的多路复用流文件,作为光盘图像数据。例如,工厂侧编写系统30将多路复用流文件记录在光盘中。即,通过工厂侧编写系统30制作记录有多路复用流文件的光盘的原始母盘34。注意,稍后将描述工厂侧编写系统30的进一步细节。
例如,文件服务器17由具有网络管理功能的计算机和允许高速存取的磁盘阵列形成。如上所述,文件服务器17存储从菜单信号处理装置11、副标题信号处理装置12、音频信号处理装置13和视频信号处理装置14通过网络19提供的编码视频数据和编码音频数据。另外,响应于来自多路复用器15等的请求,文件服务器17通过网络19将存储在其中的编码视频数据和/或编码音频数据输出至多路复用器15等。
例如,编写应用执行装置18由能够执行编写应用软件的计算机形成。编写应用软件是用于控制工作室侧编写系统10的整体操作的软件。即,例如,编写应用执行装置18根据操作者所设置的各种条件来向视频信号处理装置14、下载器16等传送编辑列表,以向各个装置通知处理对象,并控制各个装置的操作。另外,编写应用执行装置18基于可记录在光盘(未示出)中的数据大小来计算将分配给音频数据和视频数据的数据大小,并且向各个装置传送具有计算得到的数据大小的编码文件。
另外,编写应用执行装置18向视频信号处理装置14提供操作者所设置的视频信号的章节信息。这里,章节是通过帧内编码对其强制执行编码的帧,并且在光盘装置中,能够通过朝向章节的磁轨跳跃(track-jumping)来检查所记录的内容。
此外,编写应用执行系统18向视频信号处理装置14提供关于视频信号的每个GOP(图片组)的图片的最大数量、在每个GOP中的编码阵列等。另外,编写应用执行系统18还向视频信号处理装置14通知多角度处理对象。注意,多角度是指多个视频素材被时分多路复用并被记录在光盘中以能够响应于用户的选择以不同的相机角度来观看例如火车正奔驰的情景的处理。
以这种方式,编写应用执行装置18向视频信号处理装置14传送包括上述信息以及关于其他编码的信息的编码文件。注意,下文中,被编写应用执行装置18控制的菜单信号处理装置11~下载器16分别称为工作室侧编写系统10的内部装置。
这里,将参照图2的流程图描述在工作室侧编写系统10中所执行的处理实例。
在步骤S1中,编写应用执行装置18根据操作者的操作向诸如视频信号处理装置14的内部装置传送编辑列表,从而向诸如视频信号处理装置14的内部装置通知编辑对象。
注意,例如,编辑对象是指至少包括用于视频信号处理装置14的处理对象视频数据,并且在必要情况下,包括音频信号处理装置13的处理对象音频数据、副标题信号处理装置12的处理对象视频数据以及菜单信号处理装置11的处理对象视频数据中所选类型和所选数量的数据的所谓素材(数据)。
在步骤S2中,编写应用执行装置18向诸如视频信号处理装置14的内部装置提供用于编码的各种信息。
注意,这里,在步骤S2中传送的各种信息例如共同包括在预定的文件中,并且文件被传送至诸如视频信号处理装置14的内部装置。下文中,将以上的文件称为编码文件。
具体地,例如,在步骤S2中,编写应用执行装置18获取可记录在将记录编辑对象的光盘等中的数据大小。接下来,编写应用执行装置18基于所获取的数据大小来计算将被分配给构成编辑对象的每个数据的数据大小。然后,编写应用执行装置18将包含所计算数据大小的编码文件分别传送至内部装置中的对应内部装置。例如,编写应用执行装置18向视频信号处理装置14传送以下编码文件:包含被分配给用于视频信号处理装置14的处理对象视频数据(即,在编辑对象内除菜单和标题之外的视频数据)的数据大小(下文中,称为“可分配给视频数据的数据大小”)。
另外,例如,在步骤S2中,编写应用执行装置18向视频信号处理装置14传送编码文件,其包含关于在编辑对象内除菜单或标题之外的视频数据的、由操作者设置的章节的时间信息(下文中称为“访问(章节)点”)。能够处理光盘等的装置能够通过朝向章节的磁轨跳跃来检查所记录的内容。
另外,例如,在步骤S2中,编写应用执行装置18向视频信号处理装置14传送编码文件,其包含关于在编辑对象内除菜单或标题之外的视频数据的、每个GOP的显示图片的最大数量(例如,15张图片)、每个GOP中的编码阵列等。
此外,例如,在步骤S2中,在必要的情况下,编写应用执行装置18向视频信号处理装置14传送还包含多角度处理对象的编辑文件。
再另外,例如,在布骤S2中,在必要的情况下,编写应用执行装置18向视频信号处理装置14传送还包含“光盘的容量”、“VTR的开始时间和停止时间”等的编码文件。
通过步骤S2中的上述处理,当向内部装置中的每个提供包含用于编码的各种信息的编码文件时,处理前进至步骤S3。
在步骤S3中,诸如视频信号处理装置14的内部装置基于包含在编码文件中的各种信息来分别对编辑对象内的对应数据进行编码,并将所得到的编码数据存储在文件服务器17中。
在步骤S4中,多路复用器15对在步骤S3中存储在文件服务器17中的编码数据进行多路复用以生成多路复用流文件,然后将该多路复用流文件提供给下载器16。
在步骤S5中,下载器16通过写入器20将多路复用流文件存储在DLT 21、HDD 22以及网络23中的至少任一个中。
以这种方式,工作室侧编写系统10结束处理。
接下来,将参照图3描述工厂侧编写系统。图3是示出了安装在工厂侧的编写系统(下文中称为“工厂侧编写系统”)的配置实例的框图。如图3所示,例如,工厂侧编写系统30由母盘预制作装置31、格式器32和切割装置33形成。下文中,将参照图4的流程图描述在工厂侧编写系统中所执行的处理的实例。
在步骤S11中,母盘预制作装置31获取从图1中的下载器16输出并通过DLT 21、HDD 22以及网络23中的任一个提供的光盘图像数据(稍后将描述的包含图8的编码视频数据D2的多路复用流文件)。
然后,在步骤S12中,母盘预制作装置31使用外部供给的复制保护数据来加密所获取的光盘图像数据,然后,将所得到的加密数据提供给格式器32。
在步骤S13中,格式器32对所提供的加密数据执行诸如信号电平转换的各种处理,然后,将所得到的信号提供给切割装置33。
在步骤S14中,切割装置33基于从格式器32提供的信号来制作母光盘34(记录有光盘图像数据的光盘的原始母盘34)。
以这种方式,工厂侧编写系统30结束处理。
顺便提及,在现有技术中,为了有效地执行编码,采用了分布式编码。在分布式编码中,提供了多个编码器,并且相对于编码器的数量来均等地分割视频数据以执行并行处理。使用分布式编码,能够减少与复杂且不同的计算处理相关的处理时间,因此,能够实现有效的编写操作。
当执行以上的分布式编码时,如上所述,可能必需确定视频数据上可以将视频数据均等地分配给所提供的编码器的分割点,然后,在分割点处对视频数据进行分割。然而,即使在视频数据的任意部分处,也难以设置分割点。应将不影响图像质量的部分设为分割点。然后,为了确定不影响图像质量的分割点,可能需要搜索可以在不影响图像质量的情况下进行分割的候选分割点来作为在编码之前的预处理。
另外,例如,当以2-3下拉格式等来记录编码对象视频数据时,视频数据包括重复图像。因此,为了有效地使用有限的磁盘容量,期望检测重复的图像图案来作为预处理,并且还要检测候选分割点,然后,在编码过程中跳过这些重复图像。
另一方面,在用单个或多个处理装置执行高处理负载的图像压缩的现有编写系统(诸如,AVC编解码器)中,需要分开地执行视频数据的采集、视频数据记录设备的相关控制以及诸如候选分割点的检测和视频数据的下拉图案的检测的预处理/压缩。在这种现有的编写系统中,花费了能够实时执行压缩的编解码器压缩装置的实际时间内的处理时间的几倍(约三倍)的时间。
然后,在根据本实施例的信息处理装置中,在采集视频数据时控制VTR的同时,执行处理对象视频数据的特征,即,至少包括候选分割点的检测的编码对象视频数据的特征的提取。然后,将这些提取的特征信息预先存储在数据服务器中,并且当为编码设置条件时参考这些信息,从而能够有效地执行编码。
下文中,首先,将描述应用了根据本实施例的信息处理装置的视频数据采集装置的配置和在该视频数据采集装置中执行的处理的实例,然后,将描述利用在采集用于编码的视频数据时所提取的特征信息的方法。
图5是示出了视频数据采集装置的配置实例的框图。根据本实施例的信息处理装置在采集视频数据时控制再生设备以检查视频数据,同时提取视频数据的特征。即,基于通过主控制器41执行的控制,图5中所示的视频数据采集装置40通过视频数据输入/输出接口46来获取从磁带录像机(VTR)47传送的视频数据,提取稍后将描述的视频数据的特征,然后将视频数据存储在视频数据服务器48中。另外,在通过主控制器41执行的控制下,视频数据采集装置40通过网络49将从视频数据提取的特征信息记录在辅助数据服务器50中。下文中,将对此进行更详细的描述。
主控制器41由分配作为视频数据采集装置40的计算机形成,以控制视频数据采集装置40的整体操作。
具体地,例如,如图5所示,主控制器41管理图形用户接口(GUI)42以接受操作者(未示出)的操作,并控制由GUI 42管理的VTR控制单元43、数据采集控制单元44和分割点/下拉检测单元45的操作。因此,主控制器41获取从VTR 47传送的编码对象视频数据,并提取视频数据的特征。然后,主控制器41通过视频数据输入/输出接口46将编码对象视频数据存储在视频数据服务器48中。此外,主控制器41通过网络49将从视频数据获取的特征信息记录在辅助数据服务器50中。
具体地,主控制器41的GUI 42管理三个程序,即,VTR控制单元43的VTR控制程序、数据采集控制单元44的数据采集控制程序以及分割点/下拉检测单元45的分割点/下拉检测程序。
另外,VTR控制单元43接受操作者(未示出)通过GUI 42的操作,并控制VTR 47的再生。当操作者通过GUI 42设置关于视频数据的时间信息(即,开始点(开始时间码)和结束点(结束时间码))时,VTR控制单元43基于该时间信息来控制VTR 47诸如快进或快退的再生。然后,基于VTR控制单元43中的处理,数据采集控制单元44通过视频数据输入/输出接口46将视频数据采集到主控制器41中。在用于VTR控制单元43以这种方式再生VTR 47的控制下,数据采集控制单元44通过视频数据输入/输出接口46采集期望的编码对象视频数据。
此外,分割点/下拉检测单元45提取并检测关于如上所述采集到主控制器41中的视频数据的特征信息。具体地,为了执行分布式编码,至少检测可以在不影响图像质量的情况下对视频数据进行分割的候选分割点。另外,提取与存在于2-3下拉视频数据中的图像的重复图案有关的特征等,作为其他特征信息。
在根据本实施例的信息处理装置中如此配置的视频数据采集装置具体地执行以下处理。
即,当视频数据采集装置40的主控制器41上的VTR控制单元43基于操作者通过GUI 42设置的用以确定将采集的视频数据的采集开始点和采集结束点来控制VTR时,数据采集单元44通过视频数据输入/输出接口46采集视频数据。
当通过VTR控制单元43和数据采集控制单元44将视频数据采集到主控制器中时,所采集的视频数据被传送至分割点/下拉检测单元45,然后提取特征。此外,另一方面,没有被传送至分割点/下拉检测单元45而仅被采集到视频数据服务器48中的编码对象视频数据被输出至视频数据输入/输出接口。因此,通过数据采集控制单元44传送至分割点/下列检测单元45的视频数据是仅用于提取特征而传送的数据。通过如此操作,能够避免处理时间增加。
在分割点/下拉检测单元45中,为了执行分布式编码,至少提取并检测可以在不影响图像质量的情况下对视频数据进行分割的候选分割点的特征。另外,在分割点/下拉检测单元45中,连同分割点的检测,提取与编码对象视频数据的图像图案有关的特征来作为特征信息。具体地,当编码对象视频图案为2-3下拉素材时,还检测包括重复帧的图案。注意,重复图像图案并不仅限于存在于在2-3下拉视频数据中的图像图案,而且还包括没有经受2-3下拉处理的视频数据的重复图像图案。
以这种方式,在采集视频数据时,例如,当检测2-3下拉格式的特征信息(诸如,候选分割点和重复图像图案)时,这些特征信息被存储在连接至网络49的辅助数据服务器50中。另一方面,从数据采集控制单元44独立于输出至分割点/下拉检测单元45的数据来传送将存储在视频数据服务器48中的数据,然后通过视频数据输入/输出接口46存储在视频数据服务器48中。然后,所存储的视频数据在工作室侧编写系统10的视频信号处理装置14中经受编码。稍后将对编码进行详细描述。
为了减少与不同编码相关联的处理时间,根据本实施例的信息处理装置采用了执行分布式编码的方法,其中,视频数据被分割成多块并且这些块被分别分配给各个编码器以执行压缩。然后,在如上所述采集编码对象视频数据时,检测用于分布式处理的分割点。
即,在采集视频数据时,在分割点/下拉检测单元45中提取视频数据的候选分割点和例如2-3下拉视频数据的重复图像图案的同时,基于操作者操作的GUI 42来控制VTR 47。
这里,将参照图6描述候选分割点。图6是有关候选分割点和分割点的概念示图。
即使在视频数据的任意部分处也不允许设置分割点。可能需要预先搜索并确定不影响图像质量的点来作为用于分布式编码的预处理。特定分割点的实例可以是视频数据中的场景改变点。
场景改变点是场景之间的边界部分。因此,即使在该点处对视频数据进行分割,然后通过不同的编码器对先前帧和后续帧进行编码,也很少影响图像质量。然后,大亮度改变通常出现在场景改变点处。因此,能够以将先前场景和后续场景进行比较以检查先前场景和后续场景之间的亮度改变的这种方式容易地检测场景改变。
因此,确定场景改变点为候选分割点,并提取先前场景和后续场景之间的亮度改变,从而能够容易地检测出不影响图像质量的候选分割点。以这种方式,通过使用亮度改变,根据开始点和结束点之间的视频数据检测出候选分割点。
在图6中,确定场景改变点为候选分割点,并且示出了使用如上所述的亮度改变所检测的多个候选分割点。在分布式编码中,通过参考候选分割点,基于通过网络安装的编码器的总数以大体上均等的间隔来分割视频数据,然后将分割后得到的点设为分割点。另外,如图6所示,分割点之间的每个间隔是由通过网络连接的每个编码器处理的分割处理区间。
接下来,将通过具体描述检测2-3下拉视频数据的下拉图案(重复图案)的实例来描述提取与编码对象视频数据的重复图像图案有关的特征。
在根据本实施例的信息处理装置中,在检测上述的候选分割点的同时,当在处理对象视频数据中存在重复图像图案时,提取重复图像图案来作为特征信息。例如,当编码对象视频数据为2-3下拉数据时,提取并检测2-3下拉重复图案。下文中,将通过描述在2-3下拉视频数据中的重复图案的实例来描述编码对象视频数据中的重复图像图案。
这里,为了将24帧/秒(fps)数据转换成30fps的NTSC TV视频信号,2-3下拉处理周期性地重复相同的场图像。当转换成NTSC视频数据时,确定下拉图案的相位。在许多情况下,转换后的图案是规则的。注意,视频数据的一帧由两场构成,并且第一场(1st场)称为前场(top_field),而第二场(2nd场)称为后场(bottom_field)。
图7是2-3下拉视频数据的概念示图。如果不考虑下拉数据对视频数据进行编码,则还要对以图7中的B图案和D图案(即,重复的图像图案)复制的场数据进行编码。这会导致光盘容量的大量损失。为了有效地使用有限的光盘容量,可能需要通过跳过复制场来执行编码。因此,在编码时,应预先检测下拉图案的特征,并且可能需要存储特征信息以使在编码时使用特征信息。
如上所述,根据本实施例的信息处理装置在采集视频数据时检测下拉图案。然后,将检测到的下拉图案信息预先存储在辅助数据服务器50中。因此,当执行编码时,基于图案信息跳过重复场,以在能够有效使用有限的光盘容量的同时,提高压缩视频数据的效率。
具体地,检测在2-3下拉视频数据内的复制场的方法实例可以是,例如,关于所采集的编码对象视频数据,将先前帧和后续帧进行比较,从而基于在当前帧和先前帧之间的前场和后场中的差分来检测包括重复帧的图案。注意,该检测方法是实例,并且检测复制场的方法并不限于此。
如上所述,视频数据采集装置40的分割点/下拉检测单元45提取至少包括编码对象视频数据的候选分割点的特征信息。此外,如上所述,将被提取的视频数据的特征还包括与视频数据中的重复图像图案(例如,在2-3下拉视频数据中的重复图案)有关的信息。然后,通过网络49将所提取的信息记录在辅助数据服务器50中。此外,另一方面,通过视频数据输入/输出接口46将视频数据存储在视频数据服务器48中以进行编码。然后,当多个编码器被用于编码时,基于在采集视频数据时所提取的特征、根据编码器的总数来分割视频数据,然后在编码器中执行分布式编码。此外,跳过以2-3下拉格式的复制场以执行编码。
在用单个或多个处理装置执行高处理负载的图像压缩的现有编写系统(诸如,AVC编解码器)中,必需单独地执行视频数据的采集、视频数据记录设备的相关控制以及视频数据的预处理/压缩。因此,已经花费了大量的处理时间。
相反,如上所述,根据适当使用根据本实施例的信息处理装置(作为用于编码的预处理,信息处理装置在采集视频数据时检测分割点或重复图像图案,同时对VTR进行控制)的编写系统,与现有编写系统等进行比较,能够大大地减少在编写处理中视频数据压缩的处理时间。
另外,在采集编码对象视频数据时还提取有关重复图像图案的信息,即,作为用于编码的预处理。因此,能够减少处理时间并且还能有效地执行编码而没有任何损失。
接下来,将参照图8~图10描述包括使用提取信息的方法的在如上所述提取特征的同时所采集的视频数据的具体编码。
图8是示出了工作室侧编写系统10中的视频信号处理装置14的配置实例的框图。如图8所示,视频信号处理装置10例如包括主控制器60、编码器67和监控设备69。另外,视频信号处理装置14通过网络19连接至视频数据服务器48和数据压缩服务器70。
如上所述,在图2的流程图中的步骤S1中,从编写应用执行装置18向视频信号处理装置14提供编辑列表。具体地,当将视频数据采集到上述视频数据采集装置40中时,检测候选分割点和2-3下拉格式的重复图案的特征信息,然后将视频数据存储在视频数据服务器48中。此后,视频数据服务器48根据通过编写应用执行装置18通知的编辑列表向视频信号处理装置14提供输入视频数据文件,并且将处理对象视频数据D1输出至编码器67。同时,编辑列表被提供给视频信号处理装置14的主控制器60。
编码器67根据通过主控制器60从编写应用执行装置18通知的各种编码条件来切换其操作,并且通过例如MPEG方法对从视频数据服务器48输出的视频数据D1执行编码。这时,通过主控制器60可变地控制设置各种编码条件,以控制由编码器67所生成的比特量。
另外,编码器67向主控制器60提供编码结果。因此,主控制器60能够逐帧地检测用在编码器67的编码中的图片类型以及在编码中所生成的比特量。
此外,当编码器67采用应用于本实施例中的二次编码时,编码器67执行第一次编码和第二次编码。
更具体地,例如,为了预先设置用在第二次编码中的编码条件,编码器67执行第一次编码,即,例如,稍后将描述的在图10的流程图中的步骤S59部分的编码。在第一次编码中,编码器67分配在其自身内部处理中的图片类型,并使用分配的图片类型来对视频数据D1执行第一次编码。然后,基于第一次编码的结果,例如,编码器67向编码管理器62通知每帧的图片类型、所生成的比特量等。
另一方面,在第二次编码(即,例如,稍后将描述的图10的流程图的步骤S61中的编码)中,编码器67执行以下处理。即,编码器67指定通过主控制器60所设置的每帧的图片类型和目标比特量,以对视频数据D1执行第二次编码,然后,通过网络19将所得到的编码视频数据D2存储在数据压缩服务器70中。这时,编码器67向主控制器60通知存储在数据压缩服务器70中的编码视频数据的数据大小等。
注意,稍后将使用图10的流程图详细描述二次编码。
例如,监控设备69由显示设备形成,并显示与通过解码控制单元66从记录在数据压缩服务器70中的编码视频数据D2扩展的视频数据相对应的图片。即,在通过主控制器60所执行的控制下,解码控制单元66扩展记录在数据压缩服务器70中的编码视频数据D2,然后,将所得到的视频信号提供给监控装置69。监控设备69显示与所提供的视频信号相对应的图片,即,与编码视频数据D2相对应的图片。
因此,在必要情况下,操作者能够通过监控装置69来检查编码器67的处理结果。即,视频信号处理装置14能够使用监控装置69来预览编码器67的处理结果。此外,操作者能够基于预览结果通过GUI 61操作主控制器60以精密地改变各种类型编码的具体条件。
例如,主控制器60由分配给视频信号处理装置14的计算机形成。主控制器60通过网络19与编写应用执行装置18执行数据通信,以控制视频信号处理装置14的整体操作。
这里,如上所述,应用了根据本实施例的信息处理装置的编写系统的视频信号处理装置14采用分布式编码,其中,编码对象视频数据被分割成多个单位,然后,将分割后得到的单位分别分配给多个编码器,以用于编码。以这种方式,通过采用分布式编码,能够大大地减少由于不同编码而产生的处理时间。
图9是示出了采用向多个编码器分配分割后的视频数据以执行编码的分布式编码的视频信号分布式处理装置的配置实例的框图。如图9所示,视频信号分布式处理装置14′包括主控制器60′和远程编码器671~67n,远程编码器通过网络19连接至主控制器60′。另外,主控制器60′通过网络19连接至视频数据服务器48和数据压缩服务器70。视频数据服务器48存储所采集的编码对象视频数据。数据压缩服务器70存储分别通过远程编码器处理的编码视频数据D2。
另外,视频信号分布式处理装置14′的主控制器60′包括编码远程控制单元65′。编码远程控制单元65′控制通过网络19连接的远程编码器671~67n中的每个的编码。
然后,图9所示的视频信号分布式处理装置14′的主控制器60′和主控制器60′的编码远程控制单元65′分别对应于图8所示的视频信号处理装置14中的主控制器60和主控制器60的编码控制单元65。即,主控制器60′通过网络19与编写应用执行装置18执行数据通信,以控制包括远程编码器671~67n的视频信号分布式处理装置14′的整体操作。
因此,图8仅示出了单个编码器67;然而,可以将单个编码器67看作如图9所示通过网络连接的多个远程控制器671~67n。因此,下文中,将描述使用如图8所示的视频信号处理装置14执行分布式编码的实例。
例如,如图8所示,视频信号处理装置14的主控制器60包括图形用户接口(GUI)61、编码管理器62、等待控制单元63、多次控制单元64、编码控制单元65和解码控制单元66。
即,主控制器60接收通过编写应用执行装置18执行的控制和通过GUI 61的管理的操作者的操作,并且使用通过GUI 61管理的编码管理器62和编码控制单元65来控制编码器67的操作。
因此,主控制器60能够基于编码文件来更新各种类型编码的具体条件设置。另外,例如,主控制器60控制编码器67根据如此设置或更新的各种编码条件来对编码对象视频数据D1执行编码。此外,主控制器60接收从编码器67通知的编码结果,并且向编写应用执行装置18通知编码结果。
以这种方式,主控制器60根据从编写应用执行装置18通知的编辑列表来控制在视频数据服务器48中的视频数据文件,以再生期望的编辑对象。注意,下文中,为了与提供给其他内部装置的编码文件进区分,提供给视频信号处理装置14的编码文件被称为编码文件VENC.XML。
在采用分布式编码的视频信号处理装置14中,为主控制器60设置等待控制单元63。等待控制单元63根据从编写应用执行装置18通知的编码文件VENC.XML来确定关于每个编码器67(远程编码器671~67n)的编码的比特率条件,并且将诸如根据编码条件的最大分配数据大小的控制数据通知给多次控制单元64。响应于通过GUI 61的操作者的操作,多次控制单元64改变用于编码的比特分配设置和设置条件。
例如,多次控制单元64根据从编写应用执行装置18通知的编码文件VENC.XML来设置各种编码条件,并且向编码控制单元65通知与编码条件相对应的控制数据。这时,例如,响应于通过GUI61的操作者的操作,多次控制单元64能够改变所设置的各种编码条件。
例如,通过多次控制单元64所设置的编码条件包括在第一次编码中所使用的第一编码条件和在第二次编码中所使用的第二编码条件。例如,第一编码条件包括用于当编码器67执行第一次编码时,设置在编码器67的内部处理中的图片类型的各种条件等。另一方面,例如,第二编码条件包括在第二次编码中所使用的每帧的图片类型、目标比特量等。
编码控制单元65根据从多次控制单元64通知的控制文件来控制每个编码器67(远程编码器671~67n)的编码。此外,编码控制单元65向每个编码器67(远程控制器671~67n)通知在逐帧编码中的困难程度的数据,并且将压缩编码视频数据D2记录在数据压缩服务器70中。
另外,例如,当执行稍后将描述的二次编码时,编码控制单元65执行以下处理。
即,编码控制单元65根据从编写应用执行装置18通知的控制文件来控制编码器67的第一次编码和第二次编码。
另外,编码控制单元65从通过编码器67的第一次编码的结果中逐帧地检测编码的困难程度和图片类型,并且向多次控制单元64通知检测结果。多次控制单元64使用所通知的每帧的困难程度和图片类型来设置用在第二次编码中的第二编码条件。注意,稍后将描述困难程度。
此外,编码控制单元65控制通过网络19将编码器67的第二次编码所得到的最终编码视频数据D2存储在数据压缩服务器70中。
以上描述了应用根据本实施例的信息处理装置的编写系统的视频信号处理装置14的配置实例。
接下来,将参照图10描述包括上述视频信号处理装置14中的二次编码的通过根据本实施例的信息处理装置所执行的处理。注意,如上所述,为了减少编码时间,根据本实施例的信息处理装置执行所谓的分布式编码,其中,视频数据被分割成多个单位,然后将各个单位分配给分离的计算装置以用于压缩。
在步骤S50中,视频数据采集装置40开始采集视频数据。当操作者通过视频数据采集装置40的主控制器41的GUI 42设置时间信息时(即,开始点(开始时间码)和结束点(结束时间码))时,VTR控制单元43基于时间信息来控制VTR 47的诸如快进或快退的再生。然后,基于在VTR控制单元43中所执行的处理,数据采集控制单元44通过视频数据输入/输出接口46将视频数据采集到主控制器41中。
然后,在步骤S51中,在用于编码的预处理中,检测并记录所采集的编码对象视频数据的分割点。向主控制器41内的分割点/下拉检测单元45传送通过视频数据输入/输出接口46采集到主控制器41中的编码对象视频数据,并且分割点/下拉检测单元45检测用于执行分布式编码的候选分割点。
为了执行分布式编码,不允许在视频数据的任意部分处设置分割点。可能需要在不影响图像质量的分割点处对视频数据进行分割。例如,分割点的实例可以是在视频数据中的场景改变点。下文中,将对检测场景改变点作为分割点的实例进行描述。
大亮度改变通常出现在场景改变点处。鉴于此,可以将先前场景和后续场景进行比较以检测在先前场景和后续场景之间的亮度改变的方式来检测场景改变。因此,确定场景改变点作为候选分割点,并提取先前场景和后续场景中的亮度改变。因此,能够容易地检测出候选分割点。
以这种方式,从在开始点和结束点之间的视频数据中检测候选分割点。
然后,当从所采集的编码对象视频数据中检测候选分割点时,将与候选分割点有关的信息记录在通过网络49连接至视频数据采集装置40的辅助数据服务器50中。
此后,在步骤S52中,确定是否以2-3下拉格式扩展所采集的编码对象视频数据。当所采集的视频数据是2-3下拉素材(步骤S52中的是)时,处理前进至步骤S53。
具体地,在步骤S52中,当所采集的视频数据是2-3下拉格式的素材时,在步骤S53中检测并记录下拉图案。即,在步骤S53中,例如,关于采集的编码对象视频数据,将先前帧和后续帧进行比较以基于当前帧和先前帧之间的前场和后场中的差分来检测包括重复帧的图案。将如此检测的2-3下拉图案连同有关候选分割点的信息记录在连接至网络49的辅助数据服务器50中,然后处理前进至步骤S54。
另一方面,在步骤S52中,当采集视频数据不是2-3下拉格式的素材(在步骤S52中的否)时,处理前进至步骤S54。注意,在上述实例中,描述了通过2-3下拉处理引起的重复图像图案的检测;然而,并不限于此。即,即使视频数据没有经受2-3下拉处理,但是如果重复的图像图案存在于视频数据中,仍有可能类似地提取重复图像图案,即,特征。
在步骤S54中,写入已在以上步骤中检测到候选分割点和2-3下拉图案的非压缩视频数据。具体地,通过视频数据采集装置40的视频数据输入/输出接口46将视频数据记录在视频数据服务器48中,并且处理前进至步骤S55。以这种方式,通过根据本实施例的信息处理装置,以这种方式记录在视频数据服务器48中的视频数据D1被记录在视频信号处理装置14中。
在步骤S55中,在视频数据D1编码前输入并设置编码条件。具体地,当从视频数据服务器48向视频数据采集装置40的主控制器41提供视频数据D1时,主控制器41从编写应用执行装置18提供的编码文件VENC.XML中获取用于编辑对象视频数据D1的编码的各种信息。
例如,在步骤S55中,获取包含在编码文件VENC.XML中的上述各种信息之中诸如“访问(章节)点”、“光盘容量”、“VTR的开始时间和结束时间”以及“可分配给视频数据D1的数据大小”的信息。此外,根据本实施例的信息处理装置采用分布式编码,所以还获取与可使用的远程编码器671~67n的总数n有关的信息。
在步骤S55中,当获取用于编码的各种信息时,处理前进至步骤S56。
在步骤S56中,为分布式编码确定分割数和分割点。如上所述,为了减少编码时间,根据本实施例的信息处理装置采用分布式处理,其中,视频数据被分割为多个单位,然后,多个单位被分别分配给多个分离的编码器。对于分布式编码,为了分割从视频数据服务器48提供的编码对象视频数据,通过参考与在步骤S51中检测并被记录在辅助数据服务器50中的视频数据的候选分割点有关的信息来分割视频数据D1。
即,在步骤S55中,当获取在初始设置处理(未示出)中输入的远程编码器的识别名称或者与可用在分布式编码中的远程编码器中的总数n有关的信息时,将参照与记录在辅助数据服务器50中的候选分割点有关的信息,为如图9所示的远程编码器671~67n确定大体上均等间隔的分割点。
以这种方式,根据本实施例的信息处理装置参考在用于编码的预处理中所提取的视频数据的特征信息来设置编码条件。因此,与在编码阶段提取特征信息的现有编写系统相比,已在预处理中提取出特征,所以能够大大地减少编码时间。
然后,在步骤S57中,确定是否以2-3下拉格式扩展将执行编码的视频数据D1。然后,当视频数据D1是2-3下拉数据(步骤S57中的是)时,处理前进至步骤S58。
在步骤S58中,从作为2-3下拉数据的视频数据D1中跳过复制场。此时,通过参考与在步骤S53中在用于编码的预处理中检测到的并被记录在辅助数据服务器50中的视频数据D1的下拉图案有关的信息来执行处理。
以这种方式,在步骤S58中,为了有效地使用有限的光盘容量,基于在采集视频数据时在预处理中检测并记录的信息来跳过2-3下拉格式的复制场。然后,对跳过了复制场的视频数据进行编码。因为当执行编码时已确定了有关2-3下拉图案的信息,所以与现有的编写系统相比,根据本实施例的信息处理装置能够减少处理时间并消除光盘容量的损失,从而有效地执行编码。
当如上所述跳过2-3下拉数据中的复制场时,处理前进至步骤S59。另外,在步骤S57中,当没有以2-3下拉格式扩展将执行编码的视频数据(步骤S57中的否)时,处理直接前进至步骤S59。
在步骤S59中,视频信号分布式处理装置14的主控制器60控制通过网络19连接的每个编码器67(671~67n),并根据通过在步骤S55中获取的各种信息设置的第一编码条件来对编辑对象视频数据D1执行第一次编码。然后,从所得到的第一编码视频数据逐帧地检测出编码的困难程度和图片类型。
具体地,当将在步骤S56中以大体上均等的间隔分割的编辑对象视频数据D1分别输出至编码器67(671~67n)时,编码器67(671~67n)设置构成视频数据D1的每帧的图片类型。即,每个编码器67(671~67n)都设置由来自主控制器60的指令所指定的帧,作为I-图片。此外,每个编码器67(671~67n)都强制地设置基于与在步骤S55中获取的场景改变有关的信息、根据先前帧和后续帧之间的相关性而确定为场景改变的帧作为I-图。然后,每个编码器67(671~67n)都执行处理以设置从设置为I-图的帧到下一个I-图的前一帧的帧组,作为封闭(close)GOP。
另外,每个编码器67(671~67n)都使用如此设置的图片类型来通过固定的量化步长对构成视频数据D1的帧中的每帧依次执行第一次编码。然后,每个编码器67(671~67n)都向主控制器60通知此时所生成的比特量,即,在对每个帧进行编码时所生成的比特量,并且向主控制器60通知每帧的图片类型。
主控制器60接收来自每个编码器67(671~67n)的通知并且逐帧地检测困难程度和图片类型。即,主控制器60检测从每个编码器67(671~67n)通知的每帧的图片类型,作为没有任何改变的每帧的图片类型。另外,主控制器60检测(测量)在从每个编码器67(671~67n)通知的每帧中生成的比特量,作为每帧的困难程度。
这里,在本说明书中的困难程度表示当对编辑对象视频数据D1执行通过固定的量化步长的编码时每个编码帧的数据大小。
即,在帧间编码(P-图或B-图的编码类型)中,来自预测帧的预测误差(差分)在快速移动部分处增大,并且可能需要大量的数据才能大大减少图像质量的劣化。另外,在帧内编码(I-图的编码类型)中,当存在许多高频分量时,通过离散余弦变换来生成高阶系数数据。因此,可能必需大量的数据大小才能大大减少图像质量的劣化。因此,当通过固定量化步长对视频数据D1执行编码时,在具有用于减少图像质量的劣化的大量数据大小的部分(帧)处检测到大量的数据大小。从以上所述,构成通过固定量化步长对编辑对象视频数据D1执行编码所获得的结果编码视频数据D2的每帧的数据的数据大小表示每帧中的困难程度。
当在步骤S59中的一系列以上处理结束时,处理前进至步骤S60。在步骤S60中,主控制器60使用在步骤S59中逐帧地检测到的困难程度和图片类型来执行比特分配计算处理,并且逐帧地设置目标比特量。
这里,例如,比特分配计算处理指的是以下的计算处理,其中,使用在步骤S59中检测到的每帧的困难程度和图片类型,向每帧分配当对编辑对象视频数据D1执行第二次编码时所获得的总编码视频数据D2的目标比特量。
即,在步骤S60中,主控制器60计算实际上可分配给视频数据D1(编码视频数据D2)的总比特量(TOTAL_SUPPLY)。
TOTAL_SUPPLY=TOTAL_BYTES-TOTAL_HEADER    (1)
在数学表达式(1)中,TOTAL_BYTES表示在步骤S55中获取的“可分配给视频数据D1的数据大小”,并且对应于记录在网络19中的文件服务器17内的总编码视频数据D2的目标数据大小。另外,TOTAL_HEADER表示在编码视频数据D2内作为报头(header)的附加数据的数据大小,并且是由GOP的总数指定的数据大小。
因此,主控制器60通过数学表达式(1)的计算来计算出可分配给编码视频数据D2内除附加数据之外的数据的数据大小,作为实际上可分配给视频数据D1的总比特量TOTAL_SUPPLY。
接下来,主控制器60向各个编码单元分配实际上可分配给视频数据D1的总比特量TOTAL_SUPPLY。注意,下文中,以此方式分配的每个编码单元的数据大小称为对应编码单元的目标比特量,并且称为TOTAL_BYTES。
另外,主控制器60为每个编码单元计算属于对应编码单元的帧的困难程度(在步骤S59中所检测的困难)的和。注意,下文中,每帧的困难程度称为DIF,以及困难程度DIF的和称为DIF_SUM。
从而,主控制器60为每个编码单元计算用于按GOP分配比特的评价函数。这里,例如,评价函数通过以下的数学表达式(2)来表示。
Y=BX        (2)
在数学表达式(2)中,Y表示操作对象编码单元的目标比特量SUPPLY_BYTES,以及X表示属于操作对象编码单元的帧的困难程度DIF的和DIF_SUM。
当主控制器60以这种方式设置数学表达式(2)的评价函数时,即,当主控制器60计算数学表达式(2)的评价函数中的系数B时,主控制器60为每个编码单元依次执行使用系数B的以下数学表达式(3)的计算。
GOP_TGT=B×GOP_DIF_SUM    (3)
注意,在数学表达(3)中,GOP_DIF_SUM表示属于操作对象GOP的帧的困难程度DIF的和。另外,GOP_TGT表示操作对象GOP的目标比特量。
即,操作对象GOP的目标比特量GOP_TGT表示在包含操作对象GOP的编码单元的目标比特量SUPPLY_BYTES内根据操作对象GOP的困难程度的和GOP_DIF_SUM被分配给操作对象GOP的数据大小。
主控制器60执行向属于对象GOP的各个帧分配对象GOP的目标比特量GOP_TGT的处理,以设置每帧的目标比特量。
上述的一系列处理是在步骤S60中所执行的比特分配计算处理。以这种方式,在步骤S60中的比特分配计算处理中,通过参考第一次编码结果(步骤S59中的结果)设置作为用在第二次编码中的第二编码条件之一的目标比特量。
因此,当步骤S60结束时,处理前进至步骤S61。在步骤S61中,主控制器60设置至少包括通过步骤S60中的比特分配计算处理设置的每帧的目标比特量和在步骤S59中检测的每帧的图片类型的第二编码条件,并且执行编码(执行第二次编码)。
然后,在步骤S62中,主控制器60预览当对编辑对象视频数据D1执行根据第二编码条件的第二次编码时会获得的第二编码视频数据D2,以检查图像质量。
例如,在步骤S62中的预览是以下的一系列处理。即,如上所述,响应于主控制器60基于GUI 61的操作者操作所执行的控制,视频数据服务器48向每个编码器67(671~67n)提供编辑对象视频数据D1。每个编码器67(671~67n)都根据第二编码条件对视频数据D1进行一次编码,并且在不向网络19输出数据D2的情况下,对所得到的编码视频数据D2再次进行解码,然后,将所得到的视频信号提供给监控装置69。监控装置69显示与视频信号相对应的图片。即,在监控装置69上显示与当对编辑对象视频数据D1执行根据第二编码条件的第二次编码时会获得的第二编码视频数据D2相对应的图片,作为预览图片。
以这种方式,预览通过第二次编码的编码视频数据D2并检查图像质量,然后处理前进至步骤S63。
在步骤S63中,主控制器60确定操作者的图像质量评价是否“OK”。即,操作者评价在步骤S62中在监控装置69上所显示的预览图片(即,与编码视频数据D2相对应的图片)的图像质量,并且通过操作GUI 61将评价结果输入到主控制器60中。例如,当操作者对图像质量满意而通过操作GUI 61发布用于开始第二次编码的指令时,在步骤S63中确定操作者的图像质量评价为“OK”(步骤S63中的是),处理前进至步骤S66。
在步骤S66中,主控制器60通过二次编码、通过网络19将编码视频数据D2存储在数据压缩服务器70中,并且执行诸如通知编写应用执行装置18第二次编码的结果的后处理。因此,当在步骤S66中后处理完成时,编码结束。
相反,当操作者对通过步骤S62中的预览在监控装置69上所显示的预览图片(即,与存储在数据压缩服务器70中之前的编码视频数据D2相对应的图片的图像质量)不满意并且例如操作GUI61以选择改变或校正时,在步骤S63确定操作者的图像质量评价不是“OK”(步骤S63中的否),然后,处理前进至步骤S64。
在步骤S64,主控制器60改变在第二次编码中的参数。
具体地,主控制器60响应于操作者的GUI 61的操作部分地改变编码条件以部分地改变图像质量。另外,主控制器60再次执行与以上步骤S60相同的比特分配计算处理,以更新校正或改变所需要的视频数据D1的目标比特量的部分设置。注意,在步骤S64中的比特分配计算处理中,使用根据编码条件中的前一改变的部分图像质量改变的结果。
以这种方式,在步骤S64中,当改变校正或改变所需要的部分视频数据的编码条件等时,处理前进至步骤S65。然后,对视频数据执行部分再编码,其中,通过第二次(取决于编码条件的第一次)编码来部分地更新编码条件。
对图6所示作为一个单位的分割处理区间(包括改变或校正所需要的部分)执行部分再编码。然后,替换部分编码分割处理区间以对压缩数据进行组合。
这里,将更详细地描述在部分编码中处理的单位。编码器具有在部分编码时考虑到可用性来以预定间隔限制缓冲器的占用率的功能。由于以上功能,即使对单独编码的流进行组合时,缓冲器的占用率在结合点处也不会有所衰退。以预定间隔插入的缓冲器复位点称为RAP(随机存取点)。
当如上所述使用多个编码器执行分布式编码时最有效的分割编码单位是在RAP之间包括代替了数据的区间的最短区间。然而,在以上RAP之间的再编码中,考虑到流的组合的缓冲器占用率控制功能起作用。因而,抑制了所生成的比特量,并且作为结果,出现图像质量的降低。因此,在根据本实施例的信息处理装置中,为了避免以上的图像质量劣化的问题,编码器不是将再次执行部分编码的区间设置为上述RAP之间的最小区间,而是设置为包括用于改变或校正的分布式编码区间。即,以通过参考用作在采集编码对象视频数据时所提取的特征信息的可分割候选分割点而确定的分割点为单位来执行部分编码。因此,能够得到与在执行用于改变或校正的部分编码之前的图像质量相等的图像质量。因此,能够消除图像质量劣化的问题。
在步骤S65,当执行上述部分编码时,处理前进至步骤S62以重复后续处理。
以上描述了通过根据本实施例的信息处理装置执行的处理的实例。以这种方式,为了执行分布式编码,作为在采集编码对象视频数据时的预处理,根据本实施例的信息处理装置检测例如场景改变部分作为候选分割点,另外检测例如2-3下拉视频数据中的重复图像图案,然后将所检测的视频数据的这些特征信息记录在辅助数据服务器50中。
当执行二次编码时,现有的编写系统等在设置编码条件时或者在测量困难程度时自动地检测这些候选分割点和重复图像图案。即,在现有的编写系统中,可能必需单独执行视频数据的采集、视频数据记录设备的相关控制以及视频数据的预处理/压缩。因此,难以实时地执行压缩,从而花费大量的处理时间。
相反,通过根据本实施例的信息处理装置,在采集视频数据时控制再生设备的同时,在用于编码的预处理中检测与候选分割点有关的信息和/或与重复图像图案有关的特征信息等。然后,将已提取出特征的视频数据记录在视频数据服务器中,并且将所检测的信息记录在辅助数据服务器中。因此,能够实时有效地对所采集的视频数据D1进行编码,并且与现有编写系统等相比,能够快几倍地执行编写。另外,在有限的光盘容量内,可以用减少的处理时间毫无损失地执行有效的编码。
这里,上述的一系列处理可以通过硬件执行并且还可以通过软件来执行。
当通过软件执行上述的一系列处理时,图1所示的整个工作室侧编写系统10或者其一部分可以由例如图11所示的计算机形成。注意,例如,工作室侧编写系统10的一部分可以是图5所示的视频数据采集装置40的整体,或者可以是视频数据采集装置40的一部分,即,例如,主控制器41等。
在图11中,CPU(中央处理单元)101根据记录在ROM(只读存储器)102中的程序或者从存储器单元108下载到RAM(随机存储器)103中的程序来执行各种处理。RAM 103还存储用于CPU101的数据,以在必要的情况下执行各种处理。
例如,当图5的主控制器41由图11的计算机形成时,VTR控制单元43、数据采集控制单元44和分割点/下拉检测单元45等可以由通过CPU 101执行的程序形成。
CPU 101、ROM 102以及RAM 103通过总线104互相连接。输入/输出接口105同样还连接至总线104。输入单元106、输出单元107、存储器单元108以及通信单元109连接至输入/输出接口105。
例如,输入单元106由诸如还用作输出单元107的显示单元的触摸面板、键盘、包括光接收单元的远程控制器以及鼠标的输入设备形成。
例如,输出单元107由诸如显示器的离散显示单元、诸如扬声器和耳机输出终端的离散音频输出单元或者它们的组合形成。
例如,存储器单元108由硬盘等形成。另外,例如,通信单元109由调制解调器、终端适配器、无线通信设备等形成,用以控制与另一个信息处理装置的通信。例如,当图5的主控制器41由图11的计算机形成时,通信单元109控制通过网络与辅助数据服务器50的通信。
在必要的情况下,驱动器110连接至输入/输出接口105,并且在适当的情况下,装载诸如磁盘、光盘、磁光盘或者半导体存储器的可移动记录介质111,然后,在必要的情况下,将从中读出的计算机程序安装到存储器单元108中。
顺便提及,当同样通过软件执行上述的一系列处理时,构成软件的程序通过网络或者从记录介质被安装结合到在集成硬件中的计算机中或者例如可以通过安装各种程序执行各种功能的通用个人计算机中。
如图11所示,包含上述程序的记录介质除装置体之外,不仅由分配用于向用户提供程序并且记录有程序的可移动记录介质(封装介质)111(诸如磁盘(包括软盘)、光盘(包括CD-ROM(光盘只读存储器)和DVD(数字通用盘))、磁光盘(MD(小磁盘))或半导体存储器)形成,而且还由ROM 102或存储器单元108的硬盘形成,其中,ROM 102或存储器单元108的硬盘以结合于装置体中的状态提供给用户并且其中记录有程序。
如上所述,在采集编码对象视频数据时,预先提取并存储至少关于视频数据的候选分割点的特征信息,然后,在设置编码条件的过程中,通过参考所存储的特征信息来确定用于分布式编码的视频数据的分割点。因此,与单独执行视频数据的采集和视频数据的预处理/压缩的现有编写系统相比,能够大大地减少处理时间。
另外,类似地,作为在采集视频数据时用于编码的预处理,不仅要提取上述的候选分割点,还要提取有关重复图像图案的特征信息。因此,能够在用有限的光盘容量实现有效编码的同时减少处理时间。
注意,本发明的实施例并不限于上述实施例;在不偏离本发明的范围内,可以修改成各种形式。
例如,当还通过软件执行上述的一系列处理时,构成软件的程序通过网络或从记录介质被安装到集成有专用硬件的计算机中。可选地,例如,以上的程序被安装在能够通过安装各种程序来执行各种功能的通用个人计算机等中。
另外,为了向用户提供程序,与装置体分离地分配包括这种程序的记录介质。例如,记录介质是诸如磁盘(包括软盘)、光盘(包括CD-ROM和DVD)、磁光盘(MD)或半导体存储器的其中记录有程序的可移动记录介质(封装介质)。另外,记录介质可以由ROM或硬盘形成,ROM或硬盘以结合于装置体中的状态提供给用户并且其中记录有程序。
注意,在本说明书中,参照流程图所描述的步骤不仅包括以规定顺序按时间顺序执行的处理,而且还包括不按时间顺序而是并列或单独执行的处理。
本领域的技术人员应理解,根据设计要求和其他因素,可以有多种修改、组合、再组合和改进,均应包含在本发明的权利要求或等同物的范围之内。

Claims (5)

1.一种信息处理装置,包括:
数据采集单元,控制记录有视频数据的记录介质的再生,并采集编码对象数据;
特征提取单元,接收所述编码对象数据,并作为用于编码的预处理,提取所述编码对象数据中至少包括可分割点的特征点;
存储单元,存储所述编码对象数据;
存储器单元,存储关于由所述特征提取单元提取的所述特征点的信息;
分割单元,将所述编码对象数据分割成预定数量的分割数据;以及
多个编码单元,将所述分割数据编码成分割编码数据,其中,
所述分割单元基于所述多个编码单元的总数和关于所述特征点的信息来确定可向所述编码单元大体上均等地分配所述编码对象数据的分割点,然后,向所述编码单元分配所述分割数据。
2.根据权利要求1所述的信息处理装置,其中,
所述特征提取单元还检测所述编码对象数据中的重复图像图案,其中,
所述存储器单元存储关于所述重复图像图案的信息以及关于所述可分割点的信息,并且,
所述多个编码单元基于关于所述重复图像图案的信息通过跳过重复图像来执行编码。
3.根据权利要求2所述的信息处理装置,其中,所述视频数据是2-3下拉视频数据。
4.根据权利要求1至3中任一项所述的信息处理装置,其中,所述可分割点是所述编码对象数据中的场景改变点。
5.一种信息处理方法,包括以下步骤:
控制记录有视频数据的记录介质的再生并采集编码对象数据;
接收所述编码对象数据,并作为用于编码的预处理,提取所述编码对象数据中至少包括可分割点的特征点;
存储所述编码对象数据;
存储关于所提取特征点的信息;
将所述编码对象数据分割成预定数量的分割数据;以及
使用多个编码装置将所述分割数据编码成分割编码数据,其中,
分割所述编码对象数据包括:基于所述多个编码装置的总数和关于所述特征点的信息来确定可向所述编码装置大体上均等地分配所述编码对象数据的分割点,然后,向所述编码装置分配所述分割数据。
CN200910134427XA 2008-04-11 2009-04-10 信息处理装置和信息处理方法 Expired - Fee Related CN101557490B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008103981 2008-04-11
JP2008-103981 2008-04-11
JP2008103981A JP4539754B2 (ja) 2008-04-11 2008-04-11 情報処理装置及び情報処理方法

Publications (2)

Publication Number Publication Date
CN101557490A true CN101557490A (zh) 2009-10-14
CN101557490B CN101557490B (zh) 2011-04-13

Family

ID=40852546

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910134427XA Expired - Fee Related CN101557490B (zh) 2008-04-11 2009-04-10 信息处理装置和信息处理方法

Country Status (4)

Country Link
US (1) US20090257736A1 (zh)
EP (1) EP2109320A3 (zh)
JP (1) JP4539754B2 (zh)
CN (1) CN101557490B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103945165A (zh) * 2014-05-05 2014-07-23 北京领通科技有限公司 终端设备远程视频传输的处理方法和装置
CN105519130A (zh) * 2013-07-19 2016-04-20 索尼公司 信息处理装置和方法
CN110164483A (zh) * 2014-10-03 2019-08-23 杜比国际公司 渲染音频节目的方法和系统
CN117555494A (zh) * 2024-01-12 2024-02-13 南京荧火泰讯信息科技有限公司 一种用于信号处理板的编码管理系统

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4582185B2 (ja) * 2008-04-22 2010-11-17 ソニー株式会社 情報処理装置及び情報処理方法
CA2825929A1 (en) * 2011-01-28 2012-08-02 Eye IO, LLC Adaptive bit rate control based on scenes
KR20140019335A (ko) 2011-01-28 2014-02-14 아이 이오, 엘엘씨 장면 타입에 기초한 비디오 스트림 인코딩
CN102518163A (zh) * 2011-12-07 2012-06-27 三一重机有限公司 挖掘机工作特征提取系统及提取方法
US10200727B2 (en) * 2017-03-29 2019-02-05 International Business Machines Corporation Video encoding and transcoding for multiple simultaneous qualities of service

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3443880B2 (ja) * 1992-09-18 2003-09-08 ソニー株式会社 ビデオ信号符号化方法及び復号化方法
JP3629728B2 (ja) * 1994-08-31 2005-03-16 ソニー株式会社 動画像信号符号化方法、動画像信号符号化装置及び動画像信号記録媒体
US5508750A (en) * 1995-02-03 1996-04-16 Texas Instruments Incorporated Encoding data converted from film format for progressive display
GB9607645D0 (en) * 1996-04-12 1996-06-12 Snell & Wilcox Ltd Processing of video signals prior to compression
US6782132B1 (en) * 1998-08-12 2004-08-24 Pixonics, Inc. Video coding and reconstruction apparatus and methods
JP2000278042A (ja) 1999-03-26 2000-10-06 Sony Corp 発振回路及びチューナ
JP2001053570A (ja) 1999-08-06 2001-02-23 Nippon Antenna Co Ltd 接栓タイプイコライザ
US6834080B1 (en) * 2000-09-05 2004-12-21 Kabushiki Kaisha Toshiba Video encoding method and video encoding apparatus
JP2002199392A (ja) * 2000-10-19 2002-07-12 Matsushita Electric Ind Co Ltd 映像符号化方法および装置
US7058130B2 (en) * 2000-12-11 2006-06-06 Sony Corporation Scene change detection
US6934335B2 (en) * 2000-12-11 2005-08-23 Sony Corporation Video encoder with embedded scene change and 3:2 pull-down detections
GB0103929D0 (en) 2001-02-19 2001-04-04 Microtherm Int Ltd Base for an electric heater and method of manufacture
US6909745B1 (en) * 2001-06-05 2005-06-21 At&T Corp. Content adaptive video encoder
CN2509797Y (zh) * 2001-09-29 2002-09-04 张健 具有画面分割功能的图像编码器
JP2005176069A (ja) * 2003-12-12 2005-06-30 Ntt Data Corp 分散並列トランスコーダシステム及び分散並列トランスコード方法
JP2008510349A (ja) * 2004-08-13 2008-04-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ グラフィックとビデオとの混合ソースを圧縮するシステムおよび方法
JP4655191B2 (ja) 2004-09-02 2011-03-23 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
CN101253777A (zh) * 2005-07-01 2008-08-27 极速决件公司 用于在多媒体信号编码中使用的方法、装置和系统
US20070116117A1 (en) * 2005-11-18 2007-05-24 Apple Computer, Inc. Controlling buffer states in video compression coding to enable editing and distributed encoding
JP4893224B2 (ja) 2006-10-19 2012-03-07 株式会社Jvcケンウッド 放送受信再生装置
CN100466749C (zh) * 2006-12-30 2009-03-04 清华大学 一种基于分布式信源编码的抗误码图像编解码方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105519130A (zh) * 2013-07-19 2016-04-20 索尼公司 信息处理装置和方法
CN103945165A (zh) * 2014-05-05 2014-07-23 北京领通科技有限公司 终端设备远程视频传输的处理方法和装置
CN110164483A (zh) * 2014-10-03 2019-08-23 杜比国际公司 渲染音频节目的方法和系统
CN110364190A (zh) * 2014-10-03 2019-10-22 杜比国际公司 个性化音频的智能访问
CN110164483B (zh) * 2014-10-03 2021-03-02 杜比国际公司 渲染音频节目的方法和系统
US11437048B2 (en) 2014-10-03 2022-09-06 Dolby International Ab Methods, apparatus and system for rendering an audio program
US11948585B2 (en) 2014-10-03 2024-04-02 Dolby International Ab Methods, apparatus and system for rendering an audio program
CN117555494A (zh) * 2024-01-12 2024-02-13 南京荧火泰讯信息科技有限公司 一种用于信号处理板的编码管理系统
CN117555494B (zh) * 2024-01-12 2024-03-22 南京荧火泰讯信息科技有限公司 一种用于信号处理板的编码管理系统

Also Published As

Publication number Publication date
US20090257736A1 (en) 2009-10-15
EP2109320A2 (en) 2009-10-14
JP4539754B2 (ja) 2010-09-08
EP2109320A3 (en) 2011-01-05
JP2009260435A (ja) 2009-11-05
CN101557490B (zh) 2011-04-13

Similar Documents

Publication Publication Date Title
CN101557490B (zh) 信息处理装置和信息处理方法
EP0852767B1 (en) Method for randomly accessing stored imagery and a field inspection system employing the same
CN100542244C (zh) 信息处理装置和方法
US6175380B1 (en) Method for randomly accessing stored imagery and a field inspection system employing the same
CN100576931C (zh) 再现信息信号的方法
CN101583039B (zh) 信息处理装置和信息处理方法
US20110110417A1 (en) Encoding apparatus of video and audio data, encoding method thereof, and video editing system
CN101799823A (zh) 内容处理设备和方法
CN101094368B (zh) 再现装置以及再现方法
US7656951B2 (en) Digital video processing method and apparatus thereof
JP5088215B2 (ja) 情報処理システム及び情報処理方法、並びにプログラム
US20060078308A1 (en) Video reproducing apparatus
JP4154459B2 (ja) デジタル映像処理方法及びその装置
JP4177239B2 (ja) 映像解析装置,映像解析方法,映像解析プログラムおよびその記録媒体
JP2008072591A (ja) エンコード装置、エンコード方法、プログラム、記録媒体、および記録媒体製造方法
US8358702B2 (en) Information processing system and information processing method, and program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110413

Termination date: 20130410