CN101075462A - 记录/再现/编辑装置、方法、程序 - Google Patents

记录/再现/编辑装置、方法、程序 Download PDF

Info

Publication number
CN101075462A
CN101075462A CNA2007101041530A CN200710104153A CN101075462A CN 101075462 A CN101075462 A CN 101075462A CN A2007101041530 A CNA2007101041530 A CN A2007101041530A CN 200710104153 A CN200710104153 A CN 200710104153A CN 101075462 A CN101075462 A CN 101075462A
Authority
CN
China
Prior art keywords
video data
group
label information
many groups
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007101041530A
Other languages
English (en)
Other versions
CN101075462B (zh
Inventor
森本直树
有留宪一郎
矶部幸雄
前笃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101075462A publication Critical patent/CN101075462A/zh
Application granted granted Critical
Publication of CN101075462B publication Critical patent/CN101075462B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/21Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
    • G11B2220/215Recordable discs
    • G11B2220/218Write-once discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs

Abstract

一种用于压缩编码视频数据和记录压缩编码的视频数据的记录装置,包括:编码器,对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩来压缩编码视频数据,多个图像包括至少一个独立可解码的图像;标记信息产生器,产生指示对该多组的每组的视频数据的访问位置的标记信息;以及记录单元,在记录介质中记录由编码器压缩编码的视频数据。当对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定访问位置时,标记信息产生器产生指示该可解码组的顶部的位置的标记信息。

Description

记录/再现/编辑装置、方法、程序
技术领域
本发明涉及用于在设置为包括AV(音频/视频)数据流的片段(clip)上执行编辑处理的记录装置、记录方法、和记录程序、记录/再现装置、记录/再现方法、记录/再现程序、编辑装置、编辑方法、和编辑程序。
背景技术
在相关技术中,记录容量等于或大于4.7GB(千兆字节)的DVD(数字通用盘)作为记录介质而流行,此记录介质可从可记录的记录/再现装置分离、具有相对大的记录容量、并且适合于记录包括视频数据和音频数据的AV(音频/视频)数据。日本专利申请公开(JP-A)No.2004-350251公开了一种以DVD-视频格式在可记录DVD中记录AV数据的成像装置。
记录在这种可记录的记录介质中的AV数据希望可编辑。编辑AV数据方法的一个具体实例为在将AV数据分为预定单元时编辑AV数据的方法。AV数据中包括的视频数据和音频数据通常作为预定复用数据单元记录在记录介质中。
另外,因为视频数据的数据容量非常大,所以通常在由预定系统压缩编码后将视频数据记录在记录介质中。作为压缩编码视频数据的标准系统,MPEG2(运动图像专家组2)系统已知。而且,还广泛应用通过进一步提高基于MPEG2的压缩编码实现有效编码的ITU-T(国际电信联盟-电信标准部门)推荐H.264和ISO(国际标准化组织)/IEC(国际电工技术委员会)国际标准14496-10(MPEG-4第10部分)高级视频编码(下文简写为“H.264|AVC”)。
根据MPEG2和H264|AVC系统,不仅进行采用正交变换的帧内编码而且进行采用基于运动补偿的预测编码的帧间编码,从而进一步提高压缩比。以MPPEG2为例,下面将描述基于预测编码的帧间压缩。
首先描述根据MPEG2的数据流结构概要。MPEG2是基于运动补偿的预测编码和基于DCT(离散余弦变换)的预测压缩编码的组合。根据MPEG2,数据具有从下面设置块层、宏块层、片(slice)层、图像层、GOP(图像组)层、和序列(sequence)层的层次结构。块层配置为包括作为执行DCT的单元的DCT块。宏块层配置为包括多个DCT块。片层配置为包括头部和一个或多个宏块。图像层配置为包括头部和一个或多个片。一个图像对应一个图像平面。分别通过预定的识别码使得可识别这些层的边界。
GOP层配置为包括头部、基于帧内编码的I(内编码)图像、基于预测编码的P(预测编码)图像、和基于预测编码的B(双向预测编码)图像。I图像仅包括信息并且自身可解码。P和B图像自身不可解码,除非时间上在前图像和时间上在前和在后图像分别用作一参考图像和多个参考图像。例如,使用时间上在前I或P图像作为参考图像解码P图像。使用两个时间上在前或在后的I或P图像用作参考图像解码B图像。将包括至少一个I图像的自包含(self contained)组称为“GOP”,其被认为是MPEG流中的独立可访问的最小单元。
GOP配置为包括一帧或多帧图像。以下认为GOP配置为包括多帧图像。GOP有两种,即本身完全可译并具有封闭结构的封闭GOP、和利用以编码顺序该开放GOP之前最近的封闭GOP上的信息而可译的开放GOP。因为开放GOP比封闭GOP采用更多信息而可解码,所以开放GOP可保证更高的图像质量并且和封闭GOP相比更常使用。
参考图1A到1C,将描述用于解码帧间压缩数据的处理。假定一个GOP包括一帧I图像、四帧P图像、和10帧B图像,即共计15帧图像。如图1A所示,以“B0B1I2B3B4B5B6B7B8B9B10P11B12B13P14”的显示顺序显示I、P、和B图像。在图1A到1C中,每个下标表示显示顺序号。
在此实例中,在从此GOP之前最近的GOP中最后的P14图像和相同GOP中的I2图像进行预测并使用其解码之后获得最先两帧B图像即B0和B1图像。在从相同GOP中的I2图像预测并以其解码之后,获得GOP中的第一P图像,即P5图像。在从最近的过去的P图像预测并以其解码之后,获得剩余P8、P11和P14图像中的每个。另外,在从时间上在前或在后的I和/或P图像预测并以其解码之后获得I图像后面的每帧B图像。
每个B图像是采用时间上在前或在后的I和P图像预测和解码的。由于这一点,有必要考虑解码顺序而决定流或记录介质中I、P、和B图像的显示顺序。即用于解码B图像的I或P图像通常有必要先于B图像解码。
在此实例中,如图1B所示,以“I2B0B1P5B3B4P8B6B7P11B9B10P14B12B13”的顺序在流或记录介质中排列图像并以此顺序对其解码。在图1B中,每个下标对应图1A所示的下标并表示显示顺序号。
解码器进行的解码处理如下。如图1C所示,首先解码I2,使用解码后的I2图像的最近的过去的GOP中的最后的P14图像(按照显示顺序)预测并解码B0和B1图像。按照解码的顺序从解码器输出B0和B1图像,接下来输出I2图像。输出B1图像后,使用I2图像预测并解码P5图像。此后,使用I2图像和P5图像预测并解码B3图像和B4图像。按照解码的顺序从解码器输出B3和B4图像,接下来输出P5图像。
接下来,相似地重复执行下面的处理。用于预测B图像的P或I图像先于B图像解码,使用解码的P或I图像预测和解码B图像,输出解码的B图像,并输出用于解码B图像的P或I图像。图1B所示出的记录介质或流中的图像排列通常为采用的排列。
发明内容
这样,如果基于此GOP结构帧间压缩的视频数据要通过为视频数据指定访问位置来划分和编辑,则可采用通过指定GOP边界划分视频数据的第一种方法或者通过指定每个GOP中的I图像划分视频数据的第二种方法。第一种方法具有下面的优点。如参考图1A到1C所述,I图像后面的图像可通过应用该I图像而依次解码。因为这一点,在再现期间,当访问基于编辑结果划分的视频数据每部分的顶部时,可以以较小的延迟显示跳转的目标帧。
然而另一方面,第一种方法具有下面的缺点。通过划分和指定获得的边界位置与GOP边界不一致。因为这一点,如果访问划分的视频数据部分的顶部,则从每个GOP中的第一帧图像不能再现图像。
另外,根据第一种方法,划分的视频数据的每部分的后端与GOP边界不一致。因为这一点,如果包括作为划分的视频数据的后端的图像的GOP被产生为与前面GOP不同的场景,例如,再现了划分的视频数据的部分的后端上的几帧那么多的无关场景的图像。
根据第二种方法,每个GOP的顶部与通过编辑划分和指定所获得的边界一致。与第一种方法不同,第二种方法不存在下面的问题,即在每个GOP的顶部存在非播放图像,以及在划分的视频数据的每部分的后端再现无关场景的图像。
然而,第二种方法有下面的缺点。如果包括视频数据的部分的第一帧的GOP为开放GOP,则如参考图1A到1C所述,在显示顺序上时间上先于I图像的B图像是采用相同GOP中的I图像和最近的过去的GOP中的最后P图像解码的。因为这一点,当跳转目标为视频数据的部分时,还通常有必要解码最近的过去的GOP中的最后P图像,这造成根据跳转操作图像输出中的延迟增加。
如所述,在相关技术中,还没有提出划分和编辑基于GOP结构帧间压缩的视频数据而不会在再现图像中产生问题并且不会妨碍用户便利的方法。
因此,理想的是提供一种如果划分和编辑具有GOP结构的视频数据则能够改善用户便利性的记录装置、记录方法、和记录程序、记录/再现装置、记录/再现方法、记录/再现程序、编辑装置、编辑方法、和编辑程序。
根据本发明的第一实施例,提供一种压缩编码视频数据并记录压缩编码视频数据的记录装置,包括:编码器,使用基于多组中每组的预测编码的帧间压缩而压缩编码视频数据,该多组每组包括多帧图像,多帧图像包括至少一帧独立可解码的图像;标记信息产生器,产生指示对该多组的每组的视频数据的访问位置的标记信息;以及记录单元,在记录介质中记录由该编码器压缩编码的视频数据,其中,当所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,该标记信息产生器产生指示该可解码组的顶部的位置的标记信息。
根据本发明的第二实施例,提供一种压缩编码视频数据和记录压缩编码视频数据的记录方法,此方法包括下面的步骤:使用基于多组中每组的预测编码的帧间压缩而压缩编码视频数据,该多组每组包括包括多帧图像,多帧图像包括至少一帧独立可解码的图像;产生指示对该多组的每组的视频数据的访问位置的标记信息;以及在记录介质中记录在压缩编码视频数据的步骤所压缩编码的视频数据,其中,当所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息。
根据本发明的第三实施例,提供一种使计算机装置执行压缩编码视频数据和记录压缩编码视频数据的记录方法的记录程序,其中此记录方法包括下面的步骤:使用基于多组中每组的预测编码的帧间压缩而压缩编码视频数据,该多组每组包括包括多帧图像,多帧图像包括至少一帧独立可解码的图像;产生指示对该多组的每组的视频数据的访问位置的标记信息;以及在记录介质中记录在压缩编码视频数据的步骤所压缩编码的视频数据,其中,当所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息。
根据本发明的第四实施例,提供一种用于压缩编码视频数据、在记录介质中记录压缩编码的视频数据、以及再现和解码记录在记录介质中的压缩编码的视频数据的记录/再现装置,包括:编码器,使用基于多组中每组的预测编码的帧间压缩而压缩编码视频数据,该多组每组包括多帧图像,多帧图像包括至少一帧独立可解码的图像;记录单元,在记录介质中记录由该编码器压缩编码的视频数据;再现单元,从该记录介质读取和解码该压缩解码的视频数据;以及标记信息产生器,产生指示对该多组的每组的视频数据的访问位置的标记信息,其中,当所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,该标记信息产生器产生指示该可解码组的顶部的位置的标记信息。
根据本发明的第五实施例,提供一种用于压缩编码视频数据、在记录介质中记录压缩编码的视频数据、以及再现和解码记录在记录介质中的压缩编码的视频数据的记录/再现方法,包括下面的步骤:使用基于多组中每组的预测编码的帧间压缩而压缩编码视频数据,该多组每组包括多帧图像,多帧图像包括至少一帧独立可解码的图像;在记录介质中记录在该压缩编码视频数据的步骤中压缩编码的视频数据;从记录介质读取和解码该压缩解码的视频数据;以及产生指示对该多组的每组的视频数据的访问位置的标记信息,其中,当所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息。
根据本发明的第六实施例,提供一种使计算机装置执行记录/再现方法的记录/再现程序,此记录/再现方法压缩编码视频数据、在记录介质中记录压缩编码的视频数据、并且再现和解码记录在记录介质中的压缩编码数据,其中此记录/再现方法包括下面的步骤:使用基于多组中每组的预测编码的帧间压缩而压缩编码视频数据,该多组每组包括多帧图像,多帧图像包括至少一帧独立可解码的图像;在记录介质中记录在压缩编码视频数据的步骤压缩编码的视频数据;从记录介质读取和解码该压缩编码的视频数据;以及产生指示对该多组的每组的视频数据的访问位置的标记信息,其中,当所述访问位置被指定到不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,在产生标记信息的步骤产生至该可解码组的顶部的位置的标记信息。
根据本发明的第七实施例,提供一种产生用于指定视频数据的访问位置的标记信息的编辑装置,包括:解码器,解码视频数据,该视频数据是使用基于多组中每组的预测编码的帧间压缩而压缩编码的,该多组每组包括多帧图像,多帧图像包括至少一帧独立可解码的图像;标记信息产生器,产生指示对该多组的每组的视频数据的访问位置的标记信息;以及操作单元,接受用户操作并根据用户操作指定访问位置,其中,当响应于在该操作单元上的操作,所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,该标记信息产生器产生指示该可解码组的顶部的位置的标记信息,并且其中,当响应于在该操作单元上的操作,所述访问位置被指定到使用关于在再现顺序上最近的过去的组的信息解码的该多组中的一组时,标记信息产生器产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
根据本发明的第八实施例,提供一种用于产生用于指定视频数据的访问位置的标记信息的编辑方法,该方法包括下面的步骤:解码视频数据,该视频数据是使用基于多组中每组的预测编码的帧间压缩而压缩编码的,该多组每组包括多帧图像,多帧图像包括至少一帧独立可解码的图像;产生指示对该多组的每组的视频数据的访问位置的标记信息;以及接受用户操作并根据用户操作指定访问位置,其中,当响应于在接受操作的步骤的用户操作,所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息,并且其中,当响应于在接受操作的步骤的操作,所述访问位置被指定到使用关于在再现顺序上最近的过去的组的信息解码的该多组中的一组时,在产生标记信息的步骤产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
根据本发明的第九实施例,提供一种使计算机装置执行编辑方法的编辑程序,此编辑方法产生用于指定视频数据的访问位置的标记信息,其中此编辑方法包括下面的步骤:用于产生用于指定视频数据的访问位置的标记信息的编辑方法,该方法包括下面的步骤:解码视频数据,该视频数据是使用基于多组中每组的预测编码的帧间压缩而压缩编码的,该多组每组包括多帧图像,多帧图像包括至少一帧独立可解码的图像;产生指示对该多组的每组的视频数据的访问位置的标记信息;以及接受用户操作并根据用户操作指定访问位置,其中,当响应于在接受操作的步骤的用户操作,所述访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息,并且其中,当响应于在接受操作的步骤的操作,所述访问位置被指定到使用关于在再现顺序上最近的过去的组的信息解码的该多组中的一组时,在产生标记信息的步骤产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
如上所述,根据本发明的第一、第二、和第三实施例,在记录介质中记录使用基于多组图像每组预测编码的帧间压缩压缩编码的视频数据,每组包括多帧图像,此多帧图像包括至少一帧可独立解码的图像。当访问位置被指定到在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中额一组时,产生表示可解码组顶部位置的标记信息。因为这一点,如果当从记录介质再现视频数据时指定为跳转至不使用按再现顺序最近的过去的组可解码的组,那么可降低在跳转目标的显示延迟。
根据本发明的第四、第五和第六实施例,在记录介质中记录采用基于多组图像每组预测编码的帧间压缩压缩编码的视频数据,此每组包括多帧图像,此多帧图像包括至少一帧可独立解码的图像,并从记录介质读取和解码压缩编码的视频数据。当访问位置指定为可不使用按再现顺序最近经过的组的信息解码的其中一组时,产生表示可解码组顶部位置的标记信息。因为这一点,如果当在记录介质再现视频数据中指定为跳转至不使用按再现顺序最近的过去的组的信息可解码的组,那么可降低在跳转目标的显示延迟。
根据本发明的第七、第八和第九实施例,采用基于多组图像每组预测编码的帧间压缩压缩编码视频数据,此每组包括多帧图像,此多帧图像包括至少一帧可独立解码的图像。当访问位置被指定到在不使用在再现顺序上最近的过去的组的信息可解码的其中一组时,产生标记信息指示每个组视频数据访问位置的标记信息以表示可解码组的顶部的位置。而且,当响应于用户操作,访问位置被指定到使用按再现顺序最近的过去的组的信息解码的多组中的一组时,产生标记信息以指示属于每个组的至少一帧独立可解码图像的位置。因为这一点,如果指定为跳转至视频数据,那么可降低在跳转目标的显示延迟。
根据本发明的第一、第二、和第三实施例,在记录介质中记录采用基于多组图像每组预测编码的帧间压缩压缩编码的视频数据,此每组包括多帧图像,此多帧图像包括至少一帧可独立解码的图像。当访问位置指定为可不使用按再现顺序最近经过的组的信息解码的其中一组时,产生表示可解码组顶部位置的标记信息。因为这一点,如果当从记录介质再现视频数据时指定为跳转至不使用按再现顺序最近经过的组可解码的组,那么可有利地降低在跳转目标的显示延迟。
根据本发明的第四、第五和第六实施例,在记录介质中记录采用基于多组图像每组预测编码的帧间压缩压缩编码的视频数据,此每组包括多帧图像,此多帧图像包括至少一帧可独立解码的图像,并从记录介质读取和解码压缩编码的视频数据。当访问位置被指定到可不使用按再现顺序最近经过的组的信息解码的其中一组时,产生表示可解码组顶部位置的标记信息。因为这一点,如果当在记录介质再现视频数据中指定为跳转至不使用按再现顺序最近经过的组信息可解码的组,那么可有利地降低在跳转目标的显示延迟。
根据本发明的第七、第八和第九实施例,采用基于多组图像每组预测编码的帧间压缩压缩编码视频数据,此每组包括多帧图像,此多帧图像包括至少一帧可独立解码的图像。当访问位置指定为可不使用按再现顺序最近经过的组的信息解码的其中一组时,产生标记信息表示每个组视频数据访问位置标记信息以表示可解码组顶部的位置。而且,当响应于用户操作,访问位置被指定到使用按再现顺序最近的过去的组的信息解码的其中一组时,产生标记信息以表示属于每个组的至少一帧可独立解码图像的位置。因为这一点,如果指定为跳转至视频数据,那么可有利地降低在跳转目标的显示延迟。
根据下面如附图所示对本发明最优选实施例的详细描述,本发明的这些和其它目标、特征和优点将更为清楚。
附图说明
图1A、1B、1C是解释采用帧间压缩的数据解码处理的示意图;
图2是以可适用于本发明的AVCHD格式指定的数据模型的示意图;
图3是解释索引表的示意图;
图4是表示片段AV流、片段信息、片段、播放项目和播放列表之间关系的UML示图;
图5是解释以多个列表指定相同片段方法的示意图;
图6是解释管理记录在记录介质中文件的文件管理结构的示意图;
图7是示出表示文件“index.bdmv”示例性结构的句法的示意图;
图8是示出表示块“blkIndexes()”示例性结构的句法的示意图;
图9是示出表示文件“MovieObject.bdmv”示例性结构的句法的示意图;
图10是示出表示块“blkMovieObjects()”示例性结构的句法的示意图;
图11是示出表示播放列表文件“xxxxx.mpls”示例性结构的句法的示意图;
图12是示出表示块“blkPlayList()”示例性结构的句法的示意图;
图13是示出表示块“blkPlayItem()”示例性结构的句法的示意图;
图14是分别解释第一和第二无缝连接的示意图;
图15是示出表示块“blkPlayListMark()”示例性结构的句法的示意图;
图16是示出表示片段信息文件示例性结构的句法的示意图;
图17是示出表示块“blkCPI()”示例性结构的句法的示意图;
图18是示出表示块“blkEPMap()”示例性结构的句法的示意图;
图19是示出表示块“blkEPMapForOneStreamPID(EP_stream_type,Nc,Nf)”示例性结构的句法的示意图;
图20是条目“PTSEPCoarse”和“PTSEPFine”的示例性格式的示意图;
图21是条目“SPNEPCoarse”和“SPNEPFine”示例性格式的示意图;
图22示出播放列表和较低层级的示例性文件结构的示意图;
图23A、23B、23C是示意性解释使用播放列表进行片段划分和编辑的示意图;
图24是示出另外插入播放列表标记示例性处理的流程图;
图25A和25B是解释另外插入播放列表标记处理的示意图;
图26是解释另外插入播放列表标记处理的流程图;
图27A和27B是分别示出分配播放列表标记到每个由条目“PTSEPStart”表示的位置的方法和分配播放列表标记到GOP边界的位置的方法的章边界的示例的示意图;
图28A和28B是分别示出分配播放列表标记到每个由条目“PTSEPStart”表示的位置的方法和分配播放列表标记到GOP边界的位置的方法的解码间隔的示例的示意图;
图29A、29B、29c是分别示出分配播放列表标记到每个由条目“PTSEPStart”表示的位置的方法和在GOP可以被确定为开放GOP或者封闭GOP的情况下分配播放列表标记到GOP边界位置的方法的解码间隔示例的示意图;
图30是示出各个条件下播放列表标记设置的评估的表格;
图31是示出进行章划分编辑时插入播放列表标记示例性方法的流程图;
图32是示出开始记录时在记录开始位置自动分配播放列表标记的示例性处理的流程图;
图33A和33B是示意性示出虚拟播放器所进行的操作的流程图;
图34是示意性示出虚拟播放器所进行的操作的示意图;
图35是本发明一个实施例的记录/再现装置示例性配置的示意性结构图;
图36是示出基于播放列表标记执行章跳转处理的示例性方法的流程图;
图37是示出根据本发明另一个实施例的摄像机装置示例性配置的示意图。
具体实施方式
下面将参照附图说明本发明的实施例。为帮助理解本发明的实施例,首先将描述适用于本发明实施例的示例性格式(下文,“AVCHD格式”)。AVCHD格式现在被提出作为用于在可记录记录介质中记录其中以预定形式复用视频数据和音频数据的AV(音频/视频)流的记录格式。AVCHD格式使得记录在记录介质中的AV流能够使用每个片段的播放列表来管理。
将通过例如由ITU(国际电信联盟-电信标准部门)推荐H.264和ISO(国际标准化组织)/IEC(国际电工技术委员会)国际标准14496-10(MPEG-4第10部分)高级视频编码(下文简写为“H.264|AVC”)指定的编码方法编码、并且根据例如MPEG2系统复用的位流称为“片段AV流(或者AV流)”。由预定的文件系统将片段AV流作为文件记录在磁盘中。此文件称为“片段AV流文件(或者AV流文件)”。
AV流文件是文件系统上的管理单位,关于用户友好上不一定便利。考虑到用户便利,通常有必要采用整体再现所划分为多个片段AV流文件的视频内容的机制、仅仅部分再现每个片段AV流文件的机制、和将用于平滑执行特殊再现、线索(cue)再现等等的信息在盘中记录为数据库的机制。
图2是可适用于本发明实施例的以AVCHD格式指定的数据模型的示意图。以AVCHD格式,数据结构包括图2所示的四层。最下层为上面布置片段AV流的层(下文为简便起见称为“片段层”)。相邻于片段层的第二最低层为其上布置了每个用于指定关于片段AV流和播放项目(PlayItem)的再现部分的播放列表的层(下文为简便起见称为“播放列表(PlayList)层”)。与播放列表层相邻的第三最低层为上面布置了包括用于指定相对于播放列表的再现顺序的命令的电影对象等的层(下文为简便起见称为“对象层”)。最上面的层为上面布置了管理储存在记录介质中的标题等的索引表(Index Table)的层(下文为简便起见称为“索引层”)。
将描述片段层。片段AV流为其中以MPEG2 TS(传输流)格式等复用视频数据和音频数据的位流。关于片段AV流的信息在文件(下文,“片段信息文件”)中记录为片段信息。
此外,通过复用OB流(覆盖位图(Overlay Bitmap)流)和/或MB流(菜单位图(Menu Bitmap)流)获得的流可以与片段AV流复用,OB流为用于显示字幕的图形流,MB流为用于显示菜单的数据流(例如,按钮图像数据)。
一个片段AV流文件和其中记录对应于该片段AV流文件的片段信息的片段信息文件被视为集成对象,此集成对象看作是“片段”。即,片段是配置为包括片段AV流和片段信息的一个对象。
一般地,文件看作是字节序列。片段AV流文件的内容在时间轴上展开,主要基于时间上指定每个片段中的条目点(entry point)。如果作为时间戳给出访问预定片段的访问点,那么可以使用片段信息来搜索关于在片段AV流文件中数据读取开始的地址的信息。
现在描述播放列表层。播放列表配置为包括指定要再现的一个AV流文件、用于指定所指定的AV流文件再现部分的再现起始点(“IN点”)和再现结束点(“OUT点”)的组。关于一对IN点和OUT点的信息称作“播放项目”。播放列表是一组播放项目。再现播放项目之一意味着再现此播放项目所引用的AV流文件的部分。换言之,基于包括在播放项目中的IN点和OUT点的信息再现片段的对应区间。
现在描述对象层。每个电影对象包括导航命令程序和与其它电影对象协作的端(terminal)信息。导航命令程序为控制播放列表再现的命令(“导航命令”)。
现在描述索引层。索引层包括索引表。索引表为其中定义记录在记录介质中内容的标题的顶层表。驻留播放器中的系统软件中的模块管理器基于存储在索引表中的标题信息而控制记录在记录介质中数据的再现。
即,如图3所示,索引表中的任意项目被称为“标题”,并且作为索引表中项目的最先播放标题、菜单标题、电影标题#1、#2等都是标题。每个标题表示至电影对象的链接。
为帮助理解本发明的实施例,作为举例描述只读记录介质。如果储存在记录介质中的内容为电影内容,那么最先播放标题对应由电影公司制作并先于电影主要部分显示的广告图像(即宣传片(trailer))。如果内容为电影内容,则菜单标题对应于用于选择主要部分再现、章搜索、字幕或者语言设置、特殊图像再现等中之一的菜单屏幕。另外,每个电影标题对应菜单标题所选择的每个图像。可选择地,菜单标题可以对应于还包括标题的菜单屏幕。
图4是示出片段AV流、片段信息(流属性)、片段、播放项目、和播放列表之间关系的UML(统一建模语言)图。播放列表对应于一个或多个播放项目,一个或多个播放项目对应于一个片段。可对应于一个片段分配具有不同起始和/或结束点的多个播放项目。一个片段引用一个片段AV流文件。同样,一个片段引用一个片段信息文件。另外,片段AV流文件和片段信息文件之间一一对应。通过指定这样的结构,可以在改变片段AV流文件的情况下无损地指定再现仅仅AV流期望部分的再现顺序。
而且,如图5所示,多个播放列表可涉及相同的片段。一个播放列表可指定多个片段。基于包括在播放列表中相应播放项目中的IN点和OUT点的信息参考每个片段。在图5的实例中,播放列表310中的播放项目320涉及片段300,基于包括在播放项目321中的IN点和OUT点上的信息,由组成播放列表311的播放项目321和322中的播放项目321涉及片段300的区间。同样,基于包括在播放项目322中的IN点和OUT点的信息,由播放列表311的播放项目322涉及片段301的区间。另外,基于包括在播放项目323中的IN点和OUT点的信息,组成播放列表312的播放项目323和324中的播放项目323涉及片段301的区间。在图5的实例中,还由另一个播放列表涉及片段301。
接下来将参考图6描述以AVCHD格式记录在记录介质中的管理文件的管理结构。以目录结构中分层管理文件。首先在记录介质上产生一个目录(在图6的实例中为根目录)。假定,层级上低于根目录的范围是一个记录/再现系统管理的范围。
将目录“BDMV”设置在低于根目录的层级中。另外,如果有必要,则将目录“AVCHDTN”放在相同的较低层级中。在目录“AVCHDTN”中,例如,存储其中相应片段的典型图像减小到预定尺寸的缩略(thumbnail)文件。在目录“BDMV”中,存储已经参考图2描述的数据结构。
只有两个文件“index.bdmv”和“MovieObject.bdmv”可放在紧邻目录“BDMV”下面的层级中。而且,目录“PLAYLIST”、“CLIPINF”、“STREAM”和“BACKUP”放在与两个文件“index.bdmv”和“MovieObject.bdmv”相同的比目录“BDMV”低的层中。目录“BACKUP”在其中存储相应目录和文件的备份。
文件“index.bdmv”中描述了目录“BDMV”的内容。即,文件“index.bdmv”对应作为数据结构中最上层的索引层上的索引表。文件“MovieObject.bdmv”在其中存储一个或多个电影对象的信息。即文件“MovieObject.bdmv”对应数据结构中的对象层。
目录“PLAYLIST”是其中存放播放列表数据库的目录。即,目录“PLAYLIST”包括作为相应播放列表上文件的文件“xxxxx.mpls”。文件“xxxxx.mpls”相对于每个PLAYLIST而产生。每个文件名中,“.”(句点)前面的“xxxxx”为五位数(five-digit number),“.”(句点)后面的“mpls”为固定在每个播放列表文件的扩展名。
目录“CLIPINF”为其中布置片段数据库的目录。即,目录“CLIPINF”包括作为对应于相应片段AV流文件的片段信息文件的文件“zzzzz.clpi”。每个片段信息文件名中,“.”(句点)前面的“zzzzz”为五位数,“.”(句点)后面的“clpi”为固定在这类片段信息文件的扩展名。
目录“STREAM”是其中布置作为实体的AV流文件的目录。即目录“STREAM”包括对应于相应片段信息文件的片段AV流文件。每个片段AV流文件包括根据MPEG2(运动图象专家组2)的传输流(下文简称“MPEG2 TS”)并具有文件名“zzzzz.m2ts”。每个片段AV流文件名中,使得“.”(句点)前面的“zzzzz”与相应片段信息文件的相同,从而可便于掌握片段信息文件和每个片段AV流文件之间的对应性。
在目录“AVCHDTN”中可存放两个索引图像文件“thumbnail.tidx”和“thumbnail.tdt2”。在索引图像文件“thumbnail.tidx”中,存储由预定方案加密的缩略图像。在索引图像文件“thumbnail.tdt2”中,存储未加密的索引图像。例如,对应于用户采用照相机拍摄的片段的缩略图像为自由复制的图像,并认为不必加密,因此存储在缩略图像文件“thumbnail.tdt2”中。
在图6示出的文件中,将更加详细地描述与本发明的实施例密切相关的那些。将描述紧邻目录“BDMV”下面层级中的文件“index.bdmv”。图7是示出表示文件“index.bdmv”示例性结构的句法(syntax)的示意图。在图7中,句法基于作为计算机装置等程序描述语言的C语言的记法示出。这同样适用于示出其它句法的视图。
参考图7,字段“TypeIndicator”具有32位的数据长度并表示文件“index.bdmv”为索引表。字段“TypeIndicator2”具有32位的数据长度并表示文件“index.bdmv”的版本。字段“IndexesStartAddress”具有32位的数据长度并表示句法中块“blkIndexes()”的起始地址。
字段“ExtensionDataStartAddress”具有32位的数据长度并表示句法中块“blkExtensionData()”的起始地址。块“blkExtensionData()”为其中存储预定扩展数据的块。字段“ExtensionDataStartAddress”以距文件“index.bdmv”第一字节的字节相对数表示块“blkExtensionData()”的起始地址。字节的相对数在“0”开始。如果此字段“ExtensionDataAddress”的值为“0”,那么这表示文件“index.bdmv”中没有块“blkExtensionData()”。
继在字段“ExtensionDataStartAddress”之后,设置数据长度为192个字节的保留区域。保留区域是用于字节对齐、将来添加字段等等的区域。这同样适用于下文。块“blkAppInfoBDMV()”为其中内容创建者可描述期望信息并且对播放器操作等等没有影响的块。
块“blkIndexes()”对应于文件“index.bdmv”的实质内容。依赖于在文件“index.bdmv”中描述的内容,指定当播放器中安装磁盘时要再现的最先播放标题和在顶部菜单上调用的标题(电影对象)。基于在索引表中调用的电影对象等中描述的命令读取将在下文描述的播放列表之一。
图8是示出表示块“blkIndexes()”示例性结构的句法的示意图。字段“Length”具有32位的数据长度并表示从此字段“Length”结束到块“blkIndexes()”结束的数据长度。在字段“Length”之后,布置块“FirstPlaybackTitle()”和“MenuTitle()”。
在块“FirstPlaybackTitle()”中,描述用于最先播放标题的目标信息。具体地,在块“FirstPlaybackTitle()”中数据长度为1位的“保留”区域后描述固定值“1”。另外,经由块“FirstPlaybackTitle()”中数据长度为31位的“保留”区域,描述固定值“1”。经由数据长度为14位的保留区域,布置数据长度为16位的字段“FirstPlaybackTitleMobjIDRef”。此字段“FirstPlaybackTitleMobjIDRef”表示用于最先播放标题的每个电影对象的ID。
由基于参照图9和10在下面描述的电影对象的句法用作电影对象循环语句中循环变量的值“mobj_id”表示每个电影对象的ID。在图8的实例中,对应于所涉及的每个电影对象的“mobj_id”被存储在字段“FirstPlaybackTitleMobjIDRef”中。
块“blkIndexes()”中的块“FirstPlaybackTitle()”中的字段“FirstPlaybackTitleMobjIDRef”可以表示标题或顶部菜单的电影对象。
在块“MenuTitle()”中,描述关于顶部菜单上使用的对象的信息。具体地,在块“MenuTitle()”中数据长度为1位的“保留”区域之后描述固定值“1”。另外,经由块“MenuTitle()”中数据长度为31位的“保留”区域,描述固定值“1”。经由数据长度为14位的“保留”区域,设置数据长度为16位的字段“MenuTitleMobjIDRef”。此字段“MenuTitleMobjIDRef”表示用于菜单标题的每个电影对象的ID。
块“MenuTitle()”后的字段“NumberofTitles”具有16位的数据长度并表示用户可选择和可播放的标题数量。根据随后的循环语句,由字段“NumberOfTitles”指示的次数,用值“title_id”作为因子而描述块“MovieTitle[title_id]()”。在“MovieTitle[title_id]”中,描述关于每个标题的信息。值“title_id”为从“0”到由字段“NumberOfTitles”表示的值的数值并且用于识别每个标题。
在块“MovieTitle[title_id]()”中,经由数据长度为1位的“保留”区域,描述固定值“1”,并经由数据长度为46位的“保留”区域,描述字段“MovieTitleMobjIDRef”。字段“MovieTitleMobjIDRef”的数据长度为16位并且表示用于每个标题的每个电影对象的ID。在字段“MovieTitleMobjIDRef”后,布置数据长度为32位的“保留”区域。
图9是示出设置在紧邻目录“BDMV”下层的文件“MovieObject.bdmv”示例性结构的句法的示意图。字段“TypeIndicator”数据长度为32位(4字节)并指示该文件是“MovieObject.bdmv”。在字段“TypeIndicator”中描述包括在ISO(国际标准化组织)646中所指定编码方法编码的四个字符的字符串。在图9的实例中,在字段“TypeIndicator”中描述ISO646指定的编码方法所编码的四字符串“MOBJ”并指示该文件为“MovieObject.bdmv”。
字段“TypeIndicator2”的数据长度为32位(4字节)并指示文件“MovieObject.bdmv”的版本号。典型地在文件“MovieObject.bdmv”的字段“TypeIndicator2”中描述ISO646中所指定编码方法编码的四字符串“0100”。
字段“ExtensionDataStartAddress”的数据长度为32字节并表示句法中块“blkExtensionData()”的起始地址。字段“ExtensionDataStartAddress”以距文件“MovieObject.bdmv”第一字节的相对字节数表示块“blkExtensionData()”的起始地址。相对字节数在“0”开始。如果此字段“ExtensionDataStartAddress”的值为“0”,那么这表示文件“MovieObject.bdmv”中没有块“blkExtensionData()”。
在图9所示的句法中,每个字段“padding_word”的数据长度为16位,根据文件“MovieObject.bdmv”的句法,字段“padding_word”被插入循环语句中值N1或N2表示的次数那么多次。值N1或N2或者为“0”或者为任意正整数。另外,对于每个字段“padding_word”可使用理想的值。
在字段“ExtensionDataStartAddress”之后,布置数据长度为224位的“保留”区域,并存储作为文件“MovieObject.bdmv”主体的块“blkMovieObjects()”。
图10是表示块“blkMovieObjects()”示例性结构的句法的示意图。字段“Length”的数据长度为32位,并表示刚好从字段“Length”结束到块“blkMovieObjecs()”结束的数据长度。经由数据长度为32位的“保留”区域,布置字段“NumberOfMobjs”。根据紧邻字段“NumberOfMobjs”后的for循环语句,字段“NumberOfMobjs”表示所存储的电影对象数量。用作for循环语句的循环变量的值“mobj_id”唯一地识别每个电影对象。值“mobj_id”为在“0”开始的值,而以值“mobj_id”识别的电影对象由循环语句中所描述的顺序限定。
在for循环语句中的块“TerminalInfo()”中描述固定值“1”,并且随后布置数据长度为15位的“保留”区域。在“保留”区域之后,布置数据长度为16位的字段“NumberOfNavigationCommands[mobj_id]”。字段“NumberOfNavigationCommands[mobj_id]”指示以值“mobj_id”指示的电影对象(“MovieObject[mobj_id]”)中所包括的导航命令数量。
通过以值“command_id”用作循环变量的的随后的for循环语句,导航命令被描述由字段“NumberOfNavigationCommands[mobj_id]”表示的数目多么多次。即,字段“NumberOfNavigationCommands[mobj_id]”在其中顺次存储导航命令,每个导航命令由包括在以值“mobj_id”表示的块“MovieObject[mobj_id]”中的值“command_id”表示。值“command_id”为在“0”开始的值,并且以在for循环语句中描述的顺序定义导航命令。
图11是表示图6所示的播放列表文件“xxxxx.mpls”示例性结构的句法的示意图。字段“TypeIndicator”的数据长度为32位(4字节)并且表示文件“xxxxx.mpls”为播放列表文件。字段“TypeIndicator2”的数据长度为32位(4字节)并且表示播放列表文件“xxxxx.mpls”的版本。字段“PlayListStartAddress”的数据长度为32位并表示句法中块“blkPlayList()”的起始地址。
字段“PlayListMarkStartAddress”的数据长度为32位并表示句法中块“blkPlayListMark()”的起始地址。字段“ExtensionDataStartAddress”的数据长度为32位并表示句法中块“blkExtensionData()”的起始地址。字段“ExtensionDataStartAddress”的值以距文件“xxxxx.mpls”第一个字节的相对字节数表示块“blkExtensionData()”的起始地址。字节的相对数在“0”开始。如果此字段“ExtensionDataStartAddress”的值为“0”,那么这表示文件“xxxxx.mpls”中没有块“blkExtensionData()”。
经由数据长度为160位的“保留”区域布置块“blkAppInfoPlaylist()”。在块“blkAppInfoPlayList()”中,描述关于在下个块“blkPlayList()”中描述的播放列表的类型、再现限制等信息。在块“blkPlayList()”中描述播放列表。在块“blkPlayListMark()”中描述章跳转等等的跳转目标。块“blkExtensionData()”是其中可存储预定扩展数据的块。
图12是表示图11所示块“blkPlayList()”示例性结构的句法的示意图。字段“Length”的数据长度为32位并表示刚好从字段“Length”结束到块“blkPlayList()”结束的数据长度。在字段“Length”后,布置数据长度为16位的“保留”区域,并在“保留”区域后布置字段“NumberOfPlayItems”。字段“NumberOfPlayItems”的数据长度为16位并表示在块“blckPlayList()”中包括的播放项目数。字段“NumberOfSubPath”表示决“blckPlayList()”中包括的次路径(sub-path)数。
根据随后的循环语句,描述块“blkPlayItem()”,其中描述了由字段“NumberOfPlayItems”表示的数目那么多的播放项目。数目,即基于for循环语句的计数,对应于块“blkPlayItem()”的标识符“PlayItem_id”。另外,根据随后的for循环语句,块“blkSubPath”被描述由字段“NumberOfSubPath”表示的数目那么多。此数目即基于循环语句的计数对应于块“blkSubPath()”的标识符“SubPath_id”。
应该注意,次路径可布置为与相应于主要再现的各个播放项目的主路径的每个的次播放项目对应。当两个图像被相互组合时,次路径用于指定要与由每个播放项目指定的片段同时再现的子图像。
图13是表示块“blkPlayItem()”示例性结构的句法的示意图。字段“Length”的数据长度为16位并表示刚好从字段“Length”结束到块“blkPlayItem()”结束的数据长度。
字段“ClipInformationFileName”的数据长度为40位(5字节)并表示块“blkPlayItem()”涉及的片段信息文件的文件名。在此块“blkPlayItem()”中,读取具有由字段“ClipInformationFileName”表示的文件名的片段信息文件。字段“ClipCodeIentifier”的数据长度为32位(4字节)并表示在由块“blkPlayItem()”表示的每个播放项目中使用的片段AV流的编解码方法。
经由数据长度为12位的“保留”区域布置字段“ConnectionCondition”。字段“ConnectionCondition”的数据长度为4位并表示片段间连接状态的信息。用于记录特定记录介质的字段“ConnectionCondition”的值为“1”、“5”或“6”。如果字段“ConnectionCondition”的值为“1”,那么这表示播放项目涉及的片段与最近的过去的播放项目之间没有无缝连接。如果字段“ConnectionCondition”的值为“5”或“6”,那么这表示播放项目涉及的片段与最近的过去的播放项目之间具有无缝连接。“无缝连接”意味着进行片段间再现控制以便在连续帧时序再现片段和下一个片段。
如果“ConnectionCondition”的值为“5”,那么音频数据的记录长度设置为比播放项目所参考的片段中视频数据的长(参见图14A)。通过这样设置,当两个片段相互连接时,音频数据可受到渐弱处理。例如,如果由用户记录停止操作关闭片段,那么字段“ConnectionCondition”的值设定为“5”。下面将字段“ConnectionCondition”的值“5”表示的片段连接方法称为“第一无缝连接”。
如果字段“ConnectionCondition”的值为“6”,那么音频数据的记录长度设置为等于播放项目所涉及片段中视频数据的长度(参见图14B)。通过如此设置,可以无缝连接片段。例如,如果由于不同于用户记录停止操作的原因,例如由于系统相关的原因关闭片断,则字段“ConnectionCondition”的值设置为“6”。下面将字段“ConnectionCondition”的值“6”表示的片段连接方法称为“第二无缝连接”。
字段“RefToSTCID”的数据长度为8位并表示关于系统时间时钟基(system time base,STC)的不连续性的信息。字段“INTime”和“OUTTime”的数据长度分别为32位并表示主片段AV流的再现范围。字段“INTime”表示起始点(IN点)而字段“OUTTime”表示结束点(OUT点)。
决“blkUOMaskTable()”为其中设置用户输入接受限制的表格。数据长度为1位的标记“PlayItemRandomAccessFlag”为定义是否允许随机访问块“blkPlayItem()”表示的播放项目的标记。其后,经由数据长度为7位的”保留”区域设置字段“StillMode”。字段“StillMode”的数据长度为8位并表示是否在块“blkPlayItem()”所表示播放项目中将最后显示的图像显示为静止图像。根据If语句,如果字段“StillMode”的值为“0x01”(二进制),则由数据长度为16位的字段“StillTime”表示静止时间。如果字段“StillMode”为不同的值“0x01”,则将数据长度为16位的字段用作”保留”区域。
数值符号“0x”表示以16进制给出数值。这同样适用于下面描述的类似符号。
块“blkSTNTable()”是其中管理以块“blkPlayItem()”所表示块项目管理的片段AV流的属性和PID编号以及片段AV流在记录介质上的记录位置等等的表格。
图15是表示块“blkPlayListMark()”示例性结构的句法的示意图。字段“Length”的数据长度为32位并表示刚好从字段“Length”结束到块“blkPlayListMark()”结束的数据长度。
字段“NumberOfPlayListMarks”的数据长度为16位并表示包括在块“blkPlayListMark()”中的播放列表标记(PlayListMark)的数目。根据随后的for循环语句,描述以字段“NumberOfPlayListMarks”所表示数目的播放列表标记的信息。
在for循环语句中,在数据长度为8位的”保留”区域后布置字段“MarkType”。字段“MarkType”的数据长度为8位并表示标记类型。每个播放列表标记被定义为下面两类型中之一,即条目标记(entry mark)和链接点(link point)。字段“MarkType”表示每个播放列表标记属于哪种类型。条目标记用于定义章。因为与本发明的实施例不太相关,下面不描述链接点。字段“NumberOfPlayListMarks”表示条目标记和链接点的总和。
字段“RefToPlayItemID”的数据长度为16位并且在其中描述用于指向给出标记的播放项目的识别信息“PlayItem_id”。字段“MarkTimeStamp”的数据长度为32位,并且在字段“MarkTimeStamp”中描述指示给出标记的点的时间戳。字段“EntryESPID”的数据长度为16位并指示包括标记所指示的基本流的TS包的PID值。字段“Duration”的数据长度为32位并且为以45kHz时钟间隔测量的无符号整数。如果字段“Duration”中存储的数值为“0”,则字段“Duration”没有意义。
图16是出表示片段信息文件示例性结构的句法的示意图。字段“TypeIndicator”的数据长度为32位(4字节)并表示文件为片段信息文件。字段“TypeIndicator2”的数据长度为32位(4字节)并表示片段信息文件的版本。
片段信息文件包括块“blkClipInfo()”、“blkSequenceInfo()”、“blkProgramInfo()”、“blkCPI()”、“blkClipMark()”和“blkExtensionData()”。字段“SequenceInfoStartAddress”、“ProgramIntoStartAddress”、“CPIStartAddress”、“ClipMarkStartAddress”和“ExtensionDataStartAddress”的数据长度为32位并分别表示相应块的起始地址。
字段“ExtensionDataStartAddress”以距片段信息文件的第一字节的相对数表示块“blkExtensionData()”的起始地址。字节的相对数在“0”开始。如果字段“ExtensionDataStartAddress”值为“0”,这表示文件“indx.bdmv”中没有块“blkExtensionData()”。
块“blkClipInfo()”在”保留”区域后开始,此”保留”区域在表示起始地址的字段之后,且数据长度为96位。在块“blkClipInfo()”中描述片段信息文件所管理的片段AV流信息。在块“blkSequenceInfo()”中描述用于管理作为集成序列其中STC和ATC(到达时钟基)连续的序列的信息。在块“blkProgramInfo()”中描述由片段信息文件管理的片段AV流编码方法、片段AV流中视频数据的纵横比等等的信息。在块“blkCPI()”中存储表示AV流特征部分例如随机访问起始点的特征点信息(characteristicpoint information,CPI”)的信息。
另外,在块“blkClipMark()”中描述索引点(跳转点),例如分配给每个片段的线索再现的章位置。块“blkExtensionData()”为其中可存储扩展数据的区域。因为片断信息文件中的决“blkClipMark()”和“blkSequenceInfo()”与本发明的实施例不太相关,所以在这里将不进行描述。
图17是表示片断信息文件中块“blkCPI()”示例性结构的句法的示意图。在经过帧间压缩的编码流例如MPEG流中,解码开始的部分常常限制为例如每个GOP顶部的部分中的部分。CPI为其中收集关于解码可以开始的起始点位置的信息的数据库,并且是具有其中播放时间和内文件(in-file)地址相互对应的表格的形式。即,CPI是其中以表格形式记录指示每个解码目的单元的起始点的信息的数据库。
通过如此定义数据库,如果例如要从期望时间再现此流,那么可通过基于播放时间参考CPI来识别再现位置的内文件地址。因为内文件地址表示每个解码目的单元的顶部,用户可在此地址读取和解码数据并允许采用播放器显示图像。
将存储在CPI中的每个解码单元的顶部位置(其为每个GOP的顶部位置)称为“EP(Entry Point,条目点)”。
在图17中,字段“Length”的数据长度为32位并表示刚好从字段“Length”结束到块“blkCPI()”结束的数据长度。根据随后的If-语句,如果字段“Length”值非零,则经由数据长度为12位的”保留”区域,布置字段“CPIType”。字段“CPIType”的数据长度为4位并表示CPI的类型。后面的块blkEPMap()在其中存储使得PTS值与相应片段AV流文件中字节地址对应的表格。
图18是表示块“blkEPMap()”示例性结构的句法的示意图。经由数据长度为8位的”保留”区域,布置字段“NumberOfStreamPIDEntries”。字段“NumberOfStreamPIDEntries”的数据长度为8位并表示块“blkEPMap()”中块“blkEPMapForOnStreamPID”的条目数。根据随后的for循环语句,描述以由值[k]用作循环变量的字段“NumberOfStreamPIDEntries”表示的数目所指示的条目点的信息。
在for循环语句中,字段“StreamPID[k]“的数据长度为16位并表示传输包(transport packet)的PID值,传输包输送由作为块“blkEPMap()”的第[k]个条目的块“blkEPMapForOneStreamPID”涉及的基本流(elementarystream)(下文中,描述为“第[k]”个块“blkEPMapForOneStreamPID”)。
经由数据长度为10位的”保留”区域,布置字段“EPStreamType[k]”。字段“EPStreamType[k]”的数据长度为4位并表示第[k]个块“blkEPMapForOneStreamPID”涉及的基本流的类型。字段“NumberOfEPCoarseEntries[k]”的数据长度为16位并表示包括在第[k]个块“blkEPMapForOneStreamPID”中的EP粗(coarse)表格的条目的数目。字段“NumberOfEPFineEntries[k]”的数据长度为18位并表示包括在第[k]个块“blkEPMapForOneStreamPID”中的EP细表格的条目的数目。字段“EPMapForOneStreamPIDStartAddress[k]”的数据长度为32位并表示第[k]个块“blkEPMapForOneStreamPID”在块“blkEPMap()”中起始的相对字节位置。由距块“blkEPMap()”的第一字节的字节数表示字段“EPMapForOneStreamPIDStartAddress[k]”的值。
在描述了for循环语句之后,根据跨过数据长度为16字节的整数倍的字段“padding_word”描述的for循环语句,以值[k]作为循环变量,由字段“NumberOfStreamPIDEntries”表示的数目存储块“blkEPMapForOneStreamPID(EPStreamType[k],NumberOfEPCoarseEntries[k],NumberOfEPFineEntries[k])”。即,参数“NumberOfEPCoarseEntries[k]”表示存储在子表格(“EP粗表格”)中的条目“PTSEPCoarse”和“SPNEPCoarse”的数目。同样,参数“NumberOfEPFineEntries[k]”表示存储在子表格(“EP细表格”)中的条目“PTSEPFine”和“SPNEPFine”的数目。下面将分别合适地将参数“NumberOfEPCoarseEntries[k]”和“NumberOfEPFineEntries[k]”称为“条目数Nc”和“条目数Nf”。
图19是表示块“blkEPMapForOneStreamPID(EP_stream_type,Nc,Nf)”示例性结构句法的示意图。为描述块“blkEPMapForOneStreamPID(EP_stream_type,Nc,Nf)”的语义,将首先描述作为在块“blkEPMapForOneStreamPID(EP_stream_type,Nc,Nf)”中存储数据所基于的条目“PTSEPStart”和“SPNEPStart”的含义。
条目“PTSEPStart”和与条目“PTSEPStart”相关的条目“SPNEPStart”分别表示AV流上的条目点。另外,从相同的条目“PTSEPStart”推断与条目“PTSEPFine”相关的条目“PTSEPFine”和条目“PTSEPCoarse”。从相同的条目“SPNEPStart”推断与条目“SPNEPFine”相关的条目“SPNEPFine”和条目“SPNEPCoarse”。
图20示出条目“PTSEPCoarse”和“PTSEPFine”的示例性格式。PTS即条目“PTSEPStart”的数据长度为33位。如果MSB为第32位,LSB为第0位,那么从条目“PTSEPStart”的第32位到第19位的14位用于粗搜索的条目“PTSEPCoarse”。条目“PTSEPCoarse”可以搜索在直到26.5小时的范围中5.8秒分辨率下的AV流文件。另外,从条目“PTSEPStart”的第19位到第9位的11位用于细搜索的条目“PTSEPFine”。条目“PTSEPFine”可以搜索在直到11.5秒的范围中5.7秒分辨率下的AV流文件。第19位为条目“PTSEPCoarse”和“PTSEPFine”所共有。另外,从LSB的第0位到第8位的9位不用于条目“PTSEPCoarse”和“PTSEPFine”。
图21示出条目“SPNEPCoarse”和“SPNEPFine”的示例性格式。源包编号即条目“PTSEPStart”的数据长度为32位。如果MSB为第31位,LSB为第0位,那么从条目“SPNEPStart”的第31位到第0位的所有位用于在图21实例中粗搜索的条目“SPNEPCoarse”。另外,从条目“SPNEPStart”的第16位到第0位的17位用于细搜索条目“SPNEPFine”。条目“SPNEPFine”可以搜索在直到大约25MB的范围中的AV流文件(兆字节)。
甚至就源包而言,预定数目的MSB-侧位可用于条目“SPNEPCoarse”。例如,从条目“SPNEPStart”的第31位到第16位的17位用于条目“SPNEPCoarse”,而从条目“SPNEPStart”的第16位到第0位的17位用于条目“SPNEPFine”。
基于上面内容如下定义条目“PTSEPStart”和“SPNEPStart”。
条目“PTSEPStart”为如图20所示数据长度为33位的无符号整数,并表示在AV流中随机访问图像(例如IDR(瞬时解码刷新)图像或I(内编码)图像)开始的视频访问单元内数据长度为33位的PTS。
如图21所示,条目“SPNEPStart”为数据长度为32位的无符号整数并表示AV流中源包的地址,此源包包括与条目“PTSEPStart”相关的视频访问单元的第一字节。条目“SPNEPStart”以源包编号为单位表示,并计数为从AV流文件中的第一源包开始每个源包递增1的值,以值“0”用作初始值。
参考图19,在块“blkEPMapForOneStreamPID(EP_stream_type,Nc,Nf)”中,由第一for循环语句描述用于粗搜索的子表格(“EP粗表格”),并且以第二for循环语句描述用于细搜索的子表格(“EP细表格”)。
将字段“EPFineTableStartAddress”布置在紧邻第一for循环语句之前。字段“EPFineTableStartAddress”的数据长度为32位,并以距块“blkEPMapForOneStreamPID(EP_stream_type,Nc,Nf)”第一字节的相对字节数表示第二for循环语句中字段“ReservedEPFine[EP_fine_id]”的第一字节的起始地址。字节的相对数在“0”开始。
采用循环变量[i],第一for循环语句被重复子表格(“EP coarse table”)的条目数目Nc这么多次。字段“RefToEPFineID[i]”、条目“PTSEPCoarse[i]”和条目“RefToEPFine[I]”每个均被存储条目数目Nc这么多次。在第一for循环语句中,字段“RefToEPFineID[i]”的数据长度为18位并表示子表(“EPfine table”)的条目编号,此子表具有与字段“RefToEPfineID[i]”后的字段“PTSEPCoarse[i]”表示的条目“PTSEPCoarse”相关的条目“PTSEPFine”。从相同条目“PTSEPStart”推断条目“PTSEPFine”和与条目“PTSEPFine”相关的条目“PTSEPCoarse”。由以在第二for循环语句中描述的顺序定义的循环变量[EP_fine_id]值给出字段“RefToEPFineID[i]”。
在第一for循环语句之后,经过字段“padding_word”,描述第二循环语句。采用循环变量[EP_fine_id],将第二循环语句重复子表格(“EP finetable”)的条目数目Nf那么多次。数据长度为1位的字段“ReservedEPFine[EP_fine_id]”、数据长度为3位的字段“IendPositionOffset[EP_fine_id]”、数据长度为11位的字段“PTSEPFine[EP_fine_id]”、数据长度为17位的字段“SPNEPFine[EP_fine_id]”被存储条目数目Nf这么多。这些字段中,字段“PTSEPFine[EP_fine_id]”和“SPNEPFine[EP_fine_id]”被存储作为条目“PTSEPFine”和“SPNEPFine”,其基于循环变量[EP_fine_id]由表格(“EPFine table”)分别引用。
如下推出条目“PTSEPCoarse”、“PTSEPFine”、“SPNEPCoarse”和“SPNEPFine”。假定按照子表(“EP Fine table”)中每个相关数据“SPNEPStart”值的升序布置Nf个条目。如下面的等式(1)表示,从相应的条目“PTSEPStart”推出每个条目“PTSEPFine”。
PTSEPFine[EP_fine_id]=(PTSEPStart[EP_fine_id])>>9)/211  (1)
以下面的等式(2)和(3)表示条目“PTSEPCoarse”和相应条目“PTSEPFine”之间的关系。
PTSEPCoarse[i]=(PTSEPStart[RefToEPFineID[i]]>>19)/214  (2)
PTSEPFine[RefToEPFineID[i]]=(PTSEPStart[RefToEPFineID[i]])>>9)/211  (3)
如下面的等式(4)所示,从对应条目“SPNEPStart”推断每个条目“SPNEPFine”。
SPNEPFine[EP_fine_id]=SPNEPStart[EP_fine_id]/217  (4)
以下面的等式(5)和(6)表示条目“SPNEPCoarse”和相应条目“SPNEPFine”之间的关系。
SPNEPCoarse[i]=SPNEPStart[RefToEPFineID[i]]    (5)
SPNEPFine[RefToEPFineID[i]]=SPNEPStart[RefToEPFineID[i]]/217(6)
在等式(1)到(6)中,符号“>>x”表示使用从数据LSB侧起超过x位的数字开始的位。
现在描述本发明的一个实施例。根据本发明的实施例,如果要将播放列表标记分配给播放列表并进行片段的划分和编辑,则如果与分配播放列表标记的位置对应的GOP为封闭GOP,那么将播放列表标记分配给地址信息边界即GOP边界,而如果该GOP为开放GOP那么分配给再现时间信息即条目“PTSEPStart”(参见图21)表示的位置。
通常,因为难以使用记录起始位置前面GOP的信息,所以记录起始位置例如具有封闭GOP结构。由于这一点,在记录起始位置,将播放列表标记分配给GOP边界。在不同于记录起始位置的位置,将每个播放列表标记分配给条目“PTSEPStart”指示的位置。另外,甚至在不同于记录起始位置的位置,也可能确定对应于每个播放列表标记要被分配的位置的GOP是封闭GOP还是开放GOP,依据确定结果,每个播放列表标记被分配至GOP边界或者由条目“PTSEPStart”指示的位置。
通过如此控制,可在章跳转期间尽量最小化跳转目标的解码范围,并可以将章边界设置为与初始记录起始位置一致。
在本发明的实施例中假定指定章划分位置的播放列表标记全部是条目标记。
将更详细地描述根据本发明实施例的章划分。在这里假定将播放列表标记列表的类型被固定为条目标记。
首先,章(chapter)是用户可见的最小再现间隔单元,并表示相邻播放列表标记之间的间隔。还假定播放列表标记不可以分配给每个播放列表的结束位置。而且,播放列表标记通常分配给每个播放列表的顶部位置。
而且,在本发明的实施例中假定划分和编辑的时间粒度(granularity)为GOP。另外,假定包括记录起始位置的GOP以外的GOP为开放GOP。这旨在实现更高的图像质量。
首先描述将播放列表标记插入每个播放列表的处理。图22示出具有可适用于本发明实施例的格式的播放列表和它们的较低层级的示例性文件结构。在图22的实例中,播放列表#10包括三个播放项目#0、#1、#2,其每一个基于值“PlayItem_id”被参考(refer to)(参见图12)。播放项目#0、#1分别参考片段#20的间隔,播放项目#2参考片段#31的间隔。播放列表#11包括两个播放项目#0、#1,播放项目#0和#1分别参考片段#31的间隔。
如已述的,每个播放项目参考构成每个片段的、包括在片段信息中的块“blkEPMap()”所描述的条目点,并指定相应片段AV流文件中的地址。通过如此做,可从播放列表指定片段AV流文件的部分,并以预定顺序再现这些部分。
在图22的实例中,四个播放列表标记PLM#0、PLM#1、PLM#2和PLM#3被分配给播放列表#10。可为每个播放列表设置表示每个片段中各自跳转-访问位置的标记。此标记称为“播放列表标记(PlayListMark)”(下文简称为“PLM”)。这些播放列表标记由播放列表文件中块“blkPlayListMark()”内的值“PL_mark_id]”参考,并由字段“MarkTimeStamp”表示为时间信息(参见图15)。
接下来参考图23A、23B、23C,将描述使用播放列表划分和编辑片段。图23A示出其中由播放列表参考片段的状态。通过分别指定包括在播放列表#1中每个播放项目#1和#2中的再现起始点(IN点)和再现结束点(OUT点)参考记录在记录介质上的片段#1和#2。在图23A到23C的实例中,播放项目#1基于下面的信息参考片段#1,即片段#1顶部(位置a)为IN点其后端(位置b)为OUT点。同样,播放项目#2基于下面的信息参考片段#2,即片段#2顶部(位置c)为IN点其后端(位置d)为OUT点。在播放列表#1中,指定播放项目#1和#2的再现顺序号。
因此,在图23A的实例中,响应于播放列表#1的命令,从位置a到位置b再现片段#1,从片段#1位置b后的位置c再现片段#2,并且在位置d完成再现。换言之,在图23A的实例中,响应于来自播放列表#1的命令连续再现从片段#1顶部到片段#2尾部的间隔。
另外,在图23A的实例中,播放列表标记PLM#1和PLM#2被分别分配给片段#1的顶部位置a和片段#2的顶部位置c。这样,如果当根据播放列表#1例如在片段#1上的位置a和b之间任意位置再现AV流文件时指定跳转,那么再现位置跳转至在再现方向上距离本再现位置最近的所设置的播放列表标记的位置(如果再现是从位置a到位置b,则其是播放列表标记PLM#2的位置),并且从播放列表标记PLM#2的位置开始继续进行再现。
通过沿片段中途设置播放列表标记,可虚拟地划分片段。例如如图23B示例性示出地,将播放列表标记PLM#3分配给相对于播放列表#1片段#2的理想位置。通过这样做,与片段#2播放列表标记PLM#3对应的位置e可被指定为跳转目标位置,如图23C所例示的那样。因此可以认为在位置e虚拟上划分片段#2。
从用户的视点刊,根据章设置播放列表所表示的间隔。可通过向播放列表分配相应的播放列表标记设置章。例如,如果仅仅在播放列表所表示的间隔的顶部提供播放列表标记或者在播放列表上不提供播放列表标记,那么整个播放列表组成一章。
而且,如图23A的实例所示,如果将播放列表标记PLM#1分配给与在片段#1顶部的位置a对应的位置并将播放列表标记PLM#2分配给与在片段#2顶部的位置c对应的位置,那么将从播放列表标记PLM#1到播放列表标记PLM#2的间隔看作是章#1,并且将从播放列表标记PLM#2到播放列表#1尾部的间隔看作是章#2。这样,由播放列表标记#1将播放列表#1的整个长度划分为两掌。
另外,如果与沿片段#2中途的理想位置e对应的播放列表标记PLM#3如图23C所示提供,那么图23A中的章#2可在播放列表标记PLM#3位置被进一步划分成章。即,将从播放列表标记PLM#2到播放列表标记PLM#3的间隔看作是章#2,并且将从播放列表标记PLM#3到播放列表#1尾部的间隔看作是章#3。
图24是示出另外插入播放列表标记示例性处理的流程图。在图24所示出的处理中,通过搜索用于存储播放列表中的播放列表标记的块“blkPlayListMark()”(参见图15)确定当前再现位置和已经设置的播放列表标记位置之间的位置关系。基于此结果插入另外的播放列表标记,并且重写块“blkPlayListMark()”上的信息。
在步骤S50,计数值i初始化为“0”。在步骤S51,确定当前再现的播放项目(由图24中的“PI”表示)的编号是否大于由第i个播放列表标记所引用的播放项目(由图24中的“PLM”表示)的编号。
例如,在图12所示的块“blkPlayList()”中,计算对应于在采用循环变量“PlayItem_id”的for循环语句中描述的块“blkPlayItem()”中循环项目中当前再现的播放项目的值“PlayItem_id”。将计算的“PlayItem_id”与块“blkPlayListMark()”中第i个值“RefToPlayItemID”比较。如果确定当前再现的播放项目的编号较大,那么计数值i加1并且此处理返回到步骤S51。
如果在步骤S51确定当前再现的播放项目的编号不大于第i个播放列表标记所参考的播放项目的编号,即,当前再现的播放项目的编号等于或者大于由第i个播放列表标记所参考的播放项目的编号,那么此处理移至步骤S52。
在步骤S52,确定当前再现的播放项目的编号是否等于第i个播放列表标记所参考的播放项目的编号。如果确定它们相等则此处理移至步骤S53。如果没有确定相等,则此处理移至步骤S54。
在步骤S53,确定当前再现时间是否晚于由第i个播放列表标记所指示的再现时间。例如可从解码视频流的解码器获得当前的再现时间。另外,由第i个播放列表标记所指示的再现时间可参考图15获得,并且是基于块“blkPlayListMark()”中的第i个“MarkTimeStamp”的。
如果确定当前再现时间晚于由第i个播放列表标记所指示的时间,那么计数值i加1,并且此处理返回到步骤S53。如果确定当前再现时间不晚于由第i个播放列表标记所指示的时间,即当前的再现时间等于或早于由第i个播放列表标记所指示的时间,那么此处理移至步骤S54。
在步骤S54,进行另外将播放列表标记(其在本实施例中为条目标记)插入第i个位置的处理。这里,在块“blkPlayListMark()”中,将播放列表标记另外插入现存的第i个播放列表标记和第(i-1)个播放列表标记之间。在插入另外的播放列表标记之后,将现存的i个播放列表标记看作是第(i+1)个播放列表标记。
更具体地,在块“blkPlayListMark()”中,将对应于当前再现的播放项目的值“PlayItem_id”设置为字段“RefToPlayItemId”的值。另外,将字段“MarkTimeStamp”的值设置为指示当前再现时间的值。而且,字段“NumberOfPlayListMarks”的值加1并且重新计算字段“Length”的值。
实际上,块“blkPlayListMark()”为播放列表文件的一部分。因此,在图11所示例性示出的播放列表文件句法中,根据块“blkPlayListMark”中的字段“Length”的值重写字段“ExtensionDataStartAddress”的值。
将参照图25A和25B更加详细地描述另外插入播放列表标记的处理。因为图25A和25B在结构上与图22相同,所以将不详细描述。将参照图25A描述当再现播放列表标记PLM#2和PLM#3时另外将播放列表标记插入位置a的实例。
将计数值i初始化为“0”,并且因为对应位置a的播放项目为播放项目#2,所以当前再现的播放项目的编号为2。另一方面,第i个即第0个播放列表标记#0参考播放项目#0,并且第i个播放列表标记所参考的播放项目的编号为0。因为当前再现的播放项目的编号大于由第i个播放列表标记所参考的播放项目的编号,所以基于步骤S51的确定将计数值i加1成为“1”,并且在步骤S51再次进行确定。
在步骤S51的第二次确定中,将由第i个即第一个播放列表标记PLM#1所参考的播放项目的编号与当前再现的播放项目的编号比较。第一播放列表标记PLM#1参考播放项目#1并且所参考的播放项目的编号为1。因为当前再现的播放项目的编号大于第i个播放列表标记所参考的播放项目的编号,基于步骤s51的确定将计数值i加1成为“2”,并且在步骤S51再次进行确定。
在步骤S51的第三次确定中,第i个即第二个播放列表标记PLM#2落入由播放项目#1所指定的间隔中,并且第二个播放列表标记PLM#2所参考的播放项目的编号为1。因此,确定当前再现的播放项目的编号大于由第i个播放列表标记所参考的播放项目的编号。因此,计数值加1到“3”,并且在步骤S51再次确定。
在步骤S51的第四次确定中,第i个即第三个播放列表标记PLM#3处于由播放项目#2所指定的间隔中,并且第三个播放列表标记所参考的播放项目的编号为2。因此,确定当前再现的播放项目的编号等于由第i个播放列表标记所参考的播放项目的编号,并且此处理移至步骤S52。在步骤S52,确定由第三个播放列表标记PLM#3所参考的播放项目的编号等于当前再现的播放项目的编号。因此,此处理移至步骤S53。
计数值i现在为3。因为这一点,播放列表标记PLM#3即第i个播放列表标记的时间晚于当前再现位置a的时间。因此在步骤S53,确定指示当前再现时间的值小于指示设置第i个播放列表标记时间的值。此处理移至步骤S54,在该步骤设置对应位置a的播放列表标记。
即,所参考的播放项目的编号为“2”,并且将指示位置a处再现时间的播放列表标记被另外插入作为第三播放列表标记PLM#3。另外,播放列表标记的数目加1,就在另外插入播放列表标记PLM#3之前,由播放列表标记PLM#3指示的再现时间之后的所分配的播放列表标记的每个的编号加1。即在图25A和25B的实例中,通过另外插入播放列表标记的处理将图25A所示出的播放列表标记PLM#3改变为在图25B所示例性示出的播放列表标记PLM#4,并且将另外插入的播放列表标记视为播放列表标记#3。
如果在步骤S52确定当前再现的播放项目的编号不等于由第i个播放列表标记所参考的项目的编号,即当前再现的播放项目的编号小于第i个播放列表标记所参考的播放项目的编号,那么可能可将新的播放列表标记另外插入播放项目中,此播放项目处于在相应间隔中分别分配了播放列表标记的两个播放项目之间,并且没有被分配播放列表标记。
例如,如图26所示,考虑包括三个播放项目#0、#1和#2的播放列表#12。假定播放列表标记PLM#0和PLM#1分别设置在对应于播放项目#0顶部的位置和播放项目#2所表示的间隔内。
在此状态下,将播放列表标记另外插入位于由播放项目#1所表示间隔内的位置b。因为当计数值i为“1”时,当前再现的播放项目的编号为“1”并且由第i个播放列表标记所参考的项目的编号为“2”,所以在步骤S51确定当前再现的播放项目的编号大于由第i个播放列表标记所参考的项目数,并且此处理移至步骤S52。在步骤S52,因为当前再现的播放项目的编号为“1”并且由第i个播放列表标记所参考的项目编号为“2”,所以可确定它们不相等。这样,在对应位置b的播放项目#1中没有另一个播放项目标记。因此,设置不存在步骤S 53确定表示当前再现时间的值是否小于表示第i个播放列表标记时间的值。所以,此处理从步骤S52移至步骤S54,在此步骤将播放列表标记另外插入位置b。
下面将描述确定关于本发明实施例原理分配播放列表标记的位置的方法。如已经描述的,可得到两个方法,即为由条目“PTSEPStart”指示的位置分配播放列表标记的第一方法以及在每个GOP边界的位置分配播放列表标记的第二方法。将描述相应的第一和第二方法的优点、缺点和改进方法。
如果根据例如MPEG2系统将每个GOP配置为包括I、P和B图像,那么可以使由条目“PTSEPStart”指示的位置与I图像的位置对应。另外,如果根据例如MPEG4或者H.264|AVC系统另外采用IDR图像,那么可以使由条目“PTSEPStart”指示的位置对应于IDR图像的位置。
图27A和27B分别示出由第一和第二方法的章边界的实例。分别由播放列表标记PLM#1和PLM#2表示章边界,并且将在播放列表标记PLM#1和PLM#2之间的间隔设置为章#2。图27由第一方法的示例性章边界。记录起始的位置是在GOP的顶部,因此,如果在由条目“PTSEPStart”指示的每个位置给出播放列表标记,那么基于图27A所示出的播放列表标记在每个GOP顶部和每个章顶部之间产生不匹配的间隔。
因此,在相应章顶部的不匹配间隔内的一至多帧不被再现。例如,如果在记录起始位置设置播放列表标记,那么会产生下面的问题,即包括在于记录起始位置开始的GOP中的、例如按照显示顺序时间上先于第一I图像(根据MPEG2)的一帧或多帧B图像不被再现。
而且,在每个章的后端,不匹配间隔中的一帧或多帧属于不同于紧邻不匹配间隔之前的GOP的GOP。因此,不匹配间隔中的一帧或多帧可能在内容上与紧邻不匹配间隔之前的帧不相关。例如,紧邻不匹配间隔之前的GOP可以是响应于记录停止命令而记录的GOP,而包括匹配间隔的GOP可以是下一个GOP或者响应于另一个记录起始命令而记录的GOP。在这种情况下,产生在章后端再现几帧无关场景的问题。
图27B由第二方法示出示例性章边界。由第二方法,每个章边界与GOP边界一致。因此,第二方法不会产生上述的第一方法的问题。
图28A和28B分别示出由第一和第二方法的解码间隔的实例。播放列表标记PLM#1和PLM#2之间的间隔为待显示的间隔。图28A示出如果采用第一方法的示例性解码间隔。在每个章顶部,将播放列表标记分配给由条目“PTSEPStart”指示的位置。因此,解码起始位置为包括由此条目“PTSEPStart”指示位置处的相应图像的GOP的顶部。即,在每章的顶部,从GOP顶部到播放列表标记PLM#1的间隔与相对于要显示的间隔过多解码所需要的间隔。在再现期间,过分解码的间隔被掩盖(mask)。
如图28B所示,如果采用第二方法,则有必要在紧邻播放列表标记的GOP开始解码。原因如下,如果没有确定GOP是开放GOP还是封闭GOP,则有必要使用将相关GOP的最近的过去的GOP上的信息而解码GOP作为开放GOP。即在GOP边界上,相对于待显示间隔一个GOP那么多的过多解码所需要的间隔发生。
而且,作为时间信息,只能得到对应于条目“PTSEPStart”所指示的每个位置的信息。因此,播放列表标记只能被识别为出现在每个都由在分配播放列表标记的位置之前和之后的条目“PTSEPStart”表示的位置之间。从此意义上,有必要在包括在分配播放列表标记的位置之前的由条目PTSEPStart所表示位置的图像的GOP开始解码。
借助第一方法,解码结束位置是包括对应章结尾的帧的GOP的结尾。由于与上述类似的原因,借助第二方法,难以识别指示章的结尾的播放列表标记的位置是否属于在播放列表标记之前或之后的GOP。因此,有必要执行解码,直到包括对应于由紧邻播放列表标记之后出现的条目“PTSEPStart”指示的位置的图像的GOP的结尾进行解码。因此,最终有必要执行解码,直到无论采用第一或第二方法的相同位置。
图29A和29C分别示出如果将GOP确定为开放GOP或者封闭GOP以第一方法和第二方法的解码间隔的实例。播放列表标记PLM#1和PLM#2之间的间隔为待显示的间隔。与图28A相似,图29A示出在每个由条目“PTSEPStart”所指示的位置分配播放列表标记的实例。图29B示出其中将播放列表标记分配给开放GOP之间的每个GOP边界的实例。
如所陈述的,封闭GOP完全自身解码并且,无需使用关于最近的过去的GOP的信息。因此,如图29C所示,即使将播放列表标记分配给每个GOP边界,也可在播放列表标记位置开始解码。即,如果可以确定分配播放列表标记的GOP为封闭GOP,则相对于待显示间隔过多解码所需要的间隔不会发生。
而且,如果记录在记录停止后重新开始,则对应于记录停止的开放GOP的下一个GOP为在跟随记录开始的封闭GOP。因此,将播放列表标记分配给作为记录起始位置的GOP边界。因此,如图29B所示,在记录停止部分中要显示的间隔的结尾与解码间隔的结尾一致,从而在基于播放列表标记的章的结尾不显示内容不相关的帧。
作为确定GOP为开放GOP还是封闭GOP的措施,可以采用几种措施。根据本发明的实施例,在记录起始时每个GOP典型地为封闭GOP。因此,如果要在对应于记录起始位置的位置处进行章划分,那么将播放列表标记分配给每个GOP边界。
可选择地,例如根据MPEG2系统,可以使用标记,这样因为指示GOP是否为封闭GOP的标记被存储在视频数据基本流的头部。
如果由和记录装置相同的装置进行章划分和编辑并且由相同的装置进行再现,那么可考虑在装置的存储器中存储指示数据被记录在封闭GOP内的位置的信息的方法。另外如果定义为将封闭GOP执行记录用作装置规范并且以相同的装置进行章划分,那么可典型地将播放列表标记分配给每个GOP边界。
例如可将指示模型(model)名字的信息存储在可提供在每个索引文件、电影对象文件、播放列表文件或者片段信息文件内的扩展数据区域(即块“blkExtensionData()”)。可考虑将关于GOP为开放GOP还是封闭GOP的信息存储在在扩展数据区域中的方法。
图30是示出在参考图27A到29C描述的相应条件下播放列表标记设置的评估的表格。在图30中,以符号“○”(圆)给出的项目为有用模式而以符号“×”给出的项目为不利模式。另外,以符号“-”(横)给出的项目为基本上不重要的模式。
在图30中,关于指定为章划分位置的位置是否对应于记录起始位置或者记录停止位置,如果确定在记录和再现之间存在或者不存在章边界不匹配,评估当显示列表标记被分配给条目“PTSEPStart”所指示的每个位置或者每个GOP边界的位置时其中需要比显示帧更多的帧以在章后端和顶部读取/解码的间隔。另外,如果播放列表标记分配给每个GOP边界的位置,则评估其中将相同的装置用于记录、编辑和再现,并且可得到此装置的唯一信息的的实例(指图30中的“采用唯一信息的装置”),以及其中记录和编辑的装置与再现装置不同的实例(指“常规再现装置”)。
在图30中,值M表示当从一参考图像移动到另一参考图像时存在的图像数目,而值N表示一个GOP中的图像数目。如果将GOP设置为包括例如按照“I2B0B1P5B3B4P8B6B7P11B9B10P14B12B13”顺序的15帧图像,则M=3而N=15。
将描述其中指示在对应于记录起始或停止边界位置的位置进行章划分的实例。这样,如参考在记录和再现间不匹配的章位置的图27A和27B所描述,如果将播放列表标记分配给每个由条目“PTSEPStart”表示的位置,那么出现不匹配,如果将播放列表标记分配给每个GOP边界的位置,则不出现不匹配。
在解码间隔中,如已经关于解码起始位置参考图29A到29C所描述的,如果将播放列表标记分配给由条目“PTSEPStart”指示的每个位置,则比显示帧多的帧需要(M-1)帧。如果将播放列表标记分配给每个GOP边界位置,则记录起始位置通常处于封闭GOP中。因此,不论采用常规再现装置还是采用唯一信息的装置,显示帧间隔与解码间隔一致。而且,对解码结束位置,如果将播放列表分配给由条目“PTSEPStart”表示的每个位置,则比显示帧多的帧需要(N-M+1)帧。如果将播放列表标记分配给每个GOP边界位置,则不论装置是再现装置还是采用唯一信息的装置,显示帧间隔与解码间隔一致。
将描述其中指示在不是记录起始或停止边界位置的位置进行章划分的实例。这样,关于章边界不匹配是否出现在记录和再现之间的评估没有意义。因此,在图30中将相应的项目给出为“-”(横)。
如参考图29A到29C所述,在解码间隔中,如果将播放列表分配给解码起始位置条目PTSEPStart的每个位置,则比显示帧多的帧需要(M-1)帧。另一方面,如果播放列表标记分配给每个GOP边界位置,则比显示帧多的帧需要最近的过去的GOP,即对常规再现装置N帧,那么多。对于采用唯一信息的装置,如果确定播放列表标记处于其中的GOP为开放GOP,则比显示帧多的帧需要一个GOP,即N帧,那么多。对采用唯一信息的装置,如果可确定GOP为封闭GOP,则显示起始帧与解码起始帧一致。
另外,至于解码结束位置,如果将播放列表标记分配给由条目“PTSEPStart”指示的每个位置,则比显示帧多的帧需要(N-M+1)帧。如果将播放列表标记分配给每个GOP边界位置,则比显示帧多的帧需要紧邻的后面的GOP,即N帧,那么多。对于采用唯一信息的装置,显示结束帧于解码结束帧一致。
通过这种方式,如果在记录起始或者停止边界位置进行章划分,则将播放列表标记分配给每个GOP边界。如果在不同于记录起始或者停止边界位置的位置进行章划分,则将播放列表标记分配给由条目“PTSEPStart”指示的每个位置。这最大化用户的便利度。
图31是示出当进行章划分编辑时插入播放列表标记示例性方法的流程图。如果例如在根据播放列表再现片段时指令进行章划分,那么在步骤S60确定是否可以将对应于当前再现位置的GOP确定为封闭GOP。例如可以从解码视频流的解码器获得关于当前再现位置的信息。
如果在步骤S60确定不能将GOP确定为封闭GOP,那么此处理移至步骤S61,在这里可将条目“PTSEPStart”的值用作分配播放列表标记的当前时间。如果在步骤S60确定将GOP确定为封闭GOP,那么此处理移至步骤S63,在这里可以将GOP边界的值用作分配播放列表标记的当前时间。
在步骤S61或S63之后,此处理到达步骤S62,在这里分配播放列表标记的处理基于在步骤S61或S63确定的当前位置。即,在步骤S62,根据步骤S61或S63的结果决定在上述图24中的步骤S54中所描述的块“blkPlayListMark()”中的字段“MarkTimeStamp”的值。
例如可从解码视频流的解码器获得GOP边界的位置。可选地,可基于条目“PTSEPStart”的值计算GOP边界位置。在此方案中,将根据GOP结构从由条目“PTSEPStart”所指示的位置返回的位置设置为GOP的顶部位置。
可以得到被配置为根据用户记录起始操作自动将播放列表标记分配给每个记录起始位置的记录装置。通过如此配置记录装置,无论何时记录开始或者停止都可进行章跳转而不必进行片段划分编辑处理。
图32是示出无论何时记录开始时在记录开始位置自动分配播放列表标记的示例性处理的流程图。如果用户例如在记录装置上进行记录起始操作,则片段记录开始,并且同时,决定使用GOP边界值作为分配播放列表标记的当前时间。在步骤S71,基于步骤S70的结果进行用于分配播放列表标记的处理。即,在步骤S71,将与在记录开始之后首次产生的GOP顶部对应的再现时间设置为块“blkPlayListMark()”中的字段“MarkTimeStamp”的值,并且分配播放列表标记。
对于相对于播放列表的第一记录片段,例如,与记录开始位置即在记录开始之后首次产生的GOP的顶部对应的时间是通过向值“0”添加预定偏移而获得的值。对于另外描述当记录再次开始或者停止时产生片段的规范,该时间是例如通过向已经记录的片断添加预定偏移而获得的值。预定偏移例如是与从向解码器提供流开始到显示在GOP的顶部的帧时所需要的时间对应的值,该值是根据装置等的规范而唯一的。
此处理是适于下面实例的合适方法。如果可能对一个片段进行多个记录起始或停止操作,则仅由播放列表标记提供与每个记录起始或停止操作对应的章边界,同时采用仅仅一个片段AV信息文件、一个片段信息文件、和与片段信息文件对应的一个播放项目。
可以为可分配给一个播放列表文件的播放列表标记的数目设置上限。通过设置播放列表标记数目的上限,可防止每个播放列表文件容量的无限增长。而且,如果将显示章的数目限制为例如编辑装置或再现装置中的三位数字,则可以为播放列表标记数目设置上限。参照图31和32描述的每个处理在确定当前要设置的播放列表标记的数目是否超出在此播放列表中可设置的播放列表标记数目的上限以及确定播放列表标记数目不超过上限之后被执行。
将描述适用于本发明实施例的记录/再现装置。在描述记录/再现装置之前,先概述虚拟的播放器。如果在播放器中安装具有上述数据结构的盘,则播放器通常需要将从盘读取的、在电影对象等等中描述的命令转换为用于控制播放器中的硬件的唯一命令。播放器在其中将用于这种转换的软件预先存储在嵌入播放器的ROM(只读存储器)中。因为此软件使得播放器可根据经由盘和播放器的格式运行,所以将软件看作“虚拟的播放器”。
图33A和33B示意性示出虚拟播放器所进行的操作。图33A示出在盘安装期间操作的示例。当将盘安装在播放器中并且在步骤S30对盘进行初始访问时,在步骤S31初始化在其中存储一张盘共享的公共参数的寄存器。在步骤S32,从盘读取并执行每个电影对象中所描述的程序。初始访问意味着首次例如在安装盘时再现盘中存储的数据。
图33B示出如果在播放器停止的状态用户按下例如指令再现的播放键的处理的示例。当播放器处于首次停止的状态(步骤S40)时,用户采用例如远程控制命令(UO:用户操作)指令播放器进行再现。响应于再现命令,寄存器即在步骤S41初始化的公共参数,并且在步骤S42播放器变为执行电影对象的阶段(“电影对象执行阶段”)。
将参考附图34描述电影对象执行阶段的播放列表的再现。将通过举例描述其中由UO等等指令开始再现标题编号为#1内容的实例。播放器响应于开始再现内容的命令参考图3中所示出的索引表,并获得对应于标题#1内容的再现的对象的编号。如果用于实现标题#1内容的再现的电影对象的编号例如是#1,则播放器开始执行移动对象#1。
在图34所示出的实例中,在电影对象#1中在两行上描述此程序。如果第一行上的命令为“Play PlayList(1)”,则播放器开始再现播放列表#1。播放列表#1包括一个或多个播放项目,从而顺序再现播放项目。当完成包括在播放列表#1中的播放项目的再现时,此处理返回到电影对象#1的执行并且执行第二行上的命令。在图34的实例中,第二行上的命令为“JumpMenuTitle”,并且执行此命令,由此开始执行用于实现索引表所描述的菜单标题的电影对象。
图35是本发明一个实施例的记录/再现装置示例性配置的示意图。图35所示出的记录/再现装置可用作用于记录从装置外部输入的视频数据和音频数据于记录介质中,以及用于再现记录在记录介质中的视频数据和音频数据的单记录/再现装置,或者用作与包括光学系统、成像设备等等的照相机块组合而记录基于拾取的成像信号的视频数据的摄像机装置中包括的记录块。
各种压缩编码及多路复用系统适用于记录/再现装置。例如H.264|AVC系统作为压缩编码系统适用于根据本发明的实施例的记录/再现装置。然而,压缩编码系统不限于基于MPEG2系统的H.264|AVC系统。可选择地,MPEG2基压缩编码系统例如适用于记录/再现装置。将假定根据H.264|AVC系统压缩编码视频数据和根据MPEG2系统复用视频数据及音频数据而描述记录/再现装置。
控制单元30例如包括CPU(中央处理单元)、RAM(随机访问存储器)、ROM(只读存储器)等等(未示出)。控制单元30通过将RAM用作工作存储器而控制记录/再现装置10的相应组成元件。图35中没有示出将控制单元10连接到记录录/再现装置10相应组成元件的路径以防复杂。
在UI(用户接口)单元31中的预定部分提供用于使用户操纵由记录/再现装置10执行的操作的操作机构(operator),并且UI单元31响应于用户对操作机构的操作输出控制信号。控制信号被提供至控制单元30。控制单元30基于从UI单元31提供的控制信号通过由程序进行的处理而控制记录/再现装置10的相应组成元件执行的操作。另外,UI单元31包括简易显示单元以能够基于自将在下文描述的管理信息处理器16提供的信息而显示预定状态,例如记录/再现装置的记录或再现状态。
例如,响应于UI单元31进行的操作,控制单元30控制记录/再现装置以执行开始和停止在记录介质32中记录数据的操作和执行从记录介质32再现数据的再现操作。另外,在编辑操作期间,根据UI单元31上的操作,从记录介质32再现数据并位置处执行章划分处理。
视频编码器11包括其中可存储多帧视频数据的缓冲存储器,在缓冲存储器中累积所提供的基带数字视频数据,并以预定系统压缩编码数字视频数据。在其中视频编码器11根据H.264|AVC系统压缩编码数字视频的实例中,视频编码器11基于例如DCT(离散余弦变换)和屏内(in-screen)预测而对数字视频数据执行帧内压缩。另外,视频编码器11采用运动向量执行帧间编码以及对数字视频数据的熵编码,由此提高压缩效率。经视频编码器11压缩编码的数字视频数据被输出为H.264|AVC基本流(ES)。
视频解码器20包括其中可存储多帧视频数据的缓冲存储器,在缓冲存储器中累积提供的压缩视频数据,根据对应于压缩编码系统的解码系统解码压缩的视频数据,并输出解码的视频数据作为基带数字视频数据。在其中视频编码器11根据H.264|AVC系统压缩编码数字视频的示例中,视频解码器20对应于视频编码器11,根据H.264|AVC系统,解码压缩的视频数据。视频解码器20可以基于由下文描述的复用器/解复用器13(下面,“MUX/DEMUX”)提取的并由DTS(解码时间戳)和PTS(显示时间戳)表示的时间而解码压缩的视频数据,并输出解码视频数据。作为由视频解码器20进行的解码处理的结果所获得的基带数字视频数据从端子42输出。
音频编码器12根据预定压缩编码系统例如Dolby Digital(注册商标)系统压缩编码从端子41提供的基带数字音频数据。然而,用于音频数据的压缩编码系统不限于Dolby Digital(注册商标)系统。可选择地,可以依原样使用基带数据,而不压缩编码音频数据。
音频解码器21根据对应于压缩编码系统的解码系统解码所提供的压缩音频数据,并输出解码的音频数据作为基带数字音频数据。在其中音频编码器12根据Dolby Digital(注册商标)系统压缩编码音频数据的示例中,音频解码器21对应于音频编码器12,根据符合Dolby Digital(注册商标)系统的解码系统,解码压缩的音频数据。音频解码器21与从视频解码器20输出的视频数据同步地从端子43输出解码的音频数据。
MUX/DEMUX13包括复用器功能和解复用器功能。即MUX/DEMUX13用作复用器,其按照预定复用系统相互复用根据相应压缩编码系统的提供的数字视频数据和提供的数字音频数据,并输出一个数字流。此外,MUX/DEMUX13用作解复用器,其把其中按照预定复用系统相互复用数字视频数据和数字音频数据的数据流解复用成数字视频数据和数字音频数据,并提取数字视频数据和数字音频数据。
在根据MPEG2系统进行复用的实例中,MUX/DEMUX13作为复用器功能,使用MPEG2传输流以时分方式复用所提供的压缩的视频时间和所提供的压缩的音频数据。例如,MUX/DEMUX13具有缓冲存储器,并将提供的压缩的视频数据和音频数据临时存储在缓冲器中。将存储在缓冲存储器中的压缩的视频数据划分为包,每个包都具有预定尺寸,且被添加了头部,并且被提供为PES(包化(packetized)的基本流)包。同样,将存储在缓冲存储器中的压缩的音频数据划分为包,每个包都具有预定尺寸,且被添加了头部,并且被提供作为PES(包化(packetized)的基本流)包。每个头部在其中存储MPEG2系统中指定的预定信息,例如表示存储在每个包中的数据的再现时间的PTS和表示其解码时间的DTS(解码时间戳)。PES包被进一步划分,并且每个包被打包成传输包(TS包)的有效负载中。TS包的头部在其中存储用于识别被打包到有效负载中的数据的类型等的PID(包标识)。
作为解复用器功能,MUX/DEMUX执行与复用器功能相反的处理,并从相应的包提取压缩的视频数据和压缩的音频数据。例如,MUX/DEMUX从每个所提供的TS包的头部检测PID,并根据存储在其有效负载中的数据的类型对TS包分类。另外,MUX/DEMUX提取存储在每个分类的TS包的有效负载中的数据,并重建PES包。而且,MUX/DEMUX提取存储在PES包中的压缩的视频数据和压缩的音频数据,基于存储在相应PES头部中的信息将头部信息等等加到提取的视频和音频数据,并输出视频和音频数据的每个作为基本流。
流缓冲器14在其中临时存储从MUX/DEMUX13(记录时)或者从记录/再现控制器15(再现时)提供的TS包。通过以预定方式控制从和向流缓冲器14读取和写入TS包的定时,访问记录介质32的访问速率与音频和视频编码器或者解码器的信号处理速率匹配。
记录/再现控制器15控制记录介质32中数据的记录以及从记录介质32再现数据。即记录/再现控制器15响应于来自较高层单元例如控制单元30的命令在指定地址上向和从记录介质32写入和读取数据。
作为记录介质32,例如可采用可记录DVD(数字通用光盘)。然而,记录介质32不限于可记录DVD,而是硬盘驱动器或者半导体存储器可用作记录介质32。而且,大容量Blu-ray Disc(注册商标)可用作记录介质32。
管理信息处理器16配置为包括例如CPU、用作工作存储器的RAM、以及在其中存储预定程序的数据的ROM(未示出)。然而,管理信息处理器16的配置不限于此配置。例如可通过控制单元30执行的程序处理实现管理信息处理器16的功能。这样,将控制单元30中包括的RAM用作非易失性存储器17,并且将非易失性存储器18连到控制单元30。
管理信息控制器16例如将非易失性存储器17用作工作存储器,并执行与上述的索引文件“index.bdmv”、电影对象文件“MovieObject.bdmv”、播放列表文件“xxxxx.mpls”和片段信息文件“zzzzz.clpi”相关的处理。管理信息处理器16在控制单元30的控制下执行例如根据本发明实施例的另外插入播放列表标记的处理。
将描述上述配置的记录/再现装置10执行的记录操作。假定根据符合H.264|AV的系统压缩编码视频数据,以及根据AAC系统压缩编码音频数据。
从端子40将基带数字视频数据输入至记录/再现装置10,并提供给视频编码器11。当用户开始UI单元31上的记录起始操作时,例如,视频编码器11开始压缩编码所提供的数字视频数据。视频编码器11根据H.264|AVC压缩编码基带数字视频数据,并输出压缩编码的数字视频数据作为基本流(ES)。将基本流提供至MUX/DEMUX13。
从端子41将基带数字视频数据输入至记录/再现装置10,并提供给音频编码器12。音频编码器12当用户在UI单元13上开始记录操作时开始压缩编码所提供的数字音频数据。音频编码器12所压缩编码的数字音频数据被提供至MUX/DEMUX13。
MUX/DEMUX13根据预定的复用系统相互复用以相应压缩编码系统压缩编码的数字视频数据和数字音频数据,并输出经复用的数据作为一个数据流。MUX/DEMUX13包括缓冲存储器,并将输送的压缩视频和音频数据临时存储在缓冲存储器中。
存储在缓冲存储器中的压缩的视频数据被划分每个都为预定结构的包,并且将头部加到相应的包,由此提供PES(包化的基本流)包。同样,存储在缓冲存储器中的压缩的音频数据划分每个都为预定大小的包,并且将头部加到相应的包,由此提供PES包。每个头部在其中存储在MPEG2系统中指定的预定信息,例如表示存储在每个包中的数据的再现时间的PTS和表示其解码时间的DTS(解码时间戳)。进一步划分PES包,并且将每个包打包到TS包的有效负载中。TS包的头部在其中存储用于识别打包进有效负载中数据的类型等的PID(包标识)。将从作为复用器的MUX/DEMUX13输出的TS包临时累积在流缓冲器14中。
MUX/DEMUX13实际上将预定尺寸的预定头部加至每个TS包上,然后输出加了头部的TS包。将通过向每个TS包添加预定头部所获得的包称作“源包”。
记录/再现控制器15监控在流缓冲器14中累积的数据的数量。如果数量等于或大于预定量的数据被累积在流缓冲器14中,那么记录/再现控制器15从流缓冲器14读取每个为记录介质32的记录单元的数据并将所读取数据写入记录介质32中。
管理信息控制器16基于所记录的数据,将非易失性存储器17用作工作存储器,产生将存储在索引文件“index.bdmv”、电影对象文件“MovieObject.bdmv”、播放列表文件“xxxxx.mpls”和片段信息文件“zzzzz.clpi”中的信息。所产生的信息在预定定时被写入记录介质32中。
举例来说,管理信息处理器16从MUX/DEMUX13获得关于记录数据的时间信息,并从记录/再现控制器15获得记录介质32中记录数据的地址信息,并基于获得的时间信息和地址信息产生条目“PTSEPStart”。另外,管理信息处理器16基于响应于UI单元31上的用户记录起始或者停止操作从控制单元30输出的控制信号以及来自MUX/DEMUX13和记录/再现控制器15的关于记录数据的信息,而进行播放列表文件“xxxxx.mpls”的生成或者更新、片段信息文件“zzzzz.clpi”的生成等等。
如果记录/再现装置被配置为当记录开始时将播放列表标记分配给每个记录起始位置,则管理信息处理器16创建具有与响应于UI单元31上用户记录起始操作所创建的顶部帧对应的再现时间的播放列表标记作为字段“MarkTimeStamp”的值,并将所创建的播放列表标记加到播放列表。
将描述记录/再现装置10进行的再现操作。当记录介质32安装到例如记录/再现装置上时,从记录介质32读取索引文件“index.bdmv”和电影对象文件“MovieObject.bdmv”,并将其传送到管理信息处理器16。管理信息处理器16将所接收的信息存储在非易失性存储器17中。控制单元30从管理信息处理器16获取存储在非易失性存储器17中的信息,并基于所获取的信息,控制在UI单元31中包括的显示单元上显示记录在记录介质32中的片段信息。用户基于显示的信息在UI单元31上执行预定操作,由此用户能够指令再现所记录在记录介质32中的片段。简单起见,假定再现从每个片段的顶部开始。
控制单元30响应于UI单元31上的用户操作从管理信息处理器16获取关于播放列表文件的信息。另外,控制单元30基于播放列表文件,指令记录/再现控制器15从记录介质32读取由存储在每个播放列表文件中的每个播放项目参考的片断信息文件和对应于该片段信息文件的片段AV流文件。记录/再现控制器15响应于来自控制单元30的命令从记录介质32读取片段信息文件和片段AV流文件。从记录介质32读取每个TS包的片段AV流文件并经由记录/再现控制器15将其累积在流缓冲器14中。
从记录介质32读取的TS包实际上是通过向每个初始TS包添加预定尺寸的头部所获得的源包。
MUX/DEMUX13监控在流缓冲器14中累积的数据的数量。如果数量等于或大于预定量的数据被累加在流缓冲器14中,那么MUX/DEMUX13从流缓冲器14读取为视频解码器20解码所需要的数量那么多的数据作为TS包。将读取的TS包提供到MUX/DEMUX13并将其临时存储在MUX/DEMUX13的缓冲存储器中。MUX/DEMUX13基于其PID根据数据类型分类TS包,并且从存储在相应TS包的有效负载中的数据重建PES包。另外,MUX/DEMUX13从PES包的有效负载提取数据,并基于关于PES头部的信息,将包括指定解码时间和再现时间例如DTS和PTS的信息的预定头部信息等等加到数据中,并且分别生成压缩编码的视频数据和压缩编码的音频数据的基本流(ES)(下文,称“视频数据ES”和“音频数据ES”)。
MUX/DEMUX13将视频数据ES,即压缩编码的视频数据的基本流提供至视频解码器20。视频解码器20在缓冲存储器中累积压缩编码的视频数据。当对应于预定图像的数据被累加在缓冲存储器中时,视频解码器20开始解码累加在缓冲存储器中的数据。视频解码器20基于例如从未示出的系统时钟输送的STC(系统时间时钟),在根据PTS的帧定时处顺序地输出解码的视频数据。
另一方面,MUX/DEMUX13提供音频数据ES即压缩的音频数据至音频解码器21,并且音频解码器21对压缩的音频数据执行预定的解码处理。音频解码器21与从视频解码器20输出的视频数据同步地输出解码的音频数据。
记录/再现装置可以对记录在记录介质32中的片段进行章划分和编辑。在从记录介质32再现片段时在UI单元31上进行预定操作,由此指定进行章划分的每个位置。作为指定章划分的位置的方法,可采用在按照常规方式例如在正向以1x的再现速度再现片段时在期望位置进行片段划分操作的方法、通过采用速度变化再现例如快再现、慢再现或者一帧接一帧的再现而搜索每帧的划分位置执行章划分操作的方法,等等。
当指定划分位置时,根据已经参考图24描述的处理确定与指定的划分位置对应的当前再现位置和播放列表中另一个播放列表标记之间的位置关系。另外,根据已经参考图31所描述的处理,确定是将条目“PTSEPSstart”的值还是GOP边界的值用作分配播放列表标记的当前时间。
如果将条目“PTSEPSstart”的值用作用于分配播放列表标记的当前时间并且对每帧随意指定划分位置,则指定的划分位置不一定是条目“PTSEPSstart”所指示的帧中的位置。在这种情况下,与指定的位置最近的条目“PTSEPSstart”的值可用作对应于指定的划分位置之前或之后的条目“PTSEPSstart”的值。另外,可将距离指定的划分位置的最近的过去或者未来的条目“PTSEPSstart”的值用作对应于指定的划分位置的条目“PTSEPSstart”的值。
如果可确定对应当前再现位置的GOP是封闭GOP,则可以从例如MUX/DEMUX13获取用于再现封闭GOP的顶部帧的再现时间。但是,获取再现时间的方法不限于上述方法。可以将条目“PTSEPSstart”的值设置为参考点,基于在视频解码器20的缓冲存储器中累积的数据和STC,计算用于再现封闭GOP的顶部帧的再现时间。
图36是示出基于上述分配的播放列表标记执行章跳转处理的示例性方法的流程图。举例来说,当要再现对其分配了播放列表标记并且经过了章划分和编辑的播放列表时,用户在例如UI单元31上进行操作以进行章跳转。控制单元30在步骤S80响应于该操作获取对应当前再现位置的时间信息。例如,控制单元30与MUX/DEMUX13通信。由此控制单元30能够基于包括在由MUX/DEMUX13解复用的视频数据ES中的PTS和MUX/DEMUX13的STC,获取关于用于再现正由视频解码器20解码的帧中任一个的再现时间的信息。
获得对应于当前再现位置的时间信息的方法不限于上述方法。可替代地,可采用下述方法,该方法在再现期间典型地使用关于片段信息文件中块“blkEPMap()”(参见图18)的信息基于条目“PTSEPSstart”来进行地址转换。在再现期间,有必要读取下一个GOP上的数据。如果采用该替代方法,则容易获得下一个GOP上的数据。另外,通过在典型地更新当前再现位置和播放列表标记位置之间的关系时再现播放列表,关于当前再现的章的信息可有利地显示在UI单元31的显示单元屏上。
在获得对应于当前再现位置的时间信息之后,控制单元30在步骤S81从当前再现的播放列表中的块“blkPlayListMark()”中搜索在再现方向上与该时间信息指示的时间最近的播放列表标记。
如果存在最近的播放列表标记(在步骤82为“是”),则此处理到达步骤S83。在步骤S83,控制单元30基于该播放列表标记搜索与在步骤S81搜索的播放列表标记对应的条目“PTSEPSstart”。
根据本发明的实施例,将每个播放列表标记分配给每个条目“PTSEPSstart”的位置或者每个GOP边界位置。因此,如果存在与指示播放列表标记的再现时间的值“MarkTimeStamp”一致的条目“PTSEPSstart”,则与播放列表标记对应的条目“PTSEPSstart”是与值“MarkTimeStamp”一致的条目“PTSEPSstart”。另一方面,如果不存在与指示播放列表标记的再现时间的值“MarkTimeStamp”一致的条目“PTSEPSstart”,则将播放列表标记分配给GOP边界位置,并且认识到此GOP为封闭GOP,那么与播放列表标记对应的条目“PTSEPSstart”是当再现时间在再现方向上从“MarkTimeStamp”推进时出现的第一条目“PTSEPSstart”。而且,如果不存在与指示播放列表标记再现时间的值“MarkTimeStamp”一致的条目“PTSEPSstart”,并且不将播放列表标记分配给GOP边界位置或者不认为此GOP为封闭GOP,那么与播放列表标记对应的条目“PTSEPSstart”是当再现时间在再现方向相反的方向上推进时出现的下一个条目“PTSEPSstart”。
在步骤S84,控制单元30基于与当前再现的播放项目对应的片段信息文件中的块“blkEPMap()”(参见图18到21),获取与在步骤S83搜索的条目“PTSEPSstart”对应的地址信息。控制单元30控制记录/再现控制器15从记录介质32读取在由该地址信息指示的地址上的数据。
将从记录介质32读取的数据从记录/再现控制器15经由流缓冲器14提供到MUX/DEMUX13,并且MUX/DEMUX13解复用曾根据数据类型使用包时间划分复用的流。在解复用的数据中,将视频数据ES即压缩的视频数据的基本流提供到视频解码器20。在步骤S85视频解码器20开始解码所提供的压缩的视频数据的基本流。当可以输出由播放列表标记指示的帧时,此帧在步骤S86开始显示此帧。
此时,如果将播放列表标记分配给由条目“PTSEPSstart”指示的位置,则控制在GOP中与条目“PTSEPSstart”对应的图像前面的图像被进行解码但不显示。如果将播放列表标记分配给GOP边界位置,那么在GOP的顶部位置开始图像的显示。
可能发送章跳转到在时间上晚于上次再现时分配的播放列表标记的位置的命令。这意味着在当前再现的播放列表中不存在在再现方向上与当前再现位置最接近的播放列表标记。在这种情况下,忽略章跳转命令。但是,跳转目标不限于此。如图36的步骤S87中所示例性示出,跳转目标可以是播放列表的结尾。
将描述本发明的另一个实施例。在参考图35所描述的实施例中,已经描述了单个记录/再现装置。在另一个实施例中,将描述包括成像系统和使来自对象的光入射到成像设备的光学系统、以及基于由成像设备拾取的成像信号在记录介质中记录视频数据的摄像机(video camera)装置。
图37示出根据本发明另一个实施例的摄像机装置100的示例性配置。在摄像机100中,参考图35所描述的记录装置的配置几乎可适用于记录系统的配置。因此,在图37中,和图35中所示的组成元件相同的组成元件以相同的附图标记表示,并将不在这里详细描述。
在图37所示的配置中,照相机部分50包括光学系统51、成像设备52、成像信号处理器53、照相机控制器54、视频信号处理器58、和显示单元55作为与视频信号相关的组成元件。照相机部分50还包括麦克风(MIC)56、音频信号处理器57、和扬声器单元SP60作为与音频信号相关的组成元件。控制单元30与照相机部分50的各个组成元件交换各种控制信号和信息,并控制由照相机部分50进行的操作。另外,控制单元50基于根据用户操作从UI单元31提供的控制信号控制照相机部分50进行的操作。
如果装置被配置为视频照相机装置100,则通常控制记录起始操作和记录停止操作,从而无论用户何时采用单个记录开关按下UI单元31上的单个记录开关,记录起始命令和记录停止命令是交替的。假定将盘记录介质例如Blu-ray Disc或者可记录DVD用作摄像机装置100中的记录介质20。
在照相机部分50,光学系统51包括镜头系统、光圈调整机构、调焦机构、缩放机构、和快门机构,用于将光从对象引至成像设备52。基于从控制单元30提供的控制信号,由照相机控制器54控制光圈调整机构、调焦机构、缩放机构、和快门机构进行的操作。
配置为包括例如CCD(电荷耦合设备)的成像设备52通过光电转换将经光学系统51射入的光转换为电信号、对电信号进行预定的信号处理、并输出结果的电信号作为成像信号。成像信号处理器53对从成像设备输出的成像信号进行预定的信号处理,并输出结果的成像信号作为基带数字视频数据。例如,成像信号处理器53采用CDS(相关双采样)电路从成像设备52输出的成像信号仅采样具有成像信息的信号,从采样信号消除噪声,并采用未示出的AGC(自动增益控制)电路调整采样信号的收益。另外,成像信号处理器53通过A/D转换将结果的信号转换为数字信号。
而且,成像信号处理器53将关于从成像设备52输出的成像信号的信息传送至控制单元30。控制单元30基于该信息产生控制光学系统51的控制信号,并且提供控制信号至照相机控制器54。照相机控制器54基于控制信号控制调焦机构、光圈调整机构等等。
视频信号处理器58对从成像信号处理器53提供的数字信号进行预定的信号处理。例如,视频信号处理器58对提供的数字信号进行检测相关的信号处理,并提取各个颜色R(红)、G(绿)、和B(蓝)的分量。信号处理器58基于提取的各个颜色的分量对数字信号进行例如γ校正和白平衡校正处理。最后,视频信号处理器58输出结果的信号作为一个基带数字视频信号。
显示单元55,例如将LCD(液晶显示器)用作显示元件,可以基于从视频信号处理器58提供的数字视频数据显示数据。显示单元55用作在拾取期间监控拾取的图像的监控器,并在再现期间显示再现图像。
音频信号处理器57通过A/D转换将从例如MIC56提供的模拟音频信号转换为数字音频信号,并对数字音频数据进行预定的音频信号处理例如消除噪声和声学质量校正,并输出数字音频数据作为基带数字音频数据。另外,音频信号处理器57对所提供的数字音频数据进行预定的音频信号处理例如音频质量校正和音量调整,通过D/A转换将数字音频信号转换为模拟音频信号,对模拟音频信号进行放大处理等等,并将结果的模拟音频信号输送至SP60。
在成像操作期间,通过光电转换将经由光学系统51入射到成像设备52的光转换为电信号,并且将电信号输出作为成像信号。成像信号受到成像信号处理器53的预定信号处理,通过A/D转换转换为数字信号,并作为数字视频信号输出。数字视频信号被提供至信号处理器58。视频信号处理器58对提供的数字视频数据进行预定的信号处理例如图像质量校正,输出结果的视频信号作为数字视频数据。将数字视频数据提供至记录/再现单元10并输入到端子40。
而且,视频信号处理器58基于从成像信号处理器53提供的数字信号产生要在显示单元55上显示的数字视频数据。另外,视频信号处理器58可以以预定方式与控制单元30通信并基于由控制单元30产生的显示控制信号生成图像。将视频信号处理器58产生的数字视频数据和图像提供至显示单元55并显示在显示单元55上。
同时,从MIC56输出的音频信号经受由音频信号处理器57进行的预定信号处理例如消除噪声、限制器(limiter)处理、音频质量校正、通过A/D转换转换为数字音频信号、并且作为数字音频数据输出。将数字音频数据提供至记录/再现单元10并输入到端子41。
当在记录停止状态下按下UI单元31上提供的记录开关时,将指令记录开始的控制信号从UI单元30提供至控制单元30。在控制单元30的控制下开始从照相机部分50输出的基带数字视频数据和数字音频数据在记录介质32中的记录。
即,如参考图35所述的,视频编码器11和音频编码器12在控制单元30的控制下开始操作。视频编码器11和音频编码器12分别压缩编码视频数据和音频数据。MUX/DEMUX13将结果的视频数据和音频数据包化,将其相互复用成AV流数据。将AV流数据经由流缓冲器14提供至记录控制器15并作为片段AV流文件记录在记录介质32中。
如果将摄像机装置100配置为当记录开始时自动将播放列表分配给记录起始位置,则根据如图32所描述的操作,播放列表标记被自动地分配给与记录起始位置对应的位置。实际上,存储在每个播放列表文件中的信息是例如由非易失性存储器17产生的。此时播放列表标记为非易失性存储器17中的信息。
当接下来按下在UI单元31上提供的记录开关时,记录停止,创建片段信息文件并且更新播放列表文件。管理信息处理器16基于来自MUX/DEMUX13和记录控制器15的信息创建与记录在记录介质32中的各个片段AV流文件对应的片段信息文件。另外,管理信息处理器16创建参考所创建的片段文件的播放项目。如果播放列表已经存在,那么将所创建的播放项目添加至播放列表,并将播放列表标记信息储存在播放列表中。
在再现期间,当将记录介质32安装在摄像机装置100中时,从记录介质32读取文件例如索引文件和电影对象文件,并将其提供到管理信息处理器16。控制单元30从管理信息处理器16获取关于索引文件的信息,并基于所获取的信息产生用于显示预定菜单屏幕的显示控制信号。将显示控制信号提供至视频信号处理器58并显示在显示单元55上。当用户根据菜单屏幕的显示在UI单元31上进行预定操作时,例如从记录介质32读取被指令再现的一个播放列表文件,并且根据播放列表文件的描述再现记录在记录介质32中的片段。
即,如参考图35所述的,控制单元30根据用户在UI单元31上的操作从管理信息处理器16获取关于播放列表文件的信息。另外,控制单元30基于所获得的信息向记录/再现控制器15传送命令以从记录介质32读取片段信息文件和片段AV流文件。
从记录介质32读取的片段AV流文件经由流缓冲器14被提供至MUX/DEMUX13、基于包头部信息等等被解复用、并被提取作为压缩的视频数据和压缩的音频数据。将压缩的视频数据提供至视频解码器20、由视频解码器20解码、并根据例如PTS从端子42提供。压缩的音频数据被提供至并由音频解码器21解码,并与从视频解码器20输出的视频数据同步地从端子43输出。
从端子42输出的视频数据受到视频信号处理器58进行的预定信号处理然后提供到显示单元55。显示单元55基于提供的视频数据显示图像。从端子43输出的音频数据受到音频信号处理器57进行的预定信号处理然后进行放大操作等等,并且提供到SP单元60。
摄像机装置100还可以进行片段划分和编辑。因为章划分和编辑处理与根据前面实施例的相同,因此为简单起见在这里不对其进行描述。同样,因为章跳转处理与根据前面实施例的相同,因此为简单起见在这里不对其进行描述。
在实施例中,已经描述了将图35中所示的记录/再现装置或者包括在图37所示出的摄像机装置100中的记录/再现单元10配置为硬件。但是,本发明的实施例不限于硬件配置。即,记录/再现单元10可配置为软件。在这种情况下,将软件预先存储在例如未示出的包括在控制单元30中的ROM中。可替代地,可以在计算机装置例如个人电脑中配置记录/再现单元10。在此替代中,在将其记录在记录介质例如CD-ROM或者DVD-ROM中时,提供使计算机装置执行记录/再现单元10的软件。如果计算机装置可连至网络,则可由网络例如因特网提供软件。
而且,在实施例中,已经描述了在记录介质中记录内容数据等等的记录装置或者记录/再现装置。但是,本发明实施例的应用范围不限于该记录装置和记录/再现装置。例如,不包括在记录介质中记录内容的记录单元、和从再现记录介质中内容数据的再现单元的装置,例如编辑内容数据和关于内容的再现控制信息(索引文件、电影对象文件、播放列表、片段信息文件等等)的编辑装置也适用于本发明的实施例。在这种情况下,例如连至编辑装置的记录/再现装置可以从和向记录介质读取数据和向其写入数据。
本领域技术人员应当理解可根据设计要求和其它因素进行各种修改、组合、次组合和变更,只要其属于附加权利要求或其等价物的范围。相关申请的交叉引用
本发明包含有关于2006年5月19日在日本专利局提及的、日本专利申请第JP2006-140839号的主题内容,在此结合此申请的整个内容作为参考。

Claims (20)

1.一种用于压缩编码视频数据并记录该压缩编码的视频数据的记录装置,包括:
编码器,对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩来压缩编码视频数据,多个图像包括至少一个独立可解码的图像;
标记信息产生器,产生指示关于所述多组的每个的、对于所述视频数据的访问位置的标记信息;以及
记录单元,在记录介质中记录由该编码器压缩编码的视频数据,
其中,当对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,该标记信息产生器产生指示该可解码组的顶部的位置的标记信息。
2.如权利要求1所述的记录装置,
其中,所述标记信息产生器自动产生指示在记录开始时所产生的多组中的每组的顶部的标记信息。
3.如权利要求1所述的记录装置,
其中,当对于使用在再现顺序上紧邻后面的组的信息而进行解码的该多组中的一组指定所述访问位置时,所述标记信息产生器产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
4.如权利要求1所述的记录装置,还包括确定单元,其确定包括待指定的访问位置的该多组中的一组是否在不使用关于在再现顺序上紧邻后面的组的信息的情况下可解码,
其中,所述标记信息产生器根据所述确定单元的确定结果,而确定是产生指示所述组的顶部的位置的标记信息还是产生指示属于所述组的独立可解码图像的位置的标记信息。
5.如权利要求1所述的记录装置,还包括再现控制信息产生器,其产生指示再现视频数据的方法的再现控制信息,
其中,所述标记信息被存储在所述再现控制信息中。
6.一种用于压缩编码视频数据和记录压缩编码视频数据的记录方法,此方法包括下面的步骤:
对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩来压缩编码视频数据,多个图像包括至少一个独立可解码的图像;
产生指示对该多组的每个的、对于所述视频数据的访问位置的标记信息;
以及在记录介质中记录在压缩编码视频数据的步骤所压缩编码的视频数据,
其中,当对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息。
7.一种使计算机装置执行用于压缩编码视频数据和记录该压缩编码的视频数据的记录方法的记录程序,
其中该记录方法包括下面的步骤:
对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩来压缩编码视频数据,多个图像包括至少一个独立可解码的图像;
产生指示对该多组的每个的、对于所述视频数据的访问位置的标记信息;
以及在记录介质中记录在压缩编码视频数据的步骤所压缩编码的视频数据,
其中,当对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息。
8.一种用于压缩编码视频数据、在记录介质中记录该压缩编码的视频数据、以及再现和解码记录在该记录介质中的压缩编码的视频数据的记录/再现装置,包括:
编码器,对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩来压缩编码视频数据,多个图像包括至少一个独立可解码的图像;
记录单元,在记录介质中记录由该编码器压缩编码的视频数据;
再现单元,从该记录介质读取和解码该压缩解码的视频数据;以及
标记信息产生器,产生指示对该多组的每组的、对于所述视频数据的访问位置的标记信息,
其中,当对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,该标记信息产生器产生指示该可解码组的顶部的位置的标记信息。
9.如权利要求8所述的记录/再现装置,其中所述标记信息产生器自动产生指示在记录开始时所产生的多组中的每组的顶部的位置的标记信息。
10.如权利要求8所述的记录/再现装置,其中,对于使用在再现顺序上最近的过去的组的信息而进行解码的该多组中的一组指定所述访问位置时,所述标记信息产生器产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
11.如权利要求8所述的记录/再现装置,还包括操作单元,其接收用户的操作并根据用户的操作指定访问位置,
其中,当由用户操作所述操作单元所指定的访问位置指示与记录起始位置不同的位置时,标记信息产生器产生指示属于包括该访问位置的多组中的一组的至少一个独立可解码的图像的位置的标记信息。
12.如权利要求8所述的记录/再现装置,还包括确定单元,其确定包括待指定的访问位置的该多组中的一组是否在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码,
其中所述标记信息产生器根据所述确定单元的确定结果,而确定是产生指示所述组的顶部的位置的标记信息还是产生指示属于所述组的独立可解码图像的位置的标记信息。
13.如权利要求8所述的记录/再现装置,还包括再现控制信息产生器,其产生指示再现视频数据的方法的再现控制信息,
其中所述标记信息被存储在所述再现控制信息中。
14.一种用于压缩编码视频数据、在记录介质中记录该压缩编码的视频数据、以及再现和解码记录在该记录介质中的压缩编码的视频数据的记录/再现方法,包括下面的步骤:
对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩来压缩编码视频数据,多个图像包括至少一个独立可解码的图像;
在记录介质中记录在该压缩编码视频数据的步骤中压缩编码的视频数据;
从记录介质读取和解码该压缩解码的视频数据;以及
产生指示对该多组的每个的、对于所述视频数据的访问位置的标记信息,
其中,当对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息。
15.一种使计算机装置执行记录/再现方法的记录/再现程序,该记录/再现方法用于压缩编码视频数据、在记录介质中记录该压缩编码的视频数据、并且再现和解码记录在该记录介质中的压缩编码的数据,
其中该记录/再现方法包括下面的步骤:
对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩来压缩编码视频数据,多个图像包括至少一个独立可解码的图像;
在记录介质中记录在压缩编码视频数据的步骤压缩编码的视频数据;
从记录介质读取和解码该压缩编码的视频数据;以及
产生指示对该多组的每个的、对于所述视频数据的访问位置的标记信息,
其中,当对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,在产生标记信息的步骤产生至该可解码组的顶部的位置的标记信息。
16.一种产生用于指定视频数据的访问位置的标记信息的编辑装置,包括:
解码器,解码视频数据,该视频数据是对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩而压缩编码的,多个图像包括至少一个独立可解码的图像;
标记信息产生器,产生指示对该多组的每个的、对于所述视频数据的访问位置的标记信息;以及
操作单元,接受用户操作并根据用户操作指定访问位置,
其中,当响应于在该操作单元上的操作,对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,该标记信息产生器产生指示该可解码组的顶部的位置的标记信息,并且
其中,当响应于在该操作单元上的操作,对于使用关于在再现顺序上最近的过去的组的信息解码的该多组中的一组指定访问位置时,标记信息产生器产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
17.如权利要求16所述的编辑装置,还包括确定单元,其确定包括待指定的访问位置的该多组中的一组是否在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码,
其中,所述标记信息产生器根据所述确定单元的确定结果确定是产生指示所述组的顶部的位置的标记信息还是产生指示属于所述组的独立可解码图像的位置的标记信息。
18.如权利要求16所述的编辑装置,还包括再现控制信息产生器,其产生指示再现视频数据的方法的再现控制信息,
其中所述标记信息被存储在所述再现控制信息中。
19.一种用于产生用于指定视频数据的访问位置的标记信息的编辑方法,该方法包括下面的步骤:
解码视频数据,该视频数据是对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩而压缩编码的,多个图像包括至少一个独立可解码的图像;
产生指示对该多组的每组的、对于所述视频数据的访问位置的标记信息;以及
接受用户操作并根据用户操作指定访问位置,
其中,当响应于在接受操作的步骤的用户操作,对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息,并且
其中,当响应于在接受操作的步骤的操作,对于使用关于在再现顺序上最近的过去的组的信息解码的该多组中的一组指定所述访问位置时,在产生标记信息的步骤产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
20.一种使计算机装置执行编辑方法的编辑程序,该编辑方法用于产生用于指定视频数据的访问位置的标记信息,
其中该编辑方法包括下面的步骤:
解码视频数据,该视频数据是对于每个均包括多个图像的多组的每个,使用基于预测编码的帧间压缩而压缩编码的,多个图像包括至少一个独立可解码的图像;
产生指示对该多组的每组的、对于所述视频数据的访问位置的标记信息;以及
接受用户操作并根据用户操作指定访问位置,
其中,当响应于在接受用户操作的步骤的操作,对于在不使用关于在再现顺序上最近的过去的组的信息的情况下可解码的该多组中的一组指定所述访问位置时,在产生标记信息的步骤产生指示该可解码组的顶部的位置的标记信息,并且
其中,当响应于在接受操作的步骤的操作,对于使用关于在再现顺序上最近的过去的组的信息解码的该多组中的一组指定所述访问位置时,在产生标记信息的步骤产生指示属于该多组的每组的独立可解码图像的位置的标记信息。
CN2007101041530A 2006-05-19 2007-05-21 记录/再现/编辑装置、方法 Expired - Fee Related CN101075462B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP140839/06 2006-05-19
JP2006140839A JP4715633B2 (ja) 2006-05-19 2006-05-19 記録装置、記録方法および記録プログラム、ならびに、編集装置、編集方法および編集プログラム

Publications (2)

Publication Number Publication Date
CN101075462A true CN101075462A (zh) 2007-11-21
CN101075462B CN101075462B (zh) 2010-09-29

Family

ID=38474252

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101041530A Expired - Fee Related CN101075462B (zh) 2006-05-19 2007-05-21 记录/再现/编辑装置、方法

Country Status (6)

Country Link
US (1) US8229281B2 (zh)
EP (1) EP1858020B1 (zh)
JP (1) JP4715633B2 (zh)
KR (1) KR101364206B1 (zh)
CN (1) CN101075462B (zh)
TW (1) TWI365447B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102047672A (zh) * 2009-04-08 2011-05-04 索尼公司 记录设备、记录方法、回放设备、回放方法、程序和记录介质
WO2014047943A1 (zh) * 2012-09-29 2014-04-03 华为技术有限公司 视频编码及解码方法、装置及系统

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7480512B2 (en) 2004-01-16 2009-01-20 Bones In Motion, Inc. Wireless device, program products and methods of using a wireless device to deliver services
JP4972933B2 (ja) * 2005-12-28 2012-07-11 ソニー株式会社 データ構造、記録装置、記録方法、記録プログラム、再生装置、再生方法および再生プログラム
JP4656021B2 (ja) * 2006-08-10 2011-03-23 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
JP4779921B2 (ja) * 2006-10-05 2011-09-28 ソニー株式会社 データ処理装置及びデータ処理方法、並びにコンピュータ・プログラム
JP2008311871A (ja) * 2007-06-13 2008-12-25 Hitachi Ltd 情報記録再生装置及びビデオカメラ装置
US8360904B2 (en) 2007-08-17 2013-01-29 Adidas International Marketing Bv Sports electronic training system with sport ball, and applications thereof
US8702430B2 (en) 2007-08-17 2014-04-22 Adidas International Marketing B.V. Sports electronic training system, and applications thereof
US8221290B2 (en) 2007-08-17 2012-07-17 Adidas International Marketing B.V. Sports electronic training system with electronic gaming features, and applications thereof
JP5191294B2 (ja) * 2008-07-16 2013-05-08 Necパーソナルコンピュータ株式会社 情報処理装置及びプログラム
JP5085462B2 (ja) 2008-08-11 2012-11-28 ソニー株式会社 情報記録装置、撮像装置、情報記録方法およびプログラム
JP4924633B2 (ja) * 2009-02-27 2012-04-25 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9392941B2 (en) 2010-07-14 2016-07-19 Adidas Ag Fitness monitoring methods, systems, and program products, and applications thereof
US10039970B2 (en) 2010-07-14 2018-08-07 Adidas Ag Location-aware fitness monitoring methods, systems, and program products, and applications thereof
JP5671949B2 (ja) * 2010-11-04 2015-02-18 ソニー株式会社 情報処理装置、および情報記録媒体、並びに情報処理方法
US20120258433A1 (en) 2011-04-05 2012-10-11 Adidas Ag Fitness Monitoring Methods, Systems, And Program Products, And Applications Thereof
US20140223286A1 (en) * 2013-02-07 2014-08-07 Infopower Corporation Method of Displaying Multimedia Contents
TWI578763B (zh) * 2013-02-28 2017-04-11 英特爾股份有限公司 編碼單元位元數限制
TWI548266B (zh) * 2014-06-24 2016-09-01 愛爾達科技股份有限公司 多媒體檔案儲存系統與相關裝置
CN106797499A (zh) 2014-10-10 2017-05-31 索尼公司 编码装置和方法、再现装置和方法以及程序
KR101868203B1 (ko) * 2015-01-28 2018-07-20 한국전자통신연구원 스트림 처리 방법 및 장치
KR102444044B1 (ko) * 2015-09-25 2022-09-19 삼성전자주식회사 이미지 처리장치 및 방법
US11040246B2 (en) 2018-02-06 2021-06-22 Adidas Ag Increasing accuracy in workout autodetection systems and methods

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3491365B2 (ja) * 1995-01-31 2004-01-26 ソニー株式会社 符号化データ復号方法および復号装置
JPH08242452A (ja) * 1995-03-02 1996-09-17 Matsushita Electric Ind Co Ltd 映像信号圧縮符号化装置
JP3873463B2 (ja) * 1998-07-15 2007-01-24 株式会社日立製作所 情報記録装置
US7130525B1 (en) * 1999-07-29 2006-10-31 Sharp Kabushiki Kaisha Method of determining access position on recording medium and method of managing recording medium
US7720356B2 (en) * 2002-11-12 2010-05-18 Lg Electronics Inc Recording medium having data structure for managing reproduction of multiple reproduction path video data recorded thereon and recording and reproducing methods and apparatuses
AU2003276756B2 (en) * 2002-11-12 2007-09-13 Lg Electronics Inc. Recording medium having data structure for managing reproduction of multiple reproduction path video data recorded thereon and recording and reproducing methods and apparatuses
US7609762B2 (en) * 2003-09-07 2009-10-27 Microsoft Corporation Signaling for entry point frames with predicted first field
US7852919B2 (en) * 2003-09-07 2010-12-14 Microsoft Corporation Field start code for entry point frames with predicted first field
JP4249223B2 (ja) * 2004-04-16 2009-04-02 パナソニック株式会社 再生装置、及び記録方法
KR101058007B1 (ko) * 2004-05-18 2011-08-19 삼성전자주식회사 기록 매체에 저장된 데이터를 삭제하는 방법 및 삭제된데이터를 복원하는 방법
JP2007243907A (ja) * 2006-02-10 2007-09-20 Sony Corp 記録装置、記録方法、記録方法のプログラム、記録方法のプログラムを記録した記録媒体、再生装置、再生方法、再生方法のプログラム及び再生方法のプログラムを記録した記録媒体

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102047672A (zh) * 2009-04-08 2011-05-04 索尼公司 记录设备、记录方法、回放设备、回放方法、程序和记录介质
CN102047672B (zh) * 2009-04-08 2016-03-09 索尼公司 记录设备、记录方法、回放设备和回放方法
WO2014047943A1 (zh) * 2012-09-29 2014-04-03 华为技术有限公司 视频编码及解码方法、装置及系统
CN103907350A (zh) * 2012-09-29 2014-07-02 华为技术有限公司 视频编码及解码方法、装置及系统
CN103907350B (zh) * 2012-09-29 2018-02-23 华为技术有限公司 视频编码及解码方法、装置及系统
US11089319B2 (en) 2012-09-29 2021-08-10 Huawei Technologies Co., Ltd. Video encoding and decoding method, apparatus and system
US11533501B2 (en) 2012-09-29 2022-12-20 Huawei Technologies Co., Ltd. Video encoding and decoding method, apparatus and system

Also Published As

Publication number Publication date
US8229281B2 (en) 2012-07-24
JP2007312246A (ja) 2007-11-29
EP1858020A1 (en) 2007-11-21
KR101364206B1 (ko) 2014-02-21
TWI365447B (en) 2012-06-01
EP1858020B1 (en) 2020-05-06
JP4715633B2 (ja) 2011-07-06
TW200813993A (en) 2008-03-16
CN101075462B (zh) 2010-09-29
KR20070111984A (ko) 2007-11-22
US20070269187A1 (en) 2007-11-22

Similar Documents

Publication Publication Date Title
CN101075462A (zh) 记录/再现/编辑装置、方法、程序
CN1237822C (zh) 光盘、光盘记录方法和装置,以及光盘再现方法和装置
CN1239021C (zh) 信息处理设备及方法、程序和记录介质
CN100348033C (zh) 信息处理方法和装置、程序和记录介质
CN1145965C (zh) 用于生成存储在信息记录盘上的图象位流设备和方法
CN1165903C (zh) 盘介质和在其上记录和重放信息的方法和设备
CN1184631C (zh) 在记录介质上记录编码图像数据的方法
CN1186937C (zh) 编码设备和方法、多路复用设备和方法
CN1118065C (zh) 光盘的记录和复制设备及方法
CN1943246A (zh) 图像解码方法
CN1950907A (zh) 运动画面流产生装置,运动画面编码装置,运动画面多路复用装置和运动画面解码装置
CN1977333A (zh) 记录装置、记录方法、重放装置、重放方法、程序及记录介质
CN1951113A (zh) 流产生装置、流产生方法、编码装置、编码方法、记录介质及其程序
CN1969548A (zh) 记录介质,再现设备,程序
CN1706187A (zh) 数据处理装置
CN1383678A (zh) 编码设备和方法、记录介质和程序
CN1969549A (zh) 记录介质,再现设备,程序
CN1771728A (zh) 信息记录介质,将信息记录到信息记录介质的装置及方法
CN1874243A (zh) 数据传输装置及方法
CN1906694A (zh) 再现装置、再现方法、程序、记录介质和数据结构
CN101075467A (zh) 记录/再现设备和方法、编辑设备和方法及显示方法
CN1519756A (zh) 记录再生装置、记录再生方法、计算机程序及记录媒体
CN1768529A (zh) 音频/视频记录装置、记录方法、再现装置、再现方法、再现程序和记录程序
CN1692644A (zh) 信息处理设备、信息处理方法和程序以及记录介质
CN1780385A (zh) 数据处理装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20100929

Termination date: 20150521

EXPY Termination of patent right or utility model