CN1883203B

CN1883203B - 运动图象发送系统

Info

Publication number: CN1883203B
Application number: CN2004800340563A
Authority: CN
Inventors: 铃木洋佑; 永井隆弘; 高野诚
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Godo Kaisha IP Bridge 1; Panasonic Holdings Corp
Priority date: 2003-12-19
Filing date: 2004-12-14
Publication date: 2010-05-26
Anticipated expiration: 2024-12-14
Also published as: WO2005062617A1; JPWO2005062617A1; CN1883203A; US20060291811A1; JP4500267B2

Abstract

客户机开始流再生后，可以将服务器机录制的运动图象部分在客户机中特殊再生。服务器机具备：录制运动图象后，在生成由所定的数据单位构成的运动图象数据的同时，还给各数据单位生成使再生时间和数据尺寸对应的管理信息的录象处理部；存储运动图象数据及管理信息的记录介质；可以从客户机接收取得管理信息的要求以及发送数据单位的要求的接收部；指令响应取得要求读出管理信息，响应发送要求读出数据单位后发送的要求处理部；发送指令的管理信息及数据单位的发送部。在发送管理信息后，接受数据单位的发送要求时，要求处理部指令至少将一部分最新的管理信息和发送要求特定的数据单位一起发送。

Description

运动图象发送系统

技术领域

本发明涉及可以快进再生运动图象及快退再生运动图象等特殊再生运动图象的技术。更具体地说，本发明涉及在网络环境中，在服务器机正在实施录象的期间，客户机在流再生该运动图象时可以进行特殊再生的技术。

背景技术

进几年来，能够在硬盘及光盘上录制广播节目等的机器日益普及。硬盘及光盘是可以随机存取的记录介质，所以在许多机器中，用户可以一边进行节目的录象，一边再生视听节目已经录好的部分。

在上述机器中，存在着具有与网络连接而将运动图象数据向其它机器发送的功能(服务器功能)的机器。下面，将具有服务器功能的机器，称作“服务器机”；将接收节目数据的发送的机器，称作“客户机”。客户机可以通过网络一边从服务器机接收运动图象数据，一边再生运动图象。将这种再生，称作“流再生”。

客户机还能够流再生服务器机中存放的录制完毕的运动图象。这种流再生，还包含快进再生及快退再生等特殊再生。例如：专利文献1公布了在通过网络做媒介的流再生中可以特殊再生的技术。采用专利文献1记述的技术后，服务器机将运动图象录制到硬盘上后，解析该运动图象，生成特殊再生所需的管理信息，进而记录到HDD中。在进行该运动图象的流再生之际，客户机事先从服务器机取得管理信息，根据取得的管理信息，从服务器机取得运动图象数据。这样，在流再生中即使进行特殊再生时，也能够减少客户机一侧为了存放运动图象数据而占用的存储器容量。

专利文献1：日本国特开2003-46928号公报

可是，在上述网络运动图象再生方法中，存在着开始发送运动图象数据后，不能特殊再生已被录制的运动图象部分的问题。其理由是：因为在客户机取得的管理信息中，不包含开始发送后已被录制的运动图象部分的管理信息。这样，在上述方法中，在流再生现在正在录制的运动图象时，不能特殊再生。

另外，由于管理信息中记述了运动图象的分辨率等属性，所以还存在着当开始发送运动图象数据后属性发生了变化时，不能再生开始发送后已被录制的运动图象部分的问题。

发明内容

本发明的目的在于，提供能够进行在开始流再生后被录制的运动图象部分的特殊再生。

采用本发明的服务器机，和客户机一起，在运动图象发送系统中利用。所述服务器机具备：录制运动图象后，生成由所定的数据单位构成的运动图象数据的同时，还给各所述数据单位生成与再生时间和数据尺寸对应的管理信息的录象处理部；存放所述运动图象数据及所述管理信息的记录介质；可以接收客户机取得所述管理信息的要求及发送所述数据单位的要求的接收部；指令应答所述取得要求读出所述管理信息，应答所述发送要求读出所述数据单位后发送的要求处理部；发送被指令的所述管理信息及发送所述数据单位的发送部。在发送所述管理信息后，接收到发送所述数据单位的要求时，所述要求处理部，指令至少将一部分最新的管理信息与所述发送要求特定的所述数据单位一起发送。

所述要求处理部，还可以指令发送从发送所述管理信息后起到发送被所述发送要求特定的至少一个数据单位为止的期间被更新的管理信息中的一部分。

在所述录象处理部中停止录象时，所述要求处理部指令发送表示录象被停止的通知，所述发送部可以将所述通知与被所述发送要求特定的所述数据单位一起发送。

所述发送部，可以在一个消息内的可识别区域内存放所述数据单位、所述最新管理信息的至少一部分及所述通知中的2个以上后发送。

所述运动图象数据，是关于遵照MPEG标准的流的数据；所述数据单位，可以是视频目标单元。

所述录象处理部，可以进而给各所述数据单位生成与所述运动图象的再生有关的属性对应的管理信息。

采用本发明的客户机，和服务器机一起，在运动图象发送系统中利用。所述服务器机，录制运动图象后，存储生成由所定的数据单位构成的运动图象数据，而且存储各所述数据单位与再生时间和数据尺寸对应的管理信息。所述客户机具备：可向所述服务器机发送取得所述管理信息的要求及发送所述数据单位的要求的发送部；从应答所述取得要求的所述服务器机接收所述管理信息，从应答所述发送要求的所述服务器机接收所述数据单位的接收部；根据所述管理信息，特定流再生所需的数据单位，指令发送所述发送要求的再生控制部；根据接收的数据单位，再生所述运动图象的运动图象输出处理部。所述接收部，在从所述服务器机接收所述数据单位的同时，还至少接收一部分最新的管理信息。

所述接收部，还可以接收从所述服务器机根据所述取得要求发送所述管理信息后起到发送被所述发送要求特定的至少一个数据单位为止的期间被更新的管理信息中的一部分。

所述接收部，在从所述服务器机接收所述数据单位的同时，还可以接收表示在所述服务器机中停止录象的通知，

所述接收部，可以接收一个存放所述数据单位、所述最新管理信息的至少一部分及所述通知中的2个以上的消息，识别它们后取出。

所述接收部，接收各所述数据单位的与所述运动图象的再生有关的属性对应的管理信息；所述运动图象输出部，可以根据所述属性及所述数据单位再生所述运动图象。

采用本发明的运动图象发送系统，从服务器机接收由所定的数据单位构成的运动图象数据后，客户机流再生运动图象。所述运动图象发送系统的服务器机，具备：录制运动图象后，生成由所定的数据单位构成的运动图象数据的同时，还给各所述数据单位生成与再生时间和数据尺寸对应的管理信息的录象处理部；存放所述运动图象数据及所述管理信息的记录介质；可以接收客户机取得所述管理信息的要求及发送所述数据单位的要求的服务器接收部；指令应答所述取得要求读出所述管理信息，应答所述发送要求读出所述数据单位后发送的要求处理部；发送被指令的所述管理信息及所述数据单位的服务器发送部。另外运动图象发送系统的客户机具备：可向所述服务器机发送取得所述管理信息的要求及发送所述数据单位的要求的客户机发送部；从应答所述取得要求的所述服务器机接收所述管理信息，从应答所述发送要求的所述服务器机接收所述数据单位的客户机接收部；根据所述管理信息，特定流再生所需的数据单位，指令发送所述发送要求的再生控制部；根据接收的数据单位，再生所述运动图象的运动图象输出处理部。在发送了所述管理信息后，接收了所述数据单位的发送要求时，所述服务器机的要求处理部，指令至少将一部分最新的管理信息与所述发送要求特定的所述数据单位一起发送；所述客户机接收部，在从所述服务器机接收所述数据单位的同时，还至少接收一部分最新的管理信息。

采用本发明的方法，是通过和客户机一起在运动图象发送系统中利用的服务器机实施的方法。所述方法具备：录制运动图象后，生成由所定的数据单位构成的运动图象数据的同时，还给各所述数据单位生成与再生时间和数据尺寸对应的管理信息的步骤；存放所述运动图象数据及所述管理信息的步骤；从客户机接收取得所述管理信息的要求的步骤；应答接收的所述取得要求，发送所述管理信息的步骤；根据发送的所述管理信息，接收有关所述客户机特定的数据单位的发送要求的步骤；应答接收的所述发送要求，读出指定的所述数据单位后，发送读出的所述数据单位的步骤。在发送了所述管理信息后，接收了所述数据单位的发送要求时，发送所述数据单位的步骤，至少将一部分最新的管理信息与所述发送要求特定的所述数据单位一起发送。

采用本发明的方法，通过和服务器机一起在运动图象发送系统中利用的客户机实施的方法。所述服务器机，录制运动图象后，存储由所定的数据单位构成的运动图象数据，而且存储各所述数据单位与再生时间和数据尺寸对应的管理信息。所述方法具备：向所述服务器机发送取得所述管理信息的要求的步骤；从应答所述取得要求的所述服务器机接收所述管理信息的步骤；根据所述管理信息，特定流再生所需的数据单位，指令发送所述发送要求的步骤；从应答所述发送要求的所述服务器机接收所述数据单位的步骤；根据接收的数据单位，再生所述运动图象的步骤。接收所述数据单位的步骤，从所述服务器机与所述数据单位一起，至少接收一部分最新的管理信息。

采用本发明的运动图象发送系统后，由于服务器机将最新的管理信息的变动，与运动图象数据混在一起后发送给客户机，所以客户机在流再生正在录象的运动图象之际，也能特殊再生开始流再生后被更新的地方。另外，正在录象的运动图象的属性信息，在录象期间变化时，客户机也能继续流再生。

附图说明

图1是表示遵照VR标准的MPEG2程序流1的数据结构的图形。

图2是表示程序流1内的视频组件的数据结构的图形。

图3是表示采用本实施方式的运动图象发送系统100的结构的图形。

图4是表示服务器机101的硬件结构的示例的图形。

图5是表示客户机102的硬件结构的示例的图形。

图6是表示服务器机101和客户机102的功能块的结构的图形。

图7(a)是表示采用第1实施方式的管理信息405的数据结构的图形，(b)是表示根据与GOP相关的信息构成的管理信息405的示例的图形。

图8是表示流再生处理的程序的图形。

图9是表示采用第2实施方式的管理信息905的示例的图形。

图10是表示传输流20的数据结构的图形。

图11(a)是表示视频TS包30的数据结构的图形，(b)是表示音频TS包31的数据结构的图形。

图12(a)～(d)是表示根据视频TS包再生视频图象之际形成的流的关系的图形。

图13(a)～(e)是表示传输流和限制AV流的关系的图形。

图14是表示对限制AV流52而言的管理信息(EP_MAP)的示例的图形。

图15是表示再生时刻和源包编号的对应关系的图形。

图中：100-运动图象发送系统；101-服务器机；102-客户机；103-网络；310-显示器；401-要求接收处理部；402-要求处理部；403-发送处理部；404-运动图象录制处理部；405-管理信息；406-MPEG-2运动图象数据；407-要求发送处理部；408-流再生控制部；409-接收处理部；410-运动图象输出处理部；411-管理信息缓冲器；412-MPEG-2数据缓冲器；413-发送数据；414-MPEG-2数据；415-管理信息更新变动；416-事件信息。

具体实施方式

下面，参照附图，讲述本发明的实施方式。

(第1实施方式)

在本实施方式中，讲述服务器机通过网络，向客户机发送运动图象的数据的运动图象发送系统。首先讲述成为发送的对象的运动图象数据的数据结构，然后讲述运动图象发送系统中各机器的功能及动作。在以下的讲述中，所谓“运动图象”，是包含图象及声音两者的内容(播出节目)，但至少是图象及声音中的一个即可。

在本实施方式中，作为运动图象数据，以遵照DVD视频记录标准(以下称作“VR标准”)的MPEG2程序流为例进行讲述。VR标准的MPEG2程序流，具有实时向记录型DVD等录制运动图象之际有用的数据结构。采用服务器机录制运动图象及发送录制的运动图象，按照VR标准的MPEG2程序流进行。

图1表示遵照VR标准的MPEG2程序流的数据结构。以下，将该流简称“程序流”。

程序流1包括多个视频目标2(VOB#1、#2、…、#k)。例如，假如程序流1是录象的内容，那么各VOB就存放与从用户开始录象到停止录象为止的一次录象动作对应的运动图象数据。

各VOB包括多个VOB单元10(VOBU#1、#2、…、#n)。各VOBU是包含图象再生时间0.4秒～1秒左右的数据的数据单位。下面，以最先配置的VOBU#1和其次配置的VOBU#2为例，讲述VOBU的数据结构。

VOBU#1，由多个组件构成。程序流50内的各组件的数据长(组件长)是恒定(2048字节)的。在VOBU的前头，配置着在图1中用“R”表示的实时信息组件(RDI组件)11。在RDI组件11之后，包含多个用“V”表示的视频组件(视频组件12a、12b等)及用“A”表示的音频组件(音频组件13等)。

各组件存放以下信息。即：RDI组件11存放为了控制程序流1的再生而使用的信息，例如表示VOBU的再生时刻的信息以及旨在控制程序流1的复制的信息。视频组件12a、12b等存放被MPEG2压缩的视频数据。音频组件13等存放例如被MPEG2音频标准压缩的音视频数据。在邻接的视频组件及音频组件中，例如存放同步再生的视频数据及音频数据，但它们的配置(顺序)是任意的。

VOBU#2，也由多个组件构成。在VOBU#2的前头，配置着RDI组件14，然后配置着多个的视频组件15及音频组件16等。各组件存放的信息的内容，和VOBU#1一样。

图2表示流程序1内的视频组件的数据结构。下面，以视频组件12a、12b为例进行讲述。视频组件12a，存放被MPEG2压缩的视频数据12a-1。另外，视频组件12a，除了包含特定是视频组件的组件标题12a-2及PES信息包标题12a-3之外，如果是VOBU的最前头的视频组件，在组件标题12a-2中还包含系统标题(未图示)。

图2所示视频组件12a的视频数据12a-1，与后续的视频组件12b以后的视频数据12b-1等，一起构成I图象19-1的数据。进而，继续记录继I图象之后的B图象19-2及构成P图象的视频组件。

另外，视频数据12a-1包含顺序标题17及GOP标题18。在MPEG2标准中，规定着归纳多个视频图象的“图象组”(Group Of Picture；GOP)，GOP标题18表示其前头。GOP的前头图象一定是I图象。

接着，参照图3讲述采用本实施方式的网络的构成。图3表示采用本实施方式的运动图象发送系统100的结构。运动图象发送系统100，通过网络103，连接服务器机101及客户机102后构成。在运动图象发送系统100中，客户机102向服务器机101发送流再生服务器机101保持的AV数据(程序流1)的请求。对于该请求，服务器机101通过网络103，发送程序流1。客户机102接收程序流后逐次再生，从而进行流再生。网络103，例如是互联网及家庭内LAN等。

本运动图象发送系统100的特征之一是，在服务器机正在录制运动图象的期间，客户机102在流再生该运动图象的环境中，服务器机101将特殊再生所需的管理信息的变动与运动图象数据一起，发送给客户机102。所谓“管理信息的变动”，是指从最后发出运动图象数据之后起到发出下一个运动图象数据为止被更新的管理信息的部分。这样，客户机102就能够实现对正在录象中的运动图象快进再生及快退再生等特殊再生。另外，在客户机102中，因为可以减小必要的RAM容量，所以还有利于安装。

图4表示服务器机101的硬件结构的示例。服务器机101具有CPU201、RAM202、ROM203、电视调谐器204、A/D变换器205、MPEG-2编码器206、硬盘驱动器(HDD)207、网络接口208、遥控接收器209。此外，图4还示出遥控发送器210，但它是旨在遥控操作的输入装置，不属于服务器机101。

服务器机101的各构成要素的动作及机器整体的动作，主要通过CPU201在RAM202中展开、实行ROM203存放的程序来实现。更详细的功能，将在后文中参照图6讲述。

电视调谐器204，例如接收模拟电视广播信号，只选取特定的广播台的信号。该电视广播信号，通常包含构成图象及声音(即运动图象)的各信号。抽出的信号是模拟信号。

A/D变换器205，将抽出的模拟信号变换成数字信号。MPEG-2编码器206，根据数字信号，按照MPEG标准进行压缩代码化处理，生成程序流1。关于视频数据，MPEG-2编码器304，根据MPEG标准，将数字视频信号压缩代码化后获得图象数据。然后，按照图2所示的数据结构，将该图象数据组件化，生成程序流1。此外，MPEG-2编码器206也可以进行到压缩代码化处理为止，根据压缩代码化的图象·声音数据，CPU201生成程序流1。

HDD207，依次在硬盘中存放生成的程序流1。网络接口208，例如是旨在与以太网(注册商标)连接的网络端子，将服务器机101与网络103连接。

用户利用遥控发送器210，输入对服务器机101的输入操作后，遥控发送器210按照用户的输入操作，输出操作信号。遥控接收器209接收操作信号，将该信号发送给CPU201。CPU201指令进行与该操作信号相应的处理。此外，取代遥控发送器210，也可以在服务器机101上设置输入按钮。利用输入按钮，也能向服务器机101输与用户的输入操作相应的输入信号。

图5表示客户机102的硬件结构。客户机102由CPU301、RAM302、ROM303、MPEG-2解码器304、D/A变换器305、运动图象输出部306、网络接口307、遥控接收器308、遥控发送器309、显示器310构成。此外，图5还示出遥控发送器309，但它是旨在遥控操作的输入装置，不属于客户机102。

客户机102的各构成要素的动作及机器整体的动作，主要通过CPU301在RAM302中展开、实行ROM303存放的程序来实现。更详细的功能，将在后文中参照图6讲述。

MPEG-2解码器304，抽出程序流内的视频数据及音频数据代码化后作为运动图象输出。关于视频数据，MPEG-2解码器304，根据MPEG标准，将数字视频信号压缩代码化后获得图象数据。然后，按照图1及图2所示的阶层结构，从程序流抽出图象数据，按照MPEG标准代码化。D/A变换器305，将运动图象的数字信号向外部的显示器310输出。网络接口307，例如是旨在与以太网(注册商标)连接的网络端子，将客户机102与网络103连接。

用户利用遥控发送器309，输入对客户机102的输入操作后，遥控发送器309按照用户的输入操作，输出操作信号。遥控接收器308接收操作信号，将该信号发送给CPU301。CPU301指令进行与该操作信号相应的处理。此外，取代遥控发送器309，也可以在客户机102上设置输入按钮。利用输入按钮，也能向客户机102输与用户的输入操作相应的输入信号。

图6表示服务器机101和客户机102的功能块的结构。服务器机101的功能块，通过图4所示的服务器机101的CPU201执行计算机程序，从而由包含CPU201在内的各构成要素实现。另外，图5所示的客户机102的功能块，也同样通过图5所示的客户机102的CPU301执行计算机程序，从而由包含CPU301在内的各构成要素实现。服务器机101和客户机102的每一个通过执行计算机程序实施的处理的步骤，将在后文中参照图8讲述。此外，计算机程序，记录在CD-ROM等记录介质上后在市场上销售，或者通过互联网等通信线路传输。这样，可以使PC等信息处理装置，作为具有和上述服务器机101及客户机102的同等功能的装置动作。

服务器机101，具有要求接收处理部401、要求处理部402、发送处理部403、运动图象录制处理部404。在HDD207中记录着管理信息405、MPEG-2运动图象数据406。另外，客户机102，具有要求发送处理部407、流再生控制部408、接收处理部409、运动图象输出处理部410。在客户机102的RAM302内，设置着管理信息缓冲器411、MPEG-2数据缓冲器412。在图6中，将由服务器机101的发送处理部403向客户机102的接收处理部409发送的数据，记作“发送数据413”。在发送数据413中，包含着MPEG-2数据414、管理信息更新变动415、事件信息416。MPEG-2数据414，是构成运动图象数据406的一部分的数据中的一部分，在本实施方式中，设定为1VOBU的数据。关于管理信息更新变动415及事件信息416，将在以下的讲述处理步骤时详细讲述。

首先讲述服务器机101中的录象处理。用户进行开始录象的操作输入后，运动图象录制处理部404利用电视调谐器204将接收的电视广播信号变换成模拟运动图象信号，再由A/D变换器205将该模拟运动图象信号变换成数字运动图象信号。进而，该数字运动图象信号被MPEG-2编码器206压缩成MPEG-2数据，作为MPEG-2运动图象数据406记录到HDD207中。该记录处理中的一系列动作反复进行，直到用户进行停止录象的输入操作为止。

另外，运动图象录制处理部404在将MPEG-2运动图象数据406记录到HDD207中的同时，还将该MPEG-2运动图象数据406的特殊再生所需的信息作为管理信息405，记录到HDD207中。

图7(a)示出管理信息405的数据结构。管理信息405包含VOBU再生时间501-1～501-n及VOBU数据尺寸502-1～502-n。VOBU再生时间，表示关于各VOBU的图象的再生时间；VOBU数据尺寸，表示各VOBU的数据尺寸。VOBU再生时间及该VOBU的数据尺寸的各值相互对应地存放。以下将相互对应的VOBU再生时间和VOBU的数据尺寸的组称作“条目”。例如：条目1由VOBU再生时间501-1和VOBU数据尺寸502-1构成。另外，条目n由VOBU再生时间501-n和VOBU数据尺寸502-n构成。

管理信息405包含的条目，与MPEG-2运动图象数据406包含的所有的VOBU对应地设置。MPEG-2运动图象数据406包含n个VOBU时，管理信息405就包含n个条目。运动图象录制处理部404，每逢MPEG-2运动图象数据406形成VOBU时，在HDD207中就逐个依次记录与该VOBU对应的VOBU再生时间501及GOP数据尺寸502。此外，管理信息405也可以用VR标准规定的导航数据包含的TMAP信息构成。

上述管理信息405的条目，由与VOBU相关的信息构成，但这只是个例子而已。可以取代与VOBU相关的信息，使用与图2所示的图象组(GOP)相关的信息。图7(b)表示根据与GOP相关的信息构成的管理信息405的示例。这时，可以取代VOBU再生时间，规定GOP再生时间501；取代VOBU数据尺寸，规定GOP数据尺寸502。

下面，讲述服务器机101正在录制运动图象时，客户机102流再生该运动图象的步骤。

图8表示流再生处理的程序。首先，用户指令客户机102流再生。客户机102的流再生控制部408，命令要求发送处理部407取得与用户选择的MPEG-2运动图象数据406对应的管理信息405。接收该命令的要求发送处理部407，使用HTTP的GET方法向要求接收处理部401发送取得管理信息405的要求(步骤S01)。

接收该要求的服务器机101的要求接收处理部401，命令要求处理部402从HDD207中读出管理信息405。要求处理部402读出管理信息405，向发送处理部403传输。假设在该时刻管理信息405包含条目#1～#(K-1)。要求处理部402保持该时刻中的最终条目编号(K-1)。然后，发送处理部403将管理信息405作为GET方法的应答，向客户机102的接收处理部409发送(步骤S02)。接收管理信息405的客户机102的接收处理部409，将管理信息405存储到管理信息缓冲器411中(步骤S03)。

然后，客户机102的流再生控制部408，开始取得MPEG-2运动图象数据406。关于该处理，应当注意的是：流再生控制部408不是一下取得所有的MPEG-2运动图象数据406。流再生控制部408参照管理信息缓冲器411存储的管理信息405，根据VOBU再生时间501和VOBU数据尺寸502，计算MPEG-2运动图象数据406包含的各VOBU的地址。然后，命令要求发送处理部407在适当的再生时刻以VOBU单位取得再生所需的VOBU。此外，所谓“各VOBU的地址”，在从MPEG-2运动图象数据406的前头算起时，是表示各VOBU从哪个位置开始的数据的存放位置的信息。

要求发送处理部407使用HTTP的GET方法，向服务器机101的要求接收处理部401发送取得VOBU的要求(步骤S04)。这时，VOBU的地址，用GET方法的RANGE标题指定。

上述VOBU的处得处理，可以在各种再生方法中应用。例如，想从其前头再生正在录制的运动图象时，流再生控制部408命令从前头的VOBU取得。另外，想从某个特定的场面开始再生正在录制的运动图象时，流再生控制部408。进而，想用2倍速再生运动图象时，流再生控制部408在该VOBU的再生时间经过一半时，命令取得下一个VOBU。第1及第2例，是普通的再生，第3例是所谓的特殊再生。作为第3例，举出2倍速再生，但其速度是任意的，流再生控制部408只要以与再生速度相应的间隔间歇性地要求VOBU即可。

由这些例子可知：取得哪个VOBU？以及用哪个时刻取得VOBU？能够按照用户的指令任意调整。这样，就能够进行流再生时的特殊再生。

从客户机102的要求发送处理部407接收到取得VOBU的要求后，服务器机101的要求接收处理部401就命令要求处理部402从HDD207读出与VOBU对应的MPEG-2数据。要求处理部402读出MPEG-2数据，传输给发送处理部403。发送处理部403作为GET方法的应答消息，编制发送数据413，将MPEG-2数据作为被发送数据413包含的MPEG-2数据414存放(步骤S05)。

在这里，分析一下录象中的MPEG-2运动图象数据406的流再生。录象中的MPEG-2运动图象数据406反复持续更新，直到在用户的输入操作等的作用下停止录象为止。所以，与MPEG-2运动图象数据406对应的管理信息405也被持续更新。在图8中，在步骤S02中的发送处理后，直到步骤S05中的接收VOBU的要求为止的期间，管理信息405的最终条目编号示出按照k、…、m的变化。

另一方面，在客户机102的管理信息缓冲器411中，只存放直到更新前的条目(k-1)为止的管理信息405。由于流再生控制部408根据管理信息缓冲器411中存储的管理信息，要求MPEG-2数据414，所以流再生控制部408在开始流再生MPEG-2运动图象数据406后，就不能要求(取得)被更新的部位。

于是，当管理信息405被更新后，要求处理部402在发送MPEG-2数据414的同时，也将管理信息405的更新变动发送到客户机102的发送处理部403。所谓“管理信息405的更新变动”，就是自向客户机102最后发送的管理信息405的最终条目编号起，到即将向客户机102的接收处理部409发送MPEG-2数据414之前的时刻的最终条目编号为止的管理信息。在图8中，管理信息405的更新变动相当于从条目编号k到m为止的部分。

发送处理部403，将更新变动作为管理信息更新变动415存入发送数据413中(步骤S06)。另外，停止录象时，要求处理部402将停止录象的事件通知发送处理部403。接收了该通知的发送处理部403，将表示停止录象的信息，作为发送数据413中的事件信息416存入(步骤S07)。这时，发送数据413成为多个部分型的消息。所谓“多个部分型的消息”，是由多个区域(部分)构成的发送消息。相邻的2个部分的交界，由被称作“界限(boundary)”的被定义的所定的字符串的行所规定。一个区域可以根据其它区域识别。发送处理部403将管理信息的更新变动和运动图象数据混在一起，用一个TCP对话期间发送。其结果，与更新变动的处理相关联，在客户机102的接收处理部409中，就不需要进行管理多个TCP对话期间的处理，能够削减该处理所需的RAM容量。服务器机101的发送处理部403，结束向发送数据413存放数据后，就将发送数据413向接收处理部409发送(步骤S08)。

客户机102的接收处理部409，接收发送数据413后，从发送数据413中取出MPEG-2数据414，将MPEG-2数据414在管理信息缓冲器411中存储(步骤S09)。另外，发送数据413也可以是多部分型的消息，在识别了存放管理信息更新变动415的时候，接收处理部409从发送数据413中取出管理信息更新变动415，向管理信息缓冲器411追加管理信息更新变动415，从而更新管理信息缓冲器411存储的管理信息405(步骤S10)。这样，流再生控制部408在开始流再生MPEG-2运动图象数据406后，对被更新的部位也能要求取得MPEG-2数据414。另外，在发送数据413中存放事件信息416时，流再生控制部408从发送数据413中取出事件信息416，将事件信息416向流再生控制部408传输。

流再生控制部408将管理信息缓冲器411存储的MPEG-2数据414，向运动图象输出处理部410传输。运动图象输出处理部410进行所定的处理，向外部连接的显示器310输出图象及声音(运动图象)(步骤S11)。与运动图象输出处理部410对应的实际处理，利用MPEG-2解码器304将MPEG-2数据414展开成数字运动图象信号，再利用D/A变换器305将该数字运动图象信号变换模拟运动图象信号，由运动图象输出部306描绘该模拟运动图象信号，向外部连接的显示器310输出后实现。

流再生中从步骤S04到步骤S11的动作，由用户进行流再生停止的输入操作，或反复进行到达MPEG-2运动图象数据406的终点为止。在开始流再生的时刻，MPEG-2运动图象数据406是正在录象的时候，客户机102的流再生控制部408，根据事件信息416认识MPEG-2运动图象数据406的录象停止，从而认识MPEG-2运动图象数据406的终端。对录象的暂停，也进行同样的通知，流再生控制部408认识该状态。

此外，在以上的讲述中，没有使服务器机101具备再生HDD207记录的MPEG-2运动图象数据406的功能，但也可以使其具有该功能。另外，没有使客户机102具备将MPEG-2运动图象记录到HDD等记录介质中的功能，但也可以使其具有记录MPEG-2运动图象的功能。

(第2实施方式)

在本实施方式中，讲述正在录象期间即使图象的分辨率变化时，也能够与运动图象数据的发送对应的处理。本实施方式的运动图象发送系统100的整体结构，如图3所示。另外，服务器机101及客户机102的硬件结构及功能块的结构，如图4～图6所示。关于这些，在第1实施方式中已经讲过，故在此不再赘述。

运动图象录制处理部404，将模拟广播信号等作为MPEG-2运动图象数据406写入之际，运动图象的分辨率及声音频道数等属性往往变化。特别是在客户机中，在管理信息更新前后，运动图象的属性变化后，客户机102不能认识其变化。就有可能导致解码化失败。

因此，服务器机101的运动图象录制处理部404，编制运动图象属性信息703，作为管理信息的一部分，逐次写入HDD207。图9表示采用本实施方式的管理信息905的示例。管理信息905由VOBU再生时间701、VOBU数据尺寸702及运动图象属性信息703构成。VOBU再生时间701及VOBU数据尺寸702所示的内容，与图5(a)实质上相同，故不再赘述。运动图象属性信息703，是特定运动图象的分辨率及声音频道数等属性的信息。在本实施方式中，将VOBU再生时间701、VOBU数据尺寸702及运动图象属性信息703作为一个条目，构成管理信息905。此外，管理信息905也可以经常不设置运动图象属性信息，属性变化后，只追加与该VOBU对应的条目即可。运动图象属性信息703还可以原封不动地复制用DVD-VR标准规定的导航数据中的信息(具体地说是M_VOB_STI信息)。

客户机102流再生服务器机101中正在录象的运动图象的程序，原则上如图8所示，只要改读成与本实施方式对应的管理信息905后应用就行。但在步骤S04中，客户机102中的流再生控制部408，从管理信息905包含的运动图象属性信息703中取得MPEG-2运动图象数据406的属性信息，根据它进行再生处理。另外，MPEG-2运动图象数据406的属性信息在录象过程中变化之际，在步骤S06中，要求处理部402将重新制作的运动图象属性信息703传输给发送处理部403，发送处理部403将运动图象属性信息703包含在管理信息更新变动415内后发送。这样，客户机102即使在录象过程中的MPEG-2运动图象数据406的属性信息发生变化，也能取得变化后的运动图象属性信息703，所以能够继续流再生。

以上，讲述了本发明的实施方式。上述服务器机101进行的录象，主要通过根据模拟电视广播信号生成MPEG2-2程序流，写入HDD207后实现。可是，服务器机101也可以接收数字电视广播中采用的MPEG-2传输流后，进行所定的处理，写入HDD207及Blu-rag盘(BD)。所谓“BD”，是可以使用约405nm的波长的激光，写入、读出数据的光盘，记录层1层大约具有25GB的容量。

这时，MPEG-2传输流的信息包结构，以被保持的状态写入。下面，讲述写入HDD207的情况。

因此，以下参照图10～图13，讲述作为数字广播传输的MPEG-2传输流的数据结构。经过以下的讲述后可知：第1及第2实施方式的有关程序流1的讲述，对MPEG-2传输流也适用。以下，将“MPEG-2传输流”简单地记作“传输流”或“TS”。

图10示出传输流20的数据结构。传输流20由分别具有188字节的信息包长的多种TS包构成。TS包的种类，例如除了存放被压缩的视频数据的视频TS包(V_TSP)30、存放被压缩的音频数据的音频TS包(V_TSP)31之外，还包含存放节目表(程序关联表；PAT)的信息包(PAT_TSP)、存放节目对应表(程序映射表；PMT)的信息包(PMT_TSP)及存放程序时钟基准(PCR)的信息包(PCR_TSP)等。

下面，讲述与本发明的处理相关的视频TS包及音频TS包。图11(a)表示视频TS包30的数据结构。视频TS包30具有4字节的传输信息包标题30a及184字节的传输信息包有效荷载30b。在有效荷载30b中存放视频数据30b。另一方面，图11(b)表示音频TS包31的数据结构。音频TS包31也同样具有4字节的传输信息包标题31a及184字节的传输信息包有效荷载31b。音频数据31b存放在传输信息包有效荷载31b中。

由上述示例可知：TS包通常由4字节的传输信息包标题和184字节的基本数据构成。在信息包标题中，记述着特定该信息包的种类的信息包标识符(Packet Identifier；PID)。例如视频TS包的PID是“0x0020”，音频TS包的PID是“0x0021”。基本数据是视频数据、音频数据等的内容数据及旨在控制再生的控制数据等。存放哪种数据？因信息包的种类而异。

下面，以视频数据为例，讲述和构成图象的图象的关系。图12(a)～(d)，表示根据视频TS包再生视频图象之际形成的流的关系。如图12(a)所示，TS40包含视频TS包40a)～40d。此外，在TS40中还可以包含其它信息包。但在这里只示出视频TS包。视频TS包易于被标题40a-1存放的PTD特定。

由视频数据40a-2等的各视频TS包的视频数据构成信息包化的基本流。图12(b)表示信息包化的基本流(PES)41的数据结构。PES41由多个PES信息包41a、41b等构成。PES信息包41a由PES标题40a-1及PES有效荷载41a-2构成，这些数据，作为视频TS包的视频数据存放。

PES有效荷载41a-2，分别包含1个图象的数据。由PES有效荷载41a-2构成基本流。图12(c)表示基本流(ES)42的数据结构。ES42具有多个图象标题及图象数据的组。构成ES42的标题及图象数据，和图2所示的图象19-1、19-2的数据相同。此外，所谓“图象”，通常作为将帧及扫描场都包含在内的概念使用。

在图12(c)所示的图象标题42a中，示出特定其后配置的图象数据42b的图象类别的图象编码类型；在图象标题42c中，示出特定图象数据42d的图象类别的图象编码类型。所谓“类别”，表示I图象(Intra-coded picture)、P图象(Predictive-coded picture)或B图象(Bidirectionally-predictive-coded picture)。类别如果是I图象，那么其图象编码类型例如就是“001b”。

图象数据42b、42d等，是可以仅由该数据或由该数据和其前及/或后被代码化的数据构成的一帧的数据。例如图12(d)，示出由图象数据42b构成的图象43a及由图象数据42d构成的图象43b。

在数字广播的程序流中，多个节目的图象、声音等的TS包可以混在一起，所以在录制某个节目之际，需要抽出再生该节目所需的信息包。因此，下面参照图13，讲述在服务器机101中录制运动图象之际，如何处理传输流？如何存入HDD207？以下，将包含多个节目的TS包的传输流，称作“完全TS”；将抽出必要的TS包时的传输流称作“部分TS”。

图13(a)～(e)表示传输流和限制AV流的关系。图13(a)表示完全TS 50。完全TS 50，例如连续配置着包含3个节目X、Y及Z的数据的TS包。图13(b)表示由服务器机101的电视调谐器204根据完全TS 50生成的部分TS51。部分TS51由于是从连续的完全TS中取出一部分信息包的传输流，所以信息包在时间性上分散存在。该信息包的间隔，由完全TS的发送一侧调整，为了能在解码器中正确地进行解码而满足必要的条件。这个所谓“条件”，是为了不引起作为MPEG-2TS的理想模式规定的T-STD(TS系统目标解码器：TS System Target Decoder)的缓冲存储器溢出及下溢而在MPEG标准上规定的条件。

部分TS51，例如包含有关节目X的TS包。

图13(c)表示将部分TS存入服务器机101的HDD207之际的流(限制AV流)52。限制AV流52，连续排列着源包。

图13(d)表示源包53的数据结构。源包53的数据长固定成192字节。就是说，各源包53，在188字节的TS包55之前，附加4字节TP额外标题54后构成。

图13(e)表示TP额外标题54的数据结构。TP额外标题54，由2比特的许可复制指示器(CPI)56和30比特的到达计时印记ATS57构成。许可复制指示器(CPI)56，与其比特值对应，规定限制AV流52的全部或部分的复制次数(0次(不可复制)/只能进行1次/没有限制等)。在到达计时印记ATS57中，以90KHz的精度记述着TS包到达服务器机101的时刻。附加这种时刻信息的理由是：由于部分TS的TS包连续写入HDD207，所以再生时为了用和部分TS的TS包的到达时刻相同的时刻进行TS包的处理，就需要给各信息包附加其到达时刻的信息。

此外，图13(c)记述的限制AV流52，例如将32个源包的集合(6KB)作为1个单位写入HDD207。将这种单位称作“对准单元”。规定对准单元的理由是：由于BD205a是1区段2KB，所以用32源包的单位能够确保和区段的定位。

写入服务器机101的HDD207的限制AV流52，与第1实施方式中的MPEG-2运动图象数据406对应。另一方面，为了进行本发明的处理，也需要对限制AV流52而言的管理信息。因此，下面参照图14及图15，讲述对限制AV流52而言的管理信息。

图14表示对限制AV流52而言的管理信息(EP_MAP)的示例。该管理信息，排列多个再生时刻和源包编号的组(条目)后构成，具有和图5(a)所示的管理信息类似的数据结构。

与再生时刻对应的记时印记(PTS)，对图象而言，表示配置在图2所示的MPEG标准的GOP的前头的各I图象的PTS。而且所谓“源包编号(SPN)”，是在与该PTS对应的时刻再生的I图象的前头数据存放的源包编号(SPN)。由于源包的数据尺寸是192字节，所以源包编号被特定后，从限制AV流的前头数起的字节数就被特定，可以容易且准确地存取该数据。因此可以说，通过源包编号记述数据尺寸。

将第1及第2实施方式中的管理信息及MPEG-2运动图象数据的相关讲述(例如与图8相关的讲述)，置换成管理信息(EP_MAP)及限制AV流52后，即使是采用传输流的数字广播，也能完全应用第1及第2实施方式的技术。就是说，服务器机101将正在录象中的限制AV流52发送给客户机102之际，也发送管理信息(EP_MAP)的更新变动(条目的追加部分)。这样，客户机102可以根据最新的管理信息(EP_MAP)再生录了象的节目。

在客户机102的运动图象输出处理部410中的旨在进行特殊再生的处理，如下所示：由于特殊再生是将图象的显示时刻提前或推后2倍及1/2倍，所以只要用比标准早/迟的时刻指定再生时刻就行。

图15表示再生时刻和源包编号的对应关系。在管理信息中，由于只记述配置在GOP的前头的各I图象的PTS值，所以运动图象输出处理部410指定该PTS值以外的PTS值为开始时刻(In_time)及/或结束时刻(Out_time)后，就不能直接获得与该时刻对应的源包编号(地址)。可是，在MPEG-2视频的代码化压缩方式中，由于使用图象之间的变动进行压缩处理，所以如果最初没有解码GOP前头的I图象，也不能解码后面的图象。

因此，客户机102的运动图象输出处理部410，在从GOP前头的I图象以外的图象开始再生时，从用管理信息(EP_Map)指定的I图象开始解码，接着一边解析/解码图象，一边从指定的时刻的图象开始输出运动图象。其结果，不仅能够从任意的位置开始再生，而且还能从任何一个图象开始再生输出。

此外，在图14及图15中，源包编号X1、X2等实际值，未必是连续的整数，而是间隔很大的整数值。

使用采用本发明的服务器机及客户机构成的运动图象发送系统后，即使服务器机正在录象，也能在流再生中进行特殊再生。另外，录象之中的运动图象的属性即使在录象期间变化时，客户机也能继续流再生。

Claims

1.一种服务器机，是和客户机一起，在运动图象发送系统中被利用的服务器机，具备：

录象处理部，其录制运动图象后，生成由给定的数据单位所构成的运动图象数据，并按照每个所述数据单位，生成把再生时间与数据尺寸相关联的管理信息；

记录介质，其存放所述运动图象数据及所述管理信息；

接收部，其可以自客户机接收所述管理信息的取得要求及所述数据单位的发送要求；

要求处理部，其指令应答所述取得要求而读出所述管理信息、应答所述发送要求而读出所述数据单位后发送；以及

发送部，其发送被指令的所述管理信息及所述数据单位，

当在发送所述管理信息后接收到所述数据单位的发送要求时，所述要求处理部，指令发送由所述发送要求确定的所述数据单位，同时指令发送从发送所述管理信息后起到发送由所述发送要求确定的至少一个数据单位为止的期间内被更新的管理信息的部分。

2.如权利要求1所述的服务器机，其特征在于：在所述录象处理部的录象已停止时，所述要求处理部，指令发送表示录象被停止的通知，所述发送部，将所述通知与由所述发送要求确定的所述数据单位一起发送。

3.如权利要求2所述的服务器机，其特征在于：所述发送部，以可识别的方式把所述数据单位、所更新的所述最新管理信息的部分及所述通知中的2个以上，放在一个消息内的区域中发送。

4.如权利要求1所述的服务器机，其特征在于：所述运动图象数据，是关于遵照MPEG标准的流的数据；所述数据单位，是视频目标单元。

5.如权利要求1所述的服务器机，其特征在于：所述录象处理部，按照每个所述数据单位，生成把再生时间、数据尺寸、该数据单位的运动图象的属性相关联的管理信息。

6.一种客户机，是和服务器机一起在运动图象发送系统中被利用的客户机，

所述服务器机，录制运动图象后，存储由给定的数据单位所构成的运动图象数据，并存储按照每个所述数据单位把再生时间与数据尺寸相关联的管理信息；

所述客户机具备：

发送部，其可向所述服务器机发送所述管理信息的取得要求及所述数据单位的发送要求；

接收部，其从应答所述取得要求的所述服务器机接收所述管理信息，从应答所述发送要求的所述服务器机接收所述数据单位；

再生控制部，其根据所述管理信息，确定流再生所需的数据单位，指令发送所述发送要求；以及

运动图象输出处理部，其根据接收的数据单位，再生所述运动图象，

所述接收部，在从所述服务器机接收所述数据单位的同时，还接收从所述服务器机根据所述取得要求发送所述管理信息后起到发送由所述发送要求确定的至少一个数据单位为止的期间内被更新的管理信息的部分。

7.如权利要求6所述的客户机，其特征在于：所述接收部，在从所述服务器机接收所述数据单位的同时，还接收表示在所述服务器机中的录象已停止的通知。

8.如权利要求7所述的客户机，其特征在于：所述接收部，接收存放有所述数据单位、所更新的所述最新管理信息的部分及所述通知中的2个以上的一个消息，并识别它们后取出。

9.如权利要求6所述的客户机，其特征在于：所述运动图象数据，是关于遵照MPEG标准的流的数据；所述数据单位，是视频目标单元。

10.如权利要求6所述的客户机，其特征在于：所述接收部，接收按照每个所述数据单位把再生时间、数据尺寸、该数据单位的运动图象的属性相关联的管理信息；

所述运动图象输出处理部，根据所述属性及所述数据单位再生所述运动图象。

11.一种运动图象发送系统，是从服务器机接收由给定的数据单位所构成的运动图象数据后，客户机进行运动图象的流再生的运动图象发送系统，

所述服务器机，具备：

记录介质，其存放所述运动图象数据及所述管理信息；

服务器接收部，其可以自客户机接收所述管理信息的取得要求及所述数据单位的发送要求；

服务器发送部，其发送被指令的所述管理信息及所述数据单位，

所述客户机具备：

客户发送部，其可向所述服务器机发送所述管理信息的取得要求及所述数据单位的发送要求；

客户接收部，其从应答所述取得要求的所述服务器机接收所述管理信息，从应答所述发送要求的所述服务器机接收所述数据单位；

当在发送所述管理信息后接收到所述数据单位的发送要求时，

所述服务器机的要求处理部，指令发送由所述发送要求确定的所述数据单位，同时指令发送从发送所述管理信息后起到发送由所述发送要求确定的至少一个数据单位为止的期间内被更新的管理信息的部分，

所述客户接收部，在从所述服务器机接收所述数据单位的同时，还接收从所述服务器机根据所述取得要求发送所述管理信息后起到发送由所述发送要求确定的至少一个数据单位为止的期间内被更新的管理信息的部分。

12.一种方法，是通过和客户机一起在运动图象发送系统中被利用的服务器机实施的方法，具备：

录制运动图象后，生成由给定的数据单位所构成的运动图象数据，并按照每个所述数据单位，生成把再生时间与数据尺寸相关联的管理信息的步骤；

存放所述运动图象数据及所述管理信息的步骤；

从客户机接收所述管理信息的取得要求的步骤；

应答所述取得要求的接收，发送所述管理信息的步骤；

接收有关所述客户机根据所发送的所述管理信息而确定的数据单位的发送要求的步骤；以及

应答所述发送要求的接收，读出指定的所述数据单位后，发送所读出的所述数据单位，并且，当在发送所述管理信息后接收到所述数据单位的发送要求时，发送由所述发送要求确定的所述数据单位，同时发送从发送所述管理信息后起到发送由所述发送要求确定的至少一个数据单位为止的期间内被更新的管理信息的部分的步骤。

13.一种方法，是通过和服务器机一起在运动图象发送系统中被利用的客户机实施的方法，

所述方法包括：

向所述服务器机发送所述管理信息的取得要求的步骤；

从应答所述取得要求的所述服务器机接收所述管理信息的步骤；

根据所述管理信息，确定流再生所需的数据单位，指令发送所述发送要求的步骤；

从应答所述发送要求的所述服务器机接收所述数据单位及管理信息，并且，当在接收所述管理信息后接收到所述数据单位的发送要求时，从所述服务器机接收由所述发送要求确定的所述数据单位的同时，还接收从所述服务器机根据所述取得要求发送所述管理信息后起到发送由所述发送要求确定的至少一个数据单位为止的期间内被更新的管理信息的部分的步骤；以及

根据接收的数据单位，再生所述运动图象的步骤。