CN1240958A - 信息处理装置、方法和计算机可读取介质 - Google Patents

Abstract

提供了一种生成与视频信号(如电视广播节目)同步的多媒体信息的系统和方法。多媒体信息例如可以格式化成MHEG或ATVEF标准。系统包括说明并校验多媒体信息的内容并同步化的装置。情节生成程序生成一个由与视频的播出同步的多个景象组成的情节。景象生成程序合成包括文字、图像、声音、操作按钮等等的对象,产生一系列景象(页)。内容管理程序、情节管理程序和景象管理程序设置一个内容、情节和景象的目录。

Description

信息处理装置、方法和 计算机可读取介质

本发明涉及一种信息处理装置、方法和计算机可读取介质，以及尤其涉及一种用于生成、显示和同步处理视频信息与声音、图像和文本数据的信息处理装置、方法和计算机可读取介质。

现已有或已提出用于响应于用户交互指令显示包括移动图像、静止图像、声音和文字的信息和数据的标准，以及用于同步显示这种信息和数据的标准。一种由国际标准化组织(ISO)提出的标准是通过多媒体和超媒体信息编码专家组(MHEG)确定。另一种标准由高级电视增强论坛(ATVEF)、广播和有线网络协会、消费者电子设备公司、电视传输操作和科技公司确定。

相应于MHEG标准或ATVEF标准的信息(以下简称多媒体信息)可以在电视广播中提供给观众。传递和显示的其它方法包括计算机英特网。

通常多媒体信息关于它所响应的视频改变很少。但是欲在一个适当的时间提供多媒体信息，多媒体信息应与它所响应的视频(例如，电视广播的移动图像)同步。然而，不存在生成这种同步多媒体信息的编辑系统或编辑工具。本发明的目的在于提供这种编辑系统或编辑工具。

本发明提供一种信息处理系统和方法。该系统包括确定多媒体信息以及与该多媒体信息同步的视频的装置，生成多媒体信息的装置和设置多媒体信息的显示计时使该信息与视频同步的装置。该方法包括确定多媒体信息以及与该多媒体信息同步的视频，生成多媒体信息并设置多媒体信息的显示计时使该信息与视频同步。本发明还提供了一种执行该方法的包含代码的计算机可读介质。在优选实施例中，多媒体信息或者是MHEG信息，或者是ATVEF信息。

确定装置最好包括识辨多媒体信息和将与该多媒体信息同步的视频的内容的内容生成部分。生成装置最好包括一个生成多媒体信息景象的景象生成装置，设置装置最好包括识辨视频起始时间的装置，显示与此起始时间同步的多媒体信息的景象。

信息处理系统最好还包括一个显示器，和一个显示控制器，用于显示视频的时间轴以及相应于景象层次的符号。信息处理系统最好还包括用于设置同步特征的装置，启动或解除多媒体信息与视频的同步播放。最好还设置一个许可或不许可对图像的显示作中间处理的中间处理播放特征。这种对图像的显示作中间处理的不许可阻止了当观众开始观看视频图像时图象显示无意义。

信息处理系统最好还包括管理装置，以分级的形式将多媒体信息组织到内容、情节和景象中并管理这种分级的结构。最好还设置设定景象的优先级别，使景象从广播台发送的速率与观众选择显示景象的喜好相对应的设置装置。

信息处理装置最好还包括设置显示模式特征的装置，显示模式特征确定观众是否可以控制多媒体信息的显示。此特征的设置防止观众关闭显示。

图1是用于播放利用本发明的装置和方法生成的多媒体信息的系统的方框图。

图2是本发明生成多媒体信息的装置的方框图。

图3是由图2的多媒体生成装置执行的计算机程序诸部分的方框图。

图4是景象的实物示图。

图5是表示信息分级结构的多媒体信息的目录的示图。

图6是图1的IRD 4的方框图。

图7是播放多媒体信息的由IRD 4执行的计算机程序诸部分框图。

图8是确认由图2的多媒体生成装置生成的同步设置的步骤的流程图。

图9是依照图8的S1和S3步骤在图2所示的多媒体生成装置的显示装置15上进行显示的实例。

图10是确认由图2的多媒体生成装置生成的互动设置处理的步骤的流程图。

图11是景象的连锁结构示图。

图12是按照图10的确认互动设置的过程在显示装置15上进行显示的实例。

图13是设置同步化特征的效果图。

图14是设置中间处理显示特征的效果图。

图15是景象的发送率示图。

图16是另一个景象的发送率示图。

图1显示了播放视频和多媒体信息如MHEG信息或ATVEF信息的广播系统。广播台1发射包含多路多媒体信息信号的电视广播信号。天线3通过卫星2接收这些信号。接收到的信号供给在预定的频道抽取电视和多媒体信号的IRD(集成的接收器和解码器)4。抽取的信号供给显示装置5，用于显示叠加到电视广播视频上的多媒体信息。

图2是根据本发明生成由广播台1传递的多媒体信息的装置的方框图。图2所示的装置可以用于生成任意形式的多媒体信息，例如，MHEG信息或ATVEF信息。但是为此例的目的，将假设图2的装置用于生成MHEG信息。

图2所示的装置包括CPU 11，用于根据存在ROM 12和RAM 13中的程序提供总体控制。CPU 11例如可以是微处理器或类似的装置。CPU 11还执行储存在硬盘14中的多媒体编辑程序，生成MHEG信息。当然，编辑程序可以储存在为CPU 11所能访问的任何计算机可读介质中，如软盘、磁带、光盘等中。

显示装置15向操作者显示MHEG信息和与MHEG信息同步的视频。键盘16和鼠标17使得操作者可以控制装置的运行。例如，包括调制解调器的通信部分18控制通过电话线、英特网等等通信。声音播放装置19播放与视频或MHEG信息同步的声音。

图3表示由CPU 11执行的多媒体信息编辑程序的功能区(诸部分)。如上所示，在本例中假设编辑程序是用于编辑MHEG信息。虽然这些区的每一个从其它的一个或多个区中接收信息并向其它的一个或多个区提供信息，但为了清楚起见，省去区之间指示输入和输出的箭头。

内容生成部分21生成MHEG信息的内容信息。此内容信息对应于与MHEG信息同步的视频(如电视广播的节目)。内容信息提供给内容管理部分24。

内容信息对应于一组情节并包括八条信息：

(1)内容＿名称

(2)服务＿名称

(3)节目＿名称

(4)基本流＿数目

(5)开始＿时间

(6)持续时间

(7)附加＿信息

(8)应用＿数目

在内容＿名称中，例如“内容＿1998_4_1_1”被记录以标明内容的名称。在服务＿名称中，例如“NHK”被记录以标明播放包含多媒体信息的节目的频道。在节目＿名称中，例如“棒球”被记录以标明节目的名称。在基本流＿数目中，例如“10”被记录以标明基本流的数目。在开始＿时间中，例如“+00/00/00”被记录以标明相对于与MHEG信息同步的视频，MHEG信息开始显示的相对时间。在持续时间中，例如“00/00/00”被记录以标明从相对的开始时间起，多媒体信息的显示持续的时间。在附加＿信息中，例如“情节1”被记录以标明该信息对应于第一情节。在应用数目中，例如“3”被记录以标明包含在内容中的情节的数目。

内容生成部分21还管理记录播放一个景象的起始时间和持续时间的应用信息文件(稍后参见图9描述)。

情节生成部分22生成一个情节和情节信息，并将其输出提供给情节管理部分25。一个情节由数个与视频同步的景象组成。情节信息包括四条信息：

(1)基本流_名称

(2)数据＿类型

(3)定型＿信息

(4)景象＿数目

在基本流_名称中，例如“DATA 1”被记录以标明对应于情节的基本流的名称，在数据＿类型中，例如“mheg”被记录以标明多媒体信息的类型。在定型＿信息中，可以记录对应于情节的任何具体信息。在景象＿数目中，例如“3”被记录以标明情节中景象的数目。

景象生成部分23结合“对象”。如图4所示，多个对象构成一个景象(页)，这多个对象可以是文本信息、图像信息、音频信息、操作按钮等等。景象生成部分23的输出提供给景象管理部分26。

景象可以通过包含在视频信号中的同步信号或通过观众的互动操作如启动显示在景象中的操作按钮被关闭或打开。另外，在操作按钮中，可以设置执行预定处理的功能，如提供将被显示的文本信息要求购买商品。

一幅景象由景象数据和六条与这些数据对应的信息组成：

(1)景象＿优先＿级别

(2)文件＿名称

(3)流＿事件＿名称

(4)流＿事件＿时间

(5)流＿名称

(6)基本流＿名称

在景象＿优先＿级别中，例如“1”被记录以标明景象的发送速率(后面描述)。在文件＿名称中，例如“bitmap.jpg”被记录以标明对象的名称。在流＿事件＿名称中，例如“流事件1”被记录以标明流事件的名称。在流＿事件＿时间中，例如“00/00/00”被记录以标明发送景象的起始时间。在流＿名称中，例如“stream link 1”被记录以标明流的名称。在基本流＿名称中，例如“DATA 1”被记录以标明链路目的地的基本流的名称。

景象生成部分23还管理景象信息并记录在这些信息合成特征(下面参照图13进行说明)、中间处理播放模式特征(下面参照图14进行说明)和显示模式特征(下面说明)中。

内容管理部分24、情节管理部分25和景象管理部分26设置内容、情节和景象的目录。实例示于图5中。在本例中，内容C1设置在最高级目录中，情节SC1，SC2和SC3设置在次高级目录中。在情节SC1中，设置三个景象，景象1、景象2和景象3。在情节SC2和SC3中，分别设置景象4和景象5。

再参见图3，时间控制部分27读出将由视频播放部分29播放的视频的时间信息，并将该信息输出给视频和MHEG显示控制部分31。互动控制部分28响应于用户的操作记录用于切换景象显示的设置。

视频播放部分29播放将与MHEG信息同步的视频。MHEG播放部分30播放MHEG信息以检查生成、同步正确与否。视频和MHEG显示控制部分31控制显示装置15(图2)，使得由MHEG播放部分30播放的MHEG信息叠加显示在由视频播放部分29播放的视频信息上。

图6表示用于向观众回放播出的视频和多媒体信息的IRD 4(图1)的结构。包含一个下转换器、调谐器、解调器、解扰器等等的接收处理部分41从天线3上接收到的播放信号中抽取预定的频道成分(电视广播信号和MHEG信息信号)并将这些成分提供给CPU 42。

CPU 42通过执行储存在ROM 43和RAM 44中的控制程序和储存在硬盘45中的MHEG信息播放程序控制IRD 4。播出的视频和MHEG信息显示在显示装置5(图1)上。

显示控制部分46控制MHEG信息对显示在显示装置5上的播出视频的叠加。观众通过键盘47、鼠标48和遥控器49提供输入。通信部分50，例如调制解调器控制电话线、英特网等等的信息通信。

图7表示对于IRD 4储存在硬盘45中并由CPU 42执行的MHEG信息播放程序的诸功能区。视频播放部分54播放观众选择的频道的视频。MHEG播放部分55播放对应于该视频的MHEG信息。视频显示控制部分56控制显示装置5(图1)。该控制致使来自MHEG播放部分55的MHEG信息叠加到来自视频播放部分54的视频上。

目录管理部分51管理MHEG信息的目录，并按照预定的时间将该信息提供给MHEG播放部分55。时间控制部分52利用视频播放部分54响应于MHEG信息而开始播放视频的时间为参考进行时间测量，并通知MHEG播放部分55，如包含在内容信息中的开始＿时间。

互动控制部分53探测观众对键盘47、鼠标48或遥控器49的操作，并依据这些操作进行预定的处理，如转换景象。

再来参见图2所示的生成多媒体信息的装置，通过操作键盘16(图2)并在内容信息中设置预定值(如开始＿时间和持续时间)，可以把景象设置成与在节目＿名称中定义的视频互动地同步。响应于从键盘16或鼠标17接收到的操作者指令，这些设置可以通过CPU 11被确认。作为回应，CPU 11进行如图8的流程图所示的处理。

如该图所示，在步骤S1中，时间控制部分27(图3)读出将由视频播放部分29播放的视频的时间信息(开始时间和结束时间)。此时间信息被提供给视频和MHEG显示控制部分31。如图9所示，视频和MHEG显示控制部分31使显示装置15基于输入的时间信息显示视频的时间轴。

在步骤S2中，时间控制部分27(图3)读出将与视频同步的情节的播放开始时间和播放持续时间。该信息也提供给视频和MHEG显示控制部分31。操作者还对MHEG数据提供发送开始时间(广播开始的时间)和发送持续时间(广播持续的时间)。该信息被记录在内容生成部分21的应用信息文件中。时间控制部分27还读出这些信息并将其提供给视频和MHEG显示控制部分31。

在步骤S3中，视频和MHEG显示控制部分31使显示装置15沿着显示于步骤S1中的时间轴显示播放开始时间、播放持续时间、发送开始时间和发送持续时间。示于图9中的这个显示使操作者能够使MHEG信息的同步设置形象化并确切化。

在图9所示的实例中，对情节SC1和SC2关于相应的视频节目的开始时间设置播放开始时间，播放持续时间，发送开始时间和发送持续时间。在本例中，对于情节SC1，把播放的开始时间设置为和节目的开始时间相同，播放持续时间设置为10分钟，发送开始时间设置为节目开始时间之前5分钟，发送持续时间设置为20分钟。对于情节SC2，把播放的开始时间设置为在节目开始时间之后20分钟，播放持续时间设置为10分钟。发送开始时间设置为在节目的开始时间之后15分钟，把发送持续时间设置为20分钟。

在完成情节播放之后的5分钟的持续时间内，观众可以例如打电话购买演播出的某项物品(在购物的节目中)。因为MHEG生成装置能够记录设置，使只在需要的时间传递MHEG信息，所以转递频道可以通过时间划分的方式高效地转递多个MHEG数据。

参考图10、11、12，对由图2的生成装置准备的MHEG信息进行确认互动设置的过程做以描述。该过程使用户可以在同步设置，如播放开始时间等等被设置并在情节之内连接景象之后对情节关于时间的互动关系(连接关系)形象化，并确定情节关于时间的互动关系的精确性。如图11所示的实例，假设景象1之后观众可能选择显示景象2至5，在景象2之后观众可能选择显示景象6至8。

在一旦接到键盘16或鼠标17(图2)的开始确认处理的指令后，在步骤S21(图10)中，时间控制部分27(图3)读出将由视频播放部分29(图3)播放的视频的时间信息(开始时间和结束时间)，并将此信息提供给视频和MHEG显示控制部分31(图3)。如图12所示，视频和MHEG显示控制部分31使显示装置15(图2)以接收到的时间信息为基准显示视频的时间轴。

在步骤S22中，时间控制部分27接下来读出第一景象(景象1)的播放开始时间和播放持续时间，并将此信息提供给视频和MHEG显示控制部分31。在步骤S23中，如图12所示，视频和MHEG显示控制部分31使显示装置15在视频的时间轴以下显示表征景象1播放持续时间的符号。该符号在视频开始10分钟之后开始。视频和MHEG显示控制部分31还使显示装置15在邻接景象1的符号处显示景象2的符号。视频和MHEG显示控制部分31还使显示装置15在景象2的符号范围之内显示三角标记，指示与景象2相同的级别的其它景象存在(在景象1之后可能的其它显示选择)。

在步骤S24中，互动控制部分28确定用户是否对景象2选择了符号(如由鼠标单击)。如果该部分确定已经选择了景象2的符号，则继续进行步骤S25。

在步骤S25中，如图12所示，视频和MHEG显示控制部分31向下拉动景象3至5的符号，并使显示装置15在景象2的符号下方显示这些符号。

在步骤S26中，互动控制部分28确定用户是否选择了景象2至5中某一个的符号。如果该部分确定这些符号中的某一个被选定，则继续进行步骤S27。在本例中，假设选择了景象2的符号。

在步骤S27中，如图12所示，视频和MHEG显示控制部分31使显示装置15在景象1的符号下方显示景象2的符号，并且还在邻接景象2的符号的位置处显示与景象2相连的景象6的符号。在景象6的符号范围内，显示三角标记，指示与景象6相同的级别的其它的景象存在(景象2之后可能的其它显示选择)。

在步骤S28中，互动控制部分28确定是否选择了景象6的符号。如果该部分确定景象6的符号被选取，则继续进行步骤S29，在步骤S29中，视频和MHEG显示控制部分31向下拉动景象7和8的符号，并在景象6的符号下方显示这些符号。

在步骤S30中，互动控制部分28确定是否已经选择了景象6至8中某一个的符号。如果该部分确定这些符号中的某一个被选定，则继续进行步骤S31。在本例中，假设选择了景象6的符号。

在步骤S31中，视频和MHEG显示控制部分31在景象2的符号下方显示景象6的符号。因为在景象6的符号下层中没有景象存在，所以处理被终止。

内容生成部分21(图3)还使用户可以在视频信息流之内设置同步信号。这些特征通过景象生成部分23设置在景象信息文件中，并由IRD 4处理(图1)。把景象同步特征设置在关闭(on)状态使得景象的转换与视频同步。景象同步特征设置在打开(off)状态使得景象的转换不能与视频同步。

例如，如图13所示，假设景象1至4形成情节SC1，并在景象2中间从视频信号中接收到转换成景象3的同步特征。还假设在方案1中同步特征打开，在方案2中，同步特征关闭。如图13所示，在方案1中(同步特征打开)，在景象2被终止之后，播放景象3(这种播放与视频不同步)。在方案2中(同步特征关闭)，虽然景象2的播放不完全，但景象也不会转换到景象3(执行同步播放)。

景象生成部分23还可以在景象信息文件中设置一个中间处理播放模式特征。例如，如图14所示，假设景象1至3形成情节SC1，这些景象被设置成按序播放，并且在景象2的中间处理当中，开始视频信号对观众播放。还假设，在方案3中，中间处理播放模式特征设置成关闭状态，在方案4中，中间处理播放模式特征设置成打开状态。如图14所示，在方案3中，在该景象的中间处理期间开始景象2的播放(因为中间处理播放模式特征设置成关闭状态，发生中间处理显示)。另一方面，在方案4中，当视频信号开始播放时(例如，IRD 4关闭并开始对接收到的数据解码)，即使景象数据被传递，景象2的播放也不能开始(因为中间处理播放模式特征设置成打开状态，不发生中间处理显示)。被播放的第一景象是景象3，它在景象2的播放时间结束之后并在设置开始播放景象3的时间开始。此特征使有意义的多媒体信息的显示，只与视频同步地显示。

景象生成部分23还可以设置显示模式的特征用于向IRD 4传递，使得观众丧失关闭多媒体信息的能力，否则可以由观众选择。例如，如果景象是一项与商业广告节目视频同步的商业广告节目，不管观众的愿望，在显示装置5上显示的多媒体信息正是所期望的，则可以采用此特征。如果显示模式特征设置为关闭状态，则不管观众对IRD 4控制上的选择如何，景象都将显示。如果显示模式特征设置为打开状态，则观众对IRD 4控制上的选择将确定是否显示MHEG信息。

在景象的景象＿优先级中，景象生成部分23还可以设置一个确定景象从广播系统的传递的速率的数。例如，如图15所示，如果景象1至3形成情节SC1，并且景象1(初始景象)最频繁地被观众选作显示，景象1的发送速率可被设置为，例如“2”，景象2和3的发送速率可以设置为，例如“1”。如图16所示，在以这种方式设置传递速率的情节SC1的信息流中，景象1的信息以景象2和3的频率的两倍发送。这种传递速率减少了在最频繁观看的景象(景象1)由观众选择而被显示之前的时间。虽然对发送速率以整数比为例说明，但可以以任意比例设置。

虽然以上描述的对MHEG信息关于视频的同步设置采用相对时间，但这些同步设置也可以是对于实时或绝对时间设置。

执行上述方法的计算机程序可以储存在任意的计算机可读介质中，如光盘，磁盘或CD-ROM，节目的传播可以通过任意的方式，如英特网或数字卫星。

Claims (46)

1.一种信息处理装置，用于生成伴有向观众传递显示的视频信息的多媒体信息，该信息处理装置包括：

生成上述多媒体信息的生成装置；

识辨上述多媒体信息要与其同步的视频信息的识辨装置；和

设置装置，设置上述多媒体信息的一个或多个景象的显示时间，使得上述显示与上述视频信息的显示同步。

2.如权利要求1所述的信息处理装置，其特征在于上述多媒体信息符合MHEG标准。

3.如权利要求1所述的信息处理装置，其特征在于上述多媒体信息符合ATVEF标准。

4.如权利要求1所述的信息处理装置，其特征在于上述设置装置包括关于上述视频信息显示的相对时间设置上述时间的装置。

5.如权利要求1所述的信息处理装置，还包括：

时间轴显示装置，显示一个对应于上述视频信息的显示的时间的轴；和

显示控制装置，相对于上述轴显示对应于上述一个或多个景象的显示时间的符号。

6.如权利要求1所述的信息处理装置，还包括解除装置，解除上述多媒体信息的景象与上述视频信息的同步显示。

7.如权利要求1所述的信息处理装置，还包括设置一个特征的中间处理装置，用于设置一个避免显示上述多媒体信息的景象的特征，该多媒体信息的播放与上述视频信息同步，在上述视频信息产生的一刻开始，而该视频信息在观众开始播放上述视频信息的时刻之前产生。

8.如权利要求1所述的信息处理装置，还包括管理装置，在内容、情节和景象的层级中组织和管理上述多媒体信息。

9.如权利要求1所述的信息处理装置，还包括传递速率设置装置，设置将多个上述景象传递给上述观众的速率。

10.如权利要求1所述的信息处理装置，还包括显示丧失(disable)装置，该装置设置一个使上述观众禁止上述多媒体信息显示的能力丧失的特征。

11.一种信息处理方法，用于生成伴有向观众传递显示的视频信息的多媒体信息，该信息处理方法包括：

生成上述多媒体信息；

识辨上述多媒体信息要与其同步的视频信息；和

设置上述多媒体信息的一个或多个景象的显示时间，使得上述显示与上述视频信息的显示同步。

12.如权利要求11所述的信息处理方法，其特征在于上述多媒体信息符合MHEG标准。

13.如权利要求11所述的信息处理方法，其特征在于上述多媒体信息符合ATVEF标准。

14.如权利要求11所述的信息处理方法，其特征在于上述设置包括关于上述视频信息显示的相对时间设置上述时间。

15.如权利要求11所述的信息处理方法，还包括：

显示一个对应于上述视频信息显示的时间的轴；和

相对于上述轴显示对应于一个或多个景象显示的时间的符号。

16.如权利要求11所述的信息处理方法，还包括对上述多媒体信息设置一个特征，用于解除上述多媒体信息的景象与上述视频信息的同步显示。

17.如权利要求11所述的信息处理方法，还包括设置一个避免显示上述多媒体信息的景象的特征，该多媒体信息的播放与上述视频信息同步，在上述视频信息产生的一刻开始，而该视频信息在观众开始播放上述视频信息的时刻之前产生。

18.如权利要求11所述的信息处理方法，还包括在内容、情节和景象的层级中组织管理上述多媒体信息。

19.如权利要求11所述的信息处理方法，还包括设置将上述多个景象传递给上述观众的速率。

20.如权利要求11所述的信息处理方法，还包括显示丧失装置，该装置设置一个使上述观众禁止上述多媒体信息显示的能力丧失的特征。

21.一种具有计算机可执行软件代码储存其中的计算机可读介质，用于生成伴有向观众传递显示的视频信息的多媒体信息，该软件代码包括：

用于生成上述多媒体信息的生成代码；

用于识辨上述多媒体信息要与其同步的视频信息的识辨代码；和

用于设置上述多媒体信息的一个或多个景象的显示时间，使得上述显示与上述视频信息的显示同步的设置代码。

22.如权利要求21所示的计算机可读介质，其特征在于上述多媒体信息符合MHEG标准。

23.如权利要求21所述的计算机可读介质，其特征在于上述多媒体信息符合ATVEF标准。

24.如权利要求21所述的计算机可读介质，其特征在于上述设置代码包括关于上述视频信息显示的相对时间设置上述时间的代码。

25.如权利要求21所述的计算机可读介质，其特征在于上述软件代码还包括：

时间轴显示代码，用于显示一个对应于上述视频信息显示的时间的轴；和

显示控制代码，用于相对于上述轴显示对应于一个或多个景象显示的时间的符号。

26.如权利要求21所述的计算机可读介质，其特征在于上述软件代码还包括解除代码，用于解除上述多媒体信息的景象与上述视频信息的同步显示。

27.如权利要求21所述的计算机可读介质，其特征在于上述软件代码还包括一个中间处理设置代码，用于设置一个避免显示上述多媒体信息的景象的特征，该多媒体信息的播放与上述视频信息同步，在上述视频信息产生的一刻开始，而该视频信息在观众开始播放视频信息的时刻之前产生。

28.如权利要求21所述的计算机可读介质，其特征在于软件代码还包括在内容、情节和景象的层级中组织管理上述多媒体信息的管理代码。

29.如权利要求21所述的计算机可读介质，其特征在于软件代码还包括设置将上述多个景象传递给上述观众的传递速率设置代码。

30.如权利要求21所述的计算机可读介质，其特征在于软件代码显示解除码，用于设置一个使观众禁止多媒体信息显示的能力丧失的特征。

31.一种使视频的显示和与此视频对应的多媒体信息同步的装置，该装置包括：

说明上述视频显示的持续时间的装置；

说明在上述持续时间内上述多媒体信息的多个景象的每一个显示周期的装置；

在上述计算机屏幕上显示多个符号的装置，上述符号的每一个对应于上述景象中的一个并代表相对上述持续时间的对应上述景象的周期的相对时间和位置。

32.如权利要求31所述的装置，还包括在上述计算机屏幕上与上述符号同时显示代表显示视频的持续时间的第二符号的装置。

33.如权利要求31所述的装置，其特征在于上述多媒体信息符合MHEG标准。

34.如权利要求31所述的装置，其特征在于上述多媒体信息符合ATVEF标准。

35.一种使视频的播出和与上述视频播出的多媒体信息同步的装置，该装置包括：

说明上述视频播出的持续时间的装置；

说明在上述持续时间内上述多媒体信息的多个景象的每一个播出周期的装置；

在上述计算机屏幕上显示多个符号的装置，上述符号的每一个对应于上述景象中的一个并代表相对上述持续时间的对应上述景象的周期的相对时间和位置。

36.如权利要求35所述的装置，还包括用于在上述计算机屏幕上与上述符号同时显示代表所述视频的播出持续时间的第二符号的装置。

37.如权利要求34所述的装置，其特征在于上述多媒体信息符合MHEG标准。

38.如权利要求34所述的装置，其特征在于上述多媒体信息符合ATVEF标准。

39.一种具有计算机可执行软件代码储存其中的计算机可读介质，用于使视频的播出和与上述视频播出的多媒体信息同步，该软件代码包括：

用于说明上述视频显示的持续时间的代码；

用于说明在上述持续时间内上述多媒体信息的多个景象的每一个显示周期的代码；

在上述计算机屏幕上显示多个符号的代码，上述符号的每一个对应于上述景象中的一个并代表相对上述持续时间的对应上述景象的周期的相对时间和位置。

40.如权利要求39所述的计算机可读介质，其特征在于软件代码还包括在上述计算机屏幕上与上述符号同时显示代表显示视频的持续时间的第二符号的代码。

41.如权利要求39所述的计算机可读介质，其特征在于上述多媒体信息符合MHEG标准。

42.如权利要求39所述的计算机可读介质，其特征在于上述多媒体信息符合ATVEF标准。

43.一种具有计算机可执行软件代码储存其中的计算机可读介质，用于使视频的播出和与上述视频播出的多媒体信息同步，该软件代码包括：

用于说明上述视频播出的持续时间的代码；

用于说明在上述持续时间内上述多媒体信息的多个景象的每一个播出周期的代码；

在上述计算机屏幕上显示多个符号的代码，上述符号的每一个对应于上述景象中的一个并代表相对上述持续时间的对应上述景象的周期的相对时间和位置。

44.如权利要求43所述的计算机可读介质，其特征在于软件代码还包括用于在上述计算机屏幕上与上述符号同时显示代表所述视频的播出持续时间的第二符号的代码。

45.如权利要求43所述的计算机可读介质，其特征在于上述多媒体信息符合MHEG标准。

46.如权利要求43所述的计算机可读介质，其特征在于上述多媒体信息符合ATVEF标准。

Images