CN111402935A - 音视图数据的播放方法 - Google Patents

Abstract

本发明公开了一种音视图数据播放的方法，包括：下载音视图数据并对其进行解析，以获得上层音图数据中的上层图片音频、上层图片和/或上层图片对准参数和/或上层音频对准参数；自动或者在接收到播放上层图片音频或者上层图片的命令时，播放所述上层图片音频或者上层图片，并在所述上层图片对准参数或者上层音频对准参数指示的播放时间到达，或者在接收到播放上层图片音频或者上层图片的命令时，播放对应的上层图片或者上层图片音频。利用本发明可以使任何图片都能够使某一图片和某一特定音频段落相对应地播放，实现了音频内容和图片内容的完美匹配或关联；另一方面，还能够方便地实现音图数据、影视数据链式或者层式播放和嵌入播放。

Description

音视图数据的播放方法

技术领域

本发明涉及一种媒体播放技术，具体是一种多种媒体交叉播放的方法；属于互联网媒体技术。

背景技术

媒体播放方式有音频、视频、动画、图片等单独播放的方式，也有音频和图片组合播放的方式。现有的音频和图片组合播放时，通常是在播放一段音频时，陆续地按照一定的顺序依次播放一个或者多个图片。这种播放方式虽然可以做到音图并茂，但也有一个重大的缺点：音频的播放与图片呈现的方式基本上无关。即：各个图片在播放时，虽然可以由观看者顺序或者倒序控制播放的顺序，但是音频只能顺序播放，不能像切换图片那样倒回去。这样就使音频和图片组合播放时，音频的内容和图片的内容无法得到对应。这种缺陷使得现有音频和图片组合播放的媒体播放方式在很多网络培训、授课、交流中无法得到应用或者用户体验很差。

此外，在一些场景下，将音频和图片组合播放这种形式与短视频或者动画结合起来是非常有意义的。例如：在进行机械原理网络授课的场景中，一方面需要教师结合静态的机械图纸来讲解有关的专业内容，另一方面，演示相应机械结构在工作状态下的运动过程更有助于学生对教师讲授的理论内容的理解。但是，采用现有的媒体播放方式，要么只能使用前述音频和图片组合播放的方式，要么只能单独使用视频或者动画演示的方式，而不能将两者有机地结合起来，相互嵌套。如果只是使用音频和图片组合播放的方式，则往往会使得教师讲述的内容过于枯燥，造成学生学习的效果不理想；但如果只是用视频或者动画播放的方式来授课，则一方面视频或者动画的制作成本较高，另一方面，播放时也需要较好的网络传输质量和较高的带宽资源，成本高，并且对于网络环境相对不是很好或者很稳定的地区，这样的网络授课方式也会受到限制。

发明目的

本发明的主要目的是提供一种音视图数据的播放方法，借助于该方法，一方面，可以在播放音图数据时，可以使任何图片都能够和前述的音频中某一特定段落相对应地播放，实现音频内容和图片内容的完美匹配或关联；另一方面，可以在播放影视数据时，为随时切换或者嵌套其他音图数据、影视数据做好必要的准备。

本发明的目的是采用如下的技术方案实现的：

下载音视图数据并对其进行解析，以获得所述上层音图数据中的上层图片音频、上层图片和/或上层图片对准参数和/或上层音频对准参数；

播放所述上层图片音频或者上层图片，并在所述上层图片对准参数或者上层音频对准参数指示的播放时间到达，或者在接收到播放所述上层图片音频或者上层图片的命令时，播放对应的所述上层图片或者上层图片音频；

或者，

下载音视图数据并对其进行解析，以获得所述上层影视数据中的上层视频数据或者上层动画数据、下层音图标识和/或下层影视标识；

自动，或者在接收到播放所述上层视频数据或者上层动画数据时，播放所述上层视频数据或者上层动画数据。

利用本发明上述的方法，人们可以预先对要播放的图片以及相应的音频段落进行关联处理，获得它们之间在播放时的对准(关联)参数；在播放时，则根据预先形成的、并且与这些音图数据或影视数据一同下载的参数来对有关的音图数据或影视数据的播放进行控制，可以使任何图片都能够和前述的某一特定音频段落相对应地播放，实现了音频内容和图片内容的完美匹配或关联；另一方面，还能够方便地实现音图数据、影视数据链式或者层式播放和嵌入播放。

以下，将结合各个具体的实施方式，对本发明的技术方案做更为详细的披露。

具体的实施方式

在详细介绍本发明的各个具体实施方式之前，有必要先对本发明涉及的一些数据对象和术语做一个具体的说明。本发明人在对本发明的各类技术方案进行研究和开发的时候，对本发明涉及的各个数据对象做了系统性的梳理，由此建立和定义了如下的若干数据对象：

1.音视图数据：音视图数据主要有音图数据、影视数据、同层音图标识和同层影视标识。

2.音图数据：音图数据主要有两种类型。

第一种类型的音图数据是由一幅静态图片和一段将和该图片一道播放的音频所构成；对于该静态图片，在本发明中统称为图片；而对于该音频，在本发明中统称为图片音频。此外，在音图数据中还设计有被本发明人称之为对准参数的数据；对准参数根据其作用的不同，被分为图片对准参数和音频对准参数。

第二种类型的音图数据是由多幅静态图片和多段与多幅静态图片对应播放的音频所构成；对于这些静态图片，在本发明中也统称为图片；而对于这些音频，在本发明中也统称为图片音频。此外，由于图片和音频都是多个，因此，在音图数据中被设计的对准参数与之相对应，也是多个；其数量和图片的数量或者音频的数量是对应的；第二种类型音图数据中的对准参数与第一种类型的音图数据一样，也被分为图片对准参数和音频对准参数。

在本发明中音图数据是一个完整的数据对象，它可以采用现有的任何图片、音频以及信息的数据格式拼合构成，也可以在具体的方案中，由相关的技术人员根据具体的需要将它们重新构成一个全新格式的一体化数据对象。而无论如何，在本发明中，只要具有上述数据成分的数据对象，都被称之为音图数据。

3.影视数据：影视数据则主要是由视频数据或者动画数据所构成，除此之外，影视数据中还设计有下层音图标识和下层影视标识这两种数据。一般而言，影视数据中可以设计为只有一个视频数据或者动画数据；当然，也可以设置有多个视频数据或者动画数据，那样的话，需要在设计播放软件更加细心，一面出现数据逻辑上的错误，而对于本发明的技术方案而言，不过是增加了更多的组合方式而已。

4.同层音图标识和同层影视标识。

同层音图标识是用来告诉播放设备：在已经下载的这个音图数据或者影视数据之后，是不是还存在需要后续下载和播放的音图数据；为此，在同层音图标识中至少要包含同层音图下载参数和同层音图播放参数，同层音图下载参数用来指示后续音图数据如何下载，同层音图播放参数用来告诉播放设备在什么时候播放下载好的后续音图数据。

同层影视标识是用来告诉播放设备：在已经下载的这个音图数据或者影视数据之后，是不是还存在需要后续下载和播放的影视数据；为此，在同层影视标识中至少要包含同层影视下载参数和同层影视播放参数，同层影视下载参数用来指示后续影视数据如何下载，同层影视播放参数用来告诉播放设备在什么时候播放下载好的后续影视数据。

5.上层、下层和同层的含义。

基于此后的各类具体的实施方式就可以看到，本发明技术方案的一类非常有价值的方案是可以实现如下的技术效果：可以将多个本发明的音视图数据组成音视图数据“链”，这个“链”上的多个音视图数据可以顺序播放；另一方面，前述音视图数据“链”上的任何一个音视图数据在播放时，均可以插入播放另一个音视图数据，而这个被插入播放的音视图数据可能是下一层音视图数据“链”中的一个音视图数据。显然，由此就出现了音视图数据同层、上下层等结构关系，为了在本发明后续各类具体的实施方式中描述方便，本发明人引入“上层”、“下层”和“同层”等概念，用于作为音图数据、影视数据以及相应数据内容的定语，其描述的含义正如前面所述内容的解释。

在本发明的第1类具体的实施方式中，主要是针对音图数据播放的具体方案，在这个方案中：首先需要下载以音图数据为主体的音视图数据；当这个音图数据被下载到播放设备中以后，需要对其进行解析；具体的解析方案，则需要根据前述的音图数据的具体格式来进行。通过解析，就可以从音图数据中获得可以用来播放的图片、图片音频。接下来，播放就可以开始播放音图数据中的图片音频，同时将图片一并显示。

在本发明的第2类具体的实施方式中，如前所述，在一些情形下，与前述第1类具体实施方式中的音图数据不同，音图数据中的图片音频或者图片的数量还会出现后面的三种情形：a.一个图片音频和多幅图片；b.多个图片音频和一幅图片；c.多个图片音频和多幅图片。这时，就需要使用对准参数来指示播放设备如何来播放这样的音图数据。当然，基于前述的三种情况，对准参数不仅分为图片对准参数和音频对准参数，还分为一对多，多对一以及多对多等三种情形。

当音图数据中包含有一个图片音频和多幅图片时，在播放时，首先开始播放图片音频，在播放图片音频的同时或者之后，陆续显示多个图片。对应于这种情况，在音图数据中配置的对准参数是多个图片对准参数，它们分别与多个图片一一对应，分别用来指示所对应的图片在图片音频播放到什么时候开始显示。

当音图数据中包含有一幅图片和多个图片音频时(尽管这种可能的情况很少)，在播放时，则是首先开始显示图片，在显示图片的同时或者之后，陆续播放多个图片音频。对应于这种情况，在音图数据中配置的对准参数是多个音频对准参数，它们分别与多个图片音频一一对应，分别用来指示所对应的图片音频在图片显示到什么时候开始播放。这种音图数据中包含有一幅图片和多个图片音频的情形，往往可以用于那种有下层音视图数据要插入播放，或者可以用于被其他音视图引用的情形。

当音图数据中包含有多个图片音频和多幅图片时，在播放时，首先开始播放的是图片音频还是图片，则需要根据图片对准参数或者音频对准参数来确定。当然，这些图片对准参数或者音频对准参数的数量分别与图片或者图片音频的数量一一对应，分别用来指示所对应的图片或者图片音频播放的时机。

此外，在一些情形下，图片对准参数可以被设置为对应的图片音频的索引或者标志；这样，在播放某一图片时，播放设备可以根据该图片对应的图片音频的索引或者标志，找到下载到播放设备的音频段落并执行播放该音频段落的步骤。同样，音频对准参数可以被设置为对应图片的索引或者标志；这样，在播放某一音频的时候，播放设备可以根据该音频对应图片的索引或者标志，找到下载到播放设备的图片并执行显示该图片的步骤。这样做的好处是：对于音图数据的播放，无论自动的还是用户人为控制的，都可以根据前述的方式，使得被播放的图片和图片音频总能够准确地对应，而再也不会出现图片的显示与音频的播放毫无关联的情形。真正做到音、图并茂。

需要额外地说明的是：前述这种将对准参数设置为索引或者标识的方式，不仅仅能够使用在音图数据的播放控制，同样可以使用于影视数据的播放控制。所不同的只是这些对准参数设置于何处；这一点，在本发明后续的具体实施方式中还会进行披露。此外，前述的音图数据也好，影视数据也罢，其都涵盖了上层、同层和下层等各种情形。在此不再赘述。

如前所述，本发明第1、2类具体实施方案实现了这样的技术效果：在播放一个由一段以上的音频和一幅以上的图片所组成的音图数据时，由于引入了图片音频对准参数或者图片对准参数，就可以使得任何一段图片音频都可以和与之相应的图片关联播放，从而做到播放的图片和音频具有用户所需要的相关性；使得现有技术中的音频与图片无法关联的缺陷得到克服。更为有意义的是：这种图片和音频的对应，使得音图数据作为一种新的数字媒体形式，可以被方便地制作和灵活地播放。

本发明的第3类具体实施方式是关与音视图数据是影视数据的情形。在这种情况下，当然，首先还是下载并解析该音视图数据，在这个音视图数据的影视数据中，通常包含一个视频数据或者一个动画数据，实际上，无论是视频数据还是动画数据，在观看者那里的视觉感受是没有太大的区别的，无非都是一些列动态影像和伴音音频的组合。只是视频数据和动画数据在存储格式上有些区别而已。在从影视数据中解析出视频数据或者动画数据后，就可以开始播放它们。

在执行上述操作的同时或者之后，本发明的一个必要的步骤是需要从下载的音视图数据中解析出其中所携带的下层音图标识、下层影视标识。如前所述，本发明的众多具体的实施方式中，包括在上层的一个音视图数据播放的时候，可以插入播放下层的音视图数据的方案。而这类方案的实现，需要在音视图数据中事先设置好需要插入播放的音视图数据的标识。这种音视图数据的标识可以是关于音图数据的标识，也可以是关于影视数据的标识，或者两种兼而有之，具体视需要插入的数据类型去置入。这些标识分别被称作下层音图标识、下层影视标识，分别用来告知播放设备需要插入的有哪些音视图数据。此外，需要说明的是：这些下层音图标识、下层影视标识分别可以是一个或者多个。

本发明第3类具体实施方案实现了这样的技术效果：由于引入了下层音图标识、下层影视标识，就可以在播放当前的影视数据的时候，随时可以插入播放一个下层的音图数据或者影视数据。这为某些知识性音视图数据的制作和播放提供了引用播放背景信息和知识的手段；更实现了音视图数据的多层次结构。

在本发明上述的所有具体实施方式是本发明最为基础的若干类具体的技术方案，其中，所有的音视图数据被下载后，其播放的条件都可能有三种，第一种是下载后自动播放，第二种是按照相应的对准参数的指示进行播放，第三种则是在接收到播放图片音频或者图片的命令，或者接收到播放视频数据或者动画数据的命令时开始播放。

在本发明上述的所有具体实施方式中，无论是音图数据还是影视数据以及各自包含在其中的各个组成，都可以被看做是上层的数据或者标识。因此，在本发明的文本中，均在它们的前面增加了定语“上层”，以表示它们在本发明的音视图数据播放技术方案中的具体位置。

如前所述，本发明的音图数据中，可以有a.一个图片音频和多个图片，b.多幅图片音频和一个图片，c.多个图片音频和多幅图片以及d.一个图片音频和一幅图片等四种情况，这就使得音图数据的产生非常灵活。人们可以根据音图数据的生成、播放、相互引用以及嵌套播放来生成各种类型的音图数据。基于这样的背景，就有了将多个相互独立的音图数据串行播放的情形。本发明把这些相互独立且串行播放的音图数据称为：同层音图数据，在音视图数据这个整体下，它们之间的结构关系是同层关系。

为此，基于前述本发明的第1、2、3类具体实施方式中的任何一种，在本发明第4类具体的实施方式中，就需要在音视图数据中设置同层音图标识。当设置有同层音图标识的同层音视图数据被下载后，播放设备可以将它们从中解析并提取出来。在同层音图标识之中，一般设置有同层音图下载参数和同层音图播放参数，同层音图下载参数用以指示播放设备如何下载对应的同层音图数据，例如：同层音图下载参数可以直接就是一个链接地址，用以指向被下载的同层音图数据的互联网地址；再例如：它也可以是一个代码串，播放设备获得这个代码串以后，可以向固定的服务器发送带有这个代码串的下载请求，服务器端则根据带有这个代码串的请求来生成或者查询对应的同层音图数据，并与相应的播放设备做进一步的下载操作。同层音图播放参数则是用来指示播放设备在什么时候，以什么样的方式来播放下载的同层音图数据。显然，在一个音视图数据中，除了第一个被下载的音图数据之外，与该第一个被下载音图数据处于同一层的其他音图数据才是同层音图数据。同层音图数据可以有多个，与此相对应，同层音图标识也相应地被设置为多个，它们分别于同层音图数据相对应。

在前述本发明第4类具体实施方式中，仅涉及了同层音图数据这一种情形。实际上，与第一个被下载、播放的音图数据以及前述同层音图数据具有同层、串行播放关系的还有同层影视数据。也就是说：在一个音视图数据“链”中，也可以存在同层音图数据和同层影视数据依次混合串行的情形。

为此，基于前述本发明的第1、2、3类具体实施方式中的任何一种，在本发明第5类具体的实施方式中，还可以在音视图数据中设置同层影视标识。当设置有同层影视标识的同层音视图数据被下载后，播放设备可以将它们从中解析并提取出来。在同层影视标识之中，一般设置有同层影视下载参数和同层影视播放参数，同层影视下载参数用以指示播放设备如何下载对应的同层影视数据，例如：同层影视下载参数可以直接就是一个链接地址，用以指向被下载的同层影视数据的互联网地址；再例如：它也可以是一个代码串，播放设备获得这个代码串以后，可以向固定的服务器发送带有这个代码串的下载请求，服务器端则根据带有这个代码串的请求来生成或者查询对应的同层影视数据，并与相应的播放设备做进一步的下载操作。同层影视播放参数则是用来指示播放设备在什么时候，以什么样的方式来播放下载的同层影视数据。显然，在一个音视图数据中，除了第一个被下载的音图数据之外，与该第一个被下载影视数据处于同一层的其他影视数据才是同层影视数据。同层影视数据可以有多个，与此相对应，同层影视标识也相应地被设置为多个，它们分别于同层影视数据相对应。

前述的本发明第4类和第5类具体实施方式，在很多情况下是结合在一起使用的，这些情况实际上是在一个音视图数据中，除了首先下载播放的那个音图数据之外，此后还存在一个或者多个同层音图数据、一个或者多个同层影视数据；这些同层音图数据和同层影视数据的排放顺序可以是任意的。

本发明第6类具体实施方式：前述本发明第4类和第5类具体实施方式中，涉及的仅仅是第一个被下载和播放的是音图数据的情形。事实上，对于第一个被下载和播放的是影视数据的情形，也同样存在同层音图数据和/或同层影视数据顺序下载和播放的情形。有关同层音图数据和/或同层影视数据顺序下载和播放的具体实施方式，与前述本发明第4和第5具体实施方式中相应的同层音图数据和/或同层影视数据的下载和播放方案是相同的。

上述有关本发明第4类、第5类和第6类具体实施方式，一方面，一个或者多个同层音图数据、一个或者多个同层影视数据串行播放，为音视图数据组织、下载和播放提供了非常灵活的优势；另一方面，这种技术方案也可以被用来合理地配置和使用网络带宽。由于同层音图数据、同层影视数之间的播放关系是串行，在网络带宽资源有限的情况下，可以按照播放的次序，分批次下载不同的同层音图数据和同层影视数据；这样能更加有效地利用带宽资源，给用户带来更为良好的播放体验。

如此前本发明具体实施方式4、5、6所述的那样，尽管同层音图数据和/或同层影视数据是根据同层音图标识和/或同层影视标识下载的，但对于下载到播放设备的这些同层音图数据和/或同层影视数据的播放，还需要一个合适的操作处理，而不是简单地下载了就开始播放。因此，在本发明前述各个具体实施方式中任何一种的基础上，本发明第7类具体实施方式中提供了如下的具体方案：

在同层音图播放参数所指示的播放时间到达的时候，需要终止播放上层图片音频或者上层图片，或者，终止播放上层视频数据或者上层动画数据；然后再播放同层图片音频或者同层图片，并在同层图片对准参数或者同层音频对准参数所指示的播放时间到达时，播放对应的同层图片或者同层图片音频。这样做的目的在于：如果在同层音图播放参数所指示的播放时间到达的时候，上层音图数据或者上层影视数据还处于正在播放的状态，则需要终止上层音图数据或者上层影视数据的播放，然后才能开始播放同层音图数据；从而避免了上层音图数据或者上层影视数据与同层音图数据同时播放。

此外，有的时候，当同层音图数据已经被下载到播放设备之中，而上层音图数据或者上层影视数据还没有播放完，用户去希望立即播放同层音图数据或者同层影视数据，这种情形应该也是常见的。在本发明第7类具体实施方式中提供了可以由用户来直接干预同层音图数据或者同层影视数据播放的方式，即：在接收到启动播放同层音图数据或者影视数据的用户命令时，终止播放所述上层图片音频或者上层图片；或者，终止播放所述上层视频数据或者上层动画数据；

与前述播放同层音图数据的操作基本相同，在播放同层影视数据的时候，也分为同样的两种情形，针对这两种情形，在本发明前述第1-6类具体实施方式中任何一种的基础上，本发明第8类具体实施方式如下：

在同层影视播放参数所指示的播放时间到达时，终止播放上层图片音频或者上层图片；或者，终止播放上层视频数据或者上层动画数据；然后开始播放已经下载的同层视频数据或者同层动画数据。

此外，在接收到启动播放同层影视数据的用户命令时，终止播放上层图片音频或者上层图片；或者，终止播放上层视频数据或者上层动画数据；然后开始播放已经下载的同层视频数据或者同层动画数据。

前述本发明第7类和第8类具体实施方式的技术方案主要提供了播放同层音图数据或者同层影视数据的方案；其中，均仅仅涉及了启动播放同层音图数据或者同层影视数据的操作；在一些情况下，该同层音图数据或者同层影视数据播放完成后，则播放操作停止。但是，如前所述，在一些情况下，除了当前播放的这个同层音图数据或者同层影视数据之外，还存在其他同层音图数据或者同层影视数据，在音视图数据中，也存在着多个同层音图标识和/或同层影视标识以指示播放设备：存在多个同层音图数据或者同层影视数据。这个时候，就需要对如何从当前音图数据或者影视数据的播放切换到其他同层音图数据或者同层影视数据的播放进行处理。

在本发明第9类具体实施方式的技术方案中，基于前述本发明第7类和第8类具体实施方式当前同层音图数据的播放的情形，还进一步提供了如下的方案：当接收到终止播放当前正在播放的同层音图数据的用户命令，或者当前同层音图数据播放结束时；根据前述同层音图标识和/或同层影视标识，顺序播放其他同层音图数据或者同层影视数据。

类似地，在本发明第10类具体实施方式的技术方案中，基于前述本发明第7类和第8类具体实施方式当前同层影视数据的播放的情形，还进一步提供了如下的方案：当接收到终止播放当前正在播放的同层影视数据的用户命令，或者当前同层影视数据播放结束时；根据前述同层音图标识和/或同层影视标识，顺序播放其他同层音图数据或者同层影视数据。

本发明前述第9类、第10类具体实施方式，提供了在音视图数据中存在多个同层音图数据和/或同层影视数据的情形下，如何实现多个同层音图数据和/或同层影视数据播放的方案，使得如前所述的音视图数据“链”获得丰富的播放方式。另外，正是由于本发明第9类、第10类具体实施方式的提供，也为以音视图数据为基础的音视图节目的制作和表达，有了相比于传统影视节目的剪辑、非线性编辑更为丰富和灵活的表达方式。

需要额外再指出的是：对于任何音图数据、影视数据，都存在前述“上层”、“下层”和“同层”这三个概念。

具体而言，对于一个“上层音图数据”，根据音视图数据中的同层音图标识、同层影视标识的指示，都有可能存在“同层音图数据”和“同层影视数据”，而前述的“上层音图数据”相对于它的“同层音图数据”和“同层影视数据”而言，也是“同层音图数据”。同样，对于一个“上层影视数据”，根据音视图数据中的同层音图标识、同层影视标识的指示，都有可能存在“同层音图数据”和“同层影视数据”，而前述的“上层影视数据”相对于它的“同层音图数据”和“同层影视数据”而言，也是“同层影视数据”。

此外，在此后的若干类具体实施方式中，还会出现“下层音图数据”和“下层影视数据”。所谓“下层音图数据”和“下层影视数据”是相对于“上层音图数据”和“上层影视数据”而言的。即：“下层音图数据”和“下层影视数据”是“上层音图数据”和“上层影视数据”的下层。但是，就像任何一个“上层音图数据”或者“上层影视数据”都会具有“同层音图数据”和/或“同层影视数据”一样，任何一个“下层音图数据”或者“下层影视数据”也都会具有“同层音图数据”和/或“同层影视数据”；并且，任何一个“下层音图数据”或者“下层影视数据”相对于它的“同层音图数据”和“同层影视数据”而言，也是“同层音图数据”或者“同层影视数据”。由此可知：“上层音图数据”或者“上层影视数据”的“同层音图数据”和“同层影视数据”与“下层音图数据”或者“下层影视数据”的“同层音图数据”和“同层影视数据”之间，也同样是“上层音图数据”或者“上层影视数据”与“下层音图数据”或者“下层影视数据”之间的关系。

在此后的各类具体实施方式，均涉及下层“下层音图数据”和/或“下层影视数据”。

为了能够在播放一个上层音图数据的时候，还能够插入播放下层音图数据或者下层影视数据，在本发明的音视图数据中，还需要设置下层音图标识和/或下层影视标识；在下层音图标识中，至少包含下层音图下载参数和下层音图播放参数；其中，下层音图下载参数用来指示播放设备如何下载相应的音图数据，而下层音图播放参数用来指示播放设备在什么时间开始播放相应的音图数据；在下层影视标识中，至少包含下层影视下载参数和下层影视播放参数；其中，下层影视下载参数用来指示播放设备如何下载相应的影视数据，而下层影视播放参数用来指示播放设备在什么时间开始播放相应的影视数据。

为此，在本发明第12类具体实施方式中，在本发明第1、2、3类具体实施方式的基础上，还包括对音视图数据进行解析，并从中解析获得下层影视标识的操作。如果音视图数据中存在前述的下层影视标识，说明在上层影视数据播放的时候，需要插入播放一个或者多个下层影视数据；由此，播放设备会根据下层影视标识下载与该下层影视下载参数对应的下层影视数据；其中：该下层影视数据的数据内容和结构与上层影视数据的数据内容和结构是相同的，至少由下层视频数据或者下层动画数据。

本发明第12类具体实施方式在本发明第1、2、3类具体实施方式的基础上提供了基于下层影视标识下载下层影视数据的具体技术方案，为在播放上层音图数据或者影视数据时，进一步插入播放下层影视数据提供了数据准备的操作。

在本发明第11、12类具体实施方式中，下层音图下载参数和下层影视下载参数与前述同层音图下载参数或者同层影视下载参数是类似的，可以直接就是一个链接地址，用以指向被下载的下层音图数据或者下层影视数据的互联网地址；它也可以是一个代码串，播放设备获得这个代码串以后，可以向固定的服务器发送带有这个代码串的下载请求，服务器端则根据带有这个代码串的请求来生成或者查询对应的下层音图数据或者下层影视数据，并与相应的播放设备做进一步的下载操作。

在本发明第13类具体实施方式中，基于前述第11类具体实施方式，由于在本发明第11类具体的实施方式中，为下层音图数据的播放下载了相应的下层音图数据；因此可以进一步执行如下的操作：在下层音图播放参数所指示的播放时间到达时，或者，在接收到启动播放下层音图数据的用户命令时，中止播放当前正在播放的上层图片音频或者上层图片，并生成对应的上层音图数据中止播放标记；或者，中止播放所述上层视频数据或者上层动画数据，并生成对应的上层影视数据中止播放标记；

由于下层音图数据的播放是在上层音图数据或者上层影视数据播放的时候插入播放的，因此，在下层音图数据播放结束后，还需要返回到原来的插入点，并从该插入点起继续播放后续还没有播放的上层音图数据或者上层影视数据，所以，需要在播放下层音图数据之前对前述的插入点进行记录，以确保能返回。因此，本发明的第13类具体实施方式中提供了生成对应的上层音图数据终止播放标记或者上层影视数据中止播放标记的方案。需要另外说明的是：如前所述，相对于本发明的下层音图数据而言，它可以具有多个上层音图数据和/或上层影视数据；因此，在一些情况下，插入播放下层音图数据的时间点，可能会恰好在两个上层数据的播放之间，即：在一个上层音图数据播放结束后，并且在一个上层音图数据或者上层影视数据播放之前；或者，在一个上层影视数据播放结束后，并且在一个上层音图数据或者上层影视数据播放之前。在这样的情形下，同样也属于前述插入播放。因此也同样需要生成对应的上层音图数据终止播放标记或者上层影视数据中止播放标记。

在前述中止播放标记被生成的同时或之后，执行播放下层图片音频或者下层图片，并在下层图片对准参数或者下层音频对准参数所指示的播放时间到达时，播放对应的下层图片或者下层图片音频。

在本发明第14类具体实施方式中，基于前述第11类具体实施方式，由于在本发明第11类具体的实施方式中，为下层影视数据的播放下载了相应的下层影视数据；因此可以进一步执行如下的操作：在下层影视播放参数所指示的播放时间到达时，或者，在接收到启动播放下层影视数据的用户命令时，中止播放当前正在播放的上层图片音频或者上层图片，并生成对应的上层音图数据中止播放标记；或者，中止播放所述上层视频数据或者上层动画数据，并生成对应的上层影视数据中止播放标记；

由于下层影视数据的播放是在上层音图数据或者上层影视数据播放的时候插入播放的，因此，在下层影视数据播放结束后，还需要返回到原来的插入点，并从该插入点起继续播放后续还没有播放的上层音图数据或者上层影视数据，所以，需要在播放下层音图数据之前对前述的插入点进行记录，以确保能返回。因此，本发明的第14类具体实施方式中提供了生成对应的上层音图数据终止播放标记或者上层影视数据中止播放标记的方案。需要另外说明的是：如前所述，相对于本发明的下层影视数据而言，它可以具有多个上层音图数据和/或上层影视数据；因此，在一些情况下，插入播放下层影视数据的时间点，可能会恰好在两个上层数据的播放之间，即：在一个上层音图数据播放结束后，并且在一个上层音图数据或者上层影视数据播放之前；或者，在一个上层影视数据播放结束后，并且在一个上层音图数据或者上层影视数据播放之前。在这样的情形下，同样也属于前述插入播放。因此也同样需要生成对应的上层音图数据终止播放标记或者上层影视数据中止播放标记。

在前述中止播放标记被生成的同时或之后，执行播放下层影视数据中的下层视频数据或者下层动画数据的操作。

本发明第13、14类具体实施方式，是在本发明前述第1、2、3类具体实施方式的基础上，增加了插入播放下层音图数据或者下层影视数据的技术方案。这两类技术方案还分别可以引入结合本发明前述第4至12类具体实施方式的技术方案。因此，可以带来如下更为有意义的技术效果：

如前所述，本发明第1-12类具体的实施方式，提供了多种同层音图数据和/或同层影视数据链式播放的方案，既可以一次只播放一个音图数据或者影视数据，也可以播放多个前后衔接的多个音图数据和影视数据所组成的影视图数据链。

而本发明第13、14类具体实施方式则是在前述本发明第1-12类具体实施方式的基础上，增加了下层音图数据或者下层影视数据插入播放的技术方案。如前所述：无论下层音图数据或者下层影视数据，也可以分别拥有它们各自的同层音图数据或者同层影视数据；这样一来，本发明第13、14类具体实施方式为本发明提供了上下分层，每层均可以有多个插入点，每个插入点又可以插入下层“链式”的音视图数据。这为本发明的技术方案用于多种应用领域和情形，提供了极为丰富的方案支持。

本发明第15类具体实施方式提供了下层音图数据或者下层影视终止播放及此后所要执行的技术方案。如前所述，下层音图数据或者下层影视数据的播放是在上层音图数据播放时插入的，因此，无论播放的是单独的一个下层音图数据或者影视数据，还是由多个下层音图数据或者下层影视数据所组成的“同层音视图数据链”，只要这个“链”被依序播放，当这个“链”播放结束时；需要执行如下的操作：基于上层音图数据中止播放标记继续播放上层音图数据；或者，基于上层影视数据中止播放标记继续播放上层影视数据。

本发明第16类具体实施方式提供了下层音图数据或者下层影视终止播放及此后所要执行的技术方案。

区别于本发明第15类具体实施方式的另外一种情况是：无论播放的是单独的一个下层音图数据或者下层影视数据，或者播放的是由多个下层音图数据或者下层影视数据所组成的“同层音视图数据链”，在这个“链”中任何一个下层音图数据播放时，播放设备接收到终止播放该下层音图数据或者下层影视数据的用户命令时，基于上层音图数据中止播放标记继续播放上层音图数据；或者，基于上层影视数据中止播放标记继续播放上层影视数据。

本发明第15、16类具体实施方式所提供的技术方案，保证了本发明下层音图数据或者影视数据播放结束后，能够返回播放上层音图数据或者影视数据。使得本发明前述各个具体实施方式更为完善。

在前述所有的具体实施方式中，分别涉及到：上层图片对准参数、上层音频对准参数、下层音图标识、下层影视标识、下层音图下载参数、下层音图播放参数、同层音图标识、同层影视标识、同层音图下载参数、同层音图播放参数、同层图片对准参数、同层音频对准参数等设置在音视图数据中的信息，这些信息在整个音视图数据中的存在方式，可以采用与音频、图片、视频、动画等数据相互分离的方式，例如：将这些信息单独构建一个信息包(流)，然后再将这个信息包(流)和音频、图片、视频、动画等数据组合在一起。也可以将这些信息嵌入到音频、图片、视频、动画等数据之中，使这些信息分别与这些音频、图片、视频、动画等数据融为一体。这样就可以在传输这些音频、图片、视频、动画的时候，将这些信息也随带着一并传输。编号为PCT/CN2016/087445的国际专利申请公开了一种将数据嵌入到音频数据之中的一种技术方案。在视频、动画数据中也保留有相应音频数据的空间，因此，将数据嵌入到视频、动画数据之中，实际上也就是将数据嵌入到视频或者动画数据内的音频数据之中的技术方案。除此之外，一些图片格式、视频格式以及动画格式中也保留了一些可选的字段，以允许用户来存放自己的数据；因此，前述的那些信息也可以存放于这样的字段里，使得它们作为图片数据的一部分，与图片一道被传输。此外，在一些特定的情况下，可以利用一些与前述的国际专利申请类似的技术方案，像在音频中嵌入数据那样，将这些信息嵌入到图片、视频以及动画的内容字段中，而不是写入到保留字段中。

有鉴于此，在前述所有具体的实施方式的基础上，本发明第17类具体的实施方式还包括这样的技术内容：在解析上层图片和/或上层图片音频的时候，从上层图片和/或上层图片音频中解析或者提取嵌入在其中的上层图片对准参数和/或上层音频对准参数。另外，对于嵌入在上层图片、上层图片音频和/或上层视频数据或者上层动画数据的音频数据和/或私有数据中的下层音图标识、下层影视标识，则可以从相应的上层图片、上层图片音频和/或上层视频数据或者上层动画数据的音频数据和/或私有数据中提取或者解析出来。其中的私有数据与前文所提到的图片格式、视频格式以及动画格式中保留的那些可选的、保留给用户使用的字段。

在前述所有具体的实施方式的基础上，本发明第18类具体的实施方式还包括这样的技术内容：在解析上层图片和/或上层图片音频的时候，从上层图片和/或上层图片音频中解析或者提取嵌入在其中的同层音图标识和/或同层影视标识。另外，对于嵌入在同层图片、同层图片音频之中的同层图片对准参数和/或同层音频对准参数，则可以从相应的同层图片、同层图片音频中提取或者解析出来。

在前述所有具体的实施方式的基础上，本发明第19类具体的实施方式还包括这样的技术内容：在解析上层图片和/或上层图片音频的时候，从上层图片和/或上层图片音频中解析嵌入在其中的下层音图下载参数和下层音图播放参数。另外，对于嵌入在下层图片、下层图片音频之中的下层图片对准参数和/或下层音频对准参数，则可以从相应的下层图片、下层图片音频中提取或者解析出来。

本发明前述第17、18、19等三类具体的实施方式主要是用来支持用来指示播放设备工作的参数、信息的解析和提取；而这些参数和信息可以采用多种方式嵌入到上层、同层和下层的图片、图片音频、视频或者动画数据之中。这使得这些参数和信息可以通过适当的方式由相应的图片、图片音频、视频或者动画数据在传输时被一体携带，而无需另行传送。既保证了传输的便利性又实现了播放控制的及时有效。

Claims (10)

1.一种音视图数据播放的方法，包括：

下载音视图数据并对其进行解析，以获得所述上层音图数据中的上层图片音频、上层图片和/或上层图片对准参数和/或上层音频对准参数；

自动地，或者在接收到播放所述上层图片音频或者上层图片的命令时，播放所述上层图片音频或者上层图片，并在所述上层图片对准参数或者上层音频对准参数指示的播放时间到达，或者在接收到播放所述上层图片音频或者上层图片的命令时，播放对应的所述上层图片或者上层图片音频；

或者，

下载音视图数据并对其进行解析，以获得所述上层影视数据中的上层视频数据或者上层动画数据、下层音图标识和/或下层影视标识；

自动地，或者在接收到播放所述上层视频数据或者上层动画数据的命令时，播放所述上层视频数据或者上层动画数据。

2.根据权利要求1所述的方法，其特征在于还包括：

对所述音视图数据解析，以获得同层音图标识和/或同层影视标识，所述同层音图标识至少包含同层音图下载参数和同层音图播放参数；所述同层影视数据标识至少包含同层影视下载参数和同层影视播放参数；

基于所述同层音图标识下载与所述同层音图下载参数对应的同层音图数据；其中：所述同层音图数据至少由同层图片音频、同层图片和/或同层图片对准参数和/或同层音频对准参数；

和/或，

基于所述同层影视标识下载与所述同层影视下载参数对应的同层影视数据；所述同层影视数据至少由同层视频数据或者同层动画数据构成。

3.根据权利要求2所述的方法，其特征在于还包括：

在所述同层音图播放参数所指示的播放时间到达时，或者，当接收到启动播放所述同层音图数据的用户命令时，终止播放所述上层图片音频或者上层图片；或者，终止播放所述上层视频数据或者上层动画数据；

播放所述同层图片音频或者同层图片，并在所述同层图片对准参数或者同层音频对准参数所指示的播放时间到达时，播放对应的所述同层图片或者同层图片音频；

或者，

在所述同层影视播放参数所指示的播放时间到达时，或者，当接收到启动播放所述同层影视数据的用户命令时，终止播放所述上层图片音频或者上层图片；或者，终止播放所述上层视频数据或者上层动画数据；

播放所述同层视频数据或者同层动画数据。

4.根据权利要求3所述的方法，其特征在于还包括：

当接收到终止播放当前所述同层音图数据的用户命令，或者当前所述同层音图数据播放结束时；根据所述同层音图标识和/或同层影视标识，顺序播放其他同层音图数据或者同层影视数据；

或者，

当接收到终止播放当前所述同层影视数据的用户命令，或者当前所述同层影视数据播放结束时；根据所述同层音图标识和/或同层影视标识，顺序播放其他同层音图数据或者同层影视数据。

5.根据权利要求1所述的方法，其特征在于还包括：

对所述音视图数据解析，以获得下层音图标识和/或下层影视标识，所述下层音图标识至少包含下层音图下载参数和下层音图播放参数；所述下层影视标识至少包含下层影视下载参数和下层影视播放参数；

基于所述下层音图标识下载与所述下层音图下载参数对应的下层音图数据；其中：所述下层音图数据至少由下层图片音频、下层图片和/或下层音图对准参数组合而成；其中：所述下层音图对准参数至少包括：下层图片对准参数和/或下层音频对准参数；

和/或，

基于所述下层影视标识下载与所述下层影视下载参数对应的下层影视数据；所述下层影视数据至少由下层视频数据或者下层动画数据构成。

6.根据权利要求5所述的方法，其特征在于还包括：

在所述下层音图播放参数所指示的播放时间到达时，或者，当接收到启动播放所述下层音图数据的用户命令时，中止播放所述上层图片音频或者上层图片，并生成对应的上层音图数据中止播放标记；或者，中止播放所述上层视频数据或者上层动画数据，并生成对应的上层影视数据中止播放标记；

播放所述下层图片音频或者下层图片，并在所述下层图片对准参数或者下层音频对准参数所指示的播放时间到达时，播放对应的所述下层图片或者下层图片音频；

或者，

在所述下层影视播放参数所指示的播放时间到达时，或者，当接收到启动播放所述下层影视数据的用户命令时，中止播放所述上层图片音频或者上层图片，并生成对应的上层音图数据中止播放标记；或者，中止播放所述上层视频数据或者上层动画数据，并生成对应的上层影视数据中止播放标记；

播放所述下层视频数据或者下层动画数据。

7.根据权利要求6所述的方法，其特征在于还包括：

当接收到终止播放所述下层音图数据的用户命令，或者所述下层音图数据播放结束时；基于所述上层音图数据中止播放标记继续播放所述上层音图数据；或者，基于所述上层影视数据中止播放标记继续播放所述上层影视数据；

或者，

当接收到终止播放所述下层影视数据的用户命令，或者所述下层影视数据播放结束时；基于所述上层音图数据中止播放标记继续播放所述上层音图数据；或者，基于所述上层影视数据中止播放标记继续播放所述上层影视数据。

8.根据权利要求1-7所述的任一方法，其特征在于还包括：

从所述上层图片和/或上层图片音频中解析嵌入在其中的所述上层图片对准参数和/或所述上层音频对准参数；和/或,

从所述上层图片、所述上层图片音频和/或所述上层视频数据或者所述上层动画数据的音频数据和/或私有数据中解析嵌入在其中的所述下层音图标识和/或所述下层影视标识。

9.根据权利要求2-4所述的任一方法，其特征在于还包括：

从所述上层图片和/或所述上层图片音频中解析嵌入在其中的所述同层音图标识和/或所述同层影视标识；和/或,

从所述同层图片和/或所述同层图片音频中解析嵌入在其中的所述同层图片对准参数和/或所述同层音频对准参数。

10.根据权利要求5-7所述的任一方法，其特征在于还包括：

从所述上层图片和/或上层图片音频中解析嵌入在其中的所述下层音图下载参数和所述下层音图播放参数；和/或,

从所述下层图片和/或所述下层图片音频中解析嵌入在其中的所述下层图片对准参数和/或所述下层音频对准参数。