CN103177032A - 一种将现有多媒体教程转成电纸书多媒体文件的方法 - Google Patents

Abstract

本发明涉及一种将现有多媒体教程转成电纸书多媒体文件的方法，包含以下步骤：(1)、把现有能够转化成电纸书多媒体课件的多媒体文件中的有效信息通过一定方式制作成一幅幅包含有效内容的图像；(2)、将多媒体文件的音频文件提取出来；(3)、将包含有效内容的图像按照音频讲解的时间轴与音频的相应部分对应，按照时间顺序和内容关联排列，构成一个整体，随着不同片段的音频内容的变化，相应的含有讲解所对应内容的图像也随之变换，替代前面的图像；(4)、把所有图片和对应音频所构成的整体以封装方式，形成一个电纸书可以播放的多媒体文件，从而实现了将各种现有的视频和动画等多媒体课件转化成电纸书可以播放的多媒体文件。

Description

一种将现有多媒体教程转成电纸书多媒体文件的方法

技术领域

本发明属于视频和电纸书阅读器的技术领域，涉及一种将现有多媒体教程转换成电纸书多媒体文件的方法。

背景技术

电子纸即是一种类似纸张的电子显示器，其兼有纸的优点，又可以像普通显示器一样不断转换刷新他所显示的内容。近年来，电子纸由于阅读舒适、超薄轻便、可弯曲、超低耗电等优点已被广泛应用到各种设备上，尤其是电纸书阅读器(简称电纸书)上，这种类型显示器的其他名称包括电子纸显示器、类纸显示器、双稳态和电泳显示器等。

电子纸虽然有很多优点，但是其显示原理也决定了它存在有一些天然缺陷。以电泳显示技术为例，电子纸因为依赖粒子的运动，用于显示的开关时间数百毫秒，这个速度对视频应用是不够的(虽然开关时间更快的材料正在开发之中)，这样会导致刷新率加快，其省电的优势又削弱了，而且现有视频单幅图片不变却频繁刷新耗电的情况还是无法得到缓解。

目前电纸书能播放的格式有：①、文本，包括txt、htxt、pdf、doc、xls、ppt、html、epub、chm、fb2等；②、图像，包括jpg、bmp、gif、png等；③、音频，包括mp3，wmv，wav等。像rm、asf.、avi、rmvb、wmv、mp4.flv等主流的视频格式，也包括csf等专门的格式，当然还包括.swf这种flash动画格式。

随着无纸化教学的大势所趋，电纸书凭借电子纸省眼、省电的优势迅速成为下一代无纸化教学的主要产品。但是现在大部分讲课和演讲的资料是以动画和视频这种多媒体形式保存和传播的，比如rm格式，flash格式。

传统的讲课和现有的视频教程大多数都是随着板书和图形的变化辅以一定讲解，这种形式的课程可以有很多实现方式，而现有的视频和动画格式是为了适应人的视觉暂留和画面流畅程度而产生的，所以不适合再现讲座和课程的过程，也不适应现有电子纸的显示机理。

现有的多媒体文件类型包括ppt、图片浏览器(这个严格看来并非视频或者动画格式，但是它确实符合多媒体的定义)。但是ppt的背景音种类和长度有限，而且无法形成一个任意有图文、有讲解的课件形式。一般情况下，ppt都是通过摄像机或者计算机程序制成各种现有视频格式的，比如rm、avi、mp4、rmvb等，TED演讲就是这样的。国内的公开课是csf格式的，当然还有一些其他视频格式的。PPT和图片浏览器都是有图片无讲解，无法被当做一个完整的多媒体课件。它们虽然可以实现自动浏览但无法实现真正的课程或者讲座。

另外，现在市场上诸如点读笔技术及其配套图书一类的图文并茂带有配套音频讲解的类似多媒体文件的形式，造成了纸张大量浪费，而且因为成本居高不下，让大多数使用者无法享受多媒体课件资源。

目前我们经常见的视频格式主要有影像格式(Video)、流媒体格式(Stream Video)及动画格式(GIF和flash)等，由于电纸书的这种多媒体课件尚未出现，所以其他视频格式转化成这种格式的方法也尚未出现；而纸质教材及其音频讲解一般都做成ppt或者视频录像或者点读笔加图书那种形式来实现多媒体，电纸书上一直无法播放和学习这些多媒体材料。所以为了满足电纸书上播放多媒体课件的需求，实现电纸书可以播放的现有的多媒体课件，包括视频，动画或者纸质教材及其音频讲解这种形式的多媒体类型，我们需要一种方法来将现有的大量课件或者演讲、讲座通过一种转化方法或者说制作方法来实现。

发明内容

本发明的目的在于对现有技术存在的上述的问题加以解决，提出了一种能将现有各种多媒体教材的源文件转化成上述电纸书能播放的多媒体文件的方法，即一种将现有多媒体教程转成电纸书多媒体文件的方法。

用于实现上述发明目的的技术解决方案是这样的：所提供的这种将现有多媒体教程转成电纸书多媒体文件的方法包含以下步骤：(1)、把现有的能够转化成电纸书多媒体课件的多媒体文件(此处称源文件)中的有效信息通过软件抓图或截图或提取文本和图形或直接复制文字和图形内容的方式制作成一幅幅包含有效内容的图像；(2)、将步骤(1)中所述多媒体文件的音频文件提取出来；(3)、将步骤(1)中所述包含有效内容的图像按照步骤(2)中所述音频讲解的时间轴与音频的相应部分对应，按照时间顺序和内容关联排列，构成一个整体，随着不同片段的音频内容的变化，相应的含有讲解所对应内容的图像也随之变换，替代前面的图像；(4)、把步骤(3)中所述所有图片和对应音频所构成的整体进行封装，形成一个电纸书可以播放的多媒体文件(此处称目标文件)。

本发明的实现还在于：所述每一片段音频指的是一个课程按照意群分割开来的音频，根据不同意群有一种或多种分割方式，对应的图片也不同，每段音频对应相应图像。

本发明的实现还在于：步骤(1)所述有效内容指的是步骤(2)中所对应音频所讲解或者说明的内容，其形式为图形或者文字内容。

本发明的实现还在于：步骤(2)中所述音频文件是整个课件背景音频由一段一段的音频按照时间先后和内容连贯的顺序拼接起来的。

本发明的实现还在于：所述音频的获取方式包括，①、对于视频和动画类电子文档通过录音、音频抓轨方法提取；②、对于以磁带或光盘形式分开存放的纸质材料配套的音频讲解的多媒体教程通过对磁带或光盘中的内容用重新录音等方式进行提取编辑。而对于现场讲座教师或者演说者则要进行现场录音。

本发明的实现还在于：步骤(2)中所述音频是事先录制好的讲座教师或者演讲者的讲解或者演讲的录音，并对对应的图像内的文字和/或图形进行讲解。值得注意的是，这种讲解内容和板书不是文字的一一对应的关系，讲解或说明的声音中的语言文字和图像中的文字可以不同，但是内容的意义一样。这与现有软件发音引擎的发音原理有本质区别：比如TTS发音引擎是通过语音识别技术识别文本，然后通过模拟发音技术实现对文本的讲解或说明。

本发明的实现还在于：步骤(3)中所述图像与音频的相应部分对应，指的是每幅图像占用的时间至少能完全覆盖(可以超过但是不能小于)相应的讲解或说明音频文件所占用的时间。因为在教学上要保证讲解的时候我们所看到的是讲解对应的板书：即相关文字和图形。步骤(3)中所述音频讲解的时间轴是指的音频讲解的时间点，从开始算起，开始算作零时零分零秒，依此延伸。

本发明的实现还在于：步骤(3)中所述含有讲解所对应内容的图像也随之变换替代前面的图片，是指随着这段音频讲解或说明的结束后，这幅图像存在的目的就已经完成了，那么在下一段音频讲解开始之前或者开始的时候，下一段音频所对应的图像即显示在屏幕上。当然两幅图像之间可以有一定间隔，这个间隔对应的是音频的空白，可以看做音频衔接点或者音乐的休止符。

本发明的实现还在于：步骤(4)中所述最终形成的在电纸书上播放的多媒体文件是以加密或压缩的方式进行封装的，每个图像对应的音频文件的讲解或说明是连贯并按时间顺序衔接的，该多媒体文件与电纸书底层操作系统和硬件相匹配，现有各种操作系统：包括linux、android、Symbian、wince、kindle或者其他定制的系统，通过操作系统内嵌程序或者上层应用(自己的或者第三方的)来实现这种图像和声音在时间轴上同步匹配的多媒体文件格式。

本发明的实现还在于：所述步骤(1)和步骤(2)和步骤(3)和步骤(4)是手动或自动进行(即由专门的格式转换软件转换成电纸书多媒体软件，而非人工转换)，比如步骤(1)，具体到在视频教程中“截图”这个动作，可以由人来手动完成，从识别含有有效信息的图像到截图到保存等；也可以由软件自动完成，具体而言，就是有一种转化软件，可以自动识别含有有效信息的图像，然后自动截图保存为了下面的步骤做准备；同样的，步骤(2)的音频提取也可以有手动，点击视频播放软件的声音抓轨按钮或者由转化软件。其中，步骤(1)和步骤(2)同步或异步，即对动画和音频可以同时操作。比如转化csf软件到电纸书多媒体文件，对于ppt部分的截图和csf背景音频提取可以同时进行。

本发明步骤(1)对于计算机多媒体文件是通过一定方法(比如用软件，抓图，截图等或者提取文本和图形，或者直接复制文字和图形内容)提取；对于纸质材料和对应音频讲解的这种类似多媒体教程是以拍照或者扫描(OCR等)的方式实现的，比如对各种图文并茂的图书，我们就需要对相应页面或者页面中的一部分进行拍照，形成一幅幅的电子图像；又如漫画配套对白，只需对漫画页面或者页面中的一部分图像进行拍照从而形成一幅幅电子版漫画图像，当然上述拍照用扫描也可以。

时间轴定义：所谓的时间轴，就是多媒体文件中将声音和影像按照时间顺序组合在一起的一个形象化的概念。

与现有技术相比，本发明具有的有益效果是：

一、本发明实现了将各种现有的视频和动画等多媒体课件转化成电纸书可以播放的多媒体文件；

二、本发明转化后的格式充分的考虑了电纸书翻页之后不持续供电就可以保持图像的特性，使得转化后的格式文件播放耗电量大大降低，有利于长时间续航，也有利于环保。

三、本发明对于纸质教材配套音频讲解这种类似的多媒体形式，实现了类似于拍摄定格动画的方法，将类似多媒体文件转化成电纸书可以播放的多媒体课件。

附图说明

图1为在电纸书上实现多媒体课件的方法的流程图。

图2为实现方法基于的系统路径示意图。

图3为电纸书多媒体文件的时间轴表述图。

图4为局部转换和整体转换对比图。

图5为csf格式有效内容局部截图的示意图。

具体实施方式

本发明所述的将现有多媒体教程转成电纸书多媒体文件的方法形成了一种在现有电纸书硬件配置基础之上的观看多媒体课件的解决方案。参见图2描示的实现方法基于的系统路径所示：电纸书多媒体课件的制作系统由PC机201、电纸书202和internet203组成，形成了一种将PC机201上的或者internet203上的现有多媒体教程转成电纸书202上播放的多媒体文件的方法。PC机201上的文件可能是由Internet203上下载下来的。当然，电纸书也可以有联网功能，在internet上直接下载转换后的文件。将现有多媒体格式转化成电纸书能够播放的这种方法，使得电纸书能够播放的内容极大丰富了。

参见附图1，本发明所述在电纸书上实现多媒体课件的方法的主要实现过程如下：

步骤110：把现有能够转化成电纸书多媒体课件的多媒体文件(此处称源文件)中的有效信息通过一定方式制作成一幅幅包含有效内容的图像。

步骤110实现的特别点在于，所述“一定方式”对于计算机多媒体文件指的是通过一定方法(比如用软件抓图，截图等或者提取文本和图形，或者直接复制文字和图形内容)提取，如图5就是由截图所产生的。

步骤120：将步骤110中所述源文件的音频文件提取出来。

如图3所示：步骤120中所述音频文件可以看做整个课件整体背景音频：从1C开始到ND直到整段音频末端，算一段。当然也可以把1C到1D算一段，2C到2D算一段等等，NC到ND算一段，这样看做背景音频由一段一段的音频按照时间先后和内容连贯的顺序拼接起来的。另外，步骤110所述有效内容指的是步骤120中所对应音频所讲解或者说明的内容，其形式可以为图形或者文字内容，具体说来，就是上述示意图中的包含有教课内容的文字和图形，这种提取出来的文字和图形可以以截图的方式或者附着在一定背景下的文字和图形，比如PPT中，就是背景不换，上面的文字和图形变换。

步骤120实现的特别点在于，所述音频的获取方式有两种：对于视频和动画等电子文档是通过一定方法(比如用软件录音，音频抓轨等)提取；对于纸质材料配套的音频讲解(一般是以磁带，光盘等形式分开存放)的这种多媒体教程是对磁带光盘中的内容用重新录音等方式进行提取编辑。对于现场讲座教师或者演说者要进行现场录音。

步骤120实现的特别点还在于，所述音频是事先录制好的讲座教师或者演讲者的讲解或者演讲的录音。值得注意的是，这种讲解内容和板书不一定是文字的一一对应的关系，也就是说讲解或说明的声音中的语言文字和图像中的文字可以不同，但是内容的意义是一样的。

步骤130：如图3所示：图像1在时间轴上起点为1A，终止点为1B。相应的图像2的起始点为2A，终止点为2B，在时间顺序上1A、1B、2A、2B是顺序排列的，内容上图1和图2是顺序衔接的。图像1和图像2在时间轴上对应音频1和音频2，在时间上是1C、1D、2C、2D。其中为了每张图像对应内容得到相应的讲解，必须让每张图片出现的时间覆盖相应的那段音频讲解。也就是说，1A和1C可以重合但是1C不能比1A提前出现。相应的，1B也不能比1D提前出现。这样看来，1B与2A可以重合，但是意味着图片无缝连接，那么相应的1D和2C也必然同时重合。所以，步骤120中所述音频讲解的时间轴与音频的相应部分对应，再按照时间顺序和内容关联排列，构成一个整体，即如图3电所示。而且，可以由图上看出：随着不同片段的音频内容的变化，相应的含有讲解所对应内容的图像也随之变换，替代前面的图片。

步骤130实现的特别点在于，所述音频讲解的时间轴是指的音频讲解的时间点。从开始算起，开始算作零时零分零秒，依此延伸，在图3电纸书多媒体文件的时间轴表述上，就是1A所示的时间点。

步骤130实现的特别点还在于，所述图像与音频的相应部分对应，指的是每幅图像占用的时间至少能完全覆盖相应的讲解或说明音频文件所占用的时间，在图3上表现为NA始终提前或者重合于NC，ND始终提前或者重合于NB(N是自然数)。

步骤130实现的特别点还在于，所述含有讲解所对应内容的图像也随之变换替代前面的图片，是指随着这段音频讲解或说明的结束，这幅图像存在的目的就已经完成了，那么在下一段音频讲解开始之前或者开始的时候，下一段音频所对应的图像就应该显示在屏幕上了。如图3电纸书多媒体文件的时间轴：两幅图像之间可以有一定间隔，例如1B到2A的间隔，这个间隔对应的是音频的空白1D到2C，可以看做音频衔接点或者音乐的休止符。

步骤140：把步骤130中所述所有图片和对应音频所构成的整体，以一定封装方式，形成一个电纸书可以播放的多媒体文件(此处称目标文件)。

步骤140实现的特别点还在于，所述最终形成的在电纸书上播放的多媒体文件，可以是一段课程，也可以是一段演讲或者一段诗歌或散文的朗诵，但是不管是什么形式和内容，其每个图像对应的音频文件的讲解或说明连贯的，按照时间顺序衔接的。

步骤140实现的特别点还在于，所述一定封装方式是csf或者avi那种将多种格式的音视频集合起来的方式，可以是加密和/或压缩。

步骤140实现的特别点还在于，所述最终形成的在电纸书上播放的文件，是匹配电纸书底层操作系统和硬件的。现有电纸书操作系统：linux、android、symbian、wince、kindle或者其他定制的系统，通过操作系统内嵌程序或者上层应用(自己的或者第三方的)来实现这种图像和声音在时间轴上同步匹配的多媒体文件格式。

本实施例中所述步骤110和步骤120和步骤130和步骤140是手动或自动进行(即由专门的格式转换软件转换成电纸书多媒体软件)，其中，步骤110和步骤120可以同步进行，即对动画和音频可以同时操作。

以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。即本发明不仅仅限于上述的实施例，还有很多其他具体表现形式。

Claims (10)

1.一种将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于包含以下步骤：

1.1把现有的能够转化成电纸书多媒体课件的多媒体文件中的有效信息通过软件抓图或截图或提取文本和图形或直接复制文字和图形内容的方式制作成一幅幅包含有效内容的图像；

1.2将步骤1.1中所述多媒体文件的音频文件提取出来；

1.3将步骤1.1中所述包含有效内容的图像按照步骤1.2中所述音频讲解的时间轴与音频的相应部分对应，按照时间顺序和内容关联排列，构成一个整体，随着不同片段的音频内容的变化，相应的含有讲解所对应内容的图像也随之变换，替代前面的图像；

1.4把步骤1.3中所述所有图片和对应音频所构成的整体进行封装，形成一个电纸书可以播放的多媒体文件。

2.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：所述每一片段音频指的是一个课程按照意群分割开来的音频，根据不同意群有一种或多种分割方式，每段音频对应相应图像。

3.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：步骤1.1所述有效内容指的是步骤1.2中所对应音频所讲解或者说明的内容，其形式为图形或者文字内容。

4.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：步骤1.2中所述音频文件是整个课件背景音频由一段一段的音频按照时间先后和内容连贯的顺序拼接起来的。

5.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：所述音频的获取方式包括

5.1对于视频和动画类电子文档通过录音、音频抓轨方法提取；

5.2对于以磁带或光盘形式分开存放的纸质材料配套的音频讲解的多媒体教程通过对磁带或光盘中的内容用重新录音方式进行提取编辑。

6.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：步骤1.2中所述音频是事先录制好的讲座教师或者演讲者的讲解或者演讲的录音，并对对应的图像内的文字和/或图形进行讲解。

7.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：步骤1.3中所述图像与音频的相应部分对应，指的是每幅图像占用的时间至少能完全覆盖相应的讲解或说明音频文件所占用的时间。

8.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：步骤1.3中所述含有讲解所对应内容的图像也随之变换替代前面的图片，是指随着这段音频讲解或说明的结束后，这幅图像存在的目的就已经完成了，那么在下一段音频讲解开始之前或者开始的时候，下一段音频所对应的图像即显示在屏幕上。

9.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：步骤1.4中所述最终形成的在电纸书上播放的多媒体文件是以加密或压缩的方式进行封装的，每个图像对应的音频文件的讲解或说明是连贯并按时间顺序衔接的，该多媒体文件与电纸书底层操作系统和硬件相匹配，现有各种操作系统：包括linux、android、Symbian、wince、kindle或者其他定制的系统，通过操作系统内嵌程序或者上层应用来实现这种图像和声音在时间轴上同步匹配的多媒体文件格式。

10.如权利要求1所述的将现有多媒体教程转成电纸书多媒体文件的方法，其特征在于：所述步骤1.1和步骤1.2和步骤1.3和步骤1.4是手动或自动进行，其中，步骤1.1和步骤1.2同步或异步，即对动画和音频可以同时操作。

Images