CN1972447A - 基于流媒体技术的多画面播放器及其播放方法 - Google Patents

Abstract

本发明属于计算机多媒体技术领域，涉及基于流媒体技术的多画面播放器及其播放实现方法。该多画面播放器包括：控制界面模块，通信模块，核心处理模块，解码器模块和显示模块；其中：通信模块分别与核心处理模块和控制界面模块进行双向连接，负责传递一些用户的操作信息和反馈给用户的信息；核心处理模块还分别与显示模块、解码器相连；核心处理模块将从服务器接收的未解码数据发送给匹配的解码器进行解码，并返回解码后数据，再将解码后数据发送给显示模块进行显示。本发明便于用户更好地按自己的意愿欣赏节目。从而为用户提供更多、更丰富的服务。

Description

基于流媒体技术的多画面播放器及其播放方法

技术领域

本发明属于计算机多媒体技术领域，特别涉及流媒体播放技术。

背景技术

人们从网络上获取多媒体信息主要有两种方式：下载播放和在线播放。下载播放就是将多媒体文件通过HTTP协议或FTP协议下载到本地硬盘，然后启动多媒体播放器播放。由于多媒体文件通常都很大，从几兆到几十兆甚至几百兆字节大小，要完全下载完需要几分钟、几十分钟、到几个小时不等，往往会使客户等的不耐烦。而且通过这种方式无法观看现场直播、远程教育等实时性较强的节目。下载播放的最大的缺点是无法提供数字版权的保护，用户将多媒体文件下载以后，就可以在网上随意发布，因此不适合商业应用。

流媒体技术是近年来兴起的一种在线播放技术。在线播放，顾名思义就是边下载边播放，播放器并不用等到多媒体文件全部下载到本地硬盘以后再播放，而是在下载的同时进行播放。播放器在客户端的内存中开辟出一个缓冲区，通常是几兆字节的空间，播放器等到缓冲区中有足够的数据后开始解码播放，这个过程通常需要几秒钟的时间，同下载完后再播放相比大大节省了等待时间，而且由于没有下载到硬盘上，而是直接存储到内存中，播放完后即被播放器删除，因此对数字版权起到保护作用。在技术上在线播放器要比下载播放的播放器更复杂，它必须支持网络播放功能。

“流媒体”不同于传统的多媒体，它是一种结构化的网络媒体流，它的主要特点就是以“视音频流”(Video-Audio Stream)的形式在网络上传送，播放器可以象播放本地文件一样播放网络流媒体，从而实现暂停、恢复、快进、快退等功能，也为慢速、快速播放提供了可能。

人们在很低的带宽(例如14.4Kbps)到较高的带宽(例如10Mbps)环境下都可以在线欣赏到连续不断的较高品质的音频和视频节目。流媒体技术广泛应用在互联网多媒体新闻发布、在线直播、网络广告、网络视频广告、电子商务、视频点播、远程教育、网络电台、实时视频会议等互联网的信息服务领域。现在的主流播放器有微软公司的Media Player，Real公司的Real Player和苹果公司的Quick Time都支持该网络播放功能。

一般的流媒体播放器都是一个播放窗口，一个控制界面，从服务器接收一路媒体流数据，并调用各种解码器解码后播放一路音视频节目，对这个窗口的菜单或者控制界面进行各种操作，实现正常播放。

采用上述方法的用户在通过网络欣赏音视频节目的时候只能以同时观看一路节目，不能根据的意愿选择同时观看几路视频，或者在欣赏一路节目的同时监视其它节目，使用户的需求受到限制。

发明内容

本发明的目的是为克服已有技术的不足之处，提出一种基于流媒体技术的多画面播放器及其播放方法，采用本发明用户在播放的过程中用户在通过网络欣赏音视频节目的时候可以选择同时观看几路视频节目，包括本地文件，便于用户更好地按自己的意愿欣赏节目。从而为用户提供更多、更丰富的服务。

本发明提出的基于流媒体技术的多画面播放器，其特征在于，该多画面播放器包括：控制界面模块，该模块负责与用户交互，接收用户的控制信息并通过通信模块与核心处理模块进行信息的交互；该模块还用于生成一个控制窗口和一个或一个以上播放窗口，对核心处理模块和显示模块进行了拷贝，使每一个播放窗口对应一套核心处理模块和显示模块；其中播放窗口的视频显示区域和显示模块一一对应；另外该模块还可以添加、删除解码器模块中的解码器；

通信模块，用于传递控制界面模块和核心处理模块之间关于与用户的交互信息；

核心处理模块，用于实现与服务器的连接、接收解码数据、同步播放处理功能，在解码时调用解码器模块，在播放时调用SDL显示模块；

解码器模块包括视频的MPEG-4解码器，H.264解码器以及音频的MP3解码器，AAC解码器，用于解码对应的音视频流的数据；

显示模块，用于显示解码后的视频流的数据；

各模块的连接关系为：通信模块分别与核心处理模块和控制界面模块进行双向连接，负责传递一些用户的操作信息和反馈给用户的信息；核心处理模块还分别与显示模块、解码器相连；核心处理模块将从服务器接收的未解码数据发送给匹配的解码器进行解码，并返回解码后数据，再将解码后数据发送给显示模块进行显示。

上述基于流媒体技术的多画面播放器实现多画面播放的方法，包括以下步骤：

1)控制界面生成多个播入窗口时对每个播放窗口分配一个唯一的ID，并且建立一个所有播放窗口的列表，对多个窗口进行管理；

2)在控制界面模块添加窗口时对核心处理模块和显示模块进行了拷贝，使控制界面中的每一个播放窗口对应一套核心处理模块和显示模块；

3)通信模块根据窗口的ID传递控制界面模块该播放窗口和对应的核心处理模块之间的正确信息；

4)每一个核心处理模块以不同的端口和服务器进行连接通信，接受处理数据，并通过相应的显示模块进行正确显示。

本发明中各个模块中的基本功能具体实现和一般单画面播放器的具体实现基本类似，属于本技术领域的常规技术。

本发明的特点及效果：

本发明的主要创造点是实现多画面的播放，在播放器以正常速度播放时，可以通过MFC(微软基础类库)的动态创建对话框来动态增加或者删除播放窗口，复制核心处理模块和显示模块，并以不同的端口和服务器建立连接，接收多路媒体流数据，每个窗口各自处理自己的数据，播放不同的节目，互不影响，并且可以切换当前窗口，声音只播放当前窗口的声音，不至于多路音频交织给用户带来不便。采用本发明时无须修改编解码器和网络传输协议。

附图说明

图1为本发明的流媒体多画面播放器结构框图。

图2为本发明的多画面播放方法实现流程框图。

图3为本发明方法中核心处理模块的工作流程框图。

图4为本发明方法的实施例的实现流程框图。

具体实施方式

本发明提出的一种基于流媒体技术的播放器多画面播放实现方法结合附图及实施例详细说明如下：

本发明提出的多画面播放器的结构，如图1所示，包括：

控制界面模块，该模块负责与用户交互，接收用户的控制信息并通过通信模块与核心处理模块进行信息的交互；该模块还用于生成一个控制窗口和一个或一个以上播放窗口，其中播放窗口的视频显示区域和显示模块一一对应；另外该模块还可以添加、删除解码器模块中的解码器；

通信模块，用于传递控制界面模块和核心处理模块之间关于与用户的交互信息；

核心处理模块，是最核心的模块，用于实现与服务器的连接、接收解码数据、同步播放处理等播放器的最基本的功能；核心处理模块在解码时调用解码器模块，在播放时调用显示模块；

解码器模块包括视频的MPEG-4解码器，H.264解码器以及音频的MP3解码器，AAC解码器，用于解码对应的音视频流的数据；

显示模块，用于显示解码后的视频流的数据；

各模块的连接关系为：通信模块分别与核心处理模块和控制界面模块进行双向连接，负责传递一些用户的操作信息和反馈给用户的信息；核心处理模块还分别与显示模块、解码器相连，核心处理模块将从服务器接收(放到缓冲中)的未解码数据发送给匹配的解码器进行解码，并返回解码后数据，然后再将解码后数据发送给显示模块进行显示。

上述基于流媒体技术的多画面播放器实现多画面播放的方法，如图2所示，包括以下步骤：

1)控制界面生成多个播入窗口时对每个播放窗口分配一个唯一的ID，并且利用stl(标准模板库)的vector容器建立一个所有播放窗口的列表，对多个窗口进行管理；

2)在控制界面模块添加窗口时对核心处理模块和显示模块进行了拷贝，控制界面中每一个播放窗口对应一套核心处理模块和显示模块；

3)通信模块根据窗口的ID传递控制界面模块该播放窗口和对应的核心处理模块之间的正确信息；

4)每一个核心处理模块以不同的端口和服务器进行连接通信，接受处理数据，并通过相应的显示模块进行正确显示。

上述步骤4)中每一个核心处理模块的具体工作流程如图3所示，包括以下步骤：

1)接收控制界面模块的播放路径消息；

2)与服务器建立连接，发送RTSP请求；

3)接收SDP文件，解析信息，建立相关接收和解码线程；

4)向服务器发送RTSP播放命令，开始接收数据；

5)接收线程和解码线程协同工作，正确解码数据并进行播放。

本发明的多画面播放器及播放方法的实施例详细说明如下，

本实施例的服务器端的配置

CPU：Intel P42.4GHz

内存：1G

操作系统：RedHat9 Linux Server

流媒体服务器：LSMP Media Server

客户端配置

CPU：Intel P4 2.66Hz

内存：512M

操作系统：WindowsXP

播放器：LsmpPlayer

本发明的多画面播放器的实施例详细说明如下，其结构如图1所示。

控制界面模块，该模块负责与用户交互，接收用户的控制信息并通过通信模块与核心处理模块进行信息的交互；该模块还用于生成一个控制窗口和一个或一个以上播放窗口，对核心处理模块和显示模块进行拷贝，其中播放窗口的视频显示区域和SDL库显示模块一一对应；另外该模块还可以添加、删除解码器模块中的解码器；该模块的实施例由一个基于MFC的对话框程序LsmpPlayer.exe实现，通过加载动态链接库文件实现与通信模块和核心处理模块的消息传递，通过修改注册表实现对解码器模块的增删配置。在该对话框上利用各种控件来负责接收用户控制信息和显示各种状态信息，利用MFC的消息处理机制实现用户交互和动态链接库文件的加载。

通信模块，用于传递控制界面模块和核心处理模块之间关于与用户的交互信息。该模块的实施例为一个动态链接库文件com.dll，并提供一系列的消息传递函数接口，供控制界面模块和核心处理模块调用。这些消息传递函数被定义为动态链接库导出函数，通过建立共享内存，以实现控制界面模块和核心处理模块间的消息传递。

核心处理模块，用于实现与服务器的连接、接收解码数据、同步播放处理等播放器的最基本的功能；核心处理模块在解码时调用解码器模块，在播放时调用SDL显示模块；该模块的实施例由一个动态链接库文件mp4player.dll实现，并提供接口供控制界面调用，同时与解码器和SDL库显示模块交互。这个模块是整个播放器的核心。

解码器模块包括视频的MPEG-4解码器，H.264解码器以及音频的MP3解码器，AAC解码器，用于解码对应的音视频流的数据；本实施例是一系列的动态链接库文件，视频的MPEG-4解码器(xvid_plugin.dll)，H.264解码器(264_plugin.dll)以及音频的MP3解码器(mp3_plugin.dll)，AAC解码器(aac_plugin.dll)，每一个动态链接库文件都是封装好标准的解码库，并在外层定义好统一的接口，以便核心处理模块调用匹配的动态链接库文件。

SDL库显示模块，用于显示解码后的视频流的数据；本实施例为一个动态链接库文件SDL.dll，接收核心处理模块的解码后数据进行显示。

各模块的连接关系为：通信模块分别与核心处理模块和控制界面模块进行双向连接，负责传递一些用户的操作信息和反馈给用户的信息；核心处理模块还分别与SDL显示模块、解码器相连，核心处理模块将从服务器接收放到缓冲中的未解码数据发送给匹配的解码器进行解码，并返回解码后数据，然后再将解码后数据发送给显示模块进行显示；另外控制界面模块可以设置增加删除解码器模块中的各类解码器。

上述基于流媒体技术的多画面播放器实现多画面播放的方法实施例，如图4所示，包括以下步骤：

1)可执行程序文件夹下共有四个文件：LsmpPlayer.exe，com.dll，mp4player.dll，SDL.dll，分别对应前面所述的控制界面模块，通行模块，核心处理模块，显示模块；

2)控制界面生成第一个播放窗口分配一个唯一的ID为0，并且利用stl(标准模板库)的vector容器建立一个所有播放窗口的列表；

3)同时创建一个名叫channel0的文件夹，将核心处理模块mp4player.dll和显示模块SDL.dll复制到该文件夹下，ID为0的窗口对应channel0下的核心处理模块和显示模块；

4)重复步骤2)、3)添加更多的播放窗口，分配新的ID(1，2，…)，播放窗口加入窗口列表，创建文件夹channel1，channel2，…，并复制核心处理模块mp4player.dll和显示模块SDL.dll；

5)通信模块根据窗口ID传递控制界面模块该窗口与对应的核心处理模块mp4player.dll之间的正确信息；

6)每一个核心处理模块mp4player.dll以不同的端口和服务器进行连接通信，接受处理数据，并通过相应的显示模块进行正确显示。

Claims (3)

1、一种基于流媒体技术的多画面播放器，其特征在于，该多画面播放器包括：控制界面模块，该模块负责与用户交互，接收用户的控制信息并通过通信模块与核心处理模块进行信息的交互；该模块还用于生成一个控制窗口和一个或一个以上播放窗口，对核心处理模块和显示模块进行了拷贝，使每一个播放窗口对应一套核心处理模块和显示模块；其中播放窗口的视频显示区域和显示模块一一对应；另外该模块还可以添加、删除解码器模块中的解码器；

通信模块，用于传递控制界面模块和核心处理模块之间关于与用户的交互信息；

核心处理模块，用于实现与服务器的连接、接收解码数据、同步播放处理功能，在解码时调用解码器模块，在播放时调用SDL显示模块；

解码器模块包括视频的MPEG-4解码器，H.264解码器以及音频的MP3解码器，AAC解码器，用于解码对应的音视频流的数据；

显示模块，用于显示解码后的视频流的数据；

各模块的连接关系为：通信模块分别与核心处理模块和控制界面模块进行双向连接，负责传递一些用户的操作信息和反馈给用户的信息；核心处理模块还分别与显示模块、解码器相连；核心处理模块将从服务器接收的未解码数据发送给匹配的解码器进行解码，并返回解码后数据，再将解码后数据发送给显示模块进行显示。

2、一种如权利要求1所述的多画面播放器的实现多画面播放的方法，包括以下步骤：

1)控制界面生成多个播入窗口时对每个播放窗口分配一个唯一的ID，并且建立一个所有播放窗口的列表，对多个窗口进行管理；

2)在控制界面模块添加窗口时对核心处理模块和显示模块进行了拷贝，使控制界面中的每一个播放窗口对应一套核心处理模块和显示模块；

3)通信模块根据窗口的ID传递控制界面模块该播放窗口和对应的核心处理模块之间的正确信息；

4)每一个核心处理模块以不同的端口和服务器进行连接通信，接受处理数据，并通过相应的显示模块进行正确显示。

3、如权利要求2所述的方法，其特征在于，上述步骤4)中每一个核心处理模块的具体处理方法，包括以下步骤：

1)接收控制界面模块的播放路径消息；

2)与服务器建立连接，发送RTSP请求；

3)接收SDP文件，解析信息，建立相关接收和解码线程；

4)向服务器发送RTSP播放命令，开始接收数据；

5)接收线程和解码线程协同工作，正确解码数据并进行播放。