具体实施方式
下面结合附图和实施例对本发明进行详细说明。
请参阅图1,图1是本发明多模移屏方法一实施例的流程示意图。
如图1所示,多模移屏方法包括以下步骤:
步骤101,手持终端与智能终端建立连接,获取智能终端侧的节目信源列表;
其中,智能终端的操作系统包括:Android、iOS、Windows Mobile、或Windows CE等,能下载和安装软件和服务,支持有线或无线设备互联接口。具体的智能终端设备包括智能数字电视、电脑或智能机顶盒等。
手持终端的操作系统包括:Android、iOS、Windows Mobile或Windows CE等,能下载和安装软件和服务,支持有线或无线设备互联接口。具体的手持终端设备包括:Android或苹果智能手机或平板电脑等。
手持终端与智能终端之间数据的传输模式包括有线或无线模式,具体传输模式包括:RJ45、RS232、Wifi、蓝牙、Zigbee、红外或3G等。
要实现智能终端和手持终端之间多源节目信息的收看,首先要建立双方之间的连接,即握手,使相互之间知道对方的存在。具体握手步骤如下:
A.手持终端通过广播的方式发送握手请求消息;
手持终端根据用户指令通过广播的方式发送握手请求消息:“HandshakeReq+手持设备标识”,其中,手持设备标识可以是本设备的序列号、条形码、二维码、MAC地址或IP地址。
其中,发送握手请求消息的指令,其产生方式包括:点击、触摸或摇摆等。
B.智能终端侦听广播端口,并接收手持终端发送的握手请求消息,解析后,依据本设备的允许操控设置决定是否发送请求回应。若允许操作,则反馈握手确认消息:“HandshakeAck+手持设备标识+设备码”。其中,设备码可以是本设备的序列号、条形码、二维码、MAC地址或IP地址。
C.手持终端侦听广播端口,接收智能终端反馈的握手确认消息,并对其进行解析,形成所有允许建立握手关系的智能终端的列表,并显示该列表。
D.手持终端根据用户选择指令选择智能终端列表中的一个终端,并向选择的智能终端发送握手成功消息:“HandshakeOK+手持设备标识+设备码”。选择的智能终端收到握手成功消息,确认正确后,手持终端与选择的智能终端握手成功,握手过程结束。
需要指出的是,手持终端可以直接使用之前握手请求过程中获取的允许建立握手关系的智能终端列表,选择其中一个智能终端,直接发送握手成功消息:“HandshakeOK+手持设备标识+设备码”,一步完成握手。
当手持终端发送握手请求消息后,如果范围内只有一个智能终端反馈握手确认消息,则手持终端可自动发送握手成功消息,完成握手。无需用户选择,方便使用。
为防止设备信号串扰,握手过程中可加入密码确认。
为防止信息泄密,握手信息可加密压缩,压缩方法可以是RSA或DES等。
手持终端和智能终端建立握手后,可实现手持终端与智能终端的移屏操作,但要实现本发明的手持终端和智能终端同时收看相同或不同的节目,还需进行如下操作:
A.手持终端向智能终端发送节目信源获取请求消息:“ProgramListReq+手持设备标识+设备码”。
B.智能终端接收节目信源获取请求消息后,反馈节目信源列表消息:ProgramLisRsp+手持设备标识+设备码”。
智能终端设备通过信源通道接收1路或多路节目信源,解码后显示输出。智能终端可通过操作界面切换节目信源,选择收看的节目。
其中,智能终端的多源节目包括多通道多源或单通道复用多源,其输入方式包括多信道多源接入或单信道复用多源接入。
其中,信道包括:电视信道、有线或无线网络、红外或蓝牙等。
智能终端的节目通道信源包括有线或无线电视信源、网络信源、DVD、AV、USB或其它接入设备的输入信源。
智能终端操作界面包括设备操作面板、遥控器或手持设备远程操控系统等。智能终端的节目信源切换方式包括遥控器或手机PAD指令等。
智能终端收看的节目信息可以是1路或多路,其信源可以是有线电视信号或网络媒体信息等。
需要指出的是,手持终端可定时发送节目信源列表更新请求。
智能终端在握手成功后,可自动向手持终端发送节目信源列表通知消息。
智能终端在握手成功后,当有节目信源更新时,自动发送节目信源列表更新消息:“ProgramLisRefush+手持设备标识+设备码+DEL:节目信源1+ADD:节目信源2......”;其中,“DEL:节目信源1”表示删除的节目信源,“ADD:节目信源2”表示新增节目信源。其中,删除节目信源和新增节目信源可同时存在也可只存在一种。
步骤102,根据用户在该节目信源列表中选择的节目信源向智能终端发送收看请求消息,该收看请求消息中包括有节目信源ID;
手持终端接收节目信源列表后,形成列表清单供用户选择,用户可选择1路或多路节目信源。
其中,选择方式包括:按键、语音识别或手机PAD重力动作等。
用户选择1路或多路节目信源后,向智能终端发送收看请求消息:“Program ViewReq+手持设备标识+设备码+ADDVIEW:节目信源1+ADDVIEW:节目信源2+DELVIEW:节目信源3+DELVIEW:节目信源4+......”,其中,“DELVIEW:节目信源1”表示不再看的节目信源,“ADDVIEW:节目信源2”表示新增要看的节目信源。其中,不再看的节目信源和新增要看的节目信源可同时存在也可只存在一种。
步骤103,接收智能终端根据该收看请求消息返回的与节目信源ID对应的节目信息,并将该节目信息给手持终端进行显示。
智能终端接收收看请求消息后,对指定节目信源对应的节目信息解码并重新压缩后通过传输通道将节目信息传输到手持终端。
其中,节目信息的传输方式包括Wifi、蓝牙、红外或有线连接等。信息处理方式包括压缩或编码等。
手持终端接收节目信息,解码后显示输出。手持终端结束观看时取消握手。
其中,为达到减少数据量和减少失真度,压缩编码算法可选择有损压缩或无损压缩算法。
通过上述方式,实现本发明手持终端信源的切换,需要指出的是,智能终端与手持终端建立握手后,手持终端可不进行信源切换,直接通过有线或无线通道接收节目信息,并解码后在手持终端上显示和输出。
手持终端信源的切换可以发生在节目收看前或节目收看过程中。
本发明基于智能终端和手持终端,利用智能终端的多路信源接入,通过智能终端设备的多路解码器解码,将1路或几路节目信息在智能终端的显示屏和扬声器上输出的同时,将与智能终端播放的相同或不同的1路或几路节目信息,通过编码和无线或有线传输通道传输到手持终端上,手持终端对其进行解码,并通过显示屏和扬声器显示输出。
通过上述方式,本发明实现了智能终端与手持终端之间的多模移屏功能,通过手持终端的移屏,实现单台智能终端的多任务和多应用的家庭数字媒体生活的扩展,达到手持终端和智能终端同时收看不同或相同的1路或几路节目信息,且二者均能独立进行信源的切换,使智能终端的应用更丰富,使用更方便,资源更节约。
对于图1所示的实施例中,还包括如图2所示的多模移屏方法,如图2所示,智能终端的信息可以在手持终端上实现移屏外,手持终端的信息同样可以在智能终端上实现移屏。具体为手持终端可将本地存储的媒体文件数据或实时采集的媒体流通过智能终端显示输出或通过智能终端的接入信道输出,具体步骤包括:
步骤201,手持终端与智能终端建立连接后,智能终端接收手持终端发送的信息发布请求消息;
信息发布请求消息的格式为:“PublishReq+MediaType+PublishMode”;其中“MediaType”表示要发布的媒体类型,媒体类型包括非实时的媒体文件和实时的媒体流;“PublishMode”表示发布的模式,发布模式包括智能终端设备显示输出或智能终端设备接入信道输出。
步骤202,智能终端接收信息发布请求消息后,根据自己能力或用户设置判断是否发布手持终端信息,若允许发布,则向手持终端发送信息同意发布消息;
信息同意发布消息的格式为:“PublishOK+MediaType+PublishMode”;其中,“MediaType”和“PublishMode”所表示的意思与步骤201中所示的意思相同。
步骤203,接收手持终端接收信息同意发布消息后,通过传输通道传输的信息;
信息格式为:“PublishData+MediaType+PublishMode+MediaPt+TotalLen+CurrentLength+MediaData”;其中“MediaPt”表示媒体的Payload类型,即媒体格式;“TotalLen”表示媒体的总长度,若为媒体流则,总长度可用“-1”表示;“CurrentLength”表示当前消息传输的媒体长度;“MediaData”为实际传输的媒体数据。其中,“MediaData”表示的媒体数据按照标准的RTP格式或自定义格式组织。
其中,信息可包括本地存储的图片、音频、视频、文档文件、或实时采集的音频、视频信息流。
步骤204,智能终端接收手持终端传输的信息后,显示输出。
通过上述方式,将手持终端本地存储的视频、音频、图片或文字等媒体文件信息或实时采集的媒体流信息,实时或非实时的通过握手成功的智能终端显示输出或通过智能终端的接入信道输出,实现了通过智能终端发布手持终端的信息应用。
在图1和图2所示的方法流程中,其共同点为,智能终端与手持终端完成多模移屏后,若不想再进行下一节目的移屏收看,可取消握手。对于建立多模移屏时播放的节目,若智能终端与手持终端不关闭电源,可继续收看。
取消握手的方式为,智能终端和手持终端其任何一方都可主动向对方发送握手取消消息:“HandshakeCancel+手持设备标识+设备码”。其中,“手持设备标识”为手持终端的标识;“设备码”为智能终端的标识。
其中,图1与图2所示的移屏模式,在智能终端与手持终端建立连接后,可同时存在,也可只存在一种。
图3是本发明多模移屏方法另一实施例的流程示意图,如图所示,多模移屏方法包括:
步骤301,接收多路节目信源,解码输出一路或者多路节目信息并生成节目信源列表;
智能终端设备通过信源通道接收1路或多路节目信源,解码后显示输出。智能终端可通过操作界面切换节目信源,选择收看的节目。对于接收到的多路节目信源形成节目信源列表。
其中,智能终端的多源节目包括多通道多源或单通道复用多源,其输入方式包括多信道多源接入或单信道复用多源接入。
其中,信道包括:电视信道、有线或无线网络、红外或蓝牙等。
智能终端的节目通道信源包括有线或无线电视信源、网络信源、DVD、AV、USB或其它接入设备的输入信源。
智能终端操作界面包括设备操作面板、遥控器或手持设备远程操控系统等。智能终端的节目信源切换方式包括遥控器或手机PAD指令等。
智能终端收看的节目信息可以是1路或多路,其信源可以是有线电视信号或网络媒体信息等。
步骤302,与手持终端建立连接,并将节目信源列表发送给手持终端;
智能终端与手持终端的握手连接,与图1所示实施例中的握手连接相同,在此不再赘述。
智能终端将节目信源列表发送给手持终端的方式有三种,具体如下:
A.手持终端首先向智能终端发送节目信源列表获取请求消息,智能终端接收请求后,反馈节目信源列表。
B.智能终端在握手成功后,可自动向手持终端发送节目信源列表通知消息。
C.智能终端在握手成功后,当有节目信源更新时,自动发送节目信源列表更新消息:“ProgramLisRefush+手持设备标识+设备码+DEL:节目信源1+ADD:节目信源2......”;其中,“DEL:节目信源1”表示删除的节目信源,“ADD:节目信源2”表示新增节目信源。其中,删除节目信源和新增节目信源可同时存在也可只存在一种。
步骤303,接收手持终端发送的收看请求消息,该收看请求消息中包括有节目信源ID;
手持终端接收节目信源列表后,形成列表清单供用户选择,用户可选择1路或多路节目信源,并向智能终端发送收看请求消息。智能终端接收收看请求消息。
步骤304,获取与节目信源ID对应的节目信息,并将该节目信息发送给手持终端进行显示。
智能终端接收收看请求消息后,对指定节目信源对应的节目信息解码并重新压缩后通过传输通道将节目信息传输到手持终端。通过上述方式,实现手持终端节目信号源的切换。
图4是本发明多模移屏系统一实施例的流程示意图,如图所示,多模移屏系统包括:手持终端和智能终端。多模移屏系统实现多模移屏的方法如下:
步骤401,智能终端接收多节目信源后,解码输出一路或者多路节目信息并生成节目信源列表;
智能终端可接收多节目信源,并对其进行解码显示。同时智能终端可通过操作界面对节目信源进行切换。
步骤402,智能终端与手持终端建立连接后,将节目信源列表发送给手持终端;
在本系统中,智能终端与手持终端要想进行数据的传输,需建立握手连接。握手连接的操作可发生在智能终端接收多源节目前,也可发生在智能终端接收多源节目后。
步骤403,手持终端获取智能终端侧的节目信源列表;
步骤404,手持终端根据用户在节目信源列表中选择的节目信源向智能终端发送收看请求消息,收看请求消息包括节目信源ID;
手持终端通过对节目信源列表中的节目信源进行选择,来实现对节目信源的切换。
步骤405,智能终端接收手持终端发送的收看请求消息,收看请求消息包括节目信源ID;
步骤406,智能终端获取与节目信源ID对应的节目信息,并将节目信息发送给手持终端;
智能终端接收收看请求消息后,对指定节目信源对应的节目信息解码并重新压缩后通过传输通道将节目信息传输到手持终端。
步骤407,手持终端接收智能终端根据收看请求消息返回的与节目信源ID对应的节目信息,并将节目信息显示给用户;
手持终端接收节目信息,解码后显示输出。
步骤408,手持终端结束观看时取消握手。
其中,在该多模移屏系统中,手持终端可将本地存储的媒体文件数据或实时采集的媒体流通过智能终端显示输出或通过智能终端的接入信道输出。
其中,上述多模移屏系统中,手持终端可以为一个或一个以上。
多模移屏系统还可包括两个或两个以上智能终端,实现智能终端之间的多模移屏。
根据图4所示的多模移屏系统,该多模移屏系统包括一多模移屏装置,如图5所示,图5是本发明多模移屏装置一实施例的结构示意图,如图所示,该装置为手持终端的多模移屏装置,包括:第一获取模块51、第一发送模块52、第一接收模块53、第二发送模块54、第一握手模块55、第一控制模块56、节目解码模块57、媒体编码模块58(图未示)以及第一显示模块59。其中,第一握手模块55包括:第一发送单元551、接收单元552以及第二发送单元553。
其中,第一获取模块51用于在与智能终端建立连接后,获取智能终端侧的节目信源列表;
第一发送模块52用于根据用户从节目信源列表中选择的节目信源向智能终端发送收看请求消息,该收看请求消息中包括有节目信源ID;
第一接收模块53用于接收该智能终端根据收看请求消息返回的与节目信源ID对应的节目信息,并将该节目信息进行显示;
第二发送模块54用于向智能终端发送节目信源列表获取请求消息;
以及用于使手持终端与智能终端建立连接的第一握手模块55,第一握手模块55包括:第一发送单元551用于发送握手请求消息;接收单元552用于侦听广播端口,接收智能终端反馈的握手确认消息;第二发送单元553用于在接收单元552接收智能终端反馈的握手确认消息后,向智能终端发送握手成功的消息。
第一控制模块56用于控制节目解码模块57解码、媒体编码模块58编码以及与第一握手模块55交互,控制握手协商过程;
节目解码模块57用于解码节目信息;
媒体编码模块58用于编码手持终端50上存储的媒体文件或从媒体源采集的实时媒体流;
第一显示模块59用于节目信息的显示与输出。
对于图5所示的实施例中,还包括如图6所示的多模移屏装置,图6所示的多模移屏装置包括:第三接收模块61、第五发送模块62、第四接收模块63以及第三显示模块64。
其中,第三接收模块61用于手持终端与智能终端建立连接后,智能终端接收手持终端发送的信息发布请求消息;
第五发送模块62用于智能终端接收信息发布请求消息后,根据自己能力或用户设置判断是否发布手持终端信息,若允许发布,则向手持终端发送信息同意发布消息;
第四接收模块63用于接收手持终端接收信息同意发布消息后,通过传输通道传输的信息;
第三显示模块64用于智能终端接收手持终端传输的信息后,显示输出。
根据图4所示的多模移屏系统,该多模移屏系统还包括一多模移屏装置,如图7所示,图7是本发明多模移屏装置另一实施例的结构示意图,如图所示,该装置为智能终端的多模移屏装置,包括:生成模块71、第三发送模块72、第二接收模块73、第四发送模块74、第二握手模块75、第二控制模块76、分发模块77、节目编码模块78以及第二显示模块79。
其中,生成模块71用于将多路节目信源解码输出一路或者多路节目信息并生成节目信源列表;
第三发送模块72用于在与手持终端建立连接后,将生成模块71生成的节目信源列表发送给手持终端;其中,第三发送模块72具体用于智能终端向手持终端主动发送节目信源列表,节目信源列表包括即时更新的节目信源列表;
第二接收模块73用于在第三发送模块72发送节目信源列表给手持终端后,接收手持终端发送的收看请求消息,该收看请求消息中包括有节目信源ID;
第四发送模块74用于获取与节目信源ID对应的节目信息,并将节目信息发送给手持终端;
第二握手模块75用于与手持终端协商,建立握手连接;
第二控制模块76用于控制生成模块71选择节目源解码,并控制分发模块77分发不同或相同的节目到不同的目的地;
分发模块77用于决定某路或某几路节目信息分发给本地显示模块79显示输出或/和通过节目编码模块78编码后传输到手持终端;
节目编码模块78用于将需要分发给手持终端的原始节目信息进行编码;
第二显示模块79用于节目信息的显示和输出,包括显示屏、外接显示器、扬声器或无线耳机。
请参阅图5、图6以及图7,智能终端和手持终端的多模移屏装置的工作原理为智能终端通过有线或无线传输通道,接入多节目信源,然后传入手持终端,或通过信道发布手持终端存储的媒体文件或实时从媒体源采集的媒体流信息,从而实现智能终端和手持终端的多模移屏应用。
具体应用时,用户首先启动智能终端和手持终端,同时也启动了各终端的所有模块,智能终端在启动后按照正常流程通过生成模块71接收多节目信源后,解码输出一路或者多路节目信息并生成节目信源列表,然后分发模块77决定某路或某几路节目信息分发给本地第二显示模块79显示输出或/和通过节目编码模块78编码后传输到手持终端。若分发给本地第二显示模块79显示输出,则智能终端完成自身1路或多路节目信息的收看。
当智能终端与手持终端需要多模移屏时,则分发模块77将某路或某几路节目信息分发给节目编码模块78进行编码,然后传输到手持终端。要想实现智能终端与手持终端之间数据的传输,必须使二者建立握手连接,通过第一握手模块55和第二握手模块75建立握手连接。
手持终端与智能终端建立握手连接后,手持终端通过第二发送模块54向智能终端发送节目信源列表获取请求消息,智能终端接收节目信源列表获取请求消息后,通过第三发送模块72将生成模块71生成的节目信源列表发送给手持终端,其中,第三发送模块72还可向手持终端主动发送节目信源列表,节目信源列表包括即时更新的节目信源列表。
手持终端通过第一获取模块51获取智能终端侧的节目信源列表,并且通过第一发送模块52根据用户在节目信源列表中选择的节目信源向智能终端发送收看请求消息,收看请求消息包括节目信源ID。智能终端的第二接收模块73接收手持终端发送的收看请求消息后,收看请求消息包括节目信源ID,节目编码模块78根据收看请求消息将与节目信源ID对应的节目信息进行编码,并且通过第四发送模块74发送给手持终端。手持终端的第一接收模块53接收智能终端根据收看请求消息返回的与节目信源ID对应的节目信息,通过节目解码模块57进行解码,并将解码后的节目信息通过第一显示模块59显示给用户。
在该装置中,还可通过媒体编码模块58,编码手持终端上存储的媒体文件或从媒体源实时采集的媒体流,并传输到智能终端上发布应用,通过第二显示模块79显示输出。从而实现家庭数字媒体生活中单台智能终端多任务和多应用的多模移屏应用。
利用上述装置能够实现智能终端和手持终端同时收看相同或不同的节目信息,并可同时独立进行信源切换操作;也可实现通过智能终端显示输出或通过接入信道输出手持终端存储的媒体数据文件或实时采集的媒体信息流。实现单台智能终端的多任务和多应用,使智能终端应用更丰富,使用更方便,资源更节约。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。