CN113316008A - 一种手机和电视基于usb相连接的自拍镜像投屏系统及方法 - Google Patents

Abstract

本发明公开了一种手机和电视基于USB相连接的自拍镜像投屏系统及方法，其中方法包括Step1、将手机终端和电视终端通过USB模块连接；当电视终端或手机终端接收到自拍指令时进入Step2；Step2、根据自拍指令生成对应自拍请求；Step3、手机终端根据自拍请求，通过手机摄像装置采集自拍数据；Step4、对自拍数据中的多帧图像画面依序执行自拍预处理操作生成预显示数据，并将预显示数据发送至所述电视终端；所述自拍预处理包括“提取图像画面中人体对应区域的全部或部份，并将提取到的画面合成到背景画面上生成新显示画面”；Step5、所述电视终端播放预显示数据。本发明将手机和电视终端基于USB连接后通过手机摄像装置采集自拍者影像并传输至电视终端,实现体验更好的自拍。

Description

一种手机和电视基于USB相连接的自拍镜像投屏系统及方法

技术领域

本发明属于自拍镜像投屏领域，尤其涉及一种手机和电视基于USB相连接的自拍镜像投屏系统及方法。

背景技术

目前，自拍业务受到广泛欢迎，在CN212343928U电视照镜装置、CN105763905A一种手机和电视共享摄像头的方法及系统和CN210899391U一种具有自拍功能的电视三篇中国专利中，公开了基于手机和电视通信，通过手机摄像头采集自拍数据并传输到电视终端进行显示，使自拍变得更加容易。

但以上专利记载的内容中，未考虑手机和电视显示的区别，手机摄像头采集的自拍数据是基于手机屏幕进行显示的，并非基于电视屏幕进行显示，将手机采集的自拍数据直接在电视屏幕上进行显示，会出现不兼容问题，导致不能得到很好的自拍效果或者无法显示。此外，此类自拍时用户习惯基于电视屏幕上的用户界面进行操作，用户界面数据及操控指令是会经常更新的外部数据，需要有便捷简单的方式能够在通讯能力相对较弱的电视终端上实现，否则会导致目前家庭已有的电视终端相当部份无法开展自拍，有的即使具备开展自拍条件，也因为繁琐的连接配置导致用户不会使用因而闲置。

同时，手机基本都有USB接口，电视终端基本都有USB接口或HDMI接口，手机和电视终端都已经获得普及，怎样充分利用这些已有接口，在不改变手机、电视终端原有结构的前提下，以尽可能便捷的方式和最小的代价开展自拍业务并取得良好的自拍效果，是本领域技术人员需要研究的方向。

发明内容

本发明所要解决的技术问题在于针对上述现有技术中的不足，提供一种手机和电视基于USB相连接的自拍镜像投屏系统及方法，将手机终端和电视终端基于USB模块连接后开展各类自拍业务如电视自拍及照镜、健身游戏等，通过手机摄像装置采集自拍者人体影像，并在运算能力更强的手机终端上完成自拍预处理后通过USB模块传输至电视终端显示，处理效果好，数据传输实时性高，使用者能看清楚自身影像和虚拟背景融合后的效果并基于流畅的融合画面进行连惯的自拍表演；通过天然具备强大网络能力的手机终端获取需要经常更新、来源多样的用户界面数据，并通过USB模块传输至电视终端显示，可以避免复杂的网络调试，也无需对现有电视终端和家庭通讯网络进行结构改造就可以开展业务，成本低，实施便捷，并方便使用者基于电视大屏界面进行操控；通过自拍预处理操作实现和各种虚拟背景良好融合的拍摄，取得更好的自拍效果。

本发明第一方面公开了一种手机和电视基于USB相连接的自拍镜像投屏系统，包括手机终端、图像处理模块、指令接收模块和电视终端，所述手机终端和电视终端之间通过USB模块连接；所述USB模块为“USB数据传输链路”或“USB转HDMI数据传输链路”；

所述手机终端，用于接收到自拍请求后，通过手机摄像装置采集自拍数据；

所述图像处理模块设置在手机终端；所述电视终端包括显示单元，所述显示单元用于播放预显示数据和显示用户界面数据；所述图像处理模块包括图像处理单元和指令处理单元，所述图像处理单元用于对自拍数据中多帧图像画面依序执行自拍预处理操作生成预显示数据，并将预显示数据发送至所述电视终端；所述自拍预处理包括“提取图像画面中人体对应区域的全部或部份，并将提取到的画面合成到背景画面上生成新显示画面”；所述指令处理单元用于当所述指令接收模块接收到自拍指令时，指令处理单元生成自拍请求发送至手机终端；所述指令处理单元还用于当所述指令接收模块接收到用户界面指令时，指令处理单元生成用户界面请求并发送至图像处理模块；所述图像处理模块接收到用户界面请求后，生成用户界面数据发送至所述显示单元进行显示；

所述USB模块用于传输预显示数据和用户界面数据。

通过采用上述技术方案：基于USB模块在手机和电视终端之间传送预显示数据和用户界面数据，可以确保低延时和稳定性，满足高实时要求的自拍类业务需要，同时避免了复杂的网络连接，安装方便，此外，由于手机自带摄像装置，可以低成本地开展电视自拍类业务。

实际使用时，手机通常放置于电视机上方，用户和电视机保持一定的距离以方便观察电视屏幕上的自身影像，由于此时手机离使用者比较远，用户基于电视终端界面如用户界面数据发出操控指令，进行自拍。

在实操时，电视终端呈现的用户界面数据需要经常更新以满足自拍需要，如用户操作界面数据、自拍时用户选取的道具、自拍前用户预览的背景视频或图像等，电视终端一则存储等配置比较小，二则连接网络繁琐不方便或者无法连接，通过USB模块将其连接至天然具备网络能力的手机、进而获取相应的用户界面数据，可以明显提高使用的便捷性，整个装置都无需繁琐的网络配置，此外，手机的计算能力通常比电视更高，将图像处理模块设置在手机终端上，自拍的整体效果更好，也更方便将自拍的结果分享出去，同时，利用电视终端屏幕大的优势，将预显示数据和用户界面数据显示在电视终端上，便于使用者观看。

传统手机自拍一般由用户选择好背景后通过自拍杆进行拍摄，只能拍摄一些较为简单的场景，有的再进一步通过后期制作来获得更复杂的效果，整个过程繁琐不可控，而手机和电视基于USB模块相连接的自拍镜像投屏系统通过将提取到的人体画面和背景画面如虚拟背景画面融合，可以让使用者方便地在电视大屏幕上实时观察到自身影像和虚拟背景的融合并据此进行相关动作，获得更好的自拍体验。需要说明的是，所述背景画面也可以基于自拍数据图像画面生成，如基于自拍数据图像画面将提取到的人体对应区域进行色彩调整后生成新显示画面。需要说明的是，USB接口已经在手机得到普及，USB接口或HDMI接口已经在电视终端得到普及，同时基于手机的运算能力提取自拍数据中的人体并和虚拟背景融合已经非常成熟，因此本方案可以覆盖非常广泛的存量设备，并且安装实施便捷，只需在手机上安装图像处理模块，无需对电视终端和手机终端进行大的实施改造，技术实施性强，成本低。

上述手机和电视基于USB相连接的自拍镜像投屏系统，所述USB模块为USB数据传输链路；所述指令接收模块设置在电视终端。

另外，所述USB模块还可以为USB转HDMI数据传输链路；所述指令接收模块设置在手机终端。

通过采用上述技术方案：手机和电视终端通过USB传输链路连接，通过电视终端接收外部界面指令并通过USB数据传输链路发送至手机，可以充分利用现有存量装置如电视遥控器接收外部界面指令，以进一步降低成本和符合用户原有使用习惯。另外，指令接收模块可以利用现有电视指令接收模块，只需在电视中写入一个响应机制即可，当收到外部指令时，基于响应机制通过电视上的USB接口将响应发送至指令处理单元。响应机制可通过存储设备和电视基于USB协议传输至电视中，并基于电视上的应用更新协议写入至电视中，所述存储设备为手机、U盘等。

需要说明的是，所述自拍指令和所述用户界面指令，都可以由电视终端接收或手机终端接收或两者的组合，由于用户界面数据选择比较繁琐，完全通过语音或手势指令实现会给用户带来很大不便，所以在电视终端设置指令接收模块,可以充分利用电视终端原有遥控装置，提高用户体验，而自拍请求相对不繁琐，当用户完成数据或功能等预览，需要进行正式自拍时，也可以仅通过发出语音或手势指令，由电视终端或手机终端接收后进行下一步处理，这样还可以避免正式自拍时手上多出遥控器。

需要说明的是，所述用户界面数据可以是视频或图像数据，也可以是其它数据如信息类数据，由于电视终端能够接收用户界面指令并通过USB数据传输链路发送至手机，这种情况下用户界面数据采用所述其它数据如信息类数据是更佳方案，可以提高数据传输效率和用户界面操作响应速度。

需要说明的是，通过USB数据传输链路在手机终端和电视终端之间传输相关数据为本领域常用技术，如USB2.0/USB3.0传输协议以及基于其上的AOA数据传输协议等。

另外，由于当USB模块为USB传输链路时，需要对预显示数据和用户界面数据进行转换处理后才能在电视终端显示，因此需要具有相应数据格式转换的电视终端才能实施，而部份老电视终端不支持相应数据格式转换或者基于电视上的应用更新协议更新数据格式转换功能，为此采用USB转HDMI数据传输链路，将USB端接手机侧，HDMI端接电视终端侧，由于电视终端天然支持HDMI信号的播放，所以此时所述显示单元无需对预显示数据和用户界面数据进行转换处理就可以在电视终端显示，因此也就无需在电视终端额外安装模块，提高便捷性。

需要说明的是，当采用USB转HDMI数据传输链路时，用户界面数据为视频或图像，使其可以直接在电视终端显示，同时，由于电视终端无法通过所述USB转HDMI数据传输链路发送数据至手机，所以指令接收单元设置在手机上，用户可以通过手机遥控器、语音、手势等多种方式发出相关指令。

另外需要说明的是，若所述电视终端为电视机顶盒，由于大多数电视机顶盒不带HDMI输入接口，此种情况下需要采用USB数据传输链路。

需要说明的是，通过USB转HDMI数据传输链路在手机终端和电视终端之间传输相关数据为本领域常用技术，如通过USB-HDMI转换器，将USB传输链路转换成HDMI传输链路，或基于MHL标准将micro USB输出的数据通过HDMI接口接收等。

上述手机和电视基于USB相连接的自拍镜像投屏系统，所述USB模块包括图像传输单元和信息传输单元，所述图像传输单元用于传输预显示数据，所述信息传输单元用于传输用户界面数据。

预显示数据和用户界面数据分别用两个独立的单元进行传输，可以在电视终端同时显示，帮助用户在自拍过程中进行一些功能操作，如使用用户界面中的添加饰品的功能等。

上述手机和电视基于USB相连接的自拍镜像投屏系统，所述提取图像画面中人体对应区域的全部或部份包括以下步骤：

步骤1、计算当前帧图像画面中人体对应区域的全部或部份象素坐标集合和相邻帧图像画面中人体对应区域全部或部份象素坐标集合之间的相似度S，若S≥A，则进入步骤3，否则，进入步骤2；所述A为阈值；

步骤2、以当前帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份；

步骤3、以相邻帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份。

通过采用上述技术方案：可以有效避免或降低从连续多帧图像画面中提取人体对应区域并据此形成连续新显示画面的过程中所产生的人体图像边缘闪烁。现有技术在提取自拍图像画面中人体对应区域的全部或部份时，获取的人体对应区域像素坐标集不完全准确，并且不同画面获取的人体像素坐标集往往不同，而人体视频是由多幅连续运动的图像组成的，每秒有很多帧画面，会造成视频画面中人体边缘闪烁不停，现有技术主要应用在手机上，由于屏幕尺寸限制闪烁不明显，而在电视大屏上显示，就会造成使用者观看不适。

基于本发明的方案，当S大于等于预设的阈值A，说明相邻画面中的人体对应区域全部或部份位移极小，此时不再重新计算人体像素坐标，人眼不会产生明显的运动错误感觉，同时明显降低人体边缘的闪烁程度。需要说明的是，所述阈值A可以根据经验值设定如A大于90%。需要说明的是，上述相邻帧画面，可以是紧邻当前帧画面的帧画面，也可以是有一定间隔的帧画面，相邻帧画面可以是一帧或多帧，可以根据经验值设定。

本发明第二方面公开了一种手机和电视基于USB相连接的自拍镜像投屏方法，包括以下步骤：

Step1、将手机终端和电视终端通过USB模块连接；当指令接收模块接收到自拍指令时执行Step2—Step5；当指令接收模块接收到用户界面指令时执行Step6—Step7；

Step2、根据接收的自拍指令生成对应自拍请求，然后进入Step3；

Step3、手机终端根据自拍请求，通过手机摄像装置采集自拍数据，然后进入Step4；

Step4、手机终端对自拍数据中的多帧图像画面依序执行自拍预处理操作生成预显示数据，并将预显示数据发送至所述电视终端；所述自拍预处理包括“提取图像画面中人体对应区域的全部或部份，并将提取到的画面合成到背景画面上生成新显示画面”；然后进入Step5；

Step5、所述电视终端播放预显示数据；

Step6、根据接收的用户界面指令生成对应用户界面请求；然后进入Step7；

Step7、手机终端根据用户界面请求，生成用户界面数据发送至所述电视终端进行显示；

所述USB模块（400）为“USB数据传输链路”或“USB转HDMI数据传输链路”；

所述USB模块（400）用于传输预显示数据和用户界面数据。

上述手机和电视基于USB相连接的自拍镜像投屏方法，所述USB模块为USB数据传输链路；所述指令接收模块设置在电视终端。另外，所述USB模块还可以为USB转HDMI数据传输链路；所述指令接收模块设置在手机终端。

上述手机和电视基于USB相连接的自拍镜像投屏方法，所述USB模块包括图像传输单元和信息传输单元，所述图像传输单元用于传输预显示数据，所述信息传输单元用于传输用户界面数据。

上述手机和电视基于USB相连接的自拍镜像投屏方法，所述提取图像画面中人体对应区域的全部或部份包括以下步骤：

步骤1、计算当前帧图像画面中人体对应区域的全部或部份象素坐标集合和相邻帧图像画面中人体对应区域全部或部份象素坐标集合之间的相似度S，若S≥A，则进入步骤3，否则，进入步骤2；所述A为阈值；

步骤2、以当前帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份；

步骤3、以相邻帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份。

本发明与现有技术相比具有以下优点：

1、本发明手机终端和和电视终端通过USB相连接，实现用户体验更好的自拍镜像投屏。

2、本发明避免网络调试，安装方便。

3、本发明基于家庭已有普通手机和普通电视终端设备即可实现，成本低，可实施性强。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

图1为本发明实施例1中第一种系统模块框图。

图2为本发明实施例1中第二种系统模块框图。

图3为本发明实施例2的方法流程图。

附图标记说明:

100—手机终端；	200—图像处理模块；	201—图像处理单元；
			202—指令处理单元；	300—电视终端；	301—显示单元；
400—USB模块；	401—图像传输单元；	402—信息传输单元；
			500—指令接收模块。

具体实施方式

实施例1

如图1所示，一种手机和电视基于USB相连接的自拍镜像投屏系统，其特征在于，包括手机终端100、图像处理模块200、指令接收模块500和电视终端300，所述手机终端100和电视终端300之间通过USB模块400连接；所述USB模块400为“USB数据传输链路”或“USB转HDMI数据传输链路”；

所述手机终端100，用于接收到自拍请求后，通过手机摄像装置采集自拍数据；

所述图像处理模块200设置在手机终端100；所述电视终端300包括显示单元301，所述显示单元301用于播放预显示数据和显示用户界面数据；

所述图像处理模块200包括图像处理单元201和指令处理单元202，所述图像处理单元201用于对自拍数据中的多帧图像画面依序执行自拍预处理操作生成预显示数据，并将预显示数据发送至所述电视终端300；所述自拍预处理包括“提取图像画面中人体对应区域的全部或部份，并将提取到的画面合成到背景画面上生成新显示画面”；所述指令处理单元202用于当所述指令接收模块500接收到自拍指令时，指令处理单元202生成自拍请求发送至手机终端100；所述指令处理单元202还用于当所述指令接收模块500接收到用户界面指令时，指令处理单元202生成用户界面请求并发送至图像处理模块200；所述图像处理模块200接收到用户界面请求后，生成用户界面数据发送至所述显示单元301进行显示；

所述USB模块400用于传输预显示数据和用户界面数据。

需要说明的是，所述外部指令可通过如电视遥控器、语音提示、手势提示等多种方式发出。

本发明启动运行时，所述图像处理模块200生成用户界面数据并通过所述USB模块400的信息传输单元402发送至所述显示单元301进行显示。所述用户界面中具有自拍指令的标识，用户通过选择自拍指令的标识确认后发出自拍指令；当所述指令接收模块500接收到自拍指令时，指令处理单元202生成自拍请求发送至手机终端100；手机终端100接收到自拍请求后，通过手机摄像装置采集自拍数据。手机摄像装置指手机摄像头。

拍摄完成后，用户发出用户界面指令，当所述指令接收模块500接收到用户界面指令时，指令处理单元202生成用户界面请求并发送至图像处理模块200；所述图像处理模块200接收到用户界面请求后，生成用户界面数据并通过所述信息传输单元402发送至所述显示单元301进行显示。

需要说明的是，所述USB模块400中用图像传输单元401传输预显示数据；用信息传输单元402传输图像处理模块200发向显示单元301的用户界面数据；这样整个业务都无需进行繁琐的网络配置，以适应各种用户端环境。需要说明的是，所述用户界面数据可以是完整的用户UI界面数据，也可以是部份用户界面数据如用户界面业务更新数据。

本实施例中，所述USB模块400为USB传输链路；所述指令接收模块500设置在电视终端300。另外，如图2所示，所述USB模块400还可以为USB转HDMI传输链路；所述指令接收模块500设置在手机终端100。

需要说明的是，目前为止，可以支持USB数据传输链路输入的电视终端300，大多是比较新的电视，而仅支持HDMI传输链路输入的电视终端300大多是比较旧的电视，指令接收模块500使用的是手机终端100或电视终端300上已有的指令接收模块，不同的是，当指令接收模块500在电视上时，用户可以使用电视遥控器发出指令比较符合用户看电视的习惯，另外需要在电视中写入一个响应机制，当收到外部指令时，基于响应机制通过电视上的USB接口将响应发送至指令处理单元。响应机制可通过存储设备和电视基于USB协议传输至电视中，并基于电视上的应用更新协议写入至电视中，所述存储设备为手机、U盘等。

而指令接收模块500在手机上时，则就需要用户使用语音、手势、手机遥控器等对手机发出指令。此时因为是HDMI传输，所以不需要对电视写入响应机制。

本实施例中，所述USB模块400包括图像传输单元401和信息传输单元402，所述图像传输单元401用于传输预显示数据，所述信息传输单元402用于传输用户界面数据。

本实施例中，所述提取图像画面中人体对应区域的全部或部份包括以下步骤：

步骤1、计算当前帧图像画面中人体对应区域的全部或部份象素坐标集合和相邻帧图像画面中人体对应区域全部或部份象素坐标集合之间的相似度S，若S≥A，则进入步骤3，否则，进入步骤2；所述A为阈值；

步骤2、以当前帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份；

步骤3、以相邻帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份。

本例中所述相邻帧为上一帧，需要说明的是，所述相邻帧还可以是当前帧之前或之后的一帧或几帧，例如，如果在对自拍数据中的多帧图像画面依序执行自拍预处理操作时已经预先获取到了所述多帧图像画面的全部或部份，那么可以基于当前帧的之前帧或之后帧或之前帧和之后帧组合中的一帧或几帧图像画面中人体对应区域全部或部份象素坐标集合作为提取当前帧图像画面中人体对应区域的计算依据，目的是对人体位移极小的相邻画面只计算一次人体对应像素坐标并以此作为提取人体对应区域的依据，这样人眼不会产生明显的运动错误感觉，同时明显降低人体边缘的闪烁程度。

实施例2

如图3所示，一种手机和电视基于USB相连接的自拍镜像投屏方法，包括以下步骤：

Step1、将手机终端100和电视终端300通过USB模块400连接；当指令接收模块500接收到自拍指令时执行Step2—Step5；当指令接收模块500接收到用户界面指令时执行Step6—Step7；

Step2、根据接收的自拍指令生成对应自拍请求，然后进入Step3；

Step3、手机终端100根据自拍请求，通过手机摄像装置采集自拍数据，然后进入Step4；

Step4、手机终端100对自拍数据中的多帧图像画面依序执行自拍预处理操作生成预显示数据，并将预显示数据发送至所述电视终端300；所述自拍预处理包括“提取图像画面中人体对应区域的全部或部份，并将提取到的画面合成到背景画面上生成新显示画面”；然后进入Step5；

Step5、所述电视终端300播放预显示数据；

Step6、根据接收的用户界面指令生成对应用户界面请求；然后进入Step7；

Step7、手机终端100根据用户界面请求，生成用户界面数据发送至所述电视终端300进行显示；

所述USB模块400为“USB数据传输链路”或“USB转HDMI数据传输链路”。

所述USB模块400用于传输预显示数据和用户界面数据。需要说明的是，执行Step2—Step5是为了得到自拍形成的预显示数据，执行Step6—Step7是为了形成用户界面供用户进行功能操作。所述外部指令可通过如电视遥控器、语音提示、手势提示等多种方式发出。

本发明启动运行时，生成用户界面数据并通过USB模块400发送至电视终端300进行显示。所述用户界面中具有自拍指令的标识，用户通过选择自拍指令的标识确认后发出自拍指令；当所述指令接收模块500接收到自拍指令时，手机终端100通过手机摄像装置采集自拍数据。手机摄像装置指手机摄像头。

拍摄完成后，用户发出用户界面指令，当所述指令接收模块500接收到用户界面指令时，手机终端100生成用户界面数据并通过USB模块400发送至电视终端300进行显示。

需要说明的是，整个业务都无需进行繁琐的网络配置，以适应各种用户端环境。所述用户界面数据可以是完整的用户UI界面数据，也可以是部份用户界面数据如用户界面业务更新数据。

本实施例中，所述USB模块400为USB数据传输链路；所述指令接收模块500设置在电视终端300。另外，所述USB模块400还可以为USB转HDMI数据传输链路；所述指令接收模块500设置在手机终端100。

本实施例中，所述USB模块400包括图像传输单元401和信息传输单元402，所述图像传输单元401用于传输预显示数据，所述信息传输单元402用于传输用户界面数据。

本实施例中，所述提取图像画面中人体对应区域的全部或部份包括以下步骤：

步骤1、计算当前帧图像画面中人体对应区域的全部或部份象素坐标集合和相邻帧图像画面中人体对应区域全部或部份象素坐标集合之间的相似度S，若S≥A，则进入步骤3，否则，进入步骤2；所述A为阈值；

步骤2、以当前帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份；

步骤3、以相邻帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份。

本例中所述相邻帧为上一帧，需要说明的是，所述相邻帧还可以是当前帧之前或之后的一帧或几帧，例如，如果在对自拍数据中的多帧图像画面依序执行自拍预处理操作时已经预先获取到了所述多帧图像画面的全部或部份，那么可以基于当前帧的之前帧或之后帧或之前帧和之后帧组合中的一帧或几帧图像画面中人体对应区域全部或部份象素坐标集合作为提取当前帧图像画面中人体对应区域的计算依据，目的是对人体位移极小的相邻画面只计算一次人体对应像素坐标并以此作为提取人体对应区域的依据，这样人眼不会产生明显的运动错误感觉，同时明显降低人体边缘的闪烁程度。

实施例2与实施例1的技术原理相同，为简要描述，在实施例2中未详细解释的技术实现过程，请参考实施例1。

以上所述，仅是本发明的较佳实施例，并非对本发明作任何限制，凡是根据本发明技术实质对以上实施例所作的任何简单修改、变更以及等效结构变化，例如以其他具有显示功能的设备代替电视终端，以其他带拍摄功能的设备代替手机终端均仍属于本发明技术方案的保护范围内。本发明的保护范围以权利要求书及其等价物的保护范围为准。

Claims (10)

1.一种手机和电视基于USB相连接的自拍镜像投屏系统，其特征在于，包括手机终端（100）、图像处理模块（200）、指令接收模块（500）和电视终端（300），所述手机终端（100）和电视终端（300）之间通过USB模块（400）连接；所述USB模块（400）为“USB数据传输链路”或“USB转HDMI数据传输链路”；

所述手机终端（100），用于接收到自拍请求后，通过手机摄像装置采集自拍数据；

所述图像处理模块（200）设置在手机终端（100）；所述电视终端（300）包括显示单元（301），所述显示单元（301）用于播放预显示数据和显示用户界面数据；

所述图像处理模块（200）包括图像处理单元（201）和指令处理单元（202），所述图像处理单元（201）用于对自拍数据中的多帧图像画面依序执行自拍预处理操作生成预显示数据，并将预显示数据发送至所述电视终端（300）；所述自拍预处理包括“提取图像画面中人体对应区域的全部或部份，并将提取到的画面合成到背景画面上生成新显示画面”；所述指令处理单元（202）用于当所述指令接收模块（500）接收到自拍指令时，指令处理单元（202）生成自拍请求发送至手机终端（100）；所述指令处理单元（202）还用于当所述指令接收模块（500）接收到用户界面指令时，指令处理单元（202）生成用户界面请求并发送至图像处理模块（200）；所述图像处理模块（200）接收到用户界面请求后，生成用户界面数据发送至所述显示单元（301）进行显示；

所述USB模块（400）用于传输预显示数据和用户界面数据。

2.按照权利要求1所述的一种手机和电视基于USB相连接的自拍镜像投屏系统，其特征在于，所述USB模块（400）为USB数据传输链路；所述指令接收模块（500）设置在电视终端（300）。

3.按照权利要求1所述的一种手机和电视基于USB相连接的自拍镜像投屏系统，其特征在于，所述USB模块（400）为USB转HDMI数据传输链路；所述指令接收模块（500）设置在手机终端（100）。

4.按照权利要求1、2或3所述的一种手机和电视基于USB相连接的自拍镜像投屏系统，其特征在于，所述USB模块（400）包括图像传输单元（401）和信息传输单元（402），所述图像传输单元（401）用于传输预显示数据，所述信息传输单元（402）用于传输用户界面数据。

5.按照权利要求1所述的一种手机和电视基于USB相连接的自拍镜像投屏系统，其特征在于，所述提取图像画面中人体对应区域的全部或部份包括以下步骤：

步骤1、计算当前帧图像画面中人体对应区域的全部或部份象素坐标集合和相邻帧图像画面中人体对应区域全部或部份象素坐标集合之间的相似度S，若S≥A，则进入步骤3，否则，进入步骤2；所述A为阈值；

步骤2、以当前帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份；

步骤3、以相邻帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份。

6.一种手机和电视基于USB相连接的自拍镜像投屏方法，其特征在于，包括以下步骤：

Step1、将手机终端（100）和电视终端（300）通过USB模块（400）连接；当指令接收模块（500）接收到自拍指令时执行Step2—Step5；当指令接收模块（500）接收到用户界面指令时执行Step6—Step7；

Step2、根据接收的自拍指令生成对应自拍请求，然后进入Step3；

Step3、手机终端（100）根据自拍请求，通过手机摄像装置采集自拍数据，然后进入Step4；

Step4、手机终端（100）对自拍数据中的多帧图像画面依序执行自拍预处理操作生成预显示数据，并将预显示数据发送至所述电视终端（300）；所述自拍预处理包括“提取图像画面中人体对应区域的全部或部份，并将提取到的画面合成到背景画面上生成新显示画面”；然后进入Step5；

Step5、所述电视终端（300）播放预显示数据；

Step6、根据接收的用户界面指令生成对应用户界面请求；然后进入Step7；

Step7、手机终端（100）根据用户界面请求，生成用户界面数据发送至所述电视终端（300）进行显示；

所述USB模块（400）为“USB数据传输链路”或“USB转HDMI数据传输链路”；

所述USB模块（400）用于传输预显示数据和用户界面数据。

7.按照权利要求6所述的一种手机和电视基于USB相连接的自拍镜像投屏方法，其特征在于，所述USB模块（400）为USB数据传输链路；所述指令接收模块（500）设置在电视终端（300）。

8.按照权利要求6所述的一种手机和电视基于USB相连接的自拍镜像投屏方法，其特征在于，所述USB模块（400）为USB转HDMI数据传输链路；所述指令接收模块（500）设置在手机终端（100）。

9.按照权利要求6、7或8所述的一种手机和电视基于USB相连接的自拍镜像投屏方法，其特征在于，所述USB模块（400）包括图像传输单元（401）和信息传输单元（402），所述图像传输单元（401）用于传输预显示数据，所述信息传输单元（402）用于传输用户界面数据。

10.按照权利要求6所述的一种手机和电视基于USB相连接的自拍镜像投屏方法，其特征在于，所述提取图像画面中人体对应区域的全部或部份包括以下步骤：

步骤1、计算当前帧图像画面中人体对应区域的全部或部份象素坐标集合和相邻帧图像画面中人体对应区域全部或部份象素坐标集合之间的相似度S，若S≥A，则进入步骤3，否则，进入步骤2；所述A为阈值；

步骤2、以当前帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份；

步骤3、以相邻帧图像画面中人体对应区域全部或部份象素坐标集合为参数提取当前帧图像画面中人体对应区域的全部或部份。

Images