CN108122198A - 一种在视频中融合推荐内容的实现方法、装置和服务器 - Google Patents
一种在视频中融合推荐内容的实现方法、装置和服务器 Download PDFInfo
- Publication number
- CN108122198A CN108122198A CN201711287184.4A CN201711287184A CN108122198A CN 108122198 A CN108122198 A CN 108122198A CN 201711287184 A CN201711287184 A CN 201711287184A CN 108122198 A CN108122198 A CN 108122198A
- Authority
- CN
- China
- Prior art keywords
- image
- recommendation
- artwork
- video
- partitioned
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 83
- 230000004927 fusion Effects 0.000 claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 21
- 230000006835 compression Effects 0.000 claims description 30
- 238000007906 compression Methods 0.000 claims description 30
- 238000004891 communication Methods 0.000 claims description 27
- 238000001514 detection method Methods 0.000 claims description 17
- 230000006399 behavior Effects 0.000 description 45
- 238000009877 rendering Methods 0.000 description 16
- 230000003542 behavioural effect Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 11
- 239000002537 cosmetic Substances 0.000 description 10
- 230000000694 effects Effects 0.000 description 10
- 238000004458 analytical method Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 208000001491 myopia Diseases 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001035 drying Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种在视频中融合推荐内容的实现方法，其中，该方法包括：对于视频的一帧图像，将该图像的原图发送给服务器；接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息；根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；播放视频时，用融合推荐内容的图像替换该图像。通过本技术方案，既不影响用户浏览视频的流畅性，又能达到向用户进行推荐的目的；同时，在服务器侧进行每帧图像的处理，大大降低了终端设备的功耗，保证终端设备的使用性能，增强用户的使用体验。
Description
技术领域
本发明涉及计算机技术领域，具体涉及一种在视频中融合推荐内容的实现方法、装置、服务器、电子设备和计算机可读存储介质。
背景技术
随着各种视频应用程序的增多，在视频中插入推荐的内容(如广告)的方式已经成为各商家进行推销的途径之一。在现有技术中，通常是在视频开始/结束播放时插入一些推荐的内容或者在视频播放的过程中插入推荐的内容，以便向用户进行推送，进而起到宣传的作用。但是，这样的推荐方式会影响用户浏览视频的流畅性，造成用户的反感情绪，降低用户的使用体验。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的在视频中融合推荐内容的实现方法、装置、服务器、电子设备和计算机可读存储介质。
依据本发明的一个方面，提供了一种在视频中融合推荐内容的实现方法，其中，该方法包括：
对于视频的一帧图像，将该图像的原图发送给服务器；
接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息；
根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；
播放所述视频时，用融合推荐内容的图像替换该图像。
可选地，所述接收服务器返回的关于该图像的内容包括：
接收服务器返回的配置文件；其中，所述配置文件包括推荐内容以及推荐内容在原图中的位置信息。
可选地，所述接收服务器返回的关于该图像的内容包括：
接收服务器返回的拼接图像；其中，所述拼接图像是将原图和从该原图中分割出的人物图像拼接后得到的图像。
可选地，
所述拼接图像是将原图和压缩人物图像拼接后得到的图像；所述压缩人物图像是对从原图中分割出的人物图像进行压缩得到的。
可选地，该方法进一步包括：
收集收看所述视频的用户的网络行为信息并发送给服务器，从而使得服务器根据用户的网络行为信息分析出用户的画像信息，进而返回与用户的画像信息匹配的推荐内容。
根据本发明的另一方面，提供了一种在视频中融合推荐内容的实现方法，其中，该方法包括：
接收客户端上传的视频图像；
对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域；
如果该图像中存在可加载推荐内容的区域，获取推荐内容，从该图像中分割出人物图像；
将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
可选地，所述将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端包括：
将包含推荐内容以及可加载推荐内容的区域在该图像中的位置信息的配置文件返回给客户端。
可选地，所述将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端包括：
将该图像的原图和从该图像中分割出的人物图像进行拼接后得到的拼接图像，将该拼接图像返回给客户端。
可选地，
该方法进一步包括：将从该图像中分割出的人物图像进行压缩得到压缩人物图像；
所述将该图像的原图和从该图像中分割出的人物图像进行拼接包括：将该图像的原图和压缩人物图像进行拼接。
可选地，所述判断该图像中是否存在可加载推荐内容的区域包括：
通过检测判断图像中是否存在如下对象中的一种或多种：墙面、桌面、电视屏幕和指定的一个或多个商品。
可选地，所述获取推荐内容包括：
确定可加载推荐内容的区域的特征信息，获取与所述特征信息匹配的推荐内容；
所述可加载推荐内容的区域的特征信息包括如下中的一种或多种：可加载推荐内容的区域的分类信息；可加载推荐内容的区域的尺寸信息。
可选地，
所述获取推荐内容包括：收集所述客户端对应的用户的网络行为信息，根据所述网络行为信息分析出所述用户的画像信息，获取与所述画像信息匹配的推荐内容；
其中，所述网络行为信息包括如下中的一种或多种：
搜索行为信息；
网购行为信息；
网页浏览行为信息；
网络应用使用行为信息。
根据本发明的又一方面，提供了一种在视频中融合推荐内容的装置，其中，该装置包括：
通信单元，适于对视频的一帧图像，将该图像的原图发送给服务器；以及适于接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息；
融合单元，适于根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；
播放单元，适于在播放所述视频时，用融合推荐内容的图像替换该图像。
可选地，
所述通信单元，适于接收服务器返回的配置文件；其中，所述配置文件包括推荐内容以及推荐内容在原图中的位置信息。
可选地，
所述通信单元，适于接收服务器返回的拼接图像；其中，所述拼接图像是将原图和从该原图中分割出的人物图像拼接后得到的图像。
可选地，
所述拼接图像是将原图和压缩人物图像拼接后得到的图像；所述压缩人物图像是对从原图中分割出的人物图像进行压缩得到的。
可选地，
该装置进一步包括：收集单元，适于收集收看所述视频的用户的网络行为信息；
所述通信单元，进一步适于将所述用户的网络行为信息发送给服务器，从而使得服务器根据用户的网络行为信息分析出用户的画像信息，进而返回与用户的画像信息匹配的推荐内容。
根据本发明的再一方面，提供了一种在视频中融合推荐内容的服务器，其中，该服务器包括：
通信单元，适于接收客户端上传的视频图像；
检测单元，适于对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域；
处理单元，适于当检测单元判断出该图像中存在可加载推荐内容的区域时，获取推荐内容，从该图像中分割出人物图像；
所述通信单元，还适于将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
可选地，
所述通信单元，适于将包含推荐内容以及可加载推荐内容的区域在该图像中的位置信息的配置文件返回给客户端。
可选地，
所述处理单元，适于将该图像的原图和从该图像中分割出的人物图像进行拼接后得到的拼接图像，
所述通信单元，适于将该拼接图像返回给客户端。
可选地，
所述处理单元，进一步适于将从该图像中分割出的人物图像进行压缩得到压缩人物图像，将该图像的原图和压缩人物图像进行拼接后得到的拼接图像。
可选地，
所述检测单元，适于通过检测判断图像中是否存在如下对象中的一种或多种：墙面、桌面、电视屏幕和指定的一个或多个商品。
可选地，
所述处理单元，适于确定可加载推荐内容的区域的特征信息，获取与所述特征信息匹配的推荐内容；
所述可加载推荐内容的区域的特征信息包括如下中的一种或多种：可加载推荐内容的区域的分类信息；可加载推荐内容的区域的尺寸信息。
可选地，
所述处理单元，适于收集所述客户端对应的用户的网络行为信息，根据所述网络行为信息分析出所述用户的画像信息，获取与所述画像信息匹配的推荐内容；
其中，所述网络行为信息包括如下中的一种或多种：
搜索行为信息；
网购行为信息；
网页浏览行为信息；
网络应用使用行为信息。
根据本发明的再一方面，提供了一种电子设备，其中，该电子设备包括：
处理器；以及
存储计算机可执行指令的存储器；所述可执行指令在被执行时使所述处理器执行根据前述的方法，或者执行根据前述的另一方法。
根据本发明的再一方面，提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现前述的方法，或者实现前述的另一方法。
根据本发明的技术方案，客户端将视频中的图像的原图发送给服务器；服务器判断该图像中是否存在可加载推荐内容的区域；如果该图像中存在可加载推荐内容的区域，获取推荐内容，从该图像中分割出人物图像。客户端接收服务器返回的关于该图像的相应的内容；根据图像内容中包含的推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；播放视频时，用融合推荐内容的图像替换该图像。本技术方案中，将推荐内容融合在视频的图像中，自然地向用户推荐相应内容，可以既不影响用户浏览视频的流畅性，又能达到向用户进行推荐的目的；同时，是在服务器侧进行每帧图像的处理，在客户端侧只需要进行图像的渲染即可，大大降低了终端设备的功耗，合理利用终端设备的系统资源，保证终端设备的使用性能，增强用户的使用体验。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了根据本发明一个实施例的在视频中融合推荐内容的实现方法的流程示意图；
图2示出了根据本发明一个实施例的融合推荐内容的图像的效果示意图；
图3示出了根据本发明另一个实施例的在视频中融合推荐内容的实现方法的流程示意图；
图4示出了根据本发明一个实施例的服务器返回的拼接图像的示意图；
图5示出了根据本发明一个实施例的在视频中融合推荐内容的装置的结构示意图；
图6示出了根据本发明一个实施例的在视频中融合推荐内容的服务器的结构示意图；
图7示出了根据本发明一个实施例的电子设备的结构示意图；
图8示出了根据本发明一个实施例的计算机可读存储介质的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一个实施例的在视频中融合推荐内容的实现方法的流程示意图，从客户端侧对本技术方案进行说明。如图1所示，该方法包括：
步骤S110，对于视频的一帧图像，将该图像的原图发送给服务器。
本实施例中的视频可以是用户终端设备的本地存储的视频，或者客户端从视频服务器获取的视频。
步骤S120，接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息。
本实施例中，图像的原图发送给服务器后，服务器会进行相应的处理，并将原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息返回给客户端，以便客户端根据服务器返回的内容进行叠加渲染。
步骤S130，根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像。
步骤S140，播放视频时，用融合推荐内容的图像替换该图像。
本实施例中，服务器返回的分割出的人物图像是基于一个视频图像，人物图像的部分是有灰度的，而非人物图像的部分是透明的，例如可采用alpha通道来生成分割出的人物图像；根据推荐内容在原图中的位置信息，图像中的与位置信息对应的区域(即是图像中推荐内容所在的区域)是有灰度的，其他区域则是透明的；图像的原图是整张图像均是有灰度的。
因为在渲染的时候，是按像素点进行渲染，为了保证用户浏览视频的效果，在将推荐内容加载到图像中时，不能遮挡住视频中的人物图像。例如，当渲染某个像素点1时，确定像素点1在视频图像的非人物图像和非推荐内容所在的区域(不符合推荐内容在原图中的位置信息)，则此处图像的原图是有灰度的，推荐内容和分割出的人物图像在此处是透明的，则只需要获取原图相应像素点信息进行渲染；当渲染像素点2时，该像素点2是推荐内容所在的区域(符合推荐内容在原图中的位置信息)，图像的原图和推荐内容在此处是有灰度的，而分割出的人物图像在此处是透明的，根据原图在后，推荐内容在前的顺序，则只需要获取推荐内容相应像素点信息进行渲染；当渲染像素点3时，该像素点3是推荐内容所在的区域中的人物图像的部分，图像的原图、推荐内容和分割出的人物图像在此处是有灰度的，根据分割出的人物图像在最前、推荐内容其次以及最后是该图像的原图的次序，则需要获取分割出的人物图像的相应像素点信息进行渲染；当渲染像素点4时，该像素点4是人物图像的部分且不在推荐内容所在的区域，图像的原图和分割出的人物图像在此处是有灰度的，推荐内容在此处是透明的，根据分割出的人物图像在最前、该图像的原图在后的次序，则需要获取分割出的人物图像的相应像素点信息进行渲染。直至完成整个图像的渲染。那么，渲染后的图像展示给用户时，就是人物图像始终在前(特别是在推荐内容所在的区域是人物图像是保持在最前的)，即人物图像会遮挡住推荐内容的相应部分，以保证用户浏览视频的效果。
图2示出了根据本发明一个实施例的融合推荐内容的图像的效果示意图。如图2所示，区域210是原图，区域220是可加载推荐内容的区域，区域230是人物图像区域。在渲染时，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序进行渲染，当渲染区域210中的像素点1时，获取原图相应像素点信息进行渲染；当渲染区域220中的像素点2时，获取推荐内容相应像素点信息进行渲染；当渲染区域230中的像素点3时，获取分割出的人物图像的相应像素点信息进行渲染；当渲染区域230中的像素点4时，获取分割出的人物图像的相应像素点信息进行渲染。如图2所示的渲染后的效果，人物图像会遮挡住一部分推荐内容，保证用户浏览视频的效果。
视频是由一帧一帧的图像组成的，当用户播放视频时，需要将视频中的每一帧图像都经过图1所述的方法的处理，这样就可以将推荐内容叠加渲染在用户浏览的视频中。通过本实施例的技术方案，将推荐内容融合在视频的图像中，自然地向用户推荐相应内容，可以既不影响用户浏览视频的流畅性，又能达到向用户进行推荐的目的；同时，从服务器侧进行每帧图像的处理，在客户端侧只需要进行图像的渲染即可，大大降低了终端设备的功耗，合理利用终端设备的系统资源，保证终端设备的使用性能，增强用户的使用体验。
在本发明的一个实施例中，步骤S120中的接收服务器返回的关于该图像的内容包括：接收服务器返回的配置文件；其中，配置文件包括推荐内容以及推荐内容在原图中的位置信息。
本实施例中，将推荐内容和推荐内容在原图中的位置信息放在一个配置文件中，可以保证推荐内容和推荐内容在原图中的位置信息是一一对应的关系，避免在客户端接收到推荐内容和推荐内容在原图中的位置信息后，再进行相互匹配，减少客户端侧的资源消耗，提高渲染效率，保证视频播放的速度，增强用户体验。
在本发明的一个实施例中，步骤S120中的接收服务器返回的关于该图像的内容包括：接收服务器返回的拼接图像；其中，拼接图像是将原图和从该原图中分割出的人物图像拼接后得到的图像。
服务器侧是对视频的每一帧图像都进行处理的，如果服务器返回的一帧图像的内容并非是同步的，则客户端侧还需要确定服务器返回的图像内容之间的匹配关系，才能完成渲染，浪费客户端的系统资源，甚至会出现无法确定匹配关系则渲染失败的情况，降低渲染效率，降低用户体验。例如，服务器处理完第10帧图像后返回第10帧图像的内容：第10帧图像的原图、第10帧图像的推荐内容、第10帧图像的推荐内容在原图的位置信息，但是由于数据传输的延迟，从第10帧图像的原图中分割出的人物图像并没有同步传输到客户端，而是在客户端接收第11帧图像的内容之后才接收到的，则客户端还需要判断这之后接收到的分割出的人物图像是属于哪帧图像的。
在本实施例中，服务器返回将原图和从该原图中分割出的人物图像拼接后得到的图像，这样图像的原图和从该原图中分割出的人物图像就一一对应了，客户端侧无需再进行匹配，节省客户端的系统资源，提高渲染效率，降低用户体验。
进一步地，拼接图像是将原图和压缩人物图像拼接后得到的图像；压缩人物图像是对从原图中分割出的人物图像进行压缩得到的。
本实施例中，服务器侧发送的拼接图像是将人物图像压缩后与原图进行拼接得到的，这样节省占用的数据传输资源，保证服务器向客户端发送图像的内容的速率。当客户端接收到压缩人物图像和原图的拼接图像后，可以将压缩任务图像进行相应的扩大即可。
在本发明的一个实施例中，图1所示的方法进一步包括：收集收看视频的用户的网络行为信息并发送给服务器，从而使得服务器根据用户的网络行为信息分析出用户的画像信息，进而返回与用户的画像信息匹配的推荐内容。这样就可以保证推荐内容是根据用户的喜好进行推荐的，可以提高推荐的有效性，也可以增强用户的使用体验，不会让用户觉得推荐内容对其本人无用处。
图3示出了根据本发明另一个实施例的在视频中融合推荐内容的实现方法的流程示意图，从服务器侧对本技术方案进行说明。如图3所示，该方法包括：
步骤S310，接收客户端上传的视频图像。
步骤S320，对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域。
在本实施例中，判断图像中是否存在可加载推荐内容的区域，是为了保证推荐的内容可以自然地插入到图像中，只有存在可加载推荐内容的区域才能融合相应的推荐内容。
另外，在判断图像中是否存在可加载推荐内容的区域时，可以使用openCV提供的图像识别算法(例如，连通域计算)等进行可加载推荐内容的区域的识别，或者可以使用图像识别的方法，判断图像中是否存在一定连续的区域的亮度或颜色等梯度变化不大的区域，例如，白色的墙面，一定的连续区域内均是白色，其亮度和颜色均不会变化太大。
步骤S330，如果该图像中存在可加载推荐内容的区域，获取推荐内容，从该图像中分割出人物图像。
这里的推荐内容可以是根据需求向用户展示的内容，例如，广告。在本实施例中，如果该图像中存在可加载推荐内容的区域，获取该区域的位置信息。
图像分割就是把图像分成若干个特定的、具有独特性质的区域并提出感兴趣目标的技术和过程。本实施例中，为了保证用户浏览视频的效果，在将推荐内容加载到图像中时，不能遮挡住视频中的人物图像，服务器侧会从图像中将人物图像分割出来。
步骤S340，将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
本技术方案中，将推荐内容融合在视频的图像中，自然地向用户推荐相应内容，可以既不影响用户浏览视频的流畅性，又能达到向用户进行推荐的目的；同时，从服务器侧进行每帧图像处理，在客户端侧只需要根据这些信息将推荐内容融合到该图像中进行播放即可，大大降低了客户端侧的终端设备的功耗，合理利用终端设备的系统资源，保证终端设备的使用性能，增强用户的使用体验。
在本发明的一个实施例中，步骤S340中的将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端包括：将包含推荐内容以及可加载推荐内容的区域在该图像中的位置信息的配置文件返回给客户端。
本实施例中，将推荐内容和推荐内容在原图中的位置信息放在一个配置文件中，可以保证发送到客户端侧的推荐内容和推荐内容在原图中的位置信息是一一对应的关系，避免在客户端接收到推荐内容和推荐内容在原图中的位置信息后，再进行相互匹配，减少客户端侧的资源消耗，提高渲染效率，保证视频播放的速度，增强用户体验。
在本发明的一个实施例中，步骤S340中的将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端包括：将该图像的原图和从该图像中分割出的人物图像进行拼接后得到的拼接图像，将该拼接图像返回给客户端。
在本实施例中，服务器是对视频的每一帧图像都进行处理的，如果服务器返回的一帧图像的内容并非是同步的，则客户端侧还需要确定服务器返回的图像内容之间的匹配关系，才能完成渲染，浪费客户端的系统资源，甚至会出现无法确定匹配关系则渲染失败的情况，降低渲染效率，降低用户体验。例如，服务器处理完第10帧图像后返回第10帧图像的内容：第10帧图像的原图、第10帧图像的推荐内容、第10帧图像的推荐内容在原图的位置信息，但是由于数据传输的延迟，从第10帧图像的原图中分割出的人物图像并没有同步传输到客户端，而是在客户端接收第11帧图像的内容之后才接收到的，则客户端还需要判断这之后接收到的分割出的人物图像是属于哪帧图像的。
在本实施例中，服务器将该图像的原图和从该图像中分割出的人物图像进行拼接后得到的拼接图像，将该拼接图像返回给客户端。这样图像的原图和从该原图中分割出的人物图像就一一对应了，客户端侧无需再进行匹配，节省客户端的系统资源，提高渲染效率，降低用户体验。
进一步地，图3所示的方法进一步包括：将从该图像中分割出的人物图像进行压缩得到压缩人物图像；则上述的将该图像的原图和从该图像中分割出的人物图像进行拼接包括：将该图像的原图和压缩人物图像进行拼接。
本实施例中，服务器在进行图像拼接前，向将分割出的任务图像进行压缩，然后压缩的将人物图像与原图进行拼接得到的，这样在向客户端发送拼接图像时，可以节省占用的数据传输资源，保证向客户端发送图像的内容的速率。当客户端接收到压缩人物图像和原图的拼接图像后，可以将压缩任务图像进行相应的扩大即可。
图4示出了根据本发明一个实施例的服务器返回的拼接图像的示意图。如图4所示，410是图像的原图，420是从图像中分割出的人物图像，图像的原图是640*640像素大小的，人物图像也是640*640，将分割出的人物图像压缩成640*160的压缩人物图像之后，与原图进行拼接，获得如图4所示的拼接图像。
在上述实施例应用中，只要是在视频中融合推荐内容时，不影响用户浏览视频的区域均可以作为可加载推荐内容的区域。
在本发明的一个实施例中，图3所示的步骤S320中的判断该图像中是否存在可加载推荐内容的区域包括：通过检测判断图像中是否存在如下对象中的一种或多种：墙面、桌面、电视屏幕和指定的一个或多个商品。
在本实施例中，将墙面、桌面、电视屏幕、指定的一个或多个商品(如杯子、化妆品、笔等)作为可加载推荐内容的区域，是因为在这些区域中加载推荐内容时，可以最大限度的保证用户的浏览视频的效果，进一步增强用户的使用体验。
当加载推荐内容时，可以根据可加载推荐内容的区域确定加载的方式。例如，判断视频的图像中的可加载推荐内容的区域是墙面，那么就可以在墙面上叠加一张图片；判断视频的图像中的可加载推荐内容的区域是桌面，那么就可以利用AR技术在桌面上添加一个物件以展示推荐内容；判断视频的图像中的可加载推荐内容的区域是屏幕，那么就可以在屏幕上添加一个广告视频，以向用户播放。
例如，判断视频的图像中的可加载推荐内容的区域是桌面，那么，就可以在桌面上通过AR技术添加以“农夫山泉”的瓶子，以向用户展示农夫山泉的广告。再如，判断视频的图像中的可加载推荐内容的区域是一个化妆品的瓶子，那么，就可以在化妆品的瓶子上添加以某一品牌的瓶子贴纸，以向用户展示该品牌相应的化妆品。
进一步地，步骤S330中的获取推荐内容包括：确定可加载推荐内容的区域的特征信息，获取与特征信息匹配的推荐内容；可加载推荐内容的区域的特征信息包括如下中的一种或多种：可加载推荐内容的区域的分类信息；可加载推荐内容的区域的尺寸信息。
在上述步骤S330中获取推荐内容时，并非是随意获取的，需要根据确定的可加载推荐内容的区域的特征信息，根据该特征信息获取相应的推荐内容。
在上述例子中，如果判断视频的图像中的可加载推荐内容的区域是墙面，那么在获取推荐内容时，就不能获取一个具体的物件，只能获取类似图片的推荐内容，保证获取的推荐内容可以加载到相应的可加载推荐内容的区域中。
在本实施例中，上述的可加载推荐内容的区域的特征信息包括如下中的一种或多种：可加载推荐内容的区域的分类信息；可加载推荐内容的区域的尺寸信息。
上述的可加载推荐内容的区域的分类，可以是垂直面、水平面、屏幕、商品等。例如，墙面就是垂直面，可以加载海报；桌面是水平面，可以添加具体商品；杯子就是商品，可以在商品周围添加广告标签。
在本实施例中，特征信息还包括尺寸信息，只是要保证推荐内容与可加载推荐内容的区域更好的融合，进一步提高用户的使用体验。
例如，如果判断视频的图像中的可加载推荐内容的区域是墙面，尺寸是160*160(像素大小)的，那么在获取推荐内容时，需要获取类似图片的推荐内容，类似图片的推荐内容有图片A和图片B，但是图片A的尺寸是640*640(像素大小)的，图片B的尺寸是160*160(像素大小)，这样根据区域的尺寸就可以将图片B确定为推荐内容。或者，图片A和图片B的尺寸都是160*160的，那么就可以按照一定顺序和频率，将图片A和图片B交替加载到墙面上。又例如，如果没有尺寸相匹配的推荐内容，可以在保证推荐内容清晰的情况下，对推荐内容进行一定的缩放。
再例如，如果判断视频的图像中的可加载推荐内容的区域是电脑屏幕，则可以获取视频类的推荐内容，推荐内容可以随着视频的播放而播放。电脑屏幕出现在视频的第10帧，持续到第25帧，那么就将推荐内容的第1帧加载到视频的第10帧，推荐内容的第2帧加载到视频的第11帧，一次类推，将推荐内容随着视频的播放而播放，用户的浏览效果即是视频中的屏幕上播放推荐内容。
在本发明的一个实施例中，步骤S330中的获取推荐内容包括：收集客户端对应的用户的网络行为信息，根据网络行为信息分析出用户的画像信息，获取与画像信息匹配的推荐内容。
其中，网络行为信息包括如下中的一种或多种：搜索行为信息；网购行为信息；网页浏览行为信息；网络应用使用行为信息。
在本实施例中，服务器获取到用户的网络行为后，可以确定浏览视频的用户的画像信息，保证推荐内容是根据用户的喜好进行推荐的，可以提高推荐的有效性，也可以增强用户的使用体验，不会让用户觉得推荐内容对其本人无用处。
例如，用户A，通过网络行为，确定其经常搜索与化妆品有关的网页和电商，经常在网上买一些化妆品，则确定该用户A画像信息时，可以将化妆品等标签作为用户A的画像信息，在推荐内容的获取时，根据用户A的画像信息，获取一些关于化妆品和女生用品的推荐内容(如广告)；用户B，通过其网络行为，确定其经常搜索与电子设备(如电脑、手机)和游戏有关的网页和电商，经常在网上买一些电子产品，则确定该用户B画像信息时，可以将游戏、电子产品等标签作为用户B的画像信息，在推荐内容的获取时，根据用户B的画像信息，获取一些关于化电子产品、游戏的推荐内容。
再如，当主播进行视频直播时，判断出视频图像中的可加载推荐内容的区域是桌面和墙面，根据当前观看该直播的用户A的画像信息(化妆品)来说，在桌面上可以使用AR技术添加某一品牌的指定化妆品；根据当前观看该直播的用户B的画像信息(电子产品、游戏)来说，在桌面上可以使用AR技术添加某一品牌的手机，以及在主播背后的墙面上融合一张某游戏的海报。这样就可以根据用户自身的需求向用户推荐相应的内容。
在一个具体的例子中，用户想要浏览一段短视频，那么客户端会将该段短视频的图像上传给服务器。服务器判断该图像中包括一墙面，满足可加载推荐内容的区域，将该墙面作为可加载推荐内容的区域，获取该区域的位置信息；根据该用户的画像信息确定该用户喜欢某歌星，那么获取推荐内容时，根据该墙面的尺寸信息，获取某歌星即将举办的演唱会的海报。将该海报作为推荐内容，然后将该图像的原图和从该图像中分割出的人物图像进行拼接获得拼接图像，将歌星海报和墙面在该图像中的位置信息作为配置文件，最后将拼接图像和配置文件返回给客户端。客户端根据配置文件中的墙面在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；最后播放视频时，用融合推荐内容的图像替换该图像。这样，该用户在浏览该段短视频时，就可以看见墙面上的歌星海报。
图5示出了根据本发明一个实施例的在视频中融合推荐内容的装置的结构示意图。如图5所示，该在视频中融合推荐内容的装置500包括：
通信单元510，适于对视频的一帧图像，将该图像的原图发送给服务器；以及适于接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息。
融合单元520，适于根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像。
播放单元530，适于在播放视频时，用融合推荐内容的图像替换该图像。
在本发明的一个实施例中，
通信单元510，适于接收服务器返回的配置文件；其中，配置文件包括推荐内容以及推荐内容在原图中的位置信息。
在本发明的一个实施例中，
通信单元510，适于接收服务器返回的拼接图像；其中，拼接图像是将原图和从该原图中分割出的人物图像拼接后得到的图像。
在本发明的一个实施例中，
拼接图像是将原图和压缩人物图像拼接后得到的图像；压缩人物图像是对从原图中分割出的人物图像进行压缩得到的。
在本发明的一个实施例中，图5所示的装置进一步包括：收集单元，适于收集收看视频的用户的网络行为信息。
通信单元510，进一步适于将用户的网络行为信息发送给服务器，从而使得服务器根据用户的网络行为信息分析出用户的画像信息，进而返回与用户的画像信息匹配的推荐内容。
图6示出了根据本发明一个实施例的在视频中融合推荐内容的服务器的结构示意图。如图6所示，该在视频中融合推荐内容的服务器600包括：
通信单元610，适于接收客户端上传的视频图像。
检测单元620，适于对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域。
处理单元630，适于当检测单元判断出该图像中存在可加载推荐内容的区域时，获取推荐内容，从该图像中分割出人物图像。
通信单元610，还适于将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
在本发明的一个实施例中，
通信单元610，适于将包含推荐内容以及可加载推荐内容的区域在该图像中的位置信息的配置文件返回给客户端。
在本发明的一个实施例中，
处理单元630，适于将该图像的原图和从该图像中分割出的人物图像进行拼接后得到的拼接图像，
通信单元，适于将该拼接图像返回给客户端。
在本发明的一个实施例中，
处理单元630，进一步适于将从该图像中分割出的人物图像进行压缩得到压缩人物图像，将该图像的原图和压缩人物图像进行拼接后得到的拼接图像。
在本发明的一个实施例中，
检测单元620，适于通过检测判断图像中是否存在如下对象中的一种或多种：墙面、桌面、电视屏幕和指定的一个或多个商品。
在本发明的一个实施例中，
处理单元630，适于确定可加载推荐内容的区域的特征信息，获取与特征信息匹配的推荐内容。
可加载推荐内容的区域的特征信息包括如下中的一种或多种：可加载推荐内容的区域的分类信息；可加载推荐内容的区域的尺寸信息。
在本发明的一个实施例中，
处理单元630，适于收集客户端对应的用户的网络行为信息，根据网络行为信息分析出用户的画像信息，获取与画像信息匹配的推荐内容。
其中，网络行为信息包括如下中的一种或多种：搜索行为信息；网购行为信息；网页浏览行为信息；网络应用使用行为信息。
本发明还提供了一种电子设备，其中，该电子设备包括：
处理器；以及被安排成存储计算机可执行指令的存储器，可执行指令在被执行时使处理器执行根据图1所示的及其各实施例中的在视频中融合推荐内容的实现方法，或者图3所示的及其各实施例中的在视频中融合推荐内容的实现方法。
图7示出了根据本发明一个实施例的电子设备的结构示意图。如图7所示，该电子设备700包括：
处理器710；以及被安排成存储计算机可执行指令(程序代码)的存储器720，在存储器720中，有存储程序代码的存储空间730，用于执行根据本发明的方法步骤的程序代码770存储在存储空间730中，该程序代码在被执行时使处理器710执行根据图1所示的及其各实施例中的在视频中融合推荐内容的实现方法，或者图3所示的及其各实施例中的在视频中融合推荐内容的实现方法。
图8示出了根据本发明一个实施例的计算机可读存储介质的结构示意图。如图8所示，该计算机可读存储介质800，存储一个或多个程序(程序代码)810，一个或多个程序(程序代码)810当被处理器执行时，用于执行根据本发明的方法步骤，即图1所示的以及其各实施例中的在视频中融合推荐内容的实现方法，或者图3所示的及其各实施例中的在视频中融合推荐内容的实现方法。
需要说明的是，图5所示的装置、图6所示的服务器、图7所示的电子设备和图8所示的计算机可读存储介质的各实施例与图1或图3所示的方法的各实施例对应相同，上文已有详细说明，在此不再赘述。
综上所述，根据本发明的技术方案，客户端将视频中的图像的原图发送给服务器；服务器判断该图像中是否存在可加载推荐内容的区域；如果该图像中存在可加载推荐内容的区域，获取推荐内容，从该图像中分割出人物图像。客户端接收服务器返回的关于该图像的相应的内容；根据图像内容中包含的推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；播放视频时，用融合推荐内容的图像替换该图像。本技术方案中，本技术方案中，将推荐内容融合在视频的图像中，自然地向用户推荐相应内容，可以既不影响用户浏览视频的流畅性，又能达到向用户进行推荐的目的；同时，是在服务器侧进行每帧图像的处理，在客户端侧只需要进行图像的渲染即可，大大降低了终端设备的功耗，合理利用终端设备的系统资源，保证终端设备的使用性能，增强用户的使用体验。
需要说明的是：
在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述，构造这类装置所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的在视频中融合推荐内容的实现装置、服务器、电子设备和计算机可读存储介质中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
例如，图7示出了根据本发明一个实施例的电子设备的结构示意图。该电子设备700传统上包括处理器710和被安排成存储计算机可执行指令(程序代码)的存储器720。存储器720可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。存储器720具有存储用于执行图1所示的以及各实施例中的任何方法步骤的程序代码740的存储空间730。例如，用于程序代码的存储空间730可以包括分别用于实现上面的方法中的各种步骤的各个程序代码740。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。这些计算机程序产品包括诸如硬盘，紧致盘(CD)、存储卡或者软盘之类的程序代码载体。这样的计算机程序产品通常为例如图8所述的计算机可读存储介质800。该计算机可读存储介质800可以具有与图7的电子设备中的存储器720类似布置的存储段、存储空间等。程序代码可以例如以适当形式进行压缩。通常，存储单元存储有用于执行根据本发明的方法步骤的程序代码810，即可以由诸如710之类的处理器读取的程序代码，当这些程序代码由电子设备运行时，导致该电子设备执行上面所描述的方法中的各个步骤。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明公开了A1、一种在视频中融合推荐内容的实现方法，其中，该方法包括：
对于视频的一帧图像，将该图像的原图发送给服务器；
接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息；
根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；
播放所述视频时，用融合推荐内容的图像替换该图像。
A2、如A1所述的方法，其中，所述接收服务器返回的关于该图像的内容包括：
接收服务器返回的配置文件；其中，所述配置文件包括推荐内容以及推荐内容在原图中的位置信息。
A3、如A1所述的方法，其中，所述接收服务器返回的关于该图像的内容包括：
接收服务器返回的拼接图像；其中，所述拼接图像是将原图和从该原图中分割出的人物图像拼接后得到的图像。
A4、如A3所述的方法，其中，
所述拼接图像是将原图和压缩人物图像拼接后得到的图像；所述压缩人物图像是对从原图中分割出的人物图像进行压缩得到的。
A5、如A1-A4中任一项所述的方法，其中，该方法进一步包括：
收集收看所述视频的用户的网络行为信息并发送给服务器，从而使得服务器根据用户的网络行为信息分析出用户的画像信息，进而返回与用户的画像信息匹配的推荐内容。
本发明还公开了B6、一种在视频中融合推荐内容的实现方法，其中，该方法包括：
接收客户端上传的视频图像；
对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域；
如果该图像中存在可加载推荐内容的区域，获取推荐内容，从该图像中分割出人物图像；
将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
B7、如B6所述的方法，其中，所述将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端包括：
将包含推荐内容以及可加载推荐内容的区域在该图像中的位置信息的配置文件返回给客户端。
B8、如B6所述的方法，其中，所述将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端包括：
将该图像的原图和从该图像中分割出的人物图像进行拼接后得到的拼接图像，将该拼接图像返回给客户端。
B9、如B8所述的方法，其中，
该方法进一步包括：将从该图像中分割出的人物图像进行压缩得到压缩人物图像；
所述将该图像的原图和从该图像中分割出的人物图像进行拼接包括：将该图像的原图和压缩人物图像进行拼接。
B10、如B6所述的方法，其中，所述判断该图像中是否存在可加载推荐内容的区域包括：
通过检测判断图像中是否存在如下对象中的一种或多种：墙面、桌面、电视屏幕和指定的一个或多个商品。
B11、如B6所述的方法，其中，所述获取推荐内容包括：
确定可加载推荐内容的区域的特征信息，获取与所述特征信息匹配的推荐内容；
所述可加载推荐内容的区域的特征信息包括如下中的一种或多种：可加载推荐内容的区域的分类信息；可加载推荐内容的区域的尺寸信息。
B12、如B6所述的方法，其中，
所述获取推荐内容包括：收集所述客户端对应的用户的网络行为信息，根据所述网络行为信息分析出所述用户的画像信息，获取与所述画像信息匹配的推荐内容；
其中，所述网络行为信息包括如下中的一种或多种：
搜索行为信息；
网购行为信息；
网页浏览行为信息；
网络应用使用行为信息。
本发明还公开了C13、一种在视频中融合推荐内容的装置，其中，该装置包括：
通信单元，适于对视频的一帧图像，将该图像的原图发送给服务器；以及适于接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息；
融合单元，适于根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；
播放单元，适于在播放所述视频时，用融合推荐内容的图像替换该图像。
C14、如C13所述的装置，其中，
所述通信单元，适于接收服务器返回的配置文件；其中，所述配置文件包括推荐内容以及推荐内容在原图中的位置信息。
C15、如C14所述的装置，其中，
所述通信单元，适于接收服务器返回的拼接图像；其中，所述拼接图像是将原图和从该原图中分割出的人物图像拼接后得到的图像。
C16、如C15所述的装置，其中，
所述拼接图像是将原图和压缩人物图像拼接后得到的图像；所述压缩人物图像是对从原图中分割出的人物图像进行压缩得到的。
C17、如C13-C16中任一项所述的装置，其中，
该装置进一步包括：收集单元，适于收集收看所述视频的用户的网络行为信息；
所述通信单元，进一步适于将所述用户的网络行为信息发送给服务器，从而使得服务器根据用户的网络行为信息分析出用户的画像信息，进而返回与用户的画像信息匹配的推荐内容。
本发明还公开了D18、一种在视频中融合推荐内容的服务器，其中，该服务器包括：
通信单元，适于接收客户端上传的视频图像；
检测单元，适于对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域；
处理单元，适于当检测单元判断出该图像中存在可加载推荐内容的区域时，获取推荐内容，从该图像中分割出人物图像；
所述通信单元，还适于将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
D19、如D18所述的服务器，其中，
所述通信单元，适于将包含推荐内容以及可加载推荐内容的区域在该图像中的位置信息的配置文件返回给客户端。
D20、如D18所述的服务器，其中，
所述处理单元，适于将该图像的原图和从该图像中分割出的人物图像进行拼接后得到的拼接图像，
所述通信单元，适于将该拼接图像返回给客户端。
D21、如D20所述的服务器，其中，
所述处理单元，进一步适于将从该图像中分割出的人物图像进行压缩得到压缩人物图像，将该图像的原图和压缩人物图像进行拼接后得到的拼接图像。
D22、如D18所述的服务器，其中，
所述检测单元，适于通过检测判断图像中是否存在如下对象中的一种或多种：墙面、桌面、电视屏幕和指定的一个或多个商品。
D23、如D18所述的服务器，其中，
所述处理单元，适于确定可加载推荐内容的区域的特征信息，获取与所述特征信息匹配的推荐内容；
所述可加载推荐内容的区域的特征信息包括如下中的一种或多种：可加载推荐内容的区域的分类信息；可加载推荐内容的区域的尺寸信息。
D24、如D18所述的服务器，其中，
所述处理单元，适于收集所述客户端对应的用户的网络行为信息，根据所述网络行为信息分析出所述用户的画像信息，获取与所述画像信息匹配的推荐内容；
其中，所述网络行为信息包括如下中的一种或多种：
搜索行为信息；
网购行为信息；
网页浏览行为信息；
网络应用使用行为信息。
本发明还公开了E25、一种电子设备，其中，该电子设备包括：
处理器；以及
存储计算机可执行指令的存储器；所述可执行指令在被执行时使所述处理器执行根据A1～A5中任一项所述的方法，或者执行根据B6～B12中任一项所述的方法。
本发明还公开了F26、一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现A1～A5中任一项所述的方法，或者实现B6～B12中任一项所述的方法。
Claims (10)
1.一种在视频中融合推荐内容的实现方法，其中，该方法包括：
对于视频的一帧图像，将该图像的原图发送给服务器；
接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息；
根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；
播放所述视频时，用融合推荐内容的图像替换该图像。
2.如权利要求1所述的方法，其中，所述接收服务器返回的关于该图像的内容包括：
接收服务器返回的配置文件；其中，所述配置文件包括推荐内容以及推荐内容在原图中的位置信息。
3.如权利要求1所述的方法，其中，所述接收服务器返回的关于该图像的内容包括：
接收服务器返回的拼接图像；其中，所述拼接图像是将原图和从该原图中分割出的人物图像拼接后得到的图像。
4.如权利要求3所述的方法，其中，
所述拼接图像是将原图和压缩人物图像拼接后得到的图像；所述压缩人物图像是对从原图中分割出的人物图像进行压缩得到的。
5.一种在视频中融合推荐内容的实现方法，其中，该方法包括：
接收客户端上传的视频图像；
对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域；
如果该图像中存在可加载推荐内容的区域，获取推荐内容，从该图像中分割出人物图像；
将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
6.如权利要求5所述的方法，其中，所述将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端包括：
将包含推荐内容以及可加载推荐内容的区域在该图像中的位置信息的配置文件返回给客户端。
7.一种在视频中融合推荐内容的装置，其中，该装置包括：
通信单元，适于对视频的一帧图像，将该图像的原图发送给服务器；以及适于接收服务器返回的关于该图像的内容，包括：原图、从该原图中分割出的人物图像、推荐内容以及推荐内容在原图中的位置信息；
融合单元，适于根据推荐内容在原图中的位置信息，按照从前到后依次为分割出的人物图像、推荐内容以及该图像的原图的次序，叠加渲染获得一帧融合推荐内容的图像；
播放单元，适于在播放所述视频时，用融合推荐内容的图像替换该图像。
8.一种在视频中融合推荐内容的服务器，其中，该服务器包括：
通信单元，适于接收客户端上传的视频图像；
检测单元，适于对于客户端上传的一帧图像，判断该图像中是否存在可加载推荐内容的区域；
处理单元，适于当检测单元判断出该图像中存在可加载推荐内容的区域时，获取推荐内容，从该图像中分割出人物图像；
所述通信单元，还适于将该图像的原图、从该图像中分割出的人物图像、推荐内容以及可加载推荐内容的区域在该图像中的位置信息返回给客户端，使得客户端根据这些信息将推荐内容融合到该图像中进行播放。
9.一种电子设备，其中，该电子设备包括：
处理器；以及
存储计算机可执行指令的存储器；所述可执行指令在被执行时使所述处理器执行根据权利要求1～4中任一项所述的方法，或者执行根据权利要求5～6中任一项所述的方法。
10.一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现权利要求1～4中任一项所述的方法，或者实现权利要求5～6中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711287184.4A CN108122198A (zh) | 2017-12-07 | 2017-12-07 | 一种在视频中融合推荐内容的实现方法、装置和服务器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711287184.4A CN108122198A (zh) | 2017-12-07 | 2017-12-07 | 一种在视频中融合推荐内容的实现方法、装置和服务器 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108122198A true CN108122198A (zh) | 2018-06-05 |
Family
ID=62228959
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711287184.4A Pending CN108122198A (zh) | 2017-12-07 | 2017-12-07 | 一种在视频中融合推荐内容的实现方法、装置和服务器 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108122198A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113989404A (zh) * | 2021-11-05 | 2022-01-28 | 北京字节跳动网络技术有限公司 | 图片处理方法、装置、设备、存储介质和程序产品 |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103297811A (zh) * | 2012-02-24 | 2013-09-11 | 北京明日时尚信息技术有限公司 | 一种智能嵌入式视频广告的实现方法 |
| CN103400284A (zh) * | 2013-07-25 | 2013-11-20 | 北京网秦天下科技有限公司 | 广告呈现方法和装置 |
| CN104066003A (zh) * | 2014-06-16 | 2014-09-24 | 百度在线网络技术（北京）有限公司 | 视频中广告的播放方法和装置 |
| CN104170392A (zh) * | 2013-11-21 | 2014-11-26 | 华为技术有限公司 | 一种文件中植入广告的方法、装置、系统及终端 |
| CN104581430A (zh) * | 2013-10-21 | 2015-04-29 | 华为技术有限公司 | 视频播放中的广告插播方法和设备 |
| CN104661077A (zh) * | 2015-02-17 | 2015-05-27 | 北京影谱互动传媒科技有限公司 | 一种广告加载的方法及装置 |
| CN104735467A (zh) * | 2015-03-31 | 2015-06-24 | 北京奇艺世纪科技有限公司 | 视频画中画广告生成方法及装置 |
| CN105472434A (zh) * | 2014-11-17 | 2016-04-06 | Tcl集团股份有限公司 | 植入内容到视频演示中的方法和系统 |
| CN105869008A (zh) * | 2015-12-07 | 2016-08-17 | 乐视云计算有限公司 | 一种广告定向投放方法及装置 |
| CN106165434A (zh) * | 2014-03-24 | 2016-11-23 | 高通股份有限公司 | 用于将媒体数据流式传送的定向广告插入 |
| CN106982380A (zh) * | 2017-04-20 | 2017-07-25 | 上海极链网络科技有限公司 | 互联网视频内虚拟互动广告的植入方法 |
| CN107292945A (zh) * | 2016-03-31 | 2017-10-24 | 阿里巴巴集团控股有限公司 | 视频图像的图层渲染处理方法及其系统 |
| CN107347166A (zh) * | 2016-08-19 | 2017-11-14 | 北京市商汤科技开发有限公司 | 视频图像的处理方法、装置和终端设备 |
-
2017
- 2017-12-07 CN CN201711287184.4A patent/CN108122198A/zh active Pending
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103297811A (zh) * | 2012-02-24 | 2013-09-11 | 北京明日时尚信息技术有限公司 | 一种智能嵌入式视频广告的实现方法 |
| CN103400284A (zh) * | 2013-07-25 | 2013-11-20 | 北京网秦天下科技有限公司 | 广告呈现方法和装置 |
| CN104581430A (zh) * | 2013-10-21 | 2015-04-29 | 华为技术有限公司 | 视频播放中的广告插播方法和设备 |
| CN104170392A (zh) * | 2013-11-21 | 2014-11-26 | 华为技术有限公司 | 一种文件中植入广告的方法、装置、系统及终端 |
| CN106165434A (zh) * | 2014-03-24 | 2016-11-23 | 高通股份有限公司 | 用于将媒体数据流式传送的定向广告插入 |
| CN104066003A (zh) * | 2014-06-16 | 2014-09-24 | 百度在线网络技术（北京）有限公司 | 视频中广告的播放方法和装置 |
| CN105472434A (zh) * | 2014-11-17 | 2016-04-06 | Tcl集团股份有限公司 | 植入内容到视频演示中的方法和系统 |
| CN104661077A (zh) * | 2015-02-17 | 2015-05-27 | 北京影谱互动传媒科技有限公司 | 一种广告加载的方法及装置 |
| CN104735467A (zh) * | 2015-03-31 | 2015-06-24 | 北京奇艺世纪科技有限公司 | 视频画中画广告生成方法及装置 |
| CN105869008A (zh) * | 2015-12-07 | 2016-08-17 | 乐视云计算有限公司 | 一种广告定向投放方法及装置 |
| CN107292945A (zh) * | 2016-03-31 | 2017-10-24 | 阿里巴巴集团控股有限公司 | 视频图像的图层渲染处理方法及其系统 |
| CN107347166A (zh) * | 2016-08-19 | 2017-11-14 | 北京市商汤科技开发有限公司 | 视频图像的处理方法、装置和终端设备 |
| CN106982380A (zh) * | 2017-04-20 | 2017-07-25 | 上海极链网络科技有限公司 | 互联网视频内虚拟互动广告的植入方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113989404A (zh) * | 2021-11-05 | 2022-01-28 | 北京字节跳动网络技术有限公司 | 图片处理方法、装置、设备、存储介质和程序产品 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9779444B2 (en) | Recommendations utilizing visual image analysis | |
| CN108322788B (zh) | 一种视频直播中的广告展示方法及装置 | |
| CN104219559B (zh) | 在视频内容中投放不明显叠加 | |
| CN104239404B (zh) | 搜索方法、系统和装置 | |
| CN110062270B (zh) | 广告展示方法和装置 | |
| CN106982240B (zh) | 信息的显示方法和装置 | |
| CN105069644A (zh) | 基于增强现实的购物客户端、服务器及系统 | |
| CN101916276B (zh) | 一种改善富媒体文件在网络中发布的方法、装置及服务器 | |
| CN104361075A (zh) | 一种图像网址系统及实现方法 | |
| CN109492607B (zh) | 一种信息推送方法、信息推送装置及终端设备 | |
| CN110309451A (zh) | 一种web预加载页面的生成方法及装置 | |
| CN110221747B (zh) | 电子书阅读页面的呈现方法、计算设备及计算机存储介质 | |
| CN109993567A (zh) | 广告的生成方法、装置和计算机可读存储介质 | |
| TW201222468A (en) | Method and arrangement for censoring content in images | |
| CN110245069A (zh) | 页面版本的测试方法和装置、页面的展示方法和装置 | |
| WO2000070517A8 (en) | Supplying greeting cards and gift cards over a global computer network | |
| CN109961493A (zh) | 展示页面上的横幅广告图片生成方法及装置 | |
| CN111797315A (zh) | 一种消息推送方法、装置、服务器及介质 | |
| US10453491B2 (en) | Video processing architectures which provide looping video | |
| CN109491726A (zh) | 开屏文件的呈现方法、电子设备及计算机存储介质 | |
| CN108122198A (zh) | 一种在视频中融合推荐内容的实现方法、装置和服务器 | |
| CN113763009A (zh) | 一种图片处理方法、图片跳转方法、装置、设备和介质 | |
| US20210390306A1 (en) | Ar system for enhanced book covers and related methods | |
| CN108040267A (zh) | 一种在视频中融合推荐内容的方法和装置 | |
| CN104216951B (zh) | 一种基于移动终端实现增强实境的方法及移动终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180605 |