CN110909251A - 提供素材的客户端装置、服务器端装置及方法 - Google Patents

Abstract

本发明涉及一种提供素材的客户端装置、服务器端装置及方法，其中供素材的客户端装置包括：界面模块，其经配置以提供用户界面，以接收用户输入；客户端搜索模块，其经配置以基于用户输入搜索以获取一个或多个候选图片/视频；以及图文合成模块，其经配置以基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频。本发明在用户通过客户端装置输入相应的文字后，可以获得包括用户输入的图文合成图片/视频，将其一键发送到多个第三方应用，不但节省了图文编辑工作，也免去了登录多个第三方应用，逐一发送相同内容的步骤，节省了用户时间，提高了内容发布、状态更新的效率，发布的图文合成图片/视频美观、生动，趣味性强。

Description

提供素材的客户端装置、服务器端装置及方法

技术领域

本发明涉及应用技术领域，特别地涉及一种提供素材的客户端装置、服务器端装置及方法。

背景技术

随着网络技术的发展，人们的社交活动越来越依赖于社交软件。通常，一个用户的终端，如移动端或PC端，会安装多个不同的社交软件，用户通过这些社交软件通过发布图片、说说消息等更新自已的动态，便于他人了解自己的当前状态。用户在更新自己的动态时，通常的操作方法是：用户首先登录帐户，然后进入相应界面，如微信的朋友圈，再编辑图片、文字等，然后再发布到该界面上，相应的用户动态随之更新。从该过程可见，用户更新其一个社交软件上的动态时，操作步骤繁琐。如果用户有多个社交软件，更新动态将是一件非常累人、耗时的事情。

发明内容

针对现有技术中存在的技术问题，本发明提出了一种提供素材的客户端装置、服务器端装置及方法，用于为各种第三方应用提供动态更新的素材并提高更新第三方应用动态的效率。

为解决上述技术问题，根据本发明的一个方面，提供一种提供素材的客户端装置，包括：界面模块，其经配置以提供用户界面，以接收用户输入；客户端搜索模块，其经配置以基于用户输入搜索以获取一个或多个候选图片/视频；以及图文合成模块，其经配置以基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频。

优选地，所述用户界面包括预览区域，其经配置以展示一个或多个图文合成图片/视频或其缩略图。

优选地，所述的客户端装置进一步包括第一接口模块，其经配置以连接到第三方应用的接口。

优选地，所述连接到第三方应用的接口包括但不限于微信朋友圈接口、QQ动态接口、脸书Facebook动态接口、照片墙Instagram动态接口、领英LinkedIn动态接口。

优选地，所述的客户端装置进一步包括输出模块，其连接到第一接口模块，经配置以响应于用户对图文合成图片/视频的选择，将经选择的图文合成图片/视频经所述第一接口模块发送到第三方应用。

优选地，用户界面中包括接口区域，经配置以显示第三方应用指示符。

优选地，所述接口区域经进一步配置显示经用户设置的第三方应用指示符。

优选地，所述用户输入为从输入法应用接收的上屏文字。

优选地，客户端搜索模块经配置以提取上屏文字中的关键字、上屏文字的属，或获得用户历史和/或用户偏好。

优选地，客户端搜索模块经配置以基于用户输入生成搜索请求，并将搜索请求发送到一个或多个服务器。

优选地，客户端搜索模块经配置以从一个或多个服务器接收一个或多个候选图片/视频。

优选地，客户端搜索模块经配置以对获取的一个或多个候选图片/视频排序。

根据本发明的另一个方面，提供一种提供素材的服务器端装置，包括：第二接口模块，与客户端装置交互，其经配置接收客户端装置的搜索请求，所述搜索请求至少包括客户端装置接收到的用户输入；图库，其经配置以存储一个或多个图片/视频；索引库，其配置以存储基于一个或多个图片/视频建立的索引；以及服务器端搜索模块，其经配置以基于用户输入利用索引库存储的索引搜索图库，以获得一个或多个候选图片。

优选地，所述图库中的图片包括图片中的文字、图片描述和图片类别中的一者或多者。

优选地，图片的图片描述包括以下中的一种或多种：候选图片的台词或潜台词；候选图片的场景；以及候选图片的内容、气氛、声音、气味和/或味道。

优选地，所述的服务器端装置进一步包括缩略图库，其经配置以存储图库中图片的缩略图。

优选地，服务器端搜索模块经配置以响应于没有匹配的候选图片或者候选图片的数量不足，提供补充的候选图片。

优选地，补充的候选图片采用随机的或者基于以下中的一者或多者提供：用户图片和/或用户偏好；用户属性信息；候选图片的流行度；以及候选图片的类别。

优选地，所述用户输入为从输入法应用接收的上屏文字。

优选地，服务器端搜索模块经配置以提取上屏文字中的关键字、属性、用户历史和用户偏好中的一个或多个。

优选地，所述第二接口模块经进一步配置以将服务器端搜索模块获得的一个或多个候选图片发送给所述客户端装置。

根据本发明的另一方面，提供一种在客户端提供素材的方法，包括：接收用户输入；基于用户输入搜索以获取一个或多个候选图片/视频；以及基于一个或多个图片/视频生成包含用户输入的一个或多个图文合成图片/视频。

优选地，所述的在客户端提供素材的方法进一步包括：向用户展示所述一个或多个图文合成图片/视频或其缩略图。

优选地，所述用户输入为从输入法应用接收的上屏文字。

优选地，所述的在客户端提供素材的方法进一步包括以下步骤中的一个或多个：提取上屏文字中的关键字和/或上屏文字的属性；获得用户历史和/或用户偏好；其中，基于上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者搜索以获取一个或多个候选图片/视频。

优选地，所述的在客户端提供素材的方法进一步包括：基于用户输入生成搜索请求，在所述搜索请求中包括上屏文字、上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者；将所述搜索请求发送到一个或多个服务器；以及接收从一个或多个服务器返回的一个或多个候选图片/视频。

优选地，所述的在客户端提供素材的方法进一步包括：

对获取的一个或多个候选图片/视频排序。

优选地，所述候选图片/视频中包括文字区域；所述方法进一步包括：将用户输入添加在候选图片/视频的文字区域以生成图文合成图片/视频。

优选地，所述的在客户端提供素材的方法进一步包括：将用户输入与候选图片/视频按照预置的布局参数合成图文合成图片/视频。

优选地，所述的在客户端提供素材的方法进一步包括：将多个候选图片/视频与用户输入合成一个图文合成图片/视频。

根据本发明的另一个方面，提供一种更新客户端应用状态的方法，包括：根据前述方法获取一个或多个图文合成图片/视频；以及响应于用户对图文合成图片/视频的选择，将经用户选择的图文合成图片/视频发送到第三方客户端应用。

优选地，所述第三方客户端应用为多个不同的应用，和/或同一个应用的多个不同小程序应用。

优选地，所述的更新客户端应用状态的方法进一步包括：响应于用户对第三方客户端应用的选择，将经用户选择的图文合成图片/视频发送到用户选择的第三方客户端应用。

优选地，响应于用户对第三方客户端应用的选择，进一步获取用户预先设置的第三方客户端应用，将经用户选择的图文合成图片/视频发送到用户预先设置的第三方客户端应用。

在本发明的一些实施例中，用户通过客户端装置输入相应的文字后，生成包括用户输入的图文合成图片/视频，可以将其一键发送到多个第三方应用，不但节省了图文编辑工作，也免去了登录多个第三方应用、逐一发送相同内容的步骤，节省了用户时间，提高了内容发布、状态更新的效率，发布的图文合成图片/视频美观、生动，趣味性强。

附图说明

下面，将结合附图对本发明的优选实施方式进行进一步详细的说明，其中：

图1是根据本发明一个实施例的提供素材的客户端装置的原理框图；

图2是根据本发明一个实施例的用户界面示意图；

图3是根据本发明一个实施例的客户端装置中的客户端搜索模块的原理框图；

图4是根据本发明另一个实施例的提供素材的客户端装置的原理框图；

图5是根据本发明一个实施例的提供素材的服务器端装置原理框图；以及

图6是根据本发明一个实施例的在客户端提供素材的方法流程图；

图7是根据本发明一个实施例的客户端获取一个或多个候选图片/视频的方法流程图；

图8是根据本发明一个实施例的服务器端提供候选图片/视频的方法流程图；

图9是根据本发明一个实施例的更新客户端应用状态的方法流程图；以及

图10是根据本发明另一个实施例的用户界面示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在以下的详细描述中，可以参看作为本申请一部分用来说明本申请的特定实施例的各个说明书附图。在附图中，相似的附图标记在不同图式中描述大体上类似的组件。本申请的各个特定实施例在以下进行了足够详细的描述，使得具备本领域相关知识和技术的普通技术人员能够实施本申请的技术方案。应当理解，还可以利用其它实施例或者对本申请的实施例进行结构、逻辑或者电性的改变。

图1是根据本发明一个实施例的提供素材的客户端装置的原理框图。如图1所示，所述客户端装置100包括界面模块102、客户端搜索模块104和图文合成模块106。其中，所述界面模块102经配置以接收用户输入。所述用户输入为从输入法应用接收的上屏文字。所述上屏文字是指在输出时显示在屏幕上的文字。例如，当用户想要在某些应用上发布一条自己的近况时，在所述界面模块102，通过输入法应用获得需要输出的文字。在图2所示的用户界面，输入区202和字符显示区204来自于输入法，仅仅是用于说明输入的过程，与本发明的客户端装置100无关。本发明的客户端装置100可以与任意的输入法相配合。

客户端装置100利用界面模块102获得用户输入。界面模块102将获取到的上屏文字发送给客户端搜索模块104，由客户端搜索模块104基于上屏文字搜索以获取一个或多个候选图片/视频。

在本实施例中，通过服务器来搜索与上屏文字相匹配的候选图片/视频。具体地，如图3所示，所述客户端搜索模块104包括关键字提取单元1042、属性提取单元1044、请求生成单元1046和接收单元1048。关键字提取模块502用以从上屏文字中提取出关键字，以提高搜索效率。在实施例中，上屏文字的关键字为上屏文字中能够表明上屏文字语义的一个或多个词语。举例而言，关键字提取单元1042采用以下的方式获取上屏文字的关键字。首先，根据语义将上屏文字分成多个词语。例如：“今天你的安排是什么？”这段上屏文字可以分成以下7个部分“今天/你/的/安排/是/什么/？”，其中“？”是标点符号。上屏文字包括6个词语。然后，根据词语的性质，将虚词和代词从上屏文字中去掉。例如，去掉虚词后，剩余的词语为“今天、安排”。接下来，根据词语的属性，赋予词语不同的权重。举例而言，表示主语、谓语和宾语的词语的权重大于表示定语的词语的权重；表示定语和补语的词语的权重大于表示状语的词语的权重。在上面的例子中，“安排”的权重大于“今天”的权重。由此，如上所示，在一些实施例中，关键字提取模块获取关键字以及关键字的权重。在以上的例子中，关键字提取模块502获得了关键字“安排”和“今天”；其中“安排”的权重大于“今天”的权重。在一些实施例中，关键字提取模块获得的关键字数量是有限的。权重较低的关键字可以被省略。在一些实施例中，上屏文字的语气也作为关键字提取。

如本领域技术人员所了解的，以上的方法仅仅用于示例性的说明本发明的技术方案而非限制其范围。现有技术中自动语义分析的方法都可以应用于此以用于提取上屏文字中的关键字。获取上屏文字的关键字能够简化检索过程，提高搜索和匹配的速度和准确度。

属性提取单元1044在本实施例为可选模块，其对上屏文字进行分析，以获取上屏文字的属性，例如，褒义、贬义、中性、赞扬、讽刺等。上屏文字的属性有利于向用户推荐候选图片。

在一些实施例中，属性提取单元1044可以进一步获得用户历史和偏好。用户历史和偏好有利于向用户推荐候选图片。如本领域技术人员所理解的，获得用户历史和偏好可以在获取上屏文字之前或之后的任何时间进行。

关键字提取单元1042和/或属性提取单元1044将其提取出的关键字、属性等发送给请求生成单元1046，请求生成单元1046将上屏文字及其关键字和/或属性包括在搜索请求中，将搜索请求发送给服务端的服务器。

接收单元1048接收服务端的服务器返回的一个或多个候选图片/视频，并将其发送给图文合成模块106。

在另一个实施例中，接收到的候选图片/视频除了图片/视频本身，还包括一些属性信息，如图片描述、代表图片分类的类别信息以及图片中的文字等。可选地，接收单元1048在将多个候选图片/视频发送给图文合成模块106之前，对多个候选图片/视频进行排序。例如，按照以下几种方式排序：(1)上屏文字或其关键字与候选图片的图片描述和/或图片中的文字的匹配度；(2)上屏文字或其关键字与候选图片类别的匹配度；(3)用户选择候选图片的历史记录；(4)用户偏好与候选图片类别的匹配度；(5)用户属性与候选图片类别的匹配度(6)候选图片在其图片分类中的流行程度；(7)候选图片的通用程度；(8)候选图片类别在检索结果中的比例等等。如本领域技术人员所理解的，以上仅仅是示例性的说明可能应用于候选图片排序的一些因素，并非涵盖可能的所有因素。其他有利于提供用户希望的或者更佳图文效果的因素也可以成为候选图片排序参考的指标。

在一些实施例中，以上候选图片的排序因素通过候选图片的排序体现出来。举例而言，匹配度越高，权重也越高。在一些实施例中，上屏文字或其关键字与图片中文字完全一致的权重高于上屏文字或其关键字被包含在图片中文字中的权重。但是，不同的因素具有不同的最高权重。例如，上屏文字或其关键字与候选图片中文字匹配度的最高权重大于上屏文字或其关键字与候选图片中图片描述匹配度的最高权重。换言之，如果上屏文字与第一候选图片中的文字完全一致；同样地，也与第二候选图片的图片描述完全一致，那么第一候选图片比第二候选图片排序更靠前。如本领域技术人员所理解的，其他排序因素也能够通过权重的调整而在排序中体现。在一些实施例中，客户端搜索模块通过动态地调整候选图片的权重而形成个性化的搜索结果，从而更好地匹配用户的需求。现有技术中其他关于权重调整的方式也可以应用于此，从而更好地提高本发明的技术效果。

图文合成模块106将界面模块102发送来的上屏文字和客户端搜索模块104发送来的候选图片/视频合成一个图片/视频。

在一个实施例中，图文合成模块106将用户输入的上屏文字与候选图片按照预置的布局参数合成一个图片。所述的布局参数包括上屏文字的属性，如字号、字体、排布方向等；所述的布局参数还包括上屏文字整体所占版面尺寸与图片的比例，即是以文字为主体，还是以图片为主体；所述的布局参数还包括上屏文字与图片的位置关系，如文字在上、图片在下，文字在右、图片在左或图片插入在文字中间等；所述的布局参数还可以包括合成时使用的候选图片/视频数量及其与上屏文字的位置关系，例如文字在上，三个图片在下的布局关系。

在另一个实施例中，图文合成模块106将用户输入的上屏文字添加在候选图片/视频的文字区域以生成图文合成图片/视频。在该实施例中，候选图片包括文字区域，其经定义而能够容纳一个或多个文字。候选图片经过调整而留出文字区域的位置，从而使得添加文字后的图片更美观。更进一步地，为了保证美观度，文字区域中容纳的文字大小、字体、排版、颜色中的一者或多者是经过预先定义的。同样地，一般而言文字区域能够容纳的文字数量有限制。如果添加的文字数量超过文字区域所能容纳的文字数量，则文字区域可以仅显示所能容纳的最多数量的文字，其余文字以例如省略号等符号代替。在一些实施例中，以上所提及的文字包括汉字、外文字、数字、标点符号等中的一者或多者。在一些实施例中，候选图片可以是线条图、灰度图、彩色图、照片等中的一者或多者。候选图片的背景可以为白色、灰色、浅蓝色、绿色、蓝色、黑色等颜色。在一些实施例中，文字区域中的文字可以是动态的。例如，文字可以变大或变小、旋转、变色、边缘闪光等。

在一些实施例中，候选图片可以是动图。举例而言，候选图片包括多个子图片的动图。每个子图片包括文各自的文字区域。各个子图片的文字区域可以不相同。在一些实施例中，每个子图片的文字区域中添加的文字是一致的。由此，虽然子图片变换而形成动图，但是整个动图向用户呈现的文字是一致的。在其他一些实施例中，每个子图片的文字区域中添加的文字是不一致的。各个子图片的文字区域组合起来是添加的文字。例如，动图包括3个子图片，需要添加的文字是“我爱你”；那么3个子图片的文字区域分别添加“我”、“爱”和“你”。由此，候选图片向用户动态呈现添加的文字“我爱你”。在一些实施例中，候选图片的各个子图片中添加文字的切换可以具有特效。这些特效包括但不限于：淡入淡出、从小到大或从大到小然后消失、从左到右或从右到左然后消失、从上到下或从下到上然后消失等。本领域技术人员应当理解，对于候选视频也可以采用类似方式处理。在一些例子中，候选视频能够播放上屏文字。

图文合成模块106生成图文合成图片/视频后，通过用户界面的预览区域206向用户展示多个图文合成图片/视频或其缩略图。预览区域206按照前述排好的顺序显示多个图文合成图片。在一个实施例中，该预览区域206能够左右滑动，以呈现更多的图文字合成图片；或者，预览区域206可以向上或向下扩展，例如，能够扩大到输入区202，以呈现其他更多的合成图片。鉴于图文字合成图片尺寸比较大，为了显示尽可能多的图片，预览区域206能够展示图文合成图片/视频的缩略图。

用户可以从预览区域206中选择一个图文合成图片/视频。例如，用户可以直接点击预览区域206中一个图文合成图片/视频；或者，用户可以点击空格，而选择图文合成图片/视频中的第一个图文合成图片/视频。

图4是根据本发明另一个实施例的提供素材的客户端装置的原理框图。如图4所示，本实施例提供的客户端装置除了包括图1中的模块外，还包括第一接口模块108。所述第一接口模块108连接到第三方应用的具体应用接口。所述第三方应用接口包括但不限于微信朋友圈接口、QQ动态接口、脸书Facebook动态接口、照片墙Instagram动态接口和领英LinkedIn动态接口中的一个或多个。通过所述第一接口模块108将前述生成的图文合成图片/视频发送到第三方应用。如图2所示，在用户界面中包括接口区域208，其中包括有多种第三方应用的指示符，用于指示可以连接的第三方应用接口。

可选地，为了方便发送图文合成图片/视频，本实施例还包括输出模块110，其与界面模块102相连接。如图2所示。当用户从预览区域206选择了一个图文合成图片/视频，并在接口区域208选择了需要发送的第三方应用指示符后，输出模块110将用户选择的图文合成图片/视频经第一接口模块108发送到选定的第三方应用。当用户选了多个第三方应用时，如同时选择了微信朋友圈接口、QQ动态接口、脸书Facebook动态接口，输出模块110将用户选择的图文合成图片/视频同时发送到所述三个应用中。因而，本发明不再需要用户分别登录这三个应用的帐户，再逐一发送，因而操作步骤简单、高效，为用户节省了很多时间，尤其是为那些同时管理多个应用，需要在多个应用上发送相同内容的用户来说，效率会成倍地提高。其中，所述的第三方用户接口不限于前述各个第三应用的接口，也可以是同一个应用、不同小程序的接口。例如一个信息帐户中朋友圈的不同分组的接口，不同的公众号接口等。

图5是根据本发明一个实施例的提供素材的服务器端装置原理框图。如图4所示，所述服务器端装置500包括第二接口模块502、图库504、索引库506和服务器端搜索模块508，其中，第二接口模块502经配置与客户端装置100交互，可以接收来自于客户端装置100的搜索请求，所述搜索请求包括客户端装置接收到的用户输入。

图库504经配置以存储一个或多个图片/视频。其中，图库504中的图片/视频可以是普通的图片/视频，也可以是经过处理后，具有文字区域的图片/视频。通常，此类图片/视频可以由专业人员设计而成。例如，在图片的某个适当位置留出文字区域，并设置文字区域中可以容纳字符的数量及其属性，例如，字号、字体、颜色、在文字区域中的排版等，从而使得添加文字后的图片更美观。

图库504中的所述图片/视频包括图片描述。图片描述可以是一个或多个词语(例如关键字)、一段文字、或者一个或多个词语或文字与语气的组合。在一些实施例中，图片描述说明了与图片匹配的台词或潜台词，例如“你真是太美了”、“我不扶墙就服你”等。在一些实施例中，图片描述说明了图片适合描述的场景，例如“忙”、“倒”、“晕”等。在一些实施例中，图片描述说明了图片的内容、气氛、声音、气味、味道等，例如，“黄河”、“真香”、“太甜了”等。在一些实施例中，图片的图片描述是以上类型的图片描述中一者或多者。以上仅仅是示例性地说明图片的图片描述。图片的还可以包括其他类型的图片描述以与用户的需求匹配。

在一些实施例中，图片/视频包括文字。图片包括的文字可以认为是图片的一部分，是不能更改的。包括文字的图片可以包含文字区域。或者，包括文字的图片可以不包含文字区域。当图片不包括文字区域时，如果用户选择了此种类型的图片，那么一种情况是上屏文字与图片中包括的文字相同，那么无需图文合成即已经得到了用户期望的包含图文的图片，图文合成的步骤可以省去了。另一种情况是上屏文字与图片中包括的文字不相同，那么用户选择与上屏文字不相同的图片说明用户希望更改上屏内容而获得期望的包含图文的图片，可以认为更改上屏内容和图文合成的步骤都省去了。因此，即使不包含文字区域的图片同样可以成为本发明的候选图片而存储在图库504中。

在一些实施例中，候选图片包括图片分类。图片分类描述图片所归属的类别。图片分类有助于根据用户偏好提供候选图片，以更好地满足用户的需求。举例而言，用户的偏好为可爱的小动物。在提供候选图片时，同时满足动物和萌的候选图片在排序时权重就会提高。由此，在提供候选图片时能够更加让用户满意。同样地，在一些实施例中，图片分类也有利于获取用户偏好，单独或结合其他用户信息为用户精准画像。

以下表1是一个图库中候选图片的示例：

表1：图库表

	图片名称	图片中的文字	图片分类	图片描述
					1	皮卡丘0028	无	通用、儿童	谁？…
2	大章鱼0012	无	搞笑、动物	我是谁？…
					3	小红帽0010	别问我是谁？	萌、儿童	勇敢
4	…	…	…	…

索引库506用于存储根据图片描述、图片中的文字以及图片分类中的一者或多者建立的索引。本领域技术人员应当理解，现有技术中已有的建立索引的方法都可以应用与此以建立图库504的索引。这些索引存储在索引库506中。服务器端搜索模块508利用索引库506中存储的索引，以实现图片与搜索请求的检索匹配。

服务器端搜索模块508经配置以基于搜索请求利用索引库506存储的索引搜索图库504，以获得一个或多个候选图片。其中，搜索请求包括用户输入，其为用户在客户端装置100上利用输入法输入的上屏文字。所述搜索请求还可以包括客户端装置100中的客户端搜索模块104提取的上屏文字关键词或上屏文字的属性，或用户历史和偏好。当搜索请求中仅包括上屏文字时，服务器端搜索模块508经配置可以提取上屏文字中的关键字、属性、用户历史和用户偏好中的一个或多个，以此作为搜索条件。

服务器端搜索模块508利用搜索请求中的这些关键词等作为搜索条件，利用索引搜索与关键字等搜索条件匹配的图片。如本领域技术人员所理解的，其他的搜索匹配的候选图片的方式也可以应用于此，以实现候选图片的检索。

在一些实施例中，匹配的候选图片没有或数量不足时，服务器端搜索模块508提供补充候选图片。举例而言，补充候选图片可以从图库504中随机获取。由于图片搭配更为灵活，即使随机提供候选图片，用户从随机获取的候选图片中能够选择到合适候选图片的可能性也非常高。当然，根据用户历史和偏好提供补充候选图片的效果可能更好。因此，在一些实施例中，根据用户选择候选图片的历史提供补充的候选图片。在一些实施例中，根据用户的偏好提供补充的候选图片。如果能够获得用户属性信息，也可以根据用户属性提供补充的候选图片。在一些实施例中，当前流行的主题也可能是好的选择。例如，当前某一部电影正在热映，那么提供该电影主题的候选图片也可能符合用户的期望。

在一些实施例中，提供补充的候选图片时，图片分类也非常有用。举例而言，如果从各个图片分类中随机提供候选图片，那么呈现给用户的将是风格更为多样的候选图片。用户发现满意的候选图片的可能性也更高。

如前所述，基于上屏文字或其关键字提供候选图片，并且提供补充候选图片进行辅助，本发明所提供的候选图片能够更好地与上屏文字或其关键字匹配，从而更加符合用户的需求，达到更好表达效果。

服务器端搜索模块508在得到多个候选图片后，将其通过第二接口模块502发送给客户端装置100。在一个实施例中，当客户端装置100不具有对多个候选图片的排序功能时，服务器端搜索模块508在发送候选图片前，对多个候选图片进行排序。

可选地，如图5所示，所述服务器端装置还包括缩略图库510，其经配置以存储图库中候选图片的缩略图，服务器端搜索模块508在得到候选图片时，还可以从缩略图库510中获取对应的缩略图，将其一同发送给客户端装置100。

图6是根据本发明一实施例的在客户端提供素材的方法流程图。如图6所示，所述方法包括：

步骤S100，从客户端接收用户输入。其中，所述用户输入为从输入法应用接收的上屏文字。

步骤S102，基于用户输入搜索以获取一个或多个候选图片/视频。在一个实施例中，可以在客户端装置本地搜索本地图库，也可以在服务器端搜索，还可以由其他的第三方搜索服务器来搜索。具体的一个实施例如图7所示，具体可包括：

步骤S200，对用户输入进行处理以获取搜索条件。在一个实施例中，当用户输入为从输入法应用接收的上屏文字时，从上屏文字中提取出关键字和/或上屏文字的属性，或者获得用户历史和/或用户偏好，以此作为搜索条件。其中，关键字及上屏文字的属性的提取、用户历史和用户偏好的获取请参考前述装置的说明，在此不再重复。该步骤可由客户端装置100完成，也可以由服务器端装置400完成，在由服务器端完成时，搜索条件只包括用户输入的上屏文字。

步骤S202，基于前述的搜索条件生成搜索请求，并发送到服务器端。由服务器端提供一个或多个候选图片/视频。其中，服务器端提供候选图片/视频的过程如图8所示：

步骤S300，接收来自客户端的搜索请求，从中获得搜索条件。其中，在本实施例中，客户端已基于用户输入生成了搜索条件。当然客户端也可以仅在搜索请求中包括用户输入，则在此种情况下，服务器端根据用户输入生成搜索条件。

步骤S302，基于前述的搜索条件搜索图库。其中，在一个实施例中，利用索引库506中的索引来搜索与搜索条件匹配的候选图片/视频。

步骤S304，在没有搜索到匹配的候选图片或候选图片的数量不足时，进行补充搜索。例如，从图库中随机获取图片，或按照用户历史和偏好、分类等搜索图片。

在另一些实施例中，在获得了候选图片/视频时，还从缩略图库中获取对应的缩略图。

步骤S306，服务器端将获取的候选图片按照与搜索条件的匹配度进行排序。

步骤S308，服务器端将排好序的候选图片发送给客户端。

步骤S204，客户端接收服务器端发送来的候选图片。

步骤S206，判断是否已排序，如果已排序，则执行步骤S104。如果没有排序，则在步骤S208对多个候选图片进行排序。

步骤S104，基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频。其中，可以采用不同的方式合成包含用户输入图文合成图片/视频。例如，按照布局参数将用户输入与候选图片/视频进行合成，或者是将用户输入添加到候选图片/视频中的文字区域。具体参见前面的说明，在此不再赘述。

步骤S106，在预览区域向用户展示多个图文合成图片/视频或其缩略图。

图9是根据本发明一个实施例的更新客户端应用状态的方法流程图。如图9所示，更新客户端应用状态的方法包括：

步骤S400，按照前述图6-8的方法获取一个或多个图文合成图片/视频。此时，所述的一个或多个图文合成图片/视频或其缩略图显示在预览区域206中，并且按照与用户输入的上屏文字或其关键字，或其属性等的匹配度排列。

步骤S402，获取用户选择的图文合成图片/视频及第三方客户端应用。如图2所示，用户可在预览区域206选择一个希望发布的图文合成图片/视频，在接口区域208选择一个或多个希望发布的第三方应用。或者，如图10所示的用户界面，在此界面中，用户可以通过点击三角形按键210，预先设置需要发布的第三方应用，在选择了希望发布的图文合成图片/视频后，响应于用户的选择，获得用户选择的图文合成图片/视频及用户预先设置的第三方客户端应用。

步骤S404，调用对应所述第三方客户端应用的接口，将用户选择的图文合成图片/视频发送到第三方客户端应用以更新其状态。

通过上述步骤，用户通过客户端装置输入相应的文字后，可以一键将其发送到各个应用，不但节省了图文字编辑工作，也免去了逐一发送相同内容的步骤，可以为用户节省时间，提高内容发布、状态更新的效率，而且发布的图文合成图片/视频的排版等通常是由图形专家制作，因而合成的图片/视频更加美观。

上述实施例仅供说明本发明之用，而并非是对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明范围的情况下，还可以做出各种变化和变型，因此，所有等同的技术方案也应属于本发明公开的范畴。

Claims (38)

1.一种提供素材的客户端装置，包括：

界面模块，其经配置以提供用户界面，以接收用户输入；

客户端搜索模块，其经配置以基于用户输入搜索以获取一个或多个候选图片/视频；以及

图文合成模块，其经配置以基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频。

2.根据权利要求1所述的客户端装置，其中所述用户界面包括预览区域，其经配置以展示一个或多个图文合成图片/视频或其缩略图。

3.根据权利要求1所述的客户端装置，其中进一步包括第一接口模块，其经配置以连接到第三方应用的接口。

4.根据权利要求3所述的客户端装置，其中连接到第三方应用的接口包括但不限于微信朋友圈接口、QQ动态接口、脸书Facebook动态接口、照片墙Instagram动态接口、领英LinkedIn动态接口。

5.根据权利要求3或4所述的客户端装置，其中进一步包括输出模块，其连接到第一接口模块，经配置以响应于用户对图文合成图片/视频的选择，将经选择的图文合成图片/视频经所述第一接口模块发送到第三方应用。

6.根据权利要求3所述的客户端装置，其中用户界面中包括接口区域，经配置以显示第三方应用指示符。

7.根据权利要求9所述的客户端装置，其中，所述接口区域经进一步配置显示经用户设置的第三方应用指示符。

8.根据权利要求1或3所述的客户端装置，其中所述用户输入为从输入法应用接收的上屏文字。

9.根据权利要求8所述的客户端装置，其中客户端搜索模块经配置以提取上屏文字中的关键字、上屏文字的属，或获得用户历史和/或用户偏好。

10.根据权利要求1或9所述的客户端装置，其中客户端搜索模块经配置以基于用户输入生成搜索请求，并将搜索请求发送到一个或多个服务器。

11.根据权利要求10所述的客户端装置，其中客户端搜索模块经配置以从一个或多个服务器接收一个或多个候选图片/视频。

12.根据权利要求1所述的客户端装置，其中客户端搜索模块经配置以对获取的一个或多个候选图片/视频排序。

13.根据权利要求1所述的应用客户端，其中，所述图文合成模块经进一步配置，将用户输入与候选图片/视频按照预置的布局参数合成图文合成图片/视频。

14.根据权利要求1所述的应用客户端，其中，所述候选图片/视频包括文字区域。

15.根据权利要求14所述的应用客户端，其中，所述图文合成模块经进一步配置，将用户输入添加到候选图片/视频的文字区域以合成图文合成图片/视频。

16.一种提供素材的服务器端装置，包括：

第二接口模块，与客户端装置交互，其经配置接收客户端装置的搜索请求，所述搜索请求至少包括客户端装置接收到的用户输入；

图库，其经配置以存储一个或多个图片/视频；

索引库，其配置以存储基于一个或多个图片/视频建立的索引；以及

服务器端搜索模块，其经配置以基于用户输入利用索引库存储的索引搜索图库，以获得一个或多个候选图片/视频。

17.根据权利要求16所述的服务器端装置，其中所述图库中的图片包括图片中的文字、图片描述和图片类别中的一者或多者。

18.根据权利要求17所述的服务器端装置，其中图片的图片描述包括以下中的一种或多种：

图片的台词或潜台词；

图片的场景；以及

图片的内容、气氛、声音、气味和/或味道。

19.根据权利要求16所述的服务器端装置，进一步包括缩略图库，其经配置以存储图库中图片的缩略图。

20.根据权利要求16所述的服务器端装置，其中服务器端搜索模块经配置以响应于没有匹配的候选图片或者候选图片的数量不足，提供补充的候选图片。

21.根据权利要求20所述的服务器端装置，其中补充的候选图片采用随机或者基于以下中的一者或多者提供：

用户图片和/或用户偏好；

用户属性信息；

候选图片的流行度；以及

候选图片的类别。

22.根据权利要求16所述的服务器端装置，所述用户输入为从输入法应用接收的上屏文字。

23.根据权利要求22所述的服务器端装置，其中服务器端搜索模块经配置以提取上屏文字中的关键字、属性、用户历史和用户偏好中的一个或多个。

24.根据权利要求16所述的服务器端装置，其中，所述第二接口模块经进一步配置以将服务器端搜索模块获得的一个或多个候选图片发送给所述客户端装置。

25.一种在客户端提供素材的方法，包括：

接收用户输入；

基于用户输入搜索以获取一个或多个候选图片/视频；以及

基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频。

26.根据权利要求25所述的在客户端提供素材的方法，其中进一步包括：

向用户展示所述一个或多个图文合成图片/视频或其缩略图。

27.根据权利要求25所述的在客户端提供素材的方法，其中所述用户输入为从输入法应用接收的上屏文字。

28.根据权利要求27所述的在客户端提供素材的方法，其中进一步包括以下步骤中的一个或多个：

提取上屏文字中的关键字和/或上屏文字的属性；和

获得用户历史和/或用户偏好。

29.根据权利要求28所述的在客户端提供素材的方法，其中进一步包括：

基于上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者搜索以获取一个或多个候选图片/视频。

30.根据权利要求28所述的在客户端提供素材的方法，其中进一步包括：

基于用户输入生成搜索请求，在所述搜索请求中包括上屏文字、上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者；

将所述搜索请求发送到一个或多个服务器；以及

接收从一个或多个服务器返回的一个或多个候选图片/视频。

31.根据权利要求25所述的在客户端提供素材的方法，其中进一步包括：

对获取的一个或多个候选图片/视频排序。

32.根据权利要求25所述的在客户端提供素材的方法，其中，所述候选图片/视频中包括文字区域；所述方法进一步包括：

将用户输入添加在候选图片/视频的文字区域以生成图文合成图片/视频。

33.根据权利要求25所述的在客户端提供素材的方法，其中，进一步包括：

将用户输入与候选图片/视频按照预置的布局参数合成图文合成图片/视频。

34.根据权利要求33所述的在客户端提供素材的方法，其中，进一步包括：

将多个候选图片/视频与用户输入合成一个图文合成图片/视频。

35.一种更新客户端应用状态的方法，包括：

根据权利要求25-34任一所述方法获取一个或多个图文合成图片/视频；以及

响应于用户对图文合成图片/视频的选择，将经用户选择的图文合成图片/视频发送到第三方客户端应用。

36.根据权利要求35所述的更新客户端应用状态的方法，其中，所述第三方客户端应用为多个不同的应用，和/或同一个应用的多个不同小程序应用。

37.根据权利要求35所述的更新客户端应用状态的方法，其中，进一步包括：

响应于用户对第三方客户端应用的选择，将经用户选择的图文合成图片/视频发送到用户选择的第三方客户端应用。

38.根据权利要求35所述的更新客户端应用状态的方法，其中，响应于用户对第三方客户端应用的选择，进一步获取用户预先设置的第三方客户端应用，将经用户选择的图文合成图片/视频发送到用户预先设置的第三方客户端应用。

Images