CN110865833A - 一种应用客户端、服务端及更新用户状态的方法 - Google Patents

Abstract

本发明涉及一种应用客户端、服务端及更新用户状态的方法，其中所述应用客户端包括界面模块，其经配置以提供用户界面，以接收用户输入；客户端搜索模块，其经配置以基于用户输入搜索以获取一个或多个候选图片/视频；图文合成模块，其经配置以基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频；以及用户状态模块，其经配置以响应于用户选择，利用经选择的图文合成图片/视频更新用户状态。本发明为用户提供了一种新的动态更新方式，为用户节省了时间，提高了内容发布、状态更新的效率，而且发布的图文合成图片/视频的图片、排版等通常是由图形专家制作，因而合成的图片/视频更加美观。

Description

一种应用客户端、服务端及更新用户状态的方法

技术领域

本发明涉及应用技术领域，特别地涉及一种应用客户端、服务端及更新用户状态的方法。

背景技术

随着网络技术的发展，人们的社交活动越来越依赖于社交软件。通常，一个用户的终端，如移动端或PC端，会安装多个不同的社交软件，用户通过这些社交软件通过发布图片、说说消息等更新自已的动态，便于他人了解自己的当前状态。用户在更新自己的动态时，通常的操作方法是：用户首先登录帐户，然后进入相应界面，如微信的朋友圈，再编辑图片、文字等，然后再发布到该界面上，相应的用户动态随之更新。从该过程可见，用户更新其一个社交软件上的动态时，操作步骤繁琐、效率低下，并且发布内容的质量依赖于用户的编辑水平，无法保证高质量的发布内容。

发明内容

针对现有技术中存在的技术问题，本发明提供了一种应用客户端、服务端及更新用户状态的方法，用以提高用户更新其在社交应用上的用户状态的效率和发布内容的质量。

为解决上述技术问题，根据本发明的一个方面，本发明提供了一种应用客户端，其中，包括：界面模块，其经配置以提供用户界面，以接收用户输入；客户端搜索模块，其经配置以基于用户输入搜索以获取一个或多个候选图片/视频；图文合成模块，其经配置以基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频；以及用户状态模块，其经配置以响应于用户选择，利用经选择的图文合成图片/视频更新用户状态。

优选地，所述用户界面包括预览区域，其经配置以展示一个或多个图文合成图片或视频或其缩略图。

优选地，客户端搜索模块经配置以基于用户输入生成搜索请求，并将搜索请求发送到一个或多个服务器。

优选地，客户端搜索模块经配置以从一个或多个服务器接收一个或多个候选图片/视频。

优选地，客户端搜索模块经配置以对从一个或多个服务器接收一个或多个图片/视频排序。

优选地，界面模块经配置以从输入法应用接收上屏文字。

优选地，客户端搜索模块经配置以从上屏文字中提取出特征参数，所述的特征参数包括上屏文字的关键字、上屏文字的属性特征、用户历史和用户偏好中的一者或多者；所述搜索请求至少部分包括所述特征参数。

优选地，所述图文合成模块经进一步配置，将用户输入与候选图片/视频按照预置的布局参数合成图文合成图片/视频。

优选地，所述候选图片/视频包括文字区域。

优选地，所述图文合成模块经进一步配置，将用户输入添加到候选图片/视频的文字区域以合成图文合成图片/视频。

为解决上述技术问题，根据本发明的另一个方面，本发明提供了一种应用服务端，包括：接口模块，与应用客户端交互，其经配置接收客户端装置的搜索请求，所述搜索请求至少包括应用客户端接收的用户输入；图库，其经配置以存储一个或多个图片/视频；索引库，其配置以存储基于一个或多个图片/视频建立的索引；以及服务端搜索模块，其经配置以基于用户输入利用索引库存储的索引搜索图库，以获得一个或多个候选图片/视频。

优选地，所述图库中的图片包括图片中的文字、图片描述和图片类别中的一者或多者。

优选地，所述图片描述包括以下中的一种或多种：图片的台词或潜台词；图片的场景；以及图片的内容、气氛、声音、气味和/或味道。

优选地，所述的应用服务端进一步包括缩略图库，其经配置以存储图库中图片的缩略图。

优选地，服务端搜索模块经配置以响应于没有匹配的候选图片或者候选图片的数量不足，提供补充的候选图片。

优选地，补充的候选图片采用随机或者基于以下中的一者或多者提供：用户图片和/或用户偏好；用户属性信息；候选图片的流行度；以及候选图片的类别。

优选地，所述用户输入为从输入法应用接收的上屏文字。

优选地，服务端搜索模块经配置以提取上屏文字中的关键字、属性、用户历史和用户偏好中的一个或多个。

优选地，所述接口模块经进一步配置以将服务端搜索模块获得的一个或多个候选图片发送给应用客户端。

根据本发明的另一个方面，提出一种更新客户端应用状态的方法，其中，包括：接收用户输入；基于用户输入搜索以获取一个或多个候选图片/视频；基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频；以及响应于用户选择，利用经选择的图文合成图片/视频更新用户状态。

优选地，所述用户输入为从输入法应用接收的上屏文字。

优选地，所述的方法进一步包括：以下步骤中的一个或多个：提取上屏文字中的关键字和/或上屏文字的属性；获得用户历史和/或用户偏好。

优选地，所述的方法进一步包括：基于上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者搜索以获取一个或多个候选图片/视频。

优选地，所述的方法进一步包括：在所述搜索请求中包括上屏文字、上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者；将所述搜索请求发送到一个或多个服务器；以及接收从一个或多个服务器返回的一个或多个候选图片/视频。

优选地，所述方法进一步包括：对获取的一个或多个候选图片/视频排序。

优选地，所述候选图片/视频中包括文字区域；所述方法进一步包括：将用户输入添加在候选图片/视频的文字区域以生成图文合成图片/视频。

优选地，所述的方法进一步包括：将用户输入与候选图片/视频按照预置的布局参数合成图文合成图片/视频。

优选地，所述的方法进一步包括：将多个候选图片/视频与用户输入合成一个图文合成图片/视频。

本发明为用户提供了一种新的动态更新方式，用户在使用社交应用时，只需根据需要输入文字，则可以得到多个包括了要发布文字的图文合成图片，并根据用户的选择，自动将其发布到动态中，从而更新用户状态。为用户节省了时间，提高了内容发布、状态更新的效率，而且发布的图文合成图片/视频的图片、排版等通常是由图形专家制作，因而合成的图片/视频更加美观。

附图说明

下面，将结合附图对本发明的优选实施方式进行进一步详细的说明，其中：

图1是根据本发明一个实施例的的应用客户端原理框图；

图2是根据本发明一个实施例的输入界面的示意图；

图3是根据本发明一个实施例的客户端搜索模块的原理框图；

图4是根据本发明一个实施例的应用服务端的原理框图；

图5是根据本发明一个实施例的更新客户端应用状态的方法流程图；

图6是根据本发明一个实施例的提供候选图片的方法流程图；以及

图7是根据本发明一个实施例的应用服务端搜索候选图片/视频的。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在以下的详细描述中，可以参看作为本申请一部分用来说明本申请的特定实施例的各个说明书附图。在附图中，相似的附图标记在不同图式中描述大体上类似的组件。本申请的各个特定实施例在以下进行了足够详细的描述，使得具备本领域相关知识和技术的普通技术人员能够实施本申请的技术方案。应当理解，还可以利用其它实施例或者对本申请的实施例进行结构、逻辑或者电性的改变。

现有技术中输入法的一些功能，例如表情包功能，使得输入法能够输入图片。然而，在使用表情包时，用户需要预先下载表情包。输入法中能够输入的图片也仅限于表情包中提供的图片。特别是，表情包图片中的文字是无法修改的。这使得用户的使用受到了很大的限制。

本发明的一些实施例中提出了一种更具娱乐性的输入法：基于用户输入的内容与图片或视频结合形成包含用户输入内容的图片或视频。以下通过图片的实施例来详细说明本发明的技术方案。本领域技术人员应当理解，本发明的方案也能够以类似的方式应用于视频，例如时间小于5秒、10秒或15秒的小视频。

图1是根据本发明一个实施例的应用客户端原理框图。如图1所示，所述应用客户端100包括界面模块102、客户端搜索模块104、图文合成模块106和用户状态模块108。其中，所述的应用可以是微信、QQ、脸书Facebook、照片墙Instagram或领英LinkedIn等社交应用。本实施例中的用户状态模块与前述各种动态模块相连接，用以更新可种动态模块中显示的用户状态。具体地，所述界面模块102经配置以接收用户输入。在一个实施例中，所述用户输入为从输入法应用接收的上屏文字。所述上屏文字是指在输出时显示在屏幕上的文字。例如，当用户要在所述应用的动态，如微信朋友圈，上发布一条自己的近况信息时，可通过所述界面模块102提供的用户界面输入要发布的文字。如图2所示，为一个实施例提供的用户界面。用户界面中输入区202和字符显示区204来自输入法，这里仅仅是为了说明输入的过程。输入法与应用客户端无关。应用客户端可以与任何输入法相配合。当用户在输入法中确认了上屏文字后，应用客户端例如微信获得上屏文字“今天你的安排是什么？”

候选图片/视频可由客户端搜索模块104基于上屏文字在客户端本地搜索得到，也可以由服务器在服务端基于上屏文字搜索得到。由服务器搜索时，可以由客户端直接发送给第三方搜索服务器搜索，也可以由本应用服务端的服务器搜索，或由本应用服务端请求第三方搜索服务器搜索。应用客户端在其界面显示候选图片/视频，例如微信中的区域206，供用户选择。

在本实施例中，通过服务端的服务器来搜索与上屏文字相匹配的候选图片/视频。具体地，如图3所示，是根据本发明一个实施例的客户端搜索模块的原理框图。所述客户端搜索模块104包括关键字提取单元1042、属性提取单元1044、请求生成单元1046和接收单元1048。关键字提取模块1042用以从上屏文字中提取出关键字，以提高搜索效率。在本实施例中，上屏文字的关键字为上屏文字中能够表明上屏文字语义的一个或多个词语。举例而言，关键字提取单元1042采用以下的方式获取上屏文字的关键字。首先，根据语义将上屏文字分成多个词语。例如：“今天你的安排是什么？”这段上屏文字可以分成以下7个部分“今天/你/的/安排/是/什么/？”，其中“？”是标点符号。上屏文字包括6个词语。然后，根据词语的性质，将虚词和代词从上屏文字中去掉。例如，去掉虚词后，剩余的词语为“今天、安排”。接下来，根据词语的属性，赋予词语不同的权重。举例而言，表示主语、谓语和宾语的词语的权重大于表示定语的词语的权重；表示定语和补语的词语的权重大于表示状语的词语的权重。在上面的例子中，“安排”的权重大于“今天”的权重。由此，如上所示，在一些实施例中，关键字提取模块获取关键字以及关键字的权重。在以上的例子中，关键字提取模块502获得了关键字“安排”和“今天”；其中“安排”的权重大于“今天”的权重。在一些实施例中，关键字提取模块获得的关键字数量是有限的。权重较低的关键字可以被省略。在一些实施例中，上屏文字的语气也作为关键字提取。

如本领域技术人员所了解的，以上的方法仅仅用于示例性的说明本发明的技术方案而非限制其范围。现有技术中自动语义分析的方法都可以应用于此以用于提取上屏文字中的关键字。获取上屏文字的关键字能够简化检索过程，提高搜索和匹配的速度和准确度。

属性提取单元1044在本实施例中为可选模块，其对上屏文字进行分析，以获取上屏文字的属性，例如，褒义、贬义、中性、赞扬、讽刺等。上屏文字的属性有利于向用户推荐候选图片。

在一些实施例中，属性提取单元1044可以进一步获得用户历史和偏好。用户历史和偏好有利于向用户推荐候选图片。如本领域技术人员所理解的，获得用户历史和偏好可以在获取上屏文字之前或之后的任何时间进行。

关键字提取单元1042和/或属性提取单元1044将其提取出的关键字、属性等特征参数，将其发送给请求生成单元1046，请求生成单元1046将上屏文字及其关键字和/或属性等特征参数包括在搜索请求中，将搜索请求发送给服务端的服务器。

接收单元1048接收服务端的服务器返回的一个或多个候选图片/视频，并将其发送给图文合成模块106。

在另一个实施例中，接收到的候选图片/视频除了图片/视频本身，还包括一些属性信息，如图片描述、代表图片分类的类别信息以及图片中的文字等。可选地，接收单元1048在将多个候选图片/视频发送给图文合成模块106之前，对多个候选图片/视频进行排序。例如，按照以下几种方式排序：(1)上屏文字或其关键字与候选图片的图片描述和/或图片中的文字的匹配度；(2)上屏文字或其关键字与候选图片类别的匹配度；(3)用户选择候选图片的历史记录；(4)用户偏好与候选图片类别的匹配度；(5)用户属性与候选图片类别的匹配度(6)候选图片在其图片分类中的流行程度；(7)候选图片的通用程度；(8)候选图片类别在检索结果中的比例等等。如本领域技术人员所理解的，以上仅仅是示例性的说明可能应用于候选图片排序的一些因素，并非涵盖可能的所有因素。其他有利于提供用户希望的或者更佳图文效果的因素也可以成为候选图片排序参考的指标。

在一些实施例中，以上候选图片的排序因素通过候选图片的排序体现出来。举例而言，匹配度越高，权重也越高。在一些实施例中，上屏文字或其关键字与图片中文字完全一致的权重高于上屏文字或其关键字被包含在图片中文字中的权重。但是，不同的因素具有不同的最高权重。例如，上屏文字或其关键字与候选图片中文字匹配度的最高权重大于上屏文字或其关键字与候选图片中图片描述匹配度的最高权重。换言之，如果上屏文字与第一候选图片中的文字完全一致；同样地，也与第二候选图片的图片描述完全一致，那么第一候选图片比第二候选图片排序更靠前。如本领域技术人员所理解的，其他排序因素也能够通过权重的调整而在排序中体现。在一些实施例中，客户端搜索模块通过动态地调整候选图片的权重而形成个性化的搜索结果，从而更好地匹配用户的需求。现有技术中其他关于权重调整的方式也可以应用于此，从而更好地提高本发明的技术效果。

图文合成模块106将界面模块102发送来的上屏文字和客户端搜索模块104发送来的候选图片/视频合成一个图片/视频。

在一个实施例中，图文合成模块106将用户输入的上屏文字与候选图片按照预置的布局参数合成一个图片。所述的布局参数包括上屏文字的文字属性，如字号、字体、排布方向等；所述的布局参数还包括上屏文字整体所占版面尺寸与图片的比例，即是以文字为主体，还是以图片为主体；所述的布局参数还包括上屏文字与图片的位置关系，如文字在上、图片在下，文字在右、图片在左或图片插入在文字中间等；所述的布局参数还可以包括合成时使用的候选图片/视频数量及其与上屏文字的位置关系，例如文字在上，三个图片在下的布局关系。

在另一个实施例中，接收到服务器返回的候选图片/视频具有文字区域，图文合成模块106将用户输入的上屏文字添加在候选图片/视频的文字区域以生成图文合成图片/视频。其中，所述的文字区域经定义而能够容纳一个或多个文字。候选图片经过调整而留出文字区域的位置，从而使得添加文字后的图片更美观。更进一步地，为了保证美观度，文字区域中容纳的文字大小、字体、排版、颜色中的一者或多者是经过预先定义的。同样地，一般而言文字区域能够容纳的文字数量有限制。如果添加的文字数量超过文字区域所能容纳的文字数量，则文字区域可以仅显示所能容纳的最多数量的文字，其余文字以例如省略号等符号代替。在一些实施例中，以上所提及的文字包括汉字、外文字、数字、标点符号等中的一者或多者。在一些实施例中，候选图片可以是线条图、灰度图、彩色图、照片等中的一者或多者。候选图片的背景可以为白色、灰色、浅蓝色、绿色、蓝色、黑色等颜色。在一些实施例中，文字区域中的文字可以是动态的。例如，文字可以变大或变小、旋转、变色、边缘闪光等。

在一些实施例中，候选图片可以是动图。举例而言，候选图片包括多个子图片的动图。每个子图片包括文各自的文字区域。各个子图片的文字区域可以不相同。在一些实施例中，每个子图片的文字区域中添加的文字是一致的。由此，虽然子图片变换而形成动图，但是整个动图向用户呈现的文字是一致的。在其他一些实施例中，每个子图片的文字区域中添加的文字是不一致的。各个子图片的文字区域组合起来是添加的文字。例如，动图包括3个子图片，需要添加的文字是“我爱你”；那么3个子图片的文字区域分别添加“我”、“爱”和“你”。由此，候选图片向用户动态呈现添加的文字“我爱你”。在一些实施例中，候选图片的各个子图片中添加文字的切换可以具有特效。这些特效包括但不限于：淡入淡出、从小到大或从大到小然后消失、从左到右或从右到左然后消失、从上到下或从下到上然后消失等。本领域技术人员应当理解，对于候选视频也可以采用类似方式处理。在一些例子中，候选视频能够播放上屏文字。

图文合成模块106生成图文合成图片/视频后，通过用户界面的预览区域206向用户展示多个图文合成图片/视频或其缩略图，如图2所示。预览区域206按照接收单元1048排好的顺序显示多个图文合成图片。在一个实施例中，该预览区域206能够左右滑动，以呈现更多的图文字合成图片；或者，预览区域206可以向上或向下扩展，例如，能够扩大到输入区202，以呈现其他更多的合成图片。鉴于图文字合成图片尺寸比较大，为了显示尽可能多的图片，预览区域206能够展示图文合成图片/视频的缩略图。

用户可以从预览区域206中选择一个图文合成图片/视频。例如，用户可以直接点击预览区域206中一个图文合成图片/视频；或者，用户可以点击空格，而选择图文合成图片/视频中的第一个图文合成图片/视频。

用户状态模块108响应于用户选择，利用经选择的图文合成图片/视频更新用户状态。例如，用户状态模块108与微信朋友圈相连接，将经选择的图文合成图片/视频发布在朋友圈中，从而更新了用户在朋友圈的用户状态。

图4是根据本发明一个实施例的应用服务端的原理框图。如图4所示，所述应用服务端400包括接口模块402、图库404、索引库406和服务端搜索模块408，其中，接口模块402经配置与应用客户端100交互，可以接收来自于应用客户端100的搜索请求，所述搜索请求包括客户端接收到的用户输入。

图库404经配置以存储一个或多个图片/视频。其中，图库404中的图片/视频可以是普通的图片/视频，也可以是经过处理后，具有文字区域的图片/视频。通常，此类图片/视频可以由专业人员设计而成。例如，在图片的某个适当位置定义文字区域，并设置可以容纳字符的数量及其属性，例如，字号、字体、颜色、在文字区域中的排版等，从而使得添加文字后的图片更美观。

图库404中的所述图片/视频包括图片描述。图片描述可以是一个或多个词语(例如关键字)、一段文字、或者一个或多个词语或文字与语气的组合。在一些实施例中，图片描述说明了与图片匹配的台词或潜台词，例如“你真是太美了”、“我不扶墙就服你”等。在一些实施例中，图片描述说明了图片适合描述的场景，例如“忙”、“倒”、“晕”等。在一些实施例中，图片描述说明了图片的内容、气氛、声音、气味、味道等，例如，“黄河”、“真香”、“太甜了”等。在一些实施例中，图片的图片描述是以上类型的图片描述中一者或多者。以上仅仅是示例性地说明图片的图片描述。图片的还可以包括其他类型的图片描述以与用户的需求匹配。

在一些实施例中，图片/视频包括文字。图片包括的文字可以认为是图片的一部分，是不能更改的。包括文字的图片可以包含文字区域。或者，包括文字的图片可以不包含文字区域。当图片不包括文字区域时，如果用户选择了此种类型的图片，那么一种情况是上屏文字与图片中包括的文字相同，那么无需图文合成即已经得到了用户期望的包含图文的图片，图文合成的步骤可以省去了。另一种情况是上屏文字与图片中包括的文字不相同，那么用户选择与上屏文字不相同的图片说明用户希望更改上屏内容而获得期望的包含图文的图片，可以认为更改上屏内容和图文合成的步骤都省去了。因此，即使不包含文字区域的图片同样可以成为本发明的候选图片而存储在图库404中。

在一些实施例中，候选图片包括图片分类。图片分类描述图片所归属的类别。图片分类有助于根据用户偏好提供候选图片，以更好地满足用户的需求。举例而言，用户的偏好为可爱的小动物。在提供候选图片时，同时满足动物和萌的候选图片在排序时权重就会提高。由此，在提供候选图片时能够更加让用户满意。同样地，在一些实施例中，图片分类也有利于获取用户偏好，单独或结合其他用户信息为用户精准画像。

以下表1是一个图库中候选图片的示例：

表1：图库表

	图片名称	图片中的文字	图片分类	图片描述
					1	皮卡丘0028	无	通用、儿童	谁？…
2	大章鱼0012	无	搞笑、动物	我是谁？…
					3	小红帽0010	别问我是谁？	萌、儿童	勇敢
4	…	…	…	…

索引库406用于存储根据图片描述、图片中的文字以及图片分类中的一者或多者建立的索引。本领域技术人员应当理解，现有技术中已有的建立索引的方法都可以应用与此以建立图库404的索引。这些索引存储在索引库406中。服务端搜索模块408利用索引库406中存储的索引，以实现图片与搜索请求的检索匹配。

服务端搜索模块408经配置以基于搜索请求利用索引库406存储的索引搜索图库404，以获得一个或多个候选图片。其中，搜索请求包括用户输入，其为用户在应用客户端100上利用输入法输入的上屏文字。所述搜索请求还可以包括应用客户端100中的客户端搜索模块104提取的上屏文字关键词或上屏文字的属性，或用户历史和偏好。当搜索请求中仅包括上屏文字时，服务端搜索模块408经配置可以提取上屏文字中的关键字、属性、用户历史和用户偏好中的一个或多个，以此作为搜索条件。

服务端搜索模块408利用搜索请求中的这些关键词等作为搜索条件，利用索引搜索与关键字等搜索条件匹配的图片。如本领域技术人员所理解的，其他的搜索匹配的候选图片的方式也可以应用于此，以实现候选图片的检索。

在一些实施例中，匹配的候选图片没有或数量不足时，服务端搜索模块408提供补充候选图片。举例而言，补充候选图片可以从图库404中随机获取。由于图片搭配更为灵活，即使随机提供候选图片，用户从随机获取的候选图片中能够选择到合适候选图片的可能性也非常高。当然，根据用户历史和偏好提供补充候选图片的效果可能更好。因此，在一些实施例中，根据用户选择候选图片的历史提供补充的候选图片。在一些实施例中，根据用户的偏好提供补充的候选图片。如果能够获得用户属性信息，也可以根据用户属性提供补充的候选图片。在一些实施例中，当前流行的主题也可能是好的选择。例如，当前某一部电影正在热映，那么提供该电影主题的候选图片也可能符合用户的期望。

在一些实施例中，提供补充的候选图片时，图片分类也非常有用。举例而言，如果从各个图片分类中随机提供候选图片，那么呈现给用户的将是风格更为多样的候选图片。用户发现满意的候选图片的可能性也更高。

如前所述，基于上屏文字或其关键字提供候选图片，并且提供补充候选图片进行辅助，本发明所提供的候选图片能够更好地与上屏文字或其关键字匹配，从而更加符合用户的需求，达到更好表达效果。

服务端搜索模块408在得到多个候选图片后，将其通过接口模块402发送给应用客户端100。在一个实施例中，当应用客户端100不具有对多个候选图片的排序功能时，服务端搜索模块408在发送候选图片前，对多个候选图片进行排序。

可选地，如图4所示，所述应用服务端还包括缩略图库410，其经配置以存储图库中候选图片的缩略图，服务端搜索模块408在得到候选图片时，还可以从缩略图库410中获取对应的缩略图，将其一同发送给应用客户端100。

图5是根据本发明一个实施例的更新客户端应用状态的方法流程图。所述方法包括：

步骤S500，接收用户输入。通过应用客户端提供有用户界面，用户可以输入文字、字符等。如图2所示，用户输入的字符显示在字符显示区204，从字符显示区204可获得用户输入。一般而言，在用户按下确认键时，字符显示区204中的字符组合则输出到屏幕上，因而可将其称为上屏文字。

步骤S502，基于用户输入搜索以获取一个或多个候选图片/视频。在一个实施例中，可以在客户端本地搜索本地图库，也可以在服务器端搜索，还可以由其他的第三方搜索服务器来搜索。具体的一个实施例如图6所示，具体可包括：

步骤S600，对用户输入进行处理以获取搜索条件。在一个实施例中，从上屏文字中提取出关键字和/或上屏文字的属性，或者获得用户历史和/或用户偏好，以此作为搜索条件。其中，关键字及上屏文字的属性的提取、用户历史和用户偏好的获取请参考前述应用客户端的说明，在此不再重复。该步骤可由应用客户端100完成，也可以由应用服务器端400完成，在由服务器端完成时，其接收的来自应用客户端100的搜索请求中只包括用户输入的上屏文字。

步骤S602，应用客户端100基于前述的搜索条件生成搜索请求，并发送到应用服务端400。由应用服务端400提供一个或多个候选图片/视频。其中，应用服务端400搜索候选图片/视频的过程如图7所示：

步骤S700，接收来自应用客户端100的搜索请求，从中获得搜索条件。其中，在本实施例中，应用客户端100已基于用户输入生成了搜索条件。当然应用客户端100也可以仅在搜索请求中包括用户输入，则在此种情况下，应用服务端400根据用户输入生成搜索条件。

步骤S702，基于前述的搜索条件搜索图库。其中，在一个实施例中，利用索引库406中的索引来搜索与搜索条件匹配的候选图片/视频。

步骤S704，在没有搜索到匹配的候选图片或候选图片的数量不足时，进行补充搜索。例如，从图库中随机获取图片，或按照用户历史和偏好、分类等搜索图片。

在另一些实施例中，在获得了候选图片/视频时，还从缩略图库中获取对应的缩略图。

步骤S706，应用服务端400将获取的候选图片按照与搜索条件的匹配度进行排序。

步骤S708，应用服务端400将排好序的候选图片发送给应用客户端100。

步骤S604，应用客户端100接收服务器端发送来的候选图片。

步骤S606，判断是否已排序，如果已排序，则执行步骤S504。如果没有排序，则在步骤S608对多个候选图片进行排序。

步骤S504，基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频。其中，可以采用不同的方式合成包含用户输入图文合成图片/视频。例如，按照布局参数将用户输入与候选图片/视频进行合成，或者是将用户输入添加到候选图片/视频中的文字区域。具体参见前面的说明，在此不再赘述。

步骤S506，在预览区域向用户展示多个图文合成图片/视频或其缩略图。

步骤S508，响应于用户选择，利用经选择的图文合成图片/视频更新用户状态。例如，在微信朋友圈发布经选择的图文合成图片/视频，从而更新用户状态。

通过上述步骤，用户在使用社交应用时，在其动态中更新其用户状态时，用户不再需要自己挑选、修改图片，也不需要编辑要发布的内容版面布置，只需根据需要输入文字，本发明为用户提供多个包括了要发布文字的图文合成图片，用户根据其喜好选择一个，便可以将其发布到动态中，从而更新用户状态。为用户节省了时间，提高了内容发布、状态更新的效率，而且发布的图文合成图片/视频的图片、排版等通常是由图形专家制作，因而合成的图片/视频更加美观。

上述实施例仅供说明本发明之用，而并非是对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明范围的情况下，还可以做出各种变化和变型，因此，所有等同的技术方案也应属于本发明公开的范畴。

Claims (29)

1.一种应用客户端，其中，包括：

界面模块，其经配置以提供用户界面，以接收用户输入；

客户端搜索模块，其经配置以基于用户输入搜索以获取一个或多个候选图片/视频；

图文合成模块，其经配置以基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频；以及

用户状态模块，其经配置以响应于用户选择，利用经选择的图文合成图片/视频更新用户状态。

2.根据权利要求1所述的应用客户端，其中，所述用户界面包括预览区域，其经配置以展示一个或多个图文合成图片或视频或其缩略图。

3.根据权利要求1所述的应用客户端，其中，客户端搜索模块经配置以基于用户输入生成搜索请求，并将搜索请求发送到一个或多个服务器。

4.根据权利要求3所述的应用客户端，其中，客户端搜索模块经配置以从一个或多个服务器接收一个或多个候选图片/视频。

5.根据权利要求4所述的应用客户端，其中，客户端搜索模块经配置以对从一个或多个服务器接收一个或多个图片/视频排序。

6.根据权利要求1所述的应用客户端，其中所述应用客户端为以下中一者：微信、QQ、脸书Facebook、照片墙Instagram、领英LinkedIn。

7.根据权利要求3所述的应用客户端，其中界面模块经配置以从输入法应用接收上屏文字。

8.根据权利要求7所述的应用客户端，其中，客户端搜索模块经配置以从上屏文字中提取出特征参数，所述的特征参数包括上屏文字的关键字、上屏文字的属性特征、用户历史和用户偏好中的一者或多者；所述搜索请求至少部分包括所述特征参数。

9.根据权利要求1所述的应用客户端，其中，所述图文合成模块经进一步配置，将用户输入与候选图片/视频按照预置的布局参数合成图文合成图片/视频。

10.根据权利要求1所述的应用客户端，其中，所述候选图片/视频包括文字区域。

11.根据权利要求1所述的应用客户端，其中，所述图文合成模块经进一步配置，将用户输入添加到候选图片/视频的文字区域以合成图文合成图片/视频。

12.一种应用服务端，包括：

接口模块，与应用客户端交互，其经配置接收客户端装置的搜索请求，所述搜索请求至少包括应用客户端接收的用户输入；

图库，其经配置以存储一个或多个图片/视频；

索引库，其配置以存储基于一个或多个图片/视频建立的索引；以及

服务端搜索模块，其经配置以基于用户输入利用索引库存储的索引搜索图库，以获得一个或多个候选图片/视频。

13.根据权利要求12所述的应用服务端，其中，所述图库中的图片包括图片中的文字、图片描述和图片类别中的一者或多者。

14.根据权利要求13所述的应用服务端，其中，所述图片描述包括以下中的一种或多种：

图片的台词或潜台词；

图片的场景；以及

图片的内容、气氛、声音、气味和/或味道。

15.根据权利要求12所述的应用服务端，其中，进一步包括缩略图库，其经配置以存储图库中图片的缩略图。

16.根据权利要求12所述的应用服务端，其中，服务端搜索模块经配置以响应于没有匹配的候选图片或者候选图片的数量不足，提供补充的候选图片。

17.根据权利要求16所述的应用服务端，其中，补充的候选图片采用随机或者基于以下中的一者或多者提供：

用户图片和/或用户偏好；

用户属性信息；

候选图片的流行度；以及

候选图片的类别。

18.根据权利要求12所述的应用服务端，其中，所述用户输入为从输入法应用接收的上屏文字。

19.根据权利要求18所述的应用服务端，其中，服务端搜索模块经配置以提取上屏文字中的关键字、属性、用户历史和用户偏好中的一个或多个。

20.根据权利要求12所述的应用服务端，其中，所述接口模块经进一步配置以将服务端搜索模块获得的一个或多个候选图片发送给应用客户端。

21.一种更新用户状态的方法，其中，包括：

接收用户输入；

基于用户输入搜索以获取一个或多个候选图片/视频；

基于一个或多个候选图片/视频生成包含用户输入的一个或多个图文合成图片/视频；以及

响应于用户选择，利用经选择的图文合成图片/视频更新用户状态。

22.根据权利要求18所述的方法，其中，所述用户输入为从输入法应用接收的上屏文字。

23.根据权利要求19所述的方法，其中，进一步包括：以下步骤中的一个或多个：

提取上屏文字中的关键字和/或上屏文字的属性；

获得用户历史和/或用户偏好。

24.根据权利要求20所述的方法，其中，进一步包括：基于上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者搜索以获取一个或多个候选图片/视频。

25.根据权利要求20所述的方法，其中，进一步包括：在所述搜索请求中包括上屏文字、上屏文字中的关键字、上屏文字的属性、用户历史和用户偏好中的一者或多者；

将所述搜索请求发送到一个或多个服务器；以及

接收从一个或多个服务器返回的一个或多个候选图片/视频。

26.根据权利要求18所述的方法，其中进一步包括：

对获取的一个或多个候选图片/视频排序。

27.根据权利要求18所述的方法，其中，所述候选图片/视频中包括文字区域；所述方法进一步包括：

将用户输入添加在候选图片/视频的文字区域以生成图文合成图片/视频。

28.根据权利要求22所述的在方法，其中，进一步包括：

将用户输入与候选图片/视频按照预置的布局参数合成图文合成图片/视频。

29.根据权利要求22所述的方法，其中，进一步包括：

将多个候选图片/视频与用户输入合成一个图文合成图片/视频。

Images