CN114338572B - 信息处理方法、相关设备及存储介质 - Google Patents

Abstract

一种信息处理方法，包括：显示第一用户与第二用户的聊天界面；获取所述第一用户在所述聊天界面的输入内容；根据所述输入内容以及所述输入内容的上文内容，确定目标图片；根据所述目标图片，生成组合图片；在所述聊天界面，输出所述组合图片。本发明还提供一种电子设备、图像用户界面GUI、计算机可读存储介质以及计算机程序产品。本发明能使信息交互的方式更加丰富，提高即时通信过程中的智能性、趣味性和互动性，从而进一步丰富了人们的沟通和交流。

Description

信息处理方法、相关设备及存储介质

技术领域

本发明涉及终端技术领域，尤其涉及一种信息处理方法、相关设备及存储介质。

背景技术

随着通讯和互联网的发展，即时通信在人们的生活中得到广泛普及。在即时通信过程中，用户可以通过多种方式与他人进行信息交互，比如：用户可以在对话中使用文本、表情、语音或者电子红包等方式，这些交互方式极大的丰富了人们的沟通和交流。

然而，上述方式通常是将用户输入的文本或语音直接发送给对方，或者，将用户选择的某个表情发送给对方。这些方式比较单一，智能性、趣味性以及互动性均较差，难以满足用户对信息交互的丰富性的要求，用户体验较差。

发明内容

本发明实施例公开了一种信息处理方法、相关设备及存储介质，能够解决现有技术中存在的多方用户进行信息交互时的方式比较单一的问题。

本发明第一方面公开了一种信息处理方法，应用于电子设备，所述方法包括：电子设备显示第一用户与第二用户的聊天界面，检测并获取所述第一用户在所述聊天界面的输入内容；进一步地，电子设备根据所述输入内容以及所述输入内容的上文内容，确定目标图片，并根据所述目标图片，生成组合图片；最后，电子设备即可在所述聊天界面，输出所述组合图片。

其中，所述聊天界面即电子设备上安装的即时通信应用的聊天界面，所述第二用户可以是一个用户也可以是多个用户，所述输入内容可以包括：但不限于文字、语音、表情、图片、红包，所述上文内容可以包括：但不限于文字、语音、表情、图片、红包，其中，该图片可以是第一用户或第二用户发送的图片，也可以是第一用户或第二用户在即时通信应用上的头像图片，所述上文内容可以是第一用户与第二用户的历史聊天记录。其中，目标图片可以是所述历史聊天记录中的图片，也可以不是历史聊天记录中的图片，比如，所述目标图片是从服务器或者本地数据库中获取的图片，所述目标图片可以是一张图片，也可以是多张图片。其中，组合图片的形式可以包括：但不限于，“图片+文字”形式、“图片+语音”形式、“图片+红包”以及“图片+表情”形式。

本发明中，在获取到第一用户的输入内容时，可以通过分析第一用户和第二用户在聊天界面的上下文，确定与输入内容相关的目标图片，进而根据目标图片生成新的组合图片，最后将新的组合图片发送给对方。通过这种方式，可以生成符合上下文语境的组合图片(比如图文组合、语音图片组合、红包图片组合、组合表情等)，使得双方用户交互的信息内容的形式更加丰富，提高即时通信过程中的智能性、趣味性和互动性，从而进一步丰富了人们的沟通和交流。

在一些可选的实施方式中，电子设备根据所述目标图片，生成组合图片的方式可以有多种：第一种：根据所述目标图片和所述输入内容，生成组合图片；第二种：根据所述目标图片和所述上文内容，生成组合图片；第三种：根据所述目标图片、所述输入内容以及所述上文内容，生成组合图片。

在第一种方式中，可以将所述输入内容作为所述组合图片的一部分，例如，所述输入内容为文字，可以将文字重叠在目标图片中，生成组合图片，或者，可以将文字与目标图片分开显示，生成组合图片。

在第二种方式中，所述上文内容包括问询消息，电子设备需要根据该问询消息转换为相应的回答消息，进而根据所述目标图片和所述回答消息生成组合图片，其中，该回答消息作为所述组合图片的一部分。

在第三种方式中，可以先从所述上文内容中确定与所述输入内容关联的目标内容，进而根据所述目标图片、所述输入内容以及所述目标内容，生成组合图片。其中，该第三种方式更加适用于群聊场景，在群聊场景中，所述输入内容包括@目标用户，所述目标用户为多个所述第二用户中的任一用户，所述目标图片为所述目标用户的用户头像图片，电子设备可以从所述上文内容筛选出所述目标用户发送的内容，并从所述目标用户发送的内容中确定目标内容，最后根据所述目标图片、所述输入内容以及所述目标内容，生成组合图片，从而能够在群聊场景中更有针对性地将问答显示在组合图片中，让人一目了然，增加可读性。

其中，上述三种方式中，可以由电子设备自动根据目标图片，和/或所述输入内容，和/或所述上文内容生成组合图片，也可以由用户触发生成组合图片。

在一些可选的实施方式中，所述输入内容还可以包括在红包界面上的设置信息，所述设置信息包括红包金额，和/或红包接收对象。其中，在群聊中发红包，可以设置红包金额以及红包接收对象。其中，目标图片可以作为红包的封面。

在一些可选的实施方式中，电子设备根据所述输入内容以及所述输入内容的上文内容，确定目标图片的方式具体为：对所述输入内容以及所述上文内容进行语义分析；识别所述输入内容所指的目标对象；若所述上文内容中包括与所述目标对象匹配的图片，将所述上文内容中匹配的图片确定为目标图片，其中，所述匹配的图片包括所述第一用户或所述第二用户发送的图片或所述第一用户或所述第二用户的头像图片；或若所述上文内容中不包括与所述目标对象匹配的图片，根据所述上文内容，从本地数据库或服务器中获取与所述目标对象匹配的图片，并将所述获取的图片确定为目标图片。

其中，所述目标对象可以是人、风景、动物、物品以及建筑物等。若所述目标对象不指向所述上文内容，不能直接通过其他方式获取与所述目标对象匹配的图片，而是需要结合所述上文内容的语义分析，从服务器或者本地数据库中获取符合上下文语境且与所述目标对象匹配的图片作为目标图片，从而能够增加所推荐的目标图片的适应性。

在一些可选的实施方式中，电子设备根据所述输入内容以及所述输入内容的上文内容，确定目标图片的方式具体为：对所述输入内容以及所述上文内容进行语义分析；识别所述输入内容和所述上文内容所表达的主题；获取与所述主题匹配的图片，并将所述获取的图片确定为目标图片。

其中，主题可以包括但不限于节日主题、生日主题以及其他主题。

在一些可选的实施方式中，电子设备根据所述输入内容以及所述输入内容的上文内容，确定目标图片的方式具体为：对所述输入内容以及所述上文内容进行语义分析；识别所述输入内容所表达的情绪类型；若所述上文内容中不包括与所述情绪类型匹配的图片，获取与所述情绪类型匹配的图片，并将所述获取的图片确定为目标图片。

其中，情绪类型可以包括：但不限于欢喜、感谢、赞同、安慰、撒娇、疑问、惊讶、无奈、否认、愤怒、怼人、哀伤、恐惧以及认怂。

在一些可选的实施方式中，所述输入内容为表情，电子设备根据所述输入内容以及所述输入内容的上文内容，确定目标图片的方式具体为：获取所述表情对应的用户操作信息；若所述用户操作信息满足预设条件，触发对所述输入内容和所述上文内容进行语义分析；若识别出所述表情指向所述上文内容中用户发送的图片，将所述用户发送的图片确定为所述目标图片；所述根据所述目标图片，生成组合图片包括：根据所述目标图片和所述表情，生成组合图片。

其中，用户操作信息比如用户触摸表情的时长、用户按压表情的压力值等，预设条件比如用户触摸表情的时长超过预设时长，用户按压表情的压力值大于预设阈值等。

本发明第二方面公开了一种电子设备，包括处理器和存储器；所述存储器，用于存储指令；所述处理器，用于调用所述存储器中的指令，使得所述电子设备执行所述的信息处理方法。

本发明第三方面公开了一种图形用户界面GUI，所述GUI存储在电子设备中，所述电子设备包括处理器、存储器和显示屏，所述处理器用于执行存储在所述存储器中的计算机程序，所述GUI包括所述电子设备在执行所述的信息处理方法时在所述显示屏显示的GUI。

本发明第四方面公开了一种计算机可读存储介质，所述计算机可读存储介质存储有至少一个指令，所述至少一个指令被处理器执行时实现所述的信息处理方法。

本发明第五方面公开了一种计算机程序产品，当所述计算机程序产品在电子设备上运行时，使得所述电子设备执行所述的信息处理方法。

在一些可选的实施方式中，本发明第六方面公开了一种信息处理装置，所述信息处理装置运行于电子设备中，所述信息处理装置包括多个功能模块，所述多个功能模块用于执行所述的信息处理方法。

附图说明

图1为本发明实施例提供的一种即时通信应用中基于文本/语音/表情的信息交互的界面示意图；

图2为本发明实施例提供的一种电子设备的硬件结构示意图；

图3为本发明实施例提供的一种电子设备的软件结构框图；

图4为本发明实施例提供的一种信息处理方法的流程示意图；

图5A-图5F为本发明实施例提供的基于文本的多个信息交互的界面示意图；

图6A-图6C为本发明实施例提供的基于语音的多个信息交互的界面示意图；

图7A-图7E为本发明实施例提供的基于红包的多个信息交互的界面示意图；

图8A-8C为本发明实施例提供的基于表情的信息交互的界面示意图；

图9A-图9H为本发明实施例提供的针对群聊场景的多个信息交互的界面示意图；

图10为本发明实施例提供的一种电子设备的结构示意图。

具体实施方式

下面结合本发明实施例中的附图对本发明实施例进行描述。

为了更好的理解本发明实施例公开的一种信息处理方法、相关设备及存储介质，下面首先对本发明实施例适用的网络架构进行描述。

请参见图1，图1为本发明实施例提供的一种即时通信应用中基于文本/语音/表情的信息交互的界面示意图。

如图1所示，电子设备A上安装了即时通信应用1，电子设备B上也安装了即时通信应用1，电子设备A所属的用户A和电子设备B所属的用户B在即时通信应用1上进行信息交互(即聊天)。

其中，电子设备A可以包括，但不限于：任何一种可与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互的电子产品，例如，个人计算机、平板电脑、智能手机、个人数字助理PDA等。同样，电子设备B可以包括，但不限于：任何一种可与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互的电子产品，例如，个人计算机、平板电脑、智能手机、个人数字助理PDA等。

其中，即时通信应用1可以为用于多方用户进行信息交互的任一应用程序(Application，APP)。在即时通信应用1上，用户A和用户B可以通过多种方式进行信息交互，例如，通过发送文字的方式进行信息交互，又例如，通过发送语音的方式进行信息交互，又例如，通过发送表情或图片的方式进行信息交互等。

需要说明的是，图1只是一个示例，即时通信应用1上可以有2个或3个以上的用户进行信息交互，多个用户在进行信息交互时，可以任意切换信息发送的方式。

请参见图2，图2为本发明实施例提供的一种电子设备的硬件结构示意图。其中，图2所示的电子设备可以是图1中的电子设备A，也可以是图1中的电子设备B。如图2所示，电子设备可以包括：射频(Radio Frequency，RF)电路201、存储器202、输入单元203、显示单元204、传感器205、音频电路206、无线保真(wireless fidelity，Wi-Fi)模块207、处理器208以及电源209等部件。本领域技术人员可以理解，图2中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

RF电路201可用于收发信息或在通话过程中，对信号进行接收和发送，特别地，接收基站的下行信息后，转给处理器208进行处理；另外，将涉及上行的数据发送给基站。通常，RF电路201包括，但不限于：天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier，LNA)、双工器等。

存储器202可用于存储软件程序以及模块，处理器208通过运行存储在存储器202中的软件程序以及模块，从而执行电子设备的各种功能应用以及数据处理。存储器202可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据电子设备的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器202可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

输入单元203可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地，输入单元203可包括触控面板2031以及其他输入设备2032。触控面板2031，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触控笔等任何适合的物体或附件在触控面板2031上或在触控面板2031附近的操作)，并根据预先设定的程序驱动相应的连接装置。可选地，触控面板2031可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器208，并接收处理器208发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板2031。除了触控面板2031，输入单元203还可以包括其他输入设备2032。具体地，其他输入设备2032可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元204可用于显示由用户输入的信息或提供给用户的信息以及电子设备的各种菜单。显示单元204可包括显示面板2041，可选地，可以采用液晶显示器(LiquidCrystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板2041。进一步地，触控面板2031可覆盖显示面板2041，当触控面板2031检测到在其上或附近的触摸操作后，传送给处理器208以确定触摸事件的类型，随后处理器208根据触摸事件的类型在显示面板2041上提供相应的视觉输出。虽然在图2中，触控面板2031与显示面板2041是作为两个独立的部件来实现电子设备的输入和输出功能，但是在某些实施例中，可以将触控面板2031与显示面板2041集成而实现电子设备的输入和输出功能。

电子设备还可包括至少一种传感器205，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板2041的亮度，接近传感器可在电子设备移动到耳边时，关闭显示面板2041和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；此外，电子设备还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路206、扬声器2061，传声器2062可提供用户与电子设备之间的音频接口。音频电路206可将接收到的音频数据转换后的电信号，传输到扬声器2061，由扬声器2061转换为声音信号输出；另一方面，传声器2062将收集的声音信号转换为电信号，由音频电路206接收后转换为音频数据，再将音频数据输出处理器208处理后，经RF电路201发送给另一电子设备，或者将音频数据输出至存储器202以便进一步处理。

Wi-Fi属于短距离无线传输技术，电子设备通过Wi-Fi模块207可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图2示出了Wi-Fi模块207，但是可以理解的是，其并不属于电子设备的必需构成，完全可以根据需要、在不改变发明本质的范围内进行省略。

处理器208是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器202内的软件程序和/或模块，以及调用存储在存储器202内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。可选地，处理器208可包括一个或多个处理单元；优选的，处理器208可集成应用处理器和调制解调器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器208中。

电子设备还包括给各个部件供电的电源209(比如电池)，可选地，电源可以通过电源管理系统与处理器208逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

尽管未示出，电子设备还可以包括摄像头、蓝牙模块等，在此不再赘述。

其中，电子设备的软件系统可以采用分层架构，事件驱动架构，微核架构，微服务架构，或云架构。本发明实施例以分层架构的Android系统为例，示例性说明电子设备的软件结构。图3为本发明实施例提供的一种电子设备的软件结构框图。分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Android系统分为四层，从上至下分别为应用程序层、应用程序框架层、安卓运行时(Android runtime)的系统库以及内核层。

其中，应用程序层可以包括一系列应用程序包。如图3所示，应用程序包可以包括相机，图库，日历，通话，地图，导航，WLAN，蓝牙，音乐，视频，短信息等应用程序。本发明中，应用程序层还可新增浮窗启动组件(floating launcher)，用于在悬浮窗中作为默认的显示应用，并提供给用户进入其他应用的入口。

应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface，API)和编程框架。应用程序框架层包括一些预先定义的函数。如图3所示，应用程序框架层可以包括窗口管理器(window manager)，内容提供器，视图系统，电话管理器，资源管理器，通知管理器、活动管理器(activity manager)等。

窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小，判断是否有状态栏，锁定显示屏，截取显示屏等。本发明中，可基于Android原生的PhoneWindow，扩展出FloatingWindow，专门用于显示上述提及的悬浮窗，以区别于普通的窗口，该窗口具有悬浮显示在系列窗口最顶层的属性。在一些可选的实施例中，该窗口大小可根据实际屏幕的大小，根据最优显示算法，给出合适的值。在一些可能的实施例中，该窗口的宽高比，可默认为常规主流手机的屏幕宽高比。同时，为方便用户关闭退出、隐藏悬浮窗，可在右上角额外绘制一个关闭按键和一个最小化按键。

内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。所述数据可以包括视频，图像，音频，拨打和接听的电话，查看历史和书签，电话簿等。视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。

视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。本发明中，可相应增加悬浮窗上用于关闭、最小化等操作的按键视图，并绑定到上述窗口管理器中的FloatingWindow上。

电话管理器用于提供电子设备的通信功能。例如通话状态的管理(包括接通，挂断等)。

资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。

通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。比如通知管理器被用于告知下载完成，消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知，例如后台运行的应用程序的通知，还可以是以对话窗口形式出现在显示屏上的通知。例如在状态栏提示文本信息，发出提示音，电子设备振动，指示灯闪烁等。

活动管理器用于管理系统里正在运行的activities，包括进程(process)、应用程序、服务(service)、任务(task)信息等。本发明中，可在活动管理器模块中，新增专门用于管理上述悬浮窗中显示应用Activity的活动任务堆栈，以保证悬浮窗中的应用Activity、task不会和屏幕中全屏显示的应用产生冲突。

本发明中，应用程序框架层还可新增运动探测组件(motion detector)，用于获取到输入事件进行逻辑判断，识别输入事件的类型。例如，通过输入事件中包括的触摸坐标，触摸操作的时间戳等信息，判断该输入事件为指关节触摸事件或指肚触摸事件等。同时，运动探测组件还可记录输入事件的轨迹，并判定输入事件的手势规律，根据不同的手势，响应不同的操作。

Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。核心库包含两部分：一部分是java语言需要调用的功能函数，另一部分是安卓的核心库。应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理，堆栈管理，线程管理，安全和异常的管理，以及垃圾回收等功能。

系统库可以包括多个功能模块。例如：输入管理器(input manager)、输入调度管理器(input dispatcher)、表面管理器(surface manager)，媒体库(Media Libraries)，三维图形处理库(例如：OpenGL ES)，2D图形引擎(例如：SGL)等。

输入管理器负责从底层的输入驱动获取事件数据，解析并封装后传给输入调度管理器。

输入调度管理器用于保管窗口信息，其收到来自输入管理器的输入事件后，会在其保管的窗口中寻找合适的窗口，并将事件派发给此窗口。

表面管理器用于对显示子系统进行管理，并且为多个应用程序提供了2D和3D图层的融合。

媒体库支持多种常用的音频，视频格式回放和录制，以及静态图像文件等。媒体库可以支持多种音视频编码格式，例如：MPEG4，H.264，MP3，AAC，AMR，JPG，PNG等。

三维图形处理库用于实现三维图形绘图，图像渲染，合成，和图层处理等。

2D图形引擎是2D绘图的绘图引擎。

内核层是硬件和软件之间的层。内核层至少包含显示驱动，摄像头驱动，音频驱动，传感器驱动。

基于前述实施例，下面阐述本发明实施例涉及的信息处理方法。

请参见图4，图4为本发明实施例提供的一种信息处理方法的流程示意图。如图4所示的信息处理方法应用于图2和图3所述的电子设备中，所述方法包括如下步骤：

S11、电子设备检测即时通信应用中的输入内容。

本发明实施例中，用户可以通过即时通信应用与其他用户进行信息沟通。在即时通信应用中，用户可以根据自己沟通的需要，输入任意的内容(即输入内容)，其中，该输入内容的类型可以包括，但不限于：用户在即时通信应用中输入的文字、语音、表情、图片、红包。

其中，本发明所适用的场景可以是一对一的两个用户之间的信息交互的场景，也可以是群聊中的多个用户之间的信息交互的场景。

S12、电子设备根据所述输入内容以及所述输入内容的上文内容，确定目标图片。

其中，上文内容可以包括，但不限于：文字、语音、表情、图片、红包等等。其中，图片可以是用户发送的图片，也可以是用户在即时通信应用上的头像图片。上文内容可以是历史聊天记录。例如，在用户A和用户B的对话窗口中输入内容时，所述上文内容可以是用户A和用户B的历史聊天记录。

其中，对上文内容进行识别，可以是对所有历史聊天记录进行识别，也可以对部分历史聊天记录进行识别。例如，以时间为维度，识别预设时间段内(如最近5分钟)的历史聊天记录。又如，以消息条数为维度，识别预设条数的历史聊天记录(如最近10条消息)。又如，以时间-消息条数为双重维度，预设时间段内的预设条数的历史聊天记录，进行识别。又如，也可以仅对当前即时通信应用的对话窗口中显示的历史聊天记录进行识别。

电子设备可以对输入内容进行分析，以确定该输入内容所指的目标对象，从而获取与所述目标对象相匹配的图片作为目标图片。

电子设备可以对上文内容进行分析，以确定上文内容的类别、主题、情绪等，从而获取与所述情绪，主题等相匹配的图片作为目标图片。

其中，类别可以包括但不限于文字、语音、图片、红包以及表情，主题可以包括但不限于节日主题、生日主题以及其他主题，情绪可以包括但不限于欢喜、感谢、赞同、安慰、撒娇、疑问、惊讶、无奈、否认、愤怒、怼人、哀伤、恐惧以及认怂。当上文内容的类别为图片时，还可以进一步确定图片内容。图片内容可以包括但不限于：人像、风景、动物以及物品。

其中，分析方法有很多种，比如：利用机器学习技术确定图片内容；又比如：通过可穿戴设备监测用户的心率、血压、温度、位置以及运动状态，或者利用面部识别技术检测面部表情以识别情绪。

其中，所述目标图片可以是历史聊天记录中的图片，也可以不是历史聊天记录中的图片，比如，所述目标图片是从服务器或者本地数据库中获取的图片。所述目标图片可以是一张图片，也可以是多张图片。

S13、电子设备根据所述输入内容以及所述目标图片，生成组合图片。

可以理解的是，因为输入内容的类型是多样的，所以根据输入内容和目标图片生成的组合图片也可以是多样的。例如，当输入内容为文字时，生成的组合图片可以为“图片+文字”形式，即“图文”形式。“图文”形式可以是将文字重叠在图片上进行显示，也可以是将文字和图片分开进行显示，比如文字和图片按照左右排列的方式显示，或者，文字和图片按照上下排列的方式显示。可以理解的是，当输入内容为语音时，生成的组合图片可以为“图片+语音”形式。当输入内容为红包时，生成的组合图片可以为“图片+红包”形式。“图片+红包”的形式，可以是将图片作为红包封面进行显示。当输入内容为表情，生成的组合图片的形式可以为“图片+表情”形式。

可选的，电子设备还可以根据上文内容和目标图片，生成组合图片。例如，当上文内容包括问询消息(如，吃饭了吗？)时，电子设备可以确定相应的回答(如，吃了)，并生成包含该回答和目标图片(如，吃饱的表情)的组合图片。

可选的，电子设备还可以根据所述输入内容、所述上文内容以及所述目标图片，生成组合图片。例如，在群聊场景中，输入内容包括@目标用户，目标图片为目标用户的头像图片，上文内容中包括目标用户的多条信息，可以从所述上文内容筛选出所述目标用户发送的多条信息，并从所述目标用户发送的多条信息中确定目标内容，最后将所述输入内容以及所述目标内容嵌入至所述目标图片中，生成组合图片。

S14、电子设备输出所述组合图片。

所述组合图片可以是一张图片，也可以是多张图片。

电子设备可以以悬浮框的形式显示所述组合图片，也可以在输入框中显示该组合图片。

其中，电子设备可以先显示该组合图片，响应于用户的操作再发送所述组合图片，也可以立即发送所述组合图片。

下面根据输入内容的类型对本发明的上述方法流程所适用的各个场景进行详细举例说明。

示例一：以输入内容为文字，目标图片为用户发送的图片为例进行说明。

如图5A-图5D，示出了用户A向用户B发送多张图片以询问已发送的图片中哪件衣服最好看，用户B在输入框中输入文字以回复用户A的场景。

如图5A所示，电子设备显示用户A和用户B的聊天界面。用户B在输入框中输入拼音“huaqun”。响应于用户的输入，电子设备显示出与拼音对应的候选文字“花、花裙、画、华、化”等。用户点击候选文字“花裙”后，在输入框中显示与拼音“huaqun”匹配的文字“花裙”。

电子设备可以先对输入框中的内容“花裙”进行语义分析，确定文字“花裙”指向的对象可能为上文内容中的某张裙子图片。然后对上文内容进行分析确定文字“花裙”指向的对象可能为上文内容中的碎花裙或波浪短裙，也就是说碎花裙的图片或波浪短裙的图片为目标图片。根据上文内容中的问题：“哪件最好看”，可以识别出用户B输入“花裙”的意图是回复该问题：“这件好看。由此，如图5B所示，电子设备可以生成两张组合图片，即碎花裙图片与文字“这件好看”的组合图片，波浪短裙图片与文字“这件好看”的组合图片，并在悬浮框中显示该组合图片。用户可以点击所述悬浮框中显示的所述组合图片，以向用户A发送所述组合图片。例如，如图5C所示，响应于用户点击“碎花裙图片+这件好看”的组合图片，电子设备向用户A发送“碎花裙图片+这件好看”的组合图片。

需要说明的是，电子设备可以自动根据输入内容和上文内容生成组合图片，也可以根据用户触发生成组合图片。比如用户长按输入的内容，以触发电子设备根据上文内容和输入内容生成组合图片。

需要说明的是，组合图片的呈现方式可以包括多种。例如，如图5C所示，文字“这件好看”被重叠在“碎花裙”图片上，作为一个整体显示。又如，如图5D所示，文字“这件好看”与“碎花裙”图片上下并排显示。

可以理解的是，目标图片并不限于，用户发送的图片。下面示例二：以输入内容为文字，目标图片为用户头像图片为例进行说明。

如图5E所示，用户的输入内容为“你头像上的宝宝好可爱啊”。由此电子设备可以确定用户B输入的文字“你头像上的宝宝”所指示的对象为上文内容中的用户A的头像图片A，也就是说头像图片A为目标图片，从而生成头像图片A与文字“宝宝好可爱啊”的组合图片。

上述示例中，以目标图片为上文内容中的图片为例进行了说明，可以理解的是，目标图片也可以不是上文内容中包括的图片。下面示例三：以目标图片为其他方式获取的图片为例进行说明。

示例性的，当上文内容中不包括符合语境的图片时，电子设备可以通过其他方式(如云服务器或本地数据库等)获取图片，并将获取到的图片作为目标图片。

如图5F，示出了用户A和用户B讨论AA(人名)在XX平台官宣结婚的对话场景。

响应于用户输入“AA好美啊”，电子设备可以根据上文内容，从同名同姓的多个人中确定该AA为主持人AA。由此，在上文内容中搜索包含主持人AA的目标图片。然而，上文内容不包括AA的图片时，电子设备可以从云服务器或本地数据库中获取主持人AA的图片，并将该获取的AA的图片确定为目标图片。最后，即可根据该输入的文字“AA好美啊”和目标图片，生成如图5F所示的预览界面的悬浮框中的组合图片。

可以理解的是，本实施例所述的方法，还可适用于输入内容为语音的场景。下面以示例四为例进行说明。

示例四：输入内容为语音。

如图6A，示出了用户A向用户B发送多张图片以询问已发送的图片中哪件衣服最好看，用户B输入语音以回复用户A的场景。

电子设备可以对输入的语音进行语义分析，可以确定语音所指示的对象为上文内容中的碎花裙，也就是说碎花裙的图片为目标图片。由此，电子设备可以将碎花裙的图片作为语音的封面，生成“碎花裙图片+语音”的组合图片，并显示在对话窗口中。

可以理解的是，目标图片并不限于，用户发送的图片。例如，目标图片也可以为用户头像图片。如图6B，示出了用户B通过语音输入的方式与用户A进行聊天的场景。电子设备可以确定用户B输入的语音所指示的接收对象为上文内容中的用户A，可以将用户A的头像图片A作为目标图片，并生成“头像图片A+语音”的组合图片。

上述示例中以目标图片为上文内容中的图片为例进行了说明，可以理解的是，目标图片也可以不是上文内容中包括的图片。例如，目标图片还可以是通过其他方式获取的图片。如图6C，示出了用户A很生气，用户B输入语音以请求用户A原谅的场景。电子设备根据上文内容“我真的生气了，再也不理你了，哼”，可以识别出用户A当前很生气，再对用户B输入的语音进行识别，可以确定用户B输入的语音的意图是要安抚用户A当前的生气情绪，并请求用户A的原谅。也就是说，电子设备可以识别情绪类型，获取与所述情绪类型匹配的图片，并将所述获取的图片确定为目标图片。然而，上文内容中没有符合该意图的图片，因此，电子设备可以从云服务器或本地数据库中获取符合该意图的图片，并将该获取的图片确定为目标图片。最后，电子设备可以将该目标图片作为语音的封面，生成图6C所示的组合图片。

可以理解的是，本实施例所述的方法，还可适用于输入内容为红包的场景。下面以示例五为例进行说明。

示例五：输入内容为红包。

如图7A，示出了用户A向用户B发送碎花裙图片并表示这件碎花裙很贵买不起，用户B在向用户A发红包以支持用户A购买这件花裙的场景。

响应于用户在输入框中输入“红包XXX(XXX可以表示红包金额)”等关键词，电子设备可以确定用户B欲向用户A发红包，然后，电子设备对上文内容进行识别，可以确定用户A当前想表达的意图是：很想要这件花裙但买不起。电子设备根据该意图可以确定该红包是用来支持用户B去购买这件碎花裙的，也就是说，该“红包XXX”所指示的对象是上文内容中的碎花裙。由此，电子设备可以确定碎花裙的图片为目标图片，并将该目标图片作为红包的封面，生成“碎花裙图片+红包”的组合图片，并显示在如图7A所示的悬浮框中。用户可以点击所述悬浮框中显示的所述组合图片，以向用户A发送所述组合图片。例如，如图7B所示，响应于用户点击组合图片，电子设备向用户A发送所述组合图片。

需要说明的是，电子设备可以根据用户在输入框中输入的“红包”等关键词，触发生成“图片+红包”的组合图片，也可以根据用户在红包界面的设置信息触发生成组合图片。例如，图7C中，在红包界面上，用户在“单个金额”的选项上设置金额为“XXX”元，以触发电子设备根据该设置信息和上文内容生成组合图片。需要说明的是，此时，用户在红包界面的设置信息也可以作为用户的输入内容，用以确定目标图片。

目标图片还可以是用户发送的图片。如图7D所示，当红包所指示的接收对象是用户A时，电子设备可以将用户A的头像图片A确定为目标图片，并将该头像图片A作为红包的封面，生成如图7D所示的悬浮框中的“头像图片A+红包”的组合图片。

目标图片也可以为其他方式获取的图片。如图7E，示出了用户A很生气，用户B向用户A发红包以请求用户A原谅的场景。电子设备根据用户B输入的“红包XXX”以及上文内容，可以确定用户B输入红包的意图是请求用户A的原谅。然而，上文内容中没有符合该意图的图片，电子设备可以从云服务器或本地数据库中获取符合该意图的表情，将该获取的表情作为目标图片生成图7E所示的组合图片。

可以理解的是，本实施例所述的方法，还可适用于输入内容为表情的场景。下面以示例六为例进行说明。

示例六：输入内容为表情。

如图8A-7C，示出了用户A向用户B发送碎花裙图片、碎花裙的牌子以及价格等信息，用户B回应买不起，并用手指欲发送某个表情的场景。

如图8A所示，电子设备在输入框的下方显示有四个表情，用户B使用手指长按第三个表示“忧伤”的表情，触发电子设备对上文内容进行语义分析，识别出该“忧伤”的表情所指示的对象是上文内容中的碎花裙，电子设备可以确定碎花裙图片为目标图片。由此，如图8B所示，电子设备可以生成碎花裙图片与“忧伤”的表情的组合图片，并在悬浮框中显示该组合图片。用户可以点击所述悬浮框中显示的所述组合图片，以向用户A发送所述组合图片。例如，如图8C所示，响应于用户点击组合图片，电子设备向用户A发送该组合图片。

可以理解的是，为了方便用户，电子设备可以为(1)发送表情；(2)发送“表情+目标图片”的组合图片；设置不同的操作。例如，若用户触摸表情的时长超过预设时长，则电子设备发送包括该表情和目标图片的组合图片；若用户触摸表情的时长小于等于预设时长，则电子设备发送该表情。又如，若用户按压表情的压力值大于预设阈值，则电子设备发送包括该表情和目标图片的组合图片；若用户按压表情的压力值小于等于预设阈值，则电子设备发送表情。

上述示例以两个用户之间的聊天场景为例进行了说明，可以理解的是，上述示例同样适用于三个以上用户的群聊场景。下面介绍群聊场景的示例。

示例七：如图9A-8C，示出了用户A、用户B、用户C以及用户D在群里聊天，用户D在输入框中@用户A并输入文字的场景。

如图9A，群聊窗口中显示了用户A、用户B以及用户C输入的信息，其中，用户A输入了2条信息，分别是“X1X1X1X1X1”和“X3X3X3X3X3”。当前，用户D在输入框中@用户A并输入内容“X5X5X5X5X5”，电子设备根据该“@用户A”可以识别出输入内容“X5X5X5X5X5”所指示的接收对象是用户A，由此，电子设备可以确定用户A的头像图片A为目标图片。进一步地，电子设备对该输入内容“X5X5X5X5X5”和用户A的上文内容“X1X1X1X1X1”和“X3X3X3X3X3”进行语义分析，可以识别出该输入内容“X5X5X5X5X5”是针对上文内容“X3X3X3X3X3”而言的。最后，电子设备可以根据用户A的头像图片A、输入内容“X5X5X5X5X5”和上文内容“X3X3X3X3X3”，生成组合图片，并在悬浮窗口中显示。用户可以点击所述悬浮框中显示的所述组合图片，以向群聊窗口中发送所述组合图片，例如图9B所示。

需要说明的是，组合图片的呈现方式可以包括多种。例如，图9B所示，用户A的头像图片A作为封面，用户A的上文内容“X3X3X3X3X3”和用户D的输入内容“X5X5X5X5X5”按照同样字体格式并排显示。又如，如图9C所示，用户A的头像图片A以及上文内容“X3X3X3X3X3”被缩小，而突出放大显示用户D的输入内容“X5X5X5X5X5”。

类似地，本实施例中所述的方法，同样适用于输入语音的场景。

如图9D，用户D在群聊中输入了语音，通过语义分析，电子设备确定用户D输入的语音所指示的接收对象为用户A(例如，语音中包括关键词“用户A”，或者，语音中包括与“X3X3X3X3X3”相关的内容)，从而可以确定头像图片A为目标图片。电子设备可以将该头像图片A作为语音封面，生成“头像图片A+语音”的组合图片。

类似地，本实施例中所述的方法，同样适用于发红包的场景。

如图9E，用户在群聊中@用户A并输入内容“红包XXX”。电子设备根据该“@用户A”确定户D输入的红包所指示的接收对象为用户A，从而可以确定头像图片A为目标图片。电子设备可以将该头像图片A作为红包封面，生成“头像图片A+红包”的组合图片。

或者，如图9F所示，群聊窗口上显示了用户A、用户B、用户C以及用户D输入的信息。如图9G所示，用户D在红包界面的“单个金额”的选项上设置金额为“XXX”元，同时，设置红包接收对象为用户A，触发电子设备根据该设置信息确定用户A的头像图片A为目标图片，并生成“头像图片A+红包”的组合图片。用户D可以点击“塞钱进红包”按钮，以在群聊窗口中向用户A发送红包。例如，如图9H所示，响应于用户点击“塞钱进红包”按钮，电子设备向群聊窗口中发送“头像图片A+红包”的组合图片。需要说明的是，此时，用户在红包界面上的设置信息也可以作为用户的输入内容，用以确定目标图片，并根据目标图片生成组合图片。

需要说明的是，本发明实施例中所述的信息处理方法可以适用于上述多个不同的场景，但上述多个不同的场景仅仅是一些示例，本发明所述的信息处理方法还可以适用于其他类似的场景，在此不再一一举例说明。

请参见图10，图10为本发明实施例提供的一种电子设备的结构示意图。如图10所示，电子设备包括：处理器、存储器、通信接口、显示屏以及存储在存储器中并可在处理器上运行的计算机程序，该计算机程序被处理器执行时实现本发明实施例中的信息处理方法的各个步骤，为避免重复，此处不一一赘述。其中，处理器、存储器、通信接口以及显示屏通过总线连接。

电子设备可以包括但不限于桌上型计算机、笔记本、掌上电脑及智能手机等计算设备。本领域技术人员可以理解，图10仅仅是电子设备的示例，并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如电子设备还可以包括输入输出设备、网络接入设备等。

所述处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其它通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器可以是电子设备的内部存储单元，例如电子设备的硬盘或内存。存储器也可以是电子设备的外部存储设备，例如电子设备上配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。进一步地，存储器还可以既包括电子设备的内部存储单元也包括外部存储设备。存储器用于存储计算机程序以及电子设备所需的其它程序和数据。存储器还可以用于暂时地存储已经输出或者将要输出的数据。

所述通信接口用于电子设备与其他设备进行通信。

所述显示屏可以用于显示用户输入的信息或提供给用户的信息以及电子设备的各种菜单。所述显示屏可以包括显示面板，可选地，可以采用液晶显示器(Liquid CrystalDisplay，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板。此外，可以在显示面板上覆盖触控面板。当触控面板检测到在其上或附近的触摸操作后，传送给处理器以确定触摸事件的类型，随后处理器根据触摸事件的类型在显示面板上提供相应的视觉输出。

参考图5A-图5F、图6A-图6C、图7A-图7E、图8A-图8C以及图9A-图9H所示，本发明实施例还提供了一种图形用户界面(GUI)，该GUI存储在电子设备中，该电子设备包括处理器、存储器和显示屏，该处理器用于执行存储在存储器中的一个或多个计算机程序，所述GUI包括所述电子设备在图4所述的信息处理方法时在所述显示屏显示的GUI。

本发明实施例还提供了一种计算机存储介质，该计算机存储介质存储有计算机程序代码，当上述处理器执行该计算机程序代码时，该电子设备执行图4所述的信息处理方法中的步骤，具体请参考图4中的相关描述，在此不再一一赘述。

本发明实施例还提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备执行图4所述的信息处理方法中的步骤，具体请参考图4中的相关描述，在此不再一一赘述。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机装置(可以是个人计算机，服务器，或者网络装置等)或处理器(Processor)执行本发明各个实施例方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (6)

1.一种信息处理方法，应用于电子设备，其特征在于，所述方法包括：

显示第一用户与第二用户的聊天界面，其中所述第二用户包括多个用户；

获取所述第一用户在所述聊天界面的输入内容；

根据所述输入内容以及所述输入内容的上文内容，确定目标图片；

从所述输入内容中包括的“@目标用户”确定目标用户，从所述上文内容中筛选所述目标用户发送的内容，并从所述目标用户发送的内容中确定目标内容，其中所述目标用户为所述第二用户中的用户；

根据所述目标图片、所述输入内容以及所述目标内容生成组合图片，其中所述目标图片为所述第一用户或所述第二用户发送的图片，或所述第二用户的头像图片，所述目标内容为从所述上文内容中确定与所述输入内容关联的内容；

在所述聊天界面，输出所述组合图片。

2.根据权利要求1所述的信息处理方法，其特征在于，所述输入内容包括在红包界面上的设置信息，所述设置信息包括红包金额，和/或红包接收对象。

3.根据权利要求1所述的信息处理方法，其特征在于，

所述输入内容包括文字、语音、表情和红包；

所述上文内容包括所述第一用户与所述第二用户的历史聊天记录。

4.根据权利要求1至3任一项所述的信息处理方法，其特征在于，所述根据所述输入内容以及所述输入内容的上文内容，确定目标图片包括：

对所述输入内容以及所述上文内容进行语义分析；

识别所述输入内容所指的目标对象；

若所述上文内容中包括与所述目标对象匹配的图片，将所述上文内容中匹配的图片确定为目标图片，其中，所述匹配的图片包括所述第一用户或所述第二用户发送的图片或所述第二用户的头像图片。

5.一种电子设备，其特征在于，包括处理器和存储器；所述存储器，用于存储指令；所述处理器，用于调用所述存储器中的指令，使得所述电子设备执行如权利要求1至4中任一项所述的信息处理方法。

6.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有至少一个指令，所述至少一个指令被处理器执行时实现如权利要求1至4中任一项所述的信息处理方法。