CN111669312A - 消息交互方法、电子设备及介质 - Google Patents

消息交互方法、电子设备及介质 Download PDF

Info

Publication number
CN111669312A
CN111669312A CN202010414951.9A CN202010414951A CN111669312A CN 111669312 A CN111669312 A CN 111669312A CN 202010414951 A CN202010414951 A CN 202010414951A CN 111669312 A CN111669312 A CN 111669312A
Authority
CN
China
Prior art keywords
target picture
information
text information
effective text
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010414951.9A
Other languages
English (en)
Inventor
潘红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Shengfutong Electronic Payment Service Co ltd
Original Assignee
Shanghai Shengfutong Electronic Payment Service Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Shengfutong Electronic Payment Service Co ltd filed Critical Shanghai Shengfutong Electronic Payment Service Co ltd
Priority to CN202010414951.9A priority Critical patent/CN111669312A/zh
Publication of CN111669312A publication Critical patent/CN111669312A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046Interoperability with other network applications or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/543User-generated data transfer, e.g. clipboards, dynamic data exchange [DDE], object linking and embedding [OLE]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/06Message adaptation to terminal or network requirements
    • H04L51/066Format adaptation, e.g. format conversion or compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/18Commands or executable codes

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供一种消息交互方法、一种电子设备以及一种计算机可读存储介质。其中,一种消息交互方法包括:接收第一终端发送的目标图片,并在消息交互界面中显示所述目标图片;识别所述目标图片中的有效文本信息;在所述消息交互界面以文本格式显示所述有效文本信息,和/或,将所述有效文本信息复制至粘贴板。本申请方法可以无需用户逐字查看和录入,即可方便高效地提取出有效文本信息,尤其适用于在即时通讯应用中快速方便地获取银行卡号、身份证号等有效文本信息。

Description

消息交互方法、电子设备及介质
技术领域
本申请涉及即时通讯技术领域,具体涉及一种消息交互方法、一种电子设备以及一种计算机可读存储介质。
背景技术
随着计算机技术和互联网技术的高速发展,用户已习惯于采用即时通讯软件等社交应用进行消息交互。
实际应用中,用户之间往往会发送图片以传递消息,比如,第一用户需要第一终端的银行卡号时,第一终端可以直接拍摄银行卡照片发送给第一用户,第一用户再对照着银行卡照片逐位将银行卡号记录下来,其中,位于消息显示框中的银行卡照片由于缩放过小,不便于查看卡号,而若将银行卡照片放大全屏查看,则又无法在同一终端中同时记录银行卡号,只能先将银行卡号记录在另一载体(例如纸)上,再关闭放大图后输入终端中,操作复杂且效率较低。
发明内容
本申请的目的是提供一种消息交互方法、一种电子设备以及一种计算机可读存储介质。
本申请第一方面提供一种消息交互方法,应用于第二终端,包括:
接收第一终端发送的目标图片,并在消息交互界面中显示所述目标图片;
识别所述目标图片中的有效文本信息;
在所述消息交互界面以文本格式显示所述有效文本信息,和/或,将所述有效文本信息复制至粘贴板。
本申请第二方面提供一种消息交互方法,应用于第一终端,包括:
确定添加至消息交互界面的输入框中的目标图片,或者确定添加至图片添加控件中的目标图片;
识别所述目标图片中的有效文本信息;
将所述有效文本信息以文本格式添加至所述消息交互界面的输入框中;
响应于用户输入的消息发送触发操作,发送所述有效文本信息。
本申请第三方面提供一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器运行所述计算机程序时执行以实现本申请第一方面或第二方面所述的方法。
本申请第四方面提供一种计算机可读存储介质,其上存储有计算机可读指令,所述计算机可读指令可被处理器执行以实现本申请第一方面或第二方面所述的方法。
本申请第一方面提供的消息交互方法,在接收第一终端发送的目标图片,并在消息交互界面中显示所述目标图片后,可以进一步识别所述目标图片中的有效文本信息,然后在所述消息交互界面以文本格式显示所述有效文本信息,和/或,将所述有效文本信息复制至粘贴板,从而方便用户直接复制和/或粘贴,无需用户逐字查看和录入,即可方便高效地提取出有效文本信息,尤其适用于在即时通讯应用中快速方便地获取银行卡号、身份证号等有效文本信息。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本申请的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了本申请的一些实施方式所提供的一种用于第二终端的消息交互方法的流程图;
图2示出了本申请的一些实施方式所提供的一种根据有效文本位置信息提取有效文本图块的示意图;
图3示出了本申请的一些实施方式所提供的一种提取证件主体图像并进行校正的示意图;
图4示出了本申请的一些实施方式所提供的一种提取有效文本信息的示意图;
图5示出了本申请的一些实施方式所提供的一种用于第二终端的消息交互装置的示意图;
图6示出了本申请的一些实施方式所提供的一种用于第一终端的消息交互方法的流程图;
图7示出了本申请的一些实施方式所提供的一种提取有效文本信息后进行发送的示意图;
图8示出了本申请的一些实施方式所提供的两种消息交互方法的流程对比图;
图9示出了本申请的一些实施方式所提供的一种用于第一终端的消息交互装置的示意图;
图10示出了本申请的一些实施方式所提供的一种电子设备的示意图;
图11示出了本申请的一些实施方式所提供的一种计算机可读存储介质的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施方式。虽然附图中显示了本公开的示例性实施方式,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
需要注意的是,除非另有说明,本申请使用的技术术语或者科学术语应当为本申请所属领域技术人员所理解的通常意义。
另外,术语“第一”和“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
针对现有技术中用户在接收到其他用户发送的图片后,记录该图片中的文本信息所存在的操作不便、效率低的问题,本申请的技术构思之一,在于在发送图片或接收图片时根据用户的需求对图片进行文本识别,从而自动提取出图片中的有效文本信息进行发送或者复制粘贴等操作,替代人工操作以提高图片中文本信息的转记效率,其中,图片识别的步骤可以在发送端执行,也可以在接收端执行,其均可以实现本申请的目的,下面结合实施例进行说明。
本申请实施例提供一种消息交互方法及装置、一种电子设备以及一种计算机可读存储介质,下面结合附图进行说明。
请参考图1,其示出了本申请的一些实施方式所提供的一种用于第二终端的消息交互方法的流程图,如图所示,所述用于第二终端的消息交互方法可以包括以下步骤:
步骤S101:接收第一终端发送的目标图片,并在消息交互界面中显示所述目标图片。
其中,所述第一终端和第二终端可以是任意具备信息交互和显示功能的电子设备,包括但不限于手机、平板电脑、笔记本电脑、台式机电脑、虚拟现实设备、增强现实设备等,本申请实施例不做限定。
第一终端和第二终端都可以配置社交应用,以便于使用第一终端的第一用户和使用第二终端的第二用户利用该社交应用互相发送消息,其中,发送的消息的类别可以包括但不限于文本、图片等。
第二终端在接收到第一终端发送的目标图片后,首先需要在消息交互界面中显示该目标图片,由于文本识别技术仍然有一定的出错率,通过显示该目标图片,可以方便用户将后续识别得到的有效文本信息与目标图片中的信息进行对比,以便于及时纠正错误,确保输出的有效文本信息的正确性。
步骤S102:识别所述目标图片中的有效文本信息。
本步骤,可以采用现有技术提供的任意文本识别技术实现,例如,可以采用现有技术提供的OCR(Optical Character Recognition,光学字符识别)算法、引擎、脚本或插件实现对图片中文本信息的识别,本申请对其具体实施方式不做限定。
目标图片中包含的文本信息可以划分为有效文本信息和无效文本信息,当然,图片中也可以只包含有效文本信息。其中,所述有效文本信息,可以是指符合用户识别或使用需求的文本信息,而不符合用户识别或使用需求的文本信息则可以称为无效文本信息,例如,在一些实例中,图片中的水印、背景文字等都可以视为无效文本信息。
需要说明的是,在实际应用中,上述有效文本信息和无效文本信息可以根据实际需求进行定义和区分,本申请实施例并不限定其具体内容。
在实施时,可以根据用户识别和使用需求设定识别条件,然后根据该识别条件识别出满足用户识别和使用需求的有效文本信息,本申请实施例并不限定该识别条件的具体实现方式,例如,其可以是先识别出目标图片中的所有文本信息,再从所有文本信息中筛选出符合指定语义条件或关键词匹配条件(指定语义条件或关键词匹配条件即为识别条件的一种)的有效文本信息;也可以是先在目标图片中确定出包含有效文本信息的识别区域或位置(该识别区域或位置也是识别条件的一种),然后根据该识别区域有针对性地识别出有效文本信息;本申请实施例并不限定其具体实现方式。
例如,在本申请实施例的任一实施方式的基础上,在一些变更实施方式中,所述识别所述目标图片中的有效文本信息,可以包括:
根据所述目标图片的类型,确定与所述类型对应的识别模板;
根据所述识别模板,识别所述目标图片中的有效文本信息。
其中,上述识别模板即可视为识别条件的一种具化,其可以包括该类型图片中有效文本信息的位置或区域信息,也可以包括该类型图片对应的指定语义条件或关键词匹配条件,本领域技术人员可以针对不同类型的图片,预先设置相应的识别模板,以便于后续直接根据该识别模板识别目标图片中的有效文本信息。
举例而言,在一些实施方式中,所述目标图片的类型可以为证件,例如身份证、银行卡、快递单等,相应的,所述识别模板可以为证件识别模板,所述证件识别模板记录有对应该类型证件图片中有效文本的位置信息(即有效文本位置信息),所述根据所述识别模板,识别所述目标图片中的有效文本信息,可以包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件图像;
根据所述证件识别模板记录的有效文本位置信息,从所述证件图像中提取至少一个有效文本图块;
对所述至少一个有效文本图块分别进行光学字符识别,得到至少一项有效文本字符串;
将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息。
请参考图2,其示出了本申请的一些实施方式所提供的一种根据有效文本位置信息提取有效文本图块的示意图,所述证件识别模板记录有证件中各个属性对应的位置信息,以所述证件为身份证为例,所述证件识别模板中各个属性(例如姓名、性别、住址、公民身份证号等)的定义可以如下:
“格式(属性名,坐标X,坐标Y,宽度W,高度H)
定义ImageWidth为整个图片宽度,ImageHeight为整个图片的高度,
1)Attr:姓名,X:30%*ImageWidth,Y:20%*ImageHeight,
W:17%*ImageWidth,H:5%*ImageHeight
2)Attr:性别,X:30%*ImageWidth,Y:30%*ImageHeight,
W:7%*ImageWidth,H:5%*ImageHeight
3)Attr:公民身份号码,X:40%*ImageWidth,Y:88%*ImageHeight,
W:90%*ImageWidth,H:5%*ImageHeight
……”
(其中坐标X,坐标Y,宽度W和高度H即为有效文本位置信息)
通过上述定义,即可确定身份证中各个属性对应的有效文本信息的位置信息所在的图块即有效文本图块,如图2所示,身份证正面有A、B、C、D、E、F共6个有效文本图块,提取出上述有效文本图块,再分别采用光学字符识别(OCR)算法(例如汉王OCR、金山OCR等)识别出每个有效文本图块中的有效文本字符串,然后把各个属性识别的结果即有效文本字符串和属性的名称拼接在一起,即可得到提取的有效文本信息。
其中,所述将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息,包括:
根据所述证件识别模板记录的样式信息,对所述至少一项有效文本字符串进行拼接,得到符合所述样式信息的有效文本信息。
仍以上述图2对应的实施例说明为例,将提取的有效文本字符串按照预设的样式信息进行拼接,即可得到符合所述样式信息的有效文本信息,例如:
“身份证:
正面
姓名:XXX
性别:X
民族:X
出生:XXXX
住址:XXXX XXXX XXXX
公民身份号码:XXXX XXXX XXXX”
通过上述实施方式,可以有效利用证件识别模板精准地提取出身份证等证件中的有效文本信息,相较于整幅图片全部识别的方式,识别效率更高,针对性更强,且可避免水印、背景文字等对有效文本信息识别造成的干扰,提高识别的准确性。另外,通过将有效文本字符串按照预设的样式信息进行拼接,可得到更易于识读的有效文本信息,提高用户的阅读体验。
需要说明的是,以目标图片为包含证件的图片为例,在一些实施方式中,第一终端发送来的目标图片中并不仅仅包含证件,还可能包括其他背景、元素等,证件在目标图片中也有可能是歪斜的,影响识别准确性,因此,在上述实施方式的基础上,在一些变更实施方式中,所述根据所述目标图片的类型,从所述目标图片中识别并提取证件图像,可以包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件主体图像;
对所述证件主体图像进行图形校正,得到证件图像。
其中,证件识别模板还可以记录有该类型证件对应的图片特征信息,例如纹理、颜色、背景、特征图像等等,本实施方式,即可根据所述图片特征信息从所述目标图片中识别并提取证件主体图像。
请参考图3,其示出了本申请的一些实施方式所提供的一种提取证件主体图像并进行校正的示意图,如图3所示,目标图片是一幅人物手持身份证的照片,其中,身份证是歪斜的,对此,通过本实施方式,首先根据所述目标图片的类型,例如身份证,从所述目标图片中识别并提取证件主体图像,然后对提取的证件主体图像进行校正后,得到证件图像。
通过本实施方式,可以首先从目标图片中去除与证件无关的部分图像,摒除无关部分对后续有效文本信息识别造成的干扰,然后提取出证件主体图像后再进行图形校正,避免图片歪斜、畸形等影响有效文本信息识别的准确性。
在前述多个实施方式中,均提及了所述目标图片的类型或者证件的类型,在其实施例的基础上,在一些变更实施方式中,所述根据所述目标图片的类型,确定与所述类型对应的识别模板之前,还可以包括:
显示图片类型选择控件;
根据所述用户针对所述图片类型选择控件的选择操作,确定所述目标图片的类型。
其中,所述图片类型选择控件可以显示当前支持提取有效文本信息的图片类型,例如银行卡、身份证、护照、快递单等,用户可以从中选择一个确定为目标图片的类型,以便于后续根据所述目标图片的类型对所述目标图片进行识别和有效文本信息提取。
通过本实施方式,可以通过人机交互支持用户自主选择、确定目标图片的类型,由于人为对图片类型的判断准确性更高,通过本实施方式,可以确保图片类型的正确性,同时在用户确定类型后再进行识别,可以根据图片类型进行更加针对性的识别,有助于提高有效文本信息的识别效率和准确率。
此外,也可以由第二终端或社交应用自动识别所述目标图片的类型,例如,根据目标图片中的纹理、颜色、背景、特征图像等等特征信息,判断所述目标图片的类型,其也可以实现本申请实施例的目的,也应在本申请的保护范围之内。
步骤S103:在所述消息交互界面以文本格式显示所述有效文本信息,和/或,将所述有效文本信息复制至粘贴板。
在识别出所述目标图片中的有效文本信息后,本申请实施例给出多种后续处理方式:
第一种方式是在所述消息交互界面以文本格式显示所述有效文本信息,以文本格式显示的目的和效果在于,便于用户对所述有效文本信息进行编辑和复制粘贴;
第二种方式是将所述有效文本信息复制至粘贴板,这样做的目的和效果是,可以方便用户直接将该有效文本信息粘贴到需要用到的地方。
第三种方式是在所述消息交互界面以文本格式显示所述有效文本信息的同时,也将所述有效文本信息复制至粘贴板,这样做的目的和效果是,用户既可以直接将该有效文本信息粘贴到需要用到的地方,也可以对所述有效文本信息进行编辑后再复制粘贴到需要用到的地方,从而满足用户多样化的使用需求。
其中,在上述第二种方式或第三种方式的基础上,在步骤S103之后,所述方法还可以包括:
显示表示所述有效文本信息已被复制至粘贴板的第二提示信息。
由于将有效文本信息复制至粘贴板的操作对于用户而言是非可视化操作,因此,通过本实施方式,可以通过人机交互告知用户该有效文本信息已被复制至粘贴板,便于用户了解情况并进一步将该有效文本信息粘贴纸需要用到的地方。
本申请实施例提供的消息交互方法,在接收第一终端发送的目标图片,并在消息交互界面中显示所述目标图片后,可以进一步识别所述目标图片中的有效文本信息,然后在所述消息交互界面以文本格式显示所述有效文本信息,和/或,将所述有效文本信息复制至粘贴板,从而方便用户直接复制和/或粘贴,无需用户逐字查看和录入,即可方便高效地提取出有效文本信息,尤其适用于在即时通讯应用中快速方便地获取银行卡号、身份证号等有效文本信息。
需要说明的是,本申请实施例中的目标图片,并不限于证件图片,其可以是含有文字的任意图片,例如,户外拍摄的照片、文档扫描件等等,只要其含有文字,即可利用本申请实施例提供的方法进行处理。当然,其中只有标准格式的图片例如证件图片等可以采用识别模板辅助进行识别以提高识别效率以及使得输出的有效文本信息的样式更加易于阅读,对于非标准格式的图片,可以对整幅画面进行文字识别以提取有效文本信息,也可以由用户框选一定区域后,识别用户框选的区域内的有效文本信息,其也可以实现本申请实施例的目的也应在本申请的保护范围之内。
在上述实施例的基础上,在一些变更实施方式中,所述在所述消息交互界面以文本格式显示所述有效文本信息,可以包括:
在所述消息交互界面的显示框中以文本格式显示所述有效文本信息,其中,所述有效文本信息的显示位置与所述目标图片的显示位置相邻。
消息交互界面包括至少包括显示框和输入框,显示框用于显示交互双方已经发送的交互信息,输入框用于当前用户输入交互内容。第一终端发送而来的目标图片,在第二终端显示于显示框中,通过本实施方式,可以将有效文本信息显示于所述目标图片的显示位置相邻的位置,一方面位置的相邻表征着对应性,便于用户了解该有效文本信息的来源,另一方面,便于用户将有效文本信息与目标图片中的内容进行对比,便于及时发现错误并进行纠正。
在前述任意实施方式的基础上,在一些变更实施方式中,步骤S102识别所述目标图片中的有效文本信息之前,还可以包括:
显示针对所述目标图片的第一提示信息,所述第一提示信息用于提示使用所述第二终端的用户对所述目标图片进行有效文本识别;
根据所述用户针对所述第一提示信息输入的确认操作,触发识别所述目标图片中的有效文本信息。
其中,所述第一提示信息可以显示于所述目标图片相邻的位置,便于用户进行针对性操作。
通过本实施方式,可以及时地提示用户该社交应用具备提取图片中有效文本信息的功能,方便用户使用该功能,从而提升用户的使用体验。
在前述任意实施方式的基础上,在一些变更实施方式中,所述显示针对所述目标图片的第一提示信息,可以包括:
根据所述用户针对所述目标图片输入的预设触发操作,显示第一提示信息;或者,
若与所述目标图片相关的消息交互上下文信息符合预设提示条件,显示第一提示信息。
其中,所述预设触发操作可以是长按、双击、拖动等,本领域技术人员可以根据实际需求灵活设置,本申请实施例不做限定。根据用户输入的预设触发操作显示第一提示信息,可以根据用户的实际需求,通过人机交互触发识别目标图片中有效文本信息的步骤,具有较高的可操作性和满足用户的多样化需求。
另外,所述预设提示条件可以包括但不限于所述消息交互上下文信息中包含有与提取有效文本信息相关的内容,或者所述消息交互上下文信息中包含有当前社交应用支持提取有效文本信息的图片类型的信息。例如,消息交互上下文信息中含有“把你的身份证号发给我”、“请提供银行卡号”等信息,说明当前用户有获取对方身份证号、银行卡号的需求,若对方发送过来的是图片(即目标图片),可以判断当前用户有提取图片中有效文本信息的需求,即可判断与所述目标图片相关的消息交互上下文信息符合预设提示条件,进而触发显示第一提示信息。又如,当前社交应用支持提取身份证、银行卡、快递单等类型证件中的有效文本信息,当消息交互上下文信息中出现了“身份证”“快递单”等关键词,则可以判断与所述目标图片相关的消息交互上下文信息符合预设提示条件,进而触发显示第一提示信息。通过本实施方式,可以通过语义分析、关键词匹配等方式,利用消息交互上下文信息确定是否显示第一提示信息,进而在分析用户需求的基础上有针对性地向用户发出提示,避免在不必要的图片展示第一提示信息给用户带来烦扰,可进一步提升用户使用体验。
另外,需要说明的是,本申请实施例所提供的消息交互方法,既可以应用于即时通讯应用,例如微信、QQ、掌信等,也可以应用于邮件应用,例如网易邮箱、QQ邮箱等,相应的,所述消息交互界面既可以是即时通讯应用的即时通讯信息交互界面,也可以是邮件应用的邮件正文显示界面,本申请实施例不做限定。
为了便于理解,请参考图4,其示出了本申请的一些实施方式所提供的一种提取有效文本信息的示意图,第二终端(对应用户A)在接收到第一终端(对应用户B)发送的银行卡图片后,用户B长按银行卡图片,即可弹出第一提示信息,以询问用户A是否对所述目标图片进行有效文本识别,用户A确定需要识别后,进一步弹出图片类型选择控件,用户A选择图片类型为银行卡,则触发识别银行卡图片中的有效文本信息,然后以文本格式显示在银行卡图片旁,并提示用户双击可编辑,长按可复制,以便于用户进行编辑、复制粘贴等操作。
在上述的实施例中,提供了一种用于第二终端的消息交互方法,与之相对应的,本申请还提供一种用于第二终端的消息交互装置。本申请实施例提供的用于第二终端的消息交互装置可以实施上述用于第二终端的消息交互方法,该用于第二终端的消息交互装置可以通过软件、硬件或软硬结合的方式来实现。例如,该用于第二终端的消息交互装置可以包括集成的或分开的功能模块或单元来执行上述各方法中的对应步骤。请参考图5,其示出了本申请的一些实施方式所提供的一种用于第二终端的消息交互装置的示意图。由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
如图5所示,所述用于第二终端的消息交互装置10可以包括:
目标图片接收模块101,用于接收第一终端发送的目标图片,并在消息交互界面中显示所述目标图片;
目标图片识别模块102,用于识别所述目标图片中的有效文本信息;
有效文本显示模块103,用于在所述消息交互界面以文本格式显示所述有效文本信息,和/或,将所述有效文本信息复制至粘贴板。
在本申请实施例的一些变更实施方式中,所述有效文本显示模块103,可以包括:
有效文本显示单元,用于在所述消息交互界面的显示框中以文本格式显示所述有效文本信息,其中,所述有效文本信息的显示位置与所述目标图片的显示位置相邻。
在本申请实施例的一些变更实施方式中,所述装置10,还可以包括:
第一提示信息显示模块,用于显示针对所述目标图片的第一提示信息,所述第一提示信息用于提示使用所述第二终端的用户对所述目标图片进行有效文本识别;
第一提示信息触发模块,用于根据所述用户针对所述第一提示信息输入的确认操作,触发识别所述目标图片中的有效文本信息。
在本申请实施例的一些变更实施方式中,所述第一提示信息显示模块,可以包括:
用户触发显示单元,用于根据所述用户针对所述目标图片输入的预设触发操作,显示第一提示信息;或者,
自动触发显示单元,用于若与所述目标图片相关的消息交互上下文信息符合预设提示条件,显示第一提示信息。
在本申请实施例的一些变更实施方式中,所述目标图片识别模块102,可以包括:
识别模板确定单元,用于根据所述目标图片的类型,确定与所述类型对应的识别模板;
识别模板识别单元,用于根据所述识别模板,识别所述目标图片中的有效文本信息。
在本申请实施例的一些变更实施方式中,所述装置10,还可以包括:
类型选择控件显示模块,用于显示图片类型选择控件;
类型选择模块,用于根据所述用户针对所述图片类型选择控件的选择操作,确定所述目标图片的类型。
在本申请实施例的一些变更实施方式中,所述识别模板可以包括证件识别模板;
所述识别模板识别单元,可以包括:
证件图像提取子单元,用于根据所述目标图片的类型,从所述目标图片中识别并提取证件图像;
文本图块提取子单元,用于根据所述证件识别模板记录的有效文本位置信息,从所述证件图像中提取至少一个有效文本图块;
字符串识别子单元,用于对所述至少一个有效文本图块分别进行光学字符识别,得到至少一项有效文本字符串;
字符串拼接子单元,用于将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息。
在本申请实施例的一些变更实施方式中,所述证件图像提取子单元,可以包括:
主体图像提取子单元,用于根据所述目标图片的类型,从所述目标图片中识别并提取证件主体图像;
图形校正子单元,用于对所述证件主体图像进行图形校正,得到证件图像。
在本申请实施例的一些变更实施方式中,所述字符串拼接子单元,可以包括:
根据样式拼接子单元,用于根据所述证件识别模板记录的样式信息,对所述至少一项有效文本字符串进行拼接,得到符合所述样式信息的有效文本信息。
在本申请实施例的一些变更实施方式中,所述装置10,还可以包括:
第二提示信息显示模块,用于显示表示所述有效文本信息已被复制至粘贴板的第二提示信息。
在本申请实施例的一些变更实施方式中,所述消息交互界面可以包括即时通讯应用的即时通讯信息交互界面,或者,邮件应用的邮件正文显示界面。
本申请实施例提供的消息交互装置10,与本申请前述实施例提供的消息交互方法出于相同的发明构思,具有相同的有益效果。
在上述的实施例中,提供了一种用于第二终端的消息交互方法,其中,有效文本信息的识别步骤是在第二终端完成的,基于相同的发明构思,本申请实施例还提供了一种用于第一终端的消息交互方法,其中,有效文本信息的识别步骤是在第一终端完成的,下面结合附图进行示例性说明。需要说明的是,下述实施例说明,可参照前述用于第二终端的消息交互方法的实施例说明进行理解,部分内容不再赘述,相应的,前述用于第二终端的消息交互方法的实施例说明,也可以参照下述用于第一终端的消息交互方法的实施例说明进行理解。
请参考图6,其示出了本申请的一些实施方式所提供的一种用于第一终端的消息交互方法的流程图,如图所示,所述消息交互方法可以包括以下步骤:
步骤S201:确定添加至消息交互界面的输入框中的目标图片,或者确定添加至图片添加控件中的目标图片。
本申请实施例的目的之一在于发送目标图片前,对目标图片中的有效文本信息进行提取,以便于用户直接将文本格式的有效文本信息发送给对方,便于对方用户编辑或复制粘贴到其他地方。因此,可以在将目标图片添加到图片添加控件后,或者在将目标图片添加到消息交互界面的输入框后触发识别其中的有效文本信息。
步骤S202:识别所述目标图片中的有效文本信息。
本步骤S202相关的内容可以参考上述关于步骤S102相关的内容进行理解,部分内容不再赘述。
其中,在一些实施方式中,所述步骤S202之前还可以包括:
显示针对所述目标图片的第三提示信息,所述第三提示信息用于提示所述用户对所述目标图片进行有效文本识别;
根据所述用户针对所述第三提示信息输入的确认操作,触发识别所述目标图片中的有效文本信息。
其中,所述第三提示信息可以显示于所述目标图片相邻的位置,便于用户进行针对性操作。
通过本实施方式,可以及时地提示用户该社交应用具备提取图片中有效文本信息的功能,方便用户使用该功能,从而提升用户的使用体验。
在前述任意实施方式的基础上,在一些变更实施方式中,所述显示针对所述目标图片的第三提示信息,可以包括:
根据所述用户针对所述目标图片输入的预设触发操作,显示第三提示信息;或者,
在检测到所述目标图片添加完成后,显示第三提示信息。
其中,所述预设触发操作可以是长按、双击、拖动等,本领域技术人员可以根据实际需求灵活设置,本申请实施例不做限定。根据用户输入的预设触发操作显示第三提示信息,可以根据用户的实际需求,通过人机交互触发识别目标图片中有效文本信息的步骤,具有较高的可操作性和满足用户的多样化需求。
在检测到所述目标图片添加完成后,可以是指在添加到图片添加控件后,也可以是指在添加到输入框以后,本申请实施例不做限定,通过在检测到所述目标图片添加完成后自动显示第三提示信息,可以主动提示用户进行有效文本信息的识别,既可以提高操作效率,又可以提升用户使用体验。
在本申请任意实施方式的基础上,在一些变更实施方式中,所述识别所述目标图片中的有效文本信息,包括:
根据所述目标图片的类型,确定与所述类型对应的识别模板;
根据所述识别模板,识别所述目标图片中的有效文本信息。
在本申请任意实施方式的基础上,在一些变更实施方式中,所述根据所述目标图片的类型,确定与所述类型对应的识别模板之前,还包括:
显示图片类型选择控件;
根据所述用户针对所述图片类型选择控件的选择操作,确定所述目标图片的类型。
在本申请任意实施方式的基础上,在一些变更实施方式中,所述识别模板包括证件识别模板;
所述根据所述识别模板,识别所述目标图片中的有效文本信息,包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件图像;
根据所述证件识别模板记录的有效文本位置信息,从所述证件图像中提取至少一个有效文本图块;
对所述至少一个有效文本图块分别进行光学字符识别,得到至少一项有效文本字符串;
将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息。
在本申请任意实施方式的基础上,在一些变更实施方式中,所述根据所述目标图片的类型,从所述目标图片中识别并提取证件图像,包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件主体图像;
对所述证件主体图像进行图形校正,得到证件图像。
在本申请任意实施方式的基础上,在一些变更实施方式中,所述将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息,包括:
根据所述证件识别模板记录的样式信息,对所述至少一项有效文本字符串进行拼接,得到符合所述样式信息的有效文本信息。
步骤S203:将所述有效文本信息以文本格式添加至所述消息交互界面的输入框中。
本步骤S203在执行时,可以删除输入框中已有的目标图片,也可以不删除,其均可以实现本申请实施例的目的。
步骤S204:响应于用户输入的消息发送触发操作,发送所述有效文本信息。
步骤S203在执行完成后,用户可以对所述有效文本信息进行核对,若有错误可手动进行纠正,若没有错误,用户可输入消息发送触发操作(例如,点击消息发送按键),从而触发将所述有效文本信息发送给对方。
为了便于理解,请参考图7,其示出了本申请的一些实施方式所提供的一种提取有效文本信息后进行发送的示意图,第一终端(对应用户B)在需要向第二终端(对应用户A)发送身份证信息时,在添加身份证照片至输入框后,可自动弹出第三提示信息,以询问用户B是对所述目标图片进行有效文本识别再发送还是直接发送,用户B确定需要识别后,进一步弹出图片类型选择控件,用户B选择图片类型为身份证,图片类型选择控件可以有下一级选择菜单,供用户选择身份证正面还是身份证反面,用户B选择身份证正面后,则触发识别身份证照片中的有效文本信息,然后以文本格式显示在输入框中,用户可以进一步进行编辑,然后,点击发送按键,即可将有效文本信息发送给用户A。
本申请实施例提供的用于第一终端的消息交互方法,与本申请前述实施例提供的用于第二终端的消息交互方法出于相同的发明构思,至少具有以下相应的有益效果:在发送目标图片前,可以对目标图片中的有效文本信息进行识别,然后将有效文本信息以文本格式添加至所述消息交互界面的输入框中,以便于用户进一步核对和编辑,之后响应于用户输入的消息发送触发操作,发送所述有效文本信息,从而避免因向对方发送照片而使得对方不便于提取照片中有效文本信息的问题,提升消息交互双方的使用体验。
需要说明的是,本申请实施例中的目标图片,并不限于证件图片,其可以是含有文字的任意图片,例如,户外拍摄的照片、文档扫描件等等,只要其含有文字,即可利用本申请实施例提供的方法进行处理。当然,其中只有标准格式的图片例如证件图片等可以采用识别模板辅助进行识别以提高识别效率以及使得输出的有效文本信息的样式更加易于阅读,对于非标准格式的图片,可以对整幅画面进行文字识别以提取有效文本信息,也可以由用户框选一定区域后,识别用户框选的区域内的有效文本信息,其也可以实现本申请实施例的目的也应在本申请的保护范围之内。
以上用于第二终端的消息交互方法和用于第一终端的消息交互方法,出于同一个发明构思,其差别主要在于,前者是发送图片后由接收方识别图片中的有效文本信息,后者是发送图片前对图片中的有效文本信息进行识别并直接发送识别得到的有效文本信息,请参考图8,其示出了本申请的一些实施方式所提供的两种消息交互方法的流程对比图,两者对图片的识别流程可以是一致的,需要说明的是,在图8及其对应的示例性说明中,虽然部分用词发生了变化,但这并不影响其含义的表达,下述说明中会对部分用词与前述实施例说明中的用词进行对应性说明,该对应性说明所表达的对应关系既可以包括等同关系、也可以包括上下位关系,本领域技术人员可以结合实际情况进行理解。
如图8所示,发送方对应第一终端,在拍摄图片并将目标图片添加到输入框后,弹出第三提示信息提示第一用户是直接发送还是需要识别图片信息后再发送,当第一用户选择直接发送后,则把目标图片直接发送给接收方,接收方对应第二终端,第二终端在接收到目标图片后,弹出第一提示信息以提示第二用户是否识别目标图片中的有效文本信息,若用户选择否,则终止当前流程,若用户选择需要识别目标图片中的有效文本信息(对应图中的需要识别图片信息),则进入识别流程,首先弹出图片类型选择控件以供第二用户选择图片类型,例如身份证、银行卡、快递单等,当用户进行选择后,若该类型图片有子级菜单,可以进一步弹出下一级选择控件(例如图中“选择图片属性”,虽然名称不同,但表示的含义一致)以供用户选择进一步的信息,例如,身份证的正面还是反面,银行卡是哪家银行的,快递单是哪家快递的等等,选择完成后,设备即可根据预设的识别模板(对应图中的图片模板)识别目标图片中的有效文本信息,并将识别得到的有效文本信息返回,然后,在显示框中以文本格式显示该有效文本信息(对应图中的聊天界面显示图片中的信息),第二用户可直接复制粘贴到其他地方进行使用。
当第一用户选择识别后再发送后,则进入识别流程,首先弹出图片类型选择控件以供第一用户选择图片类型,例如身份证、银行卡、快递单等,当用户进行选择后,若该类型图片有子级菜单,可以进一步弹出下一级选择控件(例如图中“选择图片属性”,虽然名称不同,但表示的含义一致)以供用户选择进一步的信息,例如,身份证的正面还是反面,银行卡是哪家银行的,快递单是哪家快递的等等,选择完成后,设备即可根据预设的识别模板(对应图中的图片模板)识别目标图片中的有效文本信息,并将识别得到的有效文本信息返回,然后,在输入框中以文本格式显示该有效文本信息,第一用户可进一步进行编辑也可不进行编辑,然后点击发送按键将有效文本信息直接发送给接收方。
其中,识别模板可以针对不同类型的图片分别进行定义,不同类型的图片可以对应不同的识别模板,且识别模板中既可以包含各个属性对应的有效文本图块的位置信息,也可以包括各个属性的名称,以及有效文本信息的样式等信息,本领域技术人员可以结合实际需求灵活设置,本申请实施例不做限定。
在上述的实施例中,提供了一种用于第一终端的消息交互方法,与之相对应的,本申请还提供一种用于第一终端的消息交互装置。本申请实施例提供的用于第一终端的消息交互装置可以实施上述用于第一终端的消息交互方法,该用于第一终端的消息交互装置可以通过软件、硬件或软硬结合的方式来实现。例如,该用于第一终端的消息交互装置可以包括集成的或分开的功能模块或单元来执行上述各方法中的对应步骤。请参考图9,其示出了本申请的一些实施方式所提供的一种用于第一终端的消息交互装置的示意图。由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
如图9所示,所述用于第一终端的消息交互装置20可以包括:
目标图片确定模块201,用于确定添加至消息交互界面的输入框中的目标图片,或者确定添加至图片添加控件中的目标图片;
目标图片识别模块202,用于识别所述目标图片中的有效文本信息;
文本信息添加模块203,用于将所述有效文本信息以文本格式添加至所述消息交互界面的输入框中;
文本信息发送模块204,用于响应于用户输入的消息发送触发操作,发送所述有效文本信息。
在本申请实施例的一些变更实施方式中,所述装置20,还可以包括:
第三提示信息显示模块,用于显示针对所述目标图片的第三提示信息,所述第三提示信息用于提示所述用户对所述目标图片进行有效文本识别;
第三提示信息触发模块,用于根据所述用户针对所述第三提示信息输入的确认操作,触发识别所述目标图片中的有效文本信息。
在本申请实施例的一些变更实施方式中,所述第三提示信息显示模块,可以包括:
用户触发显示单元,用于根据所述用户针对所述目标图片输入的预设触发操作,显示第三提示信息;或者,
自动触发显示单元,用于在检测到所述目标图片添加完成后,显示第三提示信息。
在本申请实施例的一些变更实施方式中,所述目标图片识别模块202,可以包括:
识别模板确定单元,用于根据所述目标图片的类型,确定与所述类型对应的识别模板;
识别模板识别单元,用于根据所述识别模板,识别所述目标图片中的有效文本信息。
在本申请实施例的一些变更实施方式中,所述装置20,还可以包括:
类型选择控件显示模块,用于显示图片类型选择控件;
类型选择模块,用于根据所述用户针对所述图片类型选择控件的选择操作,确定所述目标图片的类型。
在本申请实施例的一些变更实施方式中,所述识别模板可以包括证件识别模板;
所述识别模板识别单元,可以包括:
证件图像提取子单元,用于根据所述目标图片的类型,从所述目标图片中识别并提取证件图像;
文本图块提取子单元,用于根据所述证件识别模板记录的有效文本位置信息,从所述证件图像中提取至少一个有效文本图块;
字符串识别子单元,用于对所述至少一个有效文本图块分别进行光学字符识别,得到至少一项有效文本字符串;
字符串拼接子单元,用于将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息。
在本申请实施例的一些变更实施方式中,所述证件图像提取子单元,可以包括:
主体图像提取子单元,用于根据所述目标图片的类型,从所述目标图片中识别并提取证件主体图像;
图形校正子单元,用于对所述证件主体图像进行图形校正,得到证件图像。
在本申请实施例的一些变更实施方式中,所述字符串拼接子单元,可以包括:
根据样式拼接子单元,用于根据所述证件识别模板记录的样式信息,对所述至少一项有效文本字符串进行拼接,得到符合所述样式信息的有效文本信息。
本申请实施例提供的用于第一终端的消息交互装置20,与本申请前述实施例提供的用于第一终端的消息交互方法出于相同的发明构思,具有相同的有益效果。
本申请实施方式还提供一种与前述实施方式所提供的消息交互方法对应的电子设备,所述电子设备可以是用作终端的任意电子设备,例如手机、笔记本电脑、平板电脑、台式机电脑等,以执行上述任意实施方式提供的信息交互方法。
请参考图10,其示出了本申请的一些实施方式所提供的一种电子设备的示意图。如图10所示,所述电子设备30可以包括:处理器300,存储器301,总线302和通信接口303,所述处理器300、通信接口303和存储器301通过总线302连接;所述存储器301中存储有可在所述处理器300上运行的计算机程序,所述处理器300运行所述计算机程序时执行本申请前述任意实施方式所提供的消息交互方法方法。
其中,存储器301可能包含高速随机存取存储器(RAM:Random Access Memory),也可能还可以包括非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。通过至少一个通信接口303(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接,可以使用互联网、广域网、本地网、城域网等。
总线302可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。其中,存储器301用于存储程序,所述处理器300在接收到执行指令后,执行所述程序,前述本申请实施例任一实施方式揭示的所述消息交互方法方法可以应用于处理器300中,或者由处理器300实现。
处理器300可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器300中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器300可以是通用处理器,可以包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,
简称NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器301,处理器300读取存储器301中的信息,结合其硬件完成上述方法的步骤。
本申请实施例提供的电子设备与本申请实施例提供的消息交互方法方法出于相同的发明构思,具有与其采用、运行或实现的方法相同的有益效果。
本申请实施方式还提供一种与前述实施方式所提供的消息交互方法方法对应的计算机可读存储介质,请参考图11,其示出的计算机可读存储介质为光盘40,其上存储有计算机程序(即程序产品),所述计算机程序在被处理器运行时,会执行前述任意实施方式所提供的消息交互方法方法。
需要说明的是,所述计算机可读存储介质的例子还可以可以包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他光学、磁性存储介质,在此不再一一赘述。
本申请的上述实施例提供的计算机可读存储介质与本申请实施例提供的消息交互方法方法出于相同的发明构思,具有与其存储的应用程序所采用、运行或实现的方法相同的有益效果。
需要说明的是,附图中的流程图和框图显示了根据本申请的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围,其均应涵盖在本申请的权利要求和说明书的范围当中。

Claims (20)

1.一种消息交互方法,应用于第二终端,其特征在于,包括:
接收第一终端发送的目标图片,并在消息交互界面中显示所述目标图片;
识别所述目标图片中的有效文本信息;
在所述消息交互界面以文本格式显示所述有效文本信息,和/或,将所述有效文本信息复制至粘贴板。
2.根据权利要求1所述的方法,其特征在于,所述在所述消息交互界面以文本格式显示所述有效文本信息,包括:
在所述消息交互界面的显示框中以文本格式显示所述有效文本信息,其中,所述有效文本信息的显示位置与所述目标图片的显示位置相邻。
3.根据权利要求1或2所述的方法,其特征在于,所述识别所述目标图片中的有效文本信息之前,还包括:
显示针对所述目标图片的第一提示信息,所述第一提示信息用于提示使用所述第二终端的用户对所述目标图片进行有效文本识别;
根据所述用户针对所述第一提示信息输入的确认操作,触发识别所述目标图片中的有效文本信息。
4.根据权利要求3所述的方法,其特征在于,所述显示针对所述目标图片的第一提示信息,包括:
根据所述用户针对所述目标图片输入的预设触发操作,显示第一提示信息;或者,
若与所述目标图片相关的消息交互上下文信息符合预设提示条件,显示第一提示信息。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述识别所述目标图片中的有效文本信息,包括:
根据所述目标图片的类型,确定与所述类型对应的识别模板;
根据所述识别模板,识别所述目标图片中的有效文本信息。
6.根据权利要求5所述的方法,其特征在于,所述根据所述目标图片的类型,确定与所述类型对应的识别模板之前,还包括:
显示图片类型选择控件;
根据所述用户针对所述图片类型选择控件的选择操作,确定所述目标图片的类型。
7.根据权利要求5或6所述的方法,其特征在于,所述识别模板包括证件识别模板;
所述根据所述识别模板,识别所述目标图片中的有效文本信息,包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件图像;
根据所述证件识别模板记录的有效文本位置信息,从所述证件图像中提取至少一个有效文本图块;
对所述至少一个有效文本图块分别进行光学字符识别,得到至少一项有效文本字符串;
将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息。
8.根据权利要求7所述的方法,其特征在于,所述根据所述目标图片的类型,从所述目标图片中识别并提取证件图像,包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件主体图像;
对所述证件主体图像进行图形校正,得到证件图像。
9.根据权利要求7所述的方法,其特征在于,所述将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息,包括:
根据所述证件识别模板记录的样式信息,对所述至少一项有效文本字符串进行拼接,得到符合所述样式信息的有效文本信息。
10.根据权利要求1至9任一项所述的方法,其特征在于,所述方法还包括:
显示表示所述有效文本信息已被复制至粘贴板的第二提示信息。
11.根据权利要求1至10任一项所述的方法,其特征在于,所述消息交互界面包括即时通讯应用的即时通讯信息交互界面,或者,邮件应用的邮件正文显示界面。
12.一种消息交互方法,应用于第一终端,其特征在于,包括:
确定添加至消息交互界面的输入框中的目标图片,或者确定添加至图片添加控件中的目标图片;
识别所述目标图片中的有效文本信息;
将所述有效文本信息以文本格式添加至所述消息交互界面的输入框中;
响应于用户输入的消息发送触发操作,发送所述有效文本信息。
13.根据权利要求12所述的方法,其特征在于,所述识别所述目标图片中的有效文本信息之前,还包括:
显示针对所述目标图片的第三提示信息,所述第三提示信息用于提示所述用户对所述目标图片进行有效文本识别;
根据所述用户针对所述第三提示信息输入的确认操作,触发识别所述目标图片中的有效文本信息。
14.根据权利要求13所述的方法,其特征在于,所述显示针对所述目标图片的第三提示信息,包括:
根据所述用户针对所述目标图片输入的预设触发操作,显示第三提示信息;或者,
在检测到所述目标图片添加完成后,显示第三提示信息。
15.根据权利要求12至14任一项所述的方法,其特征在于,所述识别所述目标图片中的有效文本信息,包括:
根据所述目标图片的类型,确定与所述类型对应的识别模板;
根据所述识别模板,识别所述目标图片中的有效文本信息。
16.根据权利要求15所述的方法,其特征在于,所述根据所述目标图片的类型,确定与所述类型对应的识别模板之前,还包括:
显示图片类型选择控件;
根据所述用户针对所述图片类型选择控件的选择操作,确定所述目标图片的类型。
17.根据权利要求15或16所述的方法,其特征在于,所述识别模板包括证件识别模板;
所述根据所述识别模板,识别所述目标图片中的有效文本信息,包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件图像;
根据所述证件识别模板记录的有效文本位置信息,从所述证件图像中提取至少一个有效文本图块;
对所述至少一个有效文本图块分别进行光学字符识别,得到至少一项有效文本字符串;
将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息。
18.根据权利要求17所述的方法,其特征在于,所述根据所述目标图片的类型,从所述目标图片中识别并提取证件图像,包括:
根据所述目标图片的类型,从所述目标图片中识别并提取证件主体图像;
对所述证件主体图像进行图形校正,得到证件图像。
19.根据权利要求17或18所述的方法,其特征在于,所述将所述至少一项有效文本字符串进行拼接,得到所述目标图片中的有效文本信息,包括:
根据所述证件识别模板记录的样式信息,对所述至少一项有效文本字符串进行拼接,得到符合所述样式信息的有效文本信息。
20.一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器运行所述计算机程序时执行以实现如权利要求1至19任一项所述的方法。
CN202010414951.9A 2020-05-15 2020-05-15 消息交互方法、电子设备及介质 Pending CN111669312A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010414951.9A CN111669312A (zh) 2020-05-15 2020-05-15 消息交互方法、电子设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010414951.9A CN111669312A (zh) 2020-05-15 2020-05-15 消息交互方法、电子设备及介质

Publications (1)

Publication Number Publication Date
CN111669312A true CN111669312A (zh) 2020-09-15

Family

ID=72383828

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010414951.9A Pending CN111669312A (zh) 2020-05-15 2020-05-15 消息交互方法、电子设备及介质

Country Status (1)

Country Link
CN (1) CN111669312A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115019291A (zh) * 2021-11-22 2022-09-06 荣耀终端有限公司 图像的文字识别方法、电子设备及存储介质
CN115550299A (zh) * 2022-10-09 2022-12-30 深圳依时货拉拉科技有限公司 图像信息通信方法、电子设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102759987A (zh) * 2012-06-13 2012-10-31 胡锦云 信息录入方法
CN103001858A (zh) * 2012-12-14 2013-03-27 上海量明科技发展有限公司 即时通信中回复消息的方法、客户端及系统
CN104537339A (zh) * 2014-12-19 2015-04-22 汉王科技股份有限公司 信息识别方法和信息识别系统
CN108089803A (zh) * 2017-12-19 2018-05-29 广东小天才科技有限公司 一种截屏信息获取方法及装置
US9998410B1 (en) * 2010-07-09 2018-06-12 Sitting Man, Llc Methods, systems, and computer program products for processing a request for a resource in a communication
CN109032726A (zh) * 2018-06-29 2018-12-18 北京明朝万达科技股份有限公司 聊天信息的获取方法和装置
CN111126301A (zh) * 2019-12-26 2020-05-08 腾讯科技(深圳)有限公司 一种图像处理方法、装置、计算机设备和存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9998410B1 (en) * 2010-07-09 2018-06-12 Sitting Man, Llc Methods, systems, and computer program products for processing a request for a resource in a communication
CN102759987A (zh) * 2012-06-13 2012-10-31 胡锦云 信息录入方法
CN103001858A (zh) * 2012-12-14 2013-03-27 上海量明科技发展有限公司 即时通信中回复消息的方法、客户端及系统
CN104537339A (zh) * 2014-12-19 2015-04-22 汉王科技股份有限公司 信息识别方法和信息识别系统
CN108089803A (zh) * 2017-12-19 2018-05-29 广东小天才科技有限公司 一种截屏信息获取方法及装置
CN109032726A (zh) * 2018-06-29 2018-12-18 北京明朝万达科技股份有限公司 聊天信息的获取方法和装置
CN111126301A (zh) * 2019-12-26 2020-05-08 腾讯科技(深圳)有限公司 一种图像处理方法、装置、计算机设备和存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115019291A (zh) * 2021-11-22 2022-09-06 荣耀终端有限公司 图像的文字识别方法、电子设备及存储介质
CN115019291B (zh) * 2021-11-22 2023-04-14 荣耀终端有限公司 图像的文字识别方法、电子设备及存储介质
CN115550299A (zh) * 2022-10-09 2022-12-30 深圳依时货拉拉科技有限公司 图像信息通信方法、电子设备及存储介质

Similar Documents

Publication Publication Date Title
US10380237B2 (en) Smart optical input/output (I/O) extension for context-dependent workflows
US9652704B2 (en) Method of providing content transmission service by using printed matter
US9785627B2 (en) Automated form fill-in via form retrieval
WO2019223177A1 (zh) 电子签名认证方法、系统、计算机设备和存储介质
US10929597B2 (en) Techniques and systems for storing and protecting signatures and images in electronic documents
CN111444750B (zh) 一种pdf文档识别方法、装置及电子设备
US9934212B2 (en) Methods and systems for capturing, sharing, and printing annotations
US20150244892A1 (en) Methods and systems for capturing, sharing, and printing annotations
CN111310750B (zh) 一种信息处理方法、装置、计算设备及介质
CN111669312A (zh) 消息交互方法、电子设备及介质
US11972025B2 (en) Stored image privacy violation detection method and system
US20220345498A1 (en) Shared image sanitization method and system
CN108509582B (zh) 一种信息的回复方法、终端设备及计算机可读存储介质
CN110472121B (zh) 名片信息搜索方法、装置、电子设备以及计算机可读存储介质
TWI688868B (zh) 用於提取訊息並使用所述訊息擷取聯絡人訊息的系統、非暫時性電腦可讀媒體和方法
CN106469132A (zh) 数据处理的方法及装置
US20150227787A1 (en) Photograph billpay tagging
JP6311347B2 (ja) 情報処理装置、情報処理システム、及びプログラム
EP3132381A1 (en) Smart optical input/output (i/o) extension for context-dependent workflows
US11574134B2 (en) Systems and methods of processing a document in an imaging device
JP2014179950A (ja) 画像処理システム、画像処理方法及びプログラム
US10659647B1 (en) Systems and methods of processing a document in an imaging device
CN112508550A (zh) 一种转账处理方法、装置、设备及存储介质
JP2009025877A (ja) データ処理装置およびこれを備えたプリントシステム
CN115690789A (zh) 信息处理方法、装置、移动终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200915

RJ01 Rejection of invention patent application after publication