CN113835582B - 一种终端设备、信息显示方法和存储介质 - Google Patents

一种终端设备、信息显示方法和存储介质 Download PDF

Info

Publication number
CN113835582B
CN113835582B CN202111134211.0A CN202111134211A CN113835582B CN 113835582 B CN113835582 B CN 113835582B CN 202111134211 A CN202111134211 A CN 202111134211A CN 113835582 B CN113835582 B CN 113835582B
Authority
CN
China
Prior art keywords
picture
social
information
target picture
sharing page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111134211.0A
Other languages
English (en)
Other versions
CN113835582A (zh
Inventor
张培龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Mobile Communications Technology Co Ltd
Original Assignee
Hisense Mobile Communications Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Mobile Communications Technology Co Ltd filed Critical Hisense Mobile Communications Technology Co Ltd
Priority to CN202111134211.0A priority Critical patent/CN113835582B/zh
Publication of CN113835582A publication Critical patent/CN113835582A/zh
Application granted granted Critical
Publication of CN113835582B publication Critical patent/CN113835582B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供了一种终端设备、信息显示方法和存储介质,涉及计算机技术领域。其中,终端设备的处理器若检测到当前显示的界面是社交应用的信息分享页面,且信息分享页面中包含目标图片,则从信息分享页面中提取目标图片对应的社交信息,并存储目标图片对应的社交信息;以及响应于针对目标图片查看社交信息的操作,显示已存储的目标图片对应的社交信息;使用户在浏览终端设备中保存的图片时,还可以同时查看图片有关的社交信息,操作简单,可以节省用户大量的时间。

Description

一种终端设备、信息显示方法和存储介质
技术领域
本申请涉及计算机技术领域,特别涉及一种终端设备、信息显示方法和存储介质。
背景技术
目前,越来越多的用户喜欢将终端设备图库中的图片分享至各种各样的社交应用中,并配上相应的文字内容,以获得好友的评论和点赞。
但是,当用户想要查看图库中任一图片的社交信息(包括文字内容、点赞和评论)时,只能打开社交应用,从社交应用分享页面的大量消息中去查找;当终端设备中安装有多个社交应用时,还需要先找到对应的社交应用,操作繁琐,还会浪费用户大量的时间。
发明内容
为了解决上述现有技术中的问题,本申请实施例提供了一种终端设备、信息显示方法和存储介质,使用户在浏览终端设备中保存的图片时,还可以同时查看图片有关的社交信息,操作简单,可以节省用户大量的时间。
第一方面,本申请实施例提供一种终端设备,包括:显示器、存储器和处理器;
所述显示器被配置为,显示所述终端设备运行时的界面;
所述存储器被配置为,存储所述终端设备运行所使用的程序或数据;
所述处理器被配置为,若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则从所述信息分享页面中提取所述目标图片对应的社交信息,并存储所述目标图片对应的社交信息;所述目标图片为终端设备中保存的图片;以及响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息。
在一种可能的实施方式中,所述处理器被配置为:
若检测到当前显示的界面是社交应用的信息分享页面,则确定所述信息分享页面中包含的分享图片;所述分享图片为所述社交应用的任一用户发布的图片;
分别将每张所述分享图片与所述终端设备中保存的图片进行比对;
若所述终端设备保存的图片中包含与任一分享图片相同的图片,则确定所述信息分享页面中包含目标图片;
从所述信息分享页面中提取所述目标图片对应的社交信息。
在一种可能的实施方式中,所述处理器被配置为:
获取包含所述信息分享页面的截屏图像;
通过图片检测模型对所述截屏图像进行图片检测,确定所述信息分享页面包含的图片内容;所述图片内容包括用户标识图片和分享图片;
将位于所述信息分享页面中的设定区域之外的图片内容确定为分享图片。
在一种可能的实施方式中,所述处理器被配置为:
通过文本检测模型对所述截屏图像进行文本检测,确定所述信息分享页面包含的社交信息;
将位于所述设定区域内的图片内容作为用户标识图片,并确定距离所述目标图片最近的第一用户标识图片和第二用户标识图片;
提取位于所述第一用户标识图片的上边缘和所述第二用户标识图片的上边缘之间的区域的社交信息,作为所述目标图片对应的社交信息。
在一种可能的实施方式中,所述处理器被配置为:
通过如下方式检测当前显示的界面是否为社交应用的信息分享页面:
获取所述当前显示的界面对应的当前应用的名称;
若所述当前应用的名称包含在预先设置的社交应用列表中,则确定所述当前应用为社交应用;
提取所述当前显示界面的图像特征,并根据所述图像特征确定所述当前显示的界面是否为社交应用的信息分享页面。
在一种可能的实施方式中,所述处理器被配置为:
在所述响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息之前,响应于针对待展示图片的预览操作,在已存储的社交信息中查找所述待展示图片对应的社交信息;所述待展示图片为所述终端设备中保存的任一图片;
若查找到所述待展示图片对应的社交信息,则在所述待展示图片的预览界面中显示查看社交信息按键。
在一种可能的实施方式中,所述处理器被配置为:
在所述响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息之前,响应于在所述目标图片的预览界面中触控查看社交信息按键的操作,根据所述目标图片的标识信息在已存储的社交信息中查找所述目标图片对应的社交信息;
显示所述目标图片对应的社交信息。
第二方面,本申请实施例提供一种信息显示方法,包括:
若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则从所述信息分享页面中提取所述目标图片对应的社交信息,并存储所述目标图片对应的社交信息;所述目标图片为终端设备中保存的图片;
响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息。
在一种可能的实施方式中,所述若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则从所述信息分享页面中提取所述目标图片对应的社交信息,包括:
若检测到当前显示的界面是社交应用的信息分享页面,则确定所述信息分享页面中包含的分享图片;所述分享图片为所述社交应用的任一用户发布的图片;
分别将每张所述分享图片与所述终端设备中保存的图片进行比对;
若所述终端设备保存的图片中包含与任一分享图片相同的图片,则确定所述信息分享页面中包含目标图片;
从所述信息分享页面中提取所述目标图片对应的社交信息。
第三方面,本申请实施例提供一种信息显示装置,包括:
检测单元,若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则从所述信息分享页面中提取所述目标图片对应的社交信息,并存储所述目标图片对应的社交信息;所述目标图片为终端设备中保存的图片;
显示单元,响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息。
第四方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时,实现上述第二方面或第二方面的任意可能的实施方式中的方法。
第五方面,本申请实施例提供一种计算机程序产品,该计算机程序产品包括计算机程序或指令,当该计算机程序或指令被处理器执行时,实现上述第二方面或第二方面的任意可能的实施方式中的方法。
在本申请实施例中,终端设备检测到当前显示的界面是社交应用的信息分享页面,且信息分享页面中包含目标图片,则从信息分享页面中提取出目标图片对应的社交信息,并存储至终端设备中,该目标图片为终端设备中保存的图片,用户可以直接从终端设备保存的图片中,查看与该图片有关的社交信息,而不需要去社交应用中查看和目标图片有关的社交信息,不仅操作简单,还可以帮助用户节省大量的时间。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种终端设备的结构示意图;
图2为本申请实施例提供的一种终端设备的软件结构框图;
图3为本申请实施例提供的一种信息显示方法的流程图;
图4为本申请实施例提供的一种信息显示方法的流程图;
图5为本申请实施例提供的一种信息分享页面的示意图;
图6为本申请实施例提供的一种手机中保存的预览图片示意图;
图7为本申请实施例提供的一种手机中保存的预览图片示意图;
图8为本申请实施例提供的一种手机中任一预览图片的预览界面示意图;
图9为本申请实施例提供的另一种手机中任一预览图片的预览界面示意图;
图10为本申请实施例提供的一种手机中任一预览图片的社交信息显示示意图;
图11为本申请实施例提供的另一种手机中任一预览图片的社交信息显示示意图;
图12为本申请实施例提供的另一种手机中任一预览图片的社交信息显示示意图;
图13为本申请实施例提供的一种信息显示方法中存储社交信息的流程图;
图14为本申请实施例提供的一种信息显示方法中查看社交信息的流程图;
图15为本申请实施例提供的一种信息显示装置的结构框图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述,显然,所描述的实施例仅仅是本申请一部份实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
需要说明的是,下述本申请实施例描述的应用场景是为了更加清楚的说明本申请实施例的技术方案,并不构成对于本申请实施例提供的技术方案的限定,本领域普通技术人员可知,随着新应用场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
为了使用户可以更直接,更方便地查看到已分享的目标图片的社交信息,本申请实施例提供了一种终端设备、信息显示方法和存储介质,用户可以直接从终端设备保存的图片中,查看已存储的和该图片有关的社交信息,而不需要去各个社交应用中去查找和目标图片有关的社交信息,操作简单,还可以帮助用户节省大量的时间。
本申请实施例提供的终端设备可以为手机、可穿戴设备、平板电脑等便携式设备。图1中示例性示出了本申请实施例提供的一种终端设备的硬件配置框图。应该理解的是,图1所示终端设备100仅是一个范例,并且终端设备100可以具有比图1中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
如图1所示,终端设备100包括:通信组件110、处理器120、存储器130、显示器140、输入组件150、音频电路160、SIM卡接口170以及传感器180等部件。
其中,通信组件110用于接收或发送通话请求,并在通话过程中接收和发送信号,以及连接服务器,上传或下载数据。通信组件110可以包括RF(radio frequency,射频)电路111、Wi-Fi(Wireless Fidelity,无线保真)模块112。
RF电路111可用于在收发信息或通话过程中信号的接收和发送,可以接收基站的下行数据后交给处理器120处理;可以将上行数据发送给基站。通常,RF电路111包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。RF电路111可以由天线接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。RF电路111还可以对经调制解调处理器调制后的信号放大,经天线转为电磁波辐射出去。在一些实施例中,RF电路111的至少部分功能模块可以被设置于处理器120中。在一些实施例中,RF电路111的至少部分功能模块可以与处理器120的至少部分模块被设置在同一个器件中。终端设备100的RF电路111和天线耦合,使得终端设备100可以通过无线通信技术与网络以及其他设备通信。
Wi-Fi属于短距离无线传输技术,终端设备100可以通过Wi-Fi模块112帮助用户收发电子邮件、浏览网页和访问流媒体等,它为用户提供了无线的宽带互联网访问。Wi-Fi模块112可以连接路由器,通过路由器连接外部网络。Wi-Fi模块112也可以连接服务器,上传或下载数据。
存储器130可用于存储终端设备运行时所使用的数据或程序代码。处理器120通过运行存储在存储器130的数据或程序代码,从而执行终端设备100的各种功能以及数据处理。存储器130可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器130存储有使得终端设备100能运行的操作系统。
显示器140用于显示由用户输入的信息或提供给用户的信息以及终端设备100的各种菜单的图形用户界面(graphical user interface,GUI)。具体地,显示器140可以包括设置在终端设备100正面的显示器。显示器可以采用液晶显示器、发光二极管等形式来配置。显示器140可用于显示终端设备运行时的界面。
输入组件150可用于接收用户输入的数字或字符信息,以及用户输入的各种操作等,产生与终端设备100的用户设置以及功能控制有关的信号输入。具体地,输入组件150可以包括按键和触控屏,触控屏可以设置在终端设备100的正面,可收集用户在其上或附近的触摸操作,例如点击按钮,拖动滚动框等。
其中,触控屏可以覆盖在显示器之上,在一些实施例中,可以将触控屏与显示器集成而实现终端设备100的输入和输出功能,集成后可以简称触控显示器。
终端设备100还可以包括定位模块,如卫星定位模块或移动通信网络定位模块等,可以实时确定终端设备100所处的地理位置。
音频电路160、扬声器161、麦克风162可提供用户与终端设备100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出。终端设备100还可配置音量按钮,用于调节声音信号的音量。另一方面,麦克风162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出至RF电路111以发送给比如另一终端,或者将音频数据输出至存储器130以便进一步处理。
SIM卡接口170用于连接SIM卡。SIM卡可以通过插入SIM卡接口170,或从SIM卡接口170中拔出,实现和终端设备100的接触和分离。终端设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口170可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口也可以兼容不同类型的SIM卡。SIM卡接口也可以兼容外部存储卡。终端设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,终端设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在终端设备100中,不能和终端设备100分离。SIM卡用于标识用户的手机号码。
终端设备100除包含SIM卡接口170之外,还可以包括USB(universal serial bus,通用串行总线)接口等。USB接口用于连接充电线或其它外设。例如,终端设备100可以通过USB接口连接充电线。终端设备100中的各组件或模块通过总线连接。
终端设备100还可以包括至少一种传感器180,比如加速度传感器181、距离传感器182、指纹传感器183、温度传感器184。终端设备100还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。例如,指纹传感器183可以用于感应用户点击终端设备100操作界面的图标。
终端设备100还可以包括摄像头,用于捕获静态图像或视频。摄像头可以是一个,也可以是多个。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给处理器120转换成数字图像信号。
处理器120是终端设备100的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器130内的软件程序,以及调用存储在存储器130内的数据,执行终端设备100的各种功能和处理数据。在一些实施例中,处理器120可包括一个或多个处理单元。本申请中处理器120可以运行操作系统、应用程序、用户界面显示及触控响应,以及本申请实施例所述的信息展示方法。处理器120执行信息展示方法的具体过程,将在下文中详细介绍。
图2是本申请实施例的终端设备100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将安卓(Android)系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,时钟,蓝牙,音乐,视频,短信息等应用程序。用户可以在时钟应用程序中设置闹钟。应用程序层还可以包括安装在终端设备上的第三方应用。
应用程序框架层为应用程序层的应用程序提供应用编程接口(ApplicationProgramming Interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示器大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括闹钟数据,视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供终端设备的通信功能。例如通话状态的管理(包括接通,挂断等)。资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,终端振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。其中,三维图形处理库和2D图形引擎均属于公共相机资源。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
为进一步说明本申请实施例提供的技术方案,下面结合附图以及具体实施方式对此进行详细的说明。虽然本申请实施例提供了如下述实施例或附图所示的方法操作步骤,但基于常规或者无需创造性的劳动在所述方法中可以包括更多或者更少的操作步骤。在逻辑上不存在必要因果关系的步骤中,这些步骤的执行顺序不限于本申请实施例提供的执行顺序。所述方法在实际的处理过程中或者装置执行时,可按照实施例或者附图所示的方法顺序执行或者并执行。
图3示出了本申请实施例提供的一种信息显示方法的流程图。该方法可以适用于图1所示的终端设备,该终端设备可以包括但不限于手机。如图3所示,该方法可以包括如下步骤:
步骤S301,若检测到当前显示的界面是社交应用的信息分享页面,且信息分享页面中包含目标图片,则从信息分享页面中提取目标图片对应的社交信息,并存储目标图片对应的社交信息。
其中,目标图片为终端设备中保存的图片。
如果终端设备检测到当前通过显示器显示的界面是社交应用的信息分享页面,终端设备将查找信息分享页面中是否包含图片。如果信息分享页面中包含图片,且该图片是终端设备中保存的图片,则终端设备将该图片确定为目标图片,从信息分享页面中提取目标图片对应的社交信息,并将提取的社交信息与目标图片对应进行存储。
步骤S302,响应于针对目标图片查看社交信息的操作,显示已存储的目标图片对应的社交信息。
用户通过图库浏览终端设备中保存的图片的过程中,在浏览到目标图片时,可以触发查看目标图片的社交信息的操作,终端设备响应于用户输入的针对目标图片查看社交信息的操作,可以显示已存储的目标图片对应的社交信息。
通过上述方法,用户可以直接从终端设备保存的图片中,查看与该图片有关的社交信息,而不需要去社交应用中查看和目标图片有关的社交信息,不仅操作简单,还可以帮助用户节省大量的时间。
为了便于理解,下文通过更具体的实施例对本申请提供的一种信息显示方法进行详细说明,下述具体实施例以手机为例进行说明,图4示出了一种信息显示方法的流程图。如图4所示,该方法可以包括如下步骤:
步骤S401,检测当前应用。
在一种可选的实施方式中,可以通过应用检测模块,检测当前应用是否为社交应用,当前应用即为当前在显示器上显示的界面对应的应用,也可以称为用户当前使用的应用。应用检测模块可以获取用户当前使用的应用的名称,如果用户当前使用的应用的名称包含在预先设置的社交应用列表中,则确定用户当前使用的应用为社交应用。
具体地,可以在手机的存储器中预先设置一个社交应用列表,该社交应用列表中可以包含各个社交应用的名称。当检测到用户启动任一应用时,手机响应于用户启动该应用的操作,获取该应用的程序包名;并根据获取的程序包名,获取该应用的名称,并将该应用的名称和预先设置的社交应用列表进行比对,若预先设置的社交应用列表中包含该应用的名称,则说明该应用为社交应用;若预先设置的社交应用列表中没有包含该应用的名称,则说明该应用不是社交应用。
步骤S402,检测当前显示的界面。
在一种可选的实施方式中,通过上述步骤S401中的方式,确定用户当前使用的应用为社交应用后,可以通过社交软件分享页面自动识别模块,提取当前显示界面的图像特征,并根据图像特征确定当前显示的界面是否为社交应用的信息分享页面。
具体地,在一种实施例中,在社交软件分享页面自动识别模块中可以包含图像特征提取模块和图像模式分类模块。其中,图像特征提取模块可以提取当前显示界面的灰度图像,并计算该灰度图像的图像特征;将图像特征输入图像模式分类模块,图像模式分类模块可以根据输入的图像特征,对截取的当前显示界面的截屏图像进行判断,确定当前显示的界面是否为社交应用的信息分享页面。图像模式分类模块可以是以社交应用信息分享页面的画面为正样本,以其他显示画面为负样本,进行训练得到的图像分类模型。
示例性地,在图像特征提取模块中,可以采用方向梯度直方图(Histogram oforiented gradient,HOG),HOG通过计算和统计图像局部区域的梯度直方图来构成特征;在图像模式分类模块中,可以采用支持向量机(Support Vector Machine,SVM),SVM是一种机器学习模型,在经过训练后,可以用于根据输入的图像特征输出图像的类别,在本申请实施例中,SVM输出的图像类别可以包括两类:信息分享页面和非信息分享页面。在实际使用过程中,可以使用HOG检测窗口对截取的当前显示界面的截屏图像进行检测,计算其HOG特征,再将计算得到的HOG特征输入至SVM中,SVM可以根据输入的HOG特征判断截取的当前显示界面的截屏图像是否为信息分享页面的图像,即判断手机当前显示的界面是否为社交应用的信息分享页面。
在将计算得到的HOG特征输入至SVM之前,还需要对SVM进行训练,使其可以根据训练结果对截取的当前显示界面的截屏图像进行分类。在训练过程中,需要选取大量的正样本和负样本,使用HOG检测窗口对选取的正样本和负样本进行检测,分别计算正样本和负样本的HOG特征,将计算得到的正样本和负样本的HOG特征输入至SVM中进行训练,从而得到可以基于输入的HOG特征对图像进行分类的SVM模型。
在本申请实施例中,在图像特征提取模块中,也可以采用其他的算法,例如:局部二值模式特征(Local Binary Pattern,LBP)、直方图统计特征方差、哈尔特征(Haar likefeatures)、DTC系数等特征算法,本申请对此不做限定;在图像模式分类模块中,也可以采用决策树、adaBoost等机器学习分类器,本申请对此不做限定。
在另一种实施例中,在社交软件分享页面自动识别模块中,可以采用深度学习分类模型对社交软件分享页面进行自动识别,例如,MoblienetV2,MobileNetV3,Resnet,InceptionNet等。将截取的当前显示界面的截屏图像输入至已训练的深度学习分类模型中,经过模型推理计算,判断截取的当前显示界面的截屏图像是否为信息分享页面的截图,即判断手机当前显示的界面是否为社交应用的信息分享页面。在将截取的当前显示界面的截屏图像输入至任一深度学习分类模型中之前,可以将社交应用信息分享页面作为正样本,将其他显示画面作为负样本进行训练,使其可以根据训练结果对截取的当前显示界面的截屏图像进行分类。
步骤S403,确定当前显示的界面中包含的图片内容和文本内容。
在一种可选的实施方式中,通过上述步骤S402中的方法,检测到当前显示的界面是社交应用的信息分享页面后,可以通过版面分析模块对获取的包含信息分享页面的截屏图进行检测,确定当前显示的界面中包含的图片内容和文本内容。
具体地,在版面分析模块中,可以包含图片检测模型和文本检测模型;通过图片检测模型对截屏图像进行图片检测,确定信息分享页面包含的图片内容;并分别确定该图片内容包括用户标识图片和分享图片;通过文本检测模型对截屏图像进行文本检测,确定信息分享页面中包含的社交信息;并分别确定该社交信息中包含的社交分享信息和社交互动信息。
示例性地,在图片检测模型中,可以采用目标检测深度学习模型,深度学习模型是一类基于深层次神经网络算法的机器学习网络模型,主要使用多重非线性变换对输入数据进行处理和分析,例如YOLO(You Only Look Once)、SSD、Retina-net、faster-rcnn等目标检测算法。
以目标检测算法YOLO为例进行说明,在YOLO的检测网络中,包括24个卷积层和位于卷积层之后,并行设置的分类子网络和回归子网络;其中,卷积层用来提取截屏图像的图像特征,分类子网络用来基于卷积层提取的图像特征,确定截屏图像中的各个区域为图片或非图片的概率;回归子网络用于卷积层提取的图像特征,预测截屏图像中的包含的各个图片的位置,并在对应位置沿各个图片的边缘标记包围框。例如,各个图片框的位置可以采用中心点坐标(center_x,center_y)、宽度和高度表示。
目标检测深度学习模型可以以包含图片和文字的图像作为训练图像进行训练得到,训练图像具有预先标注的图片的位置信息。
在文本检测模型中,可以采用文本检测深度学习模型,如CTPN、PSENet、PANNet、DBNet等文本检测算法。
以文本检测算法CTPN为例进行说明,CTPN的网络模型主要包括三个部分:卷积层、双向LSTM和全连接层。针对截屏图像中包含的文本内容,CTPN可以输出每行文本包围框的坐标,即每行文本包围框的中心点坐标(center_x,center_y),宽度和高度;通过计算也可以得出每行文本包围框的左上角顶点坐标(Topleft_x,Topleft_y)和右下角顶点坐标(Bottomright_x,Bottomright_y)。
文本检测深度学习模型可以以包含图片和文字的图像作为训练图像进行训练得到,训练图像具有预先标注的文本的位置信息。
通过上述方式可以得到当前显示界面中包含的图片内容和文本内容,可以从获取的包含信息分享页面的截屏图像左侧边缘起,将L1个像素内的范围定义为设定范围,位于该设定范围内的图片为用户标识图片,位于该设定范围外的图片为分享图片;针对任一分享图片,确定距离该分享图片最近的第一用户标识图片和第二用户标识图片,并提取位于第一用户标识图片的上边缘和第二用户标识图片的上边缘之间的区域的社交信息,将该社交信息作为与该分享图片对应的社交信息,并将该分享图片,与该分享图片对应的社交信息作为与第一用户标识对应的用户发表的信息内容。
示例性地,如图5所示,图5为某一社交应用的信息分享页面,该界面中的图片内容和文本内容已经确定。如图5所示,L1为设定范围的宽度,501为设定范围的区域,是以L1为宽度,以信息分享页面的高为高度的长方形区域,图片502和图片503为位于该设定范围内的图片内容,所以图片502和图片503为用户标识图片,图片504为位于该设定范围外的图片内容,所以图片504为分享图片;距离分享图片504最近的用户标识图片为图片502和图片503,所以可以将图片502确定为第一用户标识图片,可以将图片503确定为第二用户标识图片,文本505和文本506为位于第一用户标识图片502和第二用户标识图片503之间的文本内容,所以文本505和文本506为与分享图片504对应的社交信息;以分享图片504为参照点,位于该分享图片504上方的文本505为社交分享信息,位于该分享图片504下方的文本506为社交互动信息;因此,分享图片504、文本505和文本506为与第一用户标识图片502对应的用户发表的信息内容。
步骤S404,分别将每张分享图片与手机中保存的图片进行比对。
在一种可能的实施方式中,通过上述步骤S403确定当前显示的界面中包含的图片内容和文本内容后,可以通过图像对比模块将图片内容中包含的分享图片与终端设备中保存的图片进行比对,确定信息分享页面中包含手机中保存的图片。
具体地,在一种实施例中,可以采用哈希算法对图片内容中包含的分享图片与终端设备中保存的图片进行比对,示例性地,对图片内容中包含的分享图片和终端设备中保存的图片均进行如下处理:先将图片缩放为8*8的图像,然后把缩放后的图像转为灰度图像,并计算灰度图像的平均值;将设置为8*8的图片的像素值和计算得到的平均值进行对比,大于均值为1,小于均值为0,从而得到一个64位的图像指纹。然后计算分享图片与终端设备中保存的图片的图像指纹的汉明距离,如果汉明距离小于某个设定的阈值,则认为检测到的分享图片与图库中的该图片为同一图片,即信息分享页面中包含终端设备中保存的图片。
在本申请实施例中,也可以采用其他的算法对图片内容中包含的分享图片与终端设备中保存的图片进行比对,本申请对此不做限定。
步骤S405,从信息分享页面中提取目标图片对应的社交信息,并存储目标图片对应的社交信息。
在一种可能的实施方式中,通过上述步骤S404确定信息分享页面中包含的终端设备中保存的图片后,针对任一目标图片,提取与该目标图片对应的社交信息,并进行存储。
具体地,针对任一目标图像,可以将该目标图像的文件名为索引,存储与该目标图像对应的社交信息,并保存至json格式或xml格式的社交信息文件中。
示例性地,下述以json格式为例,实现代码如下所示:
在上述代码中,socialmediaID用于表示该社交信息是从哪个社交应用中获取的,imageName表示在终端设备中保存的与分享图片相同的图片文件名称;descriptionLineNum表示该imageName图片在社交分享页面中包含的社交分享信息的行数,remarkLineNum表示该imageName图片在社交分享页面中包含的社交互动信息的行数,descriptions表示按行存储的社交分享信息。
在一种实施例中,可以以图像数据的形式来保存社交分享信息。该图像数据可以有两种方式存储,第一种是先对图像进行base64编码,然后存储在json文件的descriptiondata字段中,另外一种是将图像存储为图像文件,例如,jpeg格式或png格式,并将该图像文件保存至手机存储器中,存储至json文件的descriptionimgpath字段中。
若按第一种方式进行存储,存储至json文件的descriptiondata字段中,则descriptionimgpath字段为null,例如,上述代码中描述的“IMG_20210820_001”图片的存储方式。
若按第二种方式存储,存储至json文件的descriptionimgpath字段中,则descriptiondata字段为null,例如,下述代码中描述的“IMG_20210820_002”图片的存储方式。
在另一种实施例中,针对任一目标图像,如果多个社交应用中都存在与该目标图像有关的社交信息,则在存储与该目标图片有关的社交信息文件中,依次描述与各个社交应用对应的socialmediaID字段,并在socialmediaID字段下描述与该社交应用对应的社交信息,例如,下述代码中描述的“IMG_20210820_003”图片的存储方式。
对于社交互动信息的存储,与上述对社交分享信息的存储方式一致,此处不再赘述。
步骤S406,响应于针对待展示图片的预览操作,在已存储的社交信息中查找待展示图片对应的社交信息,待展示图片为手机中保存的任一图片。
在一种可能的实施方式中,可以根据待展示图片的文件名称,在已存储的社交信息中,查找以待展示图片的文件名称为索引的社交信息,若查找到与待展示图片对应的社交信息,则在待展示图片的预览界面中显示查看社交信息按键。
具体地,在一种实施例中,如图6所示,图6为手机中保存的多张图片,用户可以在多张图片中任意选择一张待展示图片,手机响应于用户针对该待展示图片的预览操作,显示该待展示图片,如图7所示,假设用户选择的该待展示图片的文件名称为“IMG_20210820_001.jpg”。手机在已存储的社交信息中,查找是否存在以待展示图片的文件名称“IMG_20210820_001.jpg”为索引的社交信息。若在已存储的社交信息中,存在以待展示图片的文件名称“IMG_20210820_001.jpg”为索引的社交信息,则显示如图8所示的待展示图片的预览界面;在图8中,包含待展示图片801和社交信息按键802。
在另一种实施例中,社交信息按键上可以包含,与待展示图片的社交信息相关的社交应用的图标,通过该图标,用户可以快速知道与待展示图片相关的社交信息的来源。
若在已存储的社交信息中,不存在以待展示图片的文件名称为索引的社交信息,则显示如图9所示的待展示图片的预览界面;在图9中,仅包含待展示图片。
步骤S407,响应于针对目标图片查看社交信息的操作,显示已存储的目标图片对应的社交信息。
在一种可选的实施方式中,通过步骤S406,在已存储的社交信息中找到待展示图片对应的社交信息后,用户可以点击目标图片的社交信息按键,手机相应于用户点击目标图片社交信息按键的操作,通过社交信息显示模块显示与已存储的目标图片对应的社交信息。
具体地,在一种实施例中,社交信息文件中的社交信息以base64编码方式进行存储,响应与用户点击目标图片的社交信息按键的操作,从已存储的json格式的社交信息文件中,读取保存descriptiondata字段和remarkdata字段,并将base64编码的图像数据解码转换为RGB位图图像数据以备显示。
在另一种实施例中,社交信息文件中的社交信息以图片文件的方式进行存储,响应与用户点击目标图片的社交信息按键的操作,从已存储的json格式的社交信息文件中,读取保存descriptionimgpath字段和remarkimgpath字段,并将图片文件解码转换为RGB位图图像数据以备显示。
在一种可能的实施方式中,社交信息的显示方式可以是跑马灯式,可以是静态式、也可以是滚动字幕式。本申请对此不做限定。
示例性地,在一种实施例中,如图10所示,社交信息的显示方式为跑马灯式,社交信息可以从图10所示的(a)中的目标图片的预览界面的右侧逐步进入,再从图10所示的(b)中的目标图片的预览界面的左侧逐步退出,形成跑马灯式的显示效果。在另一种实施例中,如图11所示,社交信息的显示方式为静态式,社交信息在目标图片的预览界面中从上到下一次性全部显示,不包含任何的动态变化。在另一种实施例中,如图12所示,社交信息的显示方式为滚动字幕式,社交信息先从图12所示的(a)中的目标图片预览界面的底部显示,并在停留一段时间后,上移到图12所示的(b)中的目标图片预览界面的中间位置进行显示,原位置处则显示下一条社交信息,只到显示完全部社交信息。
在一种可能的实施方式中,当目标图片对应的社交信息来源于多个社交应用时,可以将各个社交应用中与目标图片对应的社交信息依次进行显示。
图13示出了信息显示方法中存储社交信息的一种具体实施方式,如图13所示,该方法可以包括如下步骤:
步骤S1301,通过应用检测模块,判断用户当前使用的应用是否为社交应用;如果是,则执行步骤S1302;如果否,则间隔设定时间后,重复执行步骤S1301;
步骤S1302,通过社交应用分享页面自动识别模块,判断当前显示的界面是否为社交应用分享页面;如果是,则执行步骤S1303;如果否,则间隔设定时间后,重复执行步骤S1301;
步骤S1303,通过版面分析模块,确定当前显示的界面中包含的图片内容和文本内容;
步骤S1304,通过图像对比模块,确定信息分享页面中包含的终端设备中保存的图片;
步骤S1305,通过社交信息提取存储模块,从信息分享页面中提取目标图片对应的社交信息,并存储目标图片对应的社交信息。
在一种具体实施方式中,用户打开图库浏览终端设备中保存的图片的过程,如图14所示,可以包括如下步骤:
步骤S1401,显示终端设备中保存的待展示图片;
步骤S1402,判断是否用户选择的任一待展示图片是否有社交信息;如果是,则执行步骤S1403;如果否,则执行步骤S1405;
步骤S1403,提取用户选择的待展示图片的社交信息;
步骤S1404,显示社交信息。
步骤S1405,不显示社交信息。
在一种实施例中,也可以显示查看社交信息按键;针对用户选择的待展示图片,如果手机中存储有与该待展示图片对应的社交信息,可以在该待展示图片的预览界面中显示查看社交信息按键,终端设备响应于用户点击该查看社交信息按键的操作,显示该待展示图片对应的社交信息;如果手机中没有该待展示图片对应的社交信息,则可以不显示。
在另一种实施例中,当手机中没有该待展示图片对应的社交信息时,也可以显示查看社交信息按键,该查看社交信息按键处于灰色状态,当用户点击查看社交信息按键后,不会触发任何的操作。
基于同一发明构思,本申请实施例中还提供了一种信息显示装置,如图15所示,该信息展示装置包括:
检测单元1501,若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则从所述信息分享页面中提取所述目标图片对应的社交信息,并存储所述目标图片对应的社交信息;所述目标图片为终端设备中保存的图片;
显示单元1502,响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息。
在一种可能的实施方式中,所述检测单元1501,还用于:
若检测到当前显示的界面是社交应用的信息分享页面,则确定所述信息分享页面中包含的分享图片;所述分享图片为所述社交应用的任一用户发布的图片;
分别将每张所述分享图片与所述终端设备中保存的图片进行比对;
若所述终端设备保存的图片中包含与任一分享图片相同的图片,则确定所述信息分享页面中包含目标图片;
从所述信息分享页面中提取所述目标图片对应的社交信息。
在一种可能的实施方式中,所述检测单元1501,还用于:
获取包含所述信息分享页面的截屏图像;
通过图片检测模型对所述截屏图像进行图片检测,确定所述信息分享页面包含的图片内容;所述图片内容包括用户标识图片和分享图片;
将位于所述信息分享页面中的设定区域之外的图片内容确定为分享图片。
在一种可能的实施方式中,所述检测单元1501,还用于:
通过文本检测模型对所述截屏图像进行文本检测,确定所述信息分享页面包含的社交信息;
将位于所述设定区域内的图片内容作为用户标识图片,并确定距离所述目标图片最近的第一用户标识图片和第二用户标识图片;
提取位于所述第一用户标识图片的上边缘和所述第二用户标识图片的上边缘之间的区域的社交信息,作为所述目标图片对应的社交信息。
在一种可能的实施方式中,所述检测单元1501,还用于:
通过如下方式检测当前显示的界面是否为社交应用的信息分享页面:
获取所述当前显示界面对应的当前应用的名称;
若所述当前应用的名称包含在预先设置的社交应用列表中,则确定所述当前应用为社交应用;
提取所述当前显示界面的图像特征,并根据所述图像特征确定所述当前显示的界面是否为社交应用的信息分享页面。
在一种可能的实施方式中,所述显示单元1502,还用于:
在所述响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息之前,响应于针对待展示图片的预览操作,在已存储的社交信息中查找所述待展示图片对应的社交信息;所述待展示图片为所述终端设备中保存的任一图片;
若查找到所述待展示图片对应的社交信息,则在所述待展示图片的预览界面中显示查看社交信息按键。
在一种可能的实施方式中,所述显示单元1502,还用于:
在所述响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息之前,响应于在所述目标图片的预览界面中触控查看社交信息按键的操作,根据所述目标图片的标识信息在已存储的社交信息中查找所述目标图片对应的社交信息;
显示所述目标图片对应的社交信息。
本申请实施例还提供一种计算机可读非易失性存储介质,包括程序代码,当所述程序代码在计算终端上运行时,所述程序代码用于使所述计算终端执行上述任意一种应用内部功能的快捷启动方法的步骤。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (9)

1.一种终端设备,其特征在于,包括:显示器、存储器和处理器;
所述显示器被配置为,显示所述终端设备运行时的界面;
所述存储器被配置为,存储所述终端设备运行所使用的程序或数据;
所述处理器被配置为,若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则通过文本检测模型对所述信息分享页面对应的截屏图像进行文本检测,确定所述信息分享页面包含的社交信息;将位于所述信息分享页面中设定区域内的图片内容作为用户标识图片,并确定距离所述目标图片最近的第一用户标识图片和第二用户标识图片;提取位于所述第一用户标识图片的上边缘和所述第二用户标识图片的上边缘之间的区域的社交信息,作为所述目标图片对应的社交信息,并存储所述目标图片对应的社交信息;所述目标图片为终端设备中保存的图片;以及响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息。
2.根据权利要求1所述的终端设备,其特征在于,所述处理器具体被配置为:
若检测到当前显示的界面是社交应用的信息分享页面,则确定所述信息分享页面中包含的分享图片;所述分享图片为所述社交应用的任一用户发布的图片;
分别将每张所述分享图片与所述终端设备中保存的图片进行比对;
若所述终端设备保存的图片中包含与任一分享图片相同的图片,则确定所述信息分享页面中包含目标图片;
从所述信息分享页面中提取所述目标图片对应的社交信息。
3.根据权利要求2所述的终端设备,其特征在于,所述处理器具体被配置为:
获取包含所述信息分享页面的截屏图像;
通过图片检测模型对所述截屏图像进行图片检测,确定所述信息分享页面包含的图片内容;所述图片内容包括用户标识图片和分享图片;
将位于所述信息分享页面中的设定区域之外的图片内容确定为分享图片。
4.根据权利要求1所述的终端设备,其特征在于,所述处理器具体被配置为:
通过如下方式检测当前显示的界面是否为社交应用的信息分享页面:
获取所述当前显示界面对应的当前应用的名称;
若所述当前应用的名称包含在预先设置的社交应用列表中,则确定所述当前应用为社交应用;
提取所述当前显示界面的图像特征,并根据所述图像特征确定所述当前显示的界面是否为社交应用的信息分享页面。
5.根据权利要求1~4中任一项所述的终端设备,其特征在于,所述处理器还被配置为:
在所述响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息之前,响应于针对待展示图片的预览操作,在已存储的社交信息中查找所述待展示图片对应的社交信息;所述待展示图片为所述终端设备中保存的任一图片;
若查找到所述待展示图片对应的社交信息,则在所述待展示图片的预览界面中显示查看社交信息按键。
6.根据权利要求5所述的终端设备,其特征在于,所述处理器具体被配置为:
在所述响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息之前,响应于在所述目标图片的预览界面中触控查看社交信息按键的操作,根据所述目标图片的标识信息在已存储的社交信息中查找所述目标图片对应的社交信息;
显示所述目标图片对应的社交信息。
7.一种信息显示方法,其特征在于,包括:
若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则通过文本检测模型对所述信息分享页面对应的截屏图像进行文本检测,确定所述信息分享页面包含的社交信息;将位于所述信息分享页面中设定区域内的图片内容作为用户标识图片,并确定距离所述目标图片最近的第一用户标识图片和第二用户标识图片;提取位于所述第一用户标识图片的上边缘和所述第二用户标识图片的上边缘之间的区域的社交信息,作为所述目标图片对应的社交信息,并存储所述目标图片对应的社交信息;所述目标图片为终端设备中保存的图片;
响应于针对目标图片查看社交信息的操作,显示已存储的所述目标图片对应的社交信息。
8.根据权利要求7所述的方法,其特征在于,所述若检测到当前显示的界面是社交应用的信息分享页面,且所述信息分享页面中包含目标图片,则从所述信息分享页面中提取所述目标图片对应的社交信息,包括:
若检测到当前显示的界面是社交应用的信息分享页面,则确定所述信息分享页面中包含的分享图片;所述分享图片为所述社交应用的任一用户发布的图片;
分别将每张所述分享图片与所述终端设备中保存的图片进行比对;
若所述终端设备保存的图片中包含与任一分享图片相同的图片,则确定所述信息分享页面中包含目标图片;
从所述信息分享页面中提取所述目标图片对应的社交信息。
9.一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,其特征在于:所述计算机程序被处理器执行时,实现权利要求7~8任一所述的方法。
CN202111134211.0A 2021-09-27 2021-09-27 一种终端设备、信息显示方法和存储介质 Active CN113835582B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111134211.0A CN113835582B (zh) 2021-09-27 2021-09-27 一种终端设备、信息显示方法和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111134211.0A CN113835582B (zh) 2021-09-27 2021-09-27 一种终端设备、信息显示方法和存储介质

Publications (2)

Publication Number Publication Date
CN113835582A CN113835582A (zh) 2021-12-24
CN113835582B true CN113835582B (zh) 2024-03-15

Family

ID=78970548

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111134211.0A Active CN113835582B (zh) 2021-09-27 2021-09-27 一种终端设备、信息显示方法和存储介质

Country Status (1)

Country Link
CN (1) CN113835582B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104536658A (zh) * 2014-12-12 2015-04-22 天津三星通信技术研究有限公司 在终端中生成截屏图像的设备和方法
CN104915664A (zh) * 2015-05-22 2015-09-16 腾讯科技(深圳)有限公司 联系对象标识获取方法和装置
CN105373587A (zh) * 2015-10-14 2016-03-02 深圳市金立通信设备有限公司 一种图片显示方法及终端
CN108563967A (zh) * 2018-03-15 2018-09-21 青岛海信移动通信技术股份有限公司 一种截图方法和装置
WO2018177002A1 (zh) * 2017-03-29 2018-10-04 腾讯科技(深圳)有限公司 社交信息的展示方法、计算机设备和存储介质
WO2019100234A1 (zh) * 2017-11-22 2019-05-31 腾讯科技(深圳)有限公司 实现信息互动的方法和装置
WO2020134571A1 (zh) * 2018-12-27 2020-07-02 北京字节跳动网络技术有限公司 页面展示方法、装置、终端设备及存储介质
CN111414507A (zh) * 2020-03-04 2020-07-14 华为技术有限公司 一种信息显示方法、设备、装置及计算机可读存储介质
CN111695410A (zh) * 2020-04-24 2020-09-22 平安国际智慧城市科技股份有限公司 违章举报方法、装置、计算机设备及存储介质
CN112153240A (zh) * 2019-06-27 2020-12-29 深圳Tcl数字技术有限公司 一种调整图像画质方法、装置及可读存储介质
CN112749696A (zh) * 2020-09-01 2021-05-04 腾讯科技(深圳)有限公司 一种文本检测方法及装置
CN113254696A (zh) * 2021-06-30 2021-08-13 腾讯科技(深圳)有限公司 一种封面图像获取方法及装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102710992B (zh) * 2012-03-22 2015-07-29 华为技术有限公司 一种互动消息展示方法、装置及系统
US9665657B2 (en) * 2013-09-24 2017-05-30 Google Inc. Dynamically picking content from social shares to display in a user interface
CN105550633B (zh) * 2015-10-30 2018-12-11 小米科技有限责任公司 区域识别方法及装置
US11003331B2 (en) * 2016-10-18 2021-05-11 Huawei Technologies Co., Ltd. Screen capturing method and terminal, and screenshot reading method and terminal
CN107341185B (zh) * 2017-06-05 2020-12-04 北京小米移动软件有限公司 信息显示的方法及装置
CN109445894A (zh) * 2018-10-26 2019-03-08 维沃移动通信有限公司 一种截图方法及电子设备
KR20190106853A (ko) * 2019-08-27 2019-09-18 엘지전자 주식회사 텍스트 인식 장치 및 방법

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104536658A (zh) * 2014-12-12 2015-04-22 天津三星通信技术研究有限公司 在终端中生成截屏图像的设备和方法
CN104915664A (zh) * 2015-05-22 2015-09-16 腾讯科技(深圳)有限公司 联系对象标识获取方法和装置
CN105373587A (zh) * 2015-10-14 2016-03-02 深圳市金立通信设备有限公司 一种图片显示方法及终端
WO2018177002A1 (zh) * 2017-03-29 2018-10-04 腾讯科技(深圳)有限公司 社交信息的展示方法、计算机设备和存储介质
WO2019100234A1 (zh) * 2017-11-22 2019-05-31 腾讯科技(深圳)有限公司 实现信息互动的方法和装置
CN108563967A (zh) * 2018-03-15 2018-09-21 青岛海信移动通信技术股份有限公司 一种截图方法和装置
WO2020134571A1 (zh) * 2018-12-27 2020-07-02 北京字节跳动网络技术有限公司 页面展示方法、装置、终端设备及存储介质
CN112153240A (zh) * 2019-06-27 2020-12-29 深圳Tcl数字技术有限公司 一种调整图像画质方法、装置及可读存储介质
CN111414507A (zh) * 2020-03-04 2020-07-14 华为技术有限公司 一种信息显示方法、设备、装置及计算机可读存储介质
CN111695410A (zh) * 2020-04-24 2020-09-22 平安国际智慧城市科技股份有限公司 违章举报方法、装置、计算机设备及存储介质
CN112749696A (zh) * 2020-09-01 2021-05-04 腾讯科技(深圳)有限公司 一种文本检测方法及装置
CN113254696A (zh) * 2021-06-30 2021-08-13 腾讯科技(深圳)有限公司 一种封面图像获取方法及装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
基于照片的社交关系可视化方法;陈佳舟等;小型微型计算机系统;第41卷(第10期);第2194-2199页 *
基于社会计算和深度学习的社交网络特定内容监控;操晓春等;计算机科学;20160914;第43卷(第10期);第1-8页 *
复杂光照下的车牌定位方法;秦实宏等;武汉工程大学学报;20151115;第37卷(第11期);第69-73页 *

Also Published As

Publication number Publication date
CN113835582A (zh) 2021-12-24

Similar Documents

Publication Publication Date Title
US11113523B2 (en) Method for recognizing a specific object inside an image and electronic device thereof
US11914850B2 (en) User profile picture generation method and electronic device
US20220358089A1 (en) Learning-Based Keyword Search Method and Electronic Device
WO2020048392A1 (zh) 应用程序的病毒检测方法、装置、计算机设备及存储介质
US20210150243A1 (en) Efficient image sharing
CN113835569A (zh) 终端设备、应用内部功能的快捷启动方法和存储介质
CN114020379B (zh) 一种终端设备、信息反馈方法和存储介质
KR102316846B1 (ko) 미디어 컨텐츠를 선별하는 방법 및 이를 구현하는 전자장치
CN111176766A (zh) 一种通信终端及组件显示方法
KR102303206B1 (ko) 전자장치에서 이미지 내의 특정 객체를 인식하기 위한 방법 및 장치
CN112099892B (zh) 一种通信终端及快速扫描二维码的方法
CN112163033B (zh) 移动终端及其出行清单的显示方法
CN114489429B (zh) 一种终端设备、长截屏方法和存储介质
CN112818979A (zh) 文本识别方法、装置、设备及存储介质
CN113835582B (zh) 一种终端设备、信息显示方法和存储介质
CN114546219B (zh) 图片列表的处理方法及相关装置
CN114594894B (zh) 界面元素的标记方法及终端设备、存储介质
CN114449171B (zh) 控制摄像头的方法、终端设备、存储介质及程序产品
CN115016710A (zh) 应用程序推荐方法
CN112199997A (zh) 一种终端及工具处理方法
US20240129619A1 (en) Method and Apparatus for Performing Control Operation, Storage Medium, and Control
CN116311311B (zh) 电子表格生成方法、装置、电子设备及可读存储介质
CN112818205B (zh) 页面处理方法、装置、电子设备、存储介质及产品
CN111142648B (zh) 一种数据处理方法和智能终端
EP4296840A1 (en) Method and apparatus for scrolling to capture screenshot

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Country or region after: China

Address after: 266071 Shandong city of Qingdao province Jiangxi City Road No. 11

Applicant after: Qingdao Hisense Mobile Communication Technology Co.,Ltd.

Address before: 266071 Shandong city of Qingdao province Jiangxi City Road No. 11

Applicant before: HISENSE MOBILE COMMUNICATIONS TECHNOLOGY Co.,Ltd.

Country or region before: China

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant