CN110865865B - 一种弹窗位置确定方法、装置、设备及存储介质 - Google Patents

一种弹窗位置确定方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN110865865B
CN110865865B CN201911154942.4A CN201911154942A CN110865865B CN 110865865 B CN110865865 B CN 110865865B CN 201911154942 A CN201911154942 A CN 201911154942A CN 110865865 B CN110865865 B CN 110865865B
Authority
CN
China
Prior art keywords
area
pop
determining
target
window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911154942.4A
Other languages
English (en)
Other versions
CN110865865A (zh
Inventor
谢珍珠
王影
乔玉平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
iFlytek Co Ltd
Original Assignee
iFlytek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by iFlytek Co Ltd filed Critical iFlytek Co Ltd
Priority to CN201911154942.4A priority Critical patent/CN110865865B/zh
Publication of CN110865865A publication Critical patent/CN110865865A/zh
Application granted granted Critical
Publication of CN110865865B publication Critical patent/CN110865865B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供了一种弹窗显示位置确定方法、装置、设备及存储介质,其中,方法包括:获取目标界面的图像作为目标图像;从目标图像中检测出空白区域;根据空白区域的面积和预设的弹窗初始化面积,确定弹窗在目标界面中的显示位置。在本申请提供的弹窗显示位置确定方法确定出的弹窗显示位置处显示的弹窗,不会遮挡对用户而言比较重要或者用户当前需要参考的信息,用户体验较好。

Description

一种弹窗位置确定方法、装置、设备及存储介质
技术领域
本申请涉及自然语言处理技术领域,尤其涉及一种弹窗位置确定方法、装置、设备及存储介质。
背景技术
在某些应用中,需要以弹窗的形式展示指定内容,比如,在涉及语音输入的应用中,通常需要将输入语音的识别文本显示到目标文本区域中,在一种实现方案中,在将输入语音的识别文本显示到目标区域之前,可以弹窗形式展示输入语音的识别文本,待识别文本确认无误后,再将其显示到目标文本区域。
目前,以弹窗形式展示指定内容的方案中,弹窗的显示位置通常是固定的,而弹窗的显示位置固定很可能导致弹窗遮挡对用户而言比较重要或者用户当前需要参考的信息,如此会大大影响用户体验。
发明内容
有鉴于此,本申请提供了一种弹窗位置确定方法、装置、设备及存储介质,用以解决弹窗的显示位置固定很可能导致弹窗遮挡对用户而言比较重要或者用户当前需要参考的信息,从而影响用户体验的问题,其技术方案如下:
一种弹窗显示位置确定方法,包括:
获取目标界面的图像,作为目标图像;
从所述目标图像中检测出空白区域;
根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置。
可选的,所述根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置,包括:
若所述空白区域的面积大于或等于所述弹窗初始化面积,则将所述空白区域确定为弹窗显示区域;
若所述空白区域的面积小于所述弹窗初始化面积,则将所述目标图像中的非空白区域切分为多个区域,从所述多个区域中确定出目标区域,根据所述空白区域和所述多个区域中的目标区域确定弹窗显示区域,其中,所述多个区域中的目标区域的重要度低于所述多个区域中非目标区域的重要度;
根据弹窗位置信息确定弹窗在所述弹窗显示区域中的显示位置,其中,所述弹窗位置信息包括至少一个与弹窗位置有关的参数。
可选的,所述弹窗位置信息包括以下信息中的一种或多种:
光标位置信息、所述目标图像中非空白区域的已显示尺寸信息、用户注视视线信息。
可选的,所述根据弹窗位置信息确定弹窗在所述弹窗显示区域中的显示位置,包括:
确定每个所述参数的信息熵;
根据每个所述参数的信息熵,确定每个所述参数的权重;
根据每个所述参数和每个所述参数的信息熵,确定弹窗在所述弹窗显示区域中的显示位置。
可选的,所述将所述目标图像中的非空白区域切分为多个区域,包括:
对所述目标图像中的非空白区域进行边缘检测,获得边缘点;
根据所述边缘点确定横向切分数量和纵向切分数量;
根据所述横向切分数量和所述纵向切分数量,将所述目标图像中的非空白区域切分为多个区域。
可选的,所述从所述多个区域中确定出目标区域,包括:
确定所述多个区域中每个区域的文本特征和/或语义特征,其中,一个区域的文本特征和/或语义特征能够表征该区域的重要度;
根据所述多个区域中每个区域的文本特征和/或语义特征,从所述多个区域中确定出目标区域。
可选的,所述根据所述空白区域和所述多个区域中的目标区域确定弹窗显示区域,包括:
将所述目标图像中的所述空白区域和所述目标区域中各像素点的像素值均设置为一指定值,其中,所述指定值与所述目标图像中除所述空白区域和所述目标区域外的其它区域中各像素点的像素值均不同;
为设置像素值后的图像的每一行或每一列中,像素值为指定值的连续像素组成的目标像素序列赋予序列标识,其中,若位于相邻行或相邻列中的两个目标像素序列存在重叠,则两个目标像素序列具有相同的序列标识,若位于相邻行或相邻列中的两个目标像素序列不存在重叠,则两个目标像素序列具有不同的序列标识;
将序列标识相同的像素序列所组成的区域确定为候选区域,并从确定出的所有候选区域中确定弹窗显示区域。
一种弹窗显示位置确定装置,包括:图像获取模块、空白区域检测模块和弹窗显示位置确定模块;
所述图像获取模块,用于获取目标界面的图像,作为目标图像;
所述空白区域检测模块,用于从所述目标图像中检测出空白区域;
所述弹窗显示位置确定模块,用于根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置。
一种弹窗显示位置确定设备,包括:存储器和处理器;
所述存储器,用于存储程序;
所述处理器,用于执行所述程序,实现上述任一项所述的弹窗显示位置确定方法的各个步骤。
一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现上述任一项所述的弹窗显示位置确定方法的各个步骤。
经由上述方案可知,本申请提供的弹窗位置确定方法、装置、设备及存储介质,首先获取目标界面的图像,然后从目标界面的图像中检测出空白区域,最后根据空白区域的面积和预设的弹窗初始化面积确定弹窗显示位置。本申请提供的弹窗位置确定方法可根据目标界面中的空白区域的面积和预设的弹窗初始化面积确定弹窗显示位置,由于空白区域中没有信息,因此,在确定弹窗位置时,考虑空白区域使得弹窗在确定出的显示位置处显示时不会遮挡对用户而言比较重要或者用户当前需要参考的信息,用户体验较好。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的弹窗显示位置确定方法的流程示意图;
图2为本申请实施例提供的根据空白区域的面积和预设的弹窗初始化面积,确定弹窗显示位置的流程示意图;
图3为本申请实施例提供的将目标图像中的非空白区域切分为多个区域的流程示意图;
图4为本申请实施例提供的从多个区域中确定出目标区域的流程示意图;
图5为本申请实施例提供的根据空白区域和多个区域中的目标区域确定弹窗显示区域的流程示意图;
图6为本申请实施例提供的设置像素值后的图像的一示例的示意图;
图7a~7d为本申请实施例提供的确定候选区域的四个示例的示意图;
图8为本申请实施例提供的弹窗显示位置确定装置的结构示意图;
图9为本申请实施例提供的弹窗显示位置确定设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本案发明人在实现本发明的过程中发现:现有的弹窗位置确定方案主要是通过光标的位置确定弹窗的显示位置,在某些应用中,光标的位置是固定的,因此,基于光标的位置确定的弹窗显示位置也是固定的,弹窗显示位置固定可能会使得弹窗显示时遮挡对用户而言比较重要或者用户当前需要参考的信息,另外,固定的弹窗显示位置可能并不是用户最佳观看视角。鉴于上述问题,本案发明人进行了深入研究,最终提出了一种效果较好的弹窗显示位置确定方法,该方法适用于任何需要以弹窗形式显示指定内容的应用场景。
本申请提供的弹窗显示位置确定方法可应用于终端设备,终端设备具有输入元件(比如麦克风、传感器、触摸屏、按键等)和输出元件(比如显示屏、扬声器等),终端设备可以为任何合适的计算设备,比如,可以为智能手机、平板电脑、笔记本电脑、个人计算机、可穿戴设备、电视机、游戏设备等等,终端设备可显示目标界面,且可获取目标界面的图像,利用目标界面的图像确定弹窗在目标界面中的显示位置,进而在确定出的显示位置处显示弹窗。本申请提供的弹窗显示位置确定方法还可应用于服务器,服务器可通过网络获取终端设备上显示的目标界面的图像,确定弹窗在目标界面中的显示位置,通过网络将弹窗在目标界面中的显示位置发送至终端,终端获得弹窗在目标界面中的显示位置后,在该显示位置处显示弹窗。上述的服务器可以为一个也可为多个,上述的网络可以但不限定为局域网(LAN)、广域网(WAN)等。
接下来对本申请提供的弹窗显示位置确定方法进行介绍。
请参阅图1,示出了本申请实施例提供的弹窗显示位置确定方法的流程示意图,该方法可以包括:
步骤S101:获取目标界面的图像,作为目标图像。
其中,目标界面为当前光标所在的界面,该界面可以为编辑界面,比如word的原生界面、微信的信息输入界面等,也可以为非编辑的界面,比如,图片的原生界面、播放器的原生界面等。
本实施例获取的目标图像可以为通过拍照或截图等方式获得的目标界面的图像。
步骤S102:从目标图像中检测出空白区域。
具体的,从目标图像中检测空白区域的过程可以包括:首先对目标图像进行二值化处理,获得黑白图像;然后,对黑白图像中像素点为255的像素点做连通域,将最大的连通域确定为空白区域。
步骤S103:根据空白区域的面积和预设的弹窗初始化面积,确定弹窗显示位置。
其中,空白区域的面积可通过如下方式确定:将空白区域的横向像素点的数量除以目标图像的水平分辨率,得到空白区域的水平尺寸,同样的,将空白区域的纵向坐标点的数量除以目标图像的垂直分辨率,得到空白区域的垂直尺寸,将空白区域的水平尺寸与空白区域的垂直尺寸相乘,便得到空白区域的面积。
根据空白区域的面积和预设的弹窗初始化面积,确定弹窗显示位置的具体实现过程可参见后续实施例的说明。
本申请实施例提供的弹窗位置确定方法,首先获取目标界面的图像,然后从目标界面的图像中检测出空白区域,最后根据空白区域的面积和预设的弹窗初始化面积确定弹窗显示位置。由于目标界面的空白区域中没有信息,因此,在确定弹窗位置时,考虑空白区域使得弹窗在确定出的显示位置处显示时不会遮挡对用户而言比较重要或者用户当前需要参考的信息,用户体验较好。
以下对上述实施例中的“步骤S102:根据空白区域的面积和预设的弹窗初始化面积,确定弹窗显示位置”进行介绍。
请参阅图2,示出了根据空白区域的面积和预设的弹窗初始化面积,确定弹窗显示位置的流程示意图,可以包括:
步骤S201:判断空白区域的面积是否大于或等于弹窗初始化面积,若是,则执行步骤S202a,若否,则执行步骤S202b-1~步骤S202b-3。
考虑到空白区域没有任何信息,是优选的弹窗显示区域,因此,本实施例首先判断空白区域是否足以显示弹窗,为此,将空白区域的面积与弹窗初始化面积进行比较。
步骤S202a:将空白区域确定为弹窗显示区域,然后执行步骤S203。
当空白区域的面积大于或等于弹窗初始化面积时,表明空白区域足以显示弹窗,直接将空白区域作为弹窗显示区域。
当空白区域的面积小于弹窗初始化面积时,表明空白区域不足以显示弹窗,若在空白区域显示弹窗,未位于空白区域中的弹窗区域很可能会遮挡重要信息,为此,本实施例提供了另一种确定弹窗显示区域的方案,该方案的基本思想是,根据空白区域和非空白区域中的非重要区域确定弹窗显示区域,具体过程如步骤S202b-1~步骤S202b-3:
步骤S202b-1:将目标图像中的非空白区域切分为多个区域。
步骤S202b-2:从多个区域中确定出目标区域。
具体的,首先确定多个区域中每个区域的重要度,然后根据每个区域的重要度从多个区域中确定出目标区域。
其中,多个区域中的目标区域的重要度低于多个区域中非目标区域的重要度,比如,目标区域可以为重要度未排在前三的区域。
步骤S202b-3:根据空白区域和多个区域中的目标区域确定弹窗显示区域。
步骤S203:根据弹窗位置信息确定弹窗在弹窗显示区域中的显示位置。
通过上述步骤S202确定出了弹窗显示区域,本步骤的目的在于进一步从确定出的弹窗显示区域中确定出弹窗的具体显示位置。
接下来分别对上述步骤S202b-1~S202b-3,以及步骤S203进行介绍。
首先对“步骤S202b-1:将目标图像中的非空白区域切分为多个区域”的具体实现过程进行介绍。
请参阅图3,示出了将目标图像中的非空白区域切分为多个区域的实现过程的流程示意图,可以包括:
步骤S301:对目标图像中的非空白区域进行边缘检测,获得边缘点。
具体的,对目标图像进行灰度化处理,获得灰度图像,针对灰度图像上的任一像素点,利用Sobel算子确定横向的梯度值和纵向的梯度值,根据横向的梯度值和纵向的梯度值确定梯度向量,若梯度向量的模值大于预设的阈值,则确定该像素点为边缘点,并记录该边缘点所在的行和列,对灰度图像上的每个像素点均进行上述处理,如此可获得所有的边缘点。
步骤S302:根据边缘点确定横向切分数量和纵向切分数量。
具体的,首先将各个边缘点分别向横轴和纵轴上的每个像素点进行投影,得到横向投影向量和纵向投影向量,然后分别将横向投影向量和纵向投影向量处理成只包含0、1两个元素的投影向量,最后根据处理后的横向投影向量中连续0元素的最大长度确定为横向切分数量,根据处理后的纵向投影向量中连续0元素的最大长度确定为纵向切分数量。
其中,将横向投影向量和纵向投影向量处理成只包含0、1两个元素的投影向量的过程包括:将横向投影向量中大于或等于阈值α的值置1,小于阈值α的值置0,如此可得到只包含0、1两个元素的横向投影向量,同样的,将纵向投影向量中大于或等于阈值β的值置1,小于阈值β的值置0,如此可得到只包含0、1两个元素的纵向投影向量。需要说明的是,α与β可以相同也可以不同,其根据具体情况设定。
示例性的,非空白区域为一个长度为30像素、高度为20像素的区域,非空白区域存在边缘点A(1,3)、B(1,2),则边缘点在横轴上第一个像素点处的投影值为横坐标值为1时对应的所有边缘点的纵坐标之和,即为3+2=5,边缘点在纵轴上第二个像素点的投影值为纵坐标为2时对应的所有边缘点的横坐标元素之和,即为1,边缘点在纵轴上第三个像素点的投影值为纵坐标为3时对应的所有边缘点的横坐标元素之和,即为1,以此类推,可以得到边缘点在横轴上的各个像素点的投影值,以及边缘点在纵轴上的各个像素点的投影值,进而可获得横向投影向量和纵向投影向量。假设横向投影向量为[7,6,4,8,4,5,6,5,8,7,6,4,3,2,3,1,2,3,4,6,4,3,6,8,3,6,4,2,1,3],纵向投影向量为[7,8,7,6,7,5,3,4,5,4,6,7,8,7,6,8,7,6,9,6],其中,横向投影向量中的第1个元素为所有边缘点在横轴上的第一个像素点处的投影值,其它元素以此类推,纵向投影向量中的第一个元素为所有边缘点在纵轴上的第一个像素点处的投影值,其它元素以此类推,获得横向投影向量和纵向投影向量后,利用设定的阈值将这两个向量处理成只包含0、1两个元素的向量,可选的,设定的阈值可以为投影向量维度的1/5,上述横向投影向量的维度为20,则阈值α=20/5=4,纵向投影向量的维度为30,则β=30/5=6,将横向投影向量中大于或等于4的值置1,小于4的值置0,将纵向投影向量中大于或等于6的值置1,小于6的值置0,如此可得到处理后的横向投影向量[1,1,1,1,1,1,1,1,1,1,1,1,0,0,0,0,0,0,1,1,1,0,1,1,0,1,1,0,0,0]以及处理后的纵向投影向量[1,1,1,1,1,0,0,0,0,0,1,1,1,1,1,1,1,1,1,1],其中,处理后的横向投影向量中连续0元素的最大长度为6,处理后的纵向投影向量中连续0元素的最大长度为5,则将横轴长度等分成Xzone=30/6=5份,纵轴长度等分成Yzone=20/5=4份,即横向切分数量为5,纵向切分数量为4。
步骤S303:根据横向切分数量和纵向切分数量将目标图像中的非空白区域切分为多个区域。
假设横向切分数量为5,纵向切分数量为4,则从上到下、从左至右地将目标图像中的非空白区域等分为5*4=20个区域。
将目标图像中的非空白区域切分为多个区域后,需要从多个区域中确定出目标区域,接下来对上述实施例中的“S202b-2:从多个区域中确定出目标区域”的实现过程进行介绍。
请参阅图4,示出了从多个区域中确定出目标区域的实现过程的流程示意图,可以包括:
步骤S401:确定多个区域中每个区域的文本特征和/或语义特征。
其中,一个区域的文本特征和/或语义特征能够表征该区域的重要度。
具体的,一个区域的文本特征用于表征弹窗内的内容与该区域中的内容在文本层面的相似度,其具体通过词语的重要程度和词语的特异性等方面表征,一个区域的语义特征用于表征弹窗内的内容与该区域中的内容在语义层面的相似度。
需要说明的是,上述提及的词语的特异性指的是,词频高的词语的重要性比词频低的词语的重要度低,比如,“今天早上我吃了两个苹果和一个梨子”,这句话中的“个”为高频词,“我”、“苹果”、“梨子”为低频词,但“个”的重要性却比“我”、“苹果”、“梨子”的重要性低。
以下以多个区域中的一个区域(用d表示)为例,对确定区域d的文本特征和语义特征的过程进行介绍:
确定区域d的文本特征的过程可以包括:确定区域d对应的关键词频度和词频-逆文档频度TF-IDF,根据区域d对应的关键词频度和TF-IDF确定区域d的文本特征。
其中,区域d对应的关键词频度根据弹窗内的每个关键词在区域d中出现的频度确定,可选的,可将弹窗内的各个关键词分别在区域d中出现的频度求和,得到的值作为区域d对应的关键词频度。类似的,区域d对应的TF-IDF根据弹窗内的每个关键词在区域d中出现的TF-IDF确定,可选的,可将弹窗内的各个关键词分别在区域d中出现的TF-IDF求和,得到的值作为区域d对应的TF-IDF。
需要说明的是,一个关键词在区域d中出现的TF-IDF用来评估该词对于区域d的重要程度,其主要是从词语的特异性角度提供了关键词的特征。具体的,确定弹窗内的一个关键词t在区域d中出现的TF-IDF的过程如下:
通过下式计算关键词t在区域d中出现的频率TF(t,d):
Figure BDA0002284547940000101
其中,ft,d表示关键词t在区域d中出现的频度,分母表示区域d中内容的总字数。
若弹窗内的关键词在区域d中并未出现,则其频度为0,使用基本的IDF计算公式则会出现分母为0的情况,因此,对基本的IDF计算公式做平滑处理,使其不会出现分母为0时导致公式无意义的情况,具体公式如下:
Figure BDA0002284547940000102
IDF(t,D)用来度量关键词t在区域D中的重要性,其中,D表示切分得到的所有区域的集合,N表示切分得到的所有区域的总数量,nt表示D中包含关键词t的区域的总数量。
在获得TF(t,d)和IDF(t,D)后,通过下式确定关键词t在区域d中出现的TF-IDF:
TF-IDF(t,d,D)=TF(t,d)·IDF(t,D) (3)
在获得区域d对应的关键词频度和TF-IDF后,可将区域d对应的关键词频度和TF-IDF输入决策网络,将决策网络的输出作为区域d的文本特征。
需要说明的是,弹窗内的关键词可以人为指定,也可以通过以下方式获得:首先,将区域d内的所有文本内容进行分词,获得区域d中的各个词;然后,对区域d中的各个词进行词性标注,并从区域d中的各个词中获取词性为指定词性(比如动词、名词、形容词)的词作为候选关键词;接着,将确定出的候选关键词构建候选关键词图,其中,候选关键词图包括节点和节点间的边,节点为候选关键词,节点间的边根据共现关系构造,若两个节点对应的两个候选关键词在长度为K的窗口中共现,则两个节点之间存在边;最后,确定候选关键词图中各个节点的权重,根据各个节点的权重从所有的候选关键词中选取M个候选关键词作为区域d中的关键词,其中,M个候选关键词的权重均大于其它候选关键词的权重。
确定区域d的语义特征的过程可以包括:首先,分别对弹窗中的文本内容和区域d中的文本内容进行分词处理,获得弹窗中的各个词以及区域d中的各个词;然后,确定弹窗中的各个词在弹窗中出现的词频,并将弹窗中的各个词在弹窗中出现的词频组成一个向量,作为弹窗对应的词频向量,同样的,确定区域d中的各个词在区域d中出现的词频,并将区域d中的各个词在区域d中出现的词频组成一个向量,作为区域d对应的词频向量;最后计算弹窗对应的词频向量与区域d对应的词频向量的余弦相似度,作为区域d的语义特征。
步骤S402:根据多个区域中每个区域的文本特征和/或语义特征,从多个区域中确定出目标区域。
对于任一区域而言,在一种可能的实现方式中,可将该区域的文本特征作为该区域的重要度,在另一种可能的实现方式中,可将该区域的语义特征作为该区域的重要度,为了能够全面准确的对各个区域的重要度进行衡量,在一种较为优选的实现方式中,可将该区域的文本特征和语义特征加权求和,得到值作为该区域的重要度,其中,文本特征和语义特征的加权系数可根据具体情况设定。需要说明的是,一区域的重要度越高,表明其对用户越有用。
若将多个区域按重要度从高到低的顺序排序,则可将多个区域中、除前N个区域之外的区域确定为目标区域。其中,N可根据具体情况选取,比如,N可取3,即,将多个区域中、重要度非前3的区域确定为目标区域。当然,若将多个区域按重要度从低到高的顺序排序,则将多个区域中、除后N个区域之外的区域确定为目标区域。
在从切分得到的多个区域中确定出目标区域后,便可根据空白区域和目标区域确定弹窗显示区域。
请参阅图5,示出了上述实施例中的“步骤S202b-3:根据空白区域和多个区域中的目标区域确定弹窗显示区域”的具体实现过程的流程示意图,可以包括:
步骤S501:将空白区域和目标区域中各像素点的像素值均设置为指定值。
其中,指定值与目标图像中除空白区域和目标区域外的其它区域中各像素点的像素值均不同。
可选的,可将空白区域和目标区域中各像素点的像素值均设置为0,即,使空白区域和目标区域以黑色显示,将目标图像中的其它区域的像素值均设置为255,使这些区域以白色显示。当然本实施例并不限定于此,只要将空白区域和目标区域中所有像素点的像素值设置为同一值,且该值与目标图像中除空白区域和目标区域外的其它区域中各像素点的像素值均不同即可。
步骤S502:为设置像素值后的图像的每一行或每一列中像素值为指定值的连续像素组成的目标像素序列赋予序列标识。
其中,若位于相邻行或相邻列中的两个目标像素序列存在重叠,则两个目标像素序列具有相同的序列标识,若位于相邻行或相邻列中的两个目标像素序列不存在重叠,则两个目标像素序列具有不同的序列标识、具体的,为设置像素值后的图像的每一行或每一列中像素值为指定值的连续像素组成的目标像素序列赋予序列标识的过程可以包括:对目标图像逐行或逐列遍历:
对于当前遍历的行或列,确定像素值为指定值的连续像素组成的像素序列作为当前目标像素序列,并记录当前目标像素序列的起始点和结束点,以及当前像素序列所在行或列的标识;若当前遍历的行或列为首行或首列,则为当前目标像素序列赋予一序列标识;若当前遍历的行或列不为首行或首列,则确定当前目标像素序列与从前一已遍历行或列中确定的目标像素序列是否存在重叠,若是,则为当前目标像素序列赋予与其有重叠的目标像素序列的序列标识,若否,为当前目标像素序列赋予一新的序列标识。
下面结合图6对上述遍历过程进行说明:图6示出了包括4行、3列像素的图像,其中,图中的黑色区域为空白区域和目标区域,以逐行遍历为例:
遍历第1行:由于第1行的第2个像素和第3个像素的像素值均为0,因此,第1行的第2个像素与第3个像素组成目标像素序列,记录该目标像素序列所在行的行标识“1”以及该目标像素序列的位置信息[2,3],其中,行标识“1”表示第1行,[2,3]中的“2”代表起始位置,表示第2个像素,“3”代表结束位置,表示第3个像素,由于当前遍历的行为第1行,因此,第2个像素与第3个像素组成目标像素序列赋予一序列标识“1”;
接着遍历第2行:第2行的第1个像素的像素值为0,第2个像素的像素值为255,因此,第1个像素作为一个目标像素序列,记录该目标像素序列所在行的行标识“2”以及该目标像素序列的位置信息[1,1],由于其与第一行中标识为“1”的目标像素序列没有重叠,因此,为其赋予一新的序列标识“2”,由于第3个像素的像素值为0,且其前向相邻像素的像素值不为0,因此,第3个像素也作为一个目标像素序列,记录该目标像素序列所在行的行标识“2”以及该目标像素序列的位置信息[3,3],由于其与第1行中标识为“1”的目标像素序列有重叠,因此,为其赋予序列标识“1”;
遍历第3行:第3行的第2个像素和第3个像素的像素值均为0,因此,第3行的第2个像素与第3个像素组成目标像素序列,记录该目标像素序列所在行的行标识“3”以及该目标像素序列的位置信息[2,3],由于该目标像素序列与第2行中序列标识为“1”的目标像素序列存在重叠,因此,为该目标像素序列赋予序列标识“1”;
遍历第4行:第4行的第1个像素、第2个像素和第3个像素的像素值均为0,因此,第4行的第1个像素、第2个像素和第3个像素组成目标像素序列,记录该目标像素序列所在行的行标识“4”以及该目标像素序列的位置信息[1,3],由于该目标像素序列与第3行中序列标识为“1”的目标像素序列存在重叠,因此,为该目标像素序列赋予序列标识“1”。
步骤S503:将序列标识相同的像素序列所形成的区域确定为候选区域,并从确定出的所有候选区域中确定弹窗显示区域。
按上述方式对目标图像遍历完成后,根据序列标识确定候选区域,具体的,序列标识相同的所有区域组成一个候选区域,如此可获得所有的候选区域,假设有三个序列标识“1”、“2”和“3”,则将序列标识均为“1”的所有目标像素序列组成的区域确定为一个候选区域,将序列标识均为“2”的所有目标像素序列组成的区域确定为一个候选区域,将序列标识均“3”的所有目标像素序列组成的区域确定为一个候选区域,如此,可获得3个候选区域。在获得候选区域后,在一种可能的实现方式中,可将面积大于或等于弹窗初始化面积的任一候选区域确定为弹窗显示区域,在另一种可能的实现方式中,可将面积最大的候选区域确定为弹窗显示区域。
请参阅图7,图7a的第一幅图为目标图像,其包括两个区域,下方的区域为空白区域,上方的区域为非空白区域,图7a中的第二幅图为将图7a中的第一幅图中的非空白区域切分为9个区域的示意图,图中标注的数字代表重要度,其中,标注“1”的区域重要度最高、标注“2”的区域次之,其它区域以此类推,将重要度非前三的区域作为目标区域,将重要度前三的区域以白色显示,重要度非前三的区域和空白区域以黑色显示,如图7a的第3幅图所示,对图7a中的第三幅图逐行遍历或逐列遍历,根据遍历结果可获得两个候选区域,第一个候选区域为标注“4”的区域,第二个候选区域为标注“5”、“6”、“7”、“8”、“9”的区域和空白区域所形成的区域,其中,第二个候选区域的面积最大,因此,可将第二个区域确定为弹窗显示区域。图7b中9个区域的重要度情况与图7a不同,因此,最终获得的候选区域也不同,具体的,获得的候选区域有两个,第一个候选区域为标注“4”、“8”、9”的区域和空白区域所形成的区域,第二个候选区域为标注“5”、“6”、“7”的区域所形成的区域,由于第一个候选区域的面积最大,因此,可将第一个候选区域确定为弹窗显示区域。对于图7c而言,最终获得一个候选区域,即标注“5”、“6”、“4”、“7”、“8”、“9”的区域和空白区域所形成的区域,直接将该区域确定为弹窗显示区域,对于图7d而言,最终获得两个候选区域,第一个候选区域为标注“4”、“6”的区域所形成的区域,第二个候选区域为标注“5”、“7”、“8”、“9”的区域和空白区域所形成的区域,由于第二个候选区域的面积最大,因此,可将第二个候选区域确定为弹窗显示区域。
通过上述实施例提供的方法可确定出弹窗显示区域,在确定出弹窗显示区域后,进一步根据弹窗位置信息确定弹窗在弹窗显示区域中的显示位置。接下来对上述实施例中的“步骤S203:根据弹窗位置信息确定弹窗在弹窗显示区域中的显示位置”进行介绍。
根据弹窗位置信息确定弹窗在弹窗显示区域中的显示位置的过程可以包括:确定与弹窗位置有关的每个参数的信息熵;根据每个参数的信息熵确定每个参数的权重,根据每个参数和每个参数的权重,确定弹窗在弹窗显示区域中的显示位置。
可选的,本实施例中的弹窗位置信息可以但不限定为包括以下信息中的一种或多种的组合:光标位置信息、目标图像中非空白区域的已显示尺寸信息、用户注视视线信息,优选的,弹窗位置信息同时包括上述的三种信息,以下分别对这三种信息进行介绍。
光标位置信息为表征当前光标所在位置的信息,其可通过光标位置向量表征,光标位置向量通过当前光标所在的像素行、像素列以及当前光标所占用的像素行数、像素列数确定,光标位置向量可表示为[x,y,z,t],其中,x表示光标所在的像素行,y表示光标所在的像素列,z表示光标所占用的像素行数,t表示光标所占用的像素列数。示例性的,当前光标位于第三像素行和第五像素列处,且该光标占用1个像素行和1个像素列,则光标位置向量为[3,5,1,1]。
目标图像中非空白区域的已显示尺寸信息为表征目标图像中非空白区域的已显示尺寸的信息,已显示尺寸信息通过已显示尺寸向量表征,已显示尺寸向量通过目标图像中非空白区域的上边界所在的像素行数、左边界所在的像素列数以及目标图像中非空白区域所占用的像素行数、像素列数得到的,已显示尺寸向量可表示为[m,n,k,l],其中,m表示目标图像中非空白区域的上边界所在的像素行数,n表示目标图像中非空白区域的左边界所在的像素列数,k表示目标图像中非空白区域所占用的像素行数,l表示目标图像中非空白区域所占用的像素列数。示例性的,若目标图像中的非空白区域为第3像素行与第5像素行、第4像素列与第5像素列形成的区域,则已显示尺寸向量为[3,4,2,1]。
用户注视视线信息为表征用户注视视线的信息,其可通过用户注视视线向量表征。考虑到人眼的结构以及注视的习惯,用户注视视线向量可通过双眼和光标之间的连线与光标所在水平线之间的夹角,以及双眼所占的像素行数和像素列数确定,用户注视视线向量可表示为[a,b,c,d],其中,a表示左眼与光标之间的连线与光标所在水平线之间的夹角,b表示右眼与光标之间的连线与光标所在水平线之间的夹角,c表示左眼所占的像素行数与右眼所占的像素行数中的最大行数,d为左眼所占的像素列数与右眼所占的像素列数中的最大列数。为了便于计算,通常将上述的夹角归一化为0-1之间的数据,归一化方式可以为,用夹角除以360°。示例性的,左眼与光标之间的连线与光标所在水平线之间的夹角为60°,右眼与光标之间的连线与光标所在水平线之间的夹角为90°,左、右眼所占的像素行数为分别为3、5,左、右眼所占的像素列数分别为4、5,则用户注视视线向量为[0.17,0.25,5,5]。
以下以弹窗位置信息包括光标位置信息、目标图像中非空白区域的已显示尺寸信息、用户注视视线信息为例,对上述“根据弹窗位置信息确定弹窗在弹窗显示区域中的显示位置”的具体过程进行说明:
光标位置信息通过光标位置向量X1表征,目标图像中非空白区域的已显示尺寸信息通过已显示尺寸向量X2表征,用户注视视线信息通过用户注视视线向量X3表征,X1、X2和X3本质上是三个变量,这三个变量的变化均是随机的,对于任一变量而言,该变量的信息熵越小,其能够提供的信息量越大,那么其在确定弹窗显示位置时所起的作用也就越大,也就是说,该变量的权重越大,基于此,本实施例根据变量的信息熵确定各个变量的权重,进而根据变量和变量的权重确定弹窗显示位置。
假设变量Xi=[x1,x2,x3,x4](i从1到3),首先将X1~X3分别根据下式(4)进行标准化:
yji=[xji-min(Xi)]/[max(Xi)-min(Xi)] (4)
其中,xji为Xi中的第j个元素(j从1到4),min(Xi)为Xi中的最小值,max(Xi)为Xi中的最大值。
对X1~X3进行标准化后,获得Y1、Y2、Y3,其中,Yi=[y1i,y2i,y3i y4i]接下来分别根据下式(5)计算Y1~Y3的信息熵E1~E3
Figure BDA0002284547940000161
获得Y1~Y3的信息熵E1~E3后,根据下式(6)计算各个参数的权重W1~W3
Wi=(1-Ei)/[k-(E1+E2+E3)] (6)
最后,根据光标位置向量X1、已显示尺寸向量X2和用户注视视线向量X3,以及光标位置向量X1对应的权重W1、已显示尺寸向量X2对应的权重W2和用户注视视线向量X3对应的权重W3确定弹窗在弹窗显示区域中的显示位置。具体的,可利用下式确定弹窗在弹窗显示区域中的显示位置:
[Tt,Tl,Th,Tw]=W1*X1+W2*X2+W3*X3 (7)
其中,Tt和Tl分别表示弹窗距离上侧、左侧的像素值,Th和Tw分别表示弹窗的高度和宽度。
需要说明的是,由于光标位置向量、已显示尺寸向量和用户注视视线向量中的值所表达的物理意义均是按照距离上边界的像素值、距离左边界的像素值、所占用像素行数、所占像素列数的顺序获取的,通过将这三者进行加权计算,可以得到弹窗距离上边界的像素值、距离左边界的像素值、弹窗所占像素行数(即弹窗高度)和弹窗所在像素列数(即弹窗宽度)。
在确定出弹窗在弹窗显示区域中的显示位置后,将弹窗显示在该显示位置处,可选的,在显示弹窗时,弹窗的尺寸可以根据其显示内容的多少进行扩大和缩小,以使得弹窗尺寸与弹窗内的内容自适应,比如,在语音输入场景中,若语音尚未输入结束,但弹窗却被已识别文本占满,则可分别将弹窗的长和宽分别延长一定长度,以此类推,直至弹窗内能够显示语音输入结束后的所有识别文本。同样地,若语音输入结束,但所有的识别文本并未将弹窗占满,则可将弹窗的长和宽自动缩小,以使弹窗被识别文本占满。
另外,本实施例可以根据需要对弹窗添加垂直或水平滚动条,以便用户可以拖动垂直或水平滚动条来改变弹窗内的当前显示内容,还可以根据切分区域的重要性确定弹窗的显示形态、背景颜色等信息,以降低弹窗对于重要信息的影响。
本申请实施例提供的弹窗位置确定方法,在目标界面中空白区域的面积大于或等于弹窗初始化面积时,将空白区域作为弹窗显示区域,在目标界面中空白区域的面积小于弹窗初始化面积时,将非空白区域中非重要的区域或者非重要的区域与空白区域的拼接区域作为弹窗显示区域,将弹窗显示在上述的弹窗显示区域不会遮挡对用户而言比较重要的信息或者用户当前需要参考的信息,用户体验较好。
与上述弹窗显示位置确定方法相对应,本申请实施例还提供了一种弹窗显示位置确定装置,请参阅图8,示出了该弹窗显示位置确定装置的结构示意图,该装置可以包括:图像获取模块801、空白区域检测模块802和弹窗显示位置确定模块803。
图像获取模块801,用于获取目标界面的图像,作为目标图像。
空白区域检测模块802,用于从所述目标图像中检测出空白区域。
弹窗显示位置确定模块803,用于根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置。
在本申请实施例提供的弹窗位置确定装置确定出的显示位置处显示弹窗,不会遮挡对用户而言比较重要或者用户当前需要参考的信息,用户体验较好。
可选的,上述实施例提供的弹窗显示位置确定装置中的弹窗显示位置确定模块803可以包括:弹窗显示区域确定子模块和弹窗显示位置确定子模块。
弹窗显示区域确定子模块,用于若所述空白区域的面积大于或等于所述弹窗初始化面积,则将所述空白区域确定为弹窗显示区域;若所述空白区域的面积小于所述弹窗初始化面积,则将所述目标图像中的非空白区域切分为多个区域,从所述多个区域中确定出目标区域,根据所述空白区域和所述多个区域中的目标区域确定弹窗显示区域,其中,所述多个区域中的目标区域的重要度低于所述多个区域中非目标区域的重要度;
弹窗显示位置确定子模块,用于根据弹窗位置信息确定弹窗在所述弹窗显示区域中的显示位置,其中,所述弹窗位置信息包括至少一个与弹窗位置有关的参数。
可选的,上述的弹窗位置信息包括以下信息中的一种或多种:光标位置信息、所述目标图像中非空白区域的已显示尺寸信息、用户注视视线信息。
可选的,上述的弹窗显示位置确定子模块,具体用于确定每个所述参数的信息熵;根据每个所述参数的信息熵,确定每个所述参数的权重;根据每个所述参数和每个所述参数的信息熵,确定弹窗在所述弹窗显示区域中的显示位置。
可选的,上述的弹窗显示区域确定子模块中包括:边缘检测子模块、切分数量确定子模块和区域切分子模块。
边缘检测子模块,用于对所述目标图像中的非空白区域进行边缘检测,获得边缘点。
切分数量确定子模块,用于根据所述边缘点确定横向切分数量和纵向切分数量。
区域切分子模块,用于根据所述横向切分数量和所述纵向切分数量,将所述目标图像中的非空白区域切分为多个区域。
可选的,上述的弹窗显示区域确定子模块中包括:特征确定子模块和目标区域确定子模块。
特征确定子模块,用于确定所述多个区域中每个区域的文本特征和/或语义特征,其中,一个区域的文本特征和/或语义特征能够表征该区域的重要度。
目标区域确定子模块,用于根据所述多个区域中每个区域的文本特征和/或语义特征,从所述多个区域中确定出目标区域。
可选的,上述的弹窗显示区域确定子模块中包括:像素设置子模块、图像处理子模块和区域确定子模块。
像素设置子模块,用于将所述目标图像中的所述空白区域和所述目标区域中各像素点的像素值均设置为一指定值。
其中,指定值与目标图像中除空白区域和目标区域外的其它区域中各像素点的像素值均不同。
图像处理子模块,用于为设置像素值后的图像的每一行或每一列中,像素值为指定值的连续像素组成的目标像素序列赋予序列标识,其中,若位于相邻行或相邻列中的两个目标像素序列存在重叠,则两个目标像素序列具有相同的序列标识,若位于相邻行或相邻列中的两个目标像素序列不存在重叠,则两个目标像素序列具有不同的序列标识;
区域确定子模块,用于将序列标识相同的像素序列所组成的区域确定为候选区域,并从确定出的所有候选区域中确定弹窗显示区域。
本申请实施例还提供了一种弹窗显示位置确定设备,请参阅图9,示出了该弹窗显示位置确定的结构示意图,该弹窗显示位置确定可以包括:至少一个处理器901,至少一个通信接口902,至少一个存储器903和至少一个通信总线904;
在本申请实施例中,处理器901、通信接口902、存储器903、通信总线904的数量为至少一个,且处理器901、通信接口902、存储器903通过通信总线904完成相互间的通信;
处理器901可能是一个中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路等;
存储器903可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory)等,例如至少一个磁盘存储器;
其中,存储器存储有程序,处理器可调用存储器存储的程序,所述程序用于:
获取目标界面的图像,作为目标图像;
从所述目标图像中检测出空白区域;
根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置。
可选的,所述程序的细化功能和扩展功能可参照上文描述。
本申请实施例还提供一种可读存储介质,该可读存储介质可存储有适于处理器执行的程序,所述程序用于:
获取目标界面的图像,作为目标图像;
从所述目标图像中检测出空白区域;
根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种弹窗显示位置确定方法,其特征在于,包括:
获取目标界面的图像,作为目标图像;
从所述目标图像中检测出空白区域;
根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置;
其中,根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置,包括:
若所述空白区域的面积小于所述弹窗初始化面积,则将所述目标图像中的非空白区域切分为多个区域,从所述多个区域中确定出目标区域,根据所述空白区域和所述多个区域中的目标区域确定弹窗显示区域,其中,所述多个区域中的目标区域的重要度低于所述多个区域中非目标区域的重要度;
根据弹窗位置信息确定弹窗在所述弹窗显示区域中的显示位置,其中,所述弹窗位置信息包括至少一个与弹窗位置有关的参数。
2.根据权利要求1所述的弹窗显示位置确定方法,其特征在于,所述根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置,包括:
若所述空白区域的面积大于或等于所述弹窗初始化面积,则将所述空白区域确定为弹窗显示区域。
3.根据权利要求2所述的弹窗显示位置确定方法,其特征在于,所述弹窗位置信息包括以下信息中的一种或多种:
光标位置信息、所述目标图像中非空白区域的已显示尺寸信息、用户注视视线信息。
4.根据权利要求2所述的弹窗显示位置确定方法,其特征在于,所述根据弹窗位置信息确定弹窗在所述弹窗显示区域中的显示位置,包括:
确定每个所述参数的信息熵;
根据每个所述参数的信息熵,确定每个所述参数的权重;
根据每个所述参数和每个所述参数的信息熵,确定弹窗在所述弹窗显示区域中的显示位置。
5.根据权利要求2所述的弹窗显示位置确定方法,其特征在于,所述将所述目标图像中的非空白区域切分为多个区域,包括:
对所述目标图像中的非空白区域进行边缘检测,获得边缘点;
根据所述边缘点确定横向切分数量和纵向切分数量;
根据所述横向切分数量和所述纵向切分数量,将所述目标图像中的非空白区域切分为多个区域。
6.根据权利要求2所述的弹窗显示位置确定方法,其特征在于,所述从所述多个区域中确定出目标区域,包括:
确定所述多个区域中每个区域的文本特征和/或语义特征,其中,一个区域的文本特征和/或语义特征能够表征该区域的重要度;
根据所述多个区域中每个区域的文本特征和/或语义特征,从所述多个区域中确定出目标区域。
7.根据权利要求2所述的弹窗显示位置确定方法,其特征在于,所述根据所述空白区域和所述多个区域中的目标区域确定弹窗显示区域,包括:
将所述目标图像中的所述空白区域和所述目标区域中各像素点的像素值均设置为一指定值,其中,所述指定值与所述目标图像中除所述空白区域和所述目标区域外的其它区域中各像素点的像素值均不同;
为设置像素值后的图像的每一行或每一列中,像素值为指定值的连续像素组成的目标像素序列赋予序列标识,其中,若位于相邻行或相邻列中的两个目标像素序列存在重叠,则两个目标像素序列具有相同的序列标识,若位于相邻行或相邻列中的两个目标像素序列不存在重叠,则两个目标像素序列具有不同的序列标识;
将序列标识相同的像素序列所组成的区域确定为候选区域,并从确定出的所有候选区域中确定弹窗显示区域。
8.一种弹窗显示位置确定装置,其特征在于,包括:图像获取模块、空白区域检测模块和弹窗显示位置确定模块;
所述图像获取模块,用于获取目标界面的图像,作为目标图像;
所述空白区域检测模块,用于从所述目标图像中检测出空白区域;
所述弹窗显示位置确定模块,用于根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置;
其中,所述弹窗显示位置确定模块,用于根据所述空白区域的面积和预设的弹窗初始化面积,确定弹窗在所述目标界面中的显示位置,包括:
若所述空白区域的面积小于所述弹窗初始化面积,则所述弹窗显示位置确定模块,还用于将所述目标图像中的非空白区域切分为多个区域,从所述多个区域中确定出目标区域,根据所述空白区域和所述多个区域中的目标区域确定弹窗显示区域,其中,所述多个区域中的目标区域的重要度低于所述多个区域中非目标区域的重要度;
所述弹窗显示位置确定模块,还用于根据弹窗位置信息确定弹窗在所述弹窗显示区域中的显示位置,其中,所述弹窗位置信息包括至少一个与弹窗位置有关的参数。
9.一种弹窗显示位置确定设备,其特征在于,包括:存储器和处理器;
所述存储器,用于存储程序;
所述处理器,用于执行所述程序,实现如权利要求1~7中任一项所述的弹窗显示位置确定方法的各个步骤。
10.一种可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现如权利要求1~7中任一项所述的弹窗显示位置确定方法的各个步骤。
CN201911154942.4A 2019-11-22 2019-11-22 一种弹窗位置确定方法、装置、设备及存储介质 Active CN110865865B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911154942.4A CN110865865B (zh) 2019-11-22 2019-11-22 一种弹窗位置确定方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911154942.4A CN110865865B (zh) 2019-11-22 2019-11-22 一种弹窗位置确定方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN110865865A CN110865865A (zh) 2020-03-06
CN110865865B true CN110865865B (zh) 2023-01-13

Family

ID=69655253

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911154942.4A Active CN110865865B (zh) 2019-11-22 2019-11-22 一种弹窗位置确定方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN110865865B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021248493A1 (zh) * 2020-06-12 2021-12-16 深圳传音控股股份有限公司 消息展示方法、移动终端以及计算机可读存储介质
CN111953924B (zh) * 2020-08-21 2022-03-25 杨文龙 基于图像处理的视频窗口调整方法、装置、介质及系统
CN112199005A (zh) * 2020-10-22 2021-01-08 Tcl通讯(宁波)有限公司 内容显示方法、装置、存储介质及移动终端
CN112596828A (zh) * 2020-12-15 2021-04-02 平安普惠企业管理有限公司 基于应用的弹窗生成方法、装置、电子设备及存储介质
CN112859920B (zh) * 2021-01-19 2022-04-15 济南市政公用资产管理运营有限公司 基于大数据的智慧城市管理方法
CN113138824A (zh) * 2021-04-26 2021-07-20 北京沃东天骏信息技术有限公司 一种弹窗显示方法和装置
TWI787885B (zh) * 2021-06-25 2022-12-21 凌華科技股份有限公司 彈出視窗按鈕的非侵入式偵測方法及裝置
CN113596354B (zh) * 2021-07-23 2022-08-19 腾讯科技(深圳)有限公司 图像处理方法、装置、计算机设备及存储介质
CN113342454B (zh) * 2021-08-05 2021-11-16 北京金堤科技有限公司 用于确定详情卡片位置的方法和装置
CN113934483A (zh) * 2021-08-31 2022-01-14 维沃移动通信有限公司 弹框显示方法及装置
CN115801943B (zh) * 2021-09-08 2024-06-14 华为技术有限公司 显示方法、电子设备及存储介质
CN114416005A (zh) * 2022-01-07 2022-04-29 深圳Tcl新技术有限公司 界面显示方法、装置及计算机可读存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6760048B1 (en) * 1999-06-15 2004-07-06 International Business Machines Corporation Display of occluded display elements on a computer display
CN101334725A (zh) * 2007-06-29 2008-12-31 联想(北京)有限公司 提高窗口显示性能的方法与装置
EP2336851A2 (en) * 2009-12-21 2011-06-22 Samsung Electronics Co., Ltd. Image forming apparatus and character input method thereof
WO2017008552A1 (zh) * 2015-07-15 2017-01-19 腾讯科技(深圳)有限公司 一种多媒体信息弹窗的处理方法及设备、计算机存储介质
WO2017050145A1 (zh) * 2015-09-21 2017-03-30 阿里巴巴集团控股有限公司 一种执行完全状态模式的web app的方法和装置
CN107861759A (zh) * 2017-11-21 2018-03-30 广东欧珀移动通信有限公司 窗口控制方法、装置、终端设备及存储介质
WO2018086050A1 (zh) * 2016-11-11 2018-05-17 深圳市大疆创新科技有限公司 深度图生成方法和基于该方法的无人机
CN108289157A (zh) * 2017-01-26 2018-07-17 京瓷办公信息系统株式会社 显示输入装置以及图像形成装置
CN108322788A (zh) * 2018-02-09 2018-07-24 武汉斗鱼网络科技有限公司 一种视频直播中的广告展示方法及装置
CN108920354A (zh) * 2018-05-07 2018-11-30 上海陆家嘴国际金融资产交易市场股份有限公司 埋点管理方法、装置、计算机设备和存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180284954A1 (en) * 2017-03-30 2018-10-04 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Identifying a target area to display a popup graphical element

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6760048B1 (en) * 1999-06-15 2004-07-06 International Business Machines Corporation Display of occluded display elements on a computer display
CN101334725A (zh) * 2007-06-29 2008-12-31 联想(北京)有限公司 提高窗口显示性能的方法与装置
EP2336851A2 (en) * 2009-12-21 2011-06-22 Samsung Electronics Co., Ltd. Image forming apparatus and character input method thereof
WO2017008552A1 (zh) * 2015-07-15 2017-01-19 腾讯科技(深圳)有限公司 一种多媒体信息弹窗的处理方法及设备、计算机存储介质
WO2017050145A1 (zh) * 2015-09-21 2017-03-30 阿里巴巴集团控股有限公司 一种执行完全状态模式的web app的方法和装置
WO2018086050A1 (zh) * 2016-11-11 2018-05-17 深圳市大疆创新科技有限公司 深度图生成方法和基于该方法的无人机
CN108289157A (zh) * 2017-01-26 2018-07-17 京瓷办公信息系统株式会社 显示输入装置以及图像形成装置
CN107861759A (zh) * 2017-11-21 2018-03-30 广东欧珀移动通信有限公司 窗口控制方法、装置、终端设备及存储介质
CN108322788A (zh) * 2018-02-09 2018-07-24 武汉斗鱼网络科技有限公司 一种视频直播中的广告展示方法及装置
CN108920354A (zh) * 2018-05-07 2018-11-30 上海陆家嘴国际金融资产交易市场股份有限公司 埋点管理方法、装置、计算机设备和存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Pop through mouse button interactions;obert Zeleznik ET AL;《Proceedings of the 14th annual ACM symposium on User interface software and technology》;20011130;全文 *
基于深度图像利用遮挡信息确定下一最佳观测方位;张世辉等;《计算机学报》;20151215(第12期);全文 *

Also Published As

Publication number Publication date
CN110865865A (zh) 2020-03-06

Similar Documents

Publication Publication Date Title
CN110865865B (zh) 一种弹窗位置确定方法、装置、设备及存储介质
US10628494B2 (en) Maximizing content item information on a search engine results page
EP4276659A1 (en) Method and apparatus for information display, and non-volatile computer storage medium
US20160140136A1 (en) Search Recommendation Method and Apparatus
CN110321845B (zh) 一种从视频中提取表情包的方法、装置及电子设备
US20080021773A1 (en) Method for displaying expanded advertisement
US8907972B2 (en) Image processing device and method
US11080348B2 (en) System and method for user-oriented topic selection and browsing
US11710315B2 (en) Method, electronic apparatus and storage medium for detecting a static logo of a video
EP3408752B1 (en) Object management and visualization using a computing device
CN110708568B (zh) 一种视频内容突变检测方法及装置
CN113822898A (zh) 图像的智能裁剪
CN112732974A (zh) 一种数据处理方法、电子设备及存储介质
EP3037985A1 (en) Search method and system, search engine and client
CN109582421A (zh) 一种页面显示方法、装置和设备
CN111124111A (zh) 一种处理方法、电子设备
CN115004180A (zh) 信息推送方法、装置、电子设备及存储介质
JP5255483B2 (ja) オブジェクトの選択を容易にするための方法、装置およびプログラム
CN112883942A (zh) 手写字符的评价方法、装置、电子设备和计算机存储介质
US10331739B2 (en) Video search apparatus, video search method, and non-transitory computer readable medium
RU2595920C2 (ru) Фрейм обозревателя с фокусированием на веб-сайте
CN110381359A (zh) 一种视频处理方法、装置、计算机设备及存储介质
CN114598921A (zh) 视频帧提取方法、装置、终端设备和存储介质
CN113849111A (zh) 图像处理方法及装置
CN110309361B (zh) 一种视频评分的确定方法、推荐方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant