CN111914197A - 一种图层数据处理方法、装置及存储介质 - Google Patents
一种图层数据处理方法、装置及存储介质 Download PDFInfo
- Publication number
- CN111914197A CN111914197A CN201910385215.2A CN201910385215A CN111914197A CN 111914197 A CN111914197 A CN 111914197A CN 201910385215 A CN201910385215 A CN 201910385215A CN 111914197 A CN111914197 A CN 111914197A
- Authority
- CN
- China
- Prior art keywords
- layer
- rule
- merging rule
- information
- pair
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/957—Browsing optimisation, e.g. caching or content distillation
- G06F16/9577—Optimising the visualization of content, e.g. distillation of HTML documents
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明实施例公开一种图层数据处理方法、装置及存储介质,其中,方法包括:从显示区域的多个初始图层中确定图层对;图层对包括所述多个初始图层中的任意两个初始图层;将图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将目标图层对中的两个初始图层进行组合,得到组合图层;将组合图层和剩余图层确定为初始图层,直到显示区域中不存在组合置信度大于目标置信度的图层对时,输出与组合图层相关联的组合图像;剩余图层为多个初始图层中除组合图层外的初始图层。采用本发明实施例,可以提高图层组合的效率和准确度。
Description
技术领域
本发明涉及互联网技术领域,尤其涉及一种图层数据处理方法、装置及存储介质。
背景技术
当前的图层处理任务可以将目标用户所选取的图层进行合成,换言之,终端可以将目标用户当前所选中的图层视为待合成的图层,从而可以在检测到目标用户针对这些待合成的图层所触发的合成操作时,进一步对所选中的图层进行合成。然而,当该图层处理任务中存在大量的需要合成的图层时,将会增加该目标用户在这些图层中找寻待合成的图层的难度,以至于会存在较长的人机交互时长,进而降低了图层合成的效率。当需要对大量图层中的部分图层(例如,图层A和图层B)进行合并时,通过人工选取的方式将难以准确并快速地从大量图层中定位到需要合成的图层A和图层B,从而存在误选择的现象,以至于会降低图层合并的准确度。
发明内容
本发明实施例提供一种图层数据处理方法、装置及存储介质,可以提高图层合成的效率,并可以提高图层合并的准确度。
本发明实施例一方面提供了一种图层数据处理方法,所述方法包括:
从显示区域的多个初始图层中确定图层对;所述图层对包括所述多个初始图层中的任意两个初始图层;
将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
将所述组合图层和剩余图层确定为初始图层,直到所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。
其中,所述图层对中的两个初始图层包含第一图层和第二图层;
在所述将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层之前,所述方法还包括:
获取所述图层对对应的图层合并规则中的每个合并规则,并将与所述每个合并规则相关联的第一图层的图层参数分别确定为第一图层参数,并将与所述每个合并规则相关联的第二图层的图层参数确定为第二图层参数;
基于所述每个合并规则、每个第一图层参数、每个第二图层参数,确定所述图层对对应的组合置信度。
其中,所述基于所述每个合并规则、每个第一图层参数、每个第二图层参数,确定所述图层对对应的组合置信度,包括:
根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息;
获取所述每个合并规则对应的权重值,并基于所述每个合并规则对应的权重值以及所述图层对在相应合并规则时的置信度信息,确定所述图层对对应的组合置信度。
其中,所述图层合并规则包含第一合并规则,与所述第一合并规则相关联的第一图层参数是由所述第一图层在所述显示区域中的第一位置信息、第一尺寸信息和扩增尺寸信息所确定的;与所述第一合并规则相关联的第二图层参数是由所述第二图层在所述显示区域中的第二位置信息、第二尺寸信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
根据所述第一图层参数中的第一位置信息、第一尺寸信息、扩增尺寸信息、所述第二图层参数中的第二位置信息、第二尺寸信息,在所述显示区域中确定所述第一图层与所述第二图层之间的参考区域;所述参考区域用于描述所述第一图层与所述第二图层之间的交叠关系;
基于所述参考区域对应的交叠关系和所述第一合并规则对应的第一映射函数,确定所述图层对在所述第一合并规则时的置信度信息。
其中,所述图层合并规则包含第二合并规则;与所述第二合并规则相关联的第一图层参数是由所述第一图层所在区域的第一尺寸信息所确定的;与所述第二合并规则相关联的第二图层参数是由所述第二图层所在区域的第二尺寸信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
将所述第一图层参数中的第一尺寸信息与所述第二图层参数中的第二尺寸信息进行比较,并根据比较结果确定所述第一图层与所述第二图层之间的尺寸关系;
基于所述尺寸关系以及所述第二合并规则对应的第二映射函数,确定所述图层对在所述第二合并规则时的置信度信息。
其中,所述图层合并规则包含第三合并规则;与所述第三合并规则相关联的第一图层参数是由所述第一图层所在区域的第一中心位置信息和第一形状信息所确定的;与所述第三合并规则相关联的第二图层参数是由所述第二图层所在区域的第二中心位置信息和第二形状信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
根据所述第一图层参数中的第一中心位置信息、所述第二图层参数中的第二位置信息,确定所述第一图层与所述第二图层之间的水平位置关系;
基于所述水平位置关系、所述第一形状信息、所述第二形状信息,确定所述第一图层与所述第二图层之间的第一关联关系;
基于所述第一关联关系、所述第三合并规则对应的第二映射函数,确定所述图层对在所述第三合并规则时的置信度信息。
其中,所述图层合并规则包含第四合并规则;与所述第四合并规则相关联的第一图层参数是由所述第一图层所属的结构区域中的第一切片确定的;与所述第四合并规则相关联的第二图层参数是由所述第二图层所属的结构区域中的第二切片确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一切片、所述第二图层中的第二切片,确定所述第一图层与所述第二图层之间的第二关联关系;
基于所述第二关联关系、所述第四合并规则对应的第二映射函数,确定所述图层对在所述第四合并规则时的置信度信息。
其中,所述图层合并规则包含第五合并规则;与所述第五合并规则相关联的第一图层参数和第二图层参数均是由所述显示区域中第一图层与第二图层所属的最小公共父目录所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的所述第一图层到所述最小公共父目录的层级距离、所述第二图层参数中的所述第二图层到所述最小公共父目录的层级距离,确定所述第一图层与所述第二图层之间的层级距离关系;
基于所述层级距离关系、所述第五合并规则对应的第二映射函数,确定所述图层对在所述第五合并规则时的置信度信息。
其中,所述图层合并规则包含第六合并规则;与所述第六合并规则相关联的第一图层参数是由所述第一图层所属的第一组件确定的;与所述第六合并规则相关联的第二图层参数是由所述第二图层所属的第二组件确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一组件、所述第二图层参数中的第二组件,确定所述第一图层与所述第二图层之间的组件关联关系;
基于所述组件关联关系、所述第六合并规则对应的第二映射函数,确定所述图层对在所述第六合并规则时的置信度信息。
其中,所述图层合并规则包含第七合并规则;与所述第七合并规则相关联的第一图层参数是由所述第一图层所属区域的第一样式信息所确定的;与所述第七合并规则相关联的第二图层参数是由所述第二图层所属区域的第二样式信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第七合并规则获取所述显示区域对应的层叠样式表;所述层叠样式表中包含目标样式信息;
基于所述目标样式信息、所述第一图层参数中的第一样式信息,确定所述第一图层与所述层叠样式表之间的第一样式关系;
基于所述目标样式信息、所述第二图层参数中的第二样式信息,确定所述第二图层与所述层叠样式表之间的第二样式关系;
基于所述第一样式关系、所述第二样式关系,确定所述第一图层与所述第二图层之间的第三关联关系,并基于所述第三关联关系、所述第七合并规则对应的第二映射函数,确定所述图层对在所述第七合并规则时的置信度信息。
其中,所述图层合并规则包含第八合并规则;与所述第八合并规则相关联的第一图层参数是由所述第一图层所属的第一颜色属性所确定的;与所述第八合并规则相关联的第二图层参数是由所述第二图层所属的第二颜色属性所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一颜色属性,所述第二图层参数中的第二颜色属性,确定所述第一图层与所述第二图层之间的属性匹配关系;
基于所述属性匹配关系、所述第八合并规则对应的第二映射函数,确定所述图层对在所述第八合并规则时的置信度信息。
其中,所述基于所述第一图层参数中的第一颜色属性,所述第二图层参数中的第二颜色属性,确定所述第一图层与所述第二图层之间的属性匹配关系,包括:
若所述第一颜色属性和所述第二颜色属性均为单一颜色对应的颜色属性,则根据所述第一颜色属性对应的方差和、所述第二颜色属性对应的方差和,确定所述第一图层和所述第二图层之间的颜色匹配关系;
若所述第一颜色属性和所述第二颜色属性均为非单一颜色对应的颜色属性,则根据所述第一颜色属性对应的颜色复杂度、所述第二颜色属性对应的颜色复杂度,确定所述第一图层与所述第二图层之间的复杂度匹配关系。
其中,所述图层合并规则包含第九合并规则;与所述第九合并规则相关联的第一图层参数是由所述第一图层所在的第一图标标识确定的;与所述第九合并规则相关联的第二图层参数是由所述第二图层所在的第二图标标识确定的;所述第一图标标识对应的图标和所述第二图标标识对应的图标均是由目标网络模型所识别到的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一图标标识、所述第二图层参数中的第二图标标识,确定所述第一图层和所述第二图层之间的图标关联关系;
基于所述图标关联关系、所述第九合并规则对应的第二映射函数确定所述图层对在所述第九合并规则时的置信度信息。
本发明实施例一方面提供了一种图像图层数据处理装置,所述装置包括:
图层对确定模块,用于从显示区域的多个初始图层中确定图层对;所述图层对包括所述多个初始图层中的任意两个初始图层;
图层组合模块,用于将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
图像输出模块,用于将所述组合图层和剩余图层确定为初始图层,直到所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。
其中,所述图层对中的两个初始图层包含第一图层和第二图层;
所述装置还包括:
规则获取模块,用于获取所述图层对对应的图层合并规则中的每个合并规则,并将与所述每个合并规则相关联的第一图层的图层参数分别确定为第一图层参数,并将与所述每个合并规则相关联的第二图层的图层参数确定为第二图层参数;
置信度确定模块,用于基于所述每个合并规则、每个第一图层参数、每个第二图层参数,确定所述图层对对应的组合置信度。
所述置信度确定模块包括:
置信度确定单元,用于根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息;
组合度确定单元,用于获取所述每个合并规则对应的权重值,并基于所述每个合并规则对应的权重值以及所述图层对在相应合并规则时的置信度信息,确定所述图层对对应的组合置信度。
其中,所述图层合并规则为第一合并规则,与所述第一合并规则相关联的第一图层参数是由所述第一图层在所述显示区域中的第一位置信息、第一尺寸信息和扩增尺寸信息所确定的;与所述第一合并规则相关联的第二图层参数是由所述第二图层在所述显示区域中的第二位置信息、第二尺寸信息所确定的;
所述置信度确定单元包括
区域确定子单元,用于根据所述第一图层参数中的第一位置信息、第一尺寸信息、扩增尺寸信息、所述第二图层参数中的第二位置信息、第二尺寸信息,在所述显示区域中确定所述第一图层与所述第二图层之间的参考区域;所述参考区域用于描述所述第一图层与所述第二图层之间的交叠关系;
第一确定子单元,用于基于所述参考区域对应的交叠关系和所述第一合并规则对应的第一映射函数,确定所述图层对在所述第一合并规则时的置信度信息。
其中,所述图层合并规则包含第二合并规则;与所述第二合并规则相关联的第一图层参数是由所述第一图层所在区域的第一尺寸信息所确定的;与所述第二合并规则相关联的第二图层参数是由所述第二图层所在区域的第二尺寸信息所确定的;
所述置信度确定单元包括:
比较子单元,用于将所述第一图层参数中的第一尺寸信息与所述第二图层参数中的第二尺寸信息进行比较,并根据比较结果确定所述第一图层与所述第二图层之间的尺寸关系;
第二确定子单元,用于基于所述尺寸关系以及所述第二合并规则对应的第二映射函数,确定所述图层对在所述第二合并规则时的置信度信息。
其中,所述图层合并规则包含第三合并规则;与所述第三合并规则相关联的第一图层参数是由所述第一图层所在区域的第一中心位置信息和第一形状信息所确定的;与所述第三合并规则相关联的第二图层参数是由所述第二图层所在区域的第二中心位置信息和第二形状信息所确定的;
所述置信度确定单元包括:
中心确定子单元,用于根据所述第一图层参数中的第一中心位置信息、所述第二图层参数中的第二位置信息,确定所述第一图层与所述第二图层之间的水平位置关系;
形状确定子单元,用于基于所述水平位置关系、所述第一形状信息、所述第二形状信息,确定所述第一图层与所述第二图层之间的第一关联关系;
第三确定子单元,用于基于所述第一关联关系、所述第三合并规则对应的第二映射函数,确定所述图层对在所述第三合并规则时的置信度信息。
其中,所述图层合并规则包含第四合并规则;与所述第四合并规则相关联的第一图层参数是由所述第一图层所属的结构区域中的第一切片确定的;与所述第四合并规则相关联的第二图层参数是由所述第二图层所属的结构区域中的第二切片确定的;
所述置信度确定单元包括:
切片确定子单元,用于基于所述第一图层参数中的第一切片、所述第二图层中的第二切片,确定所述第一图层与所述第二图层之间的第二关联关系;
第四确定子单元,用于基于所述第二关联关系、所述第四合并规则对应的第二映射函数,确定所述图层对在所述第四合并规则时的置信度信息。
其中,所述图层合并规则包含第五合并规则;与所述第五合并规则相关联的第一图层参数和第二图层参数均是由所述显示区域中第一图层与第二图层所属的最小公共父目录所确定的;
所述置信度确定单元包括:
层级确定子单元,用于基于所述第一图层参数中的所述第一图层到所述最小公共父目录的层级距离、所述第二图层参数中的所述第二图层到所述最小公共父目录的层级距离,确定所述第一图层与所述第二图层之间的层级距离关系;
第五确定子单元,用于基于所述层级距离关系、所述第五合并规则对应的第二映射函数,确定所述图层对在所述第五合并规则时的置信度信息。
其中,所述图层合并规则包含第六合并规则;与所述第六合并规则相关联的第一图层参数是由所述第一图层所属的第一组件确定的;与所述第六合并规则相关联的第二图层参数是由所述第二图层所属的第二组件确定的;
所述置信度确定单元包括:
组件确定子单元,用于基于所述第一图层参数中的第一组件、所述第二图层参数中的第二组件,确定所述第一图层与所述第二图层之间的组件关联关系;
第六确定子单元,用于基于所述组件关联关系、所述第六合并规则对应的第二映射函数,确定所述图层对在所述第六合并规则时的置信度信息。
其中,所述图层合并规则包含第七合并规则;与所述第七合并规则相关联的第一图层参数是由所述第一图层所属区域的第一样式信息所确定的;与所述第七合并规则相关联的第二图层参数是由所述第二图层所属区域的第二样式信息所确定的;
所述置信度确定单元包括:
目标确定子单元,用于基于所述第七合并规则获取所述显示区域对应的层叠样式表;所述层叠样式表中包含目标样式信息;
样式确定子单元,用于基于所述目标样式信息、所述第一图层参数中的第一样式信息,确定所述第一图层与所述层叠样式表之间的第一样式关系;
所述样式确定子单元,还用于基于所述目标样式信息、所述第二图层参数中的第二样式信息,确定所述第二图层与所述层叠样式表之间的第二样式关系;
第七确定子单元,用于基于所述第一样式关系、所述第二样式关系,确定所述第一图层与所述第二图层之间的第三关联关系,并基于所述第三关联关系、所述第七合并规则对应的第二映射函数,确定所述图层对在所述第七合并规则时的置信度信息。
其中,所述图层合并规则包含第八合并规则;与所述第八合并规则相关联的第一图层参数是由所述第一图层所属的第一颜色属性所确定的;与所述第八合并规则相关联的第二图层参数是由所述第二图层所属的第二颜色属性所确定的;
所述置信度确定单元包括:
属性确定子单元,用于基于所述第一图层参数中的第一颜色属性,所述第二图层参数中的第二颜色属性,确定所述第一图层与所述第二图层之间的属性匹配关系;
第八确定子单元,用于基于所述属性匹配关系、所述第八合并规则对应的第二映射函数,确定所述图层对在所述第八合并规则时的置信度信息。
其中,所述属性确定子单元,具体用于若所述第一颜色属性和所述第二颜色属性均为单一颜色对应的颜色属性,则根据所述第一颜色属性对应的方差和、所述第二颜色属性对应的方差和,确定所述第一图层和所述第二图层之间的颜色匹配关系;
所述属性确定子单元,还具体用于若所述第一颜色属性和所述第二颜色属性均为非单一颜色对应的颜色属性,则根据所述第一颜色属性对应的颜色复杂度、所述第二颜色属性对应的颜色复杂度,确定所述第一图层与所述第二图层之间的复杂度匹配关系。
其中,所述图层合并规则包含第九合并规则;与所述第九合并规则相关联的第一图层参数是由所述第一图层所在的第一图标标识确定的;与所述第九合并规则相关联的第二图层参数是由所述第二图层所在的第二图标标识确定的;所述第一图标标识对应的图标和所述第二图标标识对应的图标均是由目标网络模型所识别到的;
所述置信度确定单元包括:
标识确定子单元,用于基于所述第一图层参数中的第一图标标识、所述第二图层参数中的第二图标标识,确定所述第一图层和所述第二图层之间的图标关联关系;
第九确定子单元,用于基于所述图标关联关系、所述第九合并规则对应的第二映射函数确定所述图层对在所述第九合并规则时的置信度信息。
本发明实施例一方面提供了一种计算机设备,所述计算机设备包括:处理器、存储器;
所述处理器与存储器相连,其中,所述存储器用于存储程序代码,所述处理器用于调用所述程序代码,以执行如本发明实施例一方面中的方法。
本发明实施例一方面提供了一种计算机存储介质,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,当所述处理器执行所述程序指令时执行如本发明实施例一方面中的方法。
由此可见,通过计算出的组合置信度可以快速地从显示区域所包含的图层对中找出能够进行合并的图层对,从而可以将找出的图层对中的两个初始图层进行自动组合,得到组合图层,进而可以有效地避免人工操作的繁琐,以提高图层组合的效率。其中,为了能够尽可能地从显示区域中找出所有能够进行合并的图层,可以重复执行前述的图层配对和组合步骤,直到显示在显示区域中的图层所构成的图层对的组合置信度均无法大于目标置信度时,可以确定当前显示在显示区域中的图层均无法进一步进行组合时,从而可以将最后一次组合得到的组合图层进行图像刻画,以输出最终的组合图像,进而可以有效地确保图层合并的准确度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种网络架构的结构示意图;
图2a和图2b是本发明实施例提供的一种输出组合图像的应用场景图;
图3是本发明实施例提供的一种图层数据处理方法的流程示意图;
图4是本发明实施例提供的一种显示区域的示意图;
图5是本发明实施例提供的另一种图层数据处理方法的示意图;
图6是本发明实施例提供的一种第一合并规则的应用场景;
图7是本发明实施例提供的一种第二合并规则的应用场景;
图8是本发明实施例提供的一种第三合并规则的应用场景;
图9是本发明实施例提供的一种第四合并规则的应用场景;
图10是本发明实施例提供的一种第五合并规则的应用场景;
图11是本发明实施例提供的一种第六合并规则的应用场景;
图12是本发明实施例提供的一种第七合并规则的应用场景;
图13是本发明实施例提供的一种第八合并规则的应用场景;
图14是本发明实施例提供的一种第九合并规则的应用场景;
图15a和图15b是本发明实施例提供的一种第一映射函数和第二映射函数的示意图;
图16是本发明实施例提供的一种图层数据处理装置的结构示意图;
图17是本发明实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参见图1,是本发明实施例提供的一种网络架构的结构示意图。如图1所示,所述网络架构可以包括应用服务器2000和用户终端集群,所述用户终端集群可以包括多个用户终端,如图1所示,具体可以包括用户终端3000a、用户终端3000b、用户终端3000c、…、用户终端3000n。
如图1所示,用户终端3000a、用户终端3000b、用户终端3000c、…、用户终端3000n可以分别与所述应用服务器2000进行网络连接,以便于每个用户终端可以通过该网络连接与应用服务器2000之间进行数据交互。
为便于理解,本发明实施例可以在图1所示的多个用户终端中选择一个用户终端作为目标用户终端,该目标用户终端可以包括:智能手机、平板电脑、桌上型电脑等携带图像数据处理功能的智能终端。例如,本发明实施例可以将图1所示的用户终端3000a作为所述目标用户终端,该目标用户终端中可以集成安装有携带上述图像数据处理功能的第一应用。当该第一应用运行于该目标用户终端中时,可以在该目标用户终端中执行图层处理任务,该图层处理任务可以理解为一种图层合并任务,或者元素合并任务。换言之,在该图层处理任务所对应的显示区域中所显示的内容可以统称为元素信息,在本发明实施例可以将一个元素信息理解为一个图层。
通过该图层合并任务可以快速从该目标应用对应的显示区域中准确地搜索出需要合成的元素信息,并可以将搜索到的这些满足合并条件的元素信息进行组合,从而可以绘制得到这些组合后的元素信息所对应的组合图像,并可以导出该组合图像,进而可以将所导出的组合图像上传到图1所示的应用服务器2000,以使该应用服务器2000可以将该组合图像作为其他应用(例如,第二应用)的素材信息。换言之,上述图1所示的服务器2000可以为该第二应用对应的后台服务器,此时,该目标用户终端可以理解为一个素材管理终端,即该目标用户终端中的第一应用可以理解为一种图层管理应用,通过该图层管理应用可以对后续显示在第二应用中的素材信息进行管理。
其中,第二应用可以理解为具有图像显示功能的应用,例如,社交应用、即时通讯应用、娱乐应用等。换言之,本发明实施例中的组合图像可以整体作为与其他应用具有关联关系的素材信息,比如,在社交应用中,应用服务器可以将该组合图像作为向其他用户终端对应的用户进行业务数据推荐时的业务数据信息(例如,文章、歌曲、游戏等互联网信息)中的素材信息(例如,图片素材信息),即当其他用户终端中的用户在该第二应用中请求到该业务数据信息时,可以进一步请求加载该业务数据信息中的图片素材信息,从而可以将该请求到的图片素材信息显示在该业务数据信息对应的显示界面中。
为便于理解,进一步地,请参见图2a和图2b,是本发明实施例提供的一种输出组合图像的应用场景图。如图2a所示的第一终端可以为上述集成有第一应用的目标用户终端,该第一终端中的第一显示界面可以为运行在第一应用中的图层处理任务所对应的显示区域。如图2a所示,该显示区域中可以包含:图2a所示的多个组合图层,例如,可以包含组合图层a、组合图层b、组合图层c、组合图层d。应当理解,该第一显示界面中的每个组合图层均是按照图2b所示的步骤S1至步骤S6对显示在该显示界面中的多个初始图层进行多次迭代组合后所确定的。
本发明实施例可以将需要进行评分估计的所有图层对中的两个图层统称为初始图层,为了确保可以从该第一显示界面中找出所有能够进行合并的图层(即初始图层),可以将上述图2a中第一显示界面中的每个组合图层整体视为新一轮评分估计中的初始图层,即可以在该新一轮评分估计的过程中,基于图2b所示的步骤S1得到多个初始图层,进而可以按照图2b所示的步骤S2从多个新的初始图层中确定出至少一个图层对(即可以在将该第一显示界面中的任意两个初始图层进行两两配对后得到6个图层对),并将获取到的至少一个图层对统称为图层对。从而可以基于步骤S3中的图层合并规则(该图层合并规则可以包含多个合并规则中的一种或多种合并规则),从而可以确定出每个图层对在相应合并规则时的置信度信息,通过将每个合并规则的置信度信息与相应合并规则的权重进行相乘运算,以求和得每个图层对的总得分,即本发明实施例可以将每个图层对的总得分统称为图层对的组合置信度;其中,组合置信度越大,则表明图层对中两个初始图层进行组合的可能性越大,反之,则说明图层对中的两个初始图层进行组合的可能性越低。进一步地,本发明实施例可以基于图2b所示的步骤S5判断这6个图层对的组合置信度是否大于目标置信度。应当理解,若这6个图层对中均不存在组合置信度大于目标置信度的图层对,即这6个图层对的组合置信度均不大于目标置信度,则说明该新一轮评分估计中的这4个初始图层中的任意两个初始图层均不能再进一步进行合并,即已经从该第一显示界面中找出所有能够进行合并的图层。此时,本发明实施例可以进一步执行图2b所示的步骤S7,即可以输出组合图层,该输出的组合图层可以为对该第一终端在上一轮评分估计过程中所得到的组合图层进行图像刻画所得到的,从而可以输出图2a所示的组合图层a对应的组合图像a、组合图层b对应的组合图像b、组合图层c对应的组合图像c、以及组合图层d对应的组合图像d。
应当理解,可选地,当第一显示界面中还有其他图层时,可以在该第一显示界面中将图2a所示的四个组合图层看做是一个新的初始图层,进而可以将这4个新的初始图层进行两两配对,还可以进一步将这4个新的初始图层中每一个初始图层与该第一显示界面中的剩余图层进行配对组合。若这4个新的初始图层之间已经不能再进行组合,且这四个新的初始图层中的任意一个初始图层均无法再与剩余图层中的任意一个初始图层进行组合时,也可以刻画得到该组合图层a对应的组合图像a、并可以刻画得到该组合图层b对应的组合图像b、还可以刻画得到该组合图层c对应的组合图像c、以及该组合图层d对应的组合图像d。在本发明实施例中,可以将最终刻画所得到的组合图像a、组合图像b、组合图像c、组合图像d称之为统称为组合图像或者图片信息,并可以将这些图片信息作为素材信息给到图2a所示的应用服务器,以使应用服务器可以将这些上述的组合图像存储到图2a所示的素材数据库中,即在该素材数据库中的素材信息30即为第一终端所上传的组合图像a,在该素材数据库中的素材信息40即为第一终端所上传的组合图像d,在该素材数据库中的素材信息50即为第一终端所上传的组合图像b,在该素材数据库中的素材信息60即为第一终端所上传的组合图像c。
如图2a所示,若该素材信息50为图2a所示的第二终端(即上述其他用户终端)所请求到的业务数据信息中的图片信息,当第二终端的用户在图2a所示的第二显示界面中浏览该业务数据信息时,可以向图2a所示的应用服务器发生图片请求指令,以便于该应用服务器可以从图2a所示的业务数据库中获取素材信息50,从而可以在应用服务器将该素材信息返回给第二终端时,可以在该第二终端的第二显示界面中加载并显示该素材信息50。
其中,应当理解,该第一应用的显示区域中可以包含大量的元素信息,且每个元素信息均可以称之为一个初始图层,在本发明实施例中,可以在获取到这些初始图层(即原始信息)时,在目标显示区域中建立这些元素信息对应的图像处理任务;此时,该图像处理任务可以用于将显示在显示区域中的每个图层进行两两配对,以通过上述图2b所示的图层合并规则从两两配对后的图层对中筛选出能够进行组合的图层对,作为目标图像对。该目标图层对可以理解为从该显示区域中所确定出一个或多个需要进行图层合并的图像对,进而可以将找出的目标图像对中的两个初始图层进行组合,以得到上述图2a所示的组合图层。
其中,本发明实施例中的图层合并规则可以包含图层相交程度规则、尺寸相似度规则、形状排列相似度规则、相同切片规则、层级距离相似度规则、基于最小公共父目录的层级距离相似度规则、相同组件规则、层叠样式表规则、颜色相似度规则、颜色复杂度规则、相同图标规则、等合并规则,每个合并规则均可以用于对两两配对后所得到的图层对进行评分,以得到相应图层对在每个合并规则时的置信度信息,从而可以通过每个合并规则对应的权重和计算出的图层对在每个合并规则时的置信度信息,得到上述组合置信度。
其中,为便于理解,本发明实施例可以从两两配对后所得到的图像对中选择一个图像对作为待处理图像对,该待处理图像对可以通过上述多种合并规则进行评分,从而可以得到每个合并规则对应的评分,即可以得到每个合并规则对应的置信度信息,进而可以将每个合并规则的权重与相应合并规则对应的置信度信息进行相乘之后在进行求和,以得到该待处理图像对对应的组合置信度。
应当理解,在本发明实施例中,对于两两配对后所得到的图像对中的剩余图像对而言,获取这些剩余图像对对应的组合置信度的方式可以参见前述获取待处理图像对对应的组合置信度的具体方式,这里将不再继续进行赘述。
其中,目标用户终端从多个初始图层中确定图层对、确定所述图层对的组合置信度,确定组合图层以及输出组合图像的具体过程可以参见如下图3至图14所对应的实施例。
进一步地,请参见图3,是本发明实施例提供的一种图层数据处理方法的流程示意图。如图3所示,所述方法至少包括:
步骤S101,从显示区域的多个初始图层中确定图层对;所述图层对包括所述多个初始图层中的任意两个初始图层;
具体地,图层数据处理装置在获取到第一应用对应的显示区域时,可以在该显示区域中输入一张承载有多个设计元素的设计稿,从而可以在该设计稿的显示区域中将每个设计元素称之为一个元素信息,也可以称之为一个初始图层。即该显示区域中可以包含多个初始图层,从而可以在该显示区域中将多个初始图层中的任意两个初始图层进行配对,从而可以配对得到一个或者多个图层对,从而可以将配对所得到的一个或者多个图层对统称为图层对。
可以理解的是,在该显示区域中的这些初始图层(即图层)可以以树形结构的形式组织起来。该树形结构所在的区域可以称之为树形区域,或者结构区域,应当理解,该结构区域可以为该显示区域中的一个子区域,并可以将该子区域称之为第一子区域。此外,该多个初始图层所在区域可以为该显示区域中的另一个子区域,该另一个子区域可以称之为第二子区域。可以理解的是,在该第二子区域中的每个初始图层均与第一子区域中的节点之间存在关联关系。即目标用户能够根据该树形结构中的节点,在该该第二子区域中找到相应的初始图层。换言之,对于目标用户而言,可以将该树形结构中的一个节点等效于一个初始图层。
为便于理解,进一步地,请参见图4,是本发明实施例提供的一种显示区域的示意图。如图4所示的显示区域中可以包含多个子区域,其中,图4所示的第一子区域为树形结构所在的区域,在该树形结构所在的区域中的每个节点均可以与图4所示的第二子区域中的图层进行对应,比如,当目标用户在图4所示的第一显示区域中对图层组B执行触发操作时,可以在第二子区域中显示该图层组B所包含的多个节点对应的初始图层。其中,所述多个节点可以为图4所示的图层1、图像2、图层3、图层4,即该目标用户可以在该第二子区域中看到一个笑脸,此时,该笑脸中的每个元素信息可以为图4所示的初始图层10、初始图层20、初始图层30、初始图层40。换言之,第一子区域(即树形区域)中的图层1可以对应于第二子区域中的初始图层10,树形区域中的图层2可以对应于第二子区域中的初始图层20,树形区域中的图层3可以对应于第二子区域中的初始图层30、树形区域中的图层4可以对应于第二子区域中的初始图层40。
应当理解,在图4所示的显示区域中,图层组B可以理解为树形区域中的一个叶节点,该叶节点下可以包含多个节点,每个节点即为一个图层。此时,该组合图层B对应的叶节点可以称之为多个节点的最小公共父目录;同理,对于每个叶节点而言,该树形区域中还可以存在包含多个叶节点对应的根节点,此时,该根节点也可以称之为每个叶节点的最小公共父目录。其中,该显示区域中的第三子区域可以用于显示该第二子区域的长度信息、宽度信息等。其中,该显示区域中的第四子区域,可以用于显示能够对多个初始图层进行调整的控件信息,比如,可以包含图4所示的置入控件,素材控件、创建组件控件等,其中,置入控件可以用于在该显示区域中输入该目标用户所需要的设计稿,素材控件可以用于从该显示区域中输出上述素材信息、创建组件控件可以用于在该显示区域中将所选取的初始图层设置为模板组件,以便于后续可以复用该创建好的模板组件,比如,可以复用该创建好的模板组件的样式信息。
如图4所示,该图层数据处理装置可以将图4所示的多个初始图层进行两两配对,比如,可以将初始图层10与初始图层20配对、初始图层10与初始图层30配对,初始图层10与初始图层40配对;初始图层20与初始图层30配对,初始图层20与初始图层40配对;初始图层30与初始图层40配对,从而可以在将图4所示的4个初始图层进行两两配对之后得到6个图层对,从而可以将这6个图层对统称为图层对,以便于进一步通过上述图2a所示的步骤S3中的图层合并规则计算该图层对对应的组合置信度。
其中,在计算图层对对应的组合置信度中,可以通过上述步骤S3中的任意一个合并规则计算组合置信度,此时,本发明实施例可以将用于计算组合置信度的这一个合并规则称之为目标合并规则,换言之,本发明实施例可以将该图层对在该目标合并规则时的置信度信息统称为该图层对对应的组合置信度,此时,该目标合并规则对应的权重值为1。
可选的,在计算图层对对应的组合置信度中,也可以通过上述步骤S3中的所有合并规则计算组合置信度,即此时,该组合置信度是由该图层对在每个合并规则时的置信度信息和每个合并规则对应的权重值所确定的,此时,每个合并规则分别对应的权重值之和为1。
由此可见,本发明实施例可以根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息;换言之,若所述图层对中的两个初始图层包含第一图层和第二图层;则所述图层数据处理装置可以获取所述图层对对应的图层合并规则中的每个合并规则,并将与所述每个合并规则相关联的第一图层的图层参数分别确定为第一图层参数,并将与所述每个合并规则相关联的第二图层的图层参数确定为第二图层参数;进一步地,该图层数据处理装置可以基于所述每个合并规则、每个第一图层参数、每个第二图层参数,确定所述图层对对应的组合置信度。其中,所述组合置信度是由所述图层对在所述图层合并规则中每个个合并规则时的置信度信息所确定的。
其中,所述图层数据处理装置可以根据每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息;进一步地,获取所述每个合并规则对应的权重值,基于所述每个合并规则对应的权重值以及所述图层对在相应合并规则时的置信度信息,可以确定所述图层对对应的组合置信度。
步骤S102,将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
步骤S103,将所述组合图层和剩余图层确定为初始图层,直到所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。
其中,所述图层数据处理装置所输出所述组合图像可以为上述图2a所对应的实施例中对组合图像a、组合图像b、组合图像c和组合图像d,这里将不再继续进行赘述。
在本发明实施例中,通过计算出的组合置信度可以快速地从显示区域所包含的图层对中找出能够进行合并的图层对,从而可以将找出的图层对中的两个初始图层进行自动组合,得到组合图层,进而可以有效地避免人工操作的繁琐,以提高图层组合的效率。其中,为了能够尽可能地从显示区域中找出所有能够进行合并的图层,可以重复执行前述的图层配对和组合步骤,直到显示在显示区域中的图层所构成的图层对的组合置信度均无法大于目标置信度时,可以确定当前显示在显示区域中的图层均无法进一步进行组合时,从而可以将最后一次组合得到的组合图层进行图像刻画,以输出最终的组合图像,进而可以有效地确保图层合并的准确度。
进一步地,请参见图5,是本发明实施例提供的另一种图层数据处理方法的示意图。如图5所示,所述方法可以包含以下步骤:
步骤S201,从显示区域的多个初始图层中确定图层对;
其中,所述图层对包括所述多个初始图层中的任意两个初始图层;若所述图层对中的两个初始图层包含第一图层和第二图层;则可以进一步获取所述图层对对应的图层合并规则,以进一步执行步骤S202;
步骤S202,获取所述图层对对应的图层合并规则中的每个合并规则,并将与所述每个合并规则相关联的第一图层的图层参数分别确定为第一图层参数,并将与所述每个合并规则相关联的第二图层的图层参数确定为第二图层参数;
步骤S203,根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息;
其中,所述图层合并规则可以包含颜色相似度规则、颜色复杂度规则、尺寸相似度规则、图层相交程度规则、形状排列相似度规则、层级距离相似度规则、基于最小公共父目录的层级距离相似度规则、相同模块组件规则、相同切片规则、相同图标规则、层叠样式表规则等合并规则,每个合并规则均可以用于对两两组合配对后的图层对进行评分,图层对的评分越大,则表明图层对中的两个初始图层在相应合并规则中能够进行组合的概率就越大。
在本发明实施例中,通过该图层合并规则中的每个合并规则可以得到该设计稿所在区域中的图层对在每个合并规则时的置信度信息。为了确保图层合并的准确性,可以结合实际工程设计需求,为每个合并规则设置相应的权重值,从而可以根据计算所得到每个合并规则对应的置信度信息和权重值,得到每个图层对所对应的组合置信度。
其中,本发明实施例可以将图层相交程度规则称之为第一合并规则,将尺寸相似度规则称之为第二合并规则,将形状排列相似度规则称之为第三合并规则,将相同切片规则称之为第四合并规则,将层级距离相似度规则和基于最小公共父目录的层级距离相似度规则统称为第五合并规则,将相同组件规则称之第六合并规则,并将层叠样式表规则称之为第七合并规则,并将颜色相似度规则和颜色复杂度规则统称为第八合并规则,并将相同图标规则称之为第九合并规则。
鉴于此,本发明实施例可以以多个图层对中的一个图层对(例如,上述图4给出的初始图层10与初始图层20所构成的图层对K)为例,以阐述该图层数据处理装置获取该图层对K对应的组合置信度的具体过程。即该图层数据处理装置可以将第一合并规则对应的置信度信息与第一合并规则对应的权重相乘,以得到该图层对K在第一合并规则时的合并信息;同理,可以通过第二合并规则对应的置信度信息与第二合并规则对应的权重相乘,以得到该图层对K在第二合并规则时的合并信息;同理,以此类推,可以得到该图层对K在第九合并规则时的合并信息。进一步地,通过将不同合并规则对应的合并信息进行求和运算,可以得到该图层对K对应的组合置信度。应当理解,对于多个图层对中的其他图层对而言,其他图层对所对应的组合置信度的计算方式可以参见本发明实施例中的计算图层对K对应的组合置信度的方式,这里将不再继续进行赘述。
其中,所述图层合并规则包含第一合并规则,与所述第一合并规则相关联的第一图层参数是由所述第一图层在所述显示区域中的第一位置信息、第一尺寸信息和扩增尺寸信息所确定的;与所述第一合并规则相关联的第二图层参数是由所述第二图层在所述显示区域中的第二位置信息、第二尺寸信息所确定的;此时,该图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:根据所述第一图层参数中的第一位置信息、第一尺寸信息、扩增尺寸信息、所述第二图层参数中的第二位置信息、第二尺寸信息,在所述显示区域中确定所述第一图层与所述第二图层之间的参考区域;所述参考区域用于描述所述第一图层与所述第二图层之间的交叠关系;进一步地,基于所述参考区域对应的交叠关系和所述第一合并规则对应的第一映射函数,确定所述图层对在所述第一合并规则对应的置信度信息。
为便于理解,进一步地,请参见图6,是本发明实施例提供的一种第一合并规则的应用场景。如图6所示,图像数据处理装置可以将显示界面100a中所显示的初始图层10、初始图层20、初始图层30和初始图层40进行两两配对组合,比如,可以将图6所示的初始图层10与初始图层20进行配对、得到图层对A12;同理,可以将图6所示的初始图层10与初始图层30进行配对、得到图层对A13;以此类推,可以将图6所示的初始图层10与初始图层40进行配对、得到图层对A14,可以将图6所示的初始图层20与初始图层30进行配对、得到图层对A23,可以将图6所示的初始图层20与初始图层40进行配对、得到图层对A24,可以将图6所示的初始图层30与初始图层40进行配对、得到图层对A34。如图6所示,图层数据处理装置可以通过该第一合并规则(即上述图层相交程度规则)对这6个图层对(即图层对A12、图层对A13、图层对A14、图层对A23、图层对A24、图层对A34)中的每一个图层对进行评分,从而可以得到这6个图层对中的每个图层对在该第一合并规则中的置信度信息。
其中,由于这6个图层对的每个图层对中均包含两个初始图层,所以可以将每个图层对所包含的两个初始图层中的一个初始图层称之为第一图层,将另一个初始图层称之为第二图层。为便于理解,可以以这6个图层对中的图层对A12为例,可以将该图层对A12中的初始图层10称之为图6所示的第一图层,并可以将该图层对A12中的初始图层20称之为第二图层,如图6所示,该图层数据处理装置可以在获取到该第一合并规则对应的扩增尺寸信息时,通过该扩增尺寸信息对第一图层的第一尺寸信息进行扩增处理,即可以将该第一图层的第一尺寸信息向外延伸特定的长度和宽度,从而可以将延伸后所得到的包含该第一图层的区域的尺寸信息称之为待处理尺寸信息(具体地,可以参见图6所对应实施例中的虚线框所构成的区域的尺寸信息)。此时,该图层数据处理装置可以将包含该第一图层的待处理尺寸信息和该第一图层的第一位置信息称之为该第一图层的图层参数(即第一图层参数),并可以将第二图层的第二尺寸信息和该第二图层的第二位置信息称之为该第二图层的图层参数(即第二图层参数)。换言之,该第一图层对应的第一图层参数是由所述第一图层在所述显示区域中的第一位置信息、第一尺寸信息和扩增尺寸信息所确定的;同理,该第二图层对应的所述第二图层参数是由所述第二图层在所述显示区域中的第二位置信息、第二尺寸信息所确定的。
在图6所示的显示界面100a中,通过该第一合并规则可以判断包含该第一图层的待处理尺寸信息是否能够与第二图层的第二尺寸信息相交,若包含该第一图层的待处理尺寸信息能够与第二图层的第二尺寸信息相交,则可以确定出该待处理尺寸信息与第二尺寸信息之间的交叠区域(该交叠区域可以为图6所示的交叠区域),进一步地,通过计算该交叠区域的尺寸信息与第二位置信息的尺寸信息之间的比值,可以得到所述第一图层与所述第二图层之间的重合度信息。本发明实施例可以将图6所示的交叠区域称之为第一图层与第二图层之间的参考区域,从而可以通过该参考区域判断出第一图层与第二图层之间的交叠关系。换言之,若包含第一图层的待处理尺寸信息与第二图层对应的第二尺寸信息相交,则该参考区域对应的交叠关系可以理解为前述计算出的第一图层与第二图层之间的重合度信息。进一步地,通过该第一合并规则对应的第一映射函数可以将前述计算得到的重合度信息进行映射,以计算得到该图层对A12在该第一合并规则时的置信度信息。
其中,应当理解,本发明实施例中的第一映射函数可以为映射函数(即评分函数)中的一种,通过该第一映射函数可以将通过第一合并规则所计算得到的重合度信息(即第一分数)和非重合度信息(即第二分数)限定在0至100区间范围内。其中,该非重合度信息是由上述待处理尺寸信息与第二尺寸信息之间的间隔区域所确定的。其中,该第一映射函数可以为一种指数函数,该指数函数可以用于对所计算得到的参考区域对应的正特征值(即上述重合度信息的值)和负特征值(即上述非重合度信息的值)进行映射处理,以将映射所得到的第一分数和第二分数统称为相应图层对在该第一合并规则时的置信度信息。
可选地,例如,如图6所示,若包含该第一图层的待处理尺寸信息不能与第二图层的第二尺寸信息相交,则可以将包含该第一图层的待处理尺寸信息与第二图层之间不相交的间隔区域称之为上述参考区域,此时,该参考区域可以用于描述这两个尺寸信息之间的间隔距离,间隔距离越大,则表明不相交的程度越大,从而所计算得到的非重合度信息的值也就反向越大,此时,所得到的非重合度信息的取值均为负特征值,通过将负特征值输入到上述第一合并规则对应的第一映射函数,可以得到上述第二分数。
其中,所述图层合并规则包含第二合并规则;与所述第二合并规则相关联的第一图层参数是由所述第一图层所在区域的第一尺寸信息所确定的;与所述第二合并规则相关联的第二图层参数是由所述第二图层所在区域的第二尺寸信息所确定的;此时,所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:将所述第一图层参数中的第一尺寸信息与所述第二图层参数中的第二尺寸信息进行比较,并根据比较结果确定所述第一图层与所述第二图层之间的尺寸关系;进一步地,基于所述尺寸关系以及所述第二合并规则对应的第二映射函数,确定所述图层对在所述第二合并规则时的置信度信息。
为便于理解,进一步地,请参见图7,是本发明实施例提供的一种第二合并规则的应用场景。若在图7所示的显示界面200a中的多个初始图层为图7所示的初始图层10b、初始图层20b、初始图层30b和初始图层40b;在将这4个初始图层进行两两配对组合之后,也可以从多个初始图层中确定出两两组合后的图层对,比如,可以将图7所示的初始图层10b与初始图层20b进行配对、得到图层对B12;同理,可以将图7所示的初始图层10b与初始图层30b进行配对、得到图层对B13;以此类推,可以将图7所示的初始图层10b与初始图层40b进行配对、得到图层对B14,可以将图7所示的初始图层20b与初始图层30b进行配对、得到图层对B23,可以将图7所示的初始图层20b与初始图层40b进行配对、得到图层对B24,可以将图7所示的初始图层30b与初始图层40b进行配对、得到图层对B34。如图7所示,图层数据处理装置可以通过该第二合并规则(即上述图层相交程度规则)对这6个图层对(即图层对A12、图层对A13、图层对A14、图层对A23、图层对A24、图层对A34)中的每一个图层对进行评分,从而可以得到这6个图层对中的每个图层对在该第一合并规则时的置信度信息。
为便于理解,本发明实施例可以以这6个图层对中的图层对B12为例,以阐述通过第二合并规则得到该图层对B12的置信度信息的具体过程。其中,本发明实施例可以将显示界面200a中的初始图层10b确定为第一图层,并将该显示界面200a中的初始图层20b确定为第二图层。进一步地,图层数据处理装置可以在显示界面200a中将第一图层所在区域的第一尺寸信息确定为第一图层的图层参数,并可以将该第一图层的图层参数称之为与所述第二合并规则相关联的第一图层参数。同理,图层数据处理装置也可以在显示界面200a中将第二图层所在区域的第二尺寸信息确定为第二图层的图层参数,并可以将该第二图层的图层参数称之为与所述第二合并规则相关联的第二图层参数。换言之,当图层合并规则包含第二合并规则(即上述尺寸相似度规则)时,与所述第二合并规则相关联的第一图层参数是由所述第一图层所在区域的第一尺寸信息所确定的,且与所述第二合并规则相关联的第二图层参数是由所述第二图层所在区域的第二尺寸信息所确定的。
进一步地,该图层数据处理装置可以将该第一图层参数中的第一尺寸信息(即第一图层的面积信息)与所述第二图层参数中的第二尺寸信息(即第二图层的面积信息)进行比较,以确定图7所示的第一图层与所述第二图层之间的尺寸关系,该尺寸关系可以用于描述第一图层与第二图层之间的面积大小的相似度。换言之,该图层数据处理装置可以将初始图层10b所在区域的面积与初始图层20b所在区域的面积进行比较,以计算得到该第一尺寸信息与第二尺寸信息之间的比值,由于该初始图层10b与初始图层10b的面积的大小比较接近,所以所计算得到的比值会比较趋近于1,从而可以将该比较趋近于1的比值给到第二合并规则对应的第二映射函数(该第二映射函数可以为5次方幂函数等),以得到图7所示的图层对B12的置信度信息1。由于初始图层10b与初始图层10b的面积的大小比较接近,所以,通过该第二合并规则所计算得到的图层对B12的置信度信息1的值会比较大。
同理,可选地,在图7所示的显示界面200a中,还可以将初始图层10b确定为第一图层,并可以将该显示界面200a中的初始图层30b确定为第二图层。进一步地,图层数据处理装置可以在显示界面200a中将第一图层所在区域的第一尺寸信息确定为第一图层的图层参数,以得到初始图层10b对应的第一图层参数。同理,图层数据处理装置也可以在显示界面200a中将第二图层所在区域的第二尺寸信息确定为第二图层的图层参数,以得到初始图层30b对应的第二图层参数。当图层合并规则为第二合并规则(即上述尺寸相似度规则)时,该图层数据处理装置可以将该第一图层参数中的第一尺寸信息(即初始图层10b所在区域的面积信息)与所述第二图层参数中的第二尺寸信息(即初始图层30b所在区域的面积信息)进行比较,以确定图7所示的第一图层与所述第二图层之间的尺寸关系,此时,该尺寸关系可以用于描述初始图层10b与初始图层30b之间的面积大小的相似度。由于在图7所示的显示界面200a中的初始图层10b所在区域的面积信息明显小于初始图层30b所在区域的面积信息,因此,在计算第一尺寸信息与第二尺寸信息之间的比值时,所计算得到的比值必然难以趋近于1(比如,若第一尺寸信息远远小于第二尺寸信息,在计算上述尺寸关系时可以将两个初始图层中具有较大面积信息的尺寸信息作为分母,以使所得到的比值可以无限趋近于0),因此,在将该趋近于0的比值给到第二合并规则对应的第二映射函数(该第二映射函数可以为上述5次方幂函数)时,可以得到上述图层对B13的置信度信息2。此时,通过该第二合并规则所计算得到的图层对B13的置信度信息2的值会比较小。
应当理解,在该显示界面200a中,通过第二合并规则计算剩余图层对(即上述图层对B14、图层对B23、图层对B24、图层对B34)的置信度信息的具体过程可以一并参见上述计算图层对B12的置信度信息1的计算方式、或者参见上述计算图层对B23的置信度信息2的计算方式,这里将不再继续进行赘述。
其中,所述图层合并规则包含第三合并规则;与所述第三合并规则相关联的第一图层参数是由所述第一图层所在区域的第一中心位置信息和第一形状信息所确定的;与所述第三合并规则相关联的第二图层参数是由所述第二图层所在区域的第二中心位置信息和第二形状信息所确定的;此时,所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:根据所述第一图层参数中的第一中心位置信息、所述第二图层参数中的第二位置信息,确定所述第一图层与所述第二图层之间的水平位置关系;进一步地,基于所述水平位置关系、所述第一形状信息、所述第二形状信息,确定所述第一图层与所述第二图层之间的第一关联关系;进一步地,基于所述第一关联关系、所述第三合并规则对应的第二映射函数,确定所述图层对在所述第三合并规则时的置信度信息。
为便于理解,进一步地,请参见图8,是本发明实施例提供的一种第三合并规则的应用场景。如图8所示,在显示界面300a中的多个初始图层可以为图8所示的初始图层10c,初始图层20c、初始图层30c、初始图层40c、初始图层50c,初始图层60c、初始图层70c;当图层数据处理装置通过第三合并规则对这些初始图层中的两两图层配对后的图像对进行评分时,可以得到每个图像对在该第三合并规则时的置信度信息。
其中,为便于理解,本发明实施例分别以初始图层10c和初始图层20c所构成的图层对C12,初始图层10c和初始图层40c所构成的图层对C14、以及初始图层40c和初始图层50c所构成的图层对C45为例,以阐述每个图层对在该第三合并规则(即上述形状排列相似度规则)时的置信度信息。
其中,对于图层对C12而言,第一图层可以为初始图层10c,第二图层可以为初始图层20c;通过该第三合并规则可以在显示界面300a中将第一图层所在区域的第一中心位置信息和第一形状信息(例如,该初始图层10c的形状状态为圆形)确定为第一图层的图层参数,并可以将该第一图层的图层参数称之为第一图层对应的第一图层参数。同理,图层数据处理装置也可以在显示界面300a中将第二图层所在区域的第二中心位置信息和第二形状信息(例如,该初始图层20c的形状状态为圆形)确定为第二图层的图层参数,并可以将该第二图层的图层参数称之为第二图层对应的第二图层参数。进一步地,该图层数据处理装置可以通过该第一图层参数中的第一中心位置信息与所述第二图层参数中的第二中心位置信息进行比较,以确定图6所示的第一图层与所述第二图层之间的水平位置关系,该水平位置关系可以用于描述该第一图层与第二图层是否在同一水平线上。由于该显示界面300a中的初始图层10c与初始图层20c是在同一水平线上,所以可以进一步根据该水平位置关系、第一形状信息、第二形状信息,确定该第一图层与第二图层之间的第一关联关系,其中,该第一关联关系可以用于描述第一图层与第二图层之间的形状排列相似度,该形状排列相似度可以包含形状相似度和排列相似度。其中,形状相似度越高则可以表征该第一图层与第二图层之间的形状越相似,比如,可以都为圆形,或者都为矩形;其中,排列相似度越高则表征该第一图层与第二图层的排列信息越相似,比如,均在同一水平线上,且面积信息都比较小,例如,这两个初始图层的面积信息均小于预设面积信息。
应当理解,当这两个初始图层在同一水平线上,且具有较高的形状相似度、以及面积信息都比较小时,可以从该第一关联关系中获取到能够用于描述该第一图层与第二图层之间的关联性的关联值,通过将该关联值给到该第三合并规则对应的第二映射函数,可以得到该图层对C12在该第三合并规则时的置信度信息,此时,该图层对C12所得到的置信度信息可以理解为上述用于描述高分的第一分数。由于图8所示的初始图层10c、初始图层20c、初始图层30c均处于同一水平线上、且这三个初始图层的形状信息均为圆形。他们的面积信息都小于预设面积信息,所以,以此类推,初始图层10c和初始图层30c所构成的图层对C13也可以得到高分、初始图层20c和初始图层30c所构成的图层对C23也可以得到高分。
由此可见,通过该第三合并规则可以将这些图层对中具有较小面积、且具有相同形状信息、且位于同一水平线上的两个初始图层所对应的图层对的分数确定为高分,反之,则可以获得低分,比如,对于图层对C14而言,该图层对C14中的初始图层10c和初始图层40c不在同一水平线上,且初始图层40c的面积信息大于预设面积信息、且初始图层40c的形状信息不同于初始图层10c的形状信息,故而通过该第三合并规则所得到的图层对C14的评分会低于图层对C12的评分。又比如,对于图层对C45而言,该图层对C45中的初始图层40c和初始图层50c虽然在同一水平线上、且具有相同形状信息,但是该初始图层40c和初始图层50c的面积信息均大于预设面积信息,故而通过该第三图层合并规则所得到的图层对C45的分数也会低于上述图层对C12的分数。
其中,所述图层合并规则包含第四合并规则;与所述第四合并规则相关联的第一图层参数是由所述第一图层所属的结构区域中的第一切片确定的;与所述第四合并规则相关联的第二图层参数是由所述第二图层所属的结构区域中的第二切片确定的;此时,所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:基于所述第一图层参数中的第一切片、所述第二图层中的第二切片,确定所述第一图层与所述第二图层之间的第二关联关系;进一步地,基于所述第二关联关系、所述第四合并规则对应的第二映射函数,确定所述图层对在所述第四合并规则时的置信度信息。
为便于理解,进一步地,请参见图9,是本发明实施例提供的一种第四合并规则的应用场景。其中,第四合并规则可以为上述相同切片规则,该相同切片规则可以用于判断图层对中的两个初始图层是否在同一个切片所关联的切片范围内,即图层对中的两个初始图层是否对应同一切片。其中,该切片范围是目标用户为了圈出特定图片所设置的范围,如图9所示的第一切片的切片范围可以包含图9所示结构区域中的图层2、图层3、图层4和图层5。因此,对于图层2和图层3所构成的图层对1而言,可以将图层2称之为第一图层,将图层3称之为第二图层,此时,该图层2对应的第一图层参数则是由该图层2所属的结构区域中的第一切片所确定的,该图层3对应的第二图层参数则是由该图层3所属的结构区域中的第一切片所确定的。由于第一图层与第二图层位于同一切片所关联的切片范围内,所以,可以确定出该图层对1中的这两个图层之间的关联值,从而在将该图层对1的关联值给到第四合并规则对应的第二映射函数时,可以得到该图层对1在该第四合并规则时的置信度信息。
换言之,通过该第四合并规则,可以在图层对中的两个初始图层都在同一个切片范围内(即图9中的箭头所指的虚线框)时,为这两个初始图层对应的图层对分配一个较高的分数(即得到的置信度信息的值会比较大),反之,当图层对中的两个初始图层不在同一切片范围内时,例如,图9所示的图层对2的两个初始图层中的一个初始图层(即图层5)在第一切片所关联的切片范围内,另一个初始图层(即图层7)在第二切片所关联的切片范围内时,可以为该图层对设置一个较低的分数(即得到的置信度信息的值会比较低),从而可以确保通过该第四合并规则所得到的评估分数可以尽可能地贴合实际设计过程中的设计习惯。
其中,所述图层合并规则包含第五合并规则;与所述第四合并规则相关联的第一图层参数和第二图层参数均是由所述显示区域中第一图层与第二图层所属的最小公共父目录所确定的;此时,所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:基于所述第一图层参数中的所述第一图层到所述最小公共父目录的层级距离、所述第二图层参数中的所述第二图层到所述最小公共父目录的层级距离,确定所述第一图层与所述第二图层之间的层级距离关系;进一步地,基于所述层级距离关系、所述第五合并规则对应的第二映射函数,确定所述图层对在所述第五合并规则时的置信度信息。
为便于理解,进一步地,请参见图10,是本发明实施例提供的一种第五合并规则的应用场景。其中,第五合并规则可以为上述层级距离相似度规则,也可以为上述基于最小父目录的层级距离相似度规则。其中,层级距离相似度规则可以用于判断图层对中的两个初始图层的是否在同一图层组里,若是在同一图层组里,则认为图层对中的两个初始图层的层级距离相似。例如,以图10所示的显示界面中图层2和图层3所构成的图层对D23为例,由于该图层2和图层3均位于显示界面500a的结构区域中的图层组A11中,所以,该图层数据处理装置可以认为这两个初始图层到该图层组A11的层级距离均为1,从而通过该第五可并规则可以判断出该图层对D23中的这两个图层之间的层级距离的相似度较高。
应当理解,在该第五合并规则为层级距离相似度规则时,两个初始图层之间的层级距离关系是由这两个初始图层在层级距离上的层级距离相似度所确定的,层级距离差值越小,则层级距离相似度越高,所计算得到的得分越高,反之,则层级距离相似度越低,所计算得到的得分越低。例如,在图10所示的显示界面中的图层2与图层3之间的层级距离差值则为0,因为它们在同一图层组中,所以该图层2与图层3所构成的图层对D23的层级距离关系会比较强,以致于所计算得到的得分会比较高(即该图层对D23在第五合并规则为层级距离相似度规则时的置信度信息的值会比较大)。然而,对于图层4与图层10所构成的图层组_D40而言,图层4在上述图层2和图层3所对应的图层组A11中,而图层10是在该树形结构区域的另一图层组(即图层组B12)中,所以,该图层数据处理装置认为该图层对D40中的两个初始图层之间的层级距离差值会比较大,故而通过该层级距离相似度规则所计算得到的得分会比较低(即该图层对D40在第五合并规则为层级距离相似度规则时的置信度信息的值会比较小)。
可选地,若该第五合并规则为基于最小公共父目录的层级距离相似度规则,则该图层数据处理装置在将该显示界面500a中的图层2称之为第一图层,并将该显示界面500a中的图层3称之为第二图层时,可以确定这两个初始图层(即图层2和图层3)的最小公共父目录(即图10所示的最小公共父目录1)即为上述图层组A11。此时,该第一图层到该最小公共父目录1的层级距离与该第二图层到该最小公共父目录的层级距离相同。因此,该图层数据处理装置可以认为在该最下公共父目录1下的这两个初始图层之间的层级距离差值会比较小(例如,层级距离差值(0)小于目标距离差值1)。所以,该图层数据处理装置可以将该具有较小层级距离差值的两个初始图层之间的关系称之为该第一图层与第二图层之间的层级距离关系。
然而,由于图层10属于图层组B12,图层4属于图层组A11,即这两个图层此时属于不同图层组,若该第五合并规则为基于最小公共父目录的层级距离相似度规则,则该图层数据处理装置可以将该显示界面500a中的图层4称之为第一图层,并将该显示界面500a中的图层10称之为第二图层,从而需要在该树形结构区域中继续向上搜索这两个初始图层的最小公共父目录,且继续搜索到的最小公共父目录可以为该图10所示的显示区域中的最小公共父目录2。此时,图层4到最小公共父目录2的层级距离为4,而图层10到该最小公共父目录2的层级距离为5,所以,可以认为这两个初始图层之间的层级距离差值比较大(例如,层级距离差值可以为9,此时,该层级距离差值大于上述目标距离差值),此时,该图层数据处理装置可以将具有较大层级距离差值的两个初始图层之间的关系称之为该第一图层与第二图层之间的层级距离关系。由此可见,通过该第五合并规则可以认为靠的比较近的初始图层合并在一起来可能性会比较大,而离得较远的初始图层合并在一起的可能性相对较低,进而在执行切图任务的时候,可以将靠的比较近的初始图层合并在一起进行切图,以得到上述包含多个初始图层的切片。
其中,所述图层合并规则包含第六合并规则;与所述第六合并规则相关联的第一图层参数是由所述第一图层所属的第一组件确定的;与所述第六合并规则相关联的第二图层参数是由所述第二图层所属的第二组件确定的;所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:基于所述第一图层参数中的第一组件、所述第二图层参数中的第二组件,确定所述第一图层与所述第二图层之间的组件关联关系;进一步地,基于所述组件关联关系、所述第六合并规则对应的第二映射函数,确定所述图层对在第六合并规则时的置信度信息。
为便于理解,进一步地,请参见图11,是本发明实施例提供的一种第六合并规则的应用场景。其中,该第六合并规则可以为上述相同组件规则,该相同组件规则用于判断图层对中的两个初始图层是否在同一组件中,该组件可以为目标用户预先构建好的模块组件,该模块组件可以为图11所示的显示界面600a中的组件1和组件2。对于图11所示的图层a和图层b所构成的图层对3而言,该图层对3中的图层a和图层b是处于同一模块组件内,所以通过该第六可并规则可以判断出该图层对3中的这两个图层是与图11所示的组件1对应。鉴于此,在将图11所示的显示界面600a中的图层a称之为第一图层,并将该显示界面600a中的图层b称之为第二图层时,该图层a对应的第一图层参数则是由该图层a所属的第一组件所确定的,该图层b对应的第二图层参数则是由该图层b所属的第二组件所确定的。此时,该图层数据处理装置所确定的第一图层与第二图层之间的组件关联关系可以描述这两个图层是与同一组件(即图11所示的组件1)对应的关系。可以理解的是,该图层数据处理装置可以将位于同一组件内的两个初始图层之间的关联关系称之为上述组件关联关系。换言之,当第一图层与第二图层位于同一组件内时,可以确定出这两个图层之间的关联值会比较大,进而将该关联值给到该第六合并规则对应的第二映射函数,则可以得到该图层对3在该第六合并规则时的置信度信息(此时,该图层对3在该第六合并规则时的置信度信息的值会比较大)。
同理,对于图11所示的图层c和图层d所构成的图层对4而言,由于该图层对4中的图层c和图层d是处于不同模块组件内,所以通过该第六可并规则可以判断出该图层对4中的这两个图层之间的关联值会比较小,进而将该关联值给到该第六合并规则对应的第二映射函数,则可以得到该图层对4在该第六合并规则时的置信度信息(此时,该图层对4在该第六合并规则时的置信度信息的值会比较小)。
其中,所述图层合并规则包含第七合并规则;与所述第七合并规则相关联的第一图层参数是由所述第一图层所属区域的第一样式信息所确定的;与所述第七合并规则相关联的第二图层参数是由所述第二图层所属区域的第二样式信息所确定的;此时,所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:基于所述第七合并规则获取所述显示区域对应的层叠样式表;所述层叠样式表中包含目标样式信息;进一步地,基于所述目标样式信息、所述第一图层参数中的第一样式信息,确定所述第一图层与所述层叠样式表之间的第一样式关系;进一步地,基于所述目标样式信息、所述第二图层参数中的第二样式信息,确定所述第二图层与所述层叠样式表之间的第二样式关系;进一步地,基于所述第一样式关系、所述第二样式关系,确定所述第一图层与所述第二图层之间的第三关联关系,并基于所述第三关联关系、所述第七合并规则对应的第二映射函数,确定所述图层对在第七合并规则时的置信度信息。
为便于理解,进一步地,请参见图12,是本发明实施例提供的一种第七合并规则的应用场景。其中,该第七合并规则可以为上述层叠样式表规则,其中,该图层数据处理装置中的层叠样式表可以用于定义显示在网页界面中的图层的样式信息,比如,可以通过代码的形式对显示在网页界面中的按钮或者标签等的样式信息(例如,显示颜色信息、显示形状等信息)进行定义,换言之,能够通过代码进行定义的标签或者按钮即可以理解为能够通过该层叠样式表实现的初始图层,从而可以认为这些能够通过该层叠样式表实现的初始图层是不需要进行合并的,即可以间接确定出不能通过该层叠样式表实现的初始图层是需要合并的。可以理解的是,该图层数据处理装置在通过该层叠样式表所指定的样式信息(例如,长椭圆样式)分别与图层对中第一图层参数中第一图层的第一样式信息和第二图层的第二样式信息进行比较,从而可以确定第一图层与该层叠样式表之间的第一样式关系(即该第一样式关系可以用于描述该第一图层能否通过该层叠样式表实现)。同理,该图层数据处理装置也可以得到第二图层与该层叠样式表之间的第二样式关系(即该第一样式关系可以用于描述该第一图层能否通过该层叠样式表实现)。进一步地,该图层数据处理装置可以基于该第一样式关系、第二样式关系在图12所示的显示界面600a中确定该图层对中的两个初始图层是否能够进行合并的关系,并可以将该用于描述这两个初始图层是否能够进行合并的关系称之为第三关联关系。
比如,该显示界面中的多个初始图层可以包含:初始图层10d、初始图层20d、初始图层30d、初始图层40d、初始图层50d和初始图层60d,通过将这6个初始图层中的任意两个初始图层进行配对后可以得到多个图层对,通过该第七合并规则可以得到用于描述这些图层对中的每个图层对之间能否进行合并的置信度信息。若第一图层为图12所示的显示界面700a中的初始图层10d,该第一图层参数中的第一样式信息(例如,图12所示的初始图层10d的长椭圆形)与层叠样式表中的目标样式信息(例如,上述长椭圆形)一致,则表明该第一图层可以通过该层叠样式表实现。因此,若第二图层为剩余的6个初始图层中的任意一个初始图层时,均不能与该初始图层10d进行合并,即此时,包含该初始图层10d的图层对对应的置信度信息的值会比较小。
可选地,若第一图层为图12所示的显示界面700a中的初始图层20d,该第一图层参数中的第一样式信息(例如,图12所示的初始图层10d的圆形)与层叠样式表中的目标样式信息(例如,上述长椭圆形)不一致,则表明该第一图层不能通过该层叠样式表实现。因此,该图层数据处理装置可以进一步检测第二图层的第二图层参数中的第二样式信息是否与该目标样式信息一致。若第二图层为该图层界面700a中的初始图层30d,由于该初始图层30d的第二样式信息与目标样式信息(即长椭圆形)一致,则表明该初始图层30d可以通过该层叠样式表实现,即该初始图层20d与该初始图层30d所构成的图层对的置信度信息的值也会比较小。可选地,若该第二图层为该图层界面700a中的初始图层40d,由于该初始图层40d的第二样式信息(圆形)与目标样式信息(即长椭圆形)不一致,即该初始图层40d不能通过该层叠样式表实现,所以,通过该第七合并规则的第二映射函数所计算得到的该初始图层20d与该初始图层40d所构成的图层对的置信度信息的值会比较大,即表明这两个初始图层能够合并的概率比较大。
其中,所述图层合并规则包含第八合并规则;与所述第八合并规则相关联的第一图层参数是由所述第一图层所属的第一颜色属性所确定的;与所述第八合并规则相关联的第二图层参数是由所述第二图层所属的第二颜色属性所确定的;此时,所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:基于所述第一图层参数中的第一颜色属性,所述第二图层参数中的第二颜色属性,确定所述第一图层与所述第二图层之间的属性匹配关系;进一步地,基于所述属性匹配关系、所述第八合并规则对应的第二映射函数,确定所述第八合并规则对应的置信度信息。
为便于理解,进一步地,请参见图13,是本发明实施例提供的一种第八合并规则的应用场景。其中,该第八合并规则可以为上述颜色相似度规则、颜色复杂度规则。本发明实施例可以将该颜色相似度规则、颜色复杂度规则统称为颜色属性规则,即该颜色属性规则可以用于判断图层对中的两个初始图层的颜色是否具有单一性,若具有单一性,则可以通过颜色相似度规则进行评分,反之,则可以通过颜色复杂度进行评分。其中,颜色相似度规则可以用于对填充颜色比较单一的图标所对应的初始图层的颜色方差和进行计算,从而可以将该图层对中的两个初始图层的颜色方差和是否一致的关系,称之为第一图层与所述第二图层之间的属性匹配关系,此时,该颜色相似度规则可以用于判断图层对中的两个初始图层的颜色是否一致(比如,是否都为橙色),若是,则表明这两个具有相同颜色的初始图层之间的关联性比较强,反之,则表明这两个初始图层之间的关联性比较弱。比如,对于图13所示的显示界面800a中的图层50c和图层60e而言,由于它们属于不同颜色所对应的图标,因此,该图层数据处理装置通过该颜色相似度规则所计算出的这两个初始图层(即图13所示的图层50c和图层60e)之间的置信度信息的值会比较小,即这两个初始图层合并的可能性比较低。又比如,对于图13所示的图层对中的图层50f和60g而言,由于它们属于同一颜色所对应的图标,因此,该图层数据处理装置通过该颜色相似度规则所计算出的这两个初始图层(即图13所示的图层50f和图层60g)之间的置信度信息的值会比较大,即这两个初始图层能够进行合并的可能性比较高。
可选地,该第八合并规则还可以为颜色复杂度规则,又比如,对于上述图7所示的显示界面中的初始图层40c、初始图层50c而言,这两个初始图层中的颜色不再是单一性的颜色填充,即这两个初始图层的颜色复杂度比较高时,可以通过该颜色复杂度规则获取该初始图层40c的颜色种类数,并可以获取该初始图层50c的颜色种类数,从而可以通过判断这两个初始图层的颜色种类数是否一致来确定该第一图层与第二图层之间的属性关联关系。若颜色复杂度一致(例如,都包含10种颜色),则可以计算出这两个初始图层在该颜色复杂度规则时的置信度信息的值会比较大。又比如,若颜色复杂度不一致(例如,初始图层40c的颜色复杂度为3种,而初始图层50c的颜色复杂度为2种),则可以计算出这两个初始图层在该颜色复杂度规则时的置信度信息的值会比较小,即可并的可能性会比较低。
其中,若所述第一颜色属性和所述第二颜色属性均为单一颜色对应的颜色属性,则根据所述第一颜色属性对应的方差和(该方差和是由第一图层中的R(红)、G(绿)、B(蓝)等像素值所确定的)、所述第二颜色属性对应的方差和(同理,该方差和是由第二图层中的R(红)、G(绿)、B(蓝)等通道对应的像素值所确定的),可以确定所述第一图层和所述第二图层之间的颜色匹配关系;
可选地,若所述第一颜色属性和所述第二颜色属性均为非单一颜色对应的颜色属性,则根据所述第一颜色属性对应的颜色复杂度(即上述颜色种类数)、所述第二颜色属性对应的颜色复杂度,可以确定所述第一图层与所述第二图层之间的复杂度匹配关系。
其中,图层合并规则包含第九合并规则;与所述第九合并规则相关联的第一图层参数是由所述第一图层所在的第一图标标识确定的;与所述第九合并规则相关联的第二图层参数是由所述第二图层所在的第二图标标识确定的;所述第一图标标识对应的图标和所述第二图标标识对应的图标均是由目标网络模型所识别到的;此时,所述图层数据处理装置执行所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息的具体过程可以描述为:基于所述第一图层参数中的第一图标标识、所述第二图层参数中的第二图标标识,确定所述第一图层和所述第二图层之间的图标关联关系;进一步地,基于所述图标关联关系、所述第九合并规则对应的第二映射函数,确定所述图层对在所述第九合并规则时的置信度信息。
为便于理解,进一步地,请参见图14,是本发明实施例提供的一种第九合并规则的应用场景。其中,所述第九合并规则可以为上述图标识别规则,即通过该图标识别规则可以判断上述显示区域(即图14所示的显示界面900a)中的两个初始图层是否具有相同图标标识。该图层数据处理装置可以通过目标网络模型(例如,卷积神经网络模型或者分类器等)从图14所示的显示界面900a中识别出所有的图标,比如,可以通过该目标网络模型识别出图14所示的图标1和图标2,其中,该图标1和图标2可以理解为该目标网络模型所识别出的具有较高准确度的图标的信息。如图14所示,该图层数据处理装置可以进一步在该显示界面900a中对该识别出的图标1和图标2设置图标标识,比如,可以在后台将该图标1的图标标识称之为为第一图标标识,并可以将该图标2的图标标识称之为第二图标标识。其中,由于显示界面中的图层2、图层3、图层4和图层5均对应着图标1,因此,若图层对中的两个初始图层为图14所示的图层2和图层3时,可以通过该图标识别规则确定这两个初始图层具有同一图标标识,此时,这两个具有同一图标标识的初始图层之间的关联值会比较大,从而可以将具有同一图标标识的两个初始图层之间的关系称之为上述图标关联关系。进一步地,该图层数据处理装置可以计算出这两个初始图层在相同图标规则时的置信度信息的值会比较大。又比如,图14所示的显示界面900a中的图层5和图层9分别对应不同的图标标识,此时,该图层数据处理装置可以认为这两个具有不同图标标识的初始图层之间的关联值比较小,从而若可以计算出这两个初始图层在该相同图标规则时的置信度信息的值会比较小,即可并的可能性会比较低。
由此可见,在计算图层对对应的组合置信度中,可以通过该图层合并规则中的一个合并规则或者多个合并规则计算图像对在相应合并规则时的置信度信息,具体地,可以参见上述图6至图14所对应实施例中通过每个合并规则进行评分的具体过程的描述。其中,若图层合并规则包含第一合并规则,则第一合并规则对应的第一映射函数可以为上述评分函数中的指示函数。若图层合并规则为除第一合并规则之外的合并规则,例如,第二合并规则、第三合并规则、…、第九合并规则,则评分函数中的第二映射函数可以为5次方幂函数。
为便于理解,进一步地,请参见图15a和图15b,是本发明实施例提供的一种第一映射函数和第二映射函数的示意图。其中,在本发明实施例中,所述图层合并规则对应的评分函数可以为上述第一映射函数和上述第二映射函数。通过该评分函数可以得到每个图层对在相应合并规则时的置信度信息。如图15a所示,当该图层合并规则包含上述第一合并规则时,该图层数据处理装置通过该第一合并规则对上述多个图层对中的各图层对进行分析后所得到的关联值,可以有正数(即上述重合度信息),也可以有负数(即上述非重合度信息),为拉开这两类情况下的关联值所对应分数之间的差距,本发明实施例可以使用图15a所示的第一映射函数(即该第一合并规则对应的第一映射函数可以为指数函数)来进行评分,从而可以通过该第一映射函数拉开计算所得到的高分与低分之间的差距。比如,以上述图5所对应实施例中的图层对A12和图层对A13为例,当图层数据处理装置确定该图层对A12中的两个初始图层需要合并时,通过该第一映射函数计算所得到的分数(即相交时的置信度信息)会很高,反之,当图层数据处理装置确定该图层对A13中的两个初始图层不应该合并时,计算所得到的分数(即不相交时的置信度信息)会很低。
另外,如图15b所示,若该图层合并规则为上述多个合并规则中的其它合并规则,且通过其它并规则对上述多个图层对中的各图层对所分析得到的值只有正数(即上述正特征值)时,则可以通过图15b所示的第二映射函数(例如,可以使用3次方幂函数、4次方幂函数、5次方幂函数、6次方幂函数等)来进行评分,从而可以拉开计算所得到的高分与次高分之间的差距,即本发明实施例可以基于该第二映射函数的倾斜程度来体现对不同图层对进行评分计算后所得到的置信度信息之间的差距。
步骤S203,获取所述每个合并规则对应的权重值,并基于所述每个合并规则对应的权重值以及所述图层对在相应合并规则时的置信度信息,确定所述图层对对应的组合置信度。
可以理解的是,对于将多个初始图层进行两两配对后所得到的多个图层对中的每个图层对(例如,图层对A)而言,通过上述图3所对应实施例中所描述的11个合并规则,可以得到每个图层对在这11个合并规则分别对应的置信度信息(例如,可以通过上述图6-图14所对应实施例中所列举的计算置信度信息的方式得到图层对A在每个合并规则时的置信度信息)。为了确保图层合并的准确性,可以为每个合并规则设置相应的权重值,从而可以基于最后求和得到的组合置信度来判断是否真的需要对该图层对A中的第一图层和第二图层进行合并。
步骤S204,将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
步骤S205,将所述组合图层和剩余图层确定为初始图层,直到所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;
其中,所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。可以理解的是,在每一轮的评分估计过程中,都可以有部分初始图层之间能够进行合并,当然,也有目前尚不能进行合并的初始图层,从而可以将目前尚不能合并的初始图层统称为上述剩余图层,从而可以将合并后的组合图层和剩余图层确定为新的初始图层,从而可以进一步执行新一轮的评分估计,以便于能够从该显示区域中找出所有能够进行合并的初始图层,直至检测到每个图层对中的两个初始图层之间无法再进行合并为止,从而可以将对最后一次得到的组合图层进行图像刻画,从而可以刻画得到的图像称之为组合图像。
在本发明实施例中,通过计算出的组合置信度可以快速地从显示区域所包含的图层对中找出能够进行合并的图层对,从而可以将找出的图层对中的两个初始图层进行自动组合,得到组合图层,进而可以有效地避免人工操作的繁琐,以提高图层组合的效率。其中,为了能够尽可能地从显示区域中找出所有能够进行合并的图层,可以重复执行前述的图层配对和组合步骤,直到显示在显示区域中的图层所构成的图层对的组合置信度均无法大于目标置信度时,可以确定当前显示在显示区域中的图层均无法进一步进行组合时,从而可以将最后一次组合得到的组合图层进行图像刻画,以输出最终的组合图像,进而可以有效地确保图层合并的准确度。
进一步地,请参见图16,是本发明实施例提供的一种图层数据处理装置的结构示意图。所述图层数据处理装置1可以应用于上述目标用户终端,该目标用户终端可以为上述图1所对应实施例中的用户终端3000a。进一步地,该图层数据处理装置1可以包括:图层对确定模块10,图层组合模块20和图像输出模块30;进一步地,所述数据处理装置1还包括:规则获取模块40和置信度确定模块50;
图层对确定模块10,用于从显示区域的多个初始图层中确定图层对;所述图层对包括所述多个初始图层中的任意两个初始图层;
可选地,规则获取模块40,用于获取所述图层对对应的图层合并规则中的每个合并规则,并将与所述每个合并规则相关联的第一图层的图层参数分别确定为第一图层参数,并将与所述每个合并规则相关联的第二图层的图层参数确定为第二图层参数;
可选地,置信度确定模块50,用于基于所述每个合并规则、每个第一图层参数、每个第二图层参数,确定所述图层对对应的组合置信度。
其中,所述置信度确定模块50包括:置信度确定单元501和组合度确定单元502;
置信度确定单元501,用于根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息;
其中,所述图层合并规则包含第一合并规则,与所述第一合并规则相关联的第一图层参数是由所述第一图层在所述显示区域中的第一位置信息、第一尺寸信息和扩增尺寸信息所确定的;与所述第一合并规则相关联的第二图层参数是由所述第二图层在所述显示区域中的第二位置信息、第二尺寸信息所确定的;
所述置信度确定单元501包括:区域确定子单元2031、第一确定子单元2032;
区域确定子单元2031,用于根据所述第一图层参数中的第一位置信息、第一尺寸信息、扩增尺寸信息、所述第二图层参数中的第二位置信息、第二尺寸信息,在所述显示区域中确定所述第一图层与所述第二图层之间的参考区域;所述参考区域用于描述所述第一图层与所述第二图层之间的交叠关系;
第一确定子单元2032,用于基于所述参考区域对应的交叠关系和所述第一合并规则对应的第一映射函数,确定所述图层对在所述第一合并规则时的置信度信息。
其中,所述区域确定子单元2031、第一确定子单元2032的具体实现方式可以参见上述图6所对应实施例中对第一合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第二合并规则;与所述第二合并规则相关联的第一图层参数是由所述第一图层所在区域的第一尺寸信息所确定的;与所述第二合并规则相关联的第二图层参数是由所述第二图层所在区域的第二尺寸信息所确定的;
所述置信度确定单元501包括:比较子单元2033和第二确定子单元2034;
比较子单元2033,用于将所述第一图层参数中的第一尺寸信息与所述第二图层参数中的第二尺寸信息进行比较,并根据比较结果确定所述第一图层与所述第二图层之间的尺寸关系;
第二确定子单元2034,用于基于所述尺寸关系以及所述第二合并规则对应的第二映射函数,确定所述图层对在所述第二合并规则时的置信度信息。
其中,所述比较子单元2033和第二确定子单元2034的具体实现方式可以参见上述图7所对应实施例中对第二合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第三合并规则;与所述第三合并规则相关联的第一图层参数是由所述第一图层所在区域的第一中心位置信息和第一形状信息所确定的;与所述第三合并规则相关联的第二图层参数是由所述第二图层所在区域的第二中心位置信息和第二形状信息所确定的;
所述置信度确定单元203包括:中心确定子单元2035、形状确定子单元2036和第三确定子单元2037;
中心确定子单元2035,用于根据所述第一图层参数中的第一中心位置信息、所述第二图层参数中的第二位置信息,确定所述第一图层与所述第二图层之间的水平位置关系;
形状确定子单元2036,用于基于所述水平位置关系、所述第一形状信息、所述第二形状信息,确定所述第一图层与所述第二图层之间的第一关联关系;
第三确定子单元2037,用于基于所述第一关联关系、所述第三合并规则对应的第二映射函数,确定所述图层对在所述第三合并规则时的置信度信息。
其中,所述中心确定子单元2035、形状确定子单元2036和第三确定子单元2037的具体实现方式可以参见上述图8所对应实施例中对第三合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第四合并规则;与所述第四合并规则相关联的第一图层参数是由所述第一图层所属的结构区域中的第一切片确定的;与所述第四合并规则相关联的第二图层参数是由所述第二图层所属的结构区域中的第二切片确定的;
所述置信度确定单元501包括:切片确定子单元2038和第四确定子单元2039;
切片确定子单元2038,用于基于所述第一图层参数中的第一切片、所述第二图层中的第二切片,确定所述第一图层与所述第二图层之间的第二关联关系;
第四确定子单元2039,用于基于所述第二关联关系、所述第四合并规则对应的第二映射函数,确定所述图层对在所述第四合并规则时的置信度信息。
其中,所述切片确定子单元2038和第四确定子单元2039的具体实现方式可以参见上述图9所对应实施例中对第四合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第五合并规则;与所述第五合并规则相关联的第一图层参数和第二图层参数均是由所述显示区域中第一图层与第二图层所属的最小公共父目录所确定的;
所述置信度确定单元501包括:层级确定子单元2040和第五确定子单元2041;
层级确定子单元2040,用于基于所述第一图层参数中的所述第一图层到所述最小公共父目录的层级距离、所述第二图层参数中的所述第二图层到所述最小公共父目录的层级距离,确定所述第一图层与所述第二图层之间的层级距离关系;
第五确定子单元2041,用于基于所述层级距离关系、所述第五合并规则对应的第二映射函数,确定所述图层对在所述第五合并规则时的置信度信息。
其中,所述层级确定子单元2040和第五确定子单元2041的具体实现方式可以参见上述图10所对应实施例中对第五合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第六合并规则;与所述第六合并规则相关联的第一图层参数是由所述第一图层所属的第一组件确定的;与所述第六合并规则相关联的第二图层参数是由所述第二图层所属的第二组件确定的;
所述置信度确定单元203包括:组件确定子单元2042和第六确定子单元2043;
组件确定子单元2042,用于基于所述第一图层参数中的第一组件、所述第二图层参数中的第二组件,确定所述第一图层与所述第二图层之间的组件关联关系;
第六确定子单元2043,用于基于所述组件关联关系、所述第六合并规则对应的第二映射函数,确定所述图层对在所述第六合并规则时的置信度信息。
其中,所述组件确定子单元2042和第六确定子单元2043的具体实现方式可以参见上述图11所对应实施例中对第六合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第七合并规则;与所述第七合并规则相关联的第一图层参数是由所述第一图层所属区域的第一样式信息所确定的;所述第七合并规则相关联的第二图层参数是由所述第二图层所属区域的第二样式信息所确定的;
所述置信度确定单元501包括:目标确定子单元2044,样式确定子单元2045和第七确定子单元2046;
目标确定子单元2044,用于基于所述第七合并规则获取所述显示区域对应的层叠样式表;所述层叠样式表中包含目标样式信息;
样式确定子单元2045,用于基于所述目标样式信息、所述第一图层参数中的第一样式信息,确定所述第一图层与所述层叠样式表之间的第一样式关系;
所述样式确定子单元2045,还用于基于所述目标样式信息、所述第二图层参数中的第二样式信息,确定所述第二图层与所述层叠样式表之间的第二样式关系;
第七确定子单元2046,用于基于所述第一样式关系、所述第二样式关系,确定所述第一图层与所述第二图层之间的第三关联关系,并基于所述第三关联关系、所述第七合并规则对应的第二映射函数,确定所述图层对在所述第七合并规则时的置信度信息。
其中,所述目标确定子单元2044,样式确定子单元2045和第七确定子单元2046的具体实现方式可以参见上述图12所对应实施例中对第七合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第八合并规则;与所述第八合并规则相关联的第一图层参数是由所述第一图层所属的第一颜色属性所确定的;与所述第一合并规则相关联的第二图层参数是由所述第二图层所属的第二颜色属性所确定的;
所述置信度确定单元501包括:属性确定子单元2047和第八确定子单元2048;
属性确定子单元2047,用于基于所述第一图层参数中的第一颜色属性,所述第二图层参数中的第二颜色属性,确定所述第一图层与所述第二图层之间的属性匹配关系;
其中,所述所述属性确定子单元2047,具体用于若所述第一颜色属性和所述第二颜色属性均为单一颜色对应的颜色属性,则根据所述第一颜色属性对应的方差和、所述第二颜色属性对应的方差和,确定所述第一图层和所述第二图层之间的颜色匹配关系;
所述属性确定子单元2047,还具体用于若所述第一颜色属性和所述第二颜色属性均为非单一颜色对应的颜色属性,则根据所述第一颜色属性对应的颜色复杂度、所述第二颜色属性对应的颜色复杂度,确定所述第一图层与所述第二图层之间的复杂度匹配关系。
第八确定子单元2048,用于基于所述属性匹配关系、所述第八合并规则对应的第二映射函数,确定所述图层对在所述第八合并规则时的置信度信息。
其中,所述属性确定子单元2047和第八确定子单元2048的具体实现方式可以参见上述图13所对应实施例中对第八合并规则的描述,这里将不再继续进行赘述。
其中,所述图层合并规则包含第九合并规则;与所述第九合并规则相关联的第一图层参数是由所述第一图层所在的第一图标标识确定的;与所述第九合并规则相关联的第二图层参数是由所述第二图层所在的第二图标标识确定的;所述第一图标标识对应的图标和所述第二图标标识对应的图标均是由目标网络模型所识别到的;
所述置信度确定单元501包括:标识确定子单元2049和第九确定子单元2050;
标识确定子单元2049,用于基于所述第一图层参数中的第一图标标识、所述第二图层参数中的第二图标标识,确定所述第一图层和所述第二图层之间的图标关联关系;
第九确定子单元2050,用于基于所述图标关联关系、所述第九合并规则对应的第二映射函数确定所述图层对在所述第九合并规则时的置信度信息。
其中,所述标识确定子单元2049和第九确定子单元2050的具体实现方式可以参见上述图14所对应实施例中对第九合并规则的描述,这里将不再继续进行赘述。
组合度确定单元502,用于获取所述每个合并规则对应的权重值,并基于所述每个合并规则对应的权重值以及所述图层对在相应合并规则时的置信度信息,确定所述图层对对应的组合置信度。
其中,所述置信度确定单元501和组合度确定单元502的具体实现方式可以参见上述图5所对应实施例中对组合置信度的描述,这里将不再继续进行赘述。
图层组合模块20,用于将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
图像输出模块30,用于将所述组合图层和剩余图层确定为初始图层,直到当所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。
其中,所述图层对确定模块10,图层组合模块20、图像输出模块30、规则获取模块40、置信度确定模块50的具体实现方式可以参见上述图5所对应实施例中对步骤S201-步骤S206的描述,这里将不再继续进行赘述。
在本发明实施例中,通过计算出的组合置信度可以快速地从显示区域所包含的图层对中找出能够进行合并的图层对,从而可以将找出的图层对中的两个初始图层进行自动组合,得到组合图层,进而可以有效地避免人工操作的繁琐,以提高图层组合的效率。其中,为了能够尽可能地从显示区域中找出所有能够进行合并的图层,可以重复执行前述的图层配对和组合步骤,直到显示在显示区域中的图层所构成的图层对的组合置信度均无法大于目标置信度时,可以确定当前显示在显示区域中的图层均无法进一步进行组合时,从而可以将最后一次组合得到的组合图层进行图像刻画,以输出最终的组合图像,进而可以有效地确保图层合并的准确度。
进一步地,请参见图17,是本发明实施例提供的一种计算机设备的结构示意图。如图17所示,该计算机设备1000可以为上述图1所对应实施例中的用户终端3000a。该计算机设备1000可以包括:处理器1001,网络接口1004和存储器1005,此外,该计算机设备1000还可以包括:用户接口1003,和至少一个通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。其中,用户接口1003可以包括显示屏(Display)、键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1004可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图17所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及设备控制应用程序。
其中,该计算机设备1000中的网络接口1004还可以与上述图1所对应实施例中的应用服务器2000进行网络连接,且可选用户接口1003还可以包括显示屏(Display)、键盘(Keyboard)。在图17所示的计算机设备1000中,网络接口1004可提供网络通讯功能;而用户接口1003主要用于为用户提供输入的接口;而处理器1001可以用于调用存储器1005中存储的设备控制应用程序,以实现:
从显示区域的多个初始图层中确定图层对;所述图层对包括所述多个初始图层中的任意两个初始图层;
将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
将所述组合图层和剩余图层确定为初始图层,直到所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。
应当理解,本发明实施例中所描述的计算机设备1000可执行前文图3或图5所对应实施例中对所述图层数据处理方法的描述,也可执行前文图16所对应实施例中对所述图层数据处理装置1的描述,在此不再赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。
此外,这里需要指出的是:本发明实施例还提供了一种计算机存储介质,且所述计算机存储介质中存储有前文提及的图层数据处理装置1所执行的计算机程序,且所述计算机程序包括程序指令,当所述处理器执行所述程序指令时,能够执行前文图3或图5所对应实施例中对所述图层数据处理方法的描述,因此,这里将不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。对于本发明所涉及的计算机存储介质实施例中未披露的技术细节,请参照本发明方法实施例的描述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
Claims (16)
1.一种图层数据处理方法,其特征在于,包括:
从显示区域的多个初始图层中确定图层对;所述图层对包括所述多个初始图层中的任意两个初始图层;
将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
将所述组合图层和剩余图层确定为初始图层,直到所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。
2.根据权利要求1所述的方法,其特征在于,所述图层对中的两个初始图层包含第一图层和第二图层;
在所述将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层之前,还包括:
获取所述图层对对应的图层合并规则中的每个合并规则,并将与所述每个合并规则相关联的第一图层的图层参数分别确定为第一图层参数,并将与所述每个合并规则相关联的第二图层的图层参数确定为第二图层参数;
基于所述每个合并规则、每个第一图层参数、每个第二图层参数,确定所述图层对对应的组合置信度。
3.根据权利要求2所述的方法,其特征在于,所述基于所述每个合并规则、每个第一图层参数、每个第二图层参数,确定所述图层对对应的组合置信度,包括:
根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息;
获取所述每个合并规则对应的权重值,基于所述每个合并规则对应的权重值以及所述图层对在相应合并规则时的置信度信息,确定所述图层对对应的组合置信度。
4.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第一合并规则,与所述第一合并规则相关联的第一图层参数是由所述第一图层在所述显示区域中的第一位置信息、第一尺寸信息和扩增尺寸信息所确定的;与所述第一合并规则相关联的第二图层参数是由所述第二图层在所述显示区域中的第二位置信息、第二尺寸信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
根据所述第一图层参数中的第一位置信息、第一尺寸信息、扩增尺寸信息、所述第二图层参数中的第二位置信息、第二尺寸信息,在所述显示区域中确定所述第一图层与所述第二图层之间的参考区域;所述参考区域用于描述所述第一图层与所述第二图层之间的交叠关系;
基于所述参考区域对应的交叠关系和所述第一合并规则对应的第一映射函数,确定所述图层对在所述第一合并规则时的置信度信息。
5.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第二合并规则;与所述第二合并规则相关联的第一图层参数是由所述第一图层所在区域的第一尺寸信息所确定的;与所述第二合并规则相关联的第二图层参数是由所述第二图层所在区域的第二尺寸信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
将所述第一图层参数中的第一尺寸信息与所述第二图层参数中的第二尺寸信息进行比较,并根据比较结果确定所述第一图层与所述第二图层之间的尺寸关系;
基于所述尺寸关系以及所述第二合并规则对应的第二映射函数,确定所述图层对在所述第二合并规则时的置信度信息。
6.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第三合并规则;与所述第三合并规则相关联的第一图层参数是由所述第一图层所在区域的第一中心位置信息和第一形状信息所确定的;与所述第三合并规则相关联的第二图层参数是由所述第二图层所在区域的第二中心位置信息和第二形状信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
根据所述第一图层参数中的第一中心位置信息、所述第二图层参数中的第二位置信息,确定所述第一图层与所述第二图层之间的水平位置关系;
基于所述水平位置关系、所述第一形状信息、所述第二形状信息,确定所述第一图层与所述第二图层之间的第一关联关系;
基于所述第一关联关系、所述第三合并规则对应的第二映射函数,确定所述图层对在所述第三合并规则时的置信度信息。
7.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第四合并规则;与所述第四合并规则相关联的第一图层参数是由所述第一图层所属的结构区域中的第一切片确定的;与所述第四合并规则相关联的第二图层参数是由所述第二图层所属的结构区域中的第二切片确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一切片、所述第二图层参数中的第二切片,确定所述第一图层与所述第二图层之间的第二关联关系;
基于所述第二关联关系、所述第四合并规则对应的第二映射函数,确定所述图层对在所述第四合并规则时的置信度信息。
8.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第五合并规则;与所述第五合并规则相关联的第一图层参数和第二图层参数均是由所述显示区域中第一图层与第二图层所属的最小公共父目录所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的所述第一图层到所述最小公共父目录的层级距离、所述第二图层参数中的所述第二图层到所述最小公共父目录的层级距离,确定所述第一图层与所述第二图层之间的层级距离关系;
基于所述层级距离关系、所述第五合并规则对应的第二映射函数,确定所述图层对在所述第五合并规则时的置信度信息。
9.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第六合并规则;与所述第六合并规则相关联的第一图层参数是由所述第一图层所属的第一组件确定的;与所述第六合并规则相关联的第二图层参数是由所述第二图层所属的第二组件确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一组件、所述第二图层参数中的第二组件,确定所述第一图层与所述第二图层之间的组件关联关系;
基于所述组件关联关系、所述第六合并规则对应的第二映射函数,确定所述图层对在所述第六合并规则时的置信度信息。
10.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第七合并规则;与所述第七合并规则相关联的第一图层参数是由所述第一图层所属区域的第一样式信息所确定的;与所述第七合并规则相关联的第二图层参数是由所述第二图层所属区域的第二样式信息所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第七合并规则获取所述显示区域对应的层叠样式表;所述层叠样式表中包含目标样式信息;
基于所述目标样式信息、所述第一图层参数中的第一样式信息,确定所述第一图层与所述层叠样式表之间的第一样式关系;
基于所述目标样式信息、所述第二图层参数中的第二样式信息,确定所述第二图层与所述层叠样式表之间的第二样式关系;
基于所述第一样式关系、所述第二样式关系,确定所述第一图层与所述第二图层之间的第三关联关系,并基于所述第三关联关系、所述第七合并规则对应的第二映射函数,确定所述图层对在所述第七合并规则时的置信度信息。
11.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第八合并规则;与所述第八合并规则相关联的第一图层参数是由所述第一图层所属的第一颜色属性所确定的;与所述第八合并规则相关联的第二图层参数是由所述第二图层所属的第二颜色属性所确定的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一颜色属性,所述第二图层参数中的第二颜色属性,确定所述第一图层与所述第二图层之间的属性匹配关系;
基于所述属性匹配关系、所述第八合并规则对应的第二映射函数,确定所述图层对在所述第八合并规则时的置信度信息。
12.根据权利要求11所述的方法,其特征在于,所述基于所述第一图层参数中的第一颜色属性,所述第二图层参数中的第二颜色属性,确定所述第一图层与所述第二图层之间的属性匹配关系,包括:
若所述第一颜色属性和所述第二颜色属性均为单一颜色对应的颜色属性,则根据所述第一颜色属性对应的方差和、所述第二颜色属性对应的方差和,确定所述第一图层和所述第二图层之间的颜色匹配关系;
若所述第一颜色属性和所述第二颜色属性均为非单一颜色对应的颜色属性,则根据所述第一颜色属性对应的颜色复杂度、所述第二颜色属性对应的颜色复杂度,确定所述第一图层与所述第二图层之间的复杂度匹配关系。
13.根据权利要求3所述的方法,其特征在于,所述图层合并规则包含第九合并规则;与所述第九合并规则相关联的第一图层参数是由所述第一图层所在的第一图标标识确定的;与所述第九合并规则相关联的第二图层参数是由所述第二图层所在的第二图标标识确定的;所述第一图标标识对应的图标和所述第二图标标识对应的图标均是由目标网络模型所识别到的;
所述根据所述每个合并规则对应的映射函数、以及与相应合并规则相关联的第一图层参数和第二图层参数,分别确定所述图层对在相应合并规则时的置信度信息,包括:
基于所述第一图层参数中的第一图标标识、所述第二图层参数中的第二图标标识,确定所述第一图层和所述第二图层之间的图标关联关系;
基于所述图标关联关系、所述第九合并规则对应的第二映射函数,确定所述图层对在所述第九合并规则时的置信度信息。
14.一种图层数据处理装置,其特征在于,包括:
图层对确定模块,用于从显示区域的多个初始图层中确定图层对;所述图层对包括所述多个初始图层中的任意两个初始图层;
图层组合模块,用于将所述图层对中组合置信度大于目标置信度的图层对确定为目标图层对,并将所述目标图层对中的两个初始图层进行组合,得到组合图层;
图像输出模块,用于将所述组合图层和剩余图层确定为初始图层,直到所述显示区域中不存在组合置信度大于目标置信度的图层对时,输出与所述组合图层相关联的组合图像;所述剩余图层为所述多个初始图层中除所述组合图层外的初始图层。
15.一种计算机设备,其特征在于,包括:处理器、存储器;
所述处理器与存储器相连,其中,所述存储器用于存储程序代码,所述处理器用于调用所述程序代码,以执行如权利要求1-13任一项所述的方法。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时,执行如权利要求1-13任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910385215.2A CN111914197B (zh) | 2019-05-09 | 2019-05-09 | 一种图层数据处理方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910385215.2A CN111914197B (zh) | 2019-05-09 | 2019-05-09 | 一种图层数据处理方法、装置及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111914197A true CN111914197A (zh) | 2020-11-10 |
CN111914197B CN111914197B (zh) | 2023-06-06 |
Family
ID=73242918
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910385215.2A Active CN111914197B (zh) | 2019-05-09 | 2019-05-09 | 一种图层数据处理方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111914197B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113889016A (zh) * | 2021-09-29 | 2022-01-04 | 昆山国显光电有限公司 | 显示补偿方法、装置、显示装置及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2646117A1 (en) * | 2008-12-02 | 2010-06-02 | Oculus Info Inc. | System and method for visualizing connected temporal and spatial information as an integrated visual representation on a user interface |
CN103152429A (zh) * | 2013-03-21 | 2013-06-12 | 广东威创视讯科技股份有限公司 | 基于web跨平台与拼墙互动的方法及装置 |
EP2704037A2 (en) * | 2012-08-31 | 2014-03-05 | Sitecore A/S | A method for generating or updating an interactive webpage |
CN105354022A (zh) * | 2015-10-16 | 2016-02-24 | 华为技术有限公司 | 一种页面布局文件生成方法及装置 |
CN107256552A (zh) * | 2017-06-14 | 2017-10-17 | 成都康托医疗设备有限公司 | 息肉图像识别系统及方法 |
-
2019
- 2019-05-09 CN CN201910385215.2A patent/CN111914197B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2646117A1 (en) * | 2008-12-02 | 2010-06-02 | Oculus Info Inc. | System and method for visualizing connected temporal and spatial information as an integrated visual representation on a user interface |
EP2704037A2 (en) * | 2012-08-31 | 2014-03-05 | Sitecore A/S | A method for generating or updating an interactive webpage |
CN103152429A (zh) * | 2013-03-21 | 2013-06-12 | 广东威创视讯科技股份有限公司 | 基于web跨平台与拼墙互动的方法及装置 |
CN105354022A (zh) * | 2015-10-16 | 2016-02-24 | 华为技术有限公司 | 一种页面布局文件生成方法及装置 |
CN107256552A (zh) * | 2017-06-14 | 2017-10-17 | 成都康托医疗设备有限公司 | 息肉图像识别系统及方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113889016A (zh) * | 2021-09-29 | 2022-01-04 | 昆山国显光电有限公司 | 显示补偿方法、装置、显示装置及存储介质 |
CN113889016B (zh) * | 2021-09-29 | 2024-04-19 | 昆山国显光电有限公司 | 显示补偿方法、装置、显示装置及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111914197B (zh) | 2023-06-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10831819B2 (en) | Hue-based color naming for an image | |
US10049466B2 (en) | Color name generation from images and color palettes | |
US9741137B2 (en) | Image-based color palette generation | |
US9396560B2 (en) | Image-based color palette generation | |
US9552656B2 (en) | Image-based color palette generation | |
US9633448B1 (en) | Hue-based color naming for an image | |
US9311889B1 (en) | Image-based color palette generation | |
CN108228169B (zh) | 基于eCharts工具的图表制作方法、装置、设备及介质 | |
US20160005188A1 (en) | Color name generation from images and color palettes | |
US9697573B1 (en) | Color-related social networking recommendations using affiliated colors | |
CN106503656A (zh) | 一种图像分类方法、装置和计算设备 | |
CN107240029B (zh) | 一种数据处理方法及装置 | |
Linares et al. | Segmentation of large images based on super‐pixels and community detection in graphs | |
US10936620B2 (en) | Systems and methods for management of multi-perspective customer segments | |
US10217224B2 (en) | Method and system for sharing-oriented personalized route planning via a customizable multimedia approach | |
CN110210457A (zh) | 人脸检测方法、装置、设备及计算机可读存储介质 | |
CN111914197B (zh) | 一种图层数据处理方法、装置及存储介质 | |
CN107193979B (zh) | 一种同源图片检索的方法 | |
CN111191065B (zh) | 一种同源图像确定方法及装置 | |
CN104598470A (zh) | 基于偏好的数据表示框架 | |
CN112232890B (zh) | 数据处理方法、装置、设备及存储介质 | |
US10311577B1 (en) | Techniques to improve edge detection for images | |
US10796197B2 (en) | Automatic method and system for similar images and image fragments detection basing on image content | |
CN115937027A (zh) | 一种场景中水雾配置方法、装置、电子设备及存储介质 | |
CN117093539A (zh) | 提示信息的显示方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |