CN108027967B - 图像拼接的方法和电子设备 - Google Patents
图像拼接的方法和电子设备 Download PDFInfo
- Publication number
- CN108027967B CN108027967B CN201580083380.2A CN201580083380A CN108027967B CN 108027967 B CN108027967 B CN 108027967B CN 201580083380 A CN201580083380 A CN 201580083380A CN 108027967 B CN108027967 B CN 108027967B
- Authority
- CN
- China
- Prior art keywords
- image
- control object
- position information
- control
- same
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000003068 static effect Effects 0.000 claims description 37
- 239000007787 solid Substances 0.000 claims description 21
- 238000010586 diagram Methods 0.000 description 26
- 238000005516 engineering process Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
本发明实施例提供一种图像拼接的方法和电子设备,此方法包括:获取第一图像的控件对象;获取第二图像的控件对象;识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息;位置信息包括第一位置信息和第二位置信息;第一位置信息指示相同控件对象在第一图像中的位置;第二位置信息指示相同控件对象在第二图像中的位置;根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像;从而可准确识别出第一图像中与第二图像中的重复区域或内容,根据所述相同区域或内容的位置信息将第一图像与第二图像拼接为第三图像,获得的第三图像中不存在重复的内容,提高了图像拼接的准确性。
Description
技术领域
本发明实施例涉及图像处理技术领域,尤其涉及一种图像拼接的方法和电子设备。
背景技术
移动互联网时代,我们经常会使用手机屏幕截图并分享。但遇到超过一屏的内容需要分享时,就只能连续截多个屏幕的内容了,操作比较麻烦,且可读性变差了。于是,“长截屏”、“滚动截屏”这类应用应运而生。长截屏、滚动截屏应用的最关键体验是最终拼接的“长图”是否准确,而长图能否拼接准确,最关键的技术是要能准确识别待拼接的截图的重复区域,把重复区域去除掉并拼接。
现有技术中普遍采用的办法是通过图像比较的方法,逐像素分析上一张(第N-1屏)截图的“底部”和下一张(第N屏)截图的“顶部”有没有重复区域。现有的这种图像比较的方法,对于使用纯色聊天背景的场景,能够准确的识别出两张图像的重复区域。但是,一旦用户使用了非纯色的聊天背景,“聊天背景”的相对位置时时刻刻在改变,仅通过图像比较的方法,就找不到两张图像的重复区域了,这样拼接形成的图像存在重复的内容,类似这种图像拼接的准确性需要进一步提高。
发明内容
为了准确确定待拼接图像的重复区域或内容,改善图像拼接存在重复内容的问题。本发明实施例提供一种图像拼接的技术方案,所述技术方案包括:
第一方面,本发明实施例提供一种图像拼接的方法,包括:获取第一图像的控件对象;获取第二图像的控件对象;识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息,位置信息包括第一位置信息和第二位置信息,第一位置信息指示相同控件对象在第一图像中的位置,第二位置信息指示相同控件对象在第二图像中的位置;然后根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像;从而可以准确识别出第一图像中与第二图像中的重复区域或内容,根据所述相同区域或内容的位置信息将第一图像与第二图像拼接为第三图像,获得的第三图像中不存在重复的内容,提高了图像拼接的准确性。
根据第一方面,在第一方面的第一种可能的实现方式中,上述的识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息具体为:获取第一图像中的控件对象在第一图像中的位置信息,根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像;以及获取第二图像中的控件对象在第二图像中的位置信息,根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像;比较第一中间图像与第二中间图像,确定第一中间图像与第二中间图像中的相同控件对象,确定相同控件对象在第一中间图像中的位置信息,确定相同控件对象在第二中间图像中的位置信息。
根据第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,第一中间图像的背景是纯色的;第二中间图像的背景是纯色的;第一中间图像的背景和第二中间图像的背景相同;从而可以避免第一图像与第二图像中的具有个性化设置信息的背景图像对无法确定第一图像与第二图像中相同控件对象的影响,提高确定第一图像与第二图像中相同控件对象的准确性。
根据第一方面的第一种可能的实现方式或第一方面的第二种可能的实现方式,在第一方面的第三种可能的实现方式中,第一中间图像与第一图像的尺寸相同;第二中间图像与第二图像的尺寸相同;第一图像中的控件对象的位置信息与第一中间图像中的控件对象的位置信息相同;第二图像中的控件对象的位置信息与第二中间图像中的控件对象的位置信息相同;从而提高确定第一图像与第二图像中相同控件对象的准确性。
根据以上第一方面的任意一种可能的实现方式,在第一方面的第四种可能的实现方式中,根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像,包括:
若控件对象为文本控件,提取出文本控件中的文本,并根据控件对象在所属图像中的位置信息,将文本控件中的文本布局在中间背景图像中;或者,
若控件对象为不透底的文本控件,则根据控件对象在所属图像中的位置信息,将不透底的文本控件布局在中间背景图像中;或者,若控件对象为透底的文本控件,则提取出透底的文本控件中的文本,并根据控件对象在所属图像中的位置信息,将透底的文本控件中的文本布局在中间背景图像中,或者,将透底的文本控件替换为色块图像,并根据文本控件在所属图像中的位置信息,将色块图像布局在中间背景图像中,色块图像的尺寸与不透底的文本控件的尺寸相同;或者,
若控件对象为动态图像控件,则将动态图像控件替换为静态图像,并根据动态图像控件在所属图像中的位置信息,将静态图像布局在中间背景图像中,静态图像的尺寸与动态图像控件的尺寸相同。
根据第一方面或以上第一方面的任意一种可能的实现方式,在第一方面的第五种可能的实现方式中,位置信息为坐标信息。
根据第一方面或以上第一方面的任意一种可能的实现方式,在第一方面的第六种可能的实现方式中,根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像具体为:根据第一位置信息获取第一待拼接图像,将第一待拼接图像与第一图像拼接为第三图像;或者,根据第二位置信息获取第二待拼接图像,将第一图像与第二拼接图像拼接为第三图像。
第二方面,本发明实施例提供一种电子设备,包括:获取单元,用于获取第一图像的控件对象,以及获取第二图像的控件对象;识别单元,用于识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息;位置信息包括第一位置信息和第二位置信息;第一位置信息指示相同控件对象在第一图像中的位置;第二位置信息指示相同控件对象在第二图像中的位置;拼接单元,用于根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像;从而电子设备可以准确识别出第一图像中与第二图像中的重复区域或内容,根据所述相同区域或内容的位置信息将第一图像与第二图像拼接为第三图像,获得的第三图像中不存在重复的内容,提高了图像拼接的准确性。
根据第二方面,在第二方面的第一种可能的实现方式中,识别单元具体用于:获取第一图像中的控件对象在第一图像中的位置信息;根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像;获取第二图像中的控件对象在第二图像中的位置信息;根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像;比较第一中间图像与第二中间图像,确定第一中间图像与第二中间图像中的相同控件对象;确定相同控件对象在第一中间图像中的位置信息;确定相同控件对象在第二中间图像中的位置信息。
根据第二方面的第一种可能的实现方式,在第二方面的第二种可能的实现方式中,第一中间图像的背景是纯色的;第二中间图像的背景是纯色的;第一中间图像的背景和第二中间图像的背景相同;从而可以避免第一图像与第二图像中的具有个性化设置信息的背景图像对无法确定第一图像与第二图像中相同控件对象的影响,提高确定第一图像与第二图像中相同控件对象的准确性。
根据第二方面的第一种可能的实现方式或第二方面的第二种可能的实现方式,在第二方面的第三种可能的实现方式中,第一中间图像与第一图像的尺寸相同;第二中间图像与第二图像的尺寸相同;第一图像中的控件对象的位置信息与第一中间图像中的控件对象的位置信息相同;第二图像中的控件对象的位置信息与第二中间图像中的控件对象的位置信息相同;从而提高确定第一图像与第二图像中相同控件对象的准确性。
根据以上第二方面的任意一种可能的实现方式,在第二方面的第四种可能的实现方式中,识别单元在根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像时,具体用于:
若控件对象为文本控件,提取出文本控件中的文本,并根据控件对象在所属图像中的位置信息,将文本控件中的文本布局在中间背景图像中;或者,
若控件对象为不透底的文本控件,则根据控件对象在所属图像中的位置信息,将不透底的文本控件布局在中间背景图像中;或者,若控件对象为透底的文本控件,则提取出透底的文本控件中的文本,并根据控件对象在所属图像中的位置信息,将透底的文本控件中的文本布局在中间背景图像中,或者,将透底的文本控件替换为色块图像,并根据文本控件在所属图像中的位置信息,将色块图像布局在中间背景图像中,色块图像的尺寸与不透底的文本控件的尺寸相同;或者,
若控件对象为动态图像控件,则将动态图像控件替换为静态图像,并根据动态图像控件在所属图像中的位置信息,将静态图像布局在中间背景图像中,静态图像的尺寸与动态图像控件的尺寸相同。
根据第二方面或以上第二方面的任意一种可能的实现方式,在第二方面的第五种可能的实现方式中,位置信息为坐标信息。
根据第二方面或以上第二方面的任意一种可能的实现方式,在第二方面的第六种可能的实现方式中,拼接单元具体用于:根据第一位置信息获取第一待拼接图像,将第一待拼接图像与第二图像拼接为第三图像;或者,根据第二位置信息获取第二待拼接图像,将第一图像与第二待拼接图像拼接为第三图像。
第三方面,本发明实施例提供一种电子设备,包括:存储器,用于存储指令;
处理器,用于调用存储器中存储的指令执行:获取第一图像的控件对象,以及获取第二图像的控件对象;识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息,位置信息包括第一位置信息和第二位置信息,第一位置信息指示相同控件对象在第一图像中的位置,第二位置信息指示相同控件对象在第二图像中的位置;根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像;
显示器,用于显示第一图像、第二图像以及第三图像;
从而电子设备可以准确识别出第一图像中与第二图像中的重复区域或内容,根据所述相同区域或内容的位置信息将第一图像与第二图像拼接为第三图像,获得的第三图像中不存在重复的内容,提高了图像拼接的准确性。
根据第三方面,在第三方面的第一种可能的实现方式中,处理器在识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息时,具体用于:获取第一图像中的控件对象在第一图像中的位置信息;根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像;获取第二图像中的控件对象在第二图像中的位置信息;根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像;比较第一中间图像与第二中间图像,确定第一中间图像与第二中间图像中的相同控件对象;确定相同控件对象在第一中间图像中的位置信息;确定相同控件对象在第二中间图像中的位置信息。
根据第三方面的第一种可能的实现方式,在第三方面的第二种可能的实现方式中,第一中间图像的背景是纯色的;第二中间图像的背景是纯色的;第一中间图像的背景和第二中间图像的背景相同;从而可以避免第一图像与第二图像中的具有个性化设置信息的背景图像对无法确定第一图像与第二图像中相同控件对象的影响,提高确定第一图像与第二图像中相同控件对象的准确性。
根据第三方面的第一种可能的实现方式或第三方面的第二种可能的实现方式,在第三方面的第三种可能的实现方式中,第一中间图像与第一图像的尺寸相同;第二中间图像与第二图像的尺寸相同;第一图像中的控件对象的位置信息与第一中间图像中的控件对象的位置信息相同;第二图像中的控件对象的位置信息与第二中间图像中的控件对象的位置信息相同;从而提高确定第一图像与第二图像中相同控件对象的准确性。
根据以上第三方面的任意一种可能的实现方式,在第三方面的第四种可能的实现方式中,处理器在根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像时,具体用于:
若控件对象为文本控件,提取出文本控件中的文本,并根据控件对象在所属图像中的位置信息,将文本控件中的文本布局在中间背景图像中;或者,
若控件对象为不透底的文本控件,则根据控件对象在所属图像中的位置信息,将不透底的文本控件布局在中间背景图像中;或者,若控件对象为透底的文本控件,则提取出透底的文本控件中的文本,并根据控件对象在所属图像中的位置信息,将透底的文本控件中的文本布局在中间背景图像中,或者,则将透底的文本控件替换为色块图像,并根据文本控件在所属图像中的位置信息,将色块图像布局在中间背景图像中,色块图像的尺寸与不透底的文本控件的尺寸相同;或者,
若控件对象为动态图像控件,则将动态图像控件替换为静态图像,并根据动态图像控件在所属图像中的位置信息,将静态图像布局在中间背景图像中,静态图像的尺寸与动态图像控件的尺寸相同。
根据第三方面或以上第三方面的任意一种可能的实现方式,在第三方面的第五种可能的实现方式中,位置信息为坐标信息。
根据第三方面或以上第三方面的任意一种可能的实现方式,在第三方面的第六种可能的实现方式中,处理器在根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像时,具体用于:根据第一位置信息获取第一待拼接图像,将第一待拼接图像与第二图像拼接为第三图像;或者,根据第二位置信息获取第二待拼接图像,将第一图像与第二待拼接图像拼接为第三图像。
通过本发明实施例提供的上述图像拼接的方法,可以准确识别出第一图像中与第二图像中的重复区域或内容,根据所述相同区域或内容的位置信息将第一图像与第二图像拼接为第三图像,获得的第三图像中不存在重复的内容,提高了图像拼接的准确性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的电子设备的结构示意图;
图2为本发明图像拼接的方法实施例一的流程图;
图3A为本发明实施例提供的第一图像的一种示意图;
图3B为本发明实施例提供的第二图像的一种示意图;
图3C为本发明实施例提供的第三图像的一种示意图;
图3D为本发明实施例提供的第三图像的另一种示意图;
图4A为本发明实施例提供的第一中间图像的一种示意图;
图4B为本发明实施例提供的第二中间图像的一种示意图;
图5A为本发明实施例提供的图3B中的控件对象布局在中间背景图像中的一种示意图;
图5B为本发明实施例提供的透底的文本控件的一种示意图;
图5C为本发明实施例提供的将透底的文本控件布局在中间背景图像中的一种示意图;
图5D为本发明实施例提供的将透底的文本控件布局在中间背景图像中的另一种示意图;
图6为本发明实施例一提供的电子设备的结构示意图;
图7为本发明实施例二提供的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明可以应用于电子设备中,该电子设备可以为手机、平板电脑(PAD)、笔记本电脑或者可穿戴设备等具有显示屏的设备。
为便于说明,本发明中的实施例以电子设备100作示例性说明,本领域技术人员可以理解的,本发明中的实施例同样适用于其他装置,例如手持设备、车载设备、可穿戴设备、计算设备,以及各种形式的用户设备(英文:User Equipment,简称:UE),移动台(英文:Mobile station,简称:MS),终端(terminal),终端设备(Terminal Equipment)等等。
图1为本发明实施例提供的电子设备的结构示意图。
电子设备100可以包括触敏显示单元130、加速度传感器151、接近光传感器152、环境光传感器153、存储器120、处理器190、射频单元110、音频电路160、扬声器161、麦克风162、无线保真(英文:wireless fidelity,简称:WiFi)模块170、蓝牙模块180、电源193、外部接口197等部件。
本领域技术人员可以理解,图1仅仅是电子设备的举例,并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件。
所述触敏显示单元130有时为了方便被称为“触摸屏”,并且也可被称为是或者被叫做触敏显示器系统,也可以被称为具有触敏表面(touch-sensitive surface)的显示器。所述具有触敏表面的显示器包括触敏表面和显示屏;可以显示屏幕界面、也可以接收触摸动作。
触敏显示单元130提供设备与用户之间的输入接口和输出接口。所述触敏显示单元130可收集用户在其上或附近的触摸操作,例如用户使用手指、关节、触笔等任何适合的物体在触敏显示单元上或在触敏显示单元附近的操作。触敏显示单元可以检测对触敏显示单元的触摸动作、触敏显示单元的网格电容值、触点坐标,将所述触摸动作、触敏显示单元的网格电容值、触点坐标信息发送给所述处理器190,并能接收所述处理器190发来的命令并加以执行。触敏显示单元130显示视觉输出。视觉输出可包括图像、文本、图标、视频及它们的任何组合(统称为“图形”)。在一些实施例中,视觉输出可对应于第一图像、第二图像或第三图像。
触敏显示单元130可使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术,但是在其他实施例中可使用其他显示技术。触敏显示单元130可以利用现在已知的或以后将开发出的多种触摸感测技术中的任何技术,以及其他接近传感器阵列或用于确定与触敏显示单元130接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一示例性实施例中,使用投射式互电容感测技术。
在一些实施例中,除了触敏显示单元之外,电子设备100可包括用于激活或解除激活特定功能的触控板(未示出)。在一些实施例中,触控板是设备的触敏区域,该触敏区域与触敏显示单元不同,其不显示视觉输出。触控板可以是与触敏显示单元130分开的触敏表面,或者是由触敏显示单元形成的触敏表面的延伸部分。
所述加速度传感器151可检测各个方向上(一般为三轴)加速度的大小。同时,所述加速度传感器151还可用于检测终端静止时重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准),振动识别相关功能(比如计步器、敲击)等。但是可以理解的是,其并不属于电子设备100的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
电子设备100还可以包括一个或多个接近光传感器152,用于当所述电子设备100距用户较近时(例如当用户正在打电话时靠近耳朵)关闭并禁用触敏表面的触摸功能,以避免用户对触敏显示单元的误操作。电子设备100还可以包括一个或多个环境光传感器153,用于当电子设备100位于用户口袋里或其他黑暗区域时保持触敏显示单元关闭,以防止电子设备100在锁定状态时消耗不必要的电池功耗或被误操作。在一些实施例中,接近光传感器和环境光传感器可以集成在一颗部件中,也可以作为两个独立的部件。至于电子设备100还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。虽然图1示出了接近光传感器和环境光传感器,但是可以理解的是,其并不属于电子设备100的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
所述存储器120可用于存储指令和数据。存储器120可主要包括存储指令区和存储数据区。存储数据区可存储图像、控件对象、控件对象的位置信息。存储指令区可存储操作系统、至少一个功能所需的指令等。所述指令可使处理器190执行以下方法,具体方法包括:获取第一图像的控件对象;获取第二图像的控件对象;识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息,位置信息包括第一位置信息和第二位置信息,第一位置信息指示相同控件对象在第一图像中的位置,第二位置信息指示相同控件对象在第二图像中的位置;然后根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像。
处理器190是电子设备100的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器120内的指令以及调用存储在存储器120内的数据,执行电子设备100的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器190可包括一个或多个处理单元;优选的,处理器190可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器190中。在一些实施例中,处理器、存储器、可以在单一芯片上实现,在一些实施例中,他们也可以在独立的芯片上分别实现。在本发明实施例中,处理器190还用于调用存储器中的指令以实现准确识别出第一图像中与第二图像中的重复区域或内容,根据所述相同区域或内容的位置信息将第一图像与第二图像拼接为第三图像,获得的第三图像中不存在重复的内容,提高了图像拼接的准确性。
所述射频单元110可用于收发信息或通话过程中信号的接收和发送,特别地,将基站的下行信息接收后,给处理器190处理;另外,将设计上行的数据发送给基站。通常,RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low NoiseAmplifier,LNA)、双工器等。此外,射频单元110还可以通过无线通信与网络设备和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(英文:Global System of Mobile communication,简称:GSM)、通用分组无线服务(英文:General Packet Radio Service,简称:GPRS)、码分多址(英文:Code Division MultipleAccess,简称:CDMA)、宽带码分多址(英文:Wideband Code Division Multiple Access,简称:WCDMA)、长期演进(英文:Long Term Evolution,简称:LTE)、电子邮件、短消息服务(英文:Short Messaging Service,简称:SMS)等。
音频电路160、扬声器161、麦克风162可提供用户与电子设备100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,麦克风162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器190处理后,经射频单元110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理,音频电路也可以包括耳机插孔163,用于提供音频电路和耳机之间的连接接口。
WiFi属于短距离无线传输技术,电子设备100通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了WiFi模块170,但是可以理解的是,其并不属于电子设备100的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
蓝牙是一种短距离无线通讯技术。利用蓝牙技术,能够有效地简化掌上电脑、笔记本电脑和手机等移动通信终端设备之间的通信,也能够成功地简化以上这些设备与因特网(Internet)之间的通信,电子设备100通过蓝牙模块180使电子设备100与因特网之间的数据传输变得更加迅速高效,为无线通信拓宽道路。蓝牙技术是能够实现语音和数据无线传输的开放性方案。然图1示出了WiFi模块170,但是可以理解的是,其并不属于电子设备100的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
电子设备100还包括给各个部件供电的电源193(比如电池),优选的,电源可以通过电源管理系统与处理器190逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
电子设备100还包括外部接口197,所述外部接口可以是标准的Micro USB接口,也可以是多针连接器,可以用于连接电子设备100与其他装置进行通信,也可以用于连接充电器为电子设备100充电。
尽管未示出,电子设备100还可以包括摄像头、闪光灯等,在此不再赘述。
本发明提供下述各实施例可以用于拼接N张图像,N为大于或等于2的正整数,下面以N为2进行举例来说明本发明实施例提供的图像拼接方法,N张图像中每相邻两张图像之间的处理方式与下述两张图像之间的处理方式类似。
图2为本发明图像拼接的方法实施例一的流程图,如图2所示,本实施例的方法以拼接两张图像(第一图像与第二图像)为例进行说明,本实施例的方法可以包括:
获取第一图像的控件对象,获取第二图像的控件对象(S101);识别第一图像的控件对象与第二图像的控件对象中的相同控件对象以及该相同控件对象的位置信息(S102);根据所述相同控件对象的位置信息将第一图像和第二图像拼接为第三图像(S103)。
S101、获取第一图像的控件对象;获取第二图像的控件对象。
本实施例中,可以获取需要进行拼接的两张图像的控件对象。为了便于说明,本发明实施例以第一图像与第二图像说明,第一图像与第二图像可以是任意两张保存在电子设备的存储器中的图像。可以通过摄像头获取并保存在电子设备的存储器中,也可以是由电子设备的显示屏的显示界面生成的。如果所述图像是由电子设备的显示屏的显示界面生成的,可以通过按压电子设备特定的按键获取并保存在电子设备的存储器中。控件对象为组成图像的部件。控件对象可以包括:文本控件对象、动态图像控件对象、静态图像控件对象、背景控件对象等。示例性的,以图3A为例,图3A包括背景控件对象、文本控件对象和表情控件对象。
获取第一图像的控件对象以及第二图像的控件对象的一种可选的方式为:首先识别图像中的控件对象类型,例如文本控件类型、动态图像控件类型、背景控件类型等等。然后根据识别出的控件对象类型获取各控件对象类型对应的控件对象。
图3A为本发明实施例提供的第一图像的一种示意图。
以图3A为例,图3A所示的第一图像中包括文本控件对象:时间框、“你好”、“你现在在哪儿”、“在西安”、“真巧,我也在西安”、“太好了,有时间聚聚”;表情控件对象;“*”型的背景控件对象。在获取控件对象时,首先识别第一图像中包括文本控件类型、表情控件类型以及背景控件类型。然后根据所识别的控件对象类型获取各控件对象类型对应的控件对象,如:文本控件类型对应的控件对象包括时间框、“你好”、“你现在在哪儿”、“在西安”、“真巧,我也在西安”、“太好了,有时间聚聚”;背景控件类型对应的控件对象为“*”型背景控件;表情控件类型对应的控件对象为笑脸表情控件。
图3B为本发明实施例提供的第二图像的一种示意图。
以如图3B为例,图3B所示的第二图中包括文本控件对象“太好了,有时间聚聚”、“好啊,那就今天吧”、“中午十二点不见不散”、“好的”;“*”型的背景控件对象。在获取控件对象时,首先识别第二图像中包括文本控件类型和背景控件类型,然后根据所识别的控件对象类型获取各控件对象类型对应的控件对象,如:文本控件类型对应的控件对象包括:“太好了,有时间聚聚”、“好啊,那就今天吧”、“中午十二点不见不散”、“好的”;背景控件类型对应的控件对象为“*”型背景控件。
如图3A和图3B所示,可以理解背景控件对象可以包括用户自定义的个性化设置信息,如:用户自定义图形、花朵或人物图像等为个性化的背景界面,示例性的,图3A和图3B中包含用户自定义的“*”型个性化背景控件对象。
本实施例中,至少可以通过以下两种实现方案识别图像中的控件对象类型:1)通过安卓平台提供的“辅助服务”工具识别图像中的控件对象类型。以图3A为例,通过安卓平台提供的“辅助服务”工具识别图3A包括文本控件类型、静态图像控件类型以及背景控件类型。2)通过图像识别的方法识别特征颜色判断控件对象,结合控件对象的命名确定控件对象类型。例如,即时通讯聊天对话框的特征颜色是绿色的,当通过图像识别的方法识别出绿色的特征颜色时,初步判断具有绿色特征颜色的对象为控件对象,进一步获取具有绿色特征颜色的控件对象的命名以确定控件对象的类型。例如:当获取控件对象的命名为TEXTVIEW,则通过控件对象的命名可以确定该控件为文本控件。若控件的命名为IMAGEVIW,则可以确定该控件为图像控件。
S102、识别第一图像的控件对象与第二图像的控件对象中的相同控件对象以及该相同控件对象的位置信息。
本实施例中,在获取第一图像的控件对象与第二图像的控件对象之后,可以将第一图像的控件对象与第二图像的控件对象进行比较,识别出第一图像的控件对象与第二图像的控件对象中的相同控件对象以及该相同控件对象的位置信息。其中,该相同控件对象既存在于第一图像中也存在于第二图像中。而且,该相同控件对象的位置信息包括第一位置信息和第二位置信息。第一位置信息指示该相同控件对象在第一图像中的位置;第二位置信息指示该相同控件对象在第二图像中的位置。此处相同控件对象是指:以两个控件对象均为文本控件对象为例,这两个文本控件对象中的文本内容相同以及文本框的颜色也相同。需要说明的是,由于个性化控件对象影响识别两张图像的相同控件对象的准确性,因此,在比较第一图像的控件对象与第二图像的控件对象的过程中,将用户自定义的个性化控件对象隔离。即:用户自定义的个性化控件对象不作为比较的对象。以图3A、图3B为例,背景控件对象为用户自定义的“*”型个性化控件对象。背景控件对象不用于识别第一图像与第二图像中的相同控件对象的过程。本实施例中位置信息可以是坐标信息。位置信息可以包括第一位置信息和第二位置信息。第一位置信息可以指示该相同控件对象在第一图像中的坐标信息。第二位置信息可以指示该相同控件对象在第二图像中的坐标信息。步骤S1021~步骤S1023将详细描述识别两张图像的相同控件的实现方案。
如图3A所示的第一图像与图3B所示的第二图像,图3A中所示的“太好了,有时间聚聚”与图3B中所示的“太好了,有时间聚聚”为相同控件对象。若以第一图像的横向坐标为X轴,第一图像的纵向坐标为Y轴,第一图像的左下角为原点坐标,则“太好了,有时间聚聚”在第一图像中的坐标信息为X轴:4-14;Y轴:0-2;若以第二图像的横向坐标为X轴,第二图像的纵向坐标为Y轴,第二图像的左下角为原点坐标,则“太好了,有时间聚聚”在第二图像中的坐标信息为X轴:4-14,Y轴:17-19。
S103、根据所述相同控件对象的位置信息将第一图像与第二图像拼接为第三图像。
本实施例中,在确定相同控件对象的位置信息之后,根据该相同控件对象的位置信息,将第一图像和第二图像拼接为第三图像。所述位置信息可以为坐标信息。优选的,所述相同控件对象位于第一图像的底部,所述相同控件对象位于第二图像的顶部。根据该相同控件对象在第一图像中的位置信息,即第一位置信息,截取第一图像中第一位置信息以上的区域,获得第一待拼接图像。将第一待拼接图像与第二图像拼接形成第三图像。或者根据该相同控件对象在第二图像中的位置信息,即第二位置信息,截取第二图像中第二位置信息以下的区域,获得第二待拼接图像。将第一图像与第二待拼接图像拼接形成第三图像
图3C为本发明实施例提供的第三图像的一种示意图。
图3D为本发明实施例提供的第三图像的另一种示意图。
例如:以图3A、图3B为例,当识别“太好了,有时间聚聚”文本控件对象为第一图像与第二图像的相同控件对象后,识别该相同控件对象在图3A所示的第一图像中的坐标信息为X轴:4-14,Y轴:0-2。该相同控件对象在图3B所示的第二图像中的坐标信息为X轴:4-14,Y轴:17-19。将第一图像和第二图像拼接为第三图像的一种实现方式为:截取第一图像中Y轴坐标2以上的区域,获得第一待拼接图像,将第一待拼接图像与第二图像拼接形成第三图像(如图3C所示)。另一种实现方式为:截取第二图像中的Y轴坐标17以下的区域,获得第二待拼接图像,将第一图像与第二待拼接图像拼接形成第三图像(如图3D所示)。
本实施例提供的图像拼接方法,通过分别获取第一图像的控件对象与第二图像的控件对象,然后识别第一图像与第二图像中的相同控件对象及该相同控件对象的位置信息,从而可以准确识别出第一图像中的相同区域或内容,根据该相同区域或内容将第一图像与第二图像拼接为第三图像,获得的第三图像中不存在重复的内容,提高了图像拼接的准确性。
对S102的一种实现方式进行详细说明,具体实现过程如下所示。
S1021、获取第一图像中的控件对象在第一图像中的位置信息,获取第二图像中的控件对象在第二图像中的位置信息。
本实施例中,所述位置信息可以是坐标信息,坐标信息包括横坐标和纵坐标,例如:以第一图像的左下角为原点,可以获得第一图像中的控件对象相对于该原点的横坐标和纵坐标。
S1022、根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像,根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像。
本实施例中,在获取第一图像中的控件对象与控件对象在第一图像中的位置信息之后,根据第一图像中的控件对象在第一图像中的位置信息,将第一图像中的控件对象布局在纯色的中间背景图像中,获得第一中间图像。需要说明的是,为了解决背景图像等个性化信息对识别两张图像中相同控件对象的影响,第一中间背景图像中不包括第一图像中具有个性化信息的控件对象,如第一图像中的背景控件对象。且本实施例中的中间背景图像为纯色背景图像。第一图像的尺寸与第一中间图像的尺寸相同,此处所称的尺寸是指长度与宽度,即第一图像的长度与第一中间图像的长度相同,第一图像的宽度与第一中间图像的宽度相同。第一图像中的控件对象在第一图像中的位置信息与该控件对象在第一中间图像中的位置信息相同。可以理解的,第一图像与第一中间图像的区别在于第一中间图像在第一图像的基础上,去除了背景图像等个性化信息。
图4A为本发明实施例提供的第一中间图像的一种示意图。例如:以第一图像的左下角为原点,某控件对象在第一图像中坐标信息为:X轴:4-14,Y轴:0-2;则该控件对象在第一中间图像中坐标信息也为:X轴:4-14,Y轴:0-2。将图3A所示的第一图像中的控件对象布局在中间背景图像中获得如图4A所示的第一中间图像。其中,第一中间图像的背景图像为纯色背景图像。
在获取第二图像中的控件对象与控件对象在第二图像中的位置信息之后,根据第二图像中的控件对象在第二图像中的位置信息,将第二图像中的控件对象布局在纯色的中间背景图像(与布局第一图像中的控件对象在第一中间背景图像相同)中,获得第二中间图像,需要说明的是,为了解决背景图像等个性化信息对识别两张图像中相同控件对象的影响,第二中间背景图像中不包括第二图像中具有个性化信息的控件对象,如第二图像中的背景控件对象。且本实施例中的中间背景图像为纯色背景图像。第二图像的尺寸与第二中间图像的尺寸相同,此处所称的尺寸大小是指长度与宽度,即第二图像的长度与第二中间图像的长度相同,第二图像的宽度与第二中间图像的宽度相同。第二图像中的控件对象在第二图像中的位置信息与该控件对象在第二中间图像中的位置信息相同。可以理解的,第二图像与第二中间图像的区别在于第二中间图像在第二图像的基础上,去除了背景图像等个性化信息。
图4B为本发明实施例提供的第二中间图像的一种示意图。例如:以第二图像的左下角为原点,某控件对象在第二图像中坐标信息为:X轴:4-14,Y轴:17-19;则该控件对象在第二中间图像中坐标信息也为:X轴:4-14,Y轴:17-19。将图3B所示的第二图像中的控件对象布局在中间背景图像中获得如图4B所示的第二中间图像。其中,第二中间图像的背景图像为纯色背景图像。
第一中间图像的背景图像与第二中间图像的背景图像相同。
S1023、比较第一中间图像与第二中间图像,确定第一中间图像与第二中间图像中的相同控件对象以及相同控件对象的位置信息。
本实施例中,在获得第一中间图像与第二中间图像之后,将第一中间图像与第二中间图像进行图像比对。例如:可以通过将第一中间图像与第二中间图像逐像素地进行比对,确定第一中间图像与第二中间图像中的相同控件对象。进而获取两张图像中相同控件对象的位置信息。示例性的,通过对图4A所示的第一中间图像与图4B所示的第二中间图像逐像素比对,可以确定“太好了,有时间聚聚”为第一中间图像与第二中间图像的相同控件对象。该相同控件对象在第一中间图像中的坐标为:X轴:4-14,Y轴:0-2,该相同控件对象在第二中间图像中的坐标为:X轴:4-14,Y轴:17-19。
本实施例提供的图像拼接的方法,通过将两张图像的控件对象布局在相同的纯色背景图像中,避免了用户自定义的个性化背景图像影响相同控件对象的确定,使得拼接后的图像不存在重复的内容,提高了图像拼接的准确性。
在本发明方法实施例三中,本实施例在本发明方法实施例二的基础上,对S1022进行详细说明,本实施例以第一图像中的控件对象和第二图像中的控件对象中的任一控件对象为例进行说明,其它控件对象类似,具体过程如下所述。
图5A为本发明实施例提供的图3B中的控件对象布局在中间背景图像中的一种示意图。在第一种可行的实现方式中,若控件对象为文本控件,提取出该文本控件中的文本,将该文本控件中的文本布局在中间背景图像中。该文本在该中间背景图像中的坐标信息与该文本在所属的图像(第一图像或第二图像)中的坐标信息相同。如图3B所示的控件对象布局在中间背景图像中如图5A所示。
在第二种可行的实现方式中,若控件对象为文本控件,且该文本控件为不透底的文本控件,则将该文本控件布局在中间背景图像中。不透底的文本控件是指透过该文本控件不可见该文本控件所属图像的背景。该文本控件在该中间背景图像中的坐标信息与该文本控件在所属图像(第一图像或第二图像)中的坐标信息相同。如图3B所示的控件对象布局在中间背景图像中如图4B所示。
图5C为本发明实施例提供的将透底的文本控件布局在中间背景图像中的一种示意图。透底的文本控件是指透过文本控件可见该文本控件所属图像的背景。若控件对象为文本控件,且该文本控件为透底的文本控件,则提取出该文本控件中的文本将所提取的文本布局在中间背景图像中;该文本在该中间背景图像中的坐标信息与该文本在所属图像中的坐标信息相同;如图5B所示的控件对象布局在中间背景图像中如图5C所示。或者,
图5D为本发明实施例提供的将透底的文本控件布局在中间背景图像中的另一种示意图。若控件对象为文本控件,且该文本控件为透底的文本控件,则将该文本控件替换为色块图像,并将该色块图像布局在中间背景图像中;该色块图像与该文本控件的尺寸相同,即色块图像的长度与该文本控件的长度相同,且色块图像的宽度与该文本控件的宽度相同;该色块图像在该中间背景图像中的坐标信息与该文本控件在所属图像中的坐标信息相同;如图4B所示的控件对象布局在中间背景图像中如图5D所示,图5D所示的黑色色块图像替换如图5B中的透底的文本控件。
在第三种可行的实现方式中,若控件对象为动态图像控件,例如动态表情或者视频等,则将所述动态图像控件替换为静态图像,并将所述静态图像布局在中间背景图像中;该静态图像与该动态图像控件的尺寸相同,即静态图像的长度与该动态图像控件的长度相同,且静态图像的宽度与该动态图像控件的宽度相同;该静态图像在该中间背景图像中的坐标信息与该动态图像控件在所属图像中的坐标信息相同。可选地,该静态图像也可以为色块图像。
图6为本发明实施例一提供的电子设备的结构示意图,如图6所示,本实施例的电子设备可以包括:获取单元11、识别单元12和拼接单元13;其中,获取单元11,用于获取第一图像的控件对象;获取第二图像的控件对象;识别单元12,用于识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息;位置信息包括第一位置信息和第二位置信息;第一位置信息指示相同控件对象在第一图像中的位置;第二位置信息指示相同控件对象在第二图像中的位置;拼接单元13,用于根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像。
可选地,识别单元12具体用于:获取第一图像中的控件对象在第一图像中的位置信息;根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像;获取第二图像中的控件对象在第二图像中的位置信息;根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像;比较第一中间图像与第二中间图像,确定第一中间图像与第二中间图像中的相同控件对象;确定相同控件对象在第一中间图像中的位置信息;确定相同控件对象在第二中间图像中的位置信息。
可选地,第一中间图像的背景是纯色的;第二中间图像的背景是纯色的;第一中间图像的背景和第二中间图像的背景相同。
可选地,第一中间图像与第一图像的尺寸相同;第二中间图像与第二图像的尺寸相同;第一图像中的控件对象的位置信息与第一中间图像中的控件对象的位置信息相同;第二图像中的控件对象的位置信息与第二中间图像中的控件对象的位置信息相同。
可选地,识别单元12在根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像时,具体用于:
若控件对象为文本控件,提取出文本控件中的文本,并根据控件对象在所属图像中的位置信息,将文本控件中的文本布局在中间背景图像中;或者,
若控件对象为不透底的文本控件,则根据控件对象在所属图像中的位置信息,将不透底的文本控件布局在中间背景图像中;或者,若控件对象为透底的文本控件,则提取出透底的文本控件中的文本,并根据控件对象在所属图像中的位置信息,将透底的文本控件中的文本布局在中间背景图像中,或者,则将透底的文本控件替换为色块图像,并根据文本控件在所属图像中的位置信息,将色块图像布局在中间背景图像中,色块图像的尺寸与不透底的文本控件的尺寸相同;或者,
若控件对象为动态图像控件,则将动态图像控件替换为静态图像,并根据动态图像控件在所属图像中的位置信息,将静态图像布局在中间背景图像中,静态图像的尺寸与动态图像控件的尺寸相同。
可选地,位置信息为坐标信息。
可选地,拼接单元13具体用于:根据第一位置信息获取第一待拼接图像,将第一待拼接图像与第二图像拼接为第三图像;或者,根据第二位置信息获取第二待拼接图像,将第一图像与第二待拼接图像拼接为第三图像。
本实施例的电子设备,可以用于执行本发明上述各方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
图7为本发明实施例二提供的电子设备的结构示意图,如图7所示,本实施例的电子设备可以包括:存储器21和处理器22以及显示器23;其中,包括:存储器21,用于存储指令;处理器22,用于调用存储器21中存储的指令执行:获取第一图像的控件对象,以及获取第二图像的控件对象;识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息,位置信息包括第一位置信息和第二位置信息,第一位置信息指示相同控件对象在第一图像中的位置,第二位置信息指示相同控件对象在第二图像中的位置;根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像。显示器23,用于显示第一图像、第二图像以及第三图像。
可选地,处理器22在识别第一图像与第二图像的相同控件对象以及相同控件对象的位置信息时,具体用于:获取第一图像中的控件对象在第一图像中的位置信息;根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像;获取第二图像中的控件对象在第二图像中的位置信息;根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像;比较第一中间图像与第二中间图像,确定第一中间图像与第二中间图像中的相同控件对象;确定相同控件对象在第一中间图像中的位置信息;确定相同控件对象在第二中间图像中的位置信息。
可选地,第一中间图像的背景是纯色的;第二中间图像的背景是纯色的;第一中间图像的背景和第二中间图像的背景相同。
可选地,第一中间图像与第一图像的尺寸相同;第二中间图像与第二图像的尺寸相同;第一图像中的控件对象的位置信息与第一中间图像中的控件对象的位置信息相同;第二图像中的控件对象的位置信息与第二中间图像中的控件对象的位置信息相同。
可选地,处理器22在根据所获取的第一图像中的控件对象和第一图像中的控件对象在第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和第二图像中的控件对象在第二图像中的位置信息获取第二中间图像时,具体用于:
若控件对象为文本控件,提取出文本控件中的文本,并根据控件对象在所属图像中的位置信息,将文本控件中的文本布局在中间背景图像中;或者,
若控件对象为不透底的文本控件,则根据控件对象在所属图像中的位置信息,将不透底的文本控件布局在中间背景图像中;或者,若控件对象为透底的文本控件,则提取出透底的文本控件中的文本,并根据控件对象在所属图像中的位置信息,将透底的文本控件中的文本布局在中间背景图像中,或者,将透底的文本控件替换为色块图像,并根据文本控件在所属图像中的位置信息,将色块图像布局在中间背景图像中,色块图像的尺寸与不透底的文本控件的尺寸相同;或者,
若控件对象为动态图像控件,则将动态图像控件替换为静态图像,并根据动态图像控件在所属图像中的位置信息,将静态图像布局在中间背景图像中,静态图像的尺寸与动态图像控件的尺寸相同。
可选地,位置信息为坐标信息。
可选地,处理器22在根据相同控件对象的位置信息将第一图像与第二图像拼接为第三图像时,具体用于:根据第一位置信息获取第一待拼接图像,将第一待拼接图像与第二图像拼接为第三图像;或者,根据第二位置信息获取第二待拼接图像,将第一图像与第二待拼接图像拼接为第三图像。
本实施例的电子设备,可以用于执行本发明上述各方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一非易失性计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:只读内存(英文:Read-Only Memory,简称:ROM)、随机存取存储器(英文:Random Access Memory,简称:RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (18)
1.一种图像拼接的方法,其特征在于,所述方法包括:
获取第一图像的控件对象;
获取第二图像的控件对象;
识别所述第一图像与所述第二图像的相同控件对象以及所述相同控件对象的位置信息;
所述位置信息包括第一位置信息和第二位置信息;
所述第一位置信息指示所述相同控件对象在所述第一图像中的位置;
所述第二位置信息指示所述相同控件对象在所述第二图像中的位置;
根据所述相同控件对象的位置信息将所述第一图像与所述第二图像拼接为第三图像;
所述识别所述第一图像与所述第二图像的相同控件对象以及所述相同控件对象的位置信息,包括:
获取所述第一图像中的控件对象在所述第一图像中的位置信息;
根据所获取的第一图像中的控件对象和所述第一图像中的控件对象在所述第一图像中的位置信息获取第一中间图像;
获取所述第二图像中的控件对象在所述第二图像中的位置信息;
根据所获取的第二图像中的控件对象和所述第二图像中的控件对象在所述第二图像中的位置信息获取第二中间图像;
比较所述第一中间图像与所述第二中间图像,确定所述第一中间图像与所述第二中间图像中的相同控件对象;
确定所述相同控件对象在所述第一中间图像中的位置信息;
确定所述相同控件对象在所述第二中间图像中的位置信息。
2.根据权利要求1所述的方法,其特征在于,所述第一中间图像的背景是纯色的;所述第二中间图像的背景是纯色的;所述第一中间图像的背景和所述第二中间图像的背景相同。
3.根据权利要求1或2所述的方法,其特征在于,所述第一中间图像与所述第一图像的尺寸相同;所述第二中间图像与所述第二图像的尺寸相同;
所述第一图像中的控件对象的位置信息与所述第一中间图像中的控件对象的位置信息相同;
所述第二图像中的控件对象的位置信息与所述第二中间图像中的控件对象的位置信息相同。
4.根据权利要求1或2所述的方法,其特征在于,根据所获取的第一图像中的控件对象和所述第一图像中的控件对象在所述第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和所述第二图像中的控件对象在所述第二图像中的位置信息获取第二中间图像,包括:
若所述控件对象为文本控件,提取出所述文本控件中的文本,并根据所述控件对象在所属图像中的位置信息,将所述文本控件中的文本布局在中间背景图像中;或者,
若所述控件对象为不透底的文本控件,则根据所述控件对象在所属图像中的位置信息,将所述不透底的文本控件布局在中间背景图像中;或者,若所述控件对象为透底的文本控件,则提取出所述透底的文本控件中的文本,并根据所述控件对象在所属图像中的位置信息,将所述透底的文本控件中的文本布局在中间背景图像中;或者,将所述透底的文本控件替换为色块图像,并根据所述文本控件在所属图像中的位置信息,将所述色块图像布局在中间背景图像中,所述色块图像的尺寸与所述不透底的文本控件的尺寸相同;或者,
若所述控件对象为动态图像控件,则将所述动态图像控件替换为静态图像,并根据所述动态图像控件在所属图像中的位置信息,将所述静态图像布局在中间背景图像中,所述静态图像的尺寸与所述动态图像控件的尺寸相同。
5.根据权利要求1或2所述的方法,其特征在于,所述位置信息为坐标信息。
6.根据权利要求1或2所述的方法,其特征在于,所述根据所述相同控件对象的位置信息将所述第一图像与所述第二图像拼接为第三图像,包括:
根据第一位置信息获取第一待拼接图像,将所述第一待拼接图像与所述第二图像拼接为所述第三图像;或者,
根据第二位置信息获取第二待拼接图像,将所述第一图像与所述第二待拼接图像拼接为所述第三图像。
7.一种电子设备,其特征在于,包括:
获取单元,用于获取第一图像的控件对象;以及获取第二图像的控件对象;
识别单元,用于识别所述第一图像与所述第二图像的相同控件对象以及所述相同控件对象的位置信息;所述位置信息包括第一位置信息和第二位置信息;所述第一位置信息指示所述相同控件对象在所述第一图像中的位置;所述第二位置信息指示所述相同控件对象在所述第二图像中的位置;
拼接单元,用于根据所述相同控件对象的位置信息将所述第一图像与所述第二图像拼接为第三图像;
所述识别单元具体用于:获取所述第一图像中的控件对象在所述第一图像中的位置信息;根据所获取的第一图像中的控件对象和所述第一图像中的控件对象在所述第一图像中的位置信息获取第一中间图像;获取所述第二图像中的控件对象在所述第二图像中的位置信息;根据所获取的第二图像中的控件对象和所述第二图像中的控件对象在所述第二图像中的位置信息获取第二中间图像;比较所述第一中间图像与所述第二中间图像,确定所述第一中间图像与所述第二中间图像中的相同控件对象;确定所述相同控件对象在所述第一中间图像中的位置信息;确定所述相同控件对象在所述第二中间图像中的位置信息。
8.根据权利要求7所述的电子设备,其特征在于,所述第一中间图像的背景是纯色的;所述第二中间图像的背景是纯色的;所述第一中间图像的背景和所述第二中间图像的背景相同。
9.根据权利要求7或8所述的电子设备,其特征在于,所述第一中间图像与所述第一图像的尺寸相同;所述第二中间图像与所述第二图像的尺寸相同;
所述第一图像中的控件对象的位置信息与所述第一中间图像中的控件对象的位置信息相同;
所述第二图像中的控件对象的位置信息与所述第二中间图像中的控件对象的位置信息相同。
10.根据权利要求7或8所述的电子设备,所述识别单元在根据所获取的第一图像中的控件对象和所述第一图像中的控件对象在所述第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和所述第二图像中的控件对象在所述第二图像中的位置信息获取第二中间图像时,具体用于:
若所述控件对象为文本控件,提取出所述文本控件中的文本,并根据所述控件对象在所属图像中的位置信息,将所述文本控件中的文本布局在中间背景图像中;或者,
若所述控件对象为不透底的文本控件,则根据所述控件对象在所属图像中的位置信息,将所述不透底的文本控件布局在中间背景图像中;或者,若所述控件对象为透底的文本控件,则提取出所述透底的文本控件中的文本,并根据所述控件对象在所属图像中的位置信息,将所述透底的文本控件中的文本布局在中间背景图像中,或者,将所述透底的文本控件替换为色块图像,并根据所述文本控件在所属图像中的位置信息,将所述色块图像布局在中间背景图像中,所述色块图像的尺寸与所述不透底的文本控件的尺寸相同;或者,
若所述控件对象为动态图像控件,则将所述动态图像控件替换为静态图像,并根据所述动态图像控件在所属图像中的位置信息,将所述静态图像布局在中间背景图像中,所述静态图像的尺寸与所述动态图像控件的尺寸相同。
11.根据权利要求7或8所述的电子设备,其特征在于,所述位置信息为坐标信息。
12.根据权利要求7或8所述的电子设备,其特征在于,所述拼接单元具体用于:根据第一位置信息获取第一待拼接图像,将所述第一待拼接图像与所述第二图像拼接为所述第三图像;或者,根据第二位置信息获取第二待拼接图像,将所述第一图像与所述第二待拼接图像拼接为所述第三图像。
13.一种电子设备,其特征在于,包括:
存储器,用于存储指令;
处理器,用于调用所述存储器中存储的所述指令执行:
获取第一图像的控件对象;
获取第二图像的控件对象;
识别所述第一图像与所述第二图像的相同控件对象以及所述相同控件对象的位置信息;
所述位置信息包括第一位置信息和第二位置信息;
所述第一位置信息指示所述相同控件对象在所述第一图像中的位置;
所述第二位置信息指示所述相同控件对象在所述第二图像中的位置;
根据所述相同控件对象的位置信息将所述第一图像与所述第二图像拼接为第三图像;
显示器,用于显示所述第一图像、所述第二图像以及所述第三图像;
所述处理器在识别所述第一图像与所述第二图像的相同控件对象以及所述相同控件对象的位置信息时,具体用于:
获取所述第一图像中的控件对象在所述第一图像中的位置信息;
根据所获取的第一图像中的控件对象和所述第一图像中的控件对象在所述第一图像中的位置信息获取第一中间图像;
获取所述第二图像中的控件对象在所述第二图像中的位置信息;
根据所获取的第二图像中的控件对象和所述第二图像中的控件对象在所述第二图像中的位置信息获取第二中间图像;
比较所述第一中间图像与所述第二中间图像,确定所述第一中间图像与所述第二中间图像中的相同控件对象;
确定所述相同控件对象在所述第一中间图像中的位置信息;
确定所述相同控件对象在所述第二中间图像中的位置信息。
14.根据权利要求13所述的电子设备,其特征在于,所述第一中间图像的背景是纯色的;所述第二中间图像的背景是纯色的;所述第一中间图像的背景和所述第二中间图像的背景相同。
15.根据权利要求13或14所述的电子设备,其特征在于,所述第一中间图像与所述第一图像的尺寸相同;所述第二中间图像与所述第二图像的尺寸相同;
所述第一图像中的控件对象的位置信息与所述第一中间图像中的控件对象的位置信息相同;
所述第二图像中的控件对象的位置信息与所述第二中间图像中的控件对象的位置信息相同。
16.根据权利要求13或14所述的电子设备,所述处理器在根据所获取的第一图像中的控件对象和所述第一图像中的控件对象在所述第一图像中的位置信息获取第一中间图像,或者,根据所获取的第二图像中的控件对象和所述第二图像中的控件对象在所述第二图像中的位置信息获取第二中间图像时,具体用于:
若所述控件对象为文本控件,提取出所述文本控件中的文本,并根据所述控件对象在所属图像中的位置信息,将所述文本控件中的文本布局在中间背景图像中;或者,
若所述控件对象为不透底的文本控件,则根据所述控件对象在所属图像中的位置信息,将所述不透底的文本控件布局在中间背景图像中;或者,若所述控件对象为透底的文本控件,则提取出所述透底的文本控件中的文本,并根据所述控件对象在所属图像中的位置信息,将所述透底的文本控件中的文本布局在中间背景图像中;或者,将所述透底的文本控件替换为色块图像,并根据所述文本控件在所属图像中的位置信息,将所述色块图像布局在中间背景图像中,所述色块图像的尺寸与所述不透底的文本控件的尺寸相同;或者,
若所述控件对象为动态图像控件,则将所述动态图像控件替换为静态图像,并根据所述动态图像控件在所属图像中的位置信息,将所述静态图像布局在中间背景图像中,所述静态图像的尺寸与所述动态图像控件的尺寸相同。
17.根据权利要求13或14所述的电子设备,其特征在于,所述位置信息为坐标信息。
18.根据权利要求13或14所述的电子设备,其特征在于,所述处理器在根据所述相同控件对象的位置信息将所述第一图像与所述第二图像拼接为第三图像时,具体用于:
根据第一位置信息获取第一待拼接图像,将所述第一待拼接图像与所述第二图像拼接为所述第三图像;或者,
根据第二位置信息获取第二待拼接图像,将所述第一图像与所述第二待拼接图像拼接为所述第三图像。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2015/093844 WO2017075779A1 (zh) | 2015-11-05 | 2015-11-05 | 图像拼接的方法和电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108027967A CN108027967A (zh) | 2018-05-11 |
CN108027967B true CN108027967B (zh) | 2020-09-29 |
Family
ID=58661481
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580083380.2A Active CN108027967B (zh) | 2015-11-05 | 2015-11-05 | 图像拼接的方法和电子设备 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10719926B2 (zh) |
CN (1) | CN108027967B (zh) |
WO (1) | WO2017075779A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10719926B2 (en) * | 2015-11-05 | 2020-07-21 | Huawei Technologies Co., Ltd. | Image stitching method and electronic device |
CN109618224B (zh) * | 2018-12-18 | 2021-03-09 | 腾讯科技(深圳)有限公司 | 视频数据处理方法、装置、计算机可读存储介质和设备 |
CN112667178B (zh) * | 2020-12-18 | 2023-03-07 | 威创集团股份有限公司 | 一种文字显示方法、系统、电子设备和存储介质 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101504761A (zh) * | 2009-01-21 | 2009-08-12 | 北京中星微电子有限公司 | 一种图像拼接的方法和装置 |
CN102467738A (zh) * | 2010-11-08 | 2012-05-23 | 北京大学 | 一种图像拼接方法及系统 |
CN102708558A (zh) * | 2012-06-01 | 2012-10-03 | 惠州华阳通用电子有限公司 | 视频图像拼接装置、拼接方法以及视频监视系统 |
CN103020938A (zh) * | 2012-12-14 | 2013-04-03 | 北京经纬恒润科技有限公司 | 一种基于加权平均法的空域图像缝合方法和系统 |
CN103514581A (zh) * | 2013-10-23 | 2014-01-15 | 小米科技有限责任公司 | 一种截取屏幕图片的方法、装置和终端设备 |
CN104103051A (zh) * | 2013-04-03 | 2014-10-15 | 华为技术有限公司 | 一种图像拼接方法和设备 |
CN104331872A (zh) * | 2014-11-26 | 2015-02-04 | 中测新图(北京)遥感技术有限责任公司 | 图像拼接方法 |
CN104346788A (zh) * | 2013-07-29 | 2015-02-11 | 展讯通信(上海)有限公司 | 一种拼接图像的方法和装置 |
CN104376531A (zh) * | 2014-12-11 | 2015-02-25 | 重庆地质仪器厂 | 一种图像拼接方法与系统 |
CN104427242A (zh) * | 2013-09-10 | 2015-03-18 | 联想(北京)有限公司 | 图像拼接方法、装置及电子设备 |
CN104680501A (zh) * | 2013-12-03 | 2015-06-03 | 华为技术有限公司 | 图像拼接的方法及装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6573945B1 (en) * | 2000-01-12 | 2003-06-03 | General Instrument Corporation | Logo insertion on an HDTV encoder |
US7111787B2 (en) * | 2001-05-15 | 2006-09-26 | Hand Held Products, Inc. | Multimode image capturing and decoding optical reader |
US8068693B2 (en) * | 2007-07-18 | 2011-11-29 | Samsung Electronics Co., Ltd. | Method for constructing a composite image |
KR101720940B1 (ko) * | 2013-01-28 | 2017-04-10 | 네이버 주식회사 | 메신저 채팅창을 통한 실시간 영상 공유 장치, 방법 및 컴퓨터 판독 가능한 기록 매체 |
US9185284B2 (en) * | 2013-09-06 | 2015-11-10 | Qualcomm Incorporated | Interactive image composition |
US20150256764A1 (en) * | 2014-03-05 | 2015-09-10 | Guy M. Besson | Active-tracking based systems and methods for generating mirror image |
CN103984502B (zh) | 2014-05-30 | 2017-09-29 | 天津三星通信技术研究有限公司 | 一种截取屏幕内容的方法及便携式终端 |
CN104536658B (zh) * | 2014-12-12 | 2017-12-29 | 天津三星通信技术研究有限公司 | 在终端中生成截屏图像的设备和方法 |
US10719926B2 (en) * | 2015-11-05 | 2020-07-21 | Huawei Technologies Co., Ltd. | Image stitching method and electronic device |
KR102111501B1 (ko) * | 2017-06-19 | 2020-05-15 | 주식회사 케이티 | 가상 현실 체험 서비스를 제공하는 서버, 사용자 단말 및 방법 |
US10140497B1 (en) * | 2017-09-12 | 2018-11-27 | Symbol Technologies, Llc | Methods and system for reading barcodes captured on multiple images |
-
2015
- 2015-11-05 US US15/773,563 patent/US10719926B2/en active Active
- 2015-11-05 CN CN201580083380.2A patent/CN108027967B/zh active Active
- 2015-11-05 WO PCT/CN2015/093844 patent/WO2017075779A1/zh active Application Filing
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101504761A (zh) * | 2009-01-21 | 2009-08-12 | 北京中星微电子有限公司 | 一种图像拼接的方法和装置 |
CN102467738A (zh) * | 2010-11-08 | 2012-05-23 | 北京大学 | 一种图像拼接方法及系统 |
CN102708558A (zh) * | 2012-06-01 | 2012-10-03 | 惠州华阳通用电子有限公司 | 视频图像拼接装置、拼接方法以及视频监视系统 |
CN103020938A (zh) * | 2012-12-14 | 2013-04-03 | 北京经纬恒润科技有限公司 | 一种基于加权平均法的空域图像缝合方法和系统 |
CN104103051A (zh) * | 2013-04-03 | 2014-10-15 | 华为技术有限公司 | 一种图像拼接方法和设备 |
CN104346788A (zh) * | 2013-07-29 | 2015-02-11 | 展讯通信(上海)有限公司 | 一种拼接图像的方法和装置 |
CN104427242A (zh) * | 2013-09-10 | 2015-03-18 | 联想(北京)有限公司 | 图像拼接方法、装置及电子设备 |
CN103514581A (zh) * | 2013-10-23 | 2014-01-15 | 小米科技有限责任公司 | 一种截取屏幕图片的方法、装置和终端设备 |
CN104680501A (zh) * | 2013-12-03 | 2015-06-03 | 华为技术有限公司 | 图像拼接的方法及装置 |
CN104331872A (zh) * | 2014-11-26 | 2015-02-04 | 中测新图(北京)遥感技术有限责任公司 | 图像拼接方法 |
CN104376531A (zh) * | 2014-12-11 | 2015-02-25 | 重庆地质仪器厂 | 一种图像拼接方法与系统 |
Non-Patent Citations (3)
Title |
---|
《video stitch algorithm based on dynamic foreground extraction》;Zhang Yuan等;《video stitch algorithm based on dynamic foreground extraction》;20091231;第1-5页 * |
《基于角点检测配准的全景图像拼接技术研究》;施庆等;《模型电脑应用》;20110630;第27卷(第6期);第18-21,32页 * |
《数字海图无缝拼接的实现及相关问题研究》;隋春光等;《测绘科学》;20040831;第29卷(第4期);第28-30页 * |
Also Published As
Publication number | Publication date |
---|---|
CN108027967A (zh) | 2018-05-11 |
US20180330483A1 (en) | 2018-11-15 |
US10719926B2 (en) | 2020-07-21 |
WO2017075779A1 (zh) | 2017-05-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10769464B2 (en) | Facial recognition method and related product | |
US10269160B2 (en) | Method and apparatus for processing image | |
US11620029B2 (en) | Method for displaying multiple application windows by mobile terminal, and mobile terminal | |
US10296472B2 (en) | Method for setting universal serial bus (USB) interface of electronic device, and electronic device | |
CN110442521B (zh) | 控件单元检测方法及装置 | |
KR20150122476A (ko) | 제스처 센서 제어 방법 및 장치 | |
CN110908554A (zh) | 长截图的方法及终端设备 | |
CN108027967B (zh) | 图像拼接的方法和电子设备 | |
CN103399657A (zh) | 鼠标指针的控制方法、装置及终端设备 | |
US10706282B2 (en) | Method and mobile terminal for processing image and storage medium | |
CN105278795A (zh) | 一种显示功能栏的方法和装置 | |
CN111026457B (zh) | 一种硬件配置方法、装置、存储介质及终端设备 | |
CN111045737B (zh) | 设备标识获取方法、装置、终端设备和存储介质 | |
CN109427101A (zh) | 一种获取增强现实图像的方法和系统 | |
KR101667721B1 (ko) | 다중 디스플레이 방법 및 이를 이용하는 이동 단말기 | |
CN112860365A (zh) | 内容显示方法、装置、电子设备和可读存储介质 | |
CN104866287B (zh) | 一种生成功能栏的方法和装置 | |
CN105988801B (zh) | 一种显示注释信息的方法及装置 | |
CN110109582B (zh) | 移动终端的显示方法、装置及存储介质 | |
CN109062462B (zh) | 一种显示控制方法及终端设备 | |
CN113947566A (zh) | 视觉还原效果的检测方法、装置、设备及可读存储介质 | |
CN111862874A (zh) | 显示方法、装置、存储介质及移动终端 | |
CN116257348A (zh) | 内容交互画面的处理方法、装置、电子设备及存储介质 | |
CN118018680A (zh) | 视频标签展示方法、监控云台相机、存储介质及电子设备 | |
CN115993944A (zh) | 图像显示效果优化方法、装置、存储介质及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |