CN109819181B - 信息处理方法、装置及设备 - Google Patents
信息处理方法、装置及设备 Download PDFInfo
- Publication number
- CN109819181B CN109819181B CN201910208088.9A CN201910208088A CN109819181B CN 109819181 B CN109819181 B CN 109819181B CN 201910208088 A CN201910208088 A CN 201910208088A CN 109819181 B CN109819181 B CN 109819181B
- Authority
- CN
- China
- Prior art keywords
- image
- images
- target
- frame
- image set
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 24
- 238000003672 processing method Methods 0.000 title claims abstract description 13
- 239000002131 composite material Substances 0.000 claims description 69
- 238000000034 method Methods 0.000 claims description 24
- 238000009432 framing Methods 0.000 claims description 17
- 238000010586 diagram Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 5
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 241000203475 Neopanax arboreus Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本申请实施例公开了一种信息处理方法、装置及设备,通过具有不同帧间间隔和不同图像质量的第一图像集合和第二图像集合来合成新的图像集合,合成的图像集合中图像的图像质量不高于两个图像集合具有的较高图像质量,且不低于两个图像集合具有的较低图像质量;合成图像集合的帧间间隔不高于两个图像集合具有的较高帧间间隔,且不低于两个图像集合具有的较低帧间间隔,而由于第一图像集合和第二图像集合中携带的都是真实场景中的内容,因此,合成图像集合中图像的内容也是真实场景中的内容。综上,通过本申请,可以通过两个图像集合获得符合真实场景的,具有较低帧间间隔和较高图像质量的新的图像集合。
Description
技术领域
本申请涉及信息处理技术领域,更具体地说,涉及一种信息处理方法、装置及设备。
背景技术
电子设备(如手机、笔记本电脑等)中摄像头拍摄的图像集合的帧数是有限的,若要获得更大帧数的图像集合,通常是对图像集合进行插帧处理。目前,对图像集合A进行插帧处理的实现方式是利用图像集合A包含的图像合成插帧图像,将插帧图像插入图像集合A中得到更大帧数的图像集合。而合成的插帧图像中的内容往往与拍摄对象的实际情况相差较大,使得合成的图像集合与事实不符。
发明内容
本申请的目的是提供一种信息处理方法、装置及设备,以至少部分的克服现有技术中存在的技术问题。
为实现上述目的,本申请提供了如下技术方案:
一种信息处理方法,包括:
获得第一图像集合;
获得第二图像集合;所述第二图像集合中相邻两帧图像对应时间的间隔小于所述第一图像集合中相邻两帧图像对应时间的间隔;
根据所述第一图像集合和所述第二图像集合,获得合成图像集合;
其中,所述合成图像集合中图像的图像质量不高于所述第一图像集合中图像的图像质量;所述合成图像集合中图像的图像质量不低于所述第二图像集合中图像的图像质量;所述合成图像集合中相邻两帧图像对应时间的间隔不高于所述第一图像集合中相邻两帧图像对应时间的间隔;所述合成图像集合中相邻两帧图像对应时间的间隔不低于所述第二图像集合中相邻两帧图像对应时间的间隔。
上述方法,优选的,所述获得第一图像集合;获得第二图像集合,包括:
获得设备中第一图像采集装置和第二图像采集装置同时拍摄的图像集合;其中,所述第一图像采集装置拍摄所述第一图像集合采用的帧率小于所述第二图像采集装置拍摄所述第二图像集合采用的帧率;所述第一图像采集装置和所述第二图像采集装置在每一时刻的取景内容存在至少部分重叠。
上述方法,优选的,根据所述第一图像集合和所述第二图像集合,获得合成图像集合,包括:
分析所述第一图像集合和所述第二图像集合,以确定所述第二图像集合中的目标图像,所述目标图像中包含:所述第一图像集合与所述第二图像集合相比缺失的拍摄内容;
根据所述目标图像,获得插帧图像,所述插帧图像的帧数小于或等于所述目标图像的帧数;
根据所述插帧图像,获得合成图像集合。
上述方法,优选的,所述插帧图像中目标对象的形态和位置根据所述第二图像集合中所述目标对象的形态和位置确定。
上述方法,优选的,所述第二图像集合中的至少部分目标图像用于获得插帧图像,所述根据所述目标图像获得插帧图像包括:
识别第一目标图像中所述目标对象的形态和位置;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;
在所述第一图像集合中确定第一图像,所述第一图像中包括所述目标对象;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
依据所述第一目标图像中所述目标对象的形态和位置对所述第一图像中的所述目标对象进行调整,得到一帧插帧图像。
上述方法,优选的,第二图像集合中的至少部分目标图像用于获得插帧图像,所述根据所述目标图像获得插帧图像包括:
根据第一目标图像在所述第一图像集合中确定第一图像;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
基于所述第一图像的图像质量参数,对所述第一目标图像的图像质量参数进行调整,得到一帧插帧图像;所述插帧图像的图像质量参数与所述第一图像的图像质量参数相同。
上述方法,优选的,所述第一图像集合中的图像具有第一图像质量参数,所述第二图像集合中的图像具有第二图像质量参数;
所述第一图像质量参数所表征的图像质量优于所述第二图像质量参数所表征的图像质量;
其中,图像质量参数包括如下至少一种:分辨率、亮度、色彩。
上述方法,优选的,所述第二图像集合中的至少部分目标图像用于获得所述插帧图像,所述根据所述目标图像获得插帧图像,包括:
根据采用第一帧率拍摄的第二图像集合中的第一目标图像,采用第二帧率拍摄的第二图像集合中的第二目标图像,以及所述第一图像集合中的第二图像获得一帧插帧图像;其中,
所述第一帧率大于所述第二帧率;所述第一目标图像为所述采用第一帧率拍摄的第二图像集合中的至少部分目标图像中的任意一帧目标图像;所述第二目标图像为所述采用第二帧率拍摄的第二图像集合中,拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;所述第二图像为:所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像,或者,所述第一图像集合中拍摄时间与所述第二目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
所述第一目标图像和所述第二目标图像中具有所述目标对象;所述第一目标图像用于确定所述插帧图像中所述目标对象的形态和位置,所述第二目标图像用于确定所述插帧图像中所述目标对象的第一类图像质量参数;所述第二图像用于确定所述插帧图像的第二类图像质量参数;所述第一类图像质量参数与所述第二类图像质量参数不同。
上述方法,优选的,根据所述插帧图像,获得合成图像集合,包括:
根据获得插帧图像的各帧目标图像的拍摄时间,以及所述第一图像集合中各帧图像的拍摄时间,按照时间先后顺序将所述插帧图像插入到所述第一图像集合中,得到合成图像集合。
上述方法,优选的,在开始拍摄图像集合之前,还包括:
对所述第一图像采集装置和所述第二图像采集装置的参数进行调节,使得所述第一图像采集装置和所述第二图像采集装置的取景范围相同;
将所述第一图像采集装置在第一时刻获取的第一预览图像和所述第二图像采集装置在所述第一时刻获取的第二预览图像进行比对,以确定所述第一图像采集装置和所述第二图像采集装置的公共取景内容;
在所述第一预览图像中确定所述公共取景内容所在的第一区域,在所述第二预览图像中确定所述公共取景内容所在的第二区域,以便在拍摄图像集合的过程中,仅保留所述第一图像采集装置拍摄的图像中所述第一区域中的数据,以及所述第二图像采集装置拍摄的图像中所述第二区域中的数据。
一种信息处理装置,包括:
第一获得模块,用于获得第一图像集合和第二图像集合;所述第二图像集合中相邻两帧图像对应时间的间隔小于所述第一图像集合中相邻两帧图像对应时间的间隔;
第二获得模块,用于根据所述第一图像集合和所述第二图像集合,获得合成图像集合;其中,所述合成图像集合中图像的图像质量不高于所述第一图像集合中图像的图像质量;所述合成图像集合中图像的图像质量不低于所述第二图像集合中图像的图像质量;所述合成图像集合中相邻两帧图像对应时间的间隔不高于所述第一图像集合中相邻两帧图像对应时间的间隔;所述合成图像集合中相邻两帧图像对应时间的间隔不低于所述第二图像集合中相邻两帧图像对应时间的间隔。
一种设备,包括:
存储器,用于至少存储一组指令集;
处理器,用于调用并执行所述存储器中的所述指令集,通过执行所述指令集进行以下操作:
获得第一图像集合;
获得第二图像集合;所述第二图像集合中相邻两帧图像对应时间的间隔小于所述第一图像集合中相邻两帧图像对应时间的间隔;
根据所述第一图像集合和所述第二图像集合,获得合成图像集合;
其中,所述合成图像集合中图像的图像质量不高于所述第一图像集合中图像的图像质量;所述合成图像集合中图像的图像质量不低于所述第二图像集合中图像的图像质量;所述合成图像集合中相邻两帧图像对应时间的间隔不高于所述第一图像集合中相邻两帧图像对应时间的间隔;所述合成图像集合中相邻两帧图像对应时间的间隔不低于所述第二图像集合中相邻两帧图像对应时间的间隔。
通过以上方案可知,本申请提供的一种信息处理方法、装置及设备,通过具有不同帧间间隔(即相邻两帧图像对应时间的间隔)和不同图像质量的第一图像集合和第二图像集合来合成新的图像集合,合成的图像集合中图像的图像质量不高于两个图像集合具有的较高图像质量,且不低于两个图像集合具有的较低图像质量;合成图像集合的帧间间隔不高于两个图像集合具有的较高帧间间隔,且不低于两个图像集合具有的较低帧间间隔,而由于第一图像集合和第二图像集合中携带的都是真实场景中的内容,因此,合成图像集合中图像的内容也是真实场景中的内容。综上,通过本申请,可以通过两个图像集合获得符合真实场景的,具有较低帧间间隔和较高图像质量的新的图像集合。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的信息处理方法的一种实现流程图;
图2为本申请实施例提供的根据第一图像集合和第二图像集合,获得合成图像集合的一种实现流程图;
图3为本申请实施例提供的第一图像集合和第二图像集合的一种示例图;
图4为本申请实施例提供的第一图像集合和第二图像集合的另一种示例图;
图5为本申请实施例提供的根据目标图像获得插帧图像的一种实现流程图;
图6为本申请实施例提供的根据目标图像获得插帧图像的另一种实现流程图;
图7为本申请实施例提供的第一图像集合A、第二图像集合B1和第二图像集合B2的一种示例图;
图8为本申请实施例提供的信息处理装置的一种结构示意图;
图9为本申请实施例提供的设备的一种结构示意图。
说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的部分,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示的以外的顺序实施。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请实施例提供的信息处理方法可以应用于电子设备中,如,手机、平板电脑等便携式电子设备。
请参阅图1,图1为本申请实施例提供的信息处理方法的一种实现流程图,可以包括:
步骤S11:获得第一图像集合。
步骤S12:获得第二图像集合;该第二图像集合中相邻两帧图像对应时间的间隔小于第一图像集合中相邻两帧图像对应时间的间隔。
本申请实施例中,第一图像集合和第二图像集合可以是预先拍摄好存储在存储器中,也可以是临时拍摄的。基于此,步骤S11与步骤S12的执行顺序不做具体限定,可以先执行步骤S11,再执行步骤S12,或者,先执行步骤S12,再执行步骤S11,或者,步骤S11和步骤S12同时执行。例如,可以先从存储器中读取第一图像集合,再从存储器中读取第二图像集合;或者,先从存储器中读取第二图像集合,再从存储器中读取第一图像集合;或者,同时从存储器中读取第一图像集合和第二图像集合;或者,同时拍摄第一图像集合和第二图像集合。
其中,第一图像集合和第二图像集合的形式可以有多种形式。例如,
第一图像集合和第二图像集合都是视频。视频是一种常见的多媒体形式,当用户想要观看视频时,只要触发播放指令,设备就会按照一定的帧率连续输出构成该视频的图像,该帧率通常较大,例如大于或等于每秒24帧,即每秒输出的图像的帧数大于24帧。
或者,
第一图像集合和第二图像集合都是连拍得到的照片集合。当用户查看连拍得到的照片集合时,设备通常会按照照片的拍摄时间的先后顺序,首先显示最先拍摄的照片,当用户想要查看下一张照片时,需要执行预设操作以触发切换指令,从而设备响应该切换指令显示下一张照片,同理,当需要查看再下一张照片时,还得需要用户触发切换指令。也就是说,用户需要手动触发切换指令以控制设备显示连拍照片集合中的不同照片。或者,当用户查看连拍得到的照片集合时,可以以幻灯片的方式播放,这样可以实现照片的自动切换,但这种自动播放与视频的连续播放不同,以幻灯片的方式播放时,每帧图像显示时会停留一定的时间才会切换到下一帧图像,例如,每帧图像显示2秒后再切换到下一帧图像,即每2秒才输出一帧图像。
或者,
第一图像集合和第二图像集合均是拍摄得到的动态照片,动态照片的实质是一个小视频,在不对动态照片进行特定操作的情况下,其固定显示该小视频中某一帧图像,当以一定的方式对该帧图像进行操作,如长按时,会播放该小视频,该小视频播放时的帧率与一般视频播放时的帧率相当,例如大于或等于每秒24帧。
上述两个图像集合中,图像对应的时间可以是图像的拍摄时间。
步骤S13:根据第一图像集合和第二图像集合,获得合成图像集合。
其中,合成图像集合中图像的图像质量,以及相邻两帧图像对应时间的间隔均不同于第一图像集合和第二图像集合:合成图像集合中图像的图像质量不高于第一图像集合中图像的图像质量;合成图像集合中图像的图像质量不低于第二图像集合中图像的图像质量;合成图像集合中相邻两帧图像对应时间的间隔不高于第一图像集合中相邻两帧图像对应时间的间隔;合成图像集合中相邻两帧图像对应时间的间隔不低于第二图像集合中相邻两帧图像对应时间的间隔。
本申请实施例中,第一图像集合中图像的图像质量可以高于第二图像集合中图像的图像质量。
为便于叙述,后续将“相邻两帧图像对应时间的间隔”简称为“帧间间隔”。
例如,假设第一图像集合中图像的分辨率为4K,帧间间隔为1/30s,第二图像集合中图像的分辨率为1K,帧间间隔为1/120s,则合成图像集合中图像的图像质量可以是2K,帧间间隔可以是1/90s,或者,合成图像集合中图像的图像质量可以是2K,帧间间隔可以是1/120s等。当然,根据本申请实施例,除了上述列举的可能的合成图像集合,还可以得到其它的可能的合成图像集合,例如,合成图像集合中图像的图像质量可以是4K,帧间间隔可以是1/60s等。
本申请提供的信息处理方法,通过具有不同帧间间隔和不同图像质量的第一图像集合和第二图像集合来合成新的图像集合,合成的图像集合中图像的图像质量不高于两个图像集合具有的较高图像质量,且不低于两个图像集合具有的较低图像质量;合成图像集合的帧间间隔不高于两个图像集合具有的较高帧间间隔,且不低于两个图像集合具有的较低帧间间隔,而由于第一图像集合和第二图像集合中携带的都是真实场景中的内容,因此,合成图像集合中图像的内容也是真实场景中的内容。综上,通过上述实施例可以获得符合真实场景的,具有较低帧间间隔和较高图像质量的新的图像集合。
在一可选的实施例中,上述获得第一图像集合和第二图像集合的一种实现方式可以为:
获得设备中第一图像采集装置和第二图像采集装置同时拍摄的图像集合;其中,第一图像采集装置用于拍摄第一图像集合,第二图像采集装置用于拍摄第二图像集合;
第一图像采集装置拍摄第一图像集合采用的帧率小于第二图像采集装置拍摄第二图像集合采用的帧率;
第一图像采集装置和第二图像采集装置在每一时刻的取景内容存在至少部分重叠。
也就是说,本实施例中,利用同一个设备的两个图像采集装置同时进行拍摄。该两个图像采集装置可以位于设备的同一侧,例如,该两个图像采集装置可以是设备的两个后置摄像头,或者,可以是电子设备的两个前置摄像头。
该两个图像采集装置在设备中的安装位置相近,从而使得两个图像采集装置在每一时刻的取景内容存在至少部分重叠。由于两个图像采集装置的位置不同,因此两个图像采集装置在同一时刻能够采集的图像必然会存在差异。本申请实施例中,可以不对两个图像采集装置拍摄的图像集合进行处理,即两个图像采集装置拍摄的图像集合直接用来获得合成图像集合。或者,两个图像采集装置拍摄图像集合后,将两个图像采集装置拍摄的图像集合进行处理,使得处理后的图像集合中,每个图像仅包含图像采集时刻两个图像采集装置的公共取景内容,然后利用处理后的图像集合来获得合成图像集合。
本申请实施例中,第一图像采集装置和第二图像采集装置的配置可以相同,也可以不同。当两个图像采集装置的配置相同时,为了得到不同帧率的两个图像集合,可以在拍摄前,先对第一图像采集装置的参数进行调节,以降低第一图像采集装置拍摄图像集合时所采用的帧率,或者,先对第二图像采集装置的参数进行调节,以提高第二图像采集装置拍摄图像集合时所采用的帧率。可见,本申请实施例提供的信息处理方法对电子设备的硬件配置的要求比较低。
通常,图像采集装置的最高帧率是一定的,基于此,在第一图像采集装置和第二图像采集装置在拍摄图像集合前都是最高帧率的情况下,可以通过降低第一图像采集装置拍摄图像集合时所采用的帧率来使得两个图像采集装置拍摄图像集合时的帧率不同,在第一图像采集装置和第二图像采集装置在拍摄图像集合前都不是最高帧率的情况下,可以通过提高第二图像采集装置拍摄图像集合时所采用的帧率来使得两个图像采集装置拍摄图像集合时的帧率不同。
另外,为了便于计算,提高处理速度,不管第一图像采集装置和第二图像采集装置的配置是否相同,在拍摄前,均可以对第一图像采集装置和/或第二图像采集装置的参数进行调整,以使第一图像采集装置和第二图像采集装置拍摄图像集合时的帧率满足预设关系(如,存在预设的公约数)。
在一可选的实施例中,上述根据第一图像集合和第二图像集合,获得合成图像集合的一种实现流程图如图2所示,可以包括:
步骤S21:分析第一图像集合和第二图像集合,以确定第二图像集合中的目标图像,该目标图像中包含:第一图像集合与第二图像集合相比缺失的拍摄内容。
可选的,可以根据图像的内容确定目标图像,具体的,可以将第一图像集合和第二图像集合的图像进行图像匹配,在第二图像集合中确定与第一图像集合中的图像的相似度最高的图像,为便于叙述,将第二图像集合中与第一图像集合中的图像的相似度最高的图像确定为匹配图像,则第二图像集合中的非匹配图像就是目标图像。
或者,可以根据图像对应的时间确定目标图像,具体的,可以在第二图像集合中确定拍摄时间与第一图像集合中的图像的拍摄时间相同的图像,第二图像集合中未确定的图像即为目标图像。
如图3所示,为本申请实施例提供的第一图像集合和第二图像集合的一种示例图。该示例中,拍摄第二图像集合时采用的帧率是拍摄第一图像集合时使用的帧率的四倍。图像P0的内容与图像Q0的内容存在至少部分重叠,图像P1的内容与图像Q4的内容存在至少部分重叠,图像P2的内容与图像Q8的内容存在至少部分重叠。图像Q1、Q2、Q3、Q5、Q6、Q7中的内容都是第一图像集合与第二图像集合相比缺失的拍摄内容,因此,图3所示示例中,第二图像集合中的目标图像是:Q1、Q2、Q3、Q5、Q6、Q7。
步骤S22:根据目标图像,获得插帧图像,其中,插帧图像的帧数小于或等于目标图像的帧数。
插帧图像与目标图像不同。具体可以基于目标图像中的至少部分容确定插帧图像中的至少部分内容。
步骤S23:根据插帧图像,获得合成图像集合。
可选的,可以根据获得插帧图像的各帧目标图像的拍摄时间,以及第一图像集合中各帧图像的拍摄时间,按照时间先后顺序将插帧图像插入到第一图像集合中,得到合成图像集合。
具体的,为便于叙述,将某一帧插帧图像记为C,将得到该插帧图像C的目标图像记为C0,则:
可以根据获得插帧图像C的目标图像C0的拍摄时间,在第一图像集合中确定拍摄时间与目标图像C0的拍摄时间最接近的两帧图像(为方便叙述,记为J1和J2),根据图像J1和图像J2的拍摄时间确定插帧图像C对应的时间,然后按照时间先后顺序,将插帧图像C插入到第一图像集合中的图像J1和图像J2之间,得到合成图像集合。
其中,在一些情况下,图像J1和图像J2有可能只是与目标图像C0的拍摄时间最接近的两帧图像,在这些情况下,可以将插帧图像C对应的时间确定为图像J1和图像J2对应的时间的中间值,即图像J1和插帧图像C之间的间隔与插帧图像C和图像J2之间的间隔相同。
以图3示出的图像为例,假设现在有两帧插帧图像,其中一帧插帧图像根据图像Q2获得,另一帧插帧图像根据图像Q6获得,则第一图像集合中拍摄时间与图像Q2的拍摄时间最接近的两帧图像是P0和P1,第一图像集合中拍摄时间与图像Q6的拍摄时间最接近的两帧图像是P1和P2,则可以确定根据图像Q2获得插帧图像C1对应的时间为t2,根据图像Q6获得插帧图像C2对应的时间为t6,基于此,获得的合成图像集合包括5帧图像,依次为:P0、C1、P1、C2、P2,该5帧图像对应的时间依次为:t0、t2、t4、t6、t8。
还以图3示出的图像为例,假设现在有两帧插帧图像,其中一帧插帧图像根据图像Q1获得,另一帧插帧图像根据图像Q6获得,则第一图像集合中拍摄时间与图像Q1的拍摄时间最接近的两帧图像是P0和P1,第一图像集合中拍摄时间与图像Q6的拍摄时间最接近的两帧图像是P1和P2,则可以确定根据图像Q1获得插帧图像C3对应的时间为t2,根据图像Q6获得插帧图像C2对应的时间为t6,基于此,获得的合成图像集合包括5帧图像,依次为:P0、C3、P1、C2、P2,该5帧图像对应的时间依次为:t0、t2、t4、t6、t8。
在另一些情况下,图像J1和图像J2有可能是与多个目标图像的拍摄时间最接近的两帧图像,例如,假设图像J1和图像J2既是与目标图像C01的拍摄时间最接近的两帧图像,又是与目标图像C02的拍摄时间最接近的两帧图像,其中,由目标图像C01获得了插帧图像C1,由目标图像C02获得了插帧图像C2,则在这些情况下,可以将插帧图像C1和插帧图像C2都插入到图像J1和图像J2之间,插帧图像C1和插帧图像C2对应的时间的先后顺序与得到插帧图像的目标图像的先后顺序相同,而插帧图像C1、插帧图像C2、图像J1和图像J2四帧图像中任意相邻两帧图像间的间隔都相同。
还以图3示出的图像为例,假设现在有四帧插帧图像:C1、C2、C3、C4,其中,插帧图像C1根据图像Q1获得,插帧图像C2根据图像Q2获得,插帧图像C3根据图像Q5获得,插帧图像C4根据图像Q6获得,则第一图像集合中拍摄时间与图像Q1、Q2的拍摄时间最接近的两帧图像均是P0和P1,第一图像集合中拍摄时间与图像Q5、Q6的拍摄时间最接近的两帧图像均是P1和P2,则可以确定插帧图像C1和插帧图像C2对应的时间位于t0和t4之间,插帧图像C3和插帧图像C4对应的时间位于t4和t8之间,基于此,获得的合成图像集合包括7帧图像,依次为:P0、C1、C2、P1、C3、C4、P2,该5帧图像对应的时间依次为:t0、T1、T2、t4、T3、T4、t8,其中,该7帧图像中,任意相邻两帧图像间的间隔相等,即t8-T4=T4-T3=T3-t4=t4-T2=T2-T1=T1-t0。
上述实施例中,插帧图像中目标对象的形态和位置根据第二图像集合中目标对象的形态和位置确定。
例如,假设第一图像集合中有两只手的图像,与第一图像集合同时拍摄的第二图像集合中有三只手的图像,如图4所示,为第一图像集合和第二图像集合的另一种示例图。该示例中,第一图像集合中相邻两帧图像对应时间的间隔大于第二图像集合中相邻两帧图像对应时间的间隔,且第一图像集合中图像的分辨率大于第二图像集合中图像的分辨率。第一图像集合中,左边的图像中,手心朝外五指张开,指尖朝上,整体位于图像的下部;右边的图像中,手心朝外五指张开,指尖朝下,整体位于图像的上部。第二图像集合中,左边的图像中,手心朝外五指张开,指尖朝上,整体位于图像的下部;中间的图像中,手心朝外五指张开,指尖朝右,整体位于图像左部。右边的图像中,手心朝外五指张开,指尖朝下,整体位于图像的上部。
根据图4所示图像,可以确定目标图像为第二图像集合中位于中间位置的图像。基于此,可以确定由目标图像获得的插帧图像中,手的形态为手心朝外五指张开,指尖朝右,整体位于图像左部。
在一可选的实施例中,第二图像集合中的至少部分目标图像用于获得插帧图像,也就是说,可以利用第二图像集合中的全部目标图像获得插帧图像,也可以仅利用第二图像集合中的部分目标图像获得插帧图像。假设第二图像集合中的全部目标图像的数量为M,用于获得插帧图像的目标图像的数量为N,则N小于或等于M。
本申请实施例中,一帧插帧图像可以根据一帧目标图像获得。
以图3为例,可以利用目标图像Q1、Q2、Q3、Q5、Q6、Q7获得6帧插帧图像,或者,可以利用Q2、Q6获得两帧插帧图像,或者,可以利用Q1、Q5获得两帧插帧图像,或者,可以利用Q1、Q2、Q5、Q6获得4帧插帧图像,或者,可以利用Q2、Q3、Q5、Q6获得4帧插帧图像等等。
本申请提供的根据目标图像获得插帧图像的一种实现流程图如图5所示,可以包括:
步骤S51:识别第一目标图像中目标对象的形态和位置;第一目标图像为:上述至少部分目标图像中的任意一帧目标图像。
具体目标对象的形态和位置的识别方式可以参看现有成熟的技术,这里不再详述。
步骤S52:在第一图像集合中确定第一图像,第一图像中包括目标对象;第一图像为第一图像集合中拍摄时间与第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像。
还以图3为例,假设第一目标图像为Q2,则第一图像集合中,拍摄时间与第一目标图像的拍摄时间最接近的两帧图像为P0和P1,则可以从P0和P1中确定一帧图像作为第一图像。具体的,如果P0中包括目标对象,而P1中不包括目标对象,则可以将P0作为第一图像,而如果P0中不包括目标对象,而P1中包括目标对象,则可以将P1作为第一图像,而如果P0和P1中均包括目标对象,则可以从P0和P1中任意选择一帧作为第一图像。
步骤S53:依据第一目标图像中目标对象的形态和位置对第一图像中的目标对象进行调整,得到一帧插帧图像。
具体可以为,将第一图像中的目标对象与第一图像中其它对象分离开来,然后根据第一目标图像中目标对象的形态,对分离出来的目标对象进行编辑如,裁剪、填充、旋转、缩放、平移等,使得目标对象在第一图像中的形态和位置与目标对像在第一目标图像的形态和位置相同。对于移动目标对象而产生的空白区域,可以根据该空白区域周边像素点的颜色、亮度等参数在空白区域填充像素点,使得空白区域的内容与周边区域的内容连续。
这样得到的插帧图像的图像质量与第一图像集合中图像的图像质量相同或基本一致。
本申请提供的根据目标图像获得插帧图像的另一种实现流程图如图6所示,可以包括:
步骤S61:根据第一目标图像在第一图像集合中确定第一图像;第一目标图像为:上述至少部分目标图像中的任意一帧目标图像;第一图像为第一图像集合中拍摄时间与第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像。
还以图3为例,假设第一目标图像为Q5,则第一图像集合中,拍摄时间与第一目标图像的拍摄时间最接近的两帧图像为P1和P2,则可以从P1和P2中确定一帧图像作为第一图像。可选的,可以从P1和P2中任意选择一帧作为第一图像。
步骤S62:基于第一图像的图像质量参数,对第一目标图像的图像质量参数进行调整,得到一帧插帧图像;插帧图像的图像质量参数与第一图像的图像质量参数相同。
与图5所示实施例不同,图5所示实施例是根据第一目标图像对第一图像中的目标对象进行处理得到插帧图像,而本实施例是根据第一图像的图像质量参数对第一目标图像的质量参数进行调整,使得第一目标图像的图像质量参数与第一图像的图像质量参数相同或基本相同。
图5所示实施例的优点在于,插帧图像的图像质量与第一图像集合的图像质量更一致,而图6所示实施例的优点在于,插帧图像中目标对象的形态和位置与实际情况一致。
在一可选的实施例中,上述第一图像集合中的图像具有第一图像质量参数,第二图像集合中的图像具有第二图像质量参数,第一图像质量参数所表征的图像质量优于第二图像质量参数所表征的图像质量。
其中,图像质量参数包括如下至少一种:分辨率、亮度、色彩。
例如,第一图像集合中的图像的分辨率大于第二图像集合中的图像的分辨率;和/或,
第一图像集合中的图像的色彩深度大于第二图像集合中的图像的色彩深度;和/或,
第一图像集合中的图像的亮度大于第二图像集合中的图像的亮度,即第一图像集合中的图像的亮度在预设的正常范围内,而第二图像集合中的图像的亮度超出该正常范围,即偏低;或者,第二图像集合中的图像的亮度大于第一图像集合中的图像的亮度,即第一图像集合中的图像的亮度在预设的正常范围内,而第二图像集合中的图像的亮度超出该正常范围,即偏高。
本申请提供的根据目标图像获得插帧图像的又一种实现方式可以为:
根据采用第一帧率拍摄的第二图像集合B1中的第一目标图像,采用第二帧率拍摄的第二图像集合B2中的第二目标图像,以及第一图像集合A中的第二图像获得一帧插帧图像。
在一些有高速运动的对象(例如,高速飞翔的小鸟)的场景中,由于受图像采集装置本身配置的限制,其有可能无法捕捉到高速运动的对象,为此,本申请提出,可以使用多个图像采集装置拍摄图像集合。本申请实施例中,可以通过三个图像采集装置拍摄图像集合:第一图像采集装置用于拍摄第一图像集合A,第二图像采集装置K1用于拍摄第二图像集合B1,第二图像采集装置K2用于拍摄第二图像集合B2。
其中,
第一帧率大于第二帧率;第一目标图像为采用第一帧率拍摄的第二图像集合中的至少部分目标图像中的任意一帧目标图像;第二目标图像为采用第二帧率拍摄的第二图像集合中,拍摄时间与第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;第二图像为:第一图像集合中拍摄时间与第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像,或者,第一图像集合中拍摄时间与第二目标图像的拍摄时间最接近的两帧图像中的其中一帧图像。
也就是说,第一图像采集装置拍摄第一图像集合A采用的帧率小于第二图像采集装置K2拍摄第二图像集合B2采用的帧率,而第二图像采集装置K2拍摄第二图像集合B2采用的帧率小于第二图像采集装置K1拍摄第二图像集合B1采用的帧率。
本实施例中,目标图像包括第二图像集合B1中的第一类目标图像,以及第二图像集合B2中的第二类目标图像。其中,第一类目标图像中包括:第一图像集合与第二图像集合B1相比缺失的拍摄内容;第二类目标图像中包括:第一图像集合与第二图像集合B2相比缺失的拍摄内容。
如图7所示,为本申请实施例提供的第一图像集合A、第二图像集合B1和第二图像集合B2的一种示例图。该示例中,第一类目标图像为:Q1、Q2、Q3、Q5、Q6、Q7;第二类目标图像为:R1、R3。
第一目标图像和第二目标图像中具有目标对象;第一目标图像用于确定插帧图像中目标对象的形态和位置,第二目标图像用于确定插帧图像中目标对象的第一类图像质量参数;第二图像用于确定插帧图像的第二类图像质量参数;第一类图像质量参数与第二类图像质量参数不同。
本示例可以应用的一个典型的场景是:第一目标图像和第二目标图像中具有目标对象,而第二图像中不具有目标对象。
如图7所示,假设第一目标图像为Q1,则第二目标图像可以为R0和R1两帧图像中的一帧图像,假设第二目标图像为R1,则第二图像可以为P0和P1两帧图像中的一帧图像,假设第二图像为P0。则Q1用于确定插帧图像中目标对象的形态和位置,R1用于确定插帧图像中目标对象的颜色,而P0则用于确定插帧图像中目标对象的分辨率、色彩深度、亮度等。
具体可以通过如下方式获得插帧图像:
根据第二目标图像中目标对象的第一类图像质量参数对第一目标图像中的目标对象区域进行处理,使得第一目标图像中目标对象区域的第一类图像质量参数与第二目标图像的第一类图像质量参数一致;根据第二图像的第二类图像质量参数对处理后的第一目标图像进行处理,得到一帧插帧图像,该插帧图像的第二类图像质量参数与第二图像的第二类图像质量参数一致。
或者,可以通过如下方式获得插帧图像:
根据第一目标图像中目标对象的形态和位置对第二目标图像中的目标对象进行处理,使得第二目标图像中目标对象的形态和位置与第一目标图像中目标对象的形态和位置一致;根据第二图像的第二类图像质量参数对处理后的第二目标图像进行处理,得到一帧插帧图像,该插帧图像的第二类图像质量参数与第二图像的第二类图像质量参数一致。
通过多个图像集合来获得插帧图像,使得插帧图像的内容更加符合真实场景,进一步提高合成图像集合的质量。
另外,为了进一步提高合成图像集合的质量,在开始拍摄图像集合之前,还可以包括:
对第一图像采集装置和第二图像采集装置的参数进行调节,使得第一图像采集装置和第二图像采集装置的取景范围相同。
可以通过调节镜头焦距来调节图像采集装置的取景范围。两个图像采集装置的镜头焦距相同,则两个图像采集装置的取景范围相同。本实施例中,取景范围是指取景区域的大小。
将第一图像采集装置在第一时刻获取的第一预览图像和第二图像采集装置在第一时刻获取的第二预览图像进行比对,以确定第一图像采集装置和第二图像采集装置的公共取景内容。第一时刻可以是开始拍摄图像集合之前的任意一个时刻。
在第一预览图像中确定公共取景内容所在的第一区域,在第二预览图像中确定公共取景内容所在的第二区域,以便在拍摄图像集合的过程中,仅保留第一图像采集装置拍摄的图像中第一区域中的数据,以及第二图像采集装置拍摄的图像中第二区域中的数据。
也就是说,本实施例中,第一图像集合和第二图像集合中的图像,图像内容都是两个图像采集装置在同一时刻采集的图像中的公共取景内容。
与方法实施例相对应,本申请还提供一种信息处理装置,本申请提供的信息处理装置的一种结构示意图如图8所示,可以包括:
第一获得模块81,用于获得第一图像集合和第二图像集合;第二图像集合中相邻两帧图像对应时间的间隔小于第一图像集合中相邻两帧图像对应时间的间隔;
第二获得模块82,用于根据第一图像集合和第二图像集合,获得合成图像集合;其中,合成图像集合中图像的图像质量不高于第一图像集合中图像的图像质量;合成图像集合中图像的图像质量不低于第二图像集合中图像的图像质量;合成图像集合中相邻两帧图像对应时间的间隔不高于第一图像集合中相邻两帧图像对应时间的间隔;合成图像集合中相邻两帧图像对应时间的间隔不低于第二图像集合中相邻两帧图像对应时间的间隔。
本申请提供的信息处理装置,通过具有不同帧间间隔和不同图像质量的第一图像集合和第二图像集合来合成新的图像集合,合成的图像集合中图像的图像质量不高于两个图像集合具有的较高图像质量,且不低于两个图像集合具有的较低图像质量;合成图像集合的帧间间隔不高于两个图像集合具有的较高帧间间隔,且不低于两个图像集合具有的较低帧间间隔,而由于第一图像集合和第二图像集合中携带的都是真实场景中的内容,因此,合成图像集合中图像的内容也是真实场景中的内容。综上,通过上述实施例可以获得符合真实场景的,具有较低帧间间隔和较高图像质量的新的图像集合。
在一可选的实施例中,第一获得模块81在获得第一图像集合和第二图像集合时,具体可以用于:
获得设备中第一图像采集装置和第二图像采集装置同时拍摄的图像集合;其中,所述第一图像采集装置拍摄所述第一图像集合采用的帧率小于所述第二图像采集装置拍摄所述第二图像集合采用的帧率;所述第一图像采集装置和所述第二图像采集装置在每一时刻的取景内容存在至少部分重叠。
在一可选的实施例中,第二获得模块82具体可以用于:
分析所述第一图像集合和所述第二图像集合,以确定所述第二图像集合中的目标图像,所述目标图像中包含:所述第一图像集合与所述第二图像集合相比缺失的拍摄内容;
根据所述目标图像,获得插帧图像,所述插帧图像的帧数小于或等于所述目标图像的帧数;
根据所述插帧图像,获得合成图像集合。
在一可选的实施例中,插帧图像中目标对象的形态和位置根据所述第二图像集合中所述目标对象的形态和位置确定。
在一可选的实施例中,第二图像集合中的至少部分目标图像用于获得插帧图像。第二获得模块82在根据所述目标图像获得插帧图像时,具体可以用于:
识别第一目标图像中所述目标对象的形态和位置;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;
在所述第一图像集合中确定第一图像,所述第一图像中包括所述目标对象;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
依据所述第一目标图像中所述目标对象的形态和位置对所述第一图像中的所述目标对象进行调整,得到一帧插帧图像。
在另一可选的实施例中,第二获得模块82在根据所述目标图像获得插帧图像时,具体可以用于:
根据第一目标图像在所述第一图像集合中确定第一图像;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
基于所述第一图像的图像质量参数,对所述第一目标图像的图像质量参数进行调整,得到一帧插帧图像;所述插帧图像的图像质量参数与所述第一图像的图像质量参数相同。
在一可选的实施例中,第一图像集合中的图像具有第一图像质量参数,第二图像集合中的图像具有第二图像质量参数;
第一图像质量参数所表征的图像质量优于第二图像质量参数所表征的图像质量;
其中,图像质量参数包括如下至少一种:分辨率、亮度、色彩。
在又一可选的实施例中,第二图像集合中的至少部分目标图像用于获得插帧图像。第二获得模块82在根据所述目标图像获得插帧图像时,具体可以用于:
根据采用第一帧率拍摄的第二图像集合中的第一目标图像,采用第二帧率拍摄的第二图像集合中的第二目标图像,以及所述第一图像集合中的第二图像获得一帧插帧图像;其中,
所述第一帧率大于所述第二帧率;所述第一目标图像为所述采用第一帧率拍摄的第二图像集合中的至少部分目标图像中的任意一帧目标图像;所述第二目标图像为所述采用第二帧率拍摄的第二图像集合中,拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;所述第二图像为:所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像,或者,所述第一图像集合中拍摄时间与所述第二目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
所述第一目标图像和所述第二目标图像中具有所述目标对象;所述第一目标图像用于确定所述插帧图像中所述目标对象的形态和位置,所述第二目标图像用于确定所述插帧图像中所述目标对象的第一类图像质量参数;所述第二图像用于确定所述插帧图像的第二类图像质量参数;所述第一类图像质量参数与所述第二类图像质量参数不同。
在一可选的实施例中,第二获得模块82在根据插帧图像获得合成图像集合时,具体可以用于:
根据获得插帧图像的各帧目标图像的拍摄时间,以及第一图像集合中各帧图像的拍摄时间,按照时间先后顺序将插帧图像插入到第一图像集合中,得到合成图像集合。
在一可选的实施例中,本申请提供的信息处理装置还可以包括调节模块,用于:
在开始拍摄图像集合之前,对第一图像采集装置和第二图像采集装置的参数进行调节,使得第一图像采集装置和第二图像采集装置的取景范围相同;
将第一图像采集装置在第一时刻获取的第一预览图像和第二图像采集装置在第一时刻获取的第二预览图像进行比对,以确定第一图像采集装置和第二图像采集装置的公共取景内容;
在第一预览图像中确定公共取景内容所在的第一区域,在第二预览图像中确定公共取景内容所在的第二区域,以便在拍摄图像集合的过程中,仅保留第一图像采集装置拍摄的图像中第一区域中的数据,以及第二图像采集装置拍摄的图像中第二区域中的数据。
与方法实施例相对应,本申请还提供一种设备,该设备的一种结构示意图如图9所示,可以包括:
存储器91和处理器92;其中,
存储器91用于至少存储一组指令集;
处理器92用于调用并执行存储器91中的指令集,通过执行指令集进行以下操作:
获得第一图像集合;
获得第二图像集合;第二图像集合中相邻两帧图像对应时间的间隔小于第一图像集合中相邻两帧图像对应时间的间隔;
根据第一图像集合和第二图像集合,获得合成图像集合;
其中,合成图像集合中图像的图像质量不高于第一图像集合中图像的图像质量;合成图像集合中图像的图像质量不低于第二图像集合中图像的图像质量;合成图像集合中相邻两帧图像对应时间的间隔不高于第一图像集合中相邻两帧图像对应时间的间隔;合成图像集合中相邻两帧图像对应时间的间隔不低于第二图像集合中相邻两帧图像对应时间的间隔。
本申请提供的设备,通过具有不同帧间间隔和不同图像质量的第一图像集合和第二图像集合来合成新的图像集合,合成的图像集合中图像的图像质量不高于两个图像集合具有的较高图像质量,且不低于两个图像集合具有的较低图像质量;合成图像集合的帧间间隔不高于两个图像集合具有的较高帧间间隔,且不低于两个图像集合具有的较低帧间间隔,而由于第一图像集合和第二图像集合中携带的都是真实场景中的内容,因此,合成图像集合中图像的内容也是真实场景中的内容。综上,通过上述实施例可以获得符合真实场景的,具有较低帧间间隔和较高图像质量的新的图像集合。
在一可选的实施例中,设备还可以包括第一图像采集装置和第二图像采集装置,处理器92在获得第一图像集合和第二图像集合时,具体可以用于:
获得设备中第一图像采集装置和第二图像采集装置同时拍摄的图像集合;其中,所述第一图像采集装置拍摄所述第一图像集合采用的帧率小于所述第二图像采集装置拍摄所述第二图像集合采用的帧率;所述第一图像采集装置和所述第二图像采集装置在每一时刻的取景内容存在至少部分重叠。
在一可选的实施例中,处理器92在根据第一图像集合和第二图像集合获得合成图像集合时,具体可以用于:
分析所述第一图像集合和所述第二图像集合,以确定所述第二图像集合中的目标图像,所述目标图像中包含:所述第一图像集合与所述第二图像集合相比缺失的拍摄内容;
根据所述目标图像,获得插帧图像,所述插帧图像的帧数小于或等于所述目标图像的帧数;
根据所述插帧图像,获得合成图像集合。
在一可选的实施例中,插帧图像中目标对象的形态和位置根据所述第二图像集合中所述目标对象的形态和位置确定。
在一可选的实施例中,第二图像集合中的至少部分目标图像用于获得插帧图像。处理器92在根据目标图像获得插帧图像时,具体可以用于:
识别第一目标图像中所述目标对象的形态和位置;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;
在所述第一图像集合中确定第一图像,所述第一图像中包括所述目标对象;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
依据所述第一目标图像中所述目标对象的形态和位置对所述第一图像中的所述目标对象进行调整,得到一帧插帧图像。
在另一可选的实施例中,处理器92在根据目标图像获得插帧图像时,具体可以用于:
根据第一目标图像在所述第一图像集合中确定第一图像;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
基于所述第一图像的图像质量参数,对所述第一目标图像的图像质量参数进行调整,得到一帧插帧图像;所述插帧图像的图像质量参数与所述第一图像的图像质量参数相同。
在一可选的实施例中,第一图像集合中的图像具有第一图像质量参数,第二图像集合中的图像具有第二图像质量参数;
第一图像质量参数所表征的图像质量优于第二图像质量参数所表征的图像质量;
其中,图像质量参数包括如下至少一种:分辨率、亮度、色彩。
在又一可选的实施例中,第二图像集合中的至少部分目标图像用于获得插帧图像。处理器92在根据目标图像获得插帧图像时,具体可以用于:
根据采用第一帧率拍摄的第二图像集合中的第一目标图像,采用第二帧率拍摄的第二图像集合中的第二目标图像,以及所述第一图像集合中的第二图像获得一帧插帧图像;其中,
所述第一帧率大于所述第二帧率;所述第一目标图像为所述采用第一帧率拍摄的第二图像集合中的至少部分目标图像中的任意一帧目标图像;所述第二目标图像为所述采用第二帧率拍摄的第二图像集合中,拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;所述第二图像为:所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像,或者,所述第一图像集合中拍摄时间与所述第二目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
所述第一目标图像和所述第二目标图像中具有所述目标对象;所述第一目标图像用于确定所述插帧图像中所述目标对象的形态和位置,所述第二目标图像用于确定所述插帧图像中所述目标对象的第一类图像质量参数;所述第二图像用于确定所述插帧图像的第二类图像质量参数;所述第一类图像质量参数与所述第二类图像质量参数不同。
在一可选的实施例中,处理器92在根据插帧图像获得合成图像集合时,具体可以用于:
根据获得插帧图像的各帧目标图像的拍摄时间,以及第一图像集合中各帧图像的拍摄时间,按照时间先后顺序将插帧图像插入到第一图像集合中,得到合成图像集合。
在一可选的实施例中,处理器92还可以用于:
在开始拍摄图像集合之前,对第一图像采集装置和第二图像采集装置的参数进行调节,使得第一图像采集装置和所述第二图像采集装置的取景范围相同;
将第一图像采集装置在第一时刻获取的第一预览图像和第二图像采集装置在第一时刻获取的第二预览图像进行比对,以确定第一图像采集装置和第二图像采集装置的公共取景内容;
在第一预览图像中确定公共取景内容所在的第一区域,在第二预览图像中确定公共取景内容所在的第二区域,以便在拍摄图像集合的过程中,仅保留第一图像采集装置拍摄的图像中第一区域中的数据,以及第二图像采集装置拍摄的图像中第二区域中的数据。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
应当理解,本申请实施例中,从权、各个实施例、特征可以互相组合结合,都能实现解决前述技术问题。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (8)
1.一种信息处理方法,包括:
获得第一图像集合;
获得第二图像集合;所述第二图像集合中相邻两帧图像对应时间的间隔小于所述第一图像集合中相邻两帧图像对应时间的间隔;其中利用同一个设备的两个摄像头同时拍摄来分别得到所述第一图像集合和所述第二图像集合;
根据所述第一图像集合和所述第二图像集合,获得一个新的合成图像集合;
其中,所述合成图像集合中图像的图像质量不高于所述第一图像集合中图像的图像质量;所述合成图像集合中图像的图像质量不低于所述第二图像集合中图像的图像质量;所述合成图像集合中相邻两帧图像对应时间的间隔不高于所述第一图像集合中相邻两帧图像对应时间的间隔;所述合成图像集合中相邻两帧图像对应时间的间隔不低于所述第二图像集合中相邻两帧图像对应时间的间隔;
根据所述第一图像集合和所述第二图像集合,获得合成图像集合,包括:
分析所述第一图像集合和所述第二图像集合,以确定所述第二图像集合中的目标图像,所述目标图像中包含:所述第一图像集合与所述第二图像集合相比缺失的拍摄内容;
根据所述目标图像,获得插帧图像,所述插帧图像的帧数小于或等于所述目标图像的帧数;
根据所述插帧图像,获得合成图像集合;
其中,所述插帧图像中目标对象的形态和位置根据所述第二图像集合中所述目标对象的形态和位置确定。
2.根据权利要求1所述的方法,所述获得第一图像集合;获得第二图像集合,包括:
获得设备中第一图像采集装置和第二图像采集装置同时拍摄的图像集合;其中,所述第一图像采集装置拍摄所述第一图像集合采用的帧率小于所述第二图像采集装置拍摄所述第二图像集合采用的帧率;所述第一图像采集装置和所述第二图像采集装置在每一时刻的取景内容存在至少部分重叠。
3.根据权利要求1所述的方法,所述第二图像集合中的至少部分目标图像用于获得插帧图像,所述根据所述目标图像获得插帧图像包括:
识别第一目标图像中所述目标对象的形态和位置;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;
在所述第一图像集合中确定第一图像,所述第一图像中包括所述目标对象;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
依据所述第一目标图像中所述目标对象的形态和位置对所述第一图像中的所述目标对象进行调整,得到一帧插帧图像。
4.根据权利要求1所述的方法,第二图像集合中的至少部分目标图像用于获得插帧图像,所述根据所述目标图像获得插帧图像包括:
根据第一目标图像在所述第一图像集合中确定第一图像;所述第一目标图像为:所述至少部分目标图像中的任意一帧目标图像;所述第一图像为所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
基于所述第一图像的图像质量参数,对所述第一目标图像的图像质量参数进行调整,得到一帧插帧图像;所述插帧图像的图像质量参数与所述第一图像的图像质量参数相同。
5.根据权利要求1所述的方法,所述第一图像集合中的图像具有第一图像质量参数,所述第二图像集合中的图像具有第二图像质量参数;
所述第一图像质量参数所表征的图像质量优于所述第二图像质量参数所表征的图像质量;
其中,图像质量参数包括如下至少一种:分辨率、亮度、色彩。
6.根据权利要求5所述的方法,所述第二图像集合中的至少部分目标图像用于获得所述插帧图像,所述根据所述目标图像获得插帧图像,包括:
根据采用第一帧率拍摄的第二图像集合中的第一目标图像,采用第二帧率拍摄的第二图像集合中的第二目标图像,以及所述第一图像集合中的第二图像获得一帧插帧图像;其中,
所述第一帧率大于所述第二帧率;所述第一目标图像为所述采用第一帧率拍摄的第二图像集合中的至少部分目标图像中的任意一帧目标图像;所述第二目标图像为所述采用第二帧率拍摄的第二图像集合中,拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;所述第二图像为:所述第一图像集合中拍摄时间与所述第一目标图像的拍摄时间最接近的两帧图像中的其中一帧图像,或者,所述第一图像集合中拍摄时间与所述第二目标图像的拍摄时间最接近的两帧图像中的其中一帧图像;
所述第一目标图像和所述第二目标图像中具有所述目标对象;所述第一目标图像用于确定所述插帧图像中所述目标对象的形态和位置,所述第二目标图像用于确定所述插帧图像中所述目标对象的第一类图像质量参数;所述第二图像用于确定所述插帧图像的第二类图像质量参数;所述第一类图像质量参数与所述第二类图像质量参数不同。
7.一种信息处理装置,包括:
第一获得模块,用于获得第一图像集合和第二图像集合;所述第二图像集合中相邻两帧图像对应时间的间隔小于所述第一图像集合中相邻两帧图像对应时间的间隔;其中利用同一个设备的两个摄像头同时拍摄来分别得到所述第一图像集合和所述第二图像集合;
第二获得模块,用于根据所述第一图像集合和所述第二图像集合,获得一个新的合成图像集合;其中,所述合成图像集合中图像的图像质量不高于所述第一图像集合中图像的图像质量;所述合成图像集合中图像的图像质量不低于所述第二图像集合中图像的图像质量;所述合成图像集合中相邻两帧图像对应时间的间隔不高于所述第一图像集合中相邻两帧图像对应时间的间隔;所述合成图像集合中相邻两帧图像对应时间的间隔不低于所述第二图像集合中相邻两帧图像对应时间的间隔;
根据所述第一图像集合和所述第二图像集合,获得合成图像集合,包括:
分析所述第一图像集合和所述第二图像集合,以确定所述第二图像集合中的目标图像,所述目标图像中包含:所述第一图像集合与所述第二图像集合相比缺失的拍摄内容;
根据所述目标图像,获得插帧图像,所述插帧图像的帧数小于或等于所述目标图像的帧数;
根据所述插帧图像,获得合成图像集合;
其中,所述插帧图像中目标对象的形态和位置根据所述第二图像集合中所述目标对象的形态和位置确定。
8.一种设备,包括:
存储器,用于至少存储一组指令集;
处理器,用于调用并执行所述存储器中的所述指令集,通过执行所述指令集进行以下操作:
获得第一图像集合;
获得第二图像集合;所述第二图像集合中相邻两帧图像对应时间的间隔小于所述第一图像集合中相邻两帧图像对应时间的间隔;其中利用同一个设备的两个摄像头同时拍摄来分别得到所述第一图像集合和所述第二图像集合;
根据所述第一图像集合和所述第二图像集合,获得一个新的合成图像集合;
其中,所述合成图像集合中图像的图像质量不高于所述第一图像集合中图像的图像质量;所述合成图像集合中图像的图像质量不低于所述第二图像集合中图像的图像质量;所述合成图像集合中相邻两帧图像对应时间的间隔不高于所述第一图像集合中相邻两帧图像对应时间的间隔;所述合成图像集合中相邻两帧图像对应时间的间隔不低于所述第二图像集合中相邻两帧图像对应时间的间隔;
根据所述第一图像集合和所述第二图像集合,获得合成图像集合,包括:
分析所述第一图像集合和所述第二图像集合,以确定所述第二图像集合中的目标图像,所述目标图像中包含:所述第一图像集合与所述第二图像集合相比缺失的拍摄内容;
根据所述目标图像,获得插帧图像,所述插帧图像的帧数小于或等于所述目标图像的帧数;
根据所述插帧图像,获得合成图像集合;
其中,所述插帧图像中目标对象的形态和位置根据所述第二图像集合中所述目标对象的形态和位置确定。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910208088.9A CN109819181B (zh) | 2019-03-19 | 2019-03-19 | 信息处理方法、装置及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910208088.9A CN109819181B (zh) | 2019-03-19 | 2019-03-19 | 信息处理方法、装置及设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109819181A CN109819181A (zh) | 2019-05-28 |
CN109819181B true CN109819181B (zh) | 2021-02-19 |
Family
ID=66609508
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910208088.9A Active CN109819181B (zh) | 2019-03-19 | 2019-03-19 | 信息处理方法、装置及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109819181B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103379351A (zh) * | 2012-04-28 | 2013-10-30 | 中国移动通信集团山东有限公司 | 一种视频处理方法及装置 |
CN109068052A (zh) * | 2018-07-24 | 2018-12-21 | 努比亚技术有限公司 | 视频拍摄方法、移动终端及计算机可读存储介质 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6452414B2 (ja) * | 2014-12-03 | 2019-01-16 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
CN107493438B (zh) * | 2017-09-26 | 2020-05-15 | 华勤通讯技术有限公司 | 双摄像头的连拍方法以及装置、电子设备 |
CN109040591B (zh) * | 2018-08-22 | 2020-08-04 | Oppo广东移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
-
2019
- 2019-03-19 CN CN201910208088.9A patent/CN109819181B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103379351A (zh) * | 2012-04-28 | 2013-10-30 | 中国移动通信集团山东有限公司 | 一种视频处理方法及装置 |
CN109068052A (zh) * | 2018-07-24 | 2018-12-21 | 努比亚技术有限公司 | 视频拍摄方法、移动终端及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN109819181A (zh) | 2019-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101873668B1 (ko) | 이동 단말의 촬영 방법 및 이동 단말 | |
US9961273B2 (en) | Mobile terminal and shooting method thereof | |
JP4464360B2 (ja) | 監視装置、監視方法、及びプログラム | |
CN101552890B (zh) | 信息处理设备、信息处理方法 | |
KR101530826B1 (ko) | 360도 공간영상 재생방법 및 그 시스템 | |
CN113067994B (zh) | 一种视频录制方法及电子设备 | |
WO2019192416A1 (zh) | 视频处理方法及其装置、存储介质、电子产品 | |
CN113115110B (zh) | 视频合成方法、装置、存储介质与电子设备 | |
CN106028120A (zh) | 移动终端中进行的视频导播方法和装置 | |
WO2023134583A1 (zh) | 视频录制方法、装置及电子设备 | |
CN114598819B (zh) | 视频录制方法、装置和电子设备 | |
CN106713942A (zh) | 视频处理方法和装置 | |
CN110266955B (zh) | 图像处理方法、装置、电子设备以及存储介质 | |
KR20160021706A (ko) | 360도 공간영상 재생방법 및 그 시스템 | |
EP3684048B1 (en) | A method for presentation of images | |
CN110072059A (zh) | 图像拍摄装置、方法及终端 | |
JP2006005452A (ja) | 画像合成装置及び画像合成システム | |
CN109286760B (zh) | 一种娱乐视频制作方法及其终端 | |
JP4794938B2 (ja) | 監視システム、監視装置、監視方法、及びプログラム | |
CN108174112B (zh) | 一种摄像中的处理方法及装置 | |
CN109819181B (zh) | 信息处理方法、装置及设备 | |
CN104298442A (zh) | 一种信息处理方法及电子设备 | |
CN108933881B (zh) | 一种视频处理方法及装置 | |
JP2011172103A (ja) | 画像生成装置 | |
CN112887653A (zh) | 一种信息处理方法和信息处理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |