CN105141942A - 3d图像合成方法及装置 - Google Patents

3d图像合成方法及装置 Download PDF

Info

Publication number
CN105141942A
CN105141942A CN201510556372.7A CN201510556372A CN105141942A CN 105141942 A CN105141942 A CN 105141942A CN 201510556372 A CN201510556372 A CN 201510556372A CN 105141942 A CN105141942 A CN 105141942A
Authority
CN
China
Prior art keywords
camera terminal
scape
rendering
track
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510556372.7A
Other languages
English (en)
Other versions
CN105141942B (zh
Inventor
陈涛
唐明勇
刘华一君
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Technology Co Ltd
Xiaomi Inc
Original Assignee
Xiaomi Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaomi Inc filed Critical Xiaomi Inc
Priority to CN201510556372.7A priority Critical patent/CN105141942B/zh
Publication of CN105141942A publication Critical patent/CN105141942A/zh
Application granted granted Critical
Publication of CN105141942B publication Critical patent/CN105141942B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)

Abstract

本公开实施例提供了一种3D图像合成方法及装置,其方法包括:检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件;当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;利用所述至少两张图像生成所述目标景物的3D图像。由于该方法可以根据在拍摄终端拍摄目标景物时满足一定的条件即可自动生成目标景物的3D图像,所以无需用户根据经验在目标景物周围选择不同的拍摄地点,减少用户在选择拍摄地点的尝试次数,以及,可以避免在拍摄地点拍照得到的图像在后期无法合成3D图像的问题,使得3D图像合成的操作步骤少,且可自动执行,同时还可以提高3D图像合成的成功率。

Description

3D图像合成方法及装置
技术领域
本公开涉及图像领域,尤其涉及一种3D图像合成方法及装置。
背景技术
随着科技的发展,3D技术越来越多的应用于我们的生活中,如3D拍摄,3D扫描,3D打印等等。
但是因为3D拍摄方式问题,也有很多限制。如单机位单镜头拍摄3D照片时(模拟人眼通过不同的角度对一个物体拍两张照片,通过一定的算法合成一张3D照片),操作方式复杂,焦点容易误判,需要手持很稳等。
一般在电影拍摄中,有时候会有这样的镜头运动方式,以某个物体作为焦点或圆心,机器围绕其转动。这样一来,在摄像机记录的很多素材中,都符合3D合成的要求,因此亟需一种能够利用摄像机记录的素材生成3D图像的技术。
发明内容
为克服相关技术中存在的问题,本公开提供一种3D图像合成方法及装置。
根据本公开实施例的第一方面,提供一种3D图像合成方法,包括:
检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件;
当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;
利用所述至少两张图像生成所述目标景物的3D图像。
本公开提供的该方法,由于可以根据在拍摄终端拍摄目标景物时满足一定的条件即可自动生成目标景物的3D图像,所以与现有的3D图像合成中的图像获取方式不同的是,该方法无需用户根据经验在在目标景物周围选择不同的拍摄地点,减少用户在选择拍摄地点的尝试次数,以及,可以避免在拍摄地点拍照得到的图像在后期无法合成3D图像的问题,使得3D图像合成的操作步骤少,且可自动执行,同时还可以提高3D图像合成的成功率。
结合第一方面,在第一方面第一种可能的实现方式中,该方法还包括:
检测所述拍摄终端在运动过程中拍摄的景别;
判断所述景别是否为预设景别;
当所述景别为预设景别时,执行所述检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件的步骤。
本公开提供的该方法,由于设定了只有一些特殊景别,才会启动3D图像合成步骤,并且这些特殊景别分别为特写景别、近景景别或中景景别,所以可以提高3D图像合成的成功率,避免采用其它景别进行3D图像合成时出现失败的情况。
结合第一方面第一种可能的实现方式,在第一方面第二种可能的实现方式中,所述预设景别包括特写景别、近景景别或中景景别。
结合第一方面,在第一方面第三种可能的实现方式中,所述检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件包括:
检测所述拍摄终端是否在预设平面上运动;
当所述拍摄终端在预设平面上运动时,判断所述拍摄终端的移动速度是否位于预设移动速度阈值内;
当所述拍摄终端的移动速度位于所述预设移动速度阈值内时,判断所述拍摄终端的转动速度是否位于预设转动速度阈值内;
当所述拍摄终端的转动速度位于预设转动速度阈值内,确定所述拍摄终端运动的轨迹满足预设条件。
本公开实施例提供的该方法,只有在拍摄终端在预设平面上运动,而且在预设平面上移动的速度以及转动的速度都满足设定阈值时,才确定拍摄终端当前运动的轨迹满足3D合成的条件。由于只有拍摄终端以某个物体作为焦点或圆心,并且围绕其转动时,拍摄终端拍摄到的图像才可以进行3D图像合成,所以该方法还可以提高3D图像合成的成功率,避免对拍摄终端所拍摄的任意图像进行3D图像合成而出现的合成失败的问题。
结合第一方面,在第一方面第四种可能的实现方式中,所述获取所述拍摄终端在运动过程拍摄到的至少两张图像包括:
获取拍摄终端运动时拍摄得到的视频;
提取所述视频中的帧图像;
对所述提取到的帧图像的图像内容进行图像识别,得到识别结果;
根据所述识别结果,查找所述提取到帧图像中焦点相同且拍摄角度不同的至少两帧图像。
本公开实施例提供的该方法可以利用拍摄到的视频中的至少两帧图像作为3D图像合成的素材,并且由于摄影机在拍摄视频时在一个平面内平稳移动且缓慢转动,所以拍摄到的视频中每一帧的图像中目标景物的拍摄角度都是不同的,所以可以轻松根据视频中的至少两帧图像进行3D图像合成。
根据本公开实施例的第二方面,提供一种3D图像合成装置,包括:
轨迹检测模块,用于检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件;
图像获取模块,用于当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;
图像生成单元,用于利用所述至少两张图像生成所述目标景物的3D图像。
结合第二方面,在第二方面第一种可能的实现方式中,该装置还包括:
景别检测模块,用于检测所述拍摄终端在运动过程中拍摄的景别;
景别判断模块,用于判断所述景别是否为预设景别;
当所述景别为预设景别时,所述轨迹检测模块还用于检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件。
结合第二方面第一种可能的实现方式,在第二方面第二种可能的实现方式中,所述预设景别包括特写景别、近景景别或中景景别。
结合第二方面,在第二方面第三种可能的实现方式中,所述轨迹检测模块包括:
平面运动检测单元,用于检测所述拍摄终端是否在预设平面上运动;
移动速度判断单元,用于当所述拍摄终端在预设平面上运动时,判断所述拍摄终端的移动速度是否位于预设移动速度阈值内;
转动速度判断单元,用于当所述拍摄终端的移动速度位于所述预设移动速度阈值内时,判断所述拍摄终端的转动速度是否位于预设转动速度阈值内;
轨迹确定单元,用于当所述拍摄终端的转动速度位于预设转动速度阈值内,确定所述拍摄终端运动的轨迹满足预设条件。
结合第二方面,在第二方面第四种可能的实现方式中,所述图像获取模块包括:
视频获取单元,用于获取拍摄终端运动时拍摄得到的视频;
图像提取单元,用于提取所述视频中的帧图像;
图像识别单元,用于对所述提取到的帧图像的图像内容进行图像识别,得到识别结果;
图像查找单元,用于根据所述识别结果,查找所述提取到帧图像中焦点相同且拍摄角度不同的至少两帧图像。
根据本公开实施例的第三方面,提供一种终端,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
检测拍摄终端运动在拍摄目标景物时的轨迹是否满足预设条件;
当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;
利用所述至少两张图像生成所述目标景物的3D图像。
本公开的实施例提供的技术方案可以包括以下有益效果:
本公开实施例提供的该方法,可以通过检测拍摄终端的轨迹,当拍摄终端的轨迹满足预设条件时,可以获取拍摄终端在运动过程中拍摄到的至少两张图像,并且利用这至少两张图像生成目标景物的3D图像。
由于该方法可以根据在拍摄终端拍摄目标景物时满足一定的条件即可自动生成目标景物的3D图像,与现有的3D图像合成中的图像获取方式不同的是,该方法无需用户根据经验在在目标景物周围选择不同的拍摄地点,减少用户在选择拍摄地点的尝试次数,以及,可以避免在拍摄地点拍照得到的图像在后期无法合成3D图像的问题,使得3D图像合成的操作步骤少,且可自动执行,同时还可以提高3D图像合成的成功率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种场景示意图;
图2是根据一示例性实施例示出的一种3D图像合成方法的流程图;
图3是图1中步骤S101的流程图;
图4是根据一示例性实施例示出的另一种场景示意图;
图5是根据一示例性实施例示出的又一种场景示意图;
图6是图1中步骤S102的流程图;
图7是根据一示例性实施例示出的另一种3D图像合成方法的流程图;
图8是根据一示例性实施例示出的一种3D图像合成装置的结构示意图;
图9是图8中轨迹检测模块的结构示意图;
图10是图8中图像获取模块的结构示意图;
图11是根据一示例性实施例示出的另一种3D图像合成装置的结构示意图;
图12是根据一示例性实施例示出的一种用于终端的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
3D立体图(也称3D图像)是利用人们两眼视觉差别和光学折射原理在一个平面内使人们可直接看到一幅三维立体图,画中事物既可以凸出于画面之外,也可以深藏其中。
如图1所示,图中包括:拍摄终端1和被拍摄物体2,其中,拍摄终端1可以为常见的相机、摄像机、摄影机等设备。从图1中可以看到人体的左右眼观察被拍摄物体2时,左右眼的观看角度相对被拍摄物体2而言是不同的,这样人用双眼在观看时就会看到被拍摄物体2的立体图像。为了利用拍摄终端1实现同样效果,拍摄终端1将需要在A、B两个位置采用与人眼类似的角度对被拍摄物体2分别进行拍摄,然后A、B两个位置上拍摄得到的两张图像进行3D合成,就可以被拍摄物体2的3D图像,进而人眼在观看被拍摄物体2的3D图像时,就能感觉到立体变化。
图2是根据一示例性实施例示出的一种3D图像合成方法的流程图。在本公开实施例中,该3D图像合成处理方法可以应用于拍摄终端中,例如:相机、摄像机或摄影机。如图2所示,该方法可以包括以下步骤。
在步骤S101中,检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件。
参见上述关于图1中描述,可知只有当拍摄终端1在被拍摄物体2的不同角度拍摄时,拍摄得到的图像才可以合成3D图像,所以在该步骤中,需要对拍摄终端的运动轨迹进行检测,以便通过终端的轨迹来判断是否具有3D合成的基础。
在本公开实施例中,可以通过判断拍摄终端是否在一个平面内运动,以及判断拍摄终端是否平稳移动,以及,是否缓慢转动来判断拍摄终端是否满足预设条件。
当拍摄终端运动的轨迹满足预设条件时,在步骤S102中,获取拍摄终端在运动过程拍摄到的至少两张图像。否则,结束流程。
当拍摄终端在一个平面内运动,并且移动平稳且转动缓慢,那么此时拍摄终端如果为相机,获取到的至少两张图像就可以为相机所拍照得到的照片,而此时拍摄终端如果为摄影机,那么获取到的至少两张图像还可以为摄影机拍摄到的视频中的帧图像。
在步骤S103中,利用至少两张图像生成目标景物的3D图像。
3D合成技术是本领域技术人员所公知的技术,一旦获取到至少两张图像以及每张图像的拍摄角度,那么就可以利用图像进行3D合成,在此不再赘述。
本公开实施例提供的该方法,可以通过检测拍摄终端的轨迹,当拍摄终端的轨迹满足预设条件时,可以获取拍摄终端在运动过程中拍摄到的至少两张图像,并且利用这至少两张图像生成目标景物的3D图像。
由于该方法可以根据在拍摄终端拍摄目标景物时满足一定的条件即可自动生成目标景物的3D图像,所以与现有的3D图像合成中的图像获取方式不同的是,该方法无需用户根据经验在在目标景物周围选择不同的拍摄地点,减少用户在选择拍摄地点的尝试次数,以及,可以避免在拍摄地点拍照得到的图像在后期无法合成3D图像的问题,使得3D图像合成的操作步骤少,且可自动执行,同时还可以提高3D图像合成的成功率。
在本公开一实施例中,如图3所示,该步骤S101可以包括以下步骤:
在步骤S1011中,检测拍摄终端是否在预设平面上运动。
参见图1,人的双眼在观察物体时,左眼、右眼和被被拍摄物体是位于同一平面,所以为了制造3D合成的素材,需要判断拍摄终端是否在预设平面上运动,只有在拍摄终端在预设平面上运动时拍摄到的图像才符合3D合成的要求。
在该步骤中,可以通过设置在拍摄终端内部或者设置在拍摄终端的安装支架上的陀螺仪来进行检测,以三轴陀螺仪为例,可以分别为x、y和z三个轴,在一种场景下,如果x轴和y轴能够检测到变化,并且z轴检测不到变化,那么就可以确定拍摄终端在水平面运动,例如:在图4中,3为四棱锥,并且四棱锥3的底面水平放置,如图4所示,为俯视图,可见,拍摄终端1在水平面上围绕四棱锥3转动。同理,在其它可以通过x、y和z轴上检测的变化来判断拍摄终端是否位于垂直平面、斜面等等。例如:在图5中,被拍摄无图3仍旧采用四棱锥,并且四棱锥的底面水平放置,如图5所示,为正视图,可见,拍摄终端1在竖直平面上围绕四棱锥3转动。
在本公开具体实施例中,检测拍摄终端是否在预设屏幕,其目的是为了保证拍摄终端的拍摄镜头的轴线位于该预设平面内,这样拍摄终端在该预设平面内两个不同位置拍摄时,才有可能形成与人眼观察相同的效果。
当拍摄终端在预设平面上运动时,在步骤S1012中,判断拍摄终端的移动速度是否位于预设移动速度阈值内。
对于3D合成而言,要求用于合成的图像的清晰度能够满足要求,所以,对于拍摄终端而言,就要求拍摄终端在拍摄时移动的速度不能够过快,否则,拍摄到的图像像素较低,无法满足3D合成要求。
在该步骤中,拍摄终端的移动速度是指拍摄终端在预设平面内移动的速度,在具体应用中,当拍摄终端为摄影机时,移动速度可以用摄影机所安装的云台或底座的移动速度来代替。
当拍摄终端的移动速度位于预设移动速度阈值内时,在步骤S1013中,判断拍摄终端的转动速度是否位于预设转动速度阈值内。
在3D合成时,除了上述预设平面以及移动速度的要求外,还有一个很重要的因素就是用来进行3D合成的图像的拍摄角度,只有拍摄角度符合人眼双眼视线的角度时,合成的图像才具有3D效果,所以在该步骤需要对拍摄终端在拍摄时转动的角度有一定要求。
参见上述步骤S1011中的描述,当拍摄终端的镜头的轴线位于预设平面上时,在该步骤中,拍摄终端的转动速度是指拍摄终端以预设平面上一个点为轴进行转动的速度,也就是拍摄终端的角速度。
当拍摄终端的转动速度位于预设转动速度阈值内,在步骤S1014中,确定拍摄终端运动的轨迹满足预设条件。
本公开实施例提供的该方法,只有在拍摄终端在预设平面上运动,而且在预设平面上移动的速度以及转动的速度都满足设定阈值时,才确定拍摄终端当前运动的轨迹满足3D合成的条件。由于只有拍摄终端以某个物体作为焦点或圆心,并且围绕其转动时,拍摄终端拍摄到的图像才可以进行3D图像合成,所以该方法还可以提高3D图像合成的成功率,避免对拍摄终端所拍摄的任意图像进行3D图像合成而出现的合成失败的问题。
如果拍摄终端1在预设平面内运动时,按照相同的速度进行移动,并且按照相同的角度进行转动,那么就可以获取拍摄终端在运动过程中的任意两张图像作为3D合成的素材。以拍摄终端拍摄到的图像为视频为例,如图6所示,该步骤S102可以包括以下步骤。
在步骤S1021中,获取拍摄终端运动时拍摄得到的视频。
在步骤S1022中,提取所述视频中的帧图像。
在提取帧图像时,可以提取不相邻的至少两帧图像,这样可以了保证这两帧图像对应的拍摄角度是有差值的,以方便后续进行3D图像合成。
在步骤S1023中,对所述提取到的帧图像的图像内容进行图像识别,得到识别结果。
在步骤S1024中,根据所述识别结果,查找所述提取到帧图像中焦点相同且拍摄角度不同的至少两帧图像。
本公开实施例提供的该方法可以利用拍摄到的视频中的至少两帧图像作为3D图像合成的素材,并且由于摄影机在拍摄视频时在一个平面内平稳移动且缓慢转动,所以拍摄到的视频中每一帧的图像中目标景物的拍摄角度都是不同的,所以可以轻松根据视频中的至少两帧图像进行3D图像合成。
在实际应用中,在3D图像合成时,对图像拍摄方式也有一定的要求,,一般情况下,3D图像合成效果较好的是特写景别、近景景别以及后中景景别,而对于全景景别以及远景景别则效果不明显。
所以,为了保证3D图像合成的效果,在本公开实施例中,如图7所示,该方法还可以包括以下步骤。
在步骤S201中,检测拍摄终端在运动过程中拍摄的景别。
在步骤S202中,判断景别是否为预设景别。
预设景别包括特写景别、近景景别或中景景别。
当景别为预设景别时,执行上述步骤S101,否则,结束流程。
在本公开实施例中,景别是指由于摄影机与被摄体的距离不同,而造成被摄体在摄影机寻像器中所呈现出的范围大小的区别。景别的划分,一般可分为五种,由近至远分别为特写景别(拍摄图像为人体肩部以上的图像)、近景景别(拍摄图像为人体胸部以上的图像)、中景景别(拍摄图像为人体膝部以上的图像)、全景(拍摄图像为人体的全部和周围背景的图像)、远景(拍摄图像为被摄体所处环境的图像)。
本公开实施例提供的该方法,由于设定了只有一些特殊景别,才会启动3D图像合成步骤,并且这些特殊景别分别为特写景别、近景景别或中景景别,所以可以提高3D图像合成的成功率,避免采用其它景别进行3D图像合成时出现失败的情况。
图8是根据一示例性实施例示出的一种3D图像合成装置的结构示意图。在本公开实施例中,该3D图像合成处理装置可以应用于拍摄终端中,例如:相机、摄像机或摄影机,也可以应用于与拍摄终端相连接的3D图像合成设备中。如图8所示,该装置可以包括:轨迹检测模块11、图像获取模块12和图像生成单元13。
轨迹检测模块11被配置为检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件。
图像获取模块12被配置为当拍摄终端运动的轨迹满足预设条件时,获取拍摄终端在运动过程拍摄到的至少两张图像。
图像生成单元13被配置为利用至少两张图像生成目标景物的3D图像。
本公开实施例提供的该装置,可以通过检测拍摄终端的轨迹,当拍摄终端的轨迹满足预设条件时,可以获取拍摄终端在运动过程中拍摄到的至少两张图像,并且利用这至少两张图像生成目标景物的3D图像。
由于该装置可以根据在拍摄终端拍摄目标景物时满足一定的条件即可自动生成目标景物的3D图像,与现有的3D图像合成中的图像获取方式不同的是,该装置无需用户根据经验在在目标景物周围选择不同的拍摄地点,减少用户在选择拍摄地点的尝试次数,以及,可以避免在拍摄地点拍照得到的图像在后期无法合成3D图像的问题,使得3D图像合成的操作步骤少,且可自动执行,同时还可以提高3D图像合成的成功率。
在本公开一实施例中,如图9所示,图8中所示的轨迹检测模块11可以包括:平面运动检测单元111、移动速度判断单元112、转动速度判断单元113和轨迹确定单元114。
平面运动检测单元111被配置为检测拍摄终端是否在预设平面上运动。
移动速度判断单元112被配置为当拍摄终端在预设平面上运动时,判断拍摄终端的移动速度是否位于预设移动速度阈值内。
转动速度判断单元113被配置为当拍摄终端的移动速度位于预设移动速度阈值内时,判断拍摄终端的转动速度是否位于预设转动速度阈值内。
轨迹确定单元114被配置为当拍摄终端的转动速度位于预设转动速度阈值内,确定拍摄终端运动的轨迹满足预设条件。
在本公开一实施例中,如图10所示,图8中所示的图像获取模块12可以包括:视频获取单元121、图像提取单元122、图像识别单元123和图像查找单元124。
视频获取单元121被配置为获取拍摄终端运动时拍摄得到的视频。
图像提取单元122被配置为提取所述视频中的帧图像。
图像识别单元123被配置为对所述提取到的帧图像的图像内容进行图像识别,得到识别结果。
图像查找单元124被配置为根据所述识别结果,查找所述提取到帧图像中焦点相同且拍摄角度不同的至少两帧图像。
在本公开一实施例中,如图11所示,图8中所示装置还可以包括:景别检测模块14和景别判断模块15。
景别检测模块14被配置为检测拍摄终端在运动过程中拍摄的景别。
景别判断模块15被配置为判断景别是否为预设景别。
当景别为预设景别时,轨迹检测模块11还用于检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开还公开了一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得终端能够执行一种3D图像合成方法,所述方法包括:
检测拍摄终端运动在拍摄目标景物时的轨迹是否满足预设条件;
当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;
利用所述至少两张图像生成所述目标景物的3D图像。
图12是根据一示例性实施例示出的一种用于终端的框图。例如,该终端1200可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理,照相机,摄像机,摄影机等。
参照图12,终端1200可以包括以下一个或多个组件:处理组件1202,存储器1204,电源组件1206,多媒体组件1208,音频组件1210,输入/输出(I/O)的接口1212,传感器组件1214,以及通信组件1216。
处理组件1202通常控制终端1200的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件1202可以包括一个或多个处理器1220来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件1202可以包括一个或多个模块,便于处理组件1202和其他组件之间的交互。例如,处理组件1202可以包括多媒体模块,以方便多媒体组件1208和处理组件1202之间的交互。
存储器1204被配置为存储各种类型的数据以支持在设备1200的操作。这些数据的示例包括用于在终端1200上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器1204可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件1206为终端1200的各种组件提供电力。电源组件1206可以包括电源管理系统,一个或多个电源,及其他与为终端1200生成、管理和分配电力相关联的组件。
多媒体组件1208包括在所述终端1200和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件1208包括一个前置摄像头和/或后置摄像头。当终端1200处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1210被配置为输出和/或输入音频信号。例如,音频组件1210包括一个麦克风(MIC),当终端1200处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1204或经由通信组件1216发送。在一些实施例中,音频组件1210还包括一个扬声器,用于输出音频信号。
I/O接口1212为处理组件1202和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1214包括一个或多个传感器,用于为终端1200提供各个方面的状态评估。例如,传感器组件1214可以检测到设备1200的打开/关闭状态,组件的相对定位,例如所述组件为终端1200的显示器和小键盘,传感器组件1214还可以检测终端1200或终端1200一个组件的位置改变,用户与终端1200接触的存在或不存在,终端1200方位或加速/减速和终端1200的温度变化。传感器组件1214可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1214还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件1214还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件1216被配置为便于终端1200和其他设备之间有线或无线方式的通信。终端1200可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件1216经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件1216还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,终端1200可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行终端侧的上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器1204,上述指令可由终端1200的处理器1220执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由所附的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (11)

1.一种3D图像合成方法,其特征在于,包括:
检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件;
当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;
利用所述至少两张图像生成所述目标景物的3D图像。
2.根据权利要求1所述的3D图像合成方法,其特征在于,还包括:
检测所述拍摄终端在运动过程中拍摄的景别;
判断所述景别是否为预设景别;
当所述景别为预设景别时,执行所述检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件的步骤。
3.根据权利要求2所述的3D图像合成方法,其特征在于,所述预设景别包括特写景别、近景景别或中景景别。
4.根据权利要求1所述的3D图像合成方法,其特征在于,所述检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件包括:
检测所述拍摄终端是否在预设平面上运动;
当所述拍摄终端在预设平面上运动时,判断所述拍摄终端的移动速度是否位于预设移动速度阈值内;
当所述拍摄终端的移动速度位于所述预设移动速度阈值内时,判断所述拍摄终端的转动速度是否位于预设转动速度阈值内;
当所述拍摄终端的转动速度位于预设转动速度阈值内,确定所述拍摄终端运动的轨迹满足预设条件。
5.根据权利要求1所述的3D图像合成方法,其特征在于,所述获取所述拍摄终端在运动过程拍摄到的至少两张图像包括:
获取拍摄终端运动时拍摄得到的视频;
提取所述视频中的帧图像;
对所述提取到的帧图像的图像内容进行图像识别,得到识别结果;
根据所述识别结果,查找所述提取到帧图像中焦点相同且拍摄角度不同的至少两帧图像。
6.一种3D图像合成装置,其特征在于,包括:
轨迹检测模块,用于检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件;
图像获取模块,用于当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;
图像生成单元,用于利用所述至少两张图像生成所述所述目标景物的3D图像。
7.根据权利要求6所述的3D图像合成装置,其特征在于,还包括:
景别检测模块,用于检测所述拍摄终端在运动过程中拍摄的景别;
景别判断模块,用于判断所述景别是否为预设景别;
所述轨迹检测模块还用于当所述景别为预设景别时检测拍摄终端在拍摄目标景物时运动的轨迹是否满足预设条件。
8.根据权利要求7所述的3D图像合成装置,其特征在于,所述预设景别包括特写景别、近景景别或中景景别。
9.根据权利要求6所述的3D图像合成装置,其特征在于,所述轨迹检测模块包括:
平面运动检测单元,用于检测所述拍摄终端是否在预设平面上运动;
移动速度判断单元,用于当所述拍摄终端在预设平面上运动时,判断所述拍摄终端的移动速度是否位于预设移动速度阈值内;
转动速度判断单元,用于当所述拍摄终端的移动速度位于所述预设移动速度阈值内时,判断所述拍摄终端的转动速度是否位于预设转动速度阈值内;
轨迹确定单元,用于当所述拍摄终端的转动速度位于预设转动速度阈值内,确定所述拍摄终端运动的轨迹满足预设条件。
10.根据权利要求8所述的3D图像合成装置,其特征在于,所述图像获取模块包括:
视频获取单元,用于获取拍摄终端运动时拍摄得到的视频;
图像提取单元,用于提取所述视频中的帧图像;
图像识别单元,用于对所述提取到的帧图像的图像内容进行图像识别,得到识别结果;
图像查找单元,用于根据所述识别结果,查找所述提取到帧图像中焦点相同且拍摄角度不同的至少两帧图像。
11.一种终端,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
检测拍摄终端运动在拍摄目标景物时的轨迹是否满足预设条件;
当所述拍摄终端运动的轨迹满足预设条件时,获取所述拍摄终端在运动过程拍摄到的至少两张图像;
利用所述至少两张图像生成所述目标景物的3D图像。
CN201510556372.7A 2015-09-02 2015-09-02 3d图像合成方法及装置 Active CN105141942B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510556372.7A CN105141942B (zh) 2015-09-02 2015-09-02 3d图像合成方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510556372.7A CN105141942B (zh) 2015-09-02 2015-09-02 3d图像合成方法及装置

Publications (2)

Publication Number Publication Date
CN105141942A true CN105141942A (zh) 2015-12-09
CN105141942B CN105141942B (zh) 2017-10-27

Family

ID=54727137

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510556372.7A Active CN105141942B (zh) 2015-09-02 2015-09-02 3d图像合成方法及装置

Country Status (1)

Country Link
CN (1) CN105141942B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107025666A (zh) * 2017-03-09 2017-08-08 广东欧珀移动通信有限公司 基于单摄像头的深度检测方法及装置和电子装置
CN107437076A (zh) * 2017-08-02 2017-12-05 陈雷 基于视频分析的景别划分的方法及系统
CN108205664A (zh) * 2018-01-09 2018-06-26 美的集团股份有限公司 一种食物识别方法及装置、存储介质、计算机设备
CN109508668A (zh) * 2018-11-09 2019-03-22 北京奇艺世纪科技有限公司 一种镜头类型信息识别方法及装置
CN109816704A (zh) * 2019-01-28 2019-05-28 北京百度网讯科技有限公司 物体的三维信息获取方法和装置
CN110192226A (zh) * 2017-03-09 2019-08-30 Oppo广东移动通信有限公司 基于深度的图像处理方法、处理装置和电子装置
CN112071100A (zh) * 2020-09-21 2020-12-11 安徽省萧县黄河故道园艺场 一种交通信号防遮挡多功能装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111770273B (zh) * 2020-06-29 2021-12-07 维沃移动通信有限公司 图像的拍摄方法和装置、电子设备及可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100316282A1 (en) * 2009-06-16 2010-12-16 Hope Clinton B Derivation of 3D information from single camera and movement sensors
CN103047969A (zh) * 2012-12-07 2013-04-17 北京百度网讯科技有限公司 通过移动终端生成三维图像的方法及移动终端
CN103905806A (zh) * 2012-12-26 2014-07-02 三星电子(中国)研发中心 利用单摄像头实现3d拍摄的系统和方法
CN104205828A (zh) * 2012-02-06 2014-12-10 谷歌公司 用于自动3d图像创建的方法和系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100316282A1 (en) * 2009-06-16 2010-12-16 Hope Clinton B Derivation of 3D information from single camera and movement sensors
CN104205828A (zh) * 2012-02-06 2014-12-10 谷歌公司 用于自动3d图像创建的方法和系统
CN103047969A (zh) * 2012-12-07 2013-04-17 北京百度网讯科技有限公司 通过移动终端生成三维图像的方法及移动终端
CN103905806A (zh) * 2012-12-26 2014-07-02 三星电子(中国)研发中心 利用单摄像头实现3d拍摄的系统和方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107025666A (zh) * 2017-03-09 2017-08-08 广东欧珀移动通信有限公司 基于单摄像头的深度检测方法及装置和电子装置
CN110192226A (zh) * 2017-03-09 2019-08-30 Oppo广东移动通信有限公司 基于深度的图像处理方法、处理装置和电子装置
CN107437076A (zh) * 2017-08-02 2017-12-05 陈雷 基于视频分析的景别划分的方法及系统
CN107437076B (zh) * 2017-08-02 2019-08-20 逄泽沐风 基于视频分析的景别划分的方法及系统
CN108205664A (zh) * 2018-01-09 2018-06-26 美的集团股份有限公司 一种食物识别方法及装置、存储介质、计算机设备
WO2019137186A1 (zh) * 2018-01-09 2019-07-18 美的集团股份有限公司 一种食物识别方法及装置、存储介质、计算机设备
CN109508668A (zh) * 2018-11-09 2019-03-22 北京奇艺世纪科技有限公司 一种镜头类型信息识别方法及装置
CN109816704A (zh) * 2019-01-28 2019-05-28 北京百度网讯科技有限公司 物体的三维信息获取方法和装置
US11288492B2 (en) 2019-01-28 2022-03-29 Beijing Baidu Netcom Science And Technology Co., Ltd. Method and device for acquiring 3D information of object
CN112071100A (zh) * 2020-09-21 2020-12-11 安徽省萧县黄河故道园艺场 一种交通信号防遮挡多功能装置

Also Published As

Publication number Publication date
CN105141942B (zh) 2017-10-27

Similar Documents

Publication Publication Date Title
CN105141942A (zh) 3d图像合成方法及装置
KR101751347B1 (ko) 이동 단말기 및 이의 제어방법
US9332208B2 (en) Imaging apparatus having a projector with automatic photography activation based on superimposition
JP5659304B2 (ja) 画像生成装置および画像生成方法
JP5659305B2 (ja) 画像生成装置および画像生成方法
JP5769813B2 (ja) 画像生成装置および画像生成方法
JP5865388B2 (ja) 画像生成装置および画像生成方法
CN106165430A (zh) 视频直播方法及装置
KR102240639B1 (ko) 글래스 타입 단말기 및 그것의 제어 방법
KR20170011190A (ko) 이동 단말기 및 그것의 제어방법
KR20190008610A (ko) 이동 단말기 및 그 제어 방법
CN104243819A (zh) 照片获取方法及装置
KR20170131101A (ko) 이동 단말기 및 그 제어방법
KR20180040409A (ko) 이동 단말기 및 그 제어방법
KR20180010042A (ko) 이동 단말기 및 그 제어방법
CN104869314A (zh) 拍照方法及装置
KR102223281B1 (ko) 이동단말기 및 그 제어방법
CN104038694A (zh) 显示全景图像的方法和装置
CN111586296B (zh) 图像拍摄方法、图像拍摄装置及存储介质
CN110661979B (zh) 摄像方法、装置、终端及存储介质
CN109218709B (zh) 全息内容的调整方法及装置和计算机可读存储介质
CN106954093A (zh) 全景视频处理方法、装置及系统
CN104284093A (zh) 全景拍摄方法及装置
KR20150030082A (ko) 이동 단말기 및 그 제어방법
KR102557592B1 (ko) 이미지 표시 방법 및 장치, 전자 기기, 컴퓨터 판독 가능 저장 매체

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant