CN106254853A - 球景图像生成方法及装置 - Google Patents

球景图像生成方法及装置 Download PDF

Info

Publication number
CN106254853A
CN106254853A CN201610624656.XA CN201610624656A CN106254853A CN 106254853 A CN106254853 A CN 106254853A CN 201610624656 A CN201610624656 A CN 201610624656A CN 106254853 A CN106254853 A CN 106254853A
Authority
CN
China
Prior art keywords
image
ball
scape
angle
photographic head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610624656.XA
Other languages
English (en)
Inventor
何富多
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LeTV Holding Beijing Co Ltd
LeTV Mobile Intelligent Information Technology Beijing Co Ltd
Original Assignee
LeTV Holding Beijing Co Ltd
LeTV Mobile Intelligent Information Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LeTV Holding Beijing Co Ltd, LeTV Mobile Intelligent Information Technology Beijing Co Ltd filed Critical LeTV Holding Beijing Co Ltd
Priority to CN201610624656.XA priority Critical patent/CN106254853A/zh
Publication of CN106254853A publication Critical patent/CN106254853A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/282Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例公开了一种球景图像生成方法及装置,涉及图像技术领域,所述方法包括:采用摄像设备在至少两个预设位置处各拍摄至少一幅图像;根据所有预设位置处的至少一幅图像生成球景图像。本发明实施例通过在至少两个预设位置处各拍摄至少一幅图像,根据所有预设位置处的至少一幅图像生成球景图像,由于采用了多个拍摄位置,拍摄到的图像比较全部的反应了场景信息,因此得到的球景图像能够真实反应实景。

Description

球景图像生成方法及装置
技术领域
本发明实施例涉及图像技术领域,尤其涉及一种球景图像生成方法及装置。
背景技术
随着智能手机的发展,手机的相机模块成为了手机中非常重要的模块,功能也越来越丰富,成为了各大手机厂商竞争的特征之一。早在2011年HTC就已经推出一款搭载双摄像头的嵌入安卓操作系统的智能手机,
近几年关于平行双摄像头在手机上的应用也逐渐增多,例如华为发布的P9版本、V8版本的智能手机等,但是在实现本发明的过程中,发明人发现:其功能比较局限,如,局限于通过拍摄一幅带有景深信息的图像。
发明内容
本发明提供一种球景图像生成方法及装置,能够得到真实反应实景的球景图像。
第一方面,本发明实施例提供了一种球景图像生成方法,包括:
采用摄像设备在至少两个预设位置处各拍摄至少一幅图像;
根据所有预设位置处的至少一幅图像生成球景图像。
进一步的,采用摄像设备在至少两个预设位置处各拍摄至少一幅图像包括:
采用多目摄像设备的多个摄像头分别在至少两个预设位置处各拍摄至少一幅图像;
根据所有预设位置处的至少一幅图像生成球景图像包括:
根据所有摄像头拍摄的图像生成球景图像。
进一步的,采用摄像设备在至少两个预设位置处各拍摄至少一幅图像包括:
通过所述多目摄像设备中的重力传感器和地磁传感器计算得到所述多目摄像设备的摄影平面与水平面的第一夹角;
固定所述第一夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;
在所述第一夹角的基础上增加和/或减少第一预设角度得到第二夹角;
固定所述第二夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;
确定所述第二夹角是否为预设角度,若是,则结束拍摄;
若否,则在所述第二夹角的基础上增加和/或减少第二预设角度得到第三夹角,重复执行拍摄和角度判断步骤,直到摄影平面与水平方向成预设角度结束拍摄。
进一步的,根据所有预设位置处的至少一幅图像生成球景图像包括:
计算得到每张图像中各像素点的景深信息;
根据所述景深信息和所述图像对应的固定夹角生成球景图像。
进一步的,根据所述景深信息和所述图像对应的固定夹角生成球景图像包括:
根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分;
根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像,重复上述合并过程直到将所有的图像合并成一幅球景图像。
进一步的,根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像包括:
根据所述景深信息获取所述图像像素点的像素梯度特征,根据所述像素梯度特征将相邻图像合成一幅图像。
进一步的,根据所有预设位置处的至少一幅图像生成球景图像包括:
根据所述黑白摄像头拍摄得到的图像确定所述彩色摄像头拍摄得到的图像中各像素点的景深信息,其中,所述摄像设备为双目摄像设备,包含一个彩色摄像头和一个黑白摄像头;
根据所述景深信息和所述图像对应的固定夹角生成球景图像。
进一步的,根据所有预设位置处的至少一幅图像生成球景图像包括:
分别对左摄像头拍摄到的图像和右摄像头拍摄到的图像进行合成,得到两幅球景图像,其中,所述摄像设备为双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。
进一步的,所述方法还包括:
将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。
进一步的,所述图像为全景图像。
第二方面,本发明实施例还提供了一种球景图像生成装置,包括:
图像拍摄模块,用于采用摄像设备在至少两个预设位置处各拍摄至少一幅图像;
球景图像生成模块,用于根据所有预设位置处的至少一幅图像生成球景图像。
进一步的,所述位置确定模块具体用于,将所述室内图像的特征与预先构造的室内地图中的特征进行匹配,根据匹配结果确定所述VR用户在所述室内的当前位置和周围信息。
进一步的,所述图像拍摄模块具体用于,采用多目摄像设备的多个摄像头分别在至少两个预设位置处各拍摄至少一幅图像;
所述球景图像生成模块具体用于,根据所有摄像头拍摄的图像生成球景图像。
进一步的,所述图像拍摄模块具体用于,通过所述多目摄像设备中的重力传感器和地磁传感器计算得到所述多目摄像设备的摄影平面与水平面的第一夹角;固定所述第一夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;在所述第一夹角的基础上增加和/或减少第一预设角度得到第二夹角;固定所述第二夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;确定所述第二夹角是否为预设角度,若是,则结束拍摄;若否,则在所述第二夹角的基础上增加和/或减少第二预设角度得到第三夹角,重复执行拍摄和角度判断步骤,直到摄影平面与水平方向成预设角度结束拍摄。
进一步的,所述球景图像生成模块包括:
景深信息计算单元,用于计算得到每张图像中各像素点的景深信息;
球景图像生成单元,用于根据所述景深信息和所述图像对应的固定夹角生成球景图像。
进一步的,所述球景图像生成单元包括:
重叠去除子单元,用于根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分;
球景图像生成子单元,用于根据所述重叠部分的图像像素的景深信息将相邻图像合成一幅图像,重复上述合并过程直到将所有的图像合并成一幅球景图像。
进一步的,所述球景图像生成模块具体用于,根据所述黑白摄像头拍摄得到的图像确定所述彩色摄像头拍摄得到的图像中各像素点的景深信息,其中,所述多目摄像设备为双目摄像设备,包含一个彩色摄像头和一个黑白摄像头;根据所述景深信息和所述图像对应的固定夹角生成球景图像。
进一步的,所述球景图像生成模块具体用于,分别对左摄像头拍摄到的图像和右摄像头拍摄到的图像进行合成,得到两幅球景图像,其中,所述摄像设备为双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。
进一步的,所述装置还包括:
球景图像发送模块,用于将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。
进一步的,所述图像为全景图像。
本发明实施例通过在至少两个预设位置处各拍摄至少一幅图像,根据所有预设位置处的至少一幅图像生成球景图像,由于采用了多个拍摄位置,拍摄到的图像比较全部的反应了场景信息,因此得到的球景图像能够真实反应实景。
附图说明
图1A是本发明实施例一中的一种球景图像生成方法的流程图;
图1B是本发明实施例一中的一种球景图像生成方法中的景深信息示意图;
图2是本发明实施例二中的一种球景图像生成方法的流程图;
图3是本发明实施例三中的一种球景图像生成方法的流程图;
图4是本发明实施例四中的一种球景图像生成方法的流程图;
图5是本发明实施例五中的一种球景图像生成装置的结构图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种球景图像生成方法的流程图,本实施例可适用于拍摄球景图像的情况,该方法可以由本发明实施例提供的球景图像生成装置来执行,该装置可采用软件或硬件的方式实现,该球景图像生成装置可集成于移动终端(例如,手机、智能手机等移动终端、平板电脑)、摄像设备(例如,普通相机、智能相机、单反相机)或VR设备中,如图1所示,具体包括:
S101、采用摄像设备在至少两个预设位置处各拍摄至少一幅图像。
其中,为了获得图像的更多深度信息,所述摄像设备可选为多目摄像设备,例如多目移动终端,包括但不限于多目手机。其中,多目摄像设备可选为两目摄像设备。
所述图像可选为全景图像,由于全景图像通过广角的表现手段表现出尽可能多的周围环境,能够全面的展示了360度球型范围内的所有景致,并且全景图像展现的是实景,即为真实的场景,因此使用其合成的球景图像,能够最大限度的保留场景的真实性,能给人以三维立体的空间感觉,使观者犹如身在其中。
所述至少两个预设位置可以由用户在摄像设备处设置,可操纵从任意一个角度拍摄场景,从而得到至少两个预设位置处的拍摄图像。
具体的,用户可在摄像设备上预设一个初始拍摄位置,其余拍摄位置可由摄像设备根据所述初始位置自动调整。例如,所述摄像设备在初始拍摄位置处完成拍摄图像之后,则自动调整到下一位置处再次进行拍摄,直到得到足够拍摄位置处的图像,或者直到摄像头旋转到指定角度完成拍摄。
或者,用户在摄像设备上预设所有的拍摄位置,由摄像设备根据用户设定的拍摄位置自动完成拍摄。例如,所述摄像设备按照用户设定的位置逐一进行拍摄,直到完成所有设定位置处的图像拍摄。
S102、根据所有预设位置处的至少一幅图像生成球景图像。
将所有预设位置处的图像合成一幅球景图像,能给人以三维立体的空间感觉,使观者犹如身在其中。尤其是在拍摄位置足够多的情况下,还可得到的360的球景图像,能给用户带来全方位的、最真实的感受。
本实施例通过在至少两个预设位置处各拍摄至少一幅图像,根据所有预设位置处的至少一幅图像生成球景图像,由于采用了多个拍摄位置,拍摄到的图像比较全部的反应了场景信息,因此得到的球景图像能够真实反应实景。
在上述实施例的基础上,采用摄像设备在至少两个预设位置处各拍摄至少一幅图像,可包括:
采用多目摄像设备的多个摄像头分别在至少两个预设位置处各拍摄至少一幅图像;
根据所有预设位置处的至少一幅图像生成球景图像,可包括:
根据所有摄像头拍摄的图像生成球景图像。
具体的,在使用多目摄像设备进行拍摄时,在每个拍摄位置处,可获得所述多目摄像设备中包含的多个摄像头的图像,这样使得每个拍摄位置都会对应更多摄像头的拍摄图像,从而得到更多的图像,也就更为全面的反应了场景信息。
在上述实施例的基础上,采用摄像设备在至少两个预设位置处各拍摄至少一幅图像,可包括:
通过所述多目摄像设备中的重力传感器和地磁传感器计算得到所述多目摄像设备的摄影平面与水平面的第一夹角;
固定所述第一夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;
在所述第一夹角的基础上增加和/或减少第一预设角度得到第二夹角;
固定所述第二夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;
确定所述第二夹角是否为预设角度,若是,则结束拍摄;
若否,则在所述第二夹角的基础上增加和/或减少第二预设角度得到第三夹角,重复执行拍摄和角度判断步骤,直到摄影平面与水平方向成预设角度结束拍摄。
其中,所述第一预设角度和所述第二预设角度可为相同的角度,也可为不同的角度。
在上述实施例的基础上,根据所有预设位置处的至少一幅图像生成球景图像,可包括:
计算得到每张图像中各像素点的景深信息;
根据所述景深信息和所述图像对应的固定夹角生成球景图像。
其中,所述景深信息包括但不限于以下至少一种:景深、前景深和后景深。如图1B所示,所述景深为分别位于焦点前后的两个弥散圆之间的距离,即,在被摄主体(对焦点)前后,其影像仍然有一段清晰范围的,就是景深信息。如图1B所示,从焦点到近处容许弥散圆的距离叫前景深,从焦点到远方容许弥散圆的距离叫后景深。
具体的,可根据如下公式分别计算得到景深、前景深和后景深:
Δ L 1 = FδL 2 f 2 + F δ L
Δ L 2 = FδL 2 f 2 - F δ L
Δ L = Δ L 1 + Δ L 2 = 2 f 2 FδL 2 f 4 - F 2 δ 2 L 2
其中,δ为容许弥散圆直径、f为镜头焦距、F为镜头的拍摄光圈值、L为对焦距离、ΔL1为前景深、ΔL2为后景深、ΔL为景深。
在上述实施例的基础上,根据所述景深信息和所述图像对应的固定夹角生成球景图像包括:
根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分;
根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像,重复上述合并过程直到将所有的图像合并成一幅球景图像。
具体的,可根据上述计算得到的景深、前景深和后景深得到近景和远景在图像中的相对位置,进而根据相对位置将所述近景和远景描绘在球景图像中。
在上述实施例的基础上,根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像包括:
根据所述景深信息获取所述图像像素点的像素梯度特征,根据所述像素梯度特征将相邻图像合成一幅图像。
其中,所述像素梯度特征包含像素梯度幅值和像素梯度方向。具体的,通过下述公式可计算得到重叠部分的像素点的像素梯度特征:
Gx(x,y)=H(x+1,y)-H(x-1,y)
Gx(x,y)=H(x,y+1)-H(x,y-1)
G ( x , y ) = G x ( x , y ) 2 + G y ( x , y ) 2
alpha(x,y)=tan-1(Gx(x,y)/Gy(x,y))
其中,x、y为所述图像像素点的横坐标和纵坐标,Gx(x,y)为所述图像像素点的水平梯度,Gy(x,y)为所述图像像素点的垂直梯度,H(x,y)为根据所述景深信息获取到的所述图像像素点的灰度值,G(x,y)为所述图像像素点的像素梯度幅值,alpha(x,y)为所述图像像素点的像素梯度方向。在得到所述重叠部分的图像像素点的像素梯度幅值和像素梯度方向之后,两部分相邻的图像之间会有相同或相近的像素梯度幅值和像素梯度方向,根据这些相同或相近的像素梯度幅值和像素梯度方向就可将两幅相邻的图像匹配在一起。
在上述实施例的基础上,根据所有预设位置处的至少一幅图像生成球景图像包括:
根据所述黑白摄像头拍摄得到的图像确定所述彩色摄像头拍摄得到的图像中各像素点的景深信息,其中,所述多目摄像设备为双目摄像设备,包含一个彩色摄像头和一个黑白摄像头;
根据所述景深信息和所述图像对应的固定夹角生成球景图像。
在本实施例中,在使用双目摄像设备进行拍摄的情况下,可使用拍摄的两幅图像计算得到各像素点的景深信息。为减少后续计算复杂度,可选使用包含一个彩色摄像头和一个黑白摄像头的双目摄像设备进行拍摄,可以得到一副彩色图像和一副黑白图像,由于黑白图像中含有的信息量较少,能够降低计算复杂度,减少终端的计算负担,因此所述黑白图像用来辅助计算所述彩色图像的景深信息。
在上述实施例的基础上,根据所有预设位置处的至少一幅图像生成球景图像包括:
分别对左摄像头拍摄到的图像和右摄像头拍摄到的图像进行合成,得到两幅球景图像,其中,所述摄像设备为双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。
在上述实施例的基础上,所述方法还包括:
将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。
随着虚拟现实VR技术的不断进步,将VR技术结合现有的智能终端也是一种趋势,本实施例通过与VR技术结合,相机拍摄、图像处理、图像匹配并结合VR技术,使得用户使用普通的手机就能够查看VR图像。
上述实施例通过在至少两个预设位置处各拍摄至少一幅图像,根据所有预设位置处的至少一幅图像生成球景图像,由于采用了多个拍摄位置,拍摄到的图像比较全部的反应了场景信息,因此得到的球景图像能够真实反应实景。
实施例二
图2为本发明实施例二提供的一种球景图像生成方法的流程图,本实施例在上述实施例的基础上,采用摄像设备在至少两个预设位置处各拍摄至少一幅图像,可选为采用多目摄像设备的多个摄像头分别在至少两个预设位置处各拍摄至少一幅图像;根据所有预设位置处的至少一幅图像生成球景图像,可选为根据所有摄像头拍摄的图像生成球景图像。所述多目摄像设备可选为双目摄像设备。如图2所示,具体包括:
S201、采用双目摄像设备的两个摄像头分别在至少两个预设位置处各拍摄至少一幅图像。
其中,为了拍摄到更多的图像信息,所述两个摄像头可水平设置在同一平面上,或垂直设置在同一平面上。
具体的,在拍摄时首先通过重力传感器和地磁传感器计算得到所述双目摄像设备的摄影平面与水平面的夹角,固定所述夹角采用所述两个摄像头同时进行拍摄,分别得到至少一幅图像;然后变换所述夹角,例如在原有夹角的基础上增加或减少一预设角度,然后在进行拍摄,直到摄影平面与水平面的夹角成90度则停止拍摄。
S202、根据所有摄像头拍摄的图像生成球景图像。
具体的,计算得到每张图像中各像素点的景深信息,根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分,根据计算的景深信息确定图像近景和远景的相对位置,根据所述相对位置生成球景图像。
本实施例通过采用双目摄像设备在至少两个预设位置处各拍摄至少一幅图像,根据所有预设位置处的至少一幅图像生成球景图像,由于采用了多个拍摄位置,拍摄到的图像比较全部的反应了场景信息,因此得到的球景图像能够真实反应实景。
实施例三
图3为本发明实施例三提供的一种球景图像生成方法的流程图,本实施例为一优选实施例。如图3所示,具体包括:
S301、通过所述多目摄像设备中的重力传感器和地磁传感器计算得到多目摄像设备的摄影平面与水平面的夹角,固定所述夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像,变换所述夹角继续拍摄,直到所述摄影平面与水平方向成预设角度结束拍摄。
S302、计算得到每张图像中各像素点的景深信息。
S303、根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分。
S304、根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像,重复上述合并过程直到将所有的图像合并成一幅球景图像。
对于上述各步骤的详细描述具体参见上述实施例的中的相关描述,这里不再赘述。
本实施例通过采用多目摄像设备在多个夹角位置处各拍摄至少一幅图像,根据所有预设位置处的至少一幅图像生成球景图像,由于采用了多个拍摄位置,拍摄到的图像比较全部的反应了场景信息,因此得到的球景图像能够真实反应实景。
实施例四
图4为本发明实施例四提供的一种球景图像生成方法的流程图,本实施例在上述实施例的基础上,所述摄像设备可选为双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。进一步还包括:将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。如图4所示,具体包括:
S401、采用双目摄像设备的左彩色摄像头和右彩色摄像头在至少两个预设位置处各拍摄至少一幅图像。
其中,所述双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。
S402、分别对左摄像头拍摄到的图像和右摄像头拍摄到的图像进行合成,得到两幅球景图像。
S403、将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。
本实施例通过与VR技术结合,相机拍摄、图像处理、图像匹配并结合VR技术,使得用户使用普通的手机就能够查看VR图像。
实施例五
图5所示为本发明实施例五提供的一种球景图像生成装置的结构示意图,该装置可采用软件或硬件的方式实现,该球景图像生成装置可集成于终端(例如,手机、智能手机等移动终端、平板电脑)、摄像设备(例如,普通相机、智能相机、单反相机)或VR设备中,如图5所示,该装置的具体结构如下:图像拍摄模块51和球景图像生成模块52。
所述图像拍摄模块51用于采用摄像设备在至少两个预设位置处各拍摄至少一幅图像;
所述球景图像生成模块52用于根据所有预设位置处的至少一幅图像生成球景图像。
本实施例所述的球景图像生成装置用于执行上述各实施例所述的球景图像生成方法,其技术原理和产生的技术效果类似,这里不再赘述。
在上述实施例的基础上,所述图像拍摄模块51具体用于,采用多目摄像设备的多个摄像头分别在至少两个预设位置处各拍摄至少一幅图像;
所述球景图像生成模块52具体用于,根据所有摄像头拍摄的图像生成球景图像。
在上述实施例的基础上,所述图像拍摄模块51具体用于,通过所述多目摄像设备中的重力传感器和地磁传感器计算得到所述多目摄像设备的摄影平面与水平面的第一夹角;固定所述第一夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;在所述第一夹角的基础上增加和/或减少第一预设角度得到第二夹角;固定所述第二夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;确定所述第二夹角是否为预设角度,若是,则结束拍摄;若否,则在所述第二夹角的基础上增加和/或减少第二预设角度得到第三夹角,重复执行拍摄和角度判断步骤,直到摄影平面与水平方向成预设角度结束拍摄。
在上述实施例的基础上,所述球景图像生成模块52包括:景深信息计算单元521和球景图像生成单元522;
所述景深信息计算单元521用于计算得到每张图像中各像素点的景深信息;
所述球景图像生成单元522用于根据所述景深信息和所述图像对应的固定夹角生成球景图像。
在上述实施例的基础上,所述球景图像生成单元522包括:重叠去除子单元5221和球景图像生成子单元5222;
所述重叠去除子单元5221用于根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分;
所述球景图像生成子单元5222用于根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像,重复上述合并过程直到将所有的图像合并成一幅球景图像。
在上述实施例的基础上,所述球景图像生成子单元5222具体用于,根据所述景深信息获取所述图像像素点的像素梯度特征,根据所述像素梯度特征将相邻图像合成一幅图像。
在上述实施例的基础上,所述球景图像生成模块52具体用于,根据所述黑白摄像头拍摄得到的图像确定所述彩色摄像头拍摄得到的图像中各像素点的景深信息,其中,所述多目摄像设备为双目摄像设备,包含一个彩色摄像头和一个黑白摄像头;根据所述景深信息和所述图像对应的固定夹角生成球景图像。
在上述实施例的基础上,所述球景图像生成模块52具体用于,分别对左摄像头拍摄到的图像和右摄像头拍摄到的图像进行合成,得到两幅球景图像,其中,所述摄像设备为双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。
在上述实施例的基础上,所述装置还包括:球景图像发送模块53;
所述球景图像发送模块53用于将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。
在上述实施例的基础上,所述图像为全景图像。
上述实施例所述的球景图像生成装置用于执行上述各实施例所述的球景图像生成方法,其技术原理和产生的技术效果类似,这里不再赘述。
本发明实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种球景图像生成方法,该方法包括:
采用摄像设备在至少两个预设位置处各拍摄至少一幅图像;
根据所有预设位置处的至少一幅图像生成球景图像。
可选的,该计算机可执行指令在由计算机处理器执行时还可以用于执行本发明任意实施例所提供的球景图像生成方法的技术方案。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (20)

1.一种球景图像生成方法,其特征在于,包括:
采用摄像设备在至少两个预设位置处各拍摄至少一幅图像;
根据所有预设位置处的至少一幅图像生成球景图像。
2.根据权利要求1所述的方法,其特征在于,采用摄像设备在至少两个预设位置处各拍摄至少一幅图像包括:
采用多目摄像设备的多个摄像头分别在至少两个预设位置处各拍摄至少一幅图像;
根据所有预设位置处的至少一幅图像生成球景图像包括:
根据所有摄像头拍摄的图像生成球景图像。
3.根据权利要求2所述的方法,其特征在于,采用摄像设备在至少两个预设位置处各拍摄至少一幅图像包括:
通过所述多目摄像设备中的重力传感器和地磁传感器计算得到所述多目摄像设备的摄影平面与水平面的第一夹角;
固定所述第一夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;
在所述第一夹角的基础上增加和/或减少第一预设角度得到第二夹角;
固定所述第二夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;
确定所述第二夹角是否为预设角度,若是,则结束拍摄;
若否,则在所述第二夹角的基础上增加和/或减少第二预设角度得到第三夹角,重复执行拍摄和角度判断步骤,直到摄影平面与水平方向成预设角度结束拍摄。
4.根据权利要求3所述的方法,其特征在于,根据所有预设位置处的至少一幅图像生成球景图像包括:
计算得到每张图像中各像素点的景深信息;
根据所述景深信息和所述图像对应的固定夹角生成球景图像。
5.根据权利要求4所述的方法,其特征在于,根据所述景深信息和所述图像对应的固定夹角生成球景图像包括:
根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分;
根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像,重复上述合并过程直到将所有的图像合并成一幅球景图像。
6.根据权利要求5所述的方法,其特征在于,根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像包括:
根据所述景深信息获取所述图像像素点的像素梯度特征,根据所述像素梯度特征将相邻图像合成一幅图像。
7.根据权利要求3所述的方法,其特征在于,根据所有预设位置处的至少一幅图像生成球景图像包括:
根据黑白摄像头拍摄得到的图像确定彩色摄像头拍摄得到的图像中各像素点的景深信息,其中,所述多目摄像设备为双目摄像设备,包含一个彩色摄像头和一个黑白摄像头;
根据所述景深信息和所述图像对应的固定夹角生成球景图像。
8.根据权利要求1所述的方法,其特征在于,根据所有预设位置处的至少一幅图像生成球景图像包括:
分别对左摄像头拍摄到的图像和右摄像头拍摄到的图像进行合成,得到两幅球景图像,其中,所述摄像设备为双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。
9.根据权利要求8所述的方法,其特征在于,还包括:
将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。
10.根据权利要求1-9任一项所述的方法,其特征在于,所述图像为全景图像。
11.一种球景图像生成装置,其特征在于,包括:
图像拍摄模块,用于采用摄像设备在至少两个预设位置处各拍摄至少一幅图像;
球景图像生成模块,用于根据所有预设位置处的至少一幅图像生成球景图像。
12.根据权利要求11所述的装置,其特征在于,所述图像拍摄模块具体用于,采用多目摄像设备的多个摄像头分别在至少两个预设位置处各拍摄至少一幅图像;
所述球景图像生成模块具体用于,根据所有摄像头拍摄的图像生成球景图像。
13.根据权利要求12所述的装置,其特征在于,所述图像拍摄模块具体用于,通过所述多目摄像设备中的重力传感器和地磁传感器计算得到所述多目摄像设备的摄影平面与水平面的第一夹角;固定所述第一夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;在所述第一夹角的基础上增加和/或减少第一预设角度得到第二夹角;固定所述第二夹角采用所述多目摄像设备进行拍摄分别得到至少一幅图像;确定所述第二夹角是否为预设角度,若是,则结束拍摄;若否,则在所述第二夹角的基础上增加和/或减少第二预设角度得到第三夹角,重复执行拍摄和角度判断步骤,直到摄影平面与水平方向成预设角度结束拍摄。
14.根据权利要求13所述的装置,其特征在于,所述球景图像生成模块包括:
景深信息计算单元,用于计算得到每张图像中各像素点的景深信息;
球景图像生成单元,用于根据所述景深信息和所述图像对应的固定夹角生成球景图像。
15.根据权利要求14所述的装置,其特征在于,所述球景图像生成单元包括:
重叠去除子单元,用于根据所述夹角确定相邻位置的图像,并去除相邻图像中的重叠部分;
球景图像生成子单元,用于根据所述重叠部分的图像像素点的景深信息将相邻图像合成一幅图像,重复上述合并过程直到将所有的图像合并成一幅球景图像。
16.根据权利要求15所述的装置,其特征在于,所述球景图像生成子单元具体用于,根据所述景深信息获取所述图像像素点的像素梯度特征,根据所述像素梯度特征将相邻图像合成一幅图像。
17.根据权利要求13所述的装置,其特征在于,所述球景图像生成模块具体用于,根据黑白摄像头拍摄得到的图像确定彩色摄像头拍摄得到的图像中各像素点的景深信息,其中,所述多目摄像设备为双目摄像设备,包含一个彩色摄像头和一个黑白摄像头;根据所述景深信息和所述图像对应的固定夹角生成球景图像。
18.根据权利要求11所述的装置,其特征在于,所述球景图像生成模块具体用于,分别对左摄像头拍摄到的图像和右摄像头拍摄到的图像进行合成,得到两幅球景图像,其中,所述摄像设备为双目摄像设备,包含2个彩色摄像头,在拍摄时保持所述双目摄像设备的2个彩色摄像头左右放置并位于同一水平面上。
19.根据权利要求18所述的装置,其特征在于,所述装置还包括:
球景图像发送模块,用于将所述左摄像头的球景图像和右摄像头的球景图像对应传送至虚拟现实VR设备的左眼镜和右眼镜,以使VR眼镜将所述左摄像头的球景图像和右摄像头的球景图像合成一幅可以观看的球景图像。
20.根据权利要求11-19任一项所述的装置,其特征在于,所述图像为全景图像。
CN201610624656.XA 2016-08-02 2016-08-02 球景图像生成方法及装置 Pending CN106254853A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610624656.XA CN106254853A (zh) 2016-08-02 2016-08-02 球景图像生成方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610624656.XA CN106254853A (zh) 2016-08-02 2016-08-02 球景图像生成方法及装置

Publications (1)

Publication Number Publication Date
CN106254853A true CN106254853A (zh) 2016-12-21

Family

ID=57605759

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610624656.XA Pending CN106254853A (zh) 2016-08-02 2016-08-02 球景图像生成方法及装置

Country Status (1)

Country Link
CN (1) CN106254853A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018121401A1 (zh) * 2016-12-28 2018-07-05 深圳市掌网科技股份有限公司 一种全景视频图像的拼接方法及全景相机
CN108900766A (zh) * 2018-06-15 2018-11-27 北京华捷艾米科技有限公司 一种全景图像自动增强装置和方法、以及应用该装置的全景相机
CN109194945A (zh) * 2018-08-02 2019-01-11 维沃移动通信有限公司 一种图像处理方法及终端

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101825840A (zh) * 2010-05-06 2010-09-08 浙江大学 一种多镜头实时全景成像系统
CN101877767A (zh) * 2009-04-30 2010-11-03 爱国者全景(北京)网络科技发展有限公司 一种六通道视频源生成三维全景连续视频的方法和系统
CN202696756U (zh) * 2012-06-20 2013-01-23 中兴通讯股份有限公司 移动终端的拍摄装置以及移动终端
CN103072140A (zh) * 2012-12-18 2013-05-01 北京理工大学 一种具有全景捕捉、定位功能的双目立体仿生眼机构
CN103533266A (zh) * 2013-10-01 2014-01-22 中国人民解放军国防科学技术大学 垂直方向宽视域的360度拼接式全景摄像机
CN103618881A (zh) * 2013-12-10 2014-03-05 深圳英飞拓科技股份有限公司 多镜头全景拼接控制方法及装置
CN104333747A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 一种立体拍照方法和立体拍照设备
CN104363421A (zh) * 2014-11-04 2015-02-18 福建星网视易信息系统有限公司 实现多角度摄像头监控效果的方法和装置
CN104519340A (zh) * 2014-12-30 2015-04-15 余俊池 基于多深度图像变换矩阵的全景视频拼接方法
CN105141941A (zh) * 2015-09-02 2015-12-09 深圳华侨城文化旅游科技股份有限公司 一种数字全景3d影片制作的方法及系统
US20160088280A1 (en) * 2014-09-22 2016-03-24 Samsung Electronics Company, Ltd. Camera system for three-dimensional video
CN105657394A (zh) * 2014-11-14 2016-06-08 东莞宇龙通信科技有限公司 基于双摄像头的拍摄方法、拍摄装置及移动终端

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101877767A (zh) * 2009-04-30 2010-11-03 爱国者全景(北京)网络科技发展有限公司 一种六通道视频源生成三维全景连续视频的方法和系统
CN101825840A (zh) * 2010-05-06 2010-09-08 浙江大学 一种多镜头实时全景成像系统
CN202696756U (zh) * 2012-06-20 2013-01-23 中兴通讯股份有限公司 移动终端的拍摄装置以及移动终端
CN103072140A (zh) * 2012-12-18 2013-05-01 北京理工大学 一种具有全景捕捉、定位功能的双目立体仿生眼机构
CN103533266A (zh) * 2013-10-01 2014-01-22 中国人民解放军国防科学技术大学 垂直方向宽视域的360度拼接式全景摄像机
CN103618881A (zh) * 2013-12-10 2014-03-05 深圳英飞拓科技股份有限公司 多镜头全景拼接控制方法及装置
US20160088280A1 (en) * 2014-09-22 2016-03-24 Samsung Electronics Company, Ltd. Camera system for three-dimensional video
CN104363421A (zh) * 2014-11-04 2015-02-18 福建星网视易信息系统有限公司 实现多角度摄像头监控效果的方法和装置
CN105657394A (zh) * 2014-11-14 2016-06-08 东莞宇龙通信科技有限公司 基于双摄像头的拍摄方法、拍摄装置及移动终端
CN104333747A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 一种立体拍照方法和立体拍照设备
CN104519340A (zh) * 2014-12-30 2015-04-15 余俊池 基于多深度图像变换矩阵的全景视频拼接方法
CN105141941A (zh) * 2015-09-02 2015-12-09 深圳华侨城文化旅游科技股份有限公司 一种数字全景3d影片制作的方法及系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018121401A1 (zh) * 2016-12-28 2018-07-05 深圳市掌网科技股份有限公司 一种全景视频图像的拼接方法及全景相机
CN108616733A (zh) * 2016-12-28 2018-10-02 深圳市掌网科技股份有限公司 一种全景视频图像的拼接方法及全景相机
CN108616733B (zh) * 2016-12-28 2020-01-10 深圳市掌网科技股份有限公司 一种全景视频图像的拼接方法及全景相机
CN108900766A (zh) * 2018-06-15 2018-11-27 北京华捷艾米科技有限公司 一种全景图像自动增强装置和方法、以及应用该装置的全景相机
CN109194945A (zh) * 2018-08-02 2019-01-11 维沃移动通信有限公司 一种图像处理方法及终端

Similar Documents

Publication Publication Date Title
CN106375748B (zh) 立体虚拟现实全景视图拼接方法、装置及电子设备
JP4435145B2 (ja) 幾何情報を校正してパノラマ映像を提供する方法および装置
US20180213218A1 (en) Equipment and method for promptly performing calibration and verification of intrinsic and extrinsic parameters of a plurality of image capturing elements installed on electronic device
CN103945210B (zh) 一种实现浅景深效果的多摄像头拍摄方法
CN108432230B (zh) 一种成像设备和一种用于显示场景的图像的方法
CN106385576A (zh) 立体虚拟现实直播方法、装置及电子设备
CN109064545A (zh) 一种对房屋进行数据采集和模型生成的方法及装置
EP3902236A1 (en) Terminal, photographing method, and storage medium
CN206563985U (zh) 三维成像系统
CN106228530B (zh) 一种立体摄影方法、装置及立体摄影设备
CN103188428A (zh) 拍摄装置及方法
CN103260046A (zh) 一种三维显示方法及系统
JP5923595B2 (ja) 画像処理装置及び方法並びに撮像装置
CN106254853A (zh) 球景图像生成方法及装置
CN106023073A (zh) 一种图像拼接系统
CN108282650B (zh) 一种裸眼立体显示方法、装置、系统及存储介质
CN110278366A (zh) 一种全景图像虚化方法、终端及计算机可读存储介质
CN104092954B (zh) 闪光控制方法及控制装置、图像采集方法及采集装置
US8159523B2 (en) Method for capturing convergent-type multi-view image
CN107659772B (zh) 3d图像生成方法、装置及电子设备
CN103546680B (zh) 一种无变形的全方位鱼眼摄像装置及实现方法
CN110365910B (zh) 一种自拍方法、装置及电子设备
KR102127764B1 (ko) 파노라마 이미지 생성 시스템 및 방법
JP2020191624A (ja) 電子機器およびその制御方法
CN108513122B (zh) 基于3d成像技术的模型调整方法及模型生成装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161221