CN105516569A - 一种获得全景图像的方法和装置 - Google Patents

一种获得全景图像的方法和装置 Download PDF

Info

Publication number
CN105516569A
CN105516569A CN201610038964.4A CN201610038964A CN105516569A CN 105516569 A CN105516569 A CN 105516569A CN 201610038964 A CN201610038964 A CN 201610038964A CN 105516569 A CN105516569 A CN 105516569A
Authority
CN
China
Prior art keywords
fish eye
eye images
image
pixel
panoramic picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610038964.4A
Other languages
English (en)
Inventor
路鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Madv Technology Co Ltd
Original Assignee
Beijing Madv Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Madv Technology Co Ltd filed Critical Beijing Madv Technology Co Ltd
Priority to CN201610038964.4A priority Critical patent/CN105516569A/zh
Publication of CN105516569A publication Critical patent/CN105516569A/zh
Priority to PCT/CN2016/111043 priority patent/WO2017124868A1/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Abstract

本发明涉及一种获取全景图像的方法和装置,该方法包括:通过相对放置的两组成像单元获取第一鱼眼图像和第二鱼眼图像;分别将第一鱼眼图像和第二鱼眼图像裁剪成预定尺寸的图像;将裁剪后的第一鱼眼图像和第二鱼眼图像拼接为第三鱼眼图像;将第三鱼眼图像展开为全景图像。该实施例提供的一种获取全景图像的方法和装置,通过两个相对放置的成像单元采集两幅鱼眼图像,并将其拼接形成全景图像,从而降低成本。

Description

一种获得全景图像的方法和装置
技术领域
本发明涉及图像处理技术领域,尤其涉及一种获取全景图像的方法和装置。
背景技术
由于全景视频能够为用户提供全方位视角、浸入式视频观看体验,逐渐成为虚拟现实和视频播放的热点。而现有的全景视频图像的采集设备通常由多个镜头和相机组成,成本较高,且不便于用户使用。
发明内容
本发明的目的是提供一种获取全景图像的方法和装置,能够通过两个相对放置的成像单元采集两幅鱼眼图像,并将其拼接形成全景图像,从而降低成本,方便用户使用。
本发明提供的一种获取全景图像的方法,该方法包括:
通过相对放置的两组成像单元获取第一鱼眼图像和第二鱼眼图像,其中,所述两组成像单元中的每个成像单元包括一个鱼眼镜头和一个图像传感器,且所述图像传感器将透过所述鱼眼镜头的光线转换为电信号;
分别将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像;
将裁剪后的所述第一鱼眼图像和所述第二鱼眼图像拼接为第三鱼眼图像;将所述第三鱼眼图像展开为全景图像。
可选地,所述将所述第三鱼眼图像展开为全景图像后,所述方法还包括:
对所述全景图像进行压缩,得到压缩后的所述全景图像。
可选地,所述分别将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像包括:
将两个所述鱼眼镜头的成像圆的圆心分别平移到所述第一鱼眼图像和所述第二鱼眼图像的中心位置;
根据预定尺寸分别对所述第一鱼眼图像和所述第二鱼眼图像进行裁剪,将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像。
可选地,所述将裁剪后的所述第一鱼眼图像和所述第二鱼眼图像拼接为第三鱼眼图像包括:
裁剪后的所述第一鱼眼图像和所述第二鱼眼图像并排放置拼接为所述第三鱼眼图像,且所述第三鱼眼图像的宽高比为2:1。
可选地,所述将所述第三鱼眼图像展开为全景图像包括:获取预先存储的坐标查找表;
根据所述第三鱼眼图像中的第一像素点的横坐标值和纵坐标值,获取所述坐标查找表中与所述横坐标值和所述纵坐标值匹配的第二横坐标值和第二纵坐标值;
将所述第一像素点的像素值作为所述全景图像中的第二像素点的像素值,其中,所述第二像素点的横坐标值与所述第二横坐标值相同,所述第二像素点的纵坐标值与所述第二纵坐标值相同。
可选地,所述第一像素点为所述第一鱼眼图像和所述第二鱼眼图像相邻接处的多列像素点中的一个像素点,所述将所述第一像素点的像素值作为所述全景图像中的第二像素点的像素值之前,所述方法还包括:
利用加权值对所述第一像素点的像素值进行加权,得到所述第一像素点的加权后的像素值,所述加权值由所述第一像素点所属列到所述第一鱼眼图像和所述第二鱼眼图像相邻接处的图像边缘的距离来确定,其中,
将所述第一像素点的像素值作为所述全景图像中的第二像素点的像素值,包括:
将所述第一像素点的加权后的像素值作为所述第二像素点的像素值。
本发明还提供一种获取全景图像的装置,该装置包括:相对放置的两组成像单元,其中,
所述两组成像单元中的每个成像单元包括一个鱼眼镜头和一个图像传感器;
所述图像传感器将透过所述鱼眼镜头的光线转换为电信号。
可选地,所述两组成像单元的光轴重合,两个所述图像传感器的成像平面平行且所述成像平面的四边重合,所述鱼眼镜头的视场角大于180度,且所述鱼眼镜头的成像圆的直径小于所述图像传感器输出的图像的高度。
可选地,所述全景图像装置还包括:图像处理传输单元,所述图像处理传输单元包括:裁剪拼接单元,图像处理单元,图像压缩单元和输入输出单元;
所述裁剪拼接单元,接收所述两组成像单元的所述图形传感器输出的第一鱼眼图像和第二鱼眼图像,分别将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像,并将裁剪后的所述第一鱼眼图像和所述第二鱼眼图像拼接为第三鱼眼图像,且将所述第三鱼眼图像输出至所述图像处理单元;
所述图像处理单元,接收所述裁剪拼接单元输出的所述第三鱼眼图像,并将所述第三鱼眼图像展开为全景图像,且将所述全景图像输出至所述图像压缩单元;
所述图像压缩单元,接收所述图像处理单元输出的所述全景图像,并压缩所述全景图像,且将压缩后的所述全景图像输出至所述输入输出单元;
所述输入输出单元,接收所述图像压缩单元输出的压缩后的所述全景图像。
可选地,所述装置还包括:图像缓存单元,存储所述裁剪拼接单元输出的所述第三鱼眼图像和所述图像处理单元输出的所述全景图像;
音频采集单元,采集音频信号,并将所述音频信号传输至所述图像压缩单元;
所述图像压缩单元,还对所述音频信号进行压缩。
基于上述技术方案提供的一种获取全景图像的方法和装置,能够通过两个相对放置的成像单元采集两幅鱼眼图像,并将其拼接形成全景图像,从而降低成本,方便用户使用。
附图说明
本发明的附图是为了方便进一步理解本发明实施例的技术方案。
图1为根据本发明一个实施例提供的一种获取全景图像的方法的流程示意图;
图2为成像单元获取的第一鱼眼图像和第二鱼眼图像的示意图;
图3为全景图像的一个示意图;
图4为全景图像的另一个示意图;
图5为根据本发明一个实施例提供的一种获取全景图像的装置的结构示意图;
图6为根据本发明一个实施例提供的一种获取全景图像的装置相对于拍摄环境的位置;
图7为输入输出模块的结构示意图。
附图标记说明:
1成像单元
11第一鱼眼镜头
14第二鱼眼镜头
12第一图像传感器
13第二图像传感器
2图像处理输出单元
21裁剪拼接单元
22图像处理单元
23图像压缩单元
24输入输出单元
41第一半球区域
42第二半球区域
51第一鱼眼图像
52第二鱼眼图像
6全景图像
61第一半幅全景图像
62第二半幅全景图像
241I/O模块
242显示模块
243存储模块
244无线传输模块
具体实施方式
为使本发明实施例的技术方案以及优点表达的更清楚,下面通过附图和实施例,对本发明的技术方案做进一步的详细描述,以下实施例用于说明本申请,但不用来限制本申请的范围。
图1为根据本发明实施例提供的一种获取全景图像的方法100的流程示意图。如图1所示的方法100包括:
110,通过相对放置的两组成像单元获取第一鱼眼图像和第二鱼眼图像;
120,分别将第一鱼眼图像和第二鱼眼图像裁剪成预定尺寸的图像;
130,将裁剪后的第一鱼眼图像和第二鱼眼图像拼接为第三鱼眼图像;
140,将第三鱼眼图像展开为全景图像。
在该实施例中,两组成像单元中的每个成像单元包括一个鱼眼镜头和一个图像传感器。两个图像传感器以背靠背方式放置,图像传感器将透过镜头的光线转换为电信号。放置在图像传感器之前的鱼眼镜头的视场角大于180度,可以将左右两个半球的景物分别投影为有效区域为圆形的图像。由于图像传感器的宽高比为4:3,鱼眼镜头的成像圆的直径小于图像传感器输出的图像的高度。
可选地,在140之后,该方法100还包括:
对全景图像进行压缩,得到压缩后的全景图像。
上述实施例提供的一种获取全景图像的方法,通过两个相对放置的成像单元采集两幅鱼眼图像,并将其拼接形成全景图像,从而降低成本,方便用户使用。
应理解,由于视频是连续的图像序列,所以本实施例提供的一种获取全景图像的方法也可以获取全景视频。
具体的,在本发明实施例中,120可以包括:
将两个所述鱼眼镜头的成像圆的圆心分别平移到所述第一鱼眼图像和所述第二鱼眼图像的中心位置;
根据预定尺寸分别对所述第一鱼眼图像和所述第二鱼眼图像进行裁剪,将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像。
例如,在该实施例中,成像单元输出的第一鱼眼图像和第二鱼眼图像,每幅图像f(x,y)的宽度为W,高度为H。对于每幅图像,分别进行如下处理:将成像圆的圆心(xc,yc)根据预先标定的参数平移到鱼眼图像的中心位置(W/2,H/2),然后将鱼眼图像裁剪为H*H大小的鱼眼图像H(x′,y′),其中,
H(x′,y′)=f(x′-xc+W/2,y′-yc+H/2)。
图2示出了本发明实施例中第一鱼眼图像和第二鱼眼图像的示意图。如图2所示,第一鱼眼图像51,第二鱼眼图像52。
具体的,在本发明实施例中,130可以为:将裁剪后的第一鱼眼图像和第二鱼眼图像并排放置拼接为第三鱼眼图像,且第三鱼眼图像的宽高比为2:1。
例如:将裁剪为H*H大小的第一鱼眼图像和第二鱼眼图像左右并排放置,拼接为宽高比为2:1的第三鱼眼图像。
具体的,在本发明实施例中,140可以包括:获取预先存储的坐标查找表;
根据第三鱼眼图像中的第一像素点的横坐标值和纵坐标值,获取坐标查找表中与横坐标值和纵坐标值匹配的第二横坐标值和第二纵坐标值;
将第一像素点的像素值作为全景图像中的第二像素点的像素值,其中,第二像素点的横坐标值与第二横坐标值相同,第二像素点的纵坐标值与第二纵坐标值相同。
例如,如图3所示,可以将第二鱼眼图像52展开为第二半幅全景图像62,放置于全景图像6的中心,并将第一鱼眼图像51展开为第一半幅全景图像61,分为左右两半部分,分别置于全景图像6的两侧。
需要说明的是,在本发明实施例中,第一像素点为第三鱼眼图像中的任一像素点,也就是说第三鱼眼图像中的每一个像素点都需要进行上述140包括的步骤。第二像素点为全景图像中与第一像素点的像素值相同的像素点。另外,坐标查找表的大小及其坐标参数值可以由图像传感器的参数、镜头的参数以及最终要输出的全景图像的大小来确定。
上述实施例提供的一种获取全景图像的方法,由于采用坐标查找表的方式,能够快速展开鱼眼图像形成全景图像,达到实时处理的目的。
进一步地,当第一像素点为第三鱼眼图像中的第一鱼眼图像和第二鱼眼图像相邻接处的多列像素点中的一个像素点时,140具体为:
获取预先存储的坐标查找表;
根据第三鱼眼图像中的第一像素点的横坐标值和纵坐标值,获取坐标查找表中与横坐标值和纵坐标值匹配的第二横坐标值和第二纵坐标值;
利用加权值对第一像素点的像素值进行加权,得到第一像素点的加权后的像素值,其中,该加权值由第一像素点所属列到第一鱼眼图像和第二鱼眼图像相邻接处的图像边缘的距离来确定;
将第一像素点的加权后的像素值作为第二像素点的像素值。
上述方法可以使得拼接后的全景图像的质量更高,可以对61和62相邻接处的多列像素点的像素值进行加权平均。例如,如图4所示,第一半幅全景图像和第二半幅全景图像的图像高度为H,宽度为H+24,且第一半幅全景图像和第二半幅全景图像的两侧各有12列重合区域。
第一半幅全景图像的左侧第1列到第24列与第二半幅鱼眼图重合,每一列的权重系数为:i/25,其中,i=1,2,…,24。第二半幅全景图像的第H-12列到第H+12列的权重系数为:1-(i/25),其中,i=1,2,…,24。第一半幅全景图像和第二半幅全景图像中1到24列中的像素点分别乘以各自的加权系数后相加,得到全景图像。
上述实施例提供的一种获取全景图像的方法,通过同时控制两个成像单元的成像,消除了成像单元之间的同步问题,同时,通过对两幅图像邻接处像素点的加权平均,消除了拼接时拼缝明显的问题,使得形成全景图像的质量更高。
上文结合图1至图4详细描述了本发明实施例提供的一种获取全景图像的方法的技术方案,下面结合图2至图7详细描述本发明实施例提供的一种获取全景图像的装置的技术方案。
图5为根据本发明实施例提供的一种获取全景图像的装置的结构示意图。本发明还提供一种获取全景图像的装置,该装置包括:相对放置的两组成像单元,其中,两组成像单元中的每个成像单元包括一个鱼眼镜头和一个图像传感器;图像传感器将透过所述鱼眼镜头的光线转换为电信号。
也就是说,在该实施例中,两组成像单元中的一组成像单元包括第一鱼眼镜头和第一图像传感器,另一组成像单元包括第二鱼眼镜头和第二图像传感器。如图5所示,成像单元1中的第一图像传感器12和第二图像传感器13背靠背放置,图像传感器可以是CCD(电荷耦合器件)图像传感器,也可以选择CMOS(互补金属氧化物半导体)图像传感器。第一鱼眼镜头11和第二鱼眼镜头14分别放在左右两个图像传感器前面。
两组成像单元的光轴重合,同时在安装过程中,保证两个传感器的成像平面平行并且四边重合。为了能够获得周围环境水平360度和垂直360度的全景视野,选择的鱼眼镜头的视场角大于180度,特别地,可以选用185度视场角的鱼眼镜头,或者可以选用视场角为190度的鱼眼镜头。
需要说明的是,如果选用185度镜头,则两组成像单元的成像会有2.5度的重合视角。如果选用190度镜头,则两组成像单元的成像会有5度的重合视角。同时,由于超过180度的鱼眼镜头的成像为圆形,而一般的图像传感器的宽高比为4:3,因此,需要使得图像传感器输出的图像的高度大于鱼眼镜头的成像圆的直径。
上述实施例提供的一种获取全景图像的装置,通过两个相对放置的成像单元采集两幅鱼眼图像,并将其拼接形成全景图像,从而降低成本,方便用户使用。
应理解,由于视频是连续的图像序列,所以本实施例提供的一种获取全景图像的装置也可以获取全景视频。
如图6所示,成像单元1的第一鱼眼镜头11能够对装置周围第一半球区域41进行成像。成像单元1中第二鱼眼镜头14能够对装置周围第二半球区域42进行成像。
如图2所示,第一图像传感器输出的第一鱼眼图像51的宽高比为4:3,可以完整的包含鱼眼镜头的成像。第二图像传感器输出的第二鱼眼图像52的宽高比为4:3。鱼眼图像51和52的高度大于成像圆的直径。同时由于鱼眼成像存在畸变,所以成像圆中的建筑物的轮廓线条变成了曲线。
可选地,如图5所示,装置还可以包括图像处理传输单元2。该图像处理传输单元2包括:裁剪拼接单元21、图像处理单元22、图像压缩单元23和输入输出单元24。
裁剪拼接单元21,接收两组成像单元1的图形传感器12和13输出的第一鱼眼图像51和第二鱼眼图像52,分别将第一鱼眼图像51和第二鱼眼图像52裁剪成预定尺寸的图像,并将裁剪后的第一鱼眼图像51和第二鱼眼图像52拼接为第三鱼眼图像,且将第三鱼眼图像输出至图像处理单元22;
图像处理单元22,接收裁剪拼接单元21输出的第三鱼眼图像,并将第三鱼眼图像展开为全景图像6,且将全景图像6输出至图像压缩单元23;
图像压缩单元23,接收图像处理单元22输出的全景图像6,并压缩全景图像6,且将压缩后的全景图像6输出至输入输出单元24;
输入输出单元24,接收图像压缩单元23输出的压缩后的全景图像6。
具体的,在该实施例中,图像处理单元22可以顺序扫描坐标查找表,根据第三鱼眼图像中的第一像素点的横坐标值和纵坐标值,获取坐标查找表中与横坐标值和纵坐标值匹配的第二横坐标值和第二纵坐标值,将第一像素点的像素值作为全景图像中的第二像素点的像素值,其中,第二像素点的横坐标值与第二横坐标值相同,第二像素点的纵坐标值与第二纵坐标值相同,从而形成展开全景图像。
如图3所示,将第二鱼眼图像52展开为第二半幅全景图像62,放置于全景图像6的中心;将第一鱼眼图像51展开为第一半幅全景图像61,分为左右两半部分,分别置于全景图像6的两侧。
上述装置可以使得拼接后的全景图像的质量更高,可以对61和62相邻接处的多列像素点的像素值进行加权平均。例如,如图4所示,第一半幅全景图像和第二半幅全景图像的图像高度为H,宽度为H+24,且第一半幅全景图像和第二半幅全景图像的两侧各有12列重合区域。
第一半幅全景图像的左侧第1列到第24列与第二半幅鱼眼图重合,每一列的权重系数为:i/25,其中,i=1,2,…,24。第二半幅全景图像的第H-12列到第H+12列的权重系数为:1-(i/25),其中,i=1,2,…,24。第一半幅全景图像和第二半幅全景图像中1到24列中的像素点分别乘以各自的加权系数后相加,得到全景图像。
在该实施例中,图像处理传输单元2包括的其他各单元的功能的实现方式对应于图1所示的方法100中包括的步骤120-140,为了描述的简洁,在此不再赘述。
上述实施例提供的一种获取全景图像的装置,通过同时控制两个成像单元的成像,消除了成像单元之间的同步问题,同时,通过图像处理单元对两幅图像邻接处像素点的加权平均,消除了拼接时拼缝明显的问题,使得形成全景图像的质量更高。
可选地,装置还可以包括:图像缓存单元3。该图像缓存单元3可以存储裁剪拼接单元21输出的第三鱼眼图像和图像处理单元22输出的全景图像。
在该实施例中,该图像缓存单元3可以将全景图像压缩为JPG格式,同时也包含视频压缩模式,能够将连续的图像序列压缩为通用的视频编码格式。
另外,装置还可以包括音频采集单元(图中未示出)。该音频采集单元可以采集音频信号,并将音频信号传输至图像压缩单元23;图像压缩单元23,还对音频信号进行压缩。在该实施例中,音频采集单元可以为麦克风,也可以为其他的音频采集单元。
进一步地,如图7所示,输入输出单元24可以包括:输入输出IO模块241,显示模块242,存储模块243和无线传输模块244,其中,IO模块241包括按键和LED灯,按键用于接收用户的操作指令,LED灯用于标识所述装置内部的工作状态;显示模块242用于显示装置200的操作界面;存储模块243用于存储全景图像;无线传输模块244,用于提供与外部终端的交互通路。
在该实施两种,存储模块243可以包含SD卡,能够将用户拍摄的全景视频或者图片保存在SD卡中。无线传输模块244可以接收用户通过手机对全景相机的控制,同时,也能够向手机端发送视频流的浏览。无线传输模块244可以采用无线方式,也可以采用蓝牙或者红外方式连接。
最后所应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种获取全景图像的方法,其特征在于,包括:
通过相对放置的两组成像单元获取第一鱼眼图像和第二鱼眼图像,其中,所述两组成像单元中的每个成像单元包括一个鱼眼镜头和一个图像传感器,且所述图像传感器将透过所述鱼眼镜头的光线转换为电信号;
分别将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像;
将裁剪后的所述第一鱼眼图像和所述第二鱼眼图像拼接为第三鱼眼图像;
将所述第三鱼眼图像展开为全景图像。
2.根据权利要求1所述的方法,其特征在于,所述将所述第三鱼眼图像展开为全景图像后,所述方法还包括:
对所述全景图像进行压缩,得到压缩后的所述全景图像。
3.根据权利要求1或2所述的方法,其特征在于,所述分别将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像包括:
将两个所述鱼眼镜头的成像圆的圆心分别平移到所述第一鱼眼图像和所述第二鱼眼图像的中心位置;
根据预定尺寸分别对所述第一鱼眼图像和所述第二鱼眼图像进行裁剪,将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像。
4.根据权利要求1或2所述的方法,其特征在于,所述将裁剪后的所述第一鱼眼图像和所述第二鱼眼图像拼接为第三鱼眼图像包括:
将裁剪后的所述第一鱼眼图像和所述第二鱼眼图像并排放置拼接为所述第三鱼眼图像,且所述第三鱼眼图像的宽高比为2:1。
5.根据权利要求1或2所述的方法,其特征在于,所述将所述第三鱼眼图像展开为全景图像包括:
获取预先存储的坐标查找表;
根据所述第三鱼眼图像中的第一像素点的横坐标值和纵坐标值,获取所述坐标查找表中与所述横坐标值和所述纵坐标值匹配的第二横坐标值和第二纵坐标值;
将所述第一像素点的像素值作为所述全景图像中的第二像素点的像素值,其中,所述第二像素点的横坐标值与所述第二横坐标值相同,所述第二像素点的纵坐标值与所述第二纵坐标值相同。
6.根据权利要求5所述的方法,其特征在于,所述第一像素点为所述第一鱼眼图像和所述第二鱼眼图像相邻接处的多列像素点中的一个像素点,所述将所述第一像素点的像素值作为所述全景图像中的第二像素点的像素值之前,所述方法还包括:
利用加权值对所述第一像素点的像素值进行加权,得到所述第一像素点的加权后的像素值,所述加权值由所述第一像素点所属列到所述第一鱼眼图像和所述第二鱼眼图像相邻接处的图像边缘的距离来确定,其中,
将所述第一像素点的像素值作为所述全景图像中的第二像素点的像素值,包括:
将所述第一像素点的加权后的像素值作为所述第二像素点的像素值。
7.一种获取全景图像的装置,其特征在于,所述装置包括:
相对放置的两组成像单元,其中,
所述两组成像单元中的每个成像单元包括一个鱼眼镜头和一个图像传感器;
所述图像传感器将透过所述鱼眼镜头的光线转换为电信号。
8.根据权利要求7所述的一种获取全景图像的装置,其特征在于,所述两组成像单元的光轴重合,两个所述图像传感器的成像平面平行且所述成像平面的四边重合,所述鱼眼镜头的视场角大于180度,且所述鱼眼镜头的成像圆的直径小于所述图像传感器输出的图像的高度。
9.根据权利要求7或8所述的一种获取全景图像的装置,其特征在于,所述全景图像装置还包括:
图像处理传输单元,所述图像处理传输单元包括:裁剪拼接单元,图像处理单元,图像压缩单元和输入输出单元;
所述裁剪拼接单元,接收所述两组成像单元的所述图形传感器输出的第一鱼眼图像和第二鱼眼图像,分别将所述第一鱼眼图像和所述第二鱼眼图像裁剪成预定尺寸的图像,并将裁剪后的所述第一鱼眼图像和所述第二鱼眼图像拼接为第三鱼眼图像,且将所述第三鱼眼图像输出至所述图像处理单元;
所述图像处理单元,接收所述裁剪拼接单元输出的所述第三鱼眼图像,并将所述第三鱼眼图像展开为全景图像,且将所述全景图像输出至所述图像压缩单元;
所述图像压缩单元,接收所述图像处理单元输出的所述全景图像,并压缩所述全景图像,且将压缩后的所述全景图像输出至所述输入输出单元;
所述输入输出单元,接收所述图像压缩单元输出的压缩后的所述全景图像。
10.根据权利要求7或8所述的一种获取全景图像的装置,其特征在于,所述装置还包括:
图像缓存单元,存储所述裁剪拼接单元输出的所述第三鱼眼图像和所述图像处理单元输出的所述全景图像;
音频采集单元,采集音频信号,并将所述音频信号传输至所述图像压缩单元;
所述图像压缩单元,还对所述音频信号进行压缩。
CN201610038964.4A 2016-01-20 2016-01-20 一种获得全景图像的方法和装置 Pending CN105516569A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610038964.4A CN105516569A (zh) 2016-01-20 2016-01-20 一种获得全景图像的方法和装置
PCT/CN2016/111043 WO2017124868A1 (zh) 2016-01-20 2016-12-20 一种获得全景图像的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610038964.4A CN105516569A (zh) 2016-01-20 2016-01-20 一种获得全景图像的方法和装置

Publications (1)

Publication Number Publication Date
CN105516569A true CN105516569A (zh) 2016-04-20

Family

ID=55724176

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610038964.4A Pending CN105516569A (zh) 2016-01-20 2016-01-20 一种获得全景图像的方法和装置

Country Status (2)

Country Link
CN (1) CN105516569A (zh)
WO (1) WO2017124868A1 (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106292167A (zh) * 2016-08-31 2017-01-04 李文松 一种优化的双目全景摄影装置及图像制作方法
CN106327478A (zh) * 2016-08-31 2017-01-11 北京的卢深视科技有限公司 一种鱼眼全景图像合成处理方法及装置
CN106534650A (zh) * 2016-12-21 2017-03-22 北京疯景科技有限公司 全景图像的拍摄系统及方法
CN106897977A (zh) * 2017-02-28 2017-06-27 长沙全度影像科技有限公司 一种鱼眼图像边缘增强方法
WO2017124868A1 (zh) * 2016-01-20 2017-07-27 北京疯景科技有限公司 一种获得全景图像的方法和装置
CN107911685A (zh) * 2017-10-23 2018-04-13 银河威尔科技(北京)有限公司 一种3Dvr直播封装的方法和装置
CN107944390A (zh) * 2017-11-24 2018-04-20 西安科技大学 机动车行驶前方物体视频测距及方向定位方法
WO2018081924A1 (zh) * 2016-11-01 2018-05-11 深圳岚锋创视网络科技有限公司 一种全景图像的生成方法、系统及拍摄装置
CN108650468A (zh) * 2018-05-30 2018-10-12 信利光电股份有限公司 一种获取全景图像的方法、装置、设备及存储介质
CN109076255A (zh) * 2016-04-26 2018-12-21 Lg电子株式会社 发送360度视频的方法、接收360度视频的方法、发送360度视频的设备、接收360度视频的设备
CN109429008A (zh) * 2017-08-31 2019-03-05 佳能株式会社 图像处理装置、信息处理系统、信息处理方法和存储介质
CN109819157A (zh) * 2017-11-20 2019-05-28 富泰华工业(深圳)有限公司 全景摄像机及其控制方法
CN110349077A (zh) * 2018-04-02 2019-10-18 杭州海康威视数字技术股份有限公司 一种全景图像合成方法、装置及电子设备
CN112002002A (zh) * 2020-08-18 2020-11-27 广州海事科技有限公司 航道建模方法、系统、计算机设备、及存储介质
CN113014754A (zh) * 2017-02-23 2021-06-22 钰立微电子股份有限公司 产生全景深度图像的图像装置及相关图像装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108182661A (zh) * 2017-12-29 2018-06-19 百维雅(东莞)网络技术有限公司 一种全景图像展示方法
CN109064397B (zh) * 2018-07-04 2023-08-01 广州希脉创新科技有限公司 一种基于摄像耳机的图像拼接方法及系统
CN109087250B (zh) * 2018-08-29 2022-05-24 浙江传媒学院 基于规则边界约束的图像拼接方法
CN114390222B (zh) * 2022-03-24 2022-07-08 北京唱吧科技股份有限公司 适用于180度全景视频的切换方法、装置及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030063089A1 (en) * 1998-05-27 2003-04-03 Ju-Wei Chen Image-based method and system for building spherical panoramas
CN101261726A (zh) * 2008-03-18 2008-09-10 中国人民解放军国防科学技术大学 DSP上用查表法进行折反射全景展开的Cache包围盒加速方法
CN101561270A (zh) * 2009-05-27 2009-10-21 天津理工大学 嵌入式全向球视觉目标检测和移动监控系统及方法
CN101814181A (zh) * 2010-03-17 2010-08-25 天津理工大学 一种鱼眼图像复原的展开方法
CN102013110A (zh) * 2010-11-23 2011-04-13 李建成 三维全景图像生成方法及系统
CN103763479A (zh) * 2013-12-31 2014-04-30 深圳英飞拓科技股份有限公司 实时高速高清全景视频的拼接装置及其方法
CN104835118A (zh) * 2015-06-04 2015-08-12 浙江得图网络有限公司 通过两路鱼眼摄像头采集全景图像的方法
CN205545526U (zh) * 2016-01-20 2016-08-31 北京疯景科技有限公司 一种获得全景图像的装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546680B (zh) * 2013-07-08 2018-06-08 上海智汽电子科技有限公司 一种无变形的全方位鱼眼摄像装置及实现方法
US9892493B2 (en) * 2014-04-21 2018-02-13 Texas Instruments Incorporated Method, apparatus and system for performing geometric calibration for surround view camera solution
CN204948192U (zh) * 2015-08-17 2016-01-06 苏州瀚易特信息技术股份有限公司 一种外置全景摄像附件及全景摄像装置
CN105049569A (zh) * 2015-08-20 2015-11-11 擎亚国际贸易(上海)有限公司 基于手机前后摄像头的全景照片合成方法
CN204948207U (zh) * 2015-09-18 2016-01-06 成都易瞳科技有限公司 全景图像采集装置
CN204948208U (zh) * 2015-09-18 2016-01-06 成都易瞳科技有限公司 全景图像采集系统
CN105516569A (zh) * 2016-01-20 2016-04-20 北京疯景科技有限公司 一种获得全景图像的方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030063089A1 (en) * 1998-05-27 2003-04-03 Ju-Wei Chen Image-based method and system for building spherical panoramas
CN101261726A (zh) * 2008-03-18 2008-09-10 中国人民解放军国防科学技术大学 DSP上用查表法进行折反射全景展开的Cache包围盒加速方法
CN101561270A (zh) * 2009-05-27 2009-10-21 天津理工大学 嵌入式全向球视觉目标检测和移动监控系统及方法
CN101814181A (zh) * 2010-03-17 2010-08-25 天津理工大学 一种鱼眼图像复原的展开方法
CN102013110A (zh) * 2010-11-23 2011-04-13 李建成 三维全景图像生成方法及系统
CN103763479A (zh) * 2013-12-31 2014-04-30 深圳英飞拓科技股份有限公司 实时高速高清全景视频的拼接装置及其方法
CN104835118A (zh) * 2015-06-04 2015-08-12 浙江得图网络有限公司 通过两路鱼眼摄像头采集全景图像的方法
CN205545526U (zh) * 2016-01-20 2016-08-31 北京疯景科技有限公司 一种获得全景图像的装置

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017124868A1 (zh) * 2016-01-20 2017-07-27 北京疯景科技有限公司 一种获得全景图像的方法和装置
CN109076255A (zh) * 2016-04-26 2018-12-21 Lg电子株式会社 发送360度视频的方法、接收360度视频的方法、发送360度视频的设备、接收360度视频的设备
CN106327478A (zh) * 2016-08-31 2017-01-11 北京的卢深视科技有限公司 一种鱼眼全景图像合成处理方法及装置
CN106292167A (zh) * 2016-08-31 2017-01-04 李文松 一种优化的双目全景摄影装置及图像制作方法
CN106292167B (zh) * 2016-08-31 2020-04-21 李文松 一种优化的双目全景摄影装置及图像制作方法
WO2018081924A1 (zh) * 2016-11-01 2018-05-11 深圳岚锋创视网络科技有限公司 一种全景图像的生成方法、系统及拍摄装置
CN106534650A (zh) * 2016-12-21 2017-03-22 北京疯景科技有限公司 全景图像的拍摄系统及方法
CN113014754A (zh) * 2017-02-23 2021-06-22 钰立微电子股份有限公司 产生全景深度图像的图像装置及相关图像装置
CN113014754B (zh) * 2017-02-23 2024-01-12 钰立微电子股份有限公司 用于产生图像的图像装置
CN106897977A (zh) * 2017-02-28 2017-06-27 长沙全度影像科技有限公司 一种鱼眼图像边缘增强方法
CN109429008B (zh) * 2017-08-31 2021-07-09 佳能株式会社 图像处理装置、信息处理系统、信息处理方法和存储介质
CN109429008A (zh) * 2017-08-31 2019-03-05 佳能株式会社 图像处理装置、信息处理系统、信息处理方法和存储介质
US11023999B2 (en) 2017-08-31 2021-06-01 Canon Kabushiki Kaisha Image processing apparatus, information processing system, information processing method, and storage medium
CN107911685A (zh) * 2017-10-23 2018-04-13 银河威尔科技(北京)有限公司 一种3Dvr直播封装的方法和装置
CN109819157A (zh) * 2017-11-20 2019-05-28 富泰华工业(深圳)有限公司 全景摄像机及其控制方法
CN107944390B (zh) * 2017-11-24 2018-08-24 西安科技大学 机动车行驶前方物体视频测距及方向定位方法
CN107944390A (zh) * 2017-11-24 2018-04-20 西安科技大学 机动车行驶前方物体视频测距及方向定位方法
CN110349077A (zh) * 2018-04-02 2019-10-18 杭州海康威视数字技术股份有限公司 一种全景图像合成方法、装置及电子设备
CN108650468A (zh) * 2018-05-30 2018-10-12 信利光电股份有限公司 一种获取全景图像的方法、装置、设备及存储介质
CN112002002A (zh) * 2020-08-18 2020-11-27 广州海事科技有限公司 航道建模方法、系统、计算机设备、及存储介质

Also Published As

Publication number Publication date
WO2017124868A1 (zh) 2017-07-27

Similar Documents

Publication Publication Date Title
CN105516569A (zh) 一种获得全景图像的方法和装置
US11659282B2 (en) Image processing system and image processing method
CN205545526U (zh) 一种获得全景图像的装置
CN102821238B (zh) 宽视场超高分辨率成像系统
CN107925751B (zh) 用于多视点降噪和高动态范围的系统和方法
CN206524898U (zh) 全景图像拍摄装置以及图像处理系统
KR100898824B1 (ko) 회전 대칭형의 광각 렌즈를 이용하여 전방위 영상 및 직선수차보정 영상을 얻는 방법 및 그 영상 시스템
CN204761606U (zh) 通过无线通信频道提供即时图像的系统及全景视频采集装置
JP6106764B2 (ja) 撮像装置及びタイムラプス撮像方法
CN108933920B (zh) 一种视频画面的输出、查看方法及装置
TWI530182B (zh) 超廣角影像之處理系統與方法
US20100045773A1 (en) Panoramic adapter system and method with spherical field-of-view coverage
JP5959714B2 (ja) 撮像装置
JP5946970B2 (ja) 撮像装置及び撮像方法
CN108347556A (zh) 全景图像拍摄方法、全景图像显示方法、全景图像拍摄装置以及全景图像显示装置
CN105554478A (zh) 视频监控系统及方法
CN102117008A (zh) 一种球面全景监控装置
CN107333051B (zh) 一种室内全景视频生成方法及装置
CN104570577A (zh) 一种720度全景照相机
CN206117890U (zh) 一种全景360度虚拟现实成像系统
CN101958891A (zh) 利用便携式拍摄设备构建房产全景展示的系统和方法
CN108347557A (zh) 全景图像拍摄装置、显示装置、拍摄方法以及显示方法
CN106357966A (zh) 全景图像拍摄装置及全景图像获取方法
CN106303179A (zh) 一种用于移动终端的全景镜头
CN105812640A (zh) 球型全景摄像装置及其视频图像传输方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160420

RJ01 Rejection of invention patent application after publication