CN111263132A - 一种集成成像环扇形微图像阵列生成方法 - Google Patents

一种集成成像环扇形微图像阵列生成方法 Download PDF

Info

Publication number
CN111263132A
CN111263132A CN202010113447.5A CN202010113447A CN111263132A CN 111263132 A CN111263132 A CN 111263132A CN 202010113447 A CN202010113447 A CN 202010113447A CN 111263132 A CN111263132 A CN 111263132A
Authority
CN
China
Prior art keywords
ring
ring sector
sector
image
image element
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010113447.5A
Other languages
English (en)
Other versions
CN111263132B (zh
Inventor
邢妍
王琼华
李爽
任慧
夏云鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan University
Beihang University
Original Assignee
Sichuan University
Beihang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan University, Beihang University filed Critical Sichuan University
Priority to CN202010113447.5A priority Critical patent/CN111263132B/zh
Publication of CN111263132A publication Critical patent/CN111263132A/zh
Application granted granted Critical
Publication of CN111263132B publication Critical patent/CN111263132B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/243Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays

Abstract

本发明提出一种集成成像环扇形微图像阵列生成方法,所述方法通过计算每个环扇形图像元对应的中心点坐标,并以该中心点为原点建立每个图像元对应的坐标系,之后检测周围像素点到中心点的距离和夹角,对环扇形区域内的像素进行精确筛选,最终生成环扇形微图像阵列。所述方法可为桌面360°环视或单边环绕观看3D显示提供正确的数据来源。

Description

一种集成成像环扇形微图像阵列生成方法
一、技术领域
本发明涉及3D信息获取技术,特别涉及一种集成成像环扇形微图像阵列生成方法。
二、背景技术
集成成像是一种裸眼3D技术,主要包括获取和显示两个互逆过程。获取时,利用摄像机阵列对场景进行拍摄,将场景不同角度的信息处理生成微图像阵列;显示时,微图像阵列通过微透镜阵列在观看空间重建出3D图像。
集成成像3D显示能够重建出全彩色、全视差的真3D图像,因此它不但可以用于常规墙面3D显示中,而且还可应用到桌面360°环视或单边环绕观看3D显示中,如附图1所示。但是,桌面360°环视或单边环绕观看3D显示的最佳观看视区为环形或环扇形,与常规墙面3D显示的方形视区并不一致。同时,环形或环扇形视区内,观看视点也同样为环形或环扇形排布,越靠近内侧,视点排布越密集,这与常规墙面3D显示的等间隔视点排布也不一致。目前尚未有对应环扇形视区的微图像阵列生成方法出现。
三、发明内容
为解决上述问题,本发明提出一种集成成像环扇形微图像阵列生成方法,所述方法通过计算每个环扇形图像元对应的中心点坐标,并以该中心点为原点建立每个图像元对应的坐标系,之后检测周围像素点到中心点的距离和夹角,对环扇形区域内的像素进行精确筛选,最终生成环扇形微图像阵列。
所述方法包括以下四个步骤。
第一步,获取环扇形排布的视差图像序列。
第二步,计算每个环扇形图像元对应的中心点坐标,建立每个图像元对应的坐标系。
第三步,检测周围像素点到中心点的距离和夹角。
第四步,筛选环扇形区域内的像素,生成环扇形微图像阵列。
所述第一步,获取环扇形排布的视差图像序列步骤中,首先搭建环扇形排布的摄像机阵列,所述摄像机阵列包含的摄像机个数为M×N,其中M表示水平环向上的摄像机个数,N表示径向上的摄像机个数,m和n分别表示摄像机在水平环向和径向上的索引。水平环向上,相邻摄像机与环扇形中心连线的夹角为θ。径向上,相邻摄像机与环扇形中心在一条直线上,相邻摄像机间隔为d。摄像机阵列以会聚式摆放方式对3D场景进行拍摄,获得环扇形排布的M×N幅视差图像序列。
所述第二步,计算每个环扇形图像元对应的中心点坐标,建立每个图像元对应的坐标系。假设环扇形图像元对应的中心点相比常规方形图像元中心点的像素偏移量表示为so,则第(i,j)个环扇形图像元对应的中心点Oi,j坐标(xo,yo)i,j满足:
Figure BDA0002390762370000021
Figure BDA0002390762370000022
其中,i和j分别表示微图像阵列内环扇形图像元在水平和竖直方向上的索引,i∈{1,2,3,…,I},j∈{1,2,3,…,J},I×J为环扇形图像元的个数,WEI×HEI表示每个环扇形图像元外围矩形包含的像素数目。接着,以中心点Oi,j为原点,建立第(i,j)个环扇形图像元对应的坐标系x'-y'。
所述第三步,检测周围像素点到中心点的距离和夹角步骤中,中心点周围像素点Pi,j到中心点Oi,j的距离di,j(x,y)满足:
Figure BDA0002390762370000023
其中(x,y)为像素点Pi,j的坐标,x∈[xo-floor((WEI-1)/2),xo+floor(WEI/2)],y∈[yo-floor((HEI-1)/2)–so,yo+floor(HEI/2)–so],floor(*)表示取整。像素点Pi,j与中心点Oi,j的连线和x'轴的夹角αi,j(x,y)满足:
Figure BDA0002390762370000024
其中,mod(*,*)表示取余。
所述第四步,筛选环扇形区域内的像素,生成环扇形微图像阵列步骤中,对计算的距离di,j(x,y)和夹角αi,j(x,y)进行判断,剔除环扇形区域之外的像素,并将视差图像序列的像素映射到环扇形图像元的像素中,合成环扇形微图像阵列E(x,y)。环扇形微图像阵列E(x,y)与视差图像Im,n(x,y)满足:
E(x,y)=Im,n(x,y) (5)
Figure BDA0002390762370000025
其中,
Figure BDA0002390762370000026
表示单个视区在水平环向上的观看视角。
根据本发明提出的一种集成成像环扇形微图像阵列生成方法,通过建立每个图像元对应的坐标系,对环扇形区域内的像素进行精确筛选,生成对应于环扇形观看视区的微图像阵列。所述方法可为桌面360°环视或单边环绕观看3D显示提供正确的数据来源。
四、附图说明
本发明的前述方面及优点从下述结合附图与实施例的详细描述中将得以进一步明确和容易理解,其中:
附图1为(a)桌面360°环视和(b)单边环绕观看3D显示的效果示意图。
附图2为根据本申请一实施例的一种集成成像环扇形微图像阵列生成方法的流程图。
附图3为根据本申请一实施例的摄像机阵列环扇形排布示意图。
附图4为根据本申请一实施例的图像元对应的坐标系示意图。
附图5为根据本申请一实施例生成的环扇形微图像阵列。
上述附图中的图示标号为:
1显示的3D图像,2观看者,3环形观看视区,4环扇形观看视区,5摄像机阵列,6 3D场景,7环扇形图像元,8微图像阵列。
应该理解上述附图只是示意性的,并没有按比例绘制。
五、具体实施方式
为了便于理解本申请,下面将参照相关附图对本申请进行更全面的描述。附图中给出了本申请的可选的实施例。但是,本申请可以以许多不同的形式来实现,并不限于本文所描述的实施例。相反地,提供这些实施例的目的是使对本申请的公开内容的理解更加透彻全面。
除非另有定义,本文所使用的所有技术和科学术语与属于发明的技术领域的技术人员通常理解的含义相同。本文中在发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在限制本申请。本文所使用的术语“和/或”包括一个或多个相关的所列项目的任意的和所有的组合。
本文所使用的方位术语“垂直”、“水平”以及类似的表述只是为了说明的目的,并不表示是唯一的实施方式也并非对于本申请的限制。
下面将结合本申请公开的实施例及附图对本申请所提出的一种集成成像环扇形微图像阵列生成方法进行详细的描述。
图2示出了根据本申请一实施例的一种集成成像环扇形微图像阵列生成方法,该方法包括以下步骤。
步骤S100,获取环扇形排布的视差图像序列。
步骤S200,计算每个环扇形图像元对应的中心点坐标,建立每个图像元对应的坐标系。
步骤S300,检测周围像素点到中心点的距离和夹角。
步骤S400,筛选环扇形区域内的像素,生成环扇形微图像阵列。
在一个实施例中,所述第一步,获取环扇形排布的视差图像序列步骤中,首先搭建环扇形排布的摄像机阵列,如图3所示。所述摄像机阵列5包含的摄像机个数M×N可以为50×20,其中50表示水平环向上的摄像机个数,20表示径向上的摄像机个数。水平环向上,相邻摄像机与环扇形中心连线的夹角θ可以为1.2°。径向上,相邻摄像机与环扇形中心在一条直线上,相邻摄像机间隔d可以为50mm。摄像机阵列5以会聚式摆放方式对3D场景6进行拍摄,获得环扇形排布的50×20幅视差图像序列。在一个实施例中,3D场景6为一个骰子。
在一个实施例中,所述第二步,计算每个环扇形图像元对应的中心点坐标,建立每个图像元对应的坐标系步骤中,图4示出了根据本申请一实施例的图像元对应的坐标系示意图。假设环扇形图像元对应的中心点相比传统方形图像元中心点的像素偏移量表示为so=37,则第(i,j)个环扇形图像元7对应的中心点Oi,j坐标(xo,yo)i,j满足:
Figure BDA0002390762370000041
Figure BDA0002390762370000042
其中,i和j分别表示微图像阵列8内环扇形图像元7在水平和竖直方向上的索引,i∈{1,2,3,…,40},j∈{1,2,3,…,40},40×40为环扇形图像元7的个数,WEI×HEI=50×50表示每个环扇形图像元7外围矩形包含的像素数目。在一个实施例中,第(10,10)个环扇形图像元7对应的中心点O10,10坐标(xo,yo)10,10为(475,512)10,10。接着,以中心点O10,10为原点,建立第(10,10)个环扇形图像元7对应的坐标系x'-y'。
在一个实施例中,所述第三步,检测周围像素点到中心点的距离和夹角步骤中,中心点周围像素点Pi,j到中心点Oi,j的距离di,j(x,y)满足:
Figure BDA0002390762370000043
其中(x,y)为像素点Pi,j的坐标,在一个实施例中,x∈[451,500],y∈[451,500]。像素点Pi,j与中心点Oi,j的连线和x'轴的夹角αi,j(x,y)满足:
Figure BDA0002390762370000044
其中,mod(*,*)表示取余。在一个实施例中,坐标为(470,490)的像素点P10,10距中心点O10,10的距离d10,10(470,490)为22.56个像素,像素点P10,10与中心点O10,10的连线和x'轴的夹角α10,10(470,490)为103°。
在一个实施例中,所述第四步,筛选环扇形区域内的像素,生成环扇形微图像阵列步骤中,对计算的距离di,j(x,y)和夹角αi,j(x,y)进行判断,剔除环扇形区域之外的像素,并将视差图像序列的像素映射到环扇形图像元的像素中,合成环扇形微图像阵列E(x,y)。环扇形微图像阵列E(x,y)与视差图像Im,n(x,y)满足:
E(x,y)=Im,n(x,y) (5)
Figure BDA0002390762370000051
其中,
Figure BDA0002390762370000052
表示单个视区在水平环向上的观看视角。在一个实施例中,
Figure BDA0002390762370000053
图5示出了根据本申请一实施例生成的环扇形微图像阵列。

Claims (5)

1.一种集成成像环扇形微图像阵列生成方法,其特征在于,所述方法通过计算每个环扇形图像元对应的中心点坐标,并以该中心点为原点建立每个图像元对应的坐标系,之后检测周围像素点到中心点的距离和夹角,对环扇形区域内的像素进行精确筛选,最终生成环扇形微图像阵列;所述方法包括以下四个步骤,第一步,获取环扇形排布的视差图像序列;第二步,计算每个环扇形图像元对应的中心点坐标,建立每个图像元对应的坐标系;第三步,检测周围像素点到中心点的距离和夹角;第四步,筛选环扇形区域内的像素,生成环扇形微图像阵列。
2.根据权利要求1所述的一种集成成像环扇形微图像阵列生成方法,其特征在于,所述第一步,获取环扇形排布的视差图像序列步骤中,首先搭建环扇形排布的摄像机阵列,所述摄像机阵列包含的摄像机个数为M×N,其中M表示水平环向上的摄像机个数,N表示径向上的摄像机个数,m和n分别表示摄像机在水平环向和径向上的索引,水平环向上,相邻摄像机与环扇形中心连线的夹角为θ,径向上,相邻摄像机与环扇形中心在一条直线上,摄像机阵列以会聚式摆放方式对3D场景进行拍摄,获得环扇形排布的M×N幅视差图像序列。
3.根据权利要求1所述的一种集成成像环扇形微图像阵列生成方法,其特征在于,所述第二步,计算每个环扇形图像元对应的中心点坐标,建立每个图像元对应的坐标系步骤中,假设环扇形图像元对应的中心点相比传统方形图像元中心点的像素偏移量表示为so,则第(i,j)个环扇形图像元对应的中心点Oi,j坐标(xo,yo)i,j满足
Figure FDA0002390762360000011
Figure FDA0002390762360000012
其中,i和j分别表示微图像阵列内环扇形图像元在水平和竖直方向上的索引,i∈{1,2,3,…,I},j∈{1,2,3,…,J},I×J为环扇形图像元的个数,WEI×HEI表示每个环扇形图像元外围矩形包含的像素数目,接着,以中心点Oi,j为原点,建立第(i,j)个环扇形图像元对应的坐标系x'-y'。
4.根据权利要求1所述的一种集成成像环扇形微图像阵列生成方法,其特征在于,所述第三步,检测周围像素点到中心点的距离和夹角步骤中,第(i,j)个环扇形图像元对应的中心点Oi,j到周围像素点Pi,j的距离di,j(x,y)满足
Figure FDA0002390762360000013
其中(x,y)为像素点Pi,j的坐标,(xo,yo)为中心点Oi,j的坐标,x∈[xo-floor((WEI-1)/2),xo+floor(WEI/2)],y∈[yo-floor((HEI-1)/2)–so,yo+floor(HEI/2)–so],floor(*)表示取整,WEI×HEI表示每个环扇形图像元外围矩形包含的像素数目,像素点Pi,j与中心点Oi,j的连线和x'轴的夹角αij(x,y)满足
Figure FDA0002390762360000021
其中,mod(*,*)表示取余。
5.根据权利要求1所述的一种集成成像环扇形微图像阵列生成方法,其特征在于,所述第四步,筛选环扇形区域内的像素,生成环扇形微图像阵列步骤中,对计算的第(i,j)个环扇形图像元对应的中心点Oi,到周围像素点Pi,j的距离di,j(x,y)和夹角αi,j(x,y)进行判断,剔除环扇形区域之外的像素,并将视差图像序列的像素映射到环扇形图像元的像素中,合成环扇形微图像阵列E(x,y),其与视差图像Im,n(x,y)满足E(x,y)=Im,n(x,y),
Figure FDA0002390762360000022
其中,
Figure FDA0002390762360000023
表示单个视区在水平环向上的观看视角。
CN202010113447.5A 2020-02-24 2020-02-24 一种集成成像环扇形微图像阵列生成方法 Active CN111263132B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010113447.5A CN111263132B (zh) 2020-02-24 2020-02-24 一种集成成像环扇形微图像阵列生成方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010113447.5A CN111263132B (zh) 2020-02-24 2020-02-24 一种集成成像环扇形微图像阵列生成方法

Publications (2)

Publication Number Publication Date
CN111263132A true CN111263132A (zh) 2020-06-09
CN111263132B CN111263132B (zh) 2021-03-19

Family

ID=70947411

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010113447.5A Active CN111263132B (zh) 2020-02-24 2020-02-24 一种集成成像环扇形微图像阵列生成方法

Country Status (1)

Country Link
CN (1) CN111263132B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103048866A (zh) * 2012-12-13 2013-04-17 浙江大学 基于平面显示器的悬浮式360°光场三维显示装置和方法
CN103777455A (zh) * 2014-02-25 2014-05-07 浙江大学 基于光场拼接的球形沉浸式三维显示方法及系统
CN104519341A (zh) * 2015-01-08 2015-04-15 四川大学 一种任意倾斜角度的集成成像微图像阵列的生成方法
CN105425404A (zh) * 2015-11-20 2016-03-23 上海誉沛光电科技有限公司 一种集成成像光学系统
CN107608085A (zh) * 2017-09-15 2018-01-19 四川大学 基于组合微图像阵列的360°集成成像桌面3d显示装置
CN108881881A (zh) * 2018-08-03 2018-11-23 北京航空航天大学 一种集成成像桌面3d显示的自适应微图像阵列生成方法
CN108919503A (zh) * 2018-08-03 2018-11-30 北京航空航天大学 一种基于视角导向层的集成成像360°桌面3d显示系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103048866A (zh) * 2012-12-13 2013-04-17 浙江大学 基于平面显示器的悬浮式360°光场三维显示装置和方法
CN103777455A (zh) * 2014-02-25 2014-05-07 浙江大学 基于光场拼接的球形沉浸式三维显示方法及系统
CN104519341A (zh) * 2015-01-08 2015-04-15 四川大学 一种任意倾斜角度的集成成像微图像阵列的生成方法
CN105425404A (zh) * 2015-11-20 2016-03-23 上海誉沛光电科技有限公司 一种集成成像光学系统
CN107608085A (zh) * 2017-09-15 2018-01-19 四川大学 基于组合微图像阵列的360°集成成像桌面3d显示装置
CN108881881A (zh) * 2018-08-03 2018-11-23 北京航空航天大学 一种集成成像桌面3d显示的自适应微图像阵列生成方法
CN108919503A (zh) * 2018-08-03 2018-11-30 北京航空航天大学 一种基于视角导向层的集成成像360°桌面3d显示系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
QIONG-HUA WANG,ET AL: "• Dual-view 3D displays based on integral imaging", 《ADVANCES IN DISPLAY TECHNOLOGIES VI》 *
XIN GAO,ET AL: "Aberration improvement of the floating 3D display system based on Tessar array and directional diffuser screen", 《OPTICAL REVIEW》 *
邓欢,等: "基于不同微透镜阵列参数的集成成像微图像阵列生成方法", 《光电子技术》 *

Also Published As

Publication number Publication date
CN111263132B (zh) 2021-03-19

Similar Documents

Publication Publication Date Title
CN1213602C (zh) 快速数字平移角倾变焦距的视频设备
US10593014B2 (en) Image processing apparatus, image processing system, image capturing system, image processing method
US9704265B2 (en) Optical-flow imaging system and method using ultrasonic depth sensing
KR101521008B1 (ko) 어안 렌즈를 사용하여 얻은 왜곡영상에 대한 보정방법 및 이를 구현하기 위한 영상 디스플레이 시스템
JP5454674B2 (ja) 画像生成装置、画像生成プログラム、合成テーブル生成装置および合成テーブル生成プログラム
CN103971375A (zh) 一种基于图像拼接的全景凝视相机空间标定方法
CN108234989B (zh) 一种基于棋盘格标定板的会聚式集成成像拍摄方法
CN108881881B (zh) 一种集成成像桌面3d显示的自适应微图像阵列生成方法
RU2654127C1 (ru) Способ формирования цифрового панорамного изображения
CN111263132B (zh) 一种集成成像环扇形微图像阵列生成方法
CN114511447A (zh) 图像处理方法、装置、设备及计算机存储介质
CN111080523B (zh) 红外周视搜索系统及基于角度信息的红外周视图像拼接方法
US10783646B2 (en) Method for detecting motion in a video sequence
JP7192526B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2001005956A (ja) 広視野カメラ装置
CN108205799A (zh) 一种图像拼接方法及装置
CN111028257A (zh) 微透镜子图像几何中心及边缘的提取方法及装置
US11800080B2 (en) Distribution image generation method
CN111432196B (zh) 一种基于光线跟踪的集成成像环扇形微图像阵列生成方法
JP6626367B2 (ja) 立体像調整装置及び立体像調整方法
WO2018150086A2 (en) Methods and apparatuses for determining positions of multi-directional image capture apparatuses
CN108876712B (zh) 基于双投影变换的球形封闭座舱全景显示方法
JP4183466B2 (ja) 全方位双眼立体視画像の生成方法
US20060055807A1 (en) Imaging methods, image sensors, imaging systems, and articles of manufacture
JPH1118007A (ja) 全方向性画像表示システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant