CN111164970B - 一种光场采集方法及采集装置 - Google Patents

一种光场采集方法及采集装置 Download PDF

Info

Publication number
CN111164970B
CN111164970B CN201780093187.6A CN201780093187A CN111164970B CN 111164970 B CN111164970 B CN 111164970B CN 201780093187 A CN201780093187 A CN 201780093187A CN 111164970 B CN111164970 B CN 111164970B
Authority
CN
China
Prior art keywords
image information
camera
cameras
same
different
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780093187.6A
Other languages
English (en)
Other versions
CN111164970A (zh
Inventor
李乔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu jishiyuan Technology Co.,Ltd.
Original Assignee
Jishi Technology Hainan Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jishi Technology Hainan Co ltd filed Critical Jishi Technology Hainan Co ltd
Publication of CN111164970A publication Critical patent/CN111164970A/zh
Application granted granted Critical
Publication of CN111164970B publication Critical patent/CN111164970B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供一种光场采集的方法,所述方法包括:a)由多个光场摄像头阵列成摄像头组,多个所述摄像头组阵列成摄像头墙,同一所述摄像头组内的多个摄像头具有不同的焦距;b)所述摄像头墙的多个所述摄像头组采集不同视角下的空间影像信息,所述同一摄像头组中的多个所述摄头采集同一视角下不同空间纵深的影像信息;c)所述摄像头将采集到的影像信息发送至影像处理计算机,所述影像处理计算机对采集的影像信息进行去噪处理和影像信息校验,得到完整的空间影像信息。本发明提供的一种光场采集的方法通过具有不同焦距的摄像头获取空间中不同纵深的影像信息,从而完整采集和记录整个光场。

Description

一种光场采集方法及采集装置
技术领域
本发明涉及光场采集技术领域,特别涉及一种光场采集方法及采集装置。
背景技术
至今为止几乎任何3D影像技术都是基于这个偏光原理开发的。1839年,英国科学家温斯特发现了一个奇妙的现象,人的两眼间距约为5cm(欧洲人平均值),看任何物体时,两只眼睛的角度不重合,即存在两个视角。这种细微的视角差异经由视网膜传递到大脑里,就能区别出物体的前后远近,产生强烈的立体感。这便是—偏光原理,至今为止几乎任何3D影像技术都是基于这个原理开发的。
但是基于“偏光原理”的3D设备无法解决人们在使用过程中导致的眩晕问题。在自然环境中,左右视差和眼睛对焦系统可以相互印证,以使得大脑知道这两个功能正在默契的配合。当用户在观看基于“偏光原理”的3D影像的时候由于缺乏眼睛对焦系统的参与,大脑的两套距离感受系统和自然环境中的观察存在差异,这种差异就会让大脑非常不适应,这时候眩晕感就产生了。
为了解决3D视频中的眩晕问题,业界在引入了光场理论解决方案。其中在3D拍摄领域比较有代表性的公司是Lytro。Lytro的光场相机采用的是微型透镜阵列的方法解决记录单根光线的位置和方向,但是透镜阵列的方式目前有几个比较大的缺点:像素损耗大,4000万像素光场照片的解析度普通照片输出分辨率仅为2450×1634(约400万像素);速度慢,由于单张照片它记录的数据量高达50M,当拍摄过快时相机的存储运算跟不上造成的,每张图片都需要几秒钟的加载时间。
3D播放领域比较有代表性的公司是Magic Leap公司做的基于光场理论的解决方案,但是该方案采用光纤扫描技术来实现光场显示,光纤由于涉及到光纤的旋转、角度以及发光的控制,其在控制方面存在一定难度。另外,现有技术中提出的多焦点显示方法利用一个眼睛检测系统检测眼睛观察点然后再重新渲染图片,调节投向眼睛的图片,每次投一个纵深信息的图像,难以实现完整的还原整个光场。
因此,为了解决上述问题,需要一种能够完整采集和记录整个光场,方便光场快速完整还原的光场采集方法及采集装置。
发明内容
本发明的一个方面在于提供一种光场采集的方法,所述方法包括:
a)由多个光场摄像头阵列成摄像头组,多个所述摄像头组阵列成摄像头墙,同一所述摄像头组内的多个摄像头具有不同的焦距;
b)所述摄像头墙的多个所述摄像头组采集不同视角下的空间影像信息,所述同一摄像头组中的多个所述摄头采集同一视角下不同空间纵深的影像信息;
c)所述摄像头将采集到的影像信息发送至影像处理计算机,所述影像处理计算机对采集的影像信息进行去噪处理和影像信息校验,得到完整的空间影像信息。
优选地,同一所述摄像头组内的多个摄像头呈紧密阵列,并且使每个摄像头均能采集到同一视角下的空间区域的完整影像信息。
优选地,同一所述摄像头组内的多个摄像头同时采集不同空间纵深的影像信息。
优选地,同一所述摄像头组内的多个摄像头采用不同的像距相同焦距采集不同空间纵深的影像信息。
优选地,同一所述摄像头组内的多个摄像头采用相同的像距不同焦距采集不同空间纵深的影像信息。
优选地,所述摄像头墙由多个所述摄像头组阵列于平面或球面的基座上。
优选地,经过去噪处理去除掉所述采集的影像信息中不聚焦的部分。
优选地,所述去噪除处理采用抠图的方法去除所述采集的影像信息中不聚焦的部分。
本发明的另一个方面在于提供一种光场采集装置,所述装置包括平面或球面的基座、安装于所述平面或球面基座上的摄像头墙,以及影像处理计算机;
所述摄像头墙包括阵列的多个摄像头组,所述摄像头组包括阵列的多个摄像头,同一所述摄像头组内的多个摄像头具有不同的焦距;
所述摄像头墙的多个所述摄像头组,用于采集不同视角下的空间影像信息;所述同一摄像头组中的多个所述摄像头,用于采集同一视角下不同空间纵深的影像信息;
所述影像处理计算机,用于对采集的影像信息进行去噪处理和影像信息校验。
优选地,同一所述摄像头组内的多个摄像头呈紧密阵列,并且使每个摄像头均能采集到同一视角下空间区域的完整影像信息。
本发明提供的一种光场采集方法及采集装置,通过具有不同焦距的摄像头获取不同空间纵深的影像信息,合成具有多个纵深影像信息的合集,能够完整采集和记录整个光场,方便光场的快速完整还原。
应当理解,前述大体的描述和后续详尽的描述均为示例性说明和解释,并不应当用作对本发明所要求保护内容的限制。
附图说明
参考随附的附图,本发明更多的目的、功能和优点将通过本发明实施方式的如下描述得以阐明,其中:
图1a~图1b示意性示出了本发明光场采集装置的示意图;
图2示出了本发明光场采集方法的流程框图;
图3示出了本发明摄像头墙采集不同空间区域影像的示意图;
图4示出了本发明一个实施例中摄像头组对应空间区域的影像示意图;
图5示出了本发明同一摄像头组采集不同空间纵深影像的示意图。
具体实施方式
通过参考示范性实施例,本发明的目的和功能以及用于实现这些目的和功能的方法将得以阐明。然而,本发明并不受限于以下所公开的示范性实施例;可以通过不同形式来对其加以实现。说明书的实质仅仅是帮助相关领域技术人员综合理解本发明的具体细节。
在下文中,将参考附图描述本发明的实施例。在附图中,相同的附图标记代表相同或类似的部件,或者相同或类似的步骤,除非另有说明。
下面结合附图通过具体的实施例对本发明的内容进行详细的描述,如图1a~图1b所示的本发明光场采集装置的示意图,根据本发明实施例中一种光场采集装置包括凸起的球面基座、安装于球面基座外侧的摄像头墙100,以及影像处理计算机,本实施例采用球面基座,摄像头墙100安装于球面基座的外侧100b能够使摄像头墙100全方位采集空间区域的影像信息。对用于安装摄像头墙100的基座可以平面或球面,本实施例优选地采用球面基座。
摄像头墙100包括阵列的多个摄像头组110,所述摄像头组110包括阵列的多个摄像头111,同一摄像头组110内的多个摄像头111呈紧密阵列,并且使每个摄像头均能采集到同一视角下的空间区域的完整影像信息,同一摄像头组110内的多个摄像头111具有不同的焦距。摄像头111在球面基座的内侧100a与影像处理计算机实现数据传输,具体地数据传输可以是有线连接进行数据传输,也可以是无线数据传输。
摄像头墙100的多个摄像头组110用于采集不同视角下的空间影像信息,同一摄像头组110中的多个摄头头111用于采集同一视角下不同空间纵深的影像信息,影像处理计算机对采集的影像信息进行去噪处理和影像信息校验。
如图2所示本发明光场采集方法的流程框图,本发明所公开的一种光场采集的方法包括:
S101、采集影像信息,由多个光场摄像头阵列成摄像头组,多个摄像头组阵列成摄像头墙,同一摄像头组内的多个摄像头具有不同的焦距,摄像头墙由多个摄像头组阵列于凸起的球面基座外侧,用于采集空间区域的影像信息。
其中,摄像头墙的多个摄像头组采集不同视角下的空间影像信息,同一摄像头组中的多个摄头采集同一视角下不同空间纵深的影像信息。如图3所示本发明摄像头墙采集不同视角下的空间影像的示意图,摄像头墙100安装于球面基座的上,不同的摄像头组110采集不同视角下的空间区域的影像信息。实施例中,相邻的三个摄像头组分别采集空间区域A、空间区域B和空间区域C的影像信息。相邻摄像头组之间采集的空间区域应当具有重叠的部分,从而确保采集的空间影像信息的完整性。
对于同一所述摄像头组内的多个摄像头呈紧密阵列,并且使每个摄像头均能采集到同一视角下的空间区域的完整影像信息。如图4所示本发明一个实施例中摄像头组对应空间区域的影像示意图,如图5所示本发明同一摄像头组采集同一视角下的不同空间纵深影像的示意图。同一摄像头组内的多个摄像头同时采集不同空间纵深的影像信息,本实施例中同一摄像头组内的多个摄像头采用相同的焦距不同的像距采集不同空间纵深的影像信息。在一些实施例中,同一摄像头组内的多个摄像头可以采用相同的像距不同的焦距采集不同空间纵深的影像信息。
本实施例以第m个摄像头组对应的同一视角下的空间区域A为例,摄像头组对应采集的空间区域A中空间纵深不同的影像信息包括第一影像(小狗)201、第二影像202(树木)和第三影像(太阳)203,第一影像(小狗)201与摄像头墙的距离最近,第二影像(树木)202次之,第三影像(太阳)203距离摄像头墙的距离最远。第m个摄像头组阵列的多个摄像头分别采集不同空间纵深的影像信息,根据本发明公开的光场采集方法,同一摄像头组的多个摄像头具有不同的焦距,具有不同空间纵深的影像信息总是在某一摄像头中聚焦成像。
下面进行示例性的说明,第m个摄像头组中的第1个摄像头使第一影像(小狗)201聚焦,第1个摄像头拍摄到的影像信息中,第一影像(小狗)201清晰成像,第二影像202(树木)和第三影像(太阳)203模糊成像。同样地,第2个摄像头拍摄到的影像信息中,第二影像(树木)202清晰成像,第一影像201(小狗)和第三影像(太阳)203模糊成像;第n个摄像头拍摄到的影像信息中,第三影像(太阳)203清晰成像,第一影像201(小狗)和第二影像(树木)202模糊成像。应当理解,实施例中每一个影像也具有不同空间纵深,对同一影像的不同空间纵深由多个摄像头分别获取不同空间纵深的影像信息。举例来说,对于第一影像(小狗)201,相对于摄像头墙小狗的眼睛距离摄像头墙较近,小狗的尾巴距离摄像头墙较远,由具有不同焦距的摄像头分别采集第一影像(小狗)201的空间纵深影像信息。经过多个摄像头的采集,采集到空间区域A完整的空间纵深的影像信息。
S102、影像信息去噪处理,摄像头墙的每一个摄像头将采集的影像信息发送至影像处理计算机。由于每一个摄像头只对具有某一空间纵深的影像信息聚焦,每一个摄像头采集的影像信息有且只有唯一的聚焦点,对于其他不聚焦的部分进行去噪处理,经过去噪处理去除掉采集的影像信息中不聚焦的部分。对于去噪的方法根据本领域技术人员所能想到的现有技术进行去噪,优选地采用抠图的方法进行去噪处理。
S103、影像信息校验,对经过去噪处理后每一个摄像头采集的影像信息进行影像信息校验,从而确保每一个摄像头采集的影像信息有且只有唯一的聚焦点。
S104、空间影像信息合集,同一摄像头组中的多个摄像头采集到的影像信息合成具有同一视角下完整空间纵深的A区域影像信息,摄像头墙中的多个摄像头组将采集的不同视角下的空间区域的影像信息,得到完整的空间影像信息,实现完整光场采集。
本发明提供的一种光场采集方法及采集装置,通过具有不同焦距的摄像头获取不同空间纵深的影像信息,从现实环境中采集影像信息,合成具有多个纵深影像信息的合集,能够完整采集和记录整个光场,方便光场的快速完整还原。
结合这里披露的本发明的说明和实践,本发明的其他实施例对于本领域技术人员都是易于想到和理解的。说明和实施例仅被认为是示例性的,本发明的真正范围和主旨均由权利要求所限定。

Claims (8)

1.一种光场采集的方法,其特征在于,所述方法包括:
a)多个光场摄像头呈阵列排布构成摄像头组,多个所述摄像头组呈阵列排布构成摄像头墙,同一所述摄像头组内的多个摄像头具有不同的焦距;
b)所述摄像头墙的多个所述摄像头组采集不同视角下的空间影像信息,所述同一摄像头组中的多个所述摄像头采集同一视角下不同空间纵深的影像信息;
c)所述摄像头将采集到的影像信息发送至影像处理计算机,所述影像处理计算机对采集的影像信息进行去噪处理和影像信息校验,经过去噪处理去除掉所述采集的影像信息中不聚焦的部分,对经过去噪处理后每一个摄像头采集的影像信息进行影像信息校验,从而确保每一个摄像头采集的影像信息有且只有唯一的聚焦点;
同一摄像头组中的多个摄像头采集的影像信息合成具有同一视角下的完整空间纵深的区域影像信息,将摄像头墙中的多个摄像头组采集的不同视角下的区域影像信息进行合并,得到完整的空间影像信息。
2.根据权利要求1所述的方法,其特征在于,同一所述摄像头组内的多个摄像头呈紧密阵列,并且使每个摄像头均能采集到同一视角下的空间区域的完整影像信息。
3.根据权利要求1所述的方法,其特征在于,同一所述摄像头组内的多个摄像头同时采集不同空间纵深的影像信息。
4.根据权利要求3所述的方法,其特征在于,同一所述摄像头组内的多个摄像头采用相同的焦距不同像距采集不同空间纵深的影像信息。
5.根据权利要求3所述的方法,其特征在于,同一所述摄像头组内的多个摄像头采用相同的像距不同焦距采集不同空间纵深的影像信息。
6.根据权利要求1所述的方法,其特征在于,所述摄像头墙由多个所述摄像头组呈阵列排布于平面或球面的基座上。
7.根据权利要求1所述的方法,其特征在于,所述去噪处理采用抠图的方法去除所述采集的影像信息中不聚焦的部分。
8.一种光场采集装置,其特征在于,所述装置包括平面或球面基座、安装于所述平面或球面基座上的摄像头墙,以及影像处理计算机;
所述摄像头墙包括呈阵列排布的多个摄像头组,所述摄像头组包括呈阵列排布的多个摄像头,同一所述摄像头组内的多个摄像头具有不同的焦距;
所述摄像头墙的多个所述摄像头组,用于采集不同视角下的空间影像信息;所述同一摄像头组中的多个所述摄像头,用于采集同一视角下不同空间纵深的影像信息;
同一所述摄像头组内的多个摄像头呈紧密阵列,并且使每个摄像头均能采集到同一视角下的空间区域的完整影像信息;
所述影像处理计算机,用于对采集的影像信息进行去噪处理和影像信息校验。
CN201780093187.6A 2017-07-18 2017-07-18 一种光场采集方法及采集装置 Active CN111164970B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/093344 WO2019014842A1 (zh) 2017-07-18 2017-07-18 一种光场采集方法及采集装置

Publications (2)

Publication Number Publication Date
CN111164970A CN111164970A (zh) 2020-05-15
CN111164970B true CN111164970B (zh) 2022-04-01

Family

ID=65014875

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780093187.6A Active CN111164970B (zh) 2017-07-18 2017-07-18 一种光场采集方法及采集装置

Country Status (2)

Country Link
CN (1) CN111164970B (zh)
WO (1) WO2019014842A1 (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104333703A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 使用双摄像头拍照的方法和终端
CN104780315A (zh) * 2015-04-08 2015-07-15 广东欧珀移动通信有限公司 摄像装置拍摄的方法和系统
CN104902263A (zh) * 2015-05-26 2015-09-09 深圳市圆周率软件科技有限责任公司 一种图像信息展现系统和方法
CN204681518U (zh) * 2015-05-26 2015-09-30 深圳市圆周率软件科技有限责任公司 一种全景图像信息采集设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9553423B2 (en) * 2015-02-27 2017-01-24 Princeton Optronics Inc. Miniature structured light illuminator
CN105227837A (zh) * 2015-09-24 2016-01-06 努比亚技术有限公司 一种图像合成方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104333703A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 使用双摄像头拍照的方法和终端
CN104780315A (zh) * 2015-04-08 2015-07-15 广东欧珀移动通信有限公司 摄像装置拍摄的方法和系统
CN104902263A (zh) * 2015-05-26 2015-09-09 深圳市圆周率软件科技有限责任公司 一种图像信息展现系统和方法
CN204681518U (zh) * 2015-05-26 2015-09-30 深圳市圆周率软件科技有限责任公司 一种全景图像信息采集设备

Also Published As

Publication number Publication date
CN111164970A (zh) 2020-05-15
WO2019014842A1 (zh) 2019-01-24

Similar Documents

Publication Publication Date Title
US20080079839A1 (en) Multi-focal camera apparatus and methods and mediums for generating focus-free image and autofocus image using the multi-focal camera apparatus
KR20170005009A (ko) 3d 라돈 이미지의 생성 및 사용
CN108600729B (zh) 动态3d模型生成装置及影像生成方法
JP6300346B2 (ja) Ip立体映像推定装置及びそのプログラム
JP2014157425A (ja) 撮像装置及びその制御方法
CN108391116B (zh) 基于3d成像技术的全身扫描装置及扫描方法
Kagawa et al. A three‐dimensional multifunctional compound‐eye endoscopic system with extended depth of field
JP2016225811A (ja) 画像処理装置、画像処理方法およびプログラム
CN111080774B (zh) 一种应用深度采样进行光场重构的方法及系统
CN110581977B (zh) 一种视频画面的输出方法、装置及三目摄像机
CN111164970B (zh) 一种光场采集方法及采集装置
JP2020194454A (ja) 画像処理装置および画像処理方法、プログラム、並びに記憶媒体
US8917316B2 (en) Photographing equipment
CN111183394B (zh) 一种分时还原光场的方法及还原装置
CN111194430B (zh) 一种基于棱镜合成光场的方法
JP5088973B2 (ja) 立体撮像装置およびその撮像方法
KR20100087920A (ko) 영상 데이터 획득 방법 및 장치
JP6491442B2 (ja) 画像処理装置、画像処理方法、プログラム及び記録媒体
KR101121132B1 (ko) 집적 영상 복원 방법 및 장치
KR100897305B1 (ko) 요소 영상을 이용한 3차원 집적 영상 방법, 시스템 및 이를실행하는 프로그램이 기록된 기록매체
CN101915977B (zh) 三维视频摄像镜头、三维摄像机
KR102241060B1 (ko) 미소거울배열을 이용하는 무안경 집적 영상 디스플레이 방법
KR101569787B1 (ko) 멀티 카메라에 의한 3d 동영상 정보 획득방법
CN109272453A (zh) 基于3d摄像机的建模装置及定位方法
JP2001258050A (ja) 立体映像撮像装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220114

Address after: 7001, 3rd floor, incubation building, Hainan Ecological Software Park, high tech industry demonstration zone, Laocheng Town, Chengmai County, Sanya City, Hainan Province

Applicant after: Jishi Technology (Hainan) Co.,Ltd.

Address before: Room 1901, kailian building, 10 Anshun Road, Singapore

Applicant before: Xinte Technology Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220713

Address after: Room 216, floor 2, unit 2, building 1, No. 1616, Nanhua Road, high tech Zone, Chengdu, Sichuan 610000

Patentee after: Chengdu jishiyuan Technology Co.,Ltd.

Address before: 571900 7001, third floor, incubation building, Hainan Ecological Software Park, high tech industry demonstration zone, Laocheng Town, Chengmai County, Sanya City, Hainan Province

Patentee before: Jishi Technology (Hainan) Co.,Ltd.