CN109302600A - 一种立体场景拍摄装置 - Google Patents

一种立体场景拍摄装置 Download PDF

Info

Publication number
CN109302600A
CN109302600A CN201811487372.6A CN201811487372A CN109302600A CN 109302600 A CN109302600 A CN 109302600A CN 201811487372 A CN201811487372 A CN 201811487372A CN 109302600 A CN109302600 A CN 109302600A
Authority
CN
China
Prior art keywords
image
low performance
camera
performance camera
computer system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811487372.6A
Other languages
English (en)
Other versions
CN109302600B (zh
Inventor
吕国皎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Technological University CDTU
Original Assignee
Chengdu Technological University CDTU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Technological University CDTU filed Critical Chengdu Technological University CDTU
Priority to CN201811487372.6A priority Critical patent/CN109302600B/zh
Publication of CN109302600A publication Critical patent/CN109302600A/zh
Application granted granted Critical
Publication of CN109302600B publication Critical patent/CN109302600B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明提出了一种立体场景拍摄装置。该拍摄装置由高性能相机、多台低性能相机和计算机系统构成。所述高性能相机所采集到的图像可将多个像素替代为单个像素,从而获得与所述低性能相机所采集的图像分辨率一致的替代图像,并得到多个像素到单个像素的替代关系。替代图像可以与所述多台低性能相机所拍摄到的多幅图像进行比对,获得物体的点匹配信息。利用点匹配关系及替代关系,所述计算机系统可对低性能相机拍摄的图像进行像素替换,将单个像素替换为多个像素,获得质量较高的合成视差图像,从而提升图像质量。相对于相机阵列全部采用高性能相机的方式,该立体场景拍摄装置具有明显的成本优势。

Description

一种立体场景拍摄装置
技术领域
本发明涉及图像拍摄技术,更具体地说,本发明涉及基于3D立体场景拍摄技术。
背景技术
3D显示技术是可以实现立体场景真实再现的一种显示技术,其可以为人眼分别提供不同的视差图像,从而使人产生立体视觉。多视点3D显示器能够在多个不同位置提供与之对应的视差图像。其视差图像来源可以是电脑虚拟合成,也可由立体场景拍摄装置对实际立体场景进行拍摄获得。立体场景拍摄装置对实际立体场景进行拍摄时,需在对应位置设置相机,形成相机阵列,从而完成立体场景的信息采集。为提高所采集视差图像的质量,传统立体场景拍摄装置中的每一台相机均需要较高的硬件配置以保障成像质量,从而使得立体场景拍摄装置的整体制造成本较高。因此,为降低硬件门槛,使得立体场景拍摄装置便于广泛推广,其需要一种成本较低的解决方案。
发明内容
本发明提出了一种立体场景拍摄装置。该拍摄装置由高性能相机、多台低性能相机和计算机系统构成。所述高性能相机与所述低性能相机排布形成阵列,并与计算机系统相连,用于采集视差图像。所述高性能相机能采集高分辨率清晰图像,用于采集立体空间场景中物体的细节信息,所述低性能相机所采集的图像清晰度相对较低,用于采集立体空间场景中物体的视差信息。所述高性能相机和所述低性能相机所采集到的图像能传送到所述计算机系统进行图像处理。所述高性能相机所采集到的高分辨率清晰图像经由所述计算机系统进行图像处理,将多个像素替代为单个像素,从而获得与所述低性能相机所采集的图像分辨率一致的清晰度相对较低的替代图像,并得到高分辨率清晰图像中多个像素与替代图像中单个像素的替代关系。利用点匹配算法,替代图像与所述多台低性能相机所拍摄到的多幅图像进行比对,获得物体的点匹配信息。利用点匹配关系,所述计算机系统将所述多台低性能相机所拍摄到的图像进行像素替换,利用所得到的高分辨率清晰图像中多个像素与替代图像中单个像素的替代关系,将单个像素替换为多个像素,获得质量较高的合成视差图像,从而提升图像质量。对于少数无法进行匹配的点,通过插值运算进行像素填充。
多台所述低性能相机最终拍摄并替换得到的合成视差图像可以用于立体显示。
可选地,低性能相机可在垂直方向进行扩展,以采集垂直方向的视差信息。
可选地,该立体场景拍摄装置可以进行扩展,增加高性能相机和低性能相机的数量,以获得更宽的视差采集范围。
本发明中,计算机系统可以通过高性能相机采集到的细节信息替换低性能相机所采集到的物体信息,因此在大部分相机的性能不高的条件下,仍然可以生产质量较高的合成视差图像,相对于相机阵列全部采用高性能相机,该立体场景拍摄装置具有明显的成本优势。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本发明的结构示意图。
图2为本发明的图像处理过程。
图标:010-立体场景拍摄装置;100-高性能相机;110-低性能相机;120-可在垂直方向上进行扩展的低性能相机;200-计算机系统;310-采集到的高分辨率清晰图像;320-替代图像;330-采集到的清晰度相对较低的图像;340-质量较高的合成视差图像;410-采集到的高分辨率清晰图像像素阵列;420-替代图像像素阵列;430-采集到的清晰度相对较低的图像像素阵列;440-质量较高的合成视差图像像素阵列。
应该理解上述附图只是示意性的,并没有按比例绘制。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
实施例
图1为本实施例提供的立体拍摄装置010的结构示意图。请参照图1,本实施例提供一种立体拍摄装置010,包括一台高性能相机100、5台低性能相机110和计算机系统200构成。所述高性能相机100与所述低性能相机110在水平方向进行排布,形成阵列,并与计算机系统200相连,用于采集视差图像。所述高性能相机100能采集高分辨率清晰图像,用于采集立体空间场景中物体的细节信息,所述低性能相机110所采集的图像清晰度相对较低,用于采集立体空间场景中物体的视差信息。所述高性能相机100和所述低性能相机110所采集到的图像能传送到所述计算机系统200进行图像处理。
图2为本实施例的图像处理过程。请参照图2,所述高性能相机100所采集到的高分辨率清晰图像310可经由所述计算机系统200进行图像处理,将4个像素替代为1个像素,从而获得与低性能相机110所采集到的清晰度相对较低的图像330分辨率一致的替代图像320,并得到高分辨率清晰图像中多个像素与替代图像中单个像素的替代关系。其中,高性能相机100所采集到的高分辨率清晰图像310像素分辨率为100×100,低性能相机所采集到的清晰度相对较低的图像330像素分辨率为50×50,替代图像分辨率为50×50。其过程为:所述高性能相机100所采集到的高分辨率清晰图像像素阵列410以2×2像素为周期进行划分,以其中一个周期为例,该周期中存在4个相邻像素abcd,取左上角像素a填充到替代图像像素阵列420对应位置处,则可形成像素分辨率50×50的替代图像320。利用点匹配算法,替代图像320可以与所述5台低性能相机110之一所采集到的清晰度相对较低的图像330进行比对,获得物体的点匹配信息。其匹配方法可为尺度不变特征转换、无限维等匹配方法之一。其中,替代图像像素阵列420中像素a与低性能相机110所采集到的清晰度相对较低的图像像素阵列430中的像素a’相匹配。利用该匹配关系,所述计算机系统200可将低性能相机110所采集到的清晰度相对较低的图像330进行像素替换,利用高性能相机100所采集到的高分辨率清晰图像310中多个像素与替代图像中单个像素的替代关系,将单个像素a’替换为2×2的像素abcd,获得经像素替换后获得的质量较高的合成视差图像340,从而提升图像质量。对于少数无法进行匹配的点,可通过插值运算进行像素填充。
最终,多台所述低性能相机110最终拍摄并替换得到的合成视差图像可以用于立体显示。相对于相机阵列全部采用高性能相机,该立体场景拍摄装置010具有明显的成本优势。

Claims (4)

1.一种立体场景拍摄装置,其特征在于:由高性能相机、多台低性能相机和计算机系统构成,所述高性能相机与所述低性能相机排布形成阵列,并与计算机系统相连用于采集视差图像,所述高性能相机所采集到的高分辨率清晰图像经由所述计算机系统进行图像处理,将多个像素替代为单个像素,从而获得与所述低性能相机所采集的图像分辨率一致的清晰度相对较低的替代图像,并得到高分辨率清晰图像中多个像素与替代图像中单个像素的替代关系,所述替代图像与所述多台低性能相机所拍摄到的多幅图像进行比对,获得物体的点匹配信息, 所述计算机系统将所述多台低性能相机所拍摄到的图像进行像素替换,利用所得到的高分辨率清晰图像中多个像素与替代图像中单个像素的替代关系,将单个像素替换为多个像素,获得质量较高的合成视差图像,从而提升图像质量。
2.如权利要求1所述的一种立体场景拍摄装置,其特征在于:所述低性能相机可在垂直方向进行扩展,以采集垂直方向的视差信息。
3.如权利要求1所述的一种立体场景拍摄装置,其特征在于:该立体场景拍摄装置可以进行扩展,增加高性能相机和低性能相机的数量,以获得更宽的视差采集范围。
4.如权利要求1所述的一种立体场景拍摄装置,其特征在于:所述计算机系统在将所述多台低性能相机所拍摄到的图像进行像素替换的过程中,对于少数无法进行匹配的点,通过插值运算进行像素填充。
CN201811487372.6A 2018-12-06 2018-12-06 一种立体场景拍摄装置 Active CN109302600B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811487372.6A CN109302600B (zh) 2018-12-06 2018-12-06 一种立体场景拍摄装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811487372.6A CN109302600B (zh) 2018-12-06 2018-12-06 一种立体场景拍摄装置

Publications (2)

Publication Number Publication Date
CN109302600A true CN109302600A (zh) 2019-02-01
CN109302600B CN109302600B (zh) 2023-03-21

Family

ID=65142726

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811487372.6A Active CN109302600B (zh) 2018-12-06 2018-12-06 一种立体场景拍摄装置

Country Status (1)

Country Link
CN (1) CN109302600B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111866492A (zh) * 2020-06-09 2020-10-30 青岛小鸟看看科技有限公司 基于头戴显示设备的图像处理方法、装置及设备
CN111866493A (zh) * 2020-06-09 2020-10-30 青岛小鸟看看科技有限公司 基于头戴显示设备的图像校正方法、装置及设备
WO2021115483A1 (zh) * 2019-12-13 2021-06-17 华为技术有限公司 一种图像处理方法及相关装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080267494A1 (en) * 2007-04-30 2008-10-30 Microsoft Corporation Joint bilateral upsampling
US20110128394A1 (en) * 2009-11-30 2011-06-02 Indian Institute Of Technology Madras Method and system for generating a high resolution image
CN102918836A (zh) * 2010-05-13 2013-02-06 高通股份有限公司 用于非对称立体视频的帧封装
US20130120802A1 (en) * 2011-11-15 2013-05-16 Canon Kabushiki Kaisha Image processing apparatus and image processing method
CN103179424A (zh) * 2013-03-26 2013-06-26 深圳市掌网立体时代视讯技术有限公司 立体图像合成方法及装置
US20140307049A1 (en) * 2011-08-10 2014-10-16 Electronics And Telecommunications Research Institute Apparatus and method for providing image, and apparatus and method for playing image
US9225889B1 (en) * 2014-08-18 2015-12-29 Entropix, Inc. Photographic image acquisition device and method
US20160337635A1 (en) * 2015-05-15 2016-11-17 Semyon Nisenzon Generarting 3d images using multi-resolution camera set
CN106920214A (zh) * 2016-07-01 2017-07-04 北京航空航天大学 空间目标图像超分辨率重建方法
CN108074218A (zh) * 2017-12-29 2018-05-25 清华大学 基于光场采集装置的图像超分辨率方法及装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080267494A1 (en) * 2007-04-30 2008-10-30 Microsoft Corporation Joint bilateral upsampling
US20110128394A1 (en) * 2009-11-30 2011-06-02 Indian Institute Of Technology Madras Method and system for generating a high resolution image
CN102918836A (zh) * 2010-05-13 2013-02-06 高通股份有限公司 用于非对称立体视频的帧封装
US20140307049A1 (en) * 2011-08-10 2014-10-16 Electronics And Telecommunications Research Institute Apparatus and method for providing image, and apparatus and method for playing image
US20130120802A1 (en) * 2011-11-15 2013-05-16 Canon Kabushiki Kaisha Image processing apparatus and image processing method
CN103179424A (zh) * 2013-03-26 2013-06-26 深圳市掌网立体时代视讯技术有限公司 立体图像合成方法及装置
US9225889B1 (en) * 2014-08-18 2015-12-29 Entropix, Inc. Photographic image acquisition device and method
US20160337635A1 (en) * 2015-05-15 2016-11-17 Semyon Nisenzon Generarting 3d images using multi-resolution camera set
CN106920214A (zh) * 2016-07-01 2017-07-04 北京航空航天大学 空间目标图像超分辨率重建方法
CN108074218A (zh) * 2017-12-29 2018-05-25 清华大学 基于光场采集装置的图像超分辨率方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021115483A1 (zh) * 2019-12-13 2021-06-17 华为技术有限公司 一种图像处理方法及相关装置
CN111866492A (zh) * 2020-06-09 2020-10-30 青岛小鸟看看科技有限公司 基于头戴显示设备的图像处理方法、装置及设备
CN111866493A (zh) * 2020-06-09 2020-10-30 青岛小鸟看看科技有限公司 基于头戴显示设备的图像校正方法、装置及设备
CN111866493B (zh) * 2020-06-09 2022-01-28 青岛小鸟看看科技有限公司 基于头戴显示设备的图像校正方法、装置及设备

Also Published As

Publication number Publication date
CN109302600B (zh) 2023-03-21

Similar Documents

Publication Publication Date Title
CN105931240B (zh) 三维深度感知装置及方法
EP3560195B1 (en) Stereoscopic omnidirectional imaging
CN102164298B (zh) 全景成像系统中基于立体匹配的元素图像获取方法
CN106254854B (zh) 三维图像的获得方法、装置及系统
CN113574863A (zh) 使用深度信息渲染3d图像的方法和系统
WO2012153447A1 (ja) 画像処理装置、映像処理方法、プログラム、集積回路
CN109302600A (zh) 一种立体场景拍摄装置
KR20150080003A (ko) 모션 패럴랙스를 이용한 2d 이미지로부터의 3d 지각 생성
CN108616733B (zh) 一种全景视频图像的拼接方法及全景相机
CN105430368A (zh) 一种两视点立体图像合成方法及系统
CN103488040A (zh) 立体全景影像合成方法及其相关的立体摄影机
CN102917236A (zh) 一种基于单摄像头的立体拍照方法及数码摄像装置
CN103488039A (zh) 一种3d摄像模组及具有该摄像模组的电子设备
JP4819834B2 (ja) 立体映像処理装置及び立体映像処理方法
JP2021525032A (ja) 画像処理方法、装置及び3次元結像システム
CN103500471A (zh) 实现高分辨率增强现实系统的方法
CN110798676A (zh) 一种利用内镜镜头动态图像形成3d视觉的方法及装置
CN105191300B (zh) 图像处理方法以及图像处理装置
CN111652967B (zh) 一种基于前后融合成像的三维重建系统及方法
WO2016092533A1 (en) A method for obtaining and merging multi-resolution data
CN208724107U (zh) 一种立体场景拍摄装置
CN110148216B (zh) 一种双球幕相机的三维建模方法
CN105282534B (zh) 用于嵌入立体图像的系统及方法
US9762815B2 (en) Camera to capture multiple sub-images for generation of an image
CN103796002A (zh) 基于正交投影的一维集成成像3d拍摄方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant