CN116828322A - 图像处理方法及装置 - Google Patents
图像处理方法及装置 Download PDFInfo
- Publication number
- CN116828322A CN116828322A CN202310785833.2A CN202310785833A CN116828322A CN 116828322 A CN116828322 A CN 116828322A CN 202310785833 A CN202310785833 A CN 202310785833A CN 116828322 A CN116828322 A CN 116828322A
- Authority
- CN
- China
- Prior art keywords
- image
- camera
- physical
- physical camera
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000009434 installation Methods 0.000 claims abstract description 19
- 230000000007 visual effect Effects 0.000 claims abstract description 19
- 238000012545 processing Methods 0.000 claims description 24
- 238000000034 method Methods 0.000 claims description 23
- 230000009466 transformation Effects 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 8
- 238000013519 translation Methods 0.000 claims description 8
- 230000009471 action Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 18
- 230000005540 biological transmission Effects 0.000 description 7
- 238000003702 image correction Methods 0.000 description 7
- 238000013507 mapping Methods 0.000 description 4
- 238000012937 correction Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012552 review Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Landscapes
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请提供一种图像处理方法及装置。在本申请中,通过确定物理摄像机在水平视角的虚拟摄像机的位置,并基于该位置对物理摄像机在被配置的拍摄角度下所拍摄到的图像进行调整和校正,以及模拟在物理摄像机的安装位置和所述虚拟摄像机的位置之间各位置下按照各拍摄角度采集的图像来对物理摄像机对应的各图像进行拼接,其在拼接图像进行显示时,无需调整物理摄像机的角度,即可调整目标物理摄像机在目标拍摄角度下所对应的目标图像,用户无需调整物理摄像机,即可从多个角度观看图像,增加了现场参与感和互动的视觉冲击,丰富了用户的视觉体验。
Description
技术领域
本申请涉及人工智能技术领域,尤其涉及图像处理方法及装置。
背景技术
随着计算、存储、网络技术的不断发展,由于常态化录播技术可辅助学生和教师进行高效的复习和教学改进,因而,录播系统在在教学场景中得到了快速的普及。
图1为目前所采用的录播系统的示意图,由图1所示,在现有技术中,通常在教室前后两端各部署一台摄像机,以采集教师和学生的全景画面,以及教学一体机屏幕信号HDMI(High Definition Multimedia Interface,高清多媒体接口);然后,通过摄像机将现场录制内容进行编码,再通过编码器对HDMI信号进行编码,并通过以太网GE和交换机将编码后的HDMI信号传输到后台服务器中,以使服务器对教师摄像机、学生摄像机、一体机三路视频信号进行存储,进而用户可通过浏览器实时查看或回看三路视频。
基于摄像机安装部署安全、全景化等因素的考虑,通常将摄像机部署在教室前后靠近屋顶的上方,然而,该部署方式下拍摄出来的图像视角为居高临下,造成人物和物体的空间畸变,影响后期观看效果和体验。而且,摄像机的拍摄角度固定,无法多角度还原现场的真实场景。
发明内容
为克服相关技术中存在的问题,本申请提供了图像处理方法及装置。
根据本申请实施例的第一方面,提供一种图像处理方法,该方法包括:
依据已部署的任一物理摄像机被安装的高度h1、指定参照物被安装的高度h2和该参照物的宽度h3、以及所述物理摄像机至所述参照物的距离l,确定所述物理摄像机在水平视角对应的虚拟摄像机的位置;所述h1、h2、h3、l是基于水平视角测量的;所述虚拟摄像机的位置与所述指定参照物的中心在一条水平线上;
获得所述物理摄像机在第一拍摄角度下拍摄的第一图像,所述第一拍摄角度为所述物理摄像机被安装后被配置的拍摄角度,通过对所述第一图像进行指定变换操作,以对所述第一图像进行校正得到第二图像;所述第一图像为被切向投影的图像,第二图像为被正向投影的图像,所述第二图像被作为所述物理摄像机在水平视角对应的虚拟摄像机的位置采集的图像;
依据所述物理摄像机的安装位置和所述虚拟摄像机的位置,模拟在所述物理摄像机的安装位置和所述虚拟摄像机的位置之间各位置下按照各拍摄角度采集的图像,得到所述物理摄像机对应的待显示图像,所述待显示图像包括所述第一图像和所述第二图像、以及模拟出的各图像;所述物理摄像机对应的待显示图像被用于和其它各物理摄像机对应的待显示图像进行拼接形成拼接图像;其中,当所述拼接图像在被显示时,基于外部在该显示的所述拼接图像的图像处理指令显示目标物理摄像机在目标位置和目标拍摄角度下的图像。
根据本申请实施例的第二方面,提供一种图像处理装置,包括:
位置确定模块,用于依据已部署的任一物理摄像机被安装的高度h1、指定参照物被安装的高度h2和该参照物的宽度h3、以及所述物理摄像机至所述参照物的距离l,确定所述物理摄像机在水平视角对应的虚拟摄像机的位置;所述h1、h2、h3、l是基于水平视角测量的;所述虚拟摄像机的位置与所述指定参照物的中心在一条水平线上;
图像处理模块,用于获得所述物理摄像机在第一拍摄角度下拍摄的第一图像,所述第一拍摄角度为所述物理摄像机被安装后被配置的拍摄角度,通过对所述第一图像进行指定变换操作,以对第一图像进行校正得到第二图像;所述第一图像为被切向投影的图像,第二图像为被正向投影的图像,第二图像被作为所述物理摄像机在水平视角对应的虚拟摄像机的位置采集的图像;以及,
依据所述物理摄像机的安装位置和所述虚拟摄像机的位置,模拟在所述物理摄像机的安装位置和所述虚拟摄像机的位置之间各位置下按照各拍摄角度采集的图像,得到所述物理摄像机对应的待显示图像,所述待显示图像包括所述第一图像和所述第二图像、以及模拟出的各图像;所述物理摄像机对应的待显示图像被用于和其它各物理摄像机对应的待显示图像进行拼接形成拼接图像;其中,当所述拼接图像在被显示时,基于外部在该显示的所述拼接图像的图像处理指令显示目标物理摄像机在目标位置和目标拍摄角度下的图像。
根据本申请实施例的第三方面,提供一种计算机设备,包括存储器、处理器及存储在存储器上并在处理器上运行的计算机程序,该处理器执行程序时实现上述的图像处理方法。
根据本申请实施例的第四方面,提供一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时实现上述的图像处理方法。
本申请所提供的技术方案至少可以实现以下有益效果:
在本申请中,通过确定物理摄像机在水平视角的虚拟摄像机的位置,并基于该位置对物理摄像机在被配置的拍摄角度下所拍摄到的图像进行调整和校正,以及模拟在物理摄像机的安装位置和所述虚拟摄像机的位置之间各位置下按照各拍摄角度采集的图像来对物理摄像机对应的各图像进行拼接,其在拼接图像进行显示时,无需调整物理摄像机的角度,即可调整目标物理摄像机在目标拍摄角度下所对应的目标图像。由此可见,通过本申请所提供的方案,用户无需调整物理摄像机,即可从多个角度观看图像,增加了现场参与感和互动的视觉冲击,丰富了用户的视觉体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本申请的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1是现有技术中的录播系统的示意图。
图2是本申请根据一示例性实施例示出的一种图像处理方法的流程图。
图3是本申请根据一示例性实施例示出的一种虚拟摄像机的映射示意图。
图4是本申请根据一示例性实施例示出的一种虚拟摄像机的映射示意图。
图5是本申请根据一示例性实施例示出的一种摄像机拍摄的场景示意图。
图6是本申请根据一示例性实施例示出的一种投影法的原理示意图。
图7是本申请根据一示例性实施例示出的一种录播系统的示意图。
图8是本申请根据一示例性实施例示出的一种录播系统的示意图。
图9是本申请根据一示例性实施例示出的一种全景图像的生成示意图。
图10是本申请根据一示例性实施例示出的一种图像处理装置的框图。
图11本申请根据一示例性实施例示出的一种计算机设备的硬件结构图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
接下来对本申请实施例进行详细说明。
如图2所示,图2是本申请根据一示例性实施例示出的一种图像处理方法的流程图,包括以下步骤:
步骤202,依据已部署的任一物理摄像机被安装的高度h1、指定参照物被安装的高度h2和该参照物的宽度h3、以及物理摄像机至参照物的距离l,确定物理摄像机在水平视角对应的虚拟摄像机的位置。
在步骤202中,h1、h2、h3、l是基于水平视角测量的;虚拟摄像机的位置与参照物的中心在一条水平线上,其中,物理摄像机可映射出多个虚拟摄像机。在图3所示的虚拟摄像机的映射示意图中,虚拟摄像机C‘为物理摄像机C所映射的虚拟摄像机,其中,虚拟摄像机C‘与参照物P的中心处于同一条水平线上,即在虚拟摄像机C’所在的位置进行图像拍摄的视角为水平视角,对应的,物理摄像机C对应的拍摄视角为α。
可选的,物理摄像机在水平视角的虚拟摄像机的位置处所拍摄的图像为不存在几何畸变的基准图像。另外,物理摄像机在水平视角的虚拟摄像机的位置对应的参数包括x、y和α,其中,x,y表示虚拟摄像机的位置,α表示虚拟摄像机与指定参照物的中心之间的连线,与水平线之间的夹角。以图4所示的虚拟摄像机的映射示意图为例,x、y和α分别满足下式:
x=l;
y=h1-h2+h3/2;
α=arctan[(h1-h2)/l]。
步骤204,获得物理摄像机在第一拍摄角度下拍摄的第一图像,通过对第一图像进行指定变换操作,以对第一图像进行校正得到第二图像;第一图像为被切向投影的图像,第二图像为被正向投影的图像,所述第二图像被作为所述物理摄像机在水平视角对应的虚拟摄像机的位置采集的图像。
在步骤204中,第一拍摄角度为物理摄像机被安装后被配置的拍摄角度。例如,在图5所示的摄像机拍摄的场景示意图中,在目标空间内部署了A、B、C、D四个物理摄像机,每个物理摄像机具有对应的拍摄角度。
在本实施例中,物理摄像机在第一拍摄角度下拍摄的第一图像一般为切向投影的图像。作为一个实施例,本步骤204可通过对第一图像进行指定变换操作,以对所述第一图像进行校正得到正向投影的第二图像。这里的第二图像相当于物理摄像机在水平视角对应的虚拟摄像机的位置采集的水平视角图像。水平视角的图像为不存在几何畸变的图像。
作为一个实施例,上述指定变换操作至少包括:平移、旋转、缩放中的至少一个操作;或者,
平移、旋转、缩放中的至少一个操作,以及图像参数调整操作;所述图像参数包括以下至少一个:亮度、对比度、色彩。
另外,假若物理摄像机出现因外界原因所导致的角度偏斜问题的情况下,在执行上述指定变换操作之前,可先对物理摄像机所拍摄的第一图像进行角度调整,从而得到物理摄像机在正常情况下所拍摄到的图像,进而提高了用户的运维效率。
步骤206,依据物理摄像机的安装位置和虚拟摄像机的位置,模拟在物理摄像机的安装位置和虚拟摄像机的位置之间各位置下按照各拍摄角度采集的图像,得到物理摄像机对应的待显示图像,待显示图像包括所述第一图像和所述第二图像、以及模拟出的各图像;物理摄像机对应的待显示图像被用于和其它各物理摄像机对应的待显示图像进行拼接形成拼接图像;其中,当拼接图像在被显示时,基于外部在该显示的所述拼接图像的图像处理指令调整显示目标摄像机在目标位置和目标拍摄角度下采集的图像。
在本实施例中,依据物理摄像机的安装位置和虚拟摄像机的位置,模拟在物理摄像机的安装位置和虚拟摄像机的位置之间各位置下各拍摄角度的图像,有很多实现方式,比如投影法、Hough变换、线性拟合、傅里叶变换法等。下面以投影法为例进行解释说明。
其中,图6示出了投影法的原理示意图,如图6所示,当参照物在水平方向和垂直方向上进行投影时,图像中的参照物不会发生畸变;当参照物在任一角度比如θ进行投影时,图像中的参照物发生了畸变。基于此,可构建参照物与畸变后的参照物之间的变换矩阵,并基于该变换矩阵来对畸变后的参照物进行校正,其中,可通过下式来实现对畸变后的参照物的校正:
在上式中,x′为水平视角基准图像中某个像素点的X轴坐标,y′为水平视角基准图像中某个像素点的Y轴坐标,x为第一图像中某个像素点的X轴坐标,y为第一图像中某个像素点的Y轴坐标,θ为第一图像中参照物的倾斜角。依次类推,最终模拟在物理摄像机的安装位置和所述虚拟摄像机的位置之间各位置下按照各拍摄角度采集的图像。
在本实施例中,如步骤206描述,上述物理摄像机对应的待显示图像被用于和其它各物理摄像机对应的待显示图像进行拼接形成拼接图像。比如,各物理摄像机将携带时间戳的待显示图像传输给录播系统的指定设备,以使指定设备对待显示图像进行图像拼接。基于物理摄像机对应的待显示图像的描述,此时的拼接图像可相当于360°全景图像。
基于此,当显示拼接图像时,上述指定设备可基于外部在该显示的拼接图像的图像处理指令,调整显示目标物理摄像机在目标位置和目标拍摄角度下的图像。这里,上述的图像显示指令可通过指定动作指示,例如,在用户希望显示目标物理摄像机在目标拍摄角度下所拍摄的目标图像时,可向上述指定设备中输入目标拍摄角度,也可通过鼠标或者其他触控介质对上述指定设备所显示的拼接图像进行拖拽操作或滑动操作,指定设备即可根据用户的操作来识别出图像显示指令所对应的数据(例如,目标拍摄角度和目标位置等)。
另外,在实际应用中,目标空间中可以部署多个物理摄像机,而目标物理摄像机为拍摄视野在屏幕中的占比最大的物理摄像机。例如,指定设备的屏幕中所显示的图像由物理摄像机1对应的待显示图像和物理摄像机2对应的待显示图像拼接而成,其中,物理摄像机1的拍摄视野在屏幕中的占比大于物理摄像机2的拍摄视野在屏幕中的占比,则可确定屏幕所显示的图像对应的目标物理摄像机为物理摄像机1。
基于上述步骤S202至步骤206,可以获知,在本申请中,在需要显示不同角度的图像时,无需调整物理摄像机的角度,即可得到物理摄像机在目标拍摄角度下所对应的目标图像。由此可见,通过本申请所提供的方案,用户无需调整物理摄像机,即可从多个角度观看图像,增加了现场参与感和互动的视觉冲击,丰富了用户的视觉体验。另外,通过本申请所提供的方案,可在物理摄像机出现因外界原因所导致的角度偏斜问题的情况下,对物理摄像机所拍摄的图像进行角度调整,从而得到物理摄像机在正常情况下所拍摄到的图像,进而提高了用户的运维效率。
需要说明的是,本申请所提供的方案可以应用与录播系统的前端设备(例如,具有算例的摄像机)中,也可应用在录播系统的上述指定设备(例如,服务器)中。
可选的,图7示出了一种可选的录播系统的示意图,在图7中,录播系统的前端设备可以为摄像机,例如,IPC(IP Camera,网络摄像机),该摄像机具有算力,可实现对图像的校正或角度调整。如图7所示,摄像机包括图像采集单元、虚拟摄像机设置单元以及图像校正单元,其中,图像采集单元通过模拟摄像机模块可采集拍摄场景或被拍摄物体的全景图像,通过网络编码模块将采集到的模拟视频信号编码压缩成数字信号,以便于后续模块或单元进行处理;虚拟摄像机设置单元用于设置虚拟摄像机的摄像机参数;图像校正单元用于对根据图像特征检测出图像中被拍摄物体的倾斜方向和/或倾斜角度,并使用图像校正算法来对图像进行校正,以及模拟模拟在物理摄像机的安装位置和所述虚拟摄像机的位置之间的各位置下按照各拍摄角度采集的图像。
如图7所示,录播系统还包括图像传输单元,该图像传输单元可将携带时间戳的待显示图像传输给录播系统的指定设备,以使指定设备对待显示图像进行图像拼接,在该场景中,待显示图像为目标物理摄像机在目标拍摄角度下所拍摄的目标图像,即待显示图像为角度校正或角度调整后的图像。
具体的,图像传输单元可对图像校正单元输出的图像进行逐帧传输。传输过程中的报文需携带图像拍摄的时间戳、摄像机序号等信息,以便为后续图像拼接单元进行图像拼接提供必要的数据基础。此外,由于图像传输过程中需要携带了摄像机的序号和拍摄图像的时间戳,因此,图像传输单元还可与交换机连接,以使交换机能够获取图像的相关信息,以实现信息的统计。
如图7所示,录播系统还包括指定设备,例如,服务器。该指定设备包括图像拼接单元和图像存储单元。其中,图像拼接单元用于对图像进行拼接,以得到360°的全景图像;图像存储单元用于对拼接好的图像进行落盘存储,以供用户点播观看。
在另一种可选的实施例中,本申请所提供的方法可应用于录播系统的指定设备,如图8所示,在该场景下,指定设备对待显示图像进行图像拼接,并对拼接后的图像进行存储。
需要说明的是,图7所示的方案与图8所示的方案的区别在于图像校正单元的部署位置,其中,在图7所示的方案中,利用前端设备进行图像校正,而由于前端设备的算力有限,因此,图7所示的方案通常用于计算量较小的场景中,即拍摄内容单一、场景内容变换不频繁的场景;图8所示的方案利用后端大型计算装置(例如,服务器)进行图像校正,由于指定设备的算力在理论上可无限扩展,因此,图8所示的方案可用于与计算量较大的场景中,即拍摄内容复杂、场景内容变换频繁的场景。在实际应用中,用户可根据自己的实际需求从图7和图8所示的两种方案中进行选择。
可选的,在图7和图8所示的方案中,图像拼接单元可对待显示图像进行图像拼接处理。具体的,服务器确定与待显示图像具有相同时间戳的多个待拼接图像(如图9所示的全景图像的生成示意图中,图像A、图像B、图像C、图像D为待拼接图像),然后,根据拍摄待显示图像的物理摄像机的摄像机序号,将待显示图像叠加在多个待拼接图像的坐标系中,得到拼接后的图像。
具体的,服务器可针对物理摄像机回传的图像以及角度调整方向进行序列排序,然后找出相邻序号摄像机在同一时刻拍摄的两个图像之间的变换关系,例如,通过对两个图像进行逐像素比对确定两个图像之间的差异特征以及相同特征,进而根据两个图像之间的差异特征以及相同特征来确定两个图像之间的变换关系(例如,参照物位置的变化、光线的变化等)。在确定了两个图像之间的变换关系之后,可基于该变换关系将不同摄像机所拍摄的后一个图像叠加在前一个图像的坐标系中,以进行图像拼接。
由上述内容可知,本申请所提供的方案通过虚拟摄像机来实现对目标拍摄角度下的图像的观看,以使用户在观看直播或录播时可从多角度了解现场情况。
与前述方法的实施例相对应,本申请还提供了图像处理装置、计算机设备及存储介质的实施例。
如图10所示,图10是本申请根据一示例性实施例示出的一种图像处理装置的框图,该装置包括:位置确定模块以及图像处理模块。
位置确定模块,用于依据已部署的任一物理摄像机被安装的高度h1、指定参照物被安装的高度h2和该参照物的宽度h3、以及所述物理摄像机至所述参照物的距离l,确定所述物理摄像机在水平视角对应的虚拟摄像机的位置;所述h1、h2、h3、l是基于水平视角测量的;所述虚拟摄像机的位置与所述指定参照物的中心在一条水平线上;
图像处理模块,用于获得所述物理摄像机在第一拍摄角度下拍摄的第一图像,所述第一拍摄角度为所述物理摄像机被安装后被配置的拍摄角度,通过对所述第一图像进行指定变换操作,以对第一图像进行校正得到第二图像;所述第一图像为被切向投影的图像,第二图像为被正向投影的图像,第二图像被作为所述物理摄像机在水平视角对应的虚拟摄像机的位置采集的图像;以及,
依据所述物理摄像机的安装位置和所述虚拟摄像机的位置,模拟在所述物理摄像机的安装位置和所述虚拟摄像机的位置之间各位置下各拍摄角度的图像,得到所述物理摄像机对应的待显示图像,所述待显示图像包括所述第一图像和所述第二图像、以及模拟出的各图像;所述物理摄像机对应的待显示图像被用于和其它各物理摄像机对应的待显示图像进行拼接形成拼接图像;其中,当所述拼接图像在被显示时,基于外部在该显示的所述拼接图像的图像处理指令调整显示目标物理摄像机在目标位置和目标拍摄角度下的图像。
可选的,所述物理摄像机在水平视角对应的虚拟摄像机的位置的参数包括x、y和α,
其中,x=l;l是指所述物理摄像机至指定的参照物的距离;
y=h1-h2+h3/2;其中,h1为一物理摄像机被安装的高度、h2为参照物被安装的高度,h3为参照物的宽度;
α=arctan[(h1-h2)/l];
所述x,y表示所述虚拟摄像机的位置,所述α表示所述虚拟摄像机与所述指定参照物的中心之间的连线,与水平线之间的夹角。
可选的,所述图像处理指令通过指定动作指示;所述目标物理摄像机是指拍摄视野在屏幕中的占比最大的物理摄像机;和/或,
所述指定变换操作至少包括:平移、旋转、缩放中的至少一个操作;或者,平移、旋转、缩放中的至少一个操作,以及图像参数调整操作;所述图像参数包括以下至少一个:亮度、对比度、色彩;和/或,
图像处理模块还用于将携带时间戳的各物理摄像机对应的待显示图像传输给录播系统的指定设备,以使所述指定设备对所述待显示图像进行图像拼接。
上述装置中各个模块的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
对应地,本申请实施例还提供了一种计算机设备的硬件结构图,具体如图11所示,该计算机设备可以为上述实施方法的设备。如图11所示,该硬件结构包括:处理器和存储器。其中,存储器用于存储计算机程序,处理器用于处理计算机程序,处理器执行所述程序时以实现如上所示的方法实施例。
基于同样的发明构思,本实施例还提供了计算机可读存储介质。该计算机可读存储介质,用于存储计算机程序;该计算机程序被处理器执行时实现如上所示的方法实施例。
作为一个实施例,计算机可读存储介质可以是任何电子、磁性、光学或其它物理存储装置,可以包含或存储信息,如可执行指令、数据,等等。例如,存储器可以是:易失存储器、非易失性存储器或者类似的存储介质。具体地,存储器可以是RAM(Radom AccessMemory,随机存取存储器)、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、DVD等),或者类似的存储介质,或者它们的组合。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。
Claims (10)
1.一种图像处理方法,其特征在于,该方法包括:
依据已部署的任一物理摄像机被安装的高度h1、指定的参照物被安装的高度h2和该参照物的宽度h3、以及所述物理摄像机至所述参照物的距离l,确定所述物理摄像机在水平视角对应的虚拟摄像机的位置;所述h1、h2、h3、l是基于水平视角测量的;所述虚拟摄像机的位置与所述指定参照物的中心在一条水平线上;
获得所述物理摄像机在第一拍摄角度下拍摄的第一图像,所述第一拍摄角度为所述物理摄像机被安装后被配置的拍摄角度,通过对所述第一图像进行指定变换操作,以对所述第一图像进行校正得到第二图像;所述第一图像为被切向投影的图像,第二图像为被正向投影的图像,所述第二图像被作为所述物理摄像机在水平视角对应的虚拟摄像机的位置采集的图像;
依据所述物理摄像机的安装位置和所述虚拟摄像机的位置,模拟在所述物理摄像机的安装位置和所述虚拟摄像机的位置之间的各位置下按照各拍摄角度采集的图像,得到所述物理摄像机对应的待显示图像,所述待显示图像包括所述第一图像和所述第二图像、以及模拟出的各图像;所述物理摄像机对应的待显示图像被用于和其它各物理摄像机对应的待显示图像进行拼接形成拼接图像;其中,当所述拼接图像在被显示时,基于外部在该显示的所述拼接图像的图像处理指令调整显示目标摄像机在目标位置和目标拍摄角度下采集的图像。
2.根据权利要求1所述的图像处理方法,其特征在于,依据已部署的任一物理摄像机被安装的高度h1、指定的参照物被安装的高度h2和该参照物的宽度h3、以及所述物理摄像机至所述参照物的距离l,确定所述物理摄像机在水平视角的虚拟摄像机的位置,包括:
所述物理摄像机在水平视角的虚拟摄像机的位置的参数包括x、y和α,
其中,x=l;
y=h1-h2+h3/2;
α=arctan[(h1-h2)/l];
所述x,y表示所述虚拟摄像机的位置,所述α表示所述虚拟摄像机与所述指定参照物的中心之间的连线,与水平线之间的夹角。
3.根据权利要求1所述的图像处理方法,其特征在于,所述图像显示指令通过指定动作指示;
所述目标物理摄像机是指拍摄视野在屏幕中的占比最大的物理摄像机。
4.根据权利要求1所述的图像处理方法,其特征在于,所述指定变换操作至少包括:平移、旋转、缩放中的至少一个操作;或者,
平移、旋转、缩放中的至少一个操作,以及图像参数调整操作;所述图像参数包括以下至少一个:亮度、对比度、色彩。
5.根据权利要求1所述的图像处理方法,其特征在于,所述方法还包括:
将携带时间戳的各物理摄像机对应的待显示图像传输给录播系统的指定设备,以使所述指定设备对所述待显示图像进行图像拼接。
6.一种图像处理装置,其特征在于,所述装置包括:
位置确定模块,用于依据已部署的任一物理摄像机被安装的高度h1、指定参照物被安装的高度h2和该参照物的宽度h3、以及所述物理摄像机至所述参照物的距离l,确定所述物理摄像机在水平视角对应的虚拟摄像机的位置;所述h1、h2、h3、l是基于水平视角测量的;所述虚拟摄像机的位置与所述指定参照物的中心在一条水平线上;
图像处理模块,用于获得所述物理摄像机在第一拍摄角度下拍摄的第一图像,所述第一拍摄角度为所述物理摄像机被安装后被配置的拍摄角度,通过对所述第一图像进行指定变换操作,以对第一图像进行校正得到第二图像;所述第一图像为被切向投影的图像,第二图像为被正向投影的图像,第二图像被作为所述物理摄像机在水平视角对应的虚拟摄像机的位置采集的图像;以及,
依据所述物理摄像机的安装位置和所述虚拟摄像机的位置,模拟在所述物理摄像机的安装位置和所述虚拟摄像机的位置之间各位置下按照各拍摄角度采集的图像,得到所述物理摄像机对应的待显示图像,所述待显示图像包括所述第一图像和所述第二图像、以及模拟出的各图像;所述物理摄像机对应的待显示图像被用于和其它各物理摄像机对应的待显示图像进行拼接形成拼接图像;其中,当所述拼接图像在被显示时,基于外部在该显示的所述拼接图像的图像处理指令调整显示目标物理摄像机在目标位置和目标拍摄角度下的图像。
7.根据权利要求6所述的图像处理装置,其特征在于,所述物理摄像机在水平视角对应的虚拟摄像机的位置的参数包括x、y和α,
其中,x=l;l是指所述物理摄像机至指定的参照物的距离;
y=h1-h2+h3/2;其中,h1为一物理摄像机被安装的高度、h2为参照物被安装的高度,h3为参照物的宽度;
α=arctan[(h1-h2)/l];
所述x,y表示所述虚拟摄像机的位置,所述α表示所述虚拟摄像机与所述指定参照物的中心之间的连线,与水平线之间的夹角。
8.根据权利要求6所述的图像处理装置,其特征在于,所述图像处理指令通过指定动作指示;所述目标物理摄像机是指拍摄视野在屏幕中的占比最大的物理摄像机;和/或,
所述指定变换操作至少包括:平移、旋转、缩放中的至少一个操作;或者,平移、旋转、缩放中的至少一个操作,以及图像参数调整操作;所述图像参数包括以下至少一个:亮度、对比度、色彩;和/或,
图像处理模块还用于将携带时间戳的各物理摄像机对应的待显示图像传输给录播系统的指定设备,以使所述指定设备对所述待显示图像进行图像拼接。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至5任一所述的方法。
10.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310785833.2A CN116828322A (zh) | 2023-06-29 | 2023-06-29 | 图像处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310785833.2A CN116828322A (zh) | 2023-06-29 | 2023-06-29 | 图像处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116828322A true CN116828322A (zh) | 2023-09-29 |
Family
ID=88119873
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310785833.2A Pending CN116828322A (zh) | 2023-06-29 | 2023-06-29 | 图像处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116828322A (zh) |
-
2023
- 2023-06-29 CN CN202310785833.2A patent/CN116828322A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11528468B2 (en) | System and method for creating a navigable, three-dimensional virtual reality environment having ultra-wide field of view | |
US10848743B2 (en) | 3D Camera calibration for adjustable camera settings | |
US9699438B2 (en) | 3D graphic insertion for live action stereoscopic video | |
EP2923484B1 (en) | A method for obtaining and inserting in real time a virtual object within a virtual scene from a physical object | |
WO2021012855A1 (zh) | 一种全景图像生成系统及全景图像生成方法 | |
WO2021093584A1 (zh) | 基于深度卷积神经网络的自由视点视频生成及交互方法 | |
US20130141526A1 (en) | Apparatus and Method for Video Image Stitching | |
US20060165310A1 (en) | Method and apparatus for a virtual scene previewing system | |
US20100194902A1 (en) | Method for high dynamic range imaging | |
CN107358577B (zh) | 一种立方体全景图的快速拼接方法 | |
CN105072314A (zh) | 一种可自动跟踪目标的虚拟演播室实现方法 | |
JP2009124685A (ja) | 複数のビデオを結合してリアルタイムで表示する方法及びシステム | |
WO2016109383A1 (en) | Video capturing and formatting system | |
US20090128621A1 (en) | System and/or method for automated stereoscopic alignment of images | |
US11812009B2 (en) | Generating virtual reality content via light fields | |
WO2012166593A2 (en) | System and method for creating a navigable, panoramic three-dimensional virtual reality environment having ultra-wide field of view | |
CN104869476A (zh) | 基于心理视觉调制的防摄像偷拍的视频播放方法 | |
CN107197135B (zh) | 一种视频生成方法及视频生成装置 | |
CN105635675A (zh) | 一种全景播放方法和装置 | |
KR101704362B1 (ko) | 룩업테이블 기반의 실시간 파노라마 영상 제작 시스템 및 이를 이용한 실시간 파노라마 영상 제작 방법 | |
CN110933350A (zh) | 一种电子云镜录播系统、方法及装置 | |
CN116828322A (zh) | 图像处理方法及装置 | |
CN112738425A (zh) | 一种多摄像头采集的视频实时拼接系统 | |
CN115580691A (zh) | 一种用于虚拟制片的图像渲染合成系统 | |
CN213461928U (zh) | 全景相机和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |