CN113923354A - 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统 - Google Patents

基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统 Download PDF

Info

Publication number
CN113923354A
CN113923354A CN202111158255.7A CN202111158255A CN113923354A CN 113923354 A CN113923354 A CN 113923354A CN 202111158255 A CN202111158255 A CN 202111158255A CN 113923354 A CN113923354 A CN 113923354A
Authority
CN
China
Prior art keywords
background image
background
display screen
led display
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111158255.7A
Other languages
English (en)
Other versions
CN113923354B (zh
Inventor
周锦志
田美城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Colorlight Cloud Technology Co Ltd
Original Assignee
Colorlight Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Colorlight Cloud Technology Co Ltd filed Critical Colorlight Cloud Technology Co Ltd
Priority to CN202111158255.7A priority Critical patent/CN113923354B/zh
Publication of CN113923354A publication Critical patent/CN113923354A/zh
Application granted granted Critical
Publication of CN113923354B publication Critical patent/CN113923354B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Circuits (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及LED显示屏显示技术领域,具体公开了一种基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统,方法包括获取拍摄需求信息,并根据拍摄需求信息确定所需摄像机的数量N;收取图像信号源,并根据摄像机的数量N对图像信号源中所包含的背景图像进行编排,得到背景图像文件;根据图像信号源的播放帧率计算背景图像文件的显示帧率,并根据显示帧率以及摄像机的数量N计算每个摄像机相邻两次拍摄之间的拍摄间隔时间;将背景图像文件向LED显示屏发送。本发明解决了当前采用LED显示屏图像作为拍摄背景时,多个摄像机拍摄到的背景图像与实际场景存在不一致的问题,使得摄像机拍摄的背景图像与现实中物体显示效果更加贴近,给人的观感也更加真实。

Description

基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统
技术领域
本发明涉及LED显示屏显示技术领域,尤其涉及一种基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统。
背景技术
在电影拍摄时,若在实际场景下,会采用多个不同位置(机位)的摄像机进行拍摄,但相对于实际背景拍摄来说,多个摄像机拍摄到的背景会由于实物的三维特性,不同机位形成的拍摄效果会存在明显的差别,也即每个摄像机拍摄到的背景效果是不一致的。若采用背景图像LED显示屏幕来构成虚拟的背景,并采用多机位的摄像机拍摄LED显示屏幕时,通常只能拍到一个完全相同的背景图像(在LED显示屏幕仅显示一个画面时,两个或多个摄像机拍摄到的背景图像完全相同),与实际场景会存在不一致的拍摄效果。
因此本领域技术人员需要在不同机位摄像机拍摄到不同的背景图像时,保证每个机位的摄像机在同一个LED显示屏幕上拍到不同情况下的背景图像。
发明内容
针对现有技术中的技术问题,本发明提供一种基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统。
一种基于多帧图像的视频处理方法,包括:
获取拍摄需求信息,并根据拍摄需求信息确定所需摄像机的数量N;
收取图像信号源,并根据摄像机的数量N对图像信号源中所包含的背景图像进行编排,得到背景图像文件;
根据图像信号源的播放帧率计算背景图像文件的显示帧率,并根据显示帧率以及摄像机的数量N计算每个摄像机相邻两次拍摄之间的拍摄间隔时间;拍摄间隔时间=N/显示帧率;
将具备显示帧率的背景图像文件向LED显示屏发送。
进一步的,根据摄像机的数量N对图像信号源中所包含的背景图像进行编排,包括:
若图像信号源为单信号源,则将图像信号源的每一帧画面拆分成N张背景图像,并按照顺序依次排列;
若图像信号源为多信号源,则将各个图像信号源中的每一帧画面均作为一个背景图像,并依次交叉排列。
本发明还包括一种基于多帧图像的视频处理设备,视频处理设备包括信号获取模块、图像编排模块、显示帧率设定模块以及发送模块,其中,
信号获取模块,与图像编排模块相连接,用于获取拍摄需求信息,并根据拍摄需求信息确定所需摄像机的数量N,以及收取图像信号源;
图像编排模块,与信号获取模块、显示帧率设定模块相连接,用于根据摄像机的数量N对图像信号源中所包含的背景图像进行编排,得到背景图像文件;
显示帧率设定模块,与图像编排模块、发送模块相连接,用于根据图像信号源的播放帧率计算背景图像文件的显示帧率,并根据显示帧率以及摄像机的数量N计算每个摄像机相邻两次拍摄之间的拍摄间隔时间;拍摄间隔时间=N/显示帧率;
发送模块,与显示帧率设定模块相连接,用于将具备显示帧率的背景图像文件向LED显示屏发送。
本发明还包括一种基于LED显示屏的虚拟背景拍摄系统,系统包括权利要求3的视频处理设备,还包括发送卡、LED显示屏以及N个摄像机,其中:
视频处理设备,与发送卡相连接,用于向发送卡发送具备显示帧率的背景图像文件,以及向发送卡发送显示控制指令;还与N个摄像机分别连接,且与摄像机同步锁定;
发送卡,与视频处理设备及LED显示屏相连接,用于接收并存储背景图像文件,以及读取并向LED显示屏发送背景图像文件;还用于接收显示控制指令并向LED显示屏发送;
LED显示屏,与发送卡相连接,用于接收并存储背景图像文件,以及根据显示控制指令对背景图像文件按照显示帧率进行轮巡播放;
N个摄像机,与视频处理设备连接并同步锁定,N个摄像机在视频处理设备发送显示控制指令时,每个摄像机按拍摄间隔时间依次对LED显示屏进行轮换拍摄,使得每个摄像机仅拍摄到与之对应的背景图像。
进一步的,发送卡接收并存储背景图像文件,以及读取并向LED显示屏发送背景图像文件,包括:
将背景图像文件中的背景图像写入DDR模块中;
对DDR模块中的背景图像按照编排顺序重复读取,并向LED显示屏发送。
进一步的,视频处理设备中,
信号获取模块,还用于根据拍摄需求信息确定每个摄像机的拍摄位置;
图像编排模块,还用于根据背景图像的分辨率以及对应摄像机的拍摄位置,确定背景图像在LED显示屏的显示区域及未显示区域。
进一步的,将背景图像文件中的背景图像写入DDR模块中,包括:
根据LED显示屏的分辨率大小,在DDR模块中划分出大小对应的若干个存储区域;
根据每个背景图像在LED显示屏的显示区域及未显示区域,将每个背景图像分别存储在存储区域中。
进一步的,将背景图像文件中的背景图像写入DDR模块中,包括:
以坐标形式将背景图像写入DDR模块中;
以背景图像的(0,0)坐标作为读取所有背景图像的起始坐标,以每个背景图像的最末坐标作为读取该背景图像的结束坐标,将起始坐标及结束坐标分别对应背景图像进行存储。
本发明的基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统,根据拍摄需求信息以及背景图像生成具有设定显示帧率的背景图像文件,从而由摄像机按照所计算的拍摄间隔时间进行拍摄,解决了当前采用LED显示屏图像作为拍摄背景时,多个摄像机拍摄到的背景图像与实际场景存在不一致的问题,本发明使得摄像机拍摄的背景图像与现实中物体显示效果更加贴近,给人的观感也更加真实,同时也解决了当前影视拍摄场景中无法进行实地拍摄的问题,从而提高了拍摄效率。
附图说明
为了更清楚的说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见的,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1为本发明实施例的一种基于多帧图像的视频处理方法的步骤流程图;
图2为本发明实施例的一种基于多帧图像的视频处理设备的结构组成图;
图3为本发明实施例的一种基于LED显示屏的虚拟背景拍摄系统的结构组成图。
具体实施方式
下面将结合本发明中的附图,对本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通的技术人员在没有做出创造性劳动的前提下所获得的所有其它实施例,都属于本发明的保护范围。
本发明实施例的一种基于多帧图像的视频处理方法,如图1所示,包括:
步骤S10:获取拍摄需求信息,并根据拍摄需求信息确定所需摄像机的数量N。
本发明实施例以两个摄像机为例,对整个方案进行示例说明。
步骤S20:收取图像信号源,并根据摄像机的数量N对图像信号源中所包含的背景图像进行编排,得到背景图像文件。
具体的,步骤S20中:根据摄像机的数量N对图像信号源中所包含的背景图像进行编排,包括:
若图像信号源为单信号源,则将图像信号源的每一帧画面拆分成N张背景图像,并按照顺序依次排列。
在单信号源传输方式下,该信号源中的每一帧画面均为背景图像拼合形成,所以此步骤将每一帧画面进行拆分,拆分方式则根据发送前的拼合方式进行,例如将两张背景图像分为左半部分与右半部分(或上半部分、下半部分)进行拼合,则相应的,将画面左右(上下)分开,分为两个背景图像,本实施例在具体实现时不限定具体的拆分方式,既可以对所有的画面进行上下(或左右)拆分,也可以对前一帧画面进行上下拆分,对下一帧画面进行左右拆分,具体的拆分区域只需要根据先前的拼合关系对应决定。对单信号源下的每一帧画面均需要按照上方形式进行拆分,再按照拆分的顺序依次排列,例如,第一帧画面拆分为“1上”、“1下”,第二帧画面拆分为“2上”、“2下”,第三帧画面拆分为“3上”、“3下”,所以背景画面的排列顺序为:拆分为“1上”、“1下”、“2上”、2下”、“3上”、“3下”,以此类推。以上示例对应有两个摄像机,可分别对应拍摄“上”背景画面与“下”背景画面。
若图像信号源为多信号源,则将各个图像信号源中的每一帧画面均作为一个背景图像,并依次交叉排列。
例如收到两个图像信号源分别为A与B,而图像信号源A与B均包含有多帧画面,分别为A1、A2、A3、A4……,B1、B2、B3、B4……,这些画面均作为单独的一张背景图像,依次交叉排列即为:A1、B1、A2、B2、A3、B3、A4、B4……以此类推。所以两个摄像机分别对应拍摄“A”背景画面与“B”背景画面。如果有5个摄像机,分别对应图像信号源A、B、C、D、E,则本步骤将对这5个图像信号源中的画面依次交叉排列,而A、B、C、D、E的顺序则需要对应后续实施例的摄像机的拍摄顺序,所以视具体的拍摄需求来设定即可。
通常情况下,各个摄像机所拍摄的角度并不相同,所以各个摄像机对应拍摄到的背景图像虽属于相同或相近似的场景,但具体内容却不一样。例如1号摄像机从人物左侧进行拍摄,则对应的背景图像A应当为左侧视角的布景图,而2号摄像机从人物右侧进行拍摄时,则对应的背景图像B应当为右侧视角的布景图,这两个方向的背景图像内容应当为同一场景,但由于视角的关系,图像中的部分物体会有对应的尺寸(距离近的物品尺寸大、距离远的物品尺寸小),也会具有不同视角的变形。同一摄像机所拍到的背景图像可以完全相同也可以有所不同,完全相同的背景图像经拍摄后所展现的是一种背景静止的效果,例如建筑物,而略微变化的背景图像经拍摄后所展现的是一个动态变化的效果,例如风景。
步骤S30:根据图像信号源的播放帧率计算背景图像文件的显示帧率,并根据显示帧率以及摄像机的数量N计算每个摄像机相邻两次拍摄之间的拍摄间隔时间;拍摄间隔时间=N/显示帧率。
背景图像文件的显示帧率体现的是该背景图像文件在LED显示屏上显示时,相邻两张背景图像的播放间隔时间。例如图像信号源为单信号源时,如果该图像信号源的播放帧率为60Hz,对应有两个摄像机进行拍摄时,则背景图像文件的显示帧率为120Hz,背景图像文件中的相邻两帧画面显示的时间间隔为8.33ms(1/120计算所得),任意一个摄像机实现相邻两次拍摄时,拍摄间隔时间=2/120=16.67ms,所以在摄像机对LED显示屏进行拍摄时,1号摄像机每16.67ms拍摄一次LED显示屏,2号摄像机每16.67ms拍摄一次LED显示屏,若背景图像文件中的背景图像编排的顺序为AB,则在LED显示屏显示图像信号源A中的背景图像时,由1号摄像机对LED显示屏进行拍摄,通过8.33ms后LED显示屏显示图像信号源B中的背景图像,此时由2号摄像机对LED显示屏进行拍摄,再经过8.33ms后LED显示屏显示图像信号源A中的背景图像,此时再由1号摄像机对LED显示屏进行拍摄,以此类推。所以,任意一个摄像机实现相邻的两次拍摄时,拍摄间隔时间为16.67ms。
步骤S40:将具备显示帧率的背景图像文件向LED显示屏发送。
由LED显示屏对已设定显示帧率的背景图像文件进行播放。
本发明还包括一种实施例为一种基于多帧图像的视频处理设备,如图2所示,视频处理设备101包括信号获取模块1011、图像编排模块1012、显示帧率设定模块1013以及发送模块1014,其中,
信号获取模块1011,与图像编排模块1012相连接,用于获取拍摄需求信息,并根据拍摄需求信息确定所需摄像机的数量N,以及收取图像信号源。
图像编排模块1012,与信号获取模块1011、显示帧率设定模块1013相连接,用于根据摄像机的数量N对图像信号源中所包含的背景图像进行编排,得到背景图像文件。
显示帧率设定模块1013,与图像编排模块1012、发送模块1014相连接,用于根据图像信号源的播放帧率计算背景图像文件的显示帧率,并根据显示帧率以及摄像机的数量N计算每个摄像机相邻两次拍摄之间的拍摄间隔时间;拍摄间隔时间=N/显示帧率。
发送模块1014,与显示帧率设定模块1013相连接,用于将具备显示帧率的背景图像文件向LED显示屏发送。
本实施例视频处理设备101中各模块所实现的对应功能可参考前述对于基于多帧图像的视频处理方法的实施例进行实现,此处将不再赘述。
本发明还包括一种实施例为一种基于LED显示屏的虚拟背景拍摄系统,如图3所示,系统包括上述实施例的视频处理设备101,还包括发送卡102、LED显示屏103以及N个摄像机104,其中:
视频处理设备101,与发送卡102相连接,用于向发送卡102发送具备显示帧率的背景图像文件,以及向发送卡102发送显示控制指令;还与N个摄像机104分别连接,且与摄像机104同步锁定。
发送卡102,与视频处理设备101及LED显示屏103相连接,用于接收并存储背景图像文件,以及读取并向LED显示屏103发送背景图像文件;还用于接收显示控制指令并向LED显示屏103发送。
LED显示屏103,与发送卡102相连接,用于接收并存储背景图像文件,以及根据显示控制指令对背景图像文件按照显示帧率进行轮巡播放。
N个摄像机104,与视频处理设备101连接并同步锁定,N个摄像机104在视频处理设备101发送显示控制指令时,每个摄像机按拍摄间隔时间依次对LED显示屏103进行轮换拍摄,使得每个摄像机104仅拍摄到与之对应的背景图像。
LED显示屏103按照设定的显示帧率对背景图像文件进行轮巡播放时,结合前述实施例的实例,所形成的则是背景图像A1、背景图像B1、背景图像A2、背景图像B2、背景图像A3、背景图像B3、背景图像A4、背景图像B4……的连续播放的播放效果,且每两个背景图像之间的画面间隔为8.33ms,每播放图像信号源A中相邻的两个背景图像(例如A1与A2之间)所间隔的时间为16.67ms,每播放图像信号源B中相邻的两个背景图像(例如B2与B3之间)所间隔的时间也为16.67ms,自视频处理设备101发送显示控制指令后,LED显示屏103首先播放图像信号源A中的背景图像,此时1号摄像机104对LED显示屏103进行拍摄,当8.33ms后显示图像信号源B中的背景图像时,由2号摄像机104对LED显示屏103进行拍摄,再过8.33ms后显示图像信号源A中的背景图像,再由1号摄像机104对LED显示屏103进行拍摄,如此轮换拍摄,使得1号摄像机104始终拍摄到的是图像信号源A中的背景图像,而2号摄像机104始终拍摄到的是图像信号源B中背景图像。
视频处理设备101与摄像机104同步锁定,使得LED显示屏103显示开始的时候,同时摄像机104也开始拍摄,从而实现同步性。视频处理设备101与摄像机104同步锁定的方式可采用与视频处理设备101相连接一项外部设备,该设备能够在视频处理设备101发送显示控制指令时向摄像机104发送同步信号,使得LED显示屏103显示与摄像机104拍摄能够形成以上示例中相对应的效果。
具体的,发送卡102接收并存储背景图像文件,以及读取并向LED显示屏103发送背景图像文件,包括:
将背景图像文件中的背景图像写入DDR模块中;
对DDR模块中的背景图像按照编排顺序重复读取,并向LED显示屏103发送。
本实施例选用的DDR模块所具备的存储空间默认能够满足所有背景图像的写入。本实施例还存在一种情况为:先将图像信号源A中的背景图像写入发送卡102的第一个DDR模块(也可为SDRAM模块)中,将图像信号源B中的背景图像写入第二个DDR模块(也可为SDRAM模块)中,在实际需要播放的时候,从第一个DDR模块(或SDRAM模块)中读取图像信号源A中的第一个背景图像并写入第三个DDR模块中,再从第二个DDR模块(或SDRAM模块)中读取图像信号源B中的第一张背景图像并写入第三个DDR模块中,再从第一个DDR模块(或SDRAM模块)中读取图像信号源A中的第二个背景图像并写入第三个DDR模块中,再从第二个DDR模块(或SDRAM模块)中读取图像信号源B中的第二张背景图像并写入第三个DDR模块中,直至将图像信号源A、B中的背景图像全部写入到第三个DDR模块中。在向LED显示屏103发送时,从第三个DDR模块中依次重复读取背景图像,从而形成背景图像A1、背景图像B1、背景图像A2、背景图像B2、背景图像A3、背景图像B3、……、背景图像A1、背景图像B1、背景图像A2、背景图像B2、背景图像A3、背景图像B3、……的效果。
具体的,在本发明实施例的视频处理设备101中,信号获取模块1011,还用于根据拍摄需求信息确定每个摄像机104的拍摄位置;图像编排模块1012,还用于根据背景图像的分辨率以及对应摄像机104的拍摄位置,确定背景图像在LED显示屏103的显示区域及未显示区域。
在前述实施例中可默认为将每个背景图像都全屏显示在LED显示屏103上,所以从人体肉眼的观察角度来看,LED显示屏103一直属于全屏显示,且显示的画面是背景图像A与背景图像B的叠加效果(因为人体视觉对帧率的识别远低于120Hz)。若在保证拍摄效果的前提下,需要每个背景图像的分辨率最好相同,且全屏显示在LED显示屏103上时仍旧能够保证最佳的显示效果。但是,通常情况下,各个背景图像的分辨率并不相同,如果屏幕过大,有些背景图像全屏显示在LED显示屏103上时其清晰度会降低,这样就会影响最终的拍摄效果,所以本实施例将对背景图像的分辨率进行进一步的考虑,通过在LED显示屏103的部分显示区域播放背景图像,以达到最佳的拍摄效果。而播放改背景图像的部分显示区域,则与对应摄像机104拍摄LED显示屏103的拍摄位置(LED显示屏103的部分区域)相对应,从而确定出背景图像在LED显示屏103的显示区域及未显示区域,未显示区域可理解为不进行显示,或显示成黑色。
具体的,本实施例在上一实施例的基础上,将背景图像文件中的背景图像写入DDR模块中,包括:
根据LED显示屏103的分辨率大小,在DDR模块中划分出大小对应的若干个存储区域;
根据每个背景图像在LED显示屏103的显示区域及未显示区域,将每个背景图像分别存储在存储区域中。
如果背景图像包括A与B,本实施例中的背景图像A、背景图像B的显示区域既可以完全共用,也可以部分共用,或者不共用。而在最终LED显示屏103上的显示效果实质上是共用部分以8.33ms时长间隔显示,而非共用部分的显示内容不会变化。根据每个背景图像在LED显示屏103的显示区域及未显示区域,将每个背景图像分别存储在存储区域中,之后对背景图像进行读取时,在显示区域读取到图像数据可以反馈1,而在未显示区域读取到图像数据则反馈0。
具体的,本实施例在以上实施例的基础上,将背景图像文件中的背景图像写入DDR模块中,包括:
以坐标形式将背景图像写入DDR模块中;
以背景图像的(0,0)坐标作为读取所有背景图像的起始坐标,以每个背景图像的最末坐标作为读取该背景图像的结束坐标,将起始坐标及结束坐标分别对应背景图像进行存储。
此实施例与上一实施例的实现方式不同,本实施例不考虑未显示区域,只读取背景图像所包含的数据。
本发明实施例的基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统,根据拍摄需求信息以及背景图像生成具有设定显示帧率的背景图像文件,从而由摄像机按照所计算的拍摄间隔时间进行拍摄,解决了当前采用LED显示屏图像作为拍摄背景时,多个摄像机拍摄到的背景图像与实际场景存在不一致的问题,本发明使得摄像机拍摄的背景图像与现实中物体显示效果更加贴近,给人的观感也更加真实,同时也解决了当前影视拍摄场景中无法进行实地拍摄的问题,从而提高了拍摄效率。
以上借助具体实施例对本发明做了进一步描述,但是应该理解的是,这里具体的描述,不应理解为对本发明的实质和范围的限定,本领域内的普通技术人员在阅读本说明书后对上述实施例做出的各种修改,都属于本发明所保护的范围。

Claims (8)

1.一种基于多帧图像的视频处理方法,其特征在于,包括:
获取拍摄需求信息,并根据所述拍摄需求信息确定所需摄像机的数量N;
收取图像信号源,并根据摄像机的数量N对所述图像信号源中所包含的背景图像进行编排,得到背景图像文件;
根据所述图像信号源的播放帧率计算所述背景图像文件的显示帧率,并根据所述显示帧率以及摄像机的数量N计算每个摄像机相邻两次拍摄之间的拍摄间隔时间;所述拍摄间隔时间=N/显示帧率;
将具备显示帧率的所述背景图像文件向LED显示屏发送。
2.如权利要求1所述的基于多帧图像的视频处理方法,其特征在于,根据摄像机的数量N对所述图像信号源中所包含的背景图像进行编排,包括:
若图像信号源为单信号源,则将所述图像信号源的每一帧画面拆分成N张背景图像,并按照顺序依次排列;
若图像信号源为多信号源,则将各个图像信号源中的每一帧画面均作为一个背景图像,并依次交叉排列。
3.一种基于多帧图像的视频处理设备,其特征在于,所述视频处理设备包括信号获取模块、图像编排模块、显示帧率设定模块以及发送模块,其中,
所述信号获取模块,与所述图像编排模块相连接,用于获取拍摄需求信息,并根据所述拍摄需求信息确定所需摄像机的数量N,以及收取图像信号源;
所述图像编排模块,与所述信号获取模块、显示帧率设定模块相连接,用于根据摄像机的数量N对所述图像信号源中所包含的背景图像进行编排,得到背景图像文件;
所述显示帧率设定模块,与所述图像编排模块、发送模块相连接,用于根据所述图像信号源的播放帧率计算所述背景图像文件的显示帧率,并根据所述显示帧率以及摄像机的数量N计算每个摄像机相邻两次拍摄之间的拍摄间隔时间;所述拍摄间隔时间=N/显示帧率;
所述发送模块,与所述显示帧率设定模块相连接,用于将具备显示帧率的所述背景图像文件向LED显示屏发送。
4.一种基于LED显示屏的虚拟背景拍摄系统,其特征在于,所述系统包括权利要求3所述的视频处理设备,还包括发送卡、LED显示屏以及N个摄像机,其中:
所述视频处理设备,与所述发送卡相连接,用于向所述发送卡发送具备显示帧率的所述背景图像文件,以及向所述发送卡发送显示控制指令;还与N个所述摄像机分别连接,且与所述摄像机同步锁定;
所述发送卡,与所述视频处理设备及所述LED显示屏相连接,用于接收并存储所述背景图像文件,以及读取并向所述LED显示屏发送所述背景图像文件;还用于接收所述显示控制指令并向LED显示屏发送;
所述LED显示屏,与所述发送卡相连接,用于接收并存储所述背景图像文件,以及根据所述显示控制指令对所述背景图像文件按照所述显示帧率进行轮巡播放;
N个所述摄像机,与所述视频处理设备连接并同步锁定,N个所述摄像机在所述视频处理设备发送所述显示控制指令时,每个所述摄像机按所述拍摄间隔时间依次对所述LED显示屏进行轮换拍摄,使得每个摄像机仅拍摄到与之对应的背景图像。
5.如权利要求4所述的基于LED显示屏的虚拟背景拍摄系统,其特征在于,所述发送卡接收并存储所述背景图像文件,以及读取并向所述LED显示屏发送所述背景图像文件,包括:
将所述背景图像文件中的所述背景图像写入DDR模块中;
对DDR模块中的所述背景图像按照编排顺序重复读取,并向所述LED显示屏发送。
6.如权利要求5所述的基于LED显示屏的虚拟背景拍摄系统,其特征在于,所述视频处理设备中,
所述信号获取模块,还用于根据所述拍摄需求信息确定每个摄像机的拍摄位置;
所述图像编排模块,还用于根据所述背景图像的分辨率以及对应摄像机的拍摄位置,确定所述背景图像在LED显示屏的显示区域及未显示区域。
7.如权利要求6所述的基于LED显示屏的虚拟背景拍摄系统,其特征在于,将所述背景图像文件中的所述背景图像写入DDR模块中,包括:
根据LED显示屏的分辨率大小,在所述DDR模块中划分出大小对应的若干个存储区域;
根据每个所述背景图像在LED显示屏的显示区域及未显示区域,将每个所述背景图像分别存储在所述存储区域中。
8.如权利要求5所述的基于LED显示屏的虚拟背景拍摄系统,其特征在于,将所述背景图像文件中的所述背景图像写入DDR模块中,包括:
以坐标形式将所述背景图像写入DDR模块中;
以所述背景图像的(0,0)坐标作为读取所有背景图像的起始坐标,以每个所述背景图像的最末坐标作为读取该背景图像的结束坐标,将所述起始坐标及所述结束坐标分别对应所述背景图像进行存储。
CN202111158255.7A 2021-09-30 2021-09-30 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统 Active CN113923354B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111158255.7A CN113923354B (zh) 2021-09-30 2021-09-30 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111158255.7A CN113923354B (zh) 2021-09-30 2021-09-30 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统

Publications (2)

Publication Number Publication Date
CN113923354A true CN113923354A (zh) 2022-01-11
CN113923354B CN113923354B (zh) 2023-08-01

Family

ID=79237663

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111158255.7A Active CN113923354B (zh) 2021-09-30 2021-09-30 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统

Country Status (1)

Country Link
CN (1) CN113923354B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114302064A (zh) * 2022-01-27 2022-04-08 卡莱特云科技股份有限公司 一种基于接收卡的视频处理方法、装置及系统
CN115334235A (zh) * 2022-07-01 2022-11-11 西安诺瓦星云科技股份有限公司 视频处理方法、装置、终端设备和存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101605211A (zh) * 2009-07-23 2009-12-16 杭州镭星科技有限公司 将虚拟三维建筑与现实环境实拍视频无缝合成的方法
JP2011077821A (ja) * 2009-09-30 2011-04-14 Casio Computer Co Ltd 画像合成装置、画像合成方法及びプログラム
CN105072314A (zh) * 2015-08-13 2015-11-18 黄喜荣 一种可自动跟踪目标的虚拟演播室实现方法
CN207399373U (zh) * 2017-09-18 2018-05-22 东斓视觉科技发展(北京)有限公司 模拟化实景拍摄系统
CN108289220A (zh) * 2018-01-15 2018-07-17 深圳市奥拓电子股份有限公司 虚拟图像处理方法、图像处理系统及存储介质
JP2019075740A (ja) * 2017-10-18 2019-05-16 キヤノン株式会社 画像処理システム、画像処理装置、画像伝送方法、及び、プログラム
US20190156579A1 (en) * 2017-11-23 2019-05-23 Blueprint Reality Inc. Mixed reality video production with detached camera
CN111223190A (zh) * 2019-12-30 2020-06-02 安徽逻根农业科技有限公司 一种现实场景中采集vr图像的处理方法
CN111698390A (zh) * 2020-06-23 2020-09-22 网易(杭州)网络有限公司 虚拟摄像机控制方法及装置、虚拟演播厅实现方法及系统
CN112330736A (zh) * 2020-11-02 2021-02-05 北京虚拟动点科技有限公司 一种场景画面的拍摄方法、装置、电子设备及存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101605211A (zh) * 2009-07-23 2009-12-16 杭州镭星科技有限公司 将虚拟三维建筑与现实环境实拍视频无缝合成的方法
JP2011077821A (ja) * 2009-09-30 2011-04-14 Casio Computer Co Ltd 画像合成装置、画像合成方法及びプログラム
CN105072314A (zh) * 2015-08-13 2015-11-18 黄喜荣 一种可自动跟踪目标的虚拟演播室实现方法
CN207399373U (zh) * 2017-09-18 2018-05-22 东斓视觉科技发展(北京)有限公司 模拟化实景拍摄系统
JP2019075740A (ja) * 2017-10-18 2019-05-16 キヤノン株式会社 画像処理システム、画像処理装置、画像伝送方法、及び、プログラム
US20190156579A1 (en) * 2017-11-23 2019-05-23 Blueprint Reality Inc. Mixed reality video production with detached camera
CN108289220A (zh) * 2018-01-15 2018-07-17 深圳市奥拓电子股份有限公司 虚拟图像处理方法、图像处理系统及存储介质
CN111223190A (zh) * 2019-12-30 2020-06-02 安徽逻根农业科技有限公司 一种现实场景中采集vr图像的处理方法
CN111698390A (zh) * 2020-06-23 2020-09-22 网易(杭州)网络有限公司 虚拟摄像机控制方法及装置、虚拟演播厅实现方法及系统
CN112330736A (zh) * 2020-11-02 2021-02-05 北京虚拟动点科技有限公司 一种场景画面的拍摄方法、装置、电子设备及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114302064A (zh) * 2022-01-27 2022-04-08 卡莱特云科技股份有限公司 一种基于接收卡的视频处理方法、装置及系统
CN114302064B (zh) * 2022-01-27 2024-01-26 北京同尔科技有限公司 一种基于接收卡的视频处理方法、装置及系统
CN115334235A (zh) * 2022-07-01 2022-11-11 西安诺瓦星云科技股份有限公司 视频处理方法、装置、终端设备和存储介质
CN115334235B (zh) * 2022-07-01 2024-06-04 西安诺瓦星云科技股份有限公司 视频处理方法、装置、终端设备和存储介质

Also Published As

Publication number Publication date
CN113923354B (zh) 2023-08-01

Similar Documents

Publication Publication Date Title
JP3992045B2 (ja) 映像信号処理装置及び該方法並びに仮想現実感生成装置
CN107341832B (zh) 一种基于红外定位系统的多视角切换拍摄系统和方法
CN113923354B (zh) 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统
CN106210535A (zh) 全景视频实时拼接方法及装置
US11573758B2 (en) Display device and multi-display system
WO2013108285A1 (ja) 画像記録装置、立体画像再生装置、画像記録方法、及び立体画像再生方法
TWI584050B (zh) 全景立體圖像的合成方法、裝置及其移動終端
CN110730340B (zh) 基于镜头变换的虚拟观众席展示方法、系统及存储介质
CN112752085A (zh) 基于人眼跟踪的裸眼3d视频播放系统及方法
CN114125301A (zh) 一种虚拟现实技术拍摄延迟处理方法及装置
US7034819B2 (en) Apparatus and method for generating an interleaved stereo image
WO2024022086A1 (zh) 基于三维显示的视频通信方法及系统
JP7176348B2 (ja) 画像出力システム、方法、およびプログラム
CN112017242A (zh) 显示方法及装置、设备、存储介质
CN114040184B (zh) 图像显示方法、系统、存储介质及计算机程序产品
CN106681674A (zh) 一种虚拟现实显示器的显示控制方法及系统
JP2003323170A (ja) 画像表示システムと画像処理装置及び画像表示方法
JPH0965374A (ja) 3次元映像記録装置および3次元映像再生装置
JP4423416B2 (ja) 映像合成処理システム
CN114461165B (zh) 虚实相机画面同步方法、装置及存储介质
JP3087236B2 (ja) 立体視画像の合成表示装置
KR101325129B1 (ko) 멀티미디어 동영상 처리장치와 방법 및 동영상 처리를 위한 컴퓨터 프로그램 저장수단
CN112911268B (zh) 一种图像的显示方法及电子设备
JP2006270160A (ja) 画像データ処理装置
KR101919428B1 (ko) 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant