CN111710037A - 显示屏辅助大型人群表演虚拟编排仿真系统 - Google Patents
显示屏辅助大型人群表演虚拟编排仿真系统 Download PDFInfo
- Publication number
- CN111710037A CN111710037A CN202010834585.2A CN202010834585A CN111710037A CN 111710037 A CN111710037 A CN 111710037A CN 202010834585 A CN202010834585 A CN 202010834585A CN 111710037 A CN111710037 A CN 111710037A
- Authority
- CN
- China
- Prior art keywords
- display screen
- display
- image
- video
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004088 simulation Methods 0.000 title claims abstract description 55
- 238000013507 mapping Methods 0.000 claims abstract description 31
- 238000000034 method Methods 0.000 claims abstract description 22
- 238000012549 training Methods 0.000 claims abstract description 13
- 230000015572 biosynthetic process Effects 0.000 claims description 32
- 238000005755 formation reaction Methods 0.000 claims description 32
- 238000006243 chemical reaction Methods 0.000 claims description 31
- 238000012545 processing Methods 0.000 claims description 22
- 230000011218 segmentation Effects 0.000 claims description 17
- 230000005540 biological transmission Effects 0.000 claims description 14
- 238000005192 partition Methods 0.000 claims description 14
- 230000009466 transformation Effects 0.000 claims description 11
- 230000001360 synchronised effect Effects 0.000 claims description 10
- 238000012544 monitoring process Methods 0.000 claims description 8
- 238000004458 analytical method Methods 0.000 claims description 5
- 230000033001 locomotion Effects 0.000 abstract description 4
- 238000000465 moulding Methods 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 8
- 238000013461 design Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000002131 composite material Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000003796 beauty Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/215—Motion-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41415—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance involving a public display, viewable by several users in a public space outside their home, e.g. movie theatre, information kiosk
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明涉及一种显示屏辅助大型人群表演虚拟编排仿真系统，包括二维点位编排模块、三维仿真模块、训练手册生成模块、显示映射模块，其中：二维点位编排模块根据导演创意生成对应的人群点位；三维仿真模块使用三维引擎实现人群表演三维预演仿真；训练手册生成模块根据预演仿真数据生成针对每个演员的训练手册；显示映射模块将导演创意的背景图像或视频映射到每一块手持显示屏。能够依据仿真预演数据，为演员的运动以及手持显示屏的显示提供表演依据和数据支持，精准实现设计人员创意的图像和视频美术造型，并对表演过程进行有效监控。
Description
技术领域
本发明涉及一种大型人群表演仿真系统，特别涉及一种显示屏辅助大型人群表演虚拟编排仿真系统。
背景技术
大型人群表演，通常是指以广场等开放场地为表演背景的大型人群文艺表演。其表现形式通常包含大规模的演员阵容，同时配合灯光、舞美、焰火等辅助表演形式，突出表演主题，达到震撼的视听效果。
大型人群表演的排练是一件费时费力的事情。为了避免通过人工指挥花费大量时间和人力来调整表演创意方案，同时提高排练准确度和效率，需要对各表演元素及其表演过程进行数据建模和仿真预演，然后输出各表演元素在表演过程中的仿真数据，辅助编创人员指挥各表演元素排练。
随着IT技术的发展，现代化手段越来越多的运用于人群表演，一个重要应用就是手持道具的更新。常见的手持道具是色板、彩旗等，随着IT技术的发展，近年来开始将显示屏应用于大型人群表演。显示屏可以随时间展示不同的画面，构成丰富的图像甚至视频背景，为导演和设计人员的创意表达提供更加丰富的手段。
在大型人群表演中，包含成千上万的大规模演员阵容，如果使用手持显示屏，意味着需要对成千上万块LED显示屏的显示内容进行管理，如果为每块显示屏单独设计显示内容，无疑将会耗费巨大的人力物力，而且加大了表演设计人员的设计难度，也难以保证所有显示屏最终的合成效果。而且海量视频内容的转换和实时显示对存储空间、处理速度也提出了很高的要求，带来不小的技术难度。
在对表演创意方案进行仿真预演后，在排练以及实际表演时，迫切需要提供一种客观科学的人群表演编排仿真系统，以仿真预演方案为依据，使用仿真预演数据为演员提供表演过程的数据依据，并且整合表演过程中包括手持显示屏的各种道具资源，对表演过程进行有效监控。这种综合性的表演编排仿真系统，现有技术中未见相关记载。
发明内容
本发明的目的在于针对现有技术的不足，提供一种显示屏辅助大型人群表演虚拟编排仿真系统，依据仿真预演数据，为演员的运动以及手持显示屏的显示提供表演依据和数据支持，精准实现设计人员创意的图像和视频美术造型，并对表演过程进行有效监控。
为实现以上目的，本发明提供了包括二维点位编排模块、三维仿真模块、训练手册生成模块、显示映射模块，其中：
二维点位编排模块根据导演创意生成对应的人群点位；
三维仿真模块使用三维引擎实现人群表演三维预演仿真；
训练手册生成模块根据预演仿真数据生成针对每个演员的训练手册；
显示映射模块将导演创意的背景图像或视频映射到每一块手持显示屏。
根据本发明实施例所述的一种具体实施方式，所述显示映射模块包括控制中心端的图像转换处理单元以及手持显示屏端的LED屏幕、显示控制器，图像转换处理单元包括将背景图像映射到每一块手持显示屏的子单元，所述映射通过以下步骤实现：
S1、通过人群点位得到每块显示屏的空间坐标；
S2、将每块显示屏抽象为一个几何形状，在源图像平面上展开，根据展开后的几何形状与源图像的对应关系，得到每块显示屏在源图像中的对应分割区域；
S3、对每块显示屏循环执行以下操作：
S31、从源图像中分割出显示屏对应分割区域；
S32、将对应分割区域内容输出到显示屏的显示控制器；
S33、根据显示控制器的内容在显示屏上显示对应图像。
根据本发明实施例所述的一种具体实施方式，所述显示映射模块还包括控制中心端的网络传输部件以及手持显示屏端与显示控制器连接的网络传输部件，所述将对应分割区域内容输出到显示屏的显示控制器是指通过无线网络传输的方式输出。
根据本发明实施例所述的一种具体实施方式，手持显示屏端的显示控制器连接有视频存储部件，所述图像转换处理单元还包括将背景视频映射到每一块手持显示屏的子单元，所述映射实现方法为：
在每一个显示时点获得对应关键帧图像，并执行步骤S1~S3：
S1、通过人群点位得到每块显示屏的空间坐标；
S2、将每块显示屏抽象为一个几何形状，在源图像平面上展开，根据展开后的几何形状与源图像的对应关系，得到每块显示屏在源图像中的对应分割区域；
S3、对每块显示屏循环执行以下操作：
S31、从源图像中分割出显示屏对应分割区域；
S32、将对应分割区域内容输出到与显示控制器连接的视频存储部件。
根据本发明实施例所述的一种具体实施方式，控制中心端的网络传输部件在需要显示屏输出视频的时候发送网络同步输出信号，手持显示屏端的显示控制器接收到网络同步输出信号后，将视频存储部件中的多帧目标图像内容依次输出到显示屏。
根据本发明实施例所述的一种具体实施方式，所述图像转换处理单元在将背景图像或视频映射到每一块手持显示屏时，在步骤S3之前，将源图像读入源内存；在步骤S3中，从源图像中分割出显示屏对应分割区域的方法为：为显示屏分配目标内存空间，根据显示屏在源图像中的对应分割区域中每个像素点相对于图像原点的偏移量，获得该分割区域对应的源内存地址空间，并将地址空间内容按照显示屏像素点顺序复制到目标内存。
根据本发明实施例所述的一种具体实施方式，所述图像转换处理单元还包括对分割区域进行图像编辑的子单元。
根据本发明实施例所述的一种具体实施方式，所述二维点位编排模块还包括队形变换编排单元和基于视频的队形编排单元，其中：
队形变换编排单元，用于生成队形变换时每个虚拟演员的路径；
基于视频的队形编排单元，用于对队形变换视频进行逐帧分析，生成与视频对应的多帧点位，再通过队形变换编排单元实现不同帧队形的变换。
根据本发明实施例所述的一种具体实施方式，还包括显示监控模块，用于通过手持显示屏端的采集卡，采集LED视频图像回传到控制中心端并进行分析比对。
根据本发明实施例所述的一种具体实施方式，还包括演员执行监控模块，用于采集演员执行数据回传到控制中心端并进行分析比对。
有益效果
本发明提出的一种显示屏辅助大型人群表演虚拟编排仿真系统，能够依据仿真预演数据，为演员的运动以及手持显示屏的显示提供表演依据和数据支持，精准实现设计人员创意的图像和视频美术造型，并对表演过程进行有效监控。
附图说明
图1为一种显示屏辅助大型人群表演虚拟编排仿真系统结构图；
图2为一种大型人群表演点位示意图；
图3为针对图像的显示屏辅助美术造型生成方法数据流图；
图4为针对视频的显示屏辅助美术造型生成方法数据流图；
图5为显示映射模块的结构示意图。
具体实施方式
下面结合附图，具体说明本发明的优选实施方式。
大型人群表演的排练是一件费时费力的事情。为了避免通过人工指挥花费大量时间和人力来调整表演创意方案，同时提高排练准确度和效率，需要对各表演元素及其表演过程进行数据建模和仿真预演，然后输出各表演元素在表演过程中的仿真数据，辅助编创人员指挥各表演元素排练。
随着IT技术的发展，近年来开始将显示屏应用于大型人群表演。显示屏可以随时间展示不同的画面，构成丰富的图像甚至视频背景，为导演和设计人员的创意表达提供更加丰富的手段。手持显示屏特别适合夜晚演出，在黑夜背景下，手持显示屏能够构造炫目的光影效果。
在大型人群表演中，包含成千上万的大规模演员阵容，如果使用手持显示屏，意味着需要对成千上万块LED显示屏的显示内容进行管理，如果为每块显示屏单独设计显示内容，无疑将会耗费巨大的人力物力，而且加大了设计人员的设计难度，也难以保证所有显示屏最终的合成效果。而且海量视频内容的转换和实时显示对存储空间、处理速度也提出了很高的要求。因此，如何在复杂的人群表演中融合显示屏背景显示，为人群表演实现提出高难度挑战。
为解决上述技术问题，本实施例提出了一种显示屏辅助大型人群表演虚拟编排仿真系统，如图1所示，包括二维点位编排模块、三维仿真模块、训练手册生成模块、显示映射模块，其中：
二维点位编排模块根据导演创意生成对应的人群点位；
三维仿真模块使用三维引擎实现人群表演三维预演仿真；
训练手册生成模块根据预演仿真数据生成针对每个演员的训练手册；
显示映射模块将导演创意的背景图像或视频映射到每一块手持显示屏。
在大型人群表演中，预演仿真技术已经得到越来越广泛的应用，通过仿真系统实现虚拟编排为导演创意和表演指挥提供了极大的便利。在本实施例的一种显示屏辅助大型人群表演虚拟编排仿真系统中，二维点位编排模块是核心模块，生成表演过程中的人群点位，为三维仿真模块、训练手册生成模块、显示映射模块都提供了数据支持。如图2所示就是根据导演创意的图像生成的人群点位图。在大型人群表演中，将图像转换为点位图是进行表演编排的基本功能模块，例如申请号为200810117990.1的发明专利《广场文艺表演仿真编排系统》，申请号为200810117991-大型文艺表演三维交互式虚拟编排系统；申请号为201910275997.4的专利申请《大型广场文艺表演仿真系统》等。
本实施例提出的显示屏辅助大型人群表演虚拟编排仿真系统，整合了表演过程中包括手持显示屏的各种道具资源，是一种集演出设计、三维预演、演出编排、显示控制为一体的综合性的表演编排仿真系统，对于在人群表演中对手持显示屏的管理是通过显示映射模块来实现的。
根据本发明实施例所述的一种具体实现方式，所述显示映射模块包括控制中心端的图像转换处理单元以及手持显示屏端的LED屏幕、显示控制器，图像转换处理单元包括将背景图像映射到每一块手持显示屏的子单元，所述映射通过以下步骤实现：
S1、通过人群点位得到每块显示屏的空间坐标；
为了进行显示屏图像内容的精准映射，首先需要从二维点位编排模块获得每个演员的位置，从而得到每块显示屏的空间坐标。
S2、将每块显示屏抽象为一个几何形状，在源图像平面上展开，根据展开后的几何形状与源图像的对应关系，得到每块显示屏在源图像中的对应分割区域；
演员手持显示屏可以是多种形状的，例如可以将显示屏设计成合页的形式，便于竖立在地上；当需要使用显示屏辅助造型时，演员将显示屏举起并展开，显示屏可以平行于地面，也可以有一定的倾斜角度。
为了进行显示屏图像精准映射，首先将每块显示屏抽象为一个几何形状，最常见的是矩形，也可以抽象成六边形等其他几何形状。根据显示屏尺寸设置几何形状的大小。将显示屏在源图像平面上进行展开。由于每块显示屏具有确定的位置和大小，源图像也可以映射到整个表演场地，可以得到展开后的几何形状与源图像的对应关系，进一步得到每块显示屏在源图像中的对应分割区域。
S3、对每块显示屏循环执行以下操作：
S31、从源图像中分割出显示屏对应分割区域；
S32、将对应分割区域内容输出到显示屏的显示控制器；
S33、根据显示控制器的内容在显示屏上显示对应图像。
在步骤S2中得到每块显示屏在源图像中的对应分割区域后，步骤S3需要将每块显示屏的待显示内容从源图像中分割出来，并传输到显示屏进行输出。与显卡控制显示器输出类似，大型表演中每块LED显示屏也需要通过信号线连接到显示控制器。演出技术支持人员将每块显示屏的待显示内容输出到显示控制器，显示屏通过信号线从显示控制器获得待输出内容并进行输出。
根据本发明实施例所述的一种具体实现方式，所述显示映射模块还包括控制中心端的网络传输部件以及手持显示屏端与显示控制器连接的网络传输部件，所述将对应分割区域内容输出到显示屏的显示控制器是指通过无线网络传输的方式输出。
大型人群表演使用的显示控制器由于考虑到重量、便携等因素，需要尽可能的精简功能。对于图像处理来说，大量的工作在于源图像获取、切割、转换、生成目标图像，需要使用大量硬件例如处理器、内存等。根据本发明实施例所述的一种具体实现方式，图像处理的工作由指挥控制中心的硬件集中处理，在显示屏上，只设计网络传输部件与显示控制器连接，通过无线网络传输的方式将对应分割区域内容输出到显示屏的显示控制器。
将视频分解为帧序列的视频帧间分割技术已经非常成熟，但是在视频帧图像内部进行分解提取的帧内分割技术由于应用场合特殊（一般涉及到特殊显示屏幕等特殊显示设备），没有成熟技术，也很少见到研究报道。
如果设计人员设计的是视频文件，技术人员需要在演员手持显示屏按照预设的显示时间间隔逐帧显示视频文件。视频映射体现为在每一个具体时刻的图像映射，因此为了进行视频映射，需要将每个源视频文件分解成视频帧图像序列，在每一个显示时点获得对应源图像，并执行步骤S1~S3。
在理想状况下，在每个显示时点，源图像经过转换实时输出到显示屏，这样就能在演员的手持显示屏上看到动态视频背景。但是，在实际情况中，由于大型表演成百上千块高分辨率显示屏，视频文件体量巨大，对每一帧源图像进行转换、复制、输出需要耗费很长的时间。因此，如果在每个显示的具体时刻进行视频帧图像的转换和输出，无法达到视频输出要求的帧速率，也就是无法实现实时视频背景显示的效果。
根据本发明实施例所述的一种具体实施方式，手持显示屏端的显示控制器连接有视频存储部件，所述图像转换处理单元还包括将背景视频映射到每一块手持显示屏的子单元，所述映射实现方法为：
在每一个显示时点获得对应关键帧图像，并执行步骤S1~S3：
S1、通过人群点位得到每块显示屏的空间坐标；
S2、将每块显示屏抽象为一个几何形状，在源图像平面上展开，根据展开后的几何形状与源图像的对应关系，得到每块显示屏在源图像中的对应分割区域；
S3、对每块显示屏循环执行以下操作：
S31、从源图像中分割出显示屏对应分割区域；
S32、将对应分割区域内容输出到与显示控制器连接的视频存储部件。
根据上述实现方式，在表演之前完成每块显示屏的源视频转换和目标视频存储；在表演进行的时候，直接将已经处理好的显示屏相关多帧目标图像读取到显示控制器，从而可以实现大型表演视频背景显示效果。
在将源视频文件转换为每块显示屏相关的视频文件时，最重要的是保持显示屏显示的时间和空间关系相一致：时间一致是指每个显示屏存储的视频文件是不同显示时点显示内容顺序排列构成的，帧顺序要与源视频保持严格一致；而空间一致是指每个视频文件都是与一块具体的显示屏相对应的，只包含在对应显示屏中的显示内容。显示屏存储的视频文件完全不同于源视频，如果在普通电脑上直接播放每个显示屏存储的视频文件，将会是琐碎凌乱难以理解的，但是如果将每个显示屏放置在对应的演出位置，并读取存储的视频文件，就可以正确控制每块显示屏的输出，多个显示屏的组合就可以显示正确的视频背景。
根据本发明实施例所述的一种具体实现方式，控制中心端的网络传输部件在需要显示屏输出视频的时候发送网络同步输出信号，手持显示屏端的显示控制器接收到网络同步输出信号后，将视频存储部件中的多帧目标图像内容依次输出到显示屏。
在大型演出视频背景的显示过程中，每块显示屏的显示信号同步输出是一个非常重要的问题。视频显示不同步会严重影响整个演出的视频背景生成。为实现多块显示屏同步显示，控制中心发送网络同步输出信号，显示屏接收到网络同步输出信号后，显示控制器将存储部件中的多帧目标图像内容依次输出到显示屏。
根据本发明实施例所述的一种具体实现方式，所述图像转换处理单元在将背景图像或视频映射到每一块手持显示屏时，在步骤S3之前，将源图像读入源内存；在步骤S3中，从源图像中分割出显示屏对应分割区域的方法为：为显示屏分配目标内存空间，根据显示屏在源图像中的对应分割区域中每个像素点相对于图像原点的偏移量，获得该分割区域对应的源内存地址空间，并将地址空间内容按照显示屏像素点顺序复制到目标内存。
图3展示了针对图像背景实时显示的实施例进行源图像帧内分割的数据流图。图4展示了针对视频背景转换和存储的实施例进行源图像帧内分割的数据流图。如图3和图4所示，设计人员设计的源图像一般以数据文件的形式存储在硬盘等辅助存储设备中。要进行手持显示屏映射时，首先将源图像读入源内存，源内存内容在所有显示屏处理显示期间保持不变。在步骤S2中得到每块显示屏在源图像中的对应分割区域，由该分割区域可以计算得到区域中每个像素点相对于图像原点的偏移量，从而可以得到该像素点对应的源内存地址。分割区域中所有像素点对应的源内存地址单元组合在一起就构成了该分割区域对应的源内存地址空间。分割区域对应的源内存地址空间有可能是源内存中的一块连续地址空间，如图3和图4中的分割区域2所示；也可能是源内存中一些离散的地址空间，如图3和图4中的分割区域1所示。除了存放源图像的源内存，需要为显示屏分配目标内存空间。获得每块显示屏对应的分割区域源内存地址空间后，需要将该地址空间的内容按照显示屏像素点的顺序复制到目标内存。最后将目标内存的待显示内容输出到显示控制器实时显示（图3），或者输出到与显示控制器连接的视频存储部件进行顺序存储（图4）。
图5展示了本发明提出的虚拟编排仿真系统显示映射模块的系统结构示意图。
根据本发明实施例的一种具体实现方式，所述图像转换处理单元还包括对分割区域进行图像编辑的子单元。
在显示屏显示过程中，经常需要对源内存的内容进行变换处理，也就是显示屏输出内容并非对源图像的简单复制，此时需要通过处理器将源内存的分割区域内容进行相应变换，如旋转、调色、缩放等图像编辑。例如，如果源图像对应分割区域与显示屏分辨率不一致，则需要对复制到目标内存空间的分割区域进行缩放，使得缩放后的分割区域与显示屏分辨率一致。
根据本发明实施例的一种具体实现方式，所述二维点位编排模块还包括队形变换编排单元，用于生成队形变换时每个虚拟演员的路径。队形变化编排单元提供人群表演时动态队形变换，每一个队形对应一个图2所示的点位图，通过规划不同队形之间演员的运动路径实现表演中的队形变换。
根据本发明实施例的一种具体实现方式，所述二维点位编排模块还包括基于视频的队形编排单元，用于对队形变换视频进行逐帧分析，生成与视频对应的多帧点位，再通过队形变换编排单元实现不同帧队形的变换。需要注意的是，此处的视频并非显示屏显示的背景视频。队形变换视频是导演对人群队形的设计，决定着演员每个时刻的点位；而显示屏显示的背景视频对应的是输出到手持显示屏的显示信号。
根据本发明实施例的一种具体实现方式，还包括显示监控模块，用于通过手持显示屏端的采集卡，采集LED视频图像回传到控制中心端并进行分析比对。
还包括演员执行监控模块，用于采集演员执行数据回传到控制中心端并进行分析比对。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称并不构成对该单元本身的限定。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，包括二维点位编排模块、三维仿真模块、训练手册生成模块、显示映射模块，其中：
二维点位编排模块根据导演创意生成对应的人群点位；
三维仿真模块使用三维引擎实现人群表演三维预演仿真；
训练手册生成模块根据预演仿真数据生成针对每个演员的训练手册；
显示映射模块将导演创意的背景图像或视频映射到每一块手持显示屏。
2.根据权利要求1所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，所述显示映射模块包括控制中心端的图像转换处理单元以及手持显示屏端的LED屏幕、显示控制器，图像转换处理单元包括将背景图像映射到每一块手持显示屏的子单元，所述映射通过以下步骤实现：
S1、通过人群点位得到每块显示屏的空间坐标；
S2、将每块显示屏抽象为一个几何形状，在源图像平面上展开，根据展开后的几何形状与源图像的对应关系，得到每块显示屏在源图像中的对应分割区域；
S3、对每块显示屏循环执行以下操作：
S31、从源图像中分割出显示屏对应分割区域；
S32、将对应分割区域内容输出到显示屏的显示控制器；
S33、根据显示控制器的内容在显示屏上显示对应图像。
3.根据权利要求2所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，所述显示映射模块还包括控制中心端的网络传输部件以及手持显示屏端与显示控制器连接的网络传输部件，所述将对应分割区域内容输出到显示屏的显示控制器是指通过无线网络传输的方式输出。
4.根据权利要求3所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，手持显示屏端的显示控制器连接有视频存储部件，所述图像转换处理单元还包括将背景视频映射到每一块手持显示屏的子单元，所述映射实现方法为：
在每一个显示时点获得对应关键帧图像，并执行步骤S1~S3：
S1、通过人群点位得到每块显示屏的空间坐标；
S2、将每块显示屏抽象为一个几何形状，在源图像平面上展开，根据展开后的几何形状与源图像的对应关系，得到每块显示屏在源图像中的对应分割区域；
S3、对每块显示屏循环执行以下操作：
S31、从源图像中分割出显示屏对应分割区域；
S32、将对应分割区域内容输出到与显示控制器连接的视频存储部件。
5.根据权利要求4所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，控制中心端的网络传输部件在需要显示屏输出视频的时候发送网络同步输出信号，手持显示屏端的显示控制器接收到网络同步输出信号后，将视频存储部件中的多帧目标图像内容依次输出到显示屏。
6.根据权利要求2~5任一项所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，所述图像转换处理单元在将背景图像或视频映射到每一块手持显示屏时，在步骤S3之前，将源图像读入源内存；在步骤S3中，从源图像中分割出显示屏对应分割区域的方法为：为显示屏分配目标内存空间，根据显示屏在源图像中的对应分割区域中每个像素点相对于图像原点的偏移量，获得该分割区域对应的源内存地址空间，并将地址空间内容按照显示屏像素点顺序复制到目标内存。
7.根据权利要求6所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，所述图像转换处理单元还包括对分割区域进行图像编辑的子单元。
8.根据权利要求7所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，所述二维点位编排模块还包括队形变换编排单元和基于视频的队形编排单元，其中：
队形变换编排单元，用于生成队形变换时每个虚拟演员的路径；
基于视频的队形编排单元，用于对队形变换视频进行逐帧分析，生成与视频对应的多帧点位，再通过队形变换编排单元实现不同帧队形的变换。
9.根据权利要求8所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，还包括显示监控模块，用于通过手持显示屏端的采集卡，采集LED视频图像回传到控制中心端并进行分析比对。
10.根据权利要求9所述的一种显示屏辅助大型人群表演虚拟编排仿真系统，其特征在于，还包括演员执行监控模块，用于采集演员执行数据回传到控制中心端并进行分析比对。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010834585.2A CN111710037A (zh) | 2020-08-19 | 2020-08-19 | 显示屏辅助大型人群表演虚拟编排仿真系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010834585.2A CN111710037A (zh) | 2020-08-19 | 2020-08-19 | 显示屏辅助大型人群表演虚拟编排仿真系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111710037A true CN111710037A (zh) | 2020-09-25 |
Family
ID=72547018
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010834585.2A Pending CN111710037A (zh) | 2020-08-19 | 2020-08-19 | 显示屏辅助大型人群表演虚拟编排仿真系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111710037A (zh) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108345637A (zh) * | 2018-01-02 | 2018-07-31 | 北京理工大学 | 一种基于增强现实的表演预演方法及系统 |
| CN109002271A (zh) * | 2018-08-01 | 2018-12-14 | 长兴创智科技有限公司 | 用于演出现场播放控制方法、装置、存储介质及电子设备 |
| CN109978976A (zh) * | 2019-04-08 | 2019-07-05 | 北京理工大学 | 大型广场文艺表演虚拟编排仿真系统 |
| KR102006600B1 (ko) * | 2018-12-21 | 2019-08-01 | 배명종 | 무대 연출을 위한 공연 시스템의 플렛폼. |
| CN110351497A (zh) * | 2019-07-10 | 2019-10-18 | 利亚德光电股份有限公司 | 一种拼接显示系统 |
| CN210403012U (zh) * | 2019-11-25 | 2020-04-24 | 京东方科技集团股份有限公司 | 光影屏 |
| CN210667580U (zh) * | 2019-07-05 | 2020-06-02 | 利亚德光电股份有限公司 | 一种手持可折叠的led显示屏 |
| CN111339687A (zh) * | 2020-03-26 | 2020-06-26 | 北京理工大学 | 基于深度学习的人群表演现场排练系统 |
-
2020
- 2020-08-19 CN CN202010834585.2A patent/CN111710037A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108345637A (zh) * | 2018-01-02 | 2018-07-31 | 北京理工大学 | 一种基于增强现实的表演预演方法及系统 |
| CN109002271A (zh) * | 2018-08-01 | 2018-12-14 | 长兴创智科技有限公司 | 用于演出现场播放控制方法、装置、存储介质及电子设备 |
| KR102006600B1 (ko) * | 2018-12-21 | 2019-08-01 | 배명종 | 무대 연출을 위한 공연 시스템의 플렛폼. |
| CN109978976A (zh) * | 2019-04-08 | 2019-07-05 | 北京理工大学 | 大型广场文艺表演虚拟编排仿真系统 |
| CN210667580U (zh) * | 2019-07-05 | 2020-06-02 | 利亚德光电股份有限公司 | 一种手持可折叠的led显示屏 |
| CN110351497A (zh) * | 2019-07-10 | 2019-10-18 | 利亚德光电股份有限公司 | 一种拼接显示系统 |
| CN210403012U (zh) * | 2019-11-25 | 2020-04-24 | 京东方科技集团股份有限公司 | 光影屏 |
| CN111339687A (zh) * | 2020-03-26 | 2020-06-26 | 北京理工大学 | 基于深度学习的人群表演现场排练系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107358643B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
| CN101236485A (zh) | 一种多屏3d同步显示的方法、装置及系统 | |
| CN107132912B (zh) | 一种gis与bim增强现实在建筑规划的互动演示方法及系统 | |
| CN103268628B (zh) | 虚拟表面渲染 | |
| CN103543827B (zh) | 基于单个摄像机的沉浸式户外活动交互平台的实现方法 | |
| US11250626B1 (en) | Virtual stage based on parallel simulation | |
| CN105629653A (zh) | 一种基于三维模型的交互式全息投影方法 | |
| CN109063039A (zh) | 一种基于移动端的视频地图动态标签显示方法及系统 | |
| JP2010286811A (ja) | 組立式表示設備およびその画面制御方法とシステム | |
| CN106530408A (zh) | 博物馆临时展览规划设计的系统 | |
| CN116126981A (zh) | 一种三维可视化技术在城市安全业务场景的使用方法 | |
| CN104850700A (zh) | 一种协作式可视化仿真平台 | |
| CN101090460A (zh) | 一种在多幅全景图之间切换的方法 | |
| CN204695673U (zh) | 一种用于城市规划建设中的三维数字化沙盘 | |
| CN111710037A (zh) | 显示屏辅助大型人群表演虚拟编排仿真系统 | |
| CN102087465B (zh) | 一种真三维仿真区域的直接赋值显示方法 | |
| CN111738905A (zh) | 一种大型人群表演显示屏辅助美术造型生成方法 | |
| US11620965B2 (en) | Video display method, video display system, electronic device, and storage medium | |
| CN111737887B (zh) | 一种基于平行仿真的虚拟舞台 | |
| CN206282360U (zh) | 博物馆临时展览规划设计的系统 | |
| Rossi et al. | Projection-based city atlas: An interactive, touchless, virtual tour of the urban fabric of Ascoli Piceno | |
| CN102375325B (zh) | 一种真三维仿真角度描述及直接投影显示方法 | |
| CN111709157B (zh) | 一种通用虚拟舞台平行仿真系统 | |
| CN110889157A (zh) | 风电场布局可视化展示方法以及相关装置 | |
| Chen et al. | Industrial Operation Training Technology Based on Panoramic Image and Augmented Reality |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200925 |