CN116962885B - 一种基于嵌入式计算机的多路视频采集合成处理系统 - Google Patents

一种基于嵌入式计算机的多路视频采集合成处理系统 Download PDF

Info

Publication number
CN116962885B
CN116962885B CN202311213232.0A CN202311213232A CN116962885B CN 116962885 B CN116962885 B CN 116962885B CN 202311213232 A CN202311213232 A CN 202311213232A CN 116962885 B CN116962885 B CN 116962885B
Authority
CN
China
Prior art keywords
screen
stage
performance
target scene
split
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202311213232.0A
Other languages
English (en)
Other versions
CN116962885A (zh
Inventor
吴召剑
谢星星
周迎春
彭维刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Realtime Technology Co ltd
Original Assignee
Chengdu Realtime Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Realtime Technology Co ltd filed Critical Chengdu Realtime Technology Co ltd
Priority to CN202311213232.0A priority Critical patent/CN116962885B/zh
Publication of CN116962885A publication Critical patent/CN116962885A/zh
Application granted granted Critical
Publication of CN116962885B publication Critical patent/CN116962885B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Circuits (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及多路视频采集合成处理领域,具体公开一种基于嵌入式计算机的多路视频采集合成处理系统,本发明通过获取舞台演出的基本信息,选择舞台演出中舞台屏幕的显示模式,结合舞台演出的具体需求选择显示模式,充分发挥舞台屏幕的作用;获取舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域对应的摄像机拍摄人物适宜角度,分析舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域的匹配视频,进行投放,使得分屏显示时舞台屏幕的整体画面有序协调;获取舞台演出中舞台屏幕全屏时对应的各待显示视频段,进一步按照顺序拼接整合,进行投放,使得全屏显示时各视频段的衔接更加自然,提升观众视觉体验感。

Description

一种基于嵌入式计算机的多路视频采集合成处理系统
技术领域
本发明涉及多路视频采集合成处理领域,涉及到一种基于嵌入式计算机的多路视频采集合成处理系统。
背景技术
舞台演出一般布置有舞台背景屏幕,舞台背景屏幕通常用于在舞台演出期间播放表演人员的影像、音乐视频、特效以及与演出相关的内容,为现场观众提供更丰富的视听体验。
现有的舞台演出背景屏幕中播放视频的采集合成处理方法存在一些不足:第一,现有的舞台屏幕的显示视频大都选择某一固定拍摄角度摄像机采集的表演人员视频,没有考虑到表演人员是移动的,固定拍摄角度当前采集的图像是表演人员的正面,但可能随着表演人员的移动或者动作变化,固定拍摄角度下一时刻采集的图像就不是表演人员的正面,而是侧面或者背面,进而使得表演人员的影像不能得到有效展现,舞台表演的效果也受到影响。
第二,现有的舞台屏幕显示方式一般有两种,即分屏显示和全屏显示,全屏显示具有统一性和视觉冲击力,但视角限制且表现多样性较低,分屏显示能多角度呈现和有利信息传递,但存在视觉分散,制作与控制复杂度高,两者各有优劣势,现有方法不能结合舞台演出的具体需求进行选择,使得舞台屏幕没有得到充分利用。
第三,现有的舞台屏幕在分屏显示的时候,没有深入分析各块显示区域的匹配视频,即没有分析哪块显示区域应该投放哪个拍摄角度的视频,进而容易使得舞台屏幕的整体画面显得杂乱无章,视觉效果不理想。
第四,现有方法在拼接各段视频并在舞台屏幕全屏显示的时候,没有考虑各段视频之间的拼接顺序,容易使得各视频段衔接不自然,影响观众视觉体验感。
发明内容
针对上述问题,本发明提出了一种基于嵌入式计算机的多路视频采集合成处理系统,实现对多路视频采集合成处理的功能。
本发明解决其技术问题采用的技术方案是:本发明提供一种基于嵌入式计算机的多路视频采集合成处理系统,包括:舞台演出基本信息获取模块:用于获取目标场次舞台演出的基本信息,其中基本信息包括表演节目类型、舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数。
舞台屏幕显示模式选择模块:用于根据目标场次舞台演出的基本信息,分析目标场次舞台演出中舞台屏幕的分屏需求系数,进一步选择目标场次舞台演出中舞台屏幕的显示模式,若为分屏显示,则执行分屏显示样式及排布设置模块,若为全屏显示,则执行全屏显示视频段筛选提取模块。
分屏显示样式及排布设置模块:用于获取目标场次舞台演出中舞台屏幕分屏的显示样式、主显示区域和各辅助显示区域。
分屏显示区域投放视频匹配模块:用于获取目标场次舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域对应的摄像机拍摄人物适宜角度,分析目标场次舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域的匹配视频,进行投放。
全屏显示视频段筛选提取模块:用于获取目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段。
全屏显示视频段拼接整合模块:用于将目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段进行拼接整合,并进行投放。
数据库:用于存储各表演节目类型对应的分屏需求影响因子和分屏显示时舞台屏幕各尺寸范围对应的显示样式。
在上述实施例的基础上,所述舞台演出基本信息获取模块的具体分析过程为:获取目标场次舞台演出的表演节目类型和舞台LED屏幕面积,将目标场次舞台演出的舞台LED屏幕面积记为
获取目标场次舞台演出的俯视图像,进一步获取观众席前排座位中两端的边缘座位和最中间的座位与舞台屏幕中心点之间的水平距离,将其分别记为,通过分析公式/>得到目标场次舞台演出的舞台屏幕与观众席相对距离/>,其中/>分别表示预设的边缘座位和最中间座位的权重因子,
获取观众席中观众入座的区域,进一步对观众席中观众入座的区域进行修正,得到观众席中观众入座对应的矩形区域,将其记为观众分布区域,获取观众分布区域的长度和宽度,将其分别记为
通过分析公式得到目标场次舞台演出的观众分散系数/>,其中/>表示预设的观众分散系数的修正因子,/>分别表示预设的观众分布区域的长度和宽度的阈值。
在上述实施例的基础上,所述舞台屏幕显示模式选择模块的具体分析过程包括:提取数据库中存储的各表演节目类型对应的分屏需求影响因子,根据目标场次舞台演出的表演节目类型,筛选得到目标场次舞台演出表演节目类型对应的分屏需求影响因子,将其记为
通过分析公式得到目标场次舞台演出中舞台屏幕的分屏需求系数/>,其中/>表示预设的分屏需求系数修正因子,分别表示预设的舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数的阈值,/>分别表示预设的舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数的权值。
在上述实施例的基础上,所述舞台屏幕显示模式选择模块的具体分析过程还包括:将目标场次舞台演出中舞台屏幕的分屏需求系数与预设的分屏需求系数阈值进行比对,若目标场次舞台演出中舞台屏幕的分屏需求系数大于或等于预设的分屏需求系数阈值,则目标场次舞台演出中舞台屏幕的显示模式为分屏显示,反之,则目标场次舞台演出中舞台屏幕的显示模式为全屏显示。
在上述实施例的基础上,所述分屏显示样式及排布设置模块的具体分析过程为:D1:获取目标场次舞台演出中舞台屏幕的尺寸信息,提取数据库中存储的分屏显示时舞台屏幕各尺寸范围对应的显示样式,筛选得到目标场次舞台演出中舞台屏幕分屏的显示样式,进一步得到目标场次舞台演出中舞台屏幕分屏时各子屏幕,将其记为目标场次舞台演出中舞台屏幕的各显示区域。
D2:获取目标场次舞台演出中舞台屏幕显示区域的数量,若数量为偶数,则执行D3,若数量为奇数,则执行D4。
D3:按照预设的原则设定目标场次舞台演出中舞台屏幕分屏的主显示区域,将目标场次舞台演出中舞台屏幕中除主显示区域之外的各显示区域记为目标场次舞台演出中舞台屏幕分屏的各辅助显示区域。
D4:获取目标场次舞台演出中舞台屏幕的各显示区域的位置,将居中位置对应的显示区域记为目标场次舞台演出中舞台屏幕分屏的主显示区域,将非居中位置对应的各显示区域记为目标场次舞台演出中舞台屏幕分屏的各辅助显示区域。
在上述实施例的基础上,所述分屏显示区域投放视频匹配模块的具体分析过程包括:设定当前采样时间段的时长,获取当前采样时间段内目标场次舞台演出中表演者的脸部朝向,获取目标场次舞台演出中表演者的俯视图像,将垂直照射在目标场次舞台演出中表演者脸部的水平光线记为基准照射线。
将基准照射线对应的摄像机拍摄角度记为目标场次舞台演出中舞台屏幕分屏时主显示区域对应的摄像机拍摄人物适宜角度。
将目标场次舞台演出中舞台屏幕的显示区域数量记为,通过分析公式/>得到基准照射线单位旋转角度/>,/>
将目标场次舞台演出中舞台屏幕分屏的各辅助显示区域按照预设的顺序进行排序,并按照预设的原则设定基准照射线的旋转方向,将基准照射线沿着设定的旋转方向按照基准照射线单位旋转角度依次旋转次,得到目标场次舞台演出中舞台屏幕分屏时各辅助显示区域对应的摄像机拍摄人物适宜角度。
在上述实施例的基础上,所述分屏显示区域投放视频匹配模块的具体分析过程还包括:获取目标场次舞台演出中各摄像机的拍摄角度,进一步得到各摄像机的拍摄角度与主显示区域对应的摄像机拍摄人物适宜角度之间的偏差,将其记为各摄像机拍摄角度与主显示区域适宜拍摄角度之间的偏差,并表示为,/>表示第/>个摄像机的编号,/>
获取目标场次舞台演出中各摄像机拍摄画面的清晰度,将其记为
通过分析公式得到各摄像机与主显示区域的匹配系数/>,其中/>表示摄像机的数量,/>分别表示预设的拍摄角度偏差与拍摄画面清晰度的权重因子。
将各摄像机与主显示区域的匹配系数进行相互比较,将最大匹配系数对应的摄像机记为主显示区域的匹配摄像机,将主显示区域的匹配摄像机在当前采样时间段内录制的视频记为目标场次舞台演出中舞台屏幕分屏时主显示区域的匹配视频。
同理,根据目标场次舞台演出中舞台屏幕分屏时主显示区域的匹配视频的分析方法,获取目标场次舞台演出中舞台屏幕分屏时各辅助显示区域的匹配视频。
在上述实施例的基础上,所述全屏显示视频段筛选提取模块的具体分析过程为:设定当前采样时间段的时长,获取当前采样时间段内目标场次舞台演出中表演者的脸部朝向,获取目标场次舞台演出中表演者的俯视图,将垂直照射在目标场次舞台演出中表演者脸部的水平光线记为基准照射线。
将基准照射线按照预设的旋转方向分别旋转各设定角度,得到目标场次舞台演出中舞台屏幕全屏时对应的各适宜拍摄角度。
获取目标场次舞台演出中各摄像机的拍摄角度,进一步得到各摄像机的拍摄角度与舞台屏幕全屏时对应的各适宜拍摄角度之间的偏差,将其记为各摄像机拍摄角度与舞台屏幕全屏时各适宜拍摄角度之间的偏差,并获取目标场次舞台演出中各摄像机拍摄画面的清晰度,进一步分析得到舞台屏幕全屏时各适宜拍摄角度的匹配摄像机。
将舞台屏幕全屏时各适宜拍摄角度的匹配摄像机在当前采样时间段内录制的视频段记为目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段。
在上述实施例的基础上,所述全屏显示视频段拼接整合模块的具体分析过程为:将目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段按照其获取的先后顺序进行排序,进一步进行拼接整合,得到目标场次舞台演出中舞台屏幕全屏时的显示视频,进行投放。
相对于现有技术,本发明所述的一种基于嵌入式计算机的多路视频采集合成处理系统以下有益效果:1.本发明通过获取当前采样时间段各拍摄角度下的表演者的视频,并将各视频在舞台屏幕上分屏显示或者将各视频拼接整合后在舞台屏幕上全屏显示,从多个维度全方位展现表演者的影像,增强舞台表演效果和提升观众的视听体验。
2.本发明从表演节目类型、舞台屏幕面积、舞台屏幕与观众席距离和观众分散程度多个角度综合评估舞台屏幕的适宜显示方式,进而使得舞台屏幕充分发挥其效用,增强舞台演出效果。
3.本发明通过获取目标场次舞台演出中舞台屏幕分屏的显示样式、主显示区域和各辅助显示区域,并获取舞台屏幕分屏时主显示区域和各辅助显示区域对应的摄像机拍摄人物适宜角度,分析主显示区域和各辅助显示区域的匹配视频,进而使得舞台屏幕的整体画面有序协调,视觉效果得到提升。
4.本发明通过获取目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段,并将各待显示视频段按照设定顺序进行拼接整合,使得全屏显示时各视频段的衔接更加自然,提升观众视觉体验感。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明的系统模块连接图。
图2为本发明的舞台屏幕与观众席相对距离示意图。
图3为本发明的观众分布区域示意图。
图4为本发明的舞台屏幕三分屏时各显示区域对应的摄像机拍摄人物适宜角度示意图。
图5为本发明的舞台屏幕四分屏时各显示区域对应的摄像机拍摄人物适宜角度示意图。
图6为本发明的摄像机拍摄角度与主显示区域适宜拍摄角度之间的偏差示意图。
附图标记:1.舞台屏幕;2.观众席;3.观众席前排座位中两端的边缘座位与舞台屏幕中心点之间的水平距离;4.观众席前排座位中最中间的座位与舞台屏幕中心点之间的水平距离;5.观众入座;6.观众入座的区域;7.观众分布区域;8.观众分布区域的长度;9.观众分布区域的宽度;10.表演者;11.基准照射线;12.主显示区域对应的摄像机拍摄人物适宜角度;13.辅助显示区域1对应的摄像机拍摄人物适宜角度;14.辅助显示区域2对应的摄像机拍摄人物适宜角度;15.主显示区域;16.辅助显示区域1;17.辅助显示区域2;18.辅助显示区域3;19.摄像机的拍摄角度;20.主显示区域对应的摄像机拍摄人物适宜角度;21.摄像机拍摄角度与主显示区域适宜拍摄角度之间的偏差。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参阅图1所示,本发明提供一种基于嵌入式计算机的多路视频采集合成处理系统,包括舞台演出基本信息获取模块、舞台屏幕显示模式选择模块、分屏显示样式及排布设置模块、分屏显示区域投放视频匹配模块、全屏显示视频段筛选提取模块、全屏显示视频段拼接整合模块和数据库。
所述舞台演出基本信息获取模块与舞台屏幕显示模式选择模块连接,分屏显示样式及排布设置模块与分屏显示区域投放视频匹配模块连接,全屏显示视频段筛选提取模块与全屏显示视频段拼接整合模块连接,舞台屏幕显示模式选择模块分别与分屏显示样式及排布设置模块和全屏显示视频段筛选提取模块连接,数据库分别与舞台屏幕显示模式选择模块和分屏显示样式及排布设置模块连接。
所述舞台演出基本信息获取模块用于获取目标场次舞台演出的基本信息,其中基本信息包括表演节目类型、舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数。
进一步地,所述舞台演出基本信息获取模块的具体分析过程为:获取目标场次舞台演出的表演节目类型和舞台LED屏幕面积,将目标场次舞台演出的舞台LED屏幕面积记为
参阅图2所示,获取目标场次舞台演出的俯视图像,进一步获取观众席前排座位中两端的边缘座位和最中间的座位与舞台屏幕中心点之间的水平距离,将其分别记为,通过分析公式/>得到目标场次舞台演出的舞台屏幕与观众席相对距离/>,其中/>分别表示预设的边缘座位和最中间座位的权重因子,/>
参阅图3所示,获取观众席中观众入座的区域,进一步对观众席中观众入座的区域进行修正,得到观众席中观众入座对应的矩形区域,将其记为观众分布区域,获取观众分布区域的长度和宽度,将其分别记为
通过分析公式得到目标场次舞台演出的观众分散系数/>,其中/>表示预设的观众分散系数的修正因子,/>分别表示预设的观众分布区域的长度和宽度的阈值。
作为一种优选方案,所述表演节目类型包括但不限于:歌唱类节目、舞蹈类节目和唱跳类节目。
所述舞台屏幕显示模式选择模块用于根据目标场次舞台演出的基本信息,分析目标场次舞台演出中舞台屏幕的分屏需求系数,进一步选择目标场次舞台演出中舞台屏幕的显示模式,若为分屏显示,则执行分屏显示样式及排布设置模块,若为全屏显示,则执行全屏显示视频段筛选提取模块。
进一步地,所述舞台屏幕显示模式选择模块的具体分析过程包括:提取数据库中存储的各表演节目类型对应的分屏需求影响因子,根据目标场次舞台演出的表演节目类型,筛选得到目标场次舞台演出表演节目类型对应的分屏需求影响因子,将其记为
通过分析公式得到目标场次舞台演出中舞台屏幕的分屏需求系数/>,其中/>表示预设的分屏需求系数修正因子,分别表示预设的舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数的阈值,/>分别表示预设的舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数的权值。
进一步地,所述舞台屏幕显示模式选择模块的具体分析过程还包括:将目标场次舞台演出中舞台屏幕的分屏需求系数与预设的分屏需求系数阈值进行比对,若目标场次舞台演出中舞台屏幕的分屏需求系数大于或等于预设的分屏需求系数阈值,则目标场次舞台演出中舞台屏幕的显示模式为分屏显示,反之,则目标场次舞台演出中舞台屏幕的显示模式为全屏显示。
作为一种优选方案,目标场次舞台演出中舞台屏幕的显示模式包括分屏显示和全屏显示。
作为一种优选方案,考虑到观众的观赏视野和观看质量,如果舞台屏幕面积较大且远离观众,观众难以集中视线在一个画面上,可以选择采用分屏显示,将画面细分展示,避免观众视线的分散;如果观众距离舞台屏幕较近,且为全方位观赏,可以选择采用全屏显示,以提供更统一和沉浸式的观赏体验。
需要说明的是,本发明从表演节目类型、舞台屏幕面积、舞台屏幕与观众席距离和观众分散程度多个角度综合评估舞台屏幕的适宜显示方式,进而使得舞台屏幕充分发挥其效用,增强舞台演出效果。
所述分屏显示样式及排布设置模块用于获取目标场次舞台演出中舞台屏幕分屏的显示样式、主显示区域和各辅助显示区域。
进一步地,所述分屏显示样式及排布设置模块的具体分析过程为:D1:获取目标场次舞台演出中舞台屏幕的尺寸信息,提取数据库中存储的分屏显示时舞台屏幕各尺寸范围对应的显示样式,筛选得到目标场次舞台演出中舞台屏幕分屏的显示样式,进一步得到目标场次舞台演出中舞台屏幕分屏时各子屏幕,将其记为目标场次舞台演出中舞台屏幕的各显示区域。
D2:获取目标场次舞台演出中舞台屏幕显示区域的数量,若数量为偶数,则执行D3,若数量为奇数,则执行D4。
D3:按照预设的原则设定目标场次舞台演出中舞台屏幕分屏的主显示区域,将目标场次舞台演出中舞台屏幕中除主显示区域之外的各显示区域记为目标场次舞台演出中舞台屏幕分屏的各辅助显示区域。
D4:获取目标场次舞台演出中舞台屏幕的各显示区域的位置,将居中位置对应的显示区域记为目标场次舞台演出中舞台屏幕分屏的主显示区域,将非居中位置对应的各显示区域记为目标场次舞台演出中舞台屏幕分屏的各辅助显示区域。
作为一种优选方案,舞台屏幕的尺寸信息为舞台屏幕的长度和宽度。
作为一种优选方案,舞台屏幕的尺寸范围包括舞台屏幕的长度范围及宽度范围。
在一个具体实施例中,目标场次舞台演出中舞台屏幕分屏的显示样式为三分屏。
在另一个具体实施例中,目标场次舞台演出中舞台屏幕分屏的显示样式为四分屏。
所述分屏显示区域投放视频匹配模块用于获取目标场次舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域对应的摄像机拍摄人物适宜角度,分析目标场次舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域的匹配视频,进行投放。
进一步地,所述分屏显示区域投放视频匹配模块的具体分析过程包括:设定当前采样时间段的时长,获取当前采样时间段内目标场次舞台演出中表演者的脸部朝向,获取目标场次舞台演出中表演者的俯视图像,将垂直照射在目标场次舞台演出中表演者脸部的水平光线记为基准照射线。
将基准照射线对应的摄像机拍摄角度记为目标场次舞台演出中舞台屏幕分屏时主显示区域对应的摄像机拍摄人物适宜角度。
将目标场次舞台演出中舞台屏幕的显示区域数量记为,通过分析公式/>得到基准照射线单位旋转角度/>,/>
将目标场次舞台演出中舞台屏幕分屏的各辅助显示区域按照预设的顺序进行排序,并按照预设的原则设定基准照射线的旋转方向,将基准照射线沿着设定的旋转方向按照基准照射线单位旋转角度依次旋转次,得到目标场次舞台演出中舞台屏幕分屏时各辅助显示区域对应的摄像机拍摄人物适宜角度。
作为一种优选方案,采样时间段设定的原则是采样时间段内表演者的脸部没有发生偏转,采样时间段的时长不固定,随着表演者姿态动作的变化而动态变化。
作为一种优选方案,不同的采样时间段内表演者的姿态动作不同,脸部朝向不同,导致目标场次舞台演出中舞台屏幕分屏时各显示区域匹配视频的分析结果不同,故各采样时间段需要分别进行分析。
作为一种优选方案,目标场次舞台演出中表演人员的数量大于1时,目标场次舞台演出的表演者为主要表演人员。
作为一种优选方案,目标场次舞台演出中舞台屏幕分屏时,目标场次舞台演出中舞台屏幕显示区域的数量为多个,
作为一种优选方案,基准照射线的旋转方向为顺时针或者逆时针。
参阅图4所示,在一个具体实施例中,目标场次舞台演出中舞台屏幕分屏的显示样式为三分屏,目标场次舞台演出中舞台屏幕的显示区域数量为3,其中1个主显示区域,2个辅助显示区域,基准照射线单位旋转角度为,将目标场次舞台演出中舞台屏幕分屏的2个辅助显示区域按照预设的顺序进行排序,设定基准照射线的旋转方向为顺时针,将基准照射线沿着顺时针方向按照单次旋转/>依次旋转/>次,第一次旋转得到排名第一位辅助显示区域对应的摄像机拍摄人物适宜角度,第二次旋转得到排名第二位辅助显示区域对应的摄像机拍摄人物适宜角度,进而得到目标场次舞台演出中舞台屏幕分屏时2个辅助显示区域对应的摄像机拍摄人物适宜角度。
参阅图5所示,在另一个具体实施例中,目标场次舞台演出中舞台屏幕分屏的显示样式为四分屏,目标场次舞台演出中舞台屏幕的显示区域数量为4,其中1个主显示区域,3个辅助显示区域,基准照射线单位旋转角度为,将目标场次舞台演出中舞台屏幕分屏的3个辅助显示区域按照预设的顺序进行排序,设定基准照射线的旋转方向为顺时针,将基准照射线沿着顺时针方向按照单次旋转/>依次旋转/>次,第一次旋转得到排名第一位辅助显示区域对应的摄像机拍摄人物适宜角度,第二次旋转得到排名第二位辅助显示区域对应的摄像机拍摄人物适宜角度,第三次旋转得到排名第三位辅助显示区域对应的摄像机拍摄人物适宜角度,进而得到目标场次舞台演出中舞台屏幕分屏时3个辅助显示区域对应的摄像机拍摄人物适宜角度。
进一步地,所述分屏显示区域投放视频匹配模块的具体分析过程还包括:参阅图6所示,获取目标场次舞台演出中各摄像机的拍摄角度,进一步得到各摄像机的拍摄角度与主显示区域对应的摄像机拍摄人物适宜角度之间的偏差,将其记为各摄像机拍摄角度与主显示区域适宜拍摄角度之间的偏差,并表示为,/>表示第/>个摄像机的编号,/>
获取目标场次舞台演出中各摄像机拍摄画面的清晰度,将其记为
通过分析公式得到各摄像机与主显示区域的匹配系数/>,其中/>表示摄像机的数量,/>分别表示预设的拍摄角度偏差与拍摄画面清晰度的权重因子。
将各摄像机与主显示区域的匹配系数进行相互比较,将最大匹配系数对应的摄像机记为主显示区域的匹配摄像机,将主显示区域的匹配摄像机在当前采样时间段内录制的视频记为目标场次舞台演出中舞台屏幕分屏时主显示区域的匹配视频。
同理,根据目标场次舞台演出中舞台屏幕分屏时主显示区域的匹配视频的分析方法,获取目标场次舞台演出中舞台屏幕分屏时各辅助显示区域的匹配视频。
需要说明的是,本发明通过获取目标场次舞台演出中舞台屏幕分屏的显示样式、主显示区域和各辅助显示区域,并获取舞台屏幕分屏时主显示区域和各辅助显示区域对应的摄像机拍摄人物适宜角度,分析主显示区域和各辅助显示区域的匹配视频,进而使得舞台屏幕的整体画面有序协调,视觉效果得到提升。
所述全屏显示视频段筛选提取模块用于获取目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段。
进一步地,所述全屏显示视频段筛选提取模块的具体分析过程为:设定当前采样时间段的时长,获取当前采样时间段内目标场次舞台演出中表演者的脸部朝向,获取目标场次舞台演出中表演者的俯视图,将垂直照射在目标场次舞台演出中表演者脸部的水平光线记为基准照射线。
将基准照射线按照预设的旋转方向分别旋转各设定角度,得到目标场次舞台演出中舞台屏幕全屏时对应的各适宜拍摄角度。
获取目标场次舞台演出中各摄像机的拍摄角度,进一步得到各摄像机的拍摄角度与舞台屏幕全屏时对应的各适宜拍摄角度之间的偏差,将其记为各摄像机拍摄角度与舞台屏幕全屏时各适宜拍摄角度之间的偏差,并获取目标场次舞台演出中各摄像机拍摄画面的清晰度,进一步分析得到舞台屏幕全屏时各适宜拍摄角度的匹配摄像机。
将舞台屏幕全屏时各适宜拍摄角度的匹配摄像机在当前采样时间段内录制的视频段记为目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段。
作为一种优选方案,分析舞台屏幕全屏时各适宜拍摄角度的匹配摄像机,具体方法为:以获取舞台屏幕全屏时某适宜拍摄角度的匹配摄像机的分析方法为例:将各摄像机拍摄角度与舞台屏幕全屏时该适宜拍摄角度之间的偏差记为,/>表示第/>个摄像机的编号,/>
并将目标场次舞台演出中各摄像机拍摄画面的清晰度记为
通过分析公式得到各摄像机与舞台屏幕全屏时该适宜拍摄角度的匹配系数/>,其中/>表示摄像机的数量,/>分别表示预设的拍摄角度偏差与拍摄画面清晰度的权重因子。
将各摄像机与舞台屏幕全屏时该适宜拍摄角度的匹配系数进行相互比较,将最大匹配系数对应的摄像机记为舞台屏幕全屏时该适宜拍摄角度的匹配摄像机,进而得到舞台屏幕全屏时各适宜拍摄角度的匹配摄像机。
在一个具体实施例中,将基准照射线按照顺时针方向分别旋转、/>、/>,得到目标场次舞台演出中舞台屏幕全屏时对应的各适宜拍摄角度。
在另一个具体实施例中,将基准照射线按照顺时针方向分别旋转、/>、/>、/>,得到目标场次舞台演出中舞台屏幕全屏时对应的各适宜拍摄角度。
所述全屏显示视频段拼接整合模块用于将目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段进行拼接整合,并进行投放。
进一步地,所述全屏显示视频段拼接整合模块的具体分析过程为:将目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段按照其获取的先后顺序进行排序,进一步进行拼接整合,得到目标场次舞台演出中舞台屏幕全屏时的显示视频,进行投放。
在一个具体实施例中,将基准照射线按照顺时针方向分别旋转、/>、/>,得到目标场次舞台演出中舞台屏幕全屏时对应的各适宜拍摄角度,进一步得到目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段,其中将基准照射线顺时针方向旋转/>时获取的待显示视频段作为获取顺序排名第一位的待显示视频段,将基准照射线顺时针方向旋转时获取的待显示视频段作为获取顺序排名第二位的待显示视频段,将基准照射线顺时针方向旋转/>时获取的待显示视频段作为获取顺序排名第三位的待显示视频段。
需要说明的是,本发明通过获取目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段,并将各待显示视频段按照设定顺序进行拼接整合,使得全屏显示时各视频段的衔接更加自然,提升观众视觉体验感。
需要说明的是,本发明通过获取当前采样时间段各拍摄角度下的表演者的视频,并将各视频在舞台屏幕上分屏显示或者将各视频拼接整合后在舞台屏幕上全屏显示,从多个维度全方位展现表演者的影像,增强舞台表演效果和提升观众的视听体验。
所述数据库用于存储各表演节目类型对应的分屏需求影响因子和分屏显示时舞台屏幕各尺寸范围对应的显示样式。
以上内容仅仅是对本发明的构思所作的举例和说明,所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,只要不偏离发明的构思或者超越本发明所定义的范围,均应属于本发明的保护范围。

Claims (6)

1.一种基于嵌入式计算机的多路视频采集合成处理系统,其特征在于,包括:
舞台演出基本信息获取模块:用于获取目标场次舞台演出的基本信息,其中基本信息包括表演节目类型、舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数;
舞台屏幕显示模式选择模块:用于根据目标场次舞台演出的基本信息,分析目标场次舞台演出中舞台屏幕的分屏需求系数,进一步选择目标场次舞台演出中舞台屏幕的显示模式,若为分屏显示,则执行分屏显示样式及排布设置模块,若为全屏显示,则执行全屏显示视频段筛选提取模块;
分屏显示样式及排布设置模块:用于获取目标场次舞台演出中舞台屏幕分屏的显示样式、主显示区域和各辅助显示区域;
分屏显示区域投放视频匹配模块:用于获取目标场次舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域对应的摄像机拍摄人物适宜角度,分析目标场次舞台演出中舞台屏幕分屏时主显示区域和各辅助显示区域的匹配视频,进行投放;
全屏显示视频段筛选提取模块:用于获取目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段;
全屏显示视频段拼接整合模块:用于将目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段进行拼接整合,并进行投放;
数据库:用于存储各表演节目类型对应的分屏需求影响因子和分屏显示时舞台屏幕各尺寸范围对应的显示样式;
所述舞台演出基本信息获取模块的具体分析过程为:
获取目标场次舞台演出的表演节目类型和舞台LED屏幕面积,将目标场次舞台演出的舞台LED屏幕面积记为
获取目标场次舞台演出的俯视图像,进一步获取观众席前排座位中两端的边缘座位和最中间的座位与舞台屏幕中心点之间的水平距离,将其分别记为,通过分析公式/>得到目标场次舞台演出的舞台屏幕与观众席相对距离/>,其中/>分别表示预设的边缘座位和最中间座位的权重因子,/>
获取观众席中观众入座的区域,进一步对观众席中观众入座的区域进行修正,得到观众席中观众入座对应的矩形区域,将其记为观众分布区域,获取观众分布区域的长度和宽度,将其分别记为
通过分析公式得到目标场次舞台演出的观众分散系数/>,其中/>表示预设的观众分散系数的修正因子,/>分别表示预设的观众分布区域的长度和宽度的阈值;
所述舞台屏幕显示模式选择模块的具体分析过程包括:
提取数据库中存储的各表演节目类型对应的分屏需求影响因子,根据目标场次舞台演出的表演节目类型,筛选得到目标场次舞台演出表演节目类型对应的分屏需求影响因子,将其记为
通过分析公式得到目标场次舞台演出中舞台屏幕的分屏需求系数/>,其中/>表示预设的分屏需求系数修正因子,分别表示预设的舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数的阈值,/>分别表示预设的舞台LED屏幕面积、舞台屏幕与观众席相对距离和观众分散系数的权值;
所述舞台屏幕显示模式选择模块的具体分析过程还包括:
将目标场次舞台演出中舞台屏幕的分屏需求系数与预设的分屏需求系数阈值进行比对,若目标场次舞台演出中舞台屏幕的分屏需求系数大于或等于预设的分屏需求系数阈值,则目标场次舞台演出中舞台屏幕的显示模式为分屏显示,反之,则目标场次舞台演出中舞台屏幕的显示模式为全屏显示。
2.根据权利要求1所述的一种基于嵌入式计算机的多路视频采集合成处理系统,其特征在于:所述分屏显示样式及排布设置模块的具体分析过程为:
D1:获取目标场次舞台演出中舞台屏幕的尺寸信息,提取数据库中存储的分屏显示时舞台屏幕各尺寸范围对应的显示样式,筛选得到目标场次舞台演出中舞台屏幕分屏的显示样式,进一步得到目标场次舞台演出中舞台屏幕分屏时各子屏幕,将其记为目标场次舞台演出中舞台屏幕的各显示区域;
D2:获取目标场次舞台演出中舞台屏幕显示区域的数量,若数量为偶数,则执行D3,若数量为奇数,则执行D4;
D3:按照预设的原则设定目标场次舞台演出中舞台屏幕分屏的主显示区域,将目标场次舞台演出中舞台屏幕中除主显示区域之外的各显示区域记为目标场次舞台演出中舞台屏幕分屏的各辅助显示区域;
D4:获取目标场次舞台演出中舞台屏幕的各显示区域的位置,将居中位置对应的显示区域记为目标场次舞台演出中舞台屏幕分屏的主显示区域,将非居中位置对应的各显示区域记为目标场次舞台演出中舞台屏幕分屏的各辅助显示区域。
3.根据权利要求2所述的一种基于嵌入式计算机的多路视频采集合成处理系统,其特征在于:所述分屏显示区域投放视频匹配模块的具体分析过程包括:
设定当前采样时间段的时长,获取当前采样时间段内目标场次舞台演出中表演者的脸部朝向,获取目标场次舞台演出中表演者的俯视图像,将垂直照射在目标场次舞台演出中表演者脸部的水平光线记为基准照射线;
将基准照射线对应的摄像机拍摄角度记为目标场次舞台演出中舞台屏幕分屏时主显示区域对应的摄像机拍摄人物适宜角度;
将目标场次舞台演出中舞台屏幕的显示区域数量记为,通过分析公式/>得到基准照射线单位旋转角度/>,/>
将目标场次舞台演出中舞台屏幕分屏的各辅助显示区域按照预设的顺序进行排序,并按照预设的原则设定基准照射线的旋转方向,将基准照射线沿着设定的旋转方向按照基准照射线单位旋转角度依次旋转次,得到目标场次舞台演出中舞台屏幕分屏时各辅助显示区域对应的摄像机拍摄人物适宜角度。
4.根据权利要求3所述的一种基于嵌入式计算机的多路视频采集合成处理系统,其特征在于:所述分屏显示区域投放视频匹配模块的具体分析过程还包括:
获取目标场次舞台演出中各摄像机的拍摄角度,进一步得到各摄像机的拍摄角度与主显示区域对应的摄像机拍摄人物适宜角度之间的偏差,将其记为各摄像机拍摄角度与主显示区域适宜拍摄角度之间的偏差,并表示为,/>表示第/>个摄像机的编号,/>
获取目标场次舞台演出中各摄像机拍摄画面的清晰度,将其记为
通过分析公式得到各摄像机与主显示区域的匹配系数/>,其中/>表示摄像机的数量,/>分别表示预设的拍摄角度偏差与拍摄画面清晰度的权重因子;
将各摄像机与主显示区域的匹配系数进行相互比较,将最大匹配系数对应的摄像机记为主显示区域的匹配摄像机,将主显示区域的匹配摄像机在当前采样时间段内录制的视频记为目标场次舞台演出中舞台屏幕分屏时主显示区域的匹配视频;
同理,根据目标场次舞台演出中舞台屏幕分屏时主显示区域的匹配视频的分析方法,获取目标场次舞台演出中舞台屏幕分屏时各辅助显示区域的匹配视频。
5.根据权利要求1所述的一种基于嵌入式计算机的多路视频采集合成处理系统,其特征在于:所述全屏显示视频段筛选提取模块的具体分析过程为:
设定当前采样时间段的时长,获取当前采样时间段内目标场次舞台演出中表演者的脸部朝向,获取目标场次舞台演出中表演者的俯视图,将垂直照射在目标场次舞台演出中表演者脸部的水平光线记为基准照射线;
将基准照射线按照预设的旋转方向分别旋转各设定角度,得到目标场次舞台演出中舞台屏幕全屏时对应的各适宜拍摄角度;
获取目标场次舞台演出中各摄像机的拍摄角度,进一步得到各摄像机的拍摄角度与舞台屏幕全屏时对应的各适宜拍摄角度之间的偏差,将其记为各摄像机拍摄角度与舞台屏幕全屏时各适宜拍摄角度之间的偏差,并获取目标场次舞台演出中各摄像机拍摄画面的清晰度,进一步分析得到舞台屏幕全屏时各适宜拍摄角度的匹配摄像机;
将舞台屏幕全屏时各适宜拍摄角度的匹配摄像机在当前采样时间段内录制的视频段记为目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段。
6.根据权利要求1所述的一种基于嵌入式计算机的多路视频采集合成处理系统,其特征在于:所述全屏显示视频段拼接整合模块的具体分析过程为:
将目标场次舞台演出中舞台屏幕全屏时对应的各待显示视频段按照其获取的先后顺序进行排序,进一步进行拼接整合,得到目标场次舞台演出中舞台屏幕全屏时的显示视频,进行投放。
CN202311213232.0A 2023-09-20 2023-09-20 一种基于嵌入式计算机的多路视频采集合成处理系统 Active CN116962885B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311213232.0A CN116962885B (zh) 2023-09-20 2023-09-20 一种基于嵌入式计算机的多路视频采集合成处理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311213232.0A CN116962885B (zh) 2023-09-20 2023-09-20 一种基于嵌入式计算机的多路视频采集合成处理系统

Publications (2)

Publication Number Publication Date
CN116962885A CN116962885A (zh) 2023-10-27
CN116962885B true CN116962885B (zh) 2023-11-28

Family

ID=88462486

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311213232.0A Active CN116962885B (zh) 2023-09-20 2023-09-20 一种基于嵌入式计算机的多路视频采集合成处理系统

Country Status (1)

Country Link
CN (1) CN116962885B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11341443A (ja) * 1997-07-07 1999-12-10 Toshiba Corp 多画面表示システム
AU2014213548A1 (en) * 2006-08-24 2014-09-04 Cfph, Llc Multi-display computer terminal system
KR20170024374A (ko) * 2015-08-25 2017-03-07 (주)케이엠정보기술 공연상황 상호작용 및 관객참여형 무대영상 연출장치 및 그 연출방법
CN107291414A (zh) * 2017-07-05 2017-10-24 珠海市乐霸电子科技有限公司 一种巨幕动态分屏显示方法及点歌终端
US11250626B1 (en) * 2020-08-13 2022-02-15 Beijing Institute Of Technology Virtual stage based on parallel simulation
CN114302541A (zh) * 2022-01-05 2022-04-08 自贡海天文化股份有限公司 一种基于舞蹈动作的演唱会互动舞台灯光系统
CN115686410A (zh) * 2022-10-19 2023-02-03 欧阳俊 多视角视频显示系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9912857B2 (en) * 2013-04-05 2018-03-06 Andra Motion Technologies Inc. System and method for controlling an equipment related to image capture
CN110764859B (zh) * 2019-10-21 2023-06-02 三星电子(中国)研发中心 一种对屏幕可视区域进行自动调整及优化显示的方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11341443A (ja) * 1997-07-07 1999-12-10 Toshiba Corp 多画面表示システム
AU2014213548A1 (en) * 2006-08-24 2014-09-04 Cfph, Llc Multi-display computer terminal system
KR20170024374A (ko) * 2015-08-25 2017-03-07 (주)케이엠정보기술 공연상황 상호작용 및 관객참여형 무대영상 연출장치 및 그 연출방법
CN107291414A (zh) * 2017-07-05 2017-10-24 珠海市乐霸电子科技有限公司 一种巨幕动态分屏显示方法及点歌终端
US11250626B1 (en) * 2020-08-13 2022-02-15 Beijing Institute Of Technology Virtual stage based on parallel simulation
CN114302541A (zh) * 2022-01-05 2022-04-08 自贡海天文化股份有限公司 一种基于舞蹈动作的演唱会互动舞台灯光系统
CN115686410A (zh) * 2022-10-19 2023-02-03 欧阳俊 多视角视频显示系统

Also Published As

Publication number Publication date
CN116962885A (zh) 2023-10-27

Similar Documents

Publication Publication Date Title
Whannel Television and the transformation of sport
RU2666137C2 (ru) Способ и система для производства видеопродукции
US9143721B2 (en) Content preparation systems and methods for interactive video systems
US8970666B2 (en) Low scale production system and method
US9160938B2 (en) System and method for generating three dimensional presentations
US6335765B1 (en) Virtual presentation system and method
US10129582B2 (en) Systems, methods, and computer program products for capturing spectator content displayed at live events
US20090309975A1 (en) Dynamic Multi-Perspective Interactive Event Visualization System and Method
US20060258457A1 (en) Enhancement of collective experience
US8291328B2 (en) System and method for synchronizing a real-time performance with a virtual object
CN105939481A (zh) 一种交互式三维虚拟现实视频节目录播和直播方法
US20070188712A1 (en) Simulation of attendance at a live event
TW201044868A (en) Method for scaling video content according to bandwidth rate
RU2454024C2 (ru) Система широковещания, устройство передачи и способ передачи, устройство приема и способ приема и программа
US10015531B1 (en) Occlusionless method for virtual image insertion
CN116962885B (zh) 一种基于嵌入式计算机的多路视频采集合成处理系统
KR20190031220A (ko) Vr 콘텐츠 제공 시스템 및 방법
US8375311B2 (en) System and method for determining placement of a virtual object according to a real-time performance
CN114288645A (zh) 一种画面生成方法、系统、装置及计算机存储介质
EP4252409A2 (en) Method and system for capturing images
CA2709552C (en) Simulation attendance at a live event
KR102652371B1 (ko) 동작 배우기 동영상 제작 시스템
Postley Sports: 3-D TV's toughest challenge
Hornby National Theatre Live
WO2018187646A1 (en) System, method and software for producing live video containing three-dimensional images that appear to project forward of or vertically above a display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant