CN117527991B - 一种基于光线追踪的视频遮挡区域检测方法及系统 - Google Patents
一种基于光线追踪的视频遮挡区域检测方法及系统 Download PDFInfo
- Publication number
- CN117527991B CN117527991B CN202410021494.5A CN202410021494A CN117527991B CN 117527991 B CN117527991 B CN 117527991B CN 202410021494 A CN202410021494 A CN 202410021494A CN 117527991 B CN117527991 B CN 117527991B
- Authority
- CN
- China
- Prior art keywords
- picture
- video
- shielding
- index
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 30
- 238000005265 energy consumption Methods 0.000 claims abstract description 49
- 238000011156 evaluation Methods 0.000 claims abstract description 42
- 238000000034 method Methods 0.000 claims abstract description 22
- 238000004364 calculation method Methods 0.000 claims description 17
- 238000005516 engineering process Methods 0.000 claims description 13
- 238000004458 analytical method Methods 0.000 claims description 11
- 238000006243 chemical reaction Methods 0.000 claims description 9
- 230000000007 visual effect Effects 0.000 claims description 7
- 230000001133 acceleration Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 5
- 239000002699 waste material Substances 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000011160 research Methods 0.000 description 4
- 230000000903 blocking effect Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000004075 alteration Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000004134 energy conservation Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明公开了一种基于光线追踪的视频遮挡区域检测方法及系统,涉及视频检测技术领域。该基于光线追踪的视频遮挡区域检测方法及系统利用可见性检测模块、光线追踪建模模块、遮挡判断模块、遮挡检测模块协作,获取目标视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断目标视频画面在显示面上是否显示;对于可以在显示面上显示的目标视频建立光线追踪模型,获取光线追踪相关信息;通过分析光线追踪相关信息计算出视频遮挡评估指数,进而分析视频遮挡评估指数大小判断目标视频是否有画面遮挡区域;对目标视频中画面遮挡区域计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示。
Description
技术领域
本发明涉及视频检测技术领域,具体为一种基于光线追踪的视频遮挡区域检测方法及系统。
背景技术
随着计算机领域的研究,视频播放也成为了很多人的研究方向,众所周知,视频是由一系列图片组成,这些图片在依次播放过程中称为“帧”,由于视频连贯画面存在部分运动物体,这就造成了部分前后帧存在画面差异,这种画面差异即为视频画面的遮挡区域,基于视频播放的连贯性,画面的遮挡区域也逐渐变化,这种遮挡区域的研究设计多个领域,包括医学领域中CT图像扫描、自动驾驶遮挡扫描、监控摄像头遮挡扫描,由于画面的运动情况,对于遮挡区域的研究也存在研究难点。
在现有技术中,对于遮挡区域的检测存在图像处理即机器学习技术,例如公告号为:CN109002801B公开的一种基于视频监控的人脸遮挡检测方法及系统,利用三帧差法与混合高斯背景模型相结合的算法,检测动态视频图像的运动物体,并确定运动物体区域图像;采用K最近邻分类算法和局部二值模式算法对所述人脸区域图像进行人脸遮挡检测,通过对视频监控的人脸遮挡检测对犯罪分子常常佩戴遮挡饰物来隐藏自己面部特征这一行为起到良好的检测作用。
但上述技术无法适用于对视频画面遮挡区域的实时检测与计算,对于遮挡的状况也无法通过数据计算实现,对于显卡的资源无法高效利用。
因此,针对以上问题,亟待需要一种基于光线追踪的视频遮挡区域检测方法。
发明内容
针对现有技术的不足,本发明提供了一种基于光线追踪的视频遮挡区域检测方法及系统,解决了有效检测视频显示画面有无遮挡,对计算机显卡资源内存浪费的问题。
为实现以上目的,本发明通过以下技术方案予以实现:一种基于光线追踪的视频遮挡区域检测方法,包括以下步骤:获取目标视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断目标视频画面在显示面上是否显示;对于可以在显示面上显示的目标视频建立光线追踪模型,选择视频画面背景,并获取光线追踪相关信息;分析光线追踪相关信息计算出视频遮挡评估指数,根据视频遮挡评估指数分析判断目标视频是否有画面遮挡区域;获取目标视频中画面遮挡区域信息,计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示。
进一步地,所述视频画面可见符合指数计算步骤为:对目标视频显示画面像素点、显示画面与显示面距离分析计算得到视频画面可见符合指数,所述视频画面可见符合指数计算公式为:
;
式中为视频画面可见符合指数,/>分别表示目标视频显示画面像素点、显示画面与显示面距离,/>为显示面像素点数量,/>为预设的图像画面与显示面距离,/>分别为像素点数量权重、画面与显示面距离权重。
进一步地,所述判断目标视频画面在显示面上是否显示具体为:目标视频画面能否显示取决于目标视频像素点所占显示面像素点比例与目标视频画面距离显示面的距离,因此将视频画面可见符合指数与显示面画面可见阈值进行比对分析,当视频画面可见符合指数大于等于显示面画面可见阈值时,目标视频画面在显示面上可见;当视频画面可见符合指数小于显示面画面可见阈值时,目标视频画面在显示面上不加载显示。
进一步地,所述光线追踪相关信息包括显示画面像素点数量、光线-背景相交点数量。
进一步地,所述视频遮挡评估指数计算步骤为:利用显示画面像素点数量、光线-背景相交点数量分析计算出视频遮挡评估指数,所述视频遮挡评估指数计算公式为:
;
式中为视频遮挡评估指数,/>分别表示为显示画面像素点数量与光线-背景相交点数量,/>表示为视频遮挡评估指数的修正补偿因子。
进一步地,所述判断目标视频是否有画面遮挡区域具体为:根据 shader加速光线统计像素数量技术手段,当视频存在遮挡区域光线与背景交点减少,通过分析视频遮挡评估指数大小,当视频遮挡评估指数为0,说明显示画面像素点发射追踪光线全部到达视频画面背景,判断目标视频画面显示不存在画面遮挡情况;当视频遮挡评估指数不为0,说明显示画面像素点发射追踪光线存在没有到达视频画面背景情况,判断目标视频画面显示存在画面遮挡情况。
进一步地,所述遮挡区域加载能耗需求指数计算步骤为:所述目标视频中画面遮挡区域信息包括遮挡区域面积、遮挡区域内存、图片转换率;对目标视频所存在帧数依次利用分析视频遮挡评估指数大小判断有无画面遮挡情况,对目标视频存在画面遮挡情况的帧依次编号:;结合遮挡区域面积、遮挡区域内存、图片转换率计算出遮挡区域加载能耗需求指数,所述遮挡区域加载能耗需求指数计算公式为:
;
式中为遮挡区域加载能耗需求指数,/>分别表示目标视频存在画面遮挡情况帧的遮挡区域面积、遮挡区域内存、图片转换率,/>分别表示目标视频存在画面遮挡情况帧总画面面积、总内存,/>分别表示遮挡区域面积权重、遮挡区域内存权重,/>表示为自然常数。
进一步地,所述判断遮挡区域是否需要显示具体为:利用计算所得的遮挡区域加载能耗需求指数与遮挡区域能耗阈值对比分析,当遮挡区域能耗需求指数大于遮挡区域能耗阈值时判定为不显示遮挡区域并卸载遮挡区域内容;当遮挡区域能耗需求指数小于遮挡区域能耗阈值时根据用户需求利用可视化显示将遮挡区域动态显示。
进一步地,所述将遮挡区域动态显示具体为:实时检测目标视频画面显示情况,对目标视频每一帧画面实时检测画面遮挡情况,结合遮挡区域加载能耗需求指数利用虚拟重叠技术展示目标视频画面被遮挡区域,并实时将已展示的目标视频画面被遮挡区域卸载。
一种用于基于光线追踪的视频遮挡区域检测方法的系统,包括:可见性检测模块,用于获取目标视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断目标视频画面在显示面上是否显示;光线追踪建模模块,用于对于可以在显示面上显示的目标视频建立光线追踪模型,选择视频画面背景,并获取光线追踪相关信息;遮挡判断模块,用于分析光线追踪相关信息计算出视频遮挡评估指数,根据视频遮挡评估指数分析判断目标视频是否有画面遮挡区域;遮挡检测模块,用于获取目标视频中画面遮挡区域信息,计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示。
本发明具有以下有益效果:
(1)、该基于光线追踪的视频遮挡区域检测方法及系统,通过计算视频画面可见符合指数,判断视频画面在显示面上是否显示,有助于减少显卡资源消耗;利用光线追踪技术对视频画面进行实时追踪,计算视频遮挡评估指数,根据分析视频遮挡评估指数大小判断视频是否有画面遮挡区域,有效利用数据处理技术手段实现了视频遮挡区域的检测;对视频中画面遮挡区域计算遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示,有助于进一步实现对显卡资源内存的高效利用,减少不必要的显卡资源浪费。
(2)、该基于光线追踪的视频遮挡区域检测方法及系统,考虑到了视频由于像素相对显示面像素占比低、画面距离显示面距离远造成的视频画面无法在显示面显示,对显卡资源及内存造成浪费,精准地利用数值计算出视频画面可见符合指数能够提供有效参考,进而对无法显示的视频进行释放卸载,提高对显卡资源的利用率;对于能显示画面的视频考虑到了视频中过多画面遮挡区域对资源的不必要消耗,利用光线追踪技术监测视频画面,根据shader 加速光线求交统计像素数量的技术手段,当视频画面存在遮挡情况时,背景画面的光线交点会减少,因此利用光线交点数量,采取数据处理技术手段计算判断视频画面有无遮挡情况更为可靠精准;对于视频画面遮挡区域对资源的损耗利用数据处理技术计算出遮挡区域加载能耗需求指数,有效判断遮挡区域是否需要卸载不显示,有助于减少资源损耗,提高对视频遮挡区域的检测技术。
当然,实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。
附图说明
图1为本发明一种基于光线追踪的视频遮挡区域检测方法流程图;
图2为本发明一种用于基于光线追踪的视频遮挡区域检测方法的系统结构图。
具体实施方式
本申请实施例通过一种基于光线追踪的视频遮挡区域检测方法及系统,实现了精准判断视频能否在计算机显示面显示并检测显示画面有无遮挡情况的问题。
本申请实施例中的问题,总体思路如下:
获取视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断视频画面在显示面上是否显示;对于可以在显示面上显示的视频建立光线追踪模型,获取光线追踪相关信息;通过分析光线追踪相关信息计算出视频遮挡评估指数,判断视频是否有画面遮挡区域;对视频中画面遮挡区域计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示。
请参阅图1,本发明实施例提供一种技术方案:一种基于光线追踪的视频遮挡区域检测方法,包括以下步骤:获取目标视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断目标视频画面在显示面上是否显示;对于可以在显示面上显示的目标视频建立光线追踪模型,选择视频画面背景,并获取光线追踪相关信息;分析光线追踪相关信息计算出视频遮挡评估指数,根据视频遮挡评估指数分析判断目标视频是否有画面遮挡区域;获取目标视频中画面遮挡区域信息,计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示。
本实施方案中,利用视频分析技术,结合视频画面像素点、显示画面与显示面的距离计算判断视频画面的可见程度,有助于帮助卸载无法显示的视频提高显卡资源利用率,利用光线追踪模型模拟光线在视频画面中的传播,基于shader 加速光线求交统计像素数量的技术手段,当视频画面存在遮挡情况时,背景画面的光线交点会减少,判断视频画面中有无遮挡状况,对于视频遮挡区域的检测更为准确可靠,考虑到遮挡区域在显示区域不显示的特点,遮挡区域对显卡资源及内存造成了不必要的浪费,因此利用数据处理计算出遮挡区域加载需求指数,综合评估遮挡区域对能耗的损耗,进而提供不显示参考,有助于进一步减少对能量的损耗,提高显卡利用率,节约内存。
具体地,视频画面可见符合指数计算步骤为:对目标视频显示画面像素点、显示画面与显示面距离分析计算得到视频画面可见符合指数,所述视频画面可见符合指数计算公式为:
;
式中为视频画面可见符合指数,/>分别表示目标视频显示画面像素点、显示画面与显示面距离,/>为显示面像素点数量,/>为预设的图像画面与显示面距离,/>分别为像素点数量权重、画面与显示面距离权重。
本实施方案中,当视频显示面像素点与显示面像素点占比相对大时视频画面无法显示,同时当显示面与视频画面距离过远视频画面也无法可见,因此结合视频显示画面像素点、显示画面与显示面距离,利用加权计算出视频可见符合指数,对于视频画面的可见判断更为精准可靠。
具体地,判断目标视频画面在显示面上是否显示具体为:目标视频画面能否显示取决于目标视频像素点所占显示面像素点比例与目标视频画面距离显示面的距离,因此将视频画面可见符合指数与显示面画面可见阈值进行比对分析,当视频画面可见符合指数大于等于显示面画面可见阈值时,目标视频画面在显示面上可见;当视频画面可见符合指数小于显示面画面可见阈值时,目标视频画面在显示面上不加载显示。
本实施方案中,当视频画面可见区域占比超过阈值时视频才可被显示,因此通过比较数据处理计算所得的视频画面可见符合指数与可见阈值的大小,对视频画面是否显示提供有效参考,对于无法显示的视频可设定为暂时不加载或卸载,进而保障显卡的高效利用。
具体地,光线追踪相关信息包括显示画面像素点数量、光线-背景相交点数量。
本实施方案中,光线追踪技术通过从显示面每个像素点发射光线进行模拟视线,由于shader 加速光线求交统计像素数量的技术手段,当视频画面存在遮挡情况时,背景画面的光线交点会减少,因此对于光线追踪相关信息的获取包括了显示画面像素点数量、光线-背景相交点数量。
具体地,视频遮挡评估指数计算步骤为:利用显示画面像素点数量、光线-背景相交点数量分析计算出视频遮挡评估指数,所述视频遮挡评估指数计算公式为:
;
式中为视频遮挡评估指数,/>分别表示为显示画面像素点数量与光线-背景相交点数量,/>表示为视频遮挡评估指数的修正补偿因子。
本实施方案中,利用数据处理技术手段,对光线到达画面背景时的评估客观精准。
具体地,判断目标视频是否有画面遮挡区域具体为:根据 shader加速光线统计像素数量技术手段,当视频存在遮挡区域光线与背景交点减少,通过分析视频遮挡评估指数大小,当视频遮挡评估指数为0,说明显示画面像素点发射追踪光线全部到达视频画面背景,判断目标视频画面显示不存在画面遮挡情况;当视频遮挡评估指数不为0,说明显示画面像素点发射追踪光线存在没有到达视频画面背景情况,判断目标视频画面显示存在画面遮挡情况。
本实施方案中,为了加速光线追踪中的像素数量统计,光线追踪技术获取显示面像素点数量,为了保障计算的精准及建模的可靠性,通过每个像素点都发射光线,通过编写光线追踪的 shader程序,可以同时处理多个像素的光线追踪计算,从而提高计算速度,因此对于初始的光线指数计算综合考虑到显示面像素点数量及初始光强度,对初始光线的评估更为精准。
具体地,遮挡区域加载能耗需求指数计算步骤为:目标视频中画面遮挡区域信息包括遮挡区域面积、遮挡区域内存、图片转换率;对目标视频所存在帧数依次利用分析视频遮挡评估指数大小判断有无画面遮挡情况,对目标视频存在画面遮挡情况的帧依次编号:;结合遮挡区域面积、遮挡区域内存、图片转换率计算出遮挡区域加载能耗需求指数,所述遮挡区域加载能耗需求指数计算公式为:
;
式中为遮挡区域加载能耗需求指数,/>分别表示目标视频存在画面遮挡情况帧的遮挡区域面积、遮挡区域内存、图片转换率,/>分别表示目标视频存在画面遮挡情况帧总画面面积、总内存,/>分别表示遮挡区域面积权重、遮挡区域内存权重,/>表示为自然常数。
本实施方案中,当所需显示视频存在遮挡情况,计算机计算遮挡区域是否需要显示及加载遮挡区域内容都会浪费资源,因此利用一种基于光线追踪的视频遮挡区域检测方法综合计算出视频所有帧所含遮挡区域阴影总面积,这种方式有效节约计算机耗能与计算资源。
具体地,判断遮挡区域是否需要显示具体为:利用计算所得的遮挡区域加载能耗需求指数与遮挡区域能耗阈值对比分析,当遮挡区域能耗需求指数大于遮挡区域能耗阈值时判定为不显示遮挡区域并卸载遮挡区域内容;当遮挡区域能耗需求指数小于遮挡区域能耗阈值时根据用户需求利用可视化显示将遮挡区域动态显示。
本实施方案中,对于遮挡区域消耗能量超出阈值的情况不显示,以此节省资源,同时随着用户需求将消耗能量低于阈值的遮挡区域动态加载显示出来,并在加载某一帧遮挡区域时卸载上一帧遮挡区域内容,以有效地管理资源,减少内存和显卡资源的占用,提高性能和效率。
具体地,将遮挡区域动态显示具体为:实时检测目标视频画面显示情况,对目标视频每一帧画面实时检测画面遮挡情况,结合遮挡区域加载能耗需求指数利用虚拟重叠技术展示目标视频画面被遮挡区域,并实时将已展示的目标视频画面被遮挡区域卸载。
本实施方案中,通过检测和仅加载显示的区域,可以节省网络带宽和计算资源,尤其在移动设备和网络受限的情况下,能够减少数据传输和处理的负担;根据能耗需求指数调整加载区域,可以降低设备的能耗;实时检测画面遮挡情况,能够保持画面的清晰度和流畅度,减少卡顿和延迟。
参阅图2,一种用于基于光线追踪的视频遮挡区域检测方法的系统,包括:可见性检测模块,用于获取目标视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断目标视频画面在显示面上是否显示;光线追踪建模模块,用于对于可以在显示面上显示的目标视频建立光线追踪模型,选择视频画面背景,并获取光线追踪相关信息;遮挡判断模块,用于分析光线追踪相关信息计算出视频遮挡评估指数,根据视频遮挡评估指数分析判断目标视频是否有画面遮挡区域;遮挡检测模块,用于获取目标视频中画面遮挡区域信息,计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示。
本实施方案中,利用可见性检测模块、光线追踪建模模块、遮挡判断模块、遮挡检测模块集成协作,有效判断视频是否可见,对于可见视频采取光线追踪检测方法检测视频遮挡区域,考虑到遮挡区域对内存与显卡资源的损耗,精准判断视频遮挡区域对于计算机能耗的需求,以此判断对遮挡区域的显示卸载与否,实现对能源的节约及视频播放的性能与效率。
综上,本申请至少具有以下效果:
通过计算视频画面可见符合指数,判断视频画面在显示面上是否显示,有助于减少显卡资源消耗;对于可以在显示面上显示的视频建立光线追踪模型计算视频遮挡评估指数,并根据分析视频遮挡评估指数大小判断视频是否有画面遮挡区域;对视频中画面遮挡区域计算遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示,有助于进一步实现对显卡资源内存的高效利用,减少不必要的资源浪费。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、系统的流程图、结构图来描述的。应理解可由计算机程序指令实现流程图和结构图中的每一流程和模块的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和结构图一个模块或多个模块中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和结构图一个模块或多个模块中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和结构图一个模块或多个模块中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (7)
1.一种基于光线追踪的视频遮挡区域检测方法,其特征在于,包括以下步骤:
S1.获取目标视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断目标视频画面在显示面上是否显示;
S2.对于可以在显示面上显示的目标视频建立光线追踪模型,选择视频画面背景,并获取光线追踪相关信息;
S3.分析光线追踪相关信息计算出视频遮挡评估指数,根据视频遮挡评估指数分析判断目标视频是否有画面遮挡区域;
S4.获取目标视频中画面遮挡区域信息,计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示;
所述视频画面可见符合指数计算步骤为:
对目标视频显示画面像素点、显示画面与显示面距离分析计算得到视频画面可见符合指数,所述视频画面可见符合指数计算公式为:
;
式中为视频画面可见符合指数,/>分别表示目标视频显示画面像素点、显示画面与显示面距离,/>为显示面像素点数量,/>为预设的图像画面与显示面距离,/>分别为像素点数量权重、画面与显示面距离权重;
所述视频遮挡评估指数计算步骤为:
利用显示画面像素点数量、光线-背景相交点数量分析计算出视频遮挡评估指数,所述视频遮挡评估指数计算公式为:
;
式中为视频遮挡评估指数,/>分别表示为显示画面像素点数量与光线-背景相交点数量,/>表示为视频遮挡评估指数的修正补偿因子;
所述遮挡区域加载能耗需求指数计算步骤为:
所述目标视频中画面遮挡区域信息包括遮挡区域面积、遮挡区域内存、图片转换率;
对目标视频所存在帧数依次利用分析视频遮挡评估指数大小判断有无画面遮挡情况,对目标视频存在画面遮挡情况的帧依次编号:;
结合遮挡区域面积、遮挡区域内存、图片转换率计算出遮挡区域加载能耗需求指数,所述遮挡区域加载能耗需求指数计算公式为:
;
式中为遮挡区域加载能耗需求指数,/>分别表示目标视频存在画面遮挡情况帧的遮挡区域面积、遮挡区域内存、图片转换率,/>分别表示目标视频存在画面遮挡情况帧总画面面积、总内存,/>分别表示遮挡区域面积权重、遮挡区域内存权重,/>表示为自然常数。
2.根据权利要求1所述的一种基于光线追踪的视频遮挡区域检测方法,其特征在于,所述判断目标视频画面在显示面上是否显示具体为:目标视频画面能否显示取决于目标视频像素点所占显示面像素点比例与目标视频画面距离显示面的距离,因此将视频画面可见符合指数与显示面画面可见阈值进行比对分析,当视频画面可见符合指数大于等于显示面画面可见阈值时,目标视频画面在显示面上可见;
当视频画面可见符合指数小于显示面画面可见阈值时,目标视频画面在显示面上不加载显示。
3.根据权利要求2所述的一种基于光线追踪的视频遮挡区域检测方法,其特征在于,所述光线追踪相关信息包括显示画面像素点数量、光线-背景相交点数量。
4.根据权利要求3所述的一种基于光线追踪的视频遮挡区域检测方法,其特征在于,所述判断目标视频是否有画面遮挡区域具体为:
根据 shader加速光线统计像素数量技术手段,当视频存在遮挡区域光线与背景交点减少,通过分析视频遮挡评估指数大小,当视频遮挡评估指数为0,说明显示画面像素点发射追踪光线全部到达视频画面背景,判断目标视频画面显示不存在画面遮挡情况;
当视频遮挡评估指数不为0,说明显示画面像素点发射追踪光线存在没有到达视频画面背景情况,判断目标视频画面显示存在画面遮挡情况。
5.根据权利要求4所述的一种基于光线追踪的视频遮挡区域检测方法,其特征在于,所述判断遮挡区域是否需要显示具体为:利用计算所得的遮挡区域加载能耗需求指数与遮挡区域能耗阈值对比分析,当遮挡区域能耗需求指数大于遮挡区域能耗阈值时判定为不显示遮挡区域并卸载遮挡区域内容;
当遮挡区域能耗需求指数小于遮挡区域能耗阈值时根据用户需求利用可视化显示将遮挡区域动态显示。
6.根据权利要求5所述的一种基于光线追踪的视频遮挡区域检测方法,其特征在于,所述将遮挡区域动态显示具体为:实时检测目标视频画面显示情况,对目标视频每一帧画面实时检测画面遮挡情况,结合遮挡区域加载能耗需求指数利用虚拟重叠技术展示目标视频画面被遮挡区域,并实时将已展示的目标视频画面被遮挡区域卸载。
7.一种采用如权利要求1-6中任意一项所述基于光线追踪的视频遮挡区域检测方法的系统,其特征在于,包括:
可见性检测模块,用于获取目标视频显示画面像素点、显示画面与显示面距离,计算出视频画面可见符合指数,判断目标视频画面在显示面上是否显示;
光线追踪建模模块,用于对于可以在显示面上显示的目标视频建立光线追踪模型,选择视频画面背景,并获取光线追踪相关信息;
遮挡判断模块,用于分析光线追踪相关信息计算出视频遮挡评估指数,根据视频遮挡评估指数分析判断目标视频是否有画面遮挡区域;
遮挡检测模块,用于获取目标视频中画面遮挡区域信息,计算出遮挡区域加载能耗需求指数,判断遮挡区域是否需要显示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410021494.5A CN117527991B (zh) | 2024-01-08 | 2024-01-08 | 一种基于光线追踪的视频遮挡区域检测方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410021494.5A CN117527991B (zh) | 2024-01-08 | 2024-01-08 | 一种基于光线追踪的视频遮挡区域检测方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117527991A CN117527991A (zh) | 2024-02-06 |
CN117527991B true CN117527991B (zh) | 2024-03-15 |
Family
ID=89746087
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410021494.5A Active CN117527991B (zh) | 2024-01-08 | 2024-01-08 | 一种基于光线追踪的视频遮挡区域检测方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117527991B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102111532A (zh) * | 2010-05-27 | 2011-06-29 | 周渝斌 | 相机镜头遮挡检测系统及方法 |
CN107704711A (zh) * | 2017-10-30 | 2018-02-16 | 中国华能集团清洁能源技术研究院有限公司 | 一种塔式太阳能镜场阴影与遮挡效率的改进算法 |
CN115082356A (zh) * | 2022-07-20 | 2022-09-20 | 北京智汇云舟科技有限公司 | 基于shader的视频流图像校正方法、装置和设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11521308B2 (en) * | 2020-04-30 | 2022-12-06 | Advanced Micro Devices, Inc. | Ambient occlusion using bounding volume hierarchy bounding box tests |
US11816792B2 (en) * | 2021-12-16 | 2023-11-14 | Advanced Micro Devices, Inc. | Overlay trees for ray tracing |
-
2024
- 2024-01-08 CN CN202410021494.5A patent/CN117527991B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102111532A (zh) * | 2010-05-27 | 2011-06-29 | 周渝斌 | 相机镜头遮挡检测系统及方法 |
CN107704711A (zh) * | 2017-10-30 | 2018-02-16 | 中国华能集团清洁能源技术研究院有限公司 | 一种塔式太阳能镜场阴影与遮挡效率的改进算法 |
CN115082356A (zh) * | 2022-07-20 | 2022-09-20 | 北京智汇云舟科技有限公司 | 基于shader的视频流图像校正方法、装置和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN117527991A (zh) | 2024-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2956891B1 (en) | Segmenting objects in multimedia data | |
CN101489121A (zh) | 一种基于视频监控的背景模型初始化和更新方法 | |
US20180211446A1 (en) | Method and apparatus for processing a 3d scene | |
CN111027491A (zh) | 一种基于无锚点机制的火焰检测方法及装置 | |
CN111228821B (zh) | 智能检测穿墙外挂方法、装置、设备及其存储介质 | |
CN111367780B (zh) | 一种gpu的性能测试方法、装置及计算机存储介质 | |
US10719971B2 (en) | Low resolution depth pre-pass | |
CN111760277B (zh) | 光照渲染的方法及装置 | |
CN110287907A (zh) | 一种对象检测方法和装置 | |
Li et al. | Global and adaptive contrast enhancement for low illumination gray images | |
CN115375581A (zh) | 基于事件时空同步的动态视觉事件流降噪效果评价方法 | |
CN106611165B (zh) | 一种基于相关滤波和颜色匹配的汽车车窗检测方法及装置 | |
CN113808135B (zh) | 图像亮度异常检测方法、电子设备及存储介质 | |
US20070003133A1 (en) | Method and system for pivot-point based adaptive soft shadow estimation | |
CN117527991B (zh) | 一种基于光线追踪的视频遮挡区域检测方法及系统 | |
CN114500865A (zh) | 补光灯的调控方法、装置、电子设备和存储介质 | |
CN114067172A (zh) | 一种仿真图像生成方法、仿真图像生成装置及电子设备 | |
CN111738085B (zh) | 实现自动驾驶同时定位与建图的系统构建方法及装置 | |
US20160125643A1 (en) | Storage medium, luminance computation apparatus and luminance computation method | |
CN105208402A (zh) | 一种基于运动对象与图像分析的视频帧复杂度测度方法 | |
CN115690524A (zh) | 语义信息指导的点云目标检测正样本筛选方法 | |
CN115908409A (zh) | 光伏片缺陷的检测方法、检测装置、计算机设备和介质 | |
CN114445751A (zh) | 视频关键帧图像轮廓特征的提取方法和装置 | |
CN110276800B (zh) | 用于图像光线方向的识别方法及系统、计算机设备、介质 | |
CN113283332A (zh) | 一种消防机器人火焰识别方法、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |