CN117412016A - 3d视频显示方法、装置、介质及设备 - Google Patents
3d视频显示方法、装置、介质及设备 Download PDFInfo
- Publication number
- CN117412016A CN117412016A CN202311102615.0A CN202311102615A CN117412016A CN 117412016 A CN117412016 A CN 117412016A CN 202311102615 A CN202311102615 A CN 202311102615A CN 117412016 A CN117412016 A CN 117412016A
- Authority
- CN
- China
- Prior art keywords
- frame
- image frame
- image
- nth
- buffer area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 68
- 101100134058 Caenorhabditis elegans nth-1 gene Proteins 0.000 claims abstract description 39
- 230000002159 abnormal effect Effects 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 9
- 230000008569 process Effects 0.000 abstract description 13
- 230000002194 synthesizing effect Effects 0.000 abstract description 2
- 230000006870 function Effects 0.000 description 12
- 239000011521 glass Substances 0.000 description 9
- 230000009471 action Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/398—Synchronisation thereof; Control thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本申请实施例提供一种3D视频显示方法、装置、介质及设备,该方法包括:响应3D视频显示指令,获取图像帧序列;依次生成图像帧序列中左眼图像帧和右眼图像帧对应的备份图像帧并存入缓存区;将图像帧序列中待送显的第n帧图像帧与缓存区中第n‑1帧图像帧进行比较,得到比较结果;若比较结果为第n帧图像帧与第n‑1帧图像帧一致,则将第n帧图像帧替换为缓存区中的第n‑2帧图像备份帧后送往显示端合成目标3D视频。本申请通过对左眼图像帧和右眼图像帧进行备份后存入缓存区,并将待送显的图像帧与缓存区中的备份帧进行比较,当出现重复帧时,直接送出缓存区中与当前待送显的图像帧类型不同的另一备份帧,从而确保帧序列左右交替过程的稳定。
Description
技术领域
本申请涉及电子通信技术领域,尤其涉及一种3D视频显示技术领域,特别涉及一种3D视频显示方法、装置、介质及设备。
背景技术
3D眼镜分为主动式眼镜和被动式眼镜,并依赖于3D显示架构实现,通过在显示屏上显示左右眼画面交替的帧序列,并在人眼与显示屏之间增加一个光阀,利用光阀实现对显示屏射出的偏振光角度进行旋转,使得经光阀旋转后的偏振光配合位于用户眼睛一侧的左右正交的偏光片,可以实现对左眼或右眼的光源启闭进行分别控制,最终实现显示屏显示的左眼画面右眼看不到,右眼画面左眼看不到的效果,从而在用户端产生左右眼不同的视角形成3D显示效果。
3D显示架构的核心在于光阀的控制信号需根据屏幕实时显示的左右帧信息(即显示的画面是左眼画面还是右眼画面),给出准确的光阀控制时序,以使得左右眼分别看到正确的画面而不会形成串扰,在使用LCD作为显示屏时,通常还要加入背光的控制时序,以最大限度降低左右画面串扰。该3D显示架构能够实现的关键点之一在于形成左右画面交替的帧序列并在屏幕上显示。通常而言,3D显示模式下,左眼画面和右眼画面存在视像差,即左眼画面和右眼画面的内容是有不同的,而当GPU负载过重导致帧序列不稳定时,硬件端为保证输出的帧率稳定,会直接送出前一帧(即重复帧)。
发明内容
本申请实施例提供一种3D视频显示方法、装置、介质及设备,利用本申请实施例提供的3D视频显示方法,通过对GPU产生的用于构建目标3D视频的左眼图像帧和右眼图像帧进行备份后存入缓存区,并将待送显的图像帧与缓存区中的备份帧进行比较,当出现重复帧时,直接送出缓存区中与当前待送显的图像帧类型不同的另一备份帧,如果重复了左眼图像帧则送出右眼图像帧,重复了右眼图像帧则送出左眼图像帧,从而确保帧序列左右交替过程的稳定,避免出现由于左右眼图像帧重复,影响用户体验感的情况发生。
本申请实施例一方面提供了一种3D视频显示方法,所述方法包括:
响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
在所述将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较之前,所述方法还包括:
等待所述第n帧图像帧为预设帧图像帧时,开始执行所述将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较的步骤;
同时在所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致时,所述方法还包括:
将所述第n帧图像帧生成对应的备份图像帧存入所述缓存区。
在本申请实施例所述的3D视频显示方法中,在所述得到比较结果之后,所述方法还包括:
若所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则将所述第n帧图像帧送往显示端合成所述目标3D视频。
在本申请实施例所述的3D视频显示方法中,所述缓存区设有至少n+2个图像帧存储区块,每个图像帧存储区块对应存储一帧图像帧。
在本申请实施例所述的3D视频显示方法中,若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,所述方法还包括:
在所述缓存区中将所述第n帧图像帧对应的目标备份图像帧标记为异常图像帧。
在本申请实施例所述的3D视频显示方法中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中的所述异常图像帧。
在本申请实施例所述的3D视频显示方法中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中最先存入的图像帧。
相应的,本申请实施例另一方面还提供了一种3D视频显示装置,所述3D视频显示装置包括:
响应模块,用于响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
备份模块,用于按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
比较模块,用于将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
替换模块,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
相应的,本申请实施例另一方面还提供了一种存储介质,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行如上所述的3D视频显示方法。
相应的,本申请实施例另一方面还提供了一种终端设备,包括处理器和存储器,所述存储器存储有多条指令,所述处理器加载所述指令以执行如上所述的3D视频显示方法。
本申请实施例提供了一种3D视频显示方法、装置、介质及设备,该方法通过响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。利用本申请实施例提供的3D视频显示方法,通过对GPU产生的用于构建目标3D视频的左眼图像帧和右眼图像帧进行备份后存入缓存区,并将待送显的图像帧与缓存区中的备份帧进行比较,当出现重复帧时,直接送出缓存区中与当前待送显的图像帧类型不同的另一备份帧,如果重复了左眼图像帧则送出右眼图像帧,重复了右眼图像帧则送出左眼图像帧,从而确保帧序列左右交替过程的稳定,避免出现由于左右眼图像帧重复,影响用户体验感的情况发生。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍。显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的3D视频显示方法的流程示意图。
图2为本申请实施例提供的3D视频显示装置的结构示意图。
图3为本申请实施例提供的3D视频显示装置的另一结构示意图。
图4为本申请实施例提供的终端设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有付出创造性劳动前提下所获得的所有其他实施例,都属于本申请的保护范围。
需要说明的是,以下内容是对本方案背景做出的简单介绍:
本方案主要是围绕“如何避免用于输出帧序列的GPU在负载过重时,为了保证输出的帧率稳定,直接送出待送显的图像帧的前一帧,即重复帧,从而影响用户观看3D视频的体验感”这一技术问题展开的。可以理解的是,3D眼镜分为主动式眼镜和被动式眼镜,并依赖于3D显示架构实现,通过在显示屏上显示左右眼画面交替的帧序列,并在人眼与显示屏之间增加一个光阀,利用光阀实现对显示屏射出的偏振光角度进行旋转,使得经光阀旋转后的偏振光配合位于用户眼睛一侧的左右正交的偏光片,可以实现对左眼或右眼的光源启闭进行分别控制,最终实现显示屏显示的左眼画面右眼看不到,右眼画面左眼看不到的效果,从而在用户端产生左右眼不同的视角形成3D显示效果。
3D显示架构的核心在于光阀的控制信号需根据屏幕实时显示的左右帧信息(即显示的画面是左眼画面还是右眼画面),给出准确的光阀控制时序,以使得左右眼分别看到正确的画面而不会形成串扰,在使用LCD作为显示屏时,通常还要加入背光的控制时序,以最大限度降低左右画面串扰。该3D显示架构能够实现的关键点之一在于形成左右画面交替的帧序列并在屏幕上显示。通常而言,3D显示模式下,左眼画面和右眼画面存在视像差,即左眼画面和右眼画面的内容是有不同的,而当GPU负载过重导致帧序列不稳定时,硬件端为保证输出的帧率稳定,会直接送出前一帧(即重复帧)。
为了解决上述技术问题,本申请实施例提供一种3D视频显示方法。利用本申请实施例提供的3D视频显示方法,通过对GPU产生的用于构建目标3D视频的左眼图像帧和右眼图像帧进行备份后存入缓存区,并将待送显的图像帧与缓存区中的备份帧进行比较,当出现重复帧时,直接送出缓存区中与当前待送显的图像帧类型不同的另一备份帧,如果重复了左眼图像帧则送出右眼图像帧,重复了右眼图像帧则送出左眼图像帧,从而确保帧序列左右交替过程的稳定,避免出现由于左右眼图像帧重复,影响用户体验感的情况发生。
请参阅图1,图1为本申请实施例提供的3D视频显示方法的流程示意图。所述3D视频显示方法,应用于终端设备中。可选地,该终端设备为终端或服务器。可选地,该服务器是独立的物理服务器,或者是多个物理服务器构成的服务器集群或者分布式系统,或者是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(Content Delivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器。可选地,该终端是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表、智能语音交互设备、智能家电及车载终端等,但并不局限于此。
在一实施例中,该方法可以包括以下步骤:
步骤101,响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧。
需要说明的是,本方案提供的3D视频显示方法主要适用于借助AR眼镜或其他观影设备等应用端与手机或电脑等主板端进行3D图像数据传输的场景中。当用户想要使用3D显示功能时,具体可以通过在应用端例如AR眼镜上的触控屏或按键向主板端发出3D视频显示指令。当终端设备接收到3D视频显示指令时,先获取用于构建目标3D视频的图像帧序列,图像帧序列包括左眼图像帧和右眼图像帧。
步骤102,按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区。
需要说明的是,一般情况下图像帧序列由GPU(图像处理器)生成并送往显示端(例如3D眼镜)合成3D视频,但是因为在系统渲染复杂度比较高时,会消耗GPU的算力资源,重载时容易导致渲染不及时或延迟,因此无法生成左右交替稳定的帧序列。具体表现为当GPU负载过重导致帧序列不稳定时,硬件端为保证输出的帧率稳定,直接送出前一帧(即重复帧),导致用在左右眼看到的画面一样,从而形成不了3D效果。
因此,为了解决上述问题,本方案提出的3D视频显示方法改变传统的图像帧序列处理流程,在GPU与显示端之间增加一个用于对待送显的图像帧进行预处理的数据处理模块,示例性地,数据处理模块可以采用FPGA(现场可编程门阵列)。通过数据处理模块将从GPU获取的左眼图像帧和右眼图像帧按照其在图像帧序列中的排列顺序依次生成对应的备份图像帧,同时增加一个用于缓存备份图像帧的缓存区(例如DDR,动态随机存储器),使得待送显图像帧在送往显示端进行合成3D视频之前先生成对应的备份图像帧并存入缓存区中保存。这么做的目的在于本方案是通过将当前待送显的图像帧与其上一帧作对比,判断该待送显的图像帧是否与上一帧图像帧重复,从而进行干预动作,避免用户在显示端看到的左右眼图像一样,影响用户观看3D视频的体验感。因此需要对每一帧待送显的图像帧进行备份并缓存。
步骤103,将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果。
在本实施例中,通过将图像帧序列中待送显的第n帧图像帧与缓存区中第n-1帧图像帧进行逐行像素点比较,若前后两帧图像帧所有像素点均一致说明出现了重复图像帧,若前后两帧图像帧存在不一样的像素点则可以判断不是重复图像帧。
步骤104,若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
在本实施例中,当第n帧图像帧与第n-1帧图像帧一致时,为了避免出现用户左右眼看到的画面一致,需要将第n帧图像帧替换为缓存区中的第n-2帧图像备份帧,确保用户看到的左右帧图像是一左一右。若比较结果为第n帧图像帧与第n-1帧图像帧不一致,则将第n帧图像帧送往显示端合成目标3D视频。
通过对GPU产生的用于构建目标3D视频的左眼图像帧和右眼图像帧进行备份后存入缓存区,并将待送显的图像帧与缓存区中的备份帧进行比较,当出现重复帧时,直接送出缓存区中与当前待送显的图像帧类型不同的另一备份帧,如果重复了左眼图像帧则送出右眼图像帧,重复了右眼图像帧则送出左眼图像帧,从而确保帧序列左右交替过程的稳定,避免出现由于左右眼图像帧重复,影响用户体验感的情况发生。
在一些实施例中,为了减少缓存区占用过多内存资源,需要对缓存区中的图像帧存储区块数量进行限制,实现缓存区中的备份图像帧是一个循环流动的更替状态,避免距离当前时间较长的历史备份图像帧长时间缓存在缓存区中,同时也保持缓存区中始终有空闲的图像帧存储区块。具体实现方式可分为两种:
第一种是,当当前的缓存区已存满且比较结果为第n帧图像帧与第n-1帧图像帧一致,则待送显的第n帧图像帧在存入缓存区时覆盖缓存区中被标记为异常图像帧的备份图像帧,还能够避免出现重复的备份图像帧存在于缓存区中,确保后续经过替换得到的第n-2帧备份图像帧始终与第n-1帧图像帧互为一左一右。
第二种是,当当前的缓存区已存满且比较结果为第n帧图像帧与第n-1帧图像帧不一致,则待送显的第n帧图像帧在存入缓存区时覆盖缓存区中最先存入的图像帧。
需要说明的是,为了在第n帧图像帧与第n-1帧图像帧一致,能够将第n帧图像帧替换为缓存区中的第n-2帧图像备份帧,同时图像帧备份操作与图像帧比较操作可以同步进行,需要确保缓存区中设有至少n+2(n大于或等于1)个图像帧存储区块,每个图像帧存储区块对应存储一帧图像帧。因为当图像帧存储区块小于3,例如图像帧存储区块为2个时,此时若出现第n帧图像帧与第n-1帧图像帧一致,需要将第n帧图像帧替换为缓存区中的第n-2帧图像帧,但是此时若只有两个图像帧存储区块,显然缓存区中并不存在第n-2帧图像帧,从而导致无法继续进行图像帧替换操作。同时,GPU送来新的一帧待送显图像帧在生成对应的备份图像帧时也缺乏空闲的图像帧存储区块可以存入。
需要说明的是,备份图像帧存入缓存区这一动作可以是与其上一帧备份图像帧进行图像比较的动作同步进行,也可以是先后进行,并且不需要限定哪一个动作先执行。但是若备份图像帧存入缓存区的动作发生在图像比较的动作之后,则需要先等待第n帧图像帧为预设帧图像帧(在本方案中,预设帧为第3帧)时,开始执行将图像帧序列中待送显的第n帧图像帧与缓存区中第n-1帧图像帧进行比较的步骤,同时在比较结果为第n帧图像帧与第n-1帧图像帧一致时,将第n帧图像帧生成对应的备份图像帧存入缓存区。
上述所有可选技术方案,可以采用任意结合形成本申请的可选实施例,在此不再一一赘述。
具体实施时,本申请不受所描述的各个步骤的执行顺序的限制,在不产生冲突的情况下,某些步骤还可以采用其它顺序进行或者同时进行。
由上可知,本申请实施例提供的3D视频显示方法通过响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。利用本申请实施例提供的3D视频显示方法,通过对GPU产生的用于构建目标3D视频的左眼图像帧和右眼图像帧进行备份后存入缓存区,并将待送显的图像帧与缓存区中的备份帧进行比较,当出现重复帧时,直接送出缓存区中与当前待送显的图像帧类型不同的另一备份帧,如果重复了左眼图像帧则送出右眼图像帧,重复了右眼图像帧则送出左眼图像帧,从而确保帧序列左右交替过程的稳定,避免出现由于左右眼图像帧重复,影响用户体验感的情况发生。
本申请实施例还提供一种3D视频显示装置,所述3D视频显示装置可以集成在终端设备中。
请参阅图2,图2为本申请实施例提供的3D视频显示装置的结构示意图。3D视频显示装置30可以包括:
响应模块31,用于响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
备份模块32,用于按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
比较模块33,用于将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
替换模块34,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
在一些实施例中,所述装置还包括触发模块,用于等待所述第n帧图像帧为预设帧图像帧时,开始执行所述将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较的步骤,同时在所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致时,将所述第n帧图像帧生成对应的备份图像帧存入所述缓存区。
在一些实施例中,所述装置还包括送显模块,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则将所述第n帧图像帧送往显示端合成所述目标3D视频。
在一些实施例中,所述缓存区设有至少n+2个图像帧存储区块,每个图像帧存储区块对应存储一帧图像帧。
在一些实施例中,若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,所述装置还包括标记模块,用于在所述缓存区中将所述第n帧图像帧对应的目标备份图像帧标记为异常图像帧。
在一些实施例中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中的所述异常图像帧。
在一些实施例中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中最先存入的图像帧。
具体实施时,以上各个模块可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现。
由上可知,本申请实施例提供的3D视频显示装置30,其中响应模块31用于响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;备份模块32用于按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;比较模块33用于将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;替换模块34用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
请参阅图3,图3为本申请实施例提供的3D视频显示装置的另一结构示意图,3D视频显示装置30包括存储器120、一个或多个处理器180、以及一个或多个应用程序,其中该一个或多个应用程序被存储于该存储器120中,并配置为由该处理器180执行;该处理器180可以包括响应模块31、备份模块32、比较模块33以及替换模块33。例如,以上各个部件的结构和连接关系可以如下:
存储器120可用于存储应用程序和数据。存储器120存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器180通过运行存储在存储器120的应用程序,从而执行各种功能应用以及数据处理。此外,存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器120还可以包括存储器控制器,以提供处理器180对存储器120的访问。
处理器180是装置的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器120内的应用程序,以及调用存储在存储器120内的数据,执行装置的各种功能和处理数据,从而对装置进行整体监控。可选的,处理器180可包括一个或多个处理核心;优选的,处理器180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等。
具体在本实施例中,处理器180会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器120中,并由处理器180来运行存储在存储器120中的应用程序,从而实现各种功能:
响应指令,用于响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
备份指令,用于按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
比较指令,用于将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
替换指令,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
在一些实施例中,所述程序还包括触发指令,用于等待所述第n帧图像帧为预设帧图像帧时,开始执行所述将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较的步骤,同时在所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致时,将所述第n帧图像帧生成对应的备份图像帧存入所述缓存区。
在一些实施例中,所述程序还包括送显指令,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则将所述第n帧图像帧送往显示端合成所述目标3D视频。
在一些实施例中,所述缓存区设有至少n+2个图像帧存储区块,每个图像帧存储区块对应存储一帧图像帧。
在一些实施例中,若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,所述程序还包括标记指令,用于在所述缓存区中将所述第n帧图像帧对应的目标备份图像帧标记为异常图像帧。
在一些实施例中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中的所述异常图像帧。
在一些实施例中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中最先存入的图像帧。
本申请实施例还提供一种终端设备。所述终端设备可以是服务器、智能手机、电脑、平板电脑等设备。
请参阅图4,图4示出了本申请实施例提供的终端设备的结构示意图,该终端设备可以用于实施上述实施例中提供的3D视频显示方法。该终端设备1200可以为电视机或智能手机或平板电脑。
如图4所示,终端设备1200可以包括RF(Radio Frequency,射频)电路110、包括有一个或一个以上(图中仅示出一个)计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、传输模块170、包括有一个或者一个以上(图中仅示出一个)处理核心的处理器180以及电源190等部件。本领域技术人员可以理解,图4中示出的终端设备1200结构并不构成对终端设备1200的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
RF电路110用于接收以及发送电磁波,实现电磁波与电信号的相互转换,从而与通讯网络或者其他设备进行通讯。RF电路110可包括各种现有的用于执行这些功能的电路元件,例如,天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。RF电路110可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。
存储器120可用于存储软件程序以及模块,如上述实施例中3D视频显示方法对应的程序指令/模块,处理器180通过运行存储在存储器120内的软件程序以及模块,从而执行各种功能应用以及数据处理,可以根据终端设备所处的当前场景来自动选择振动提醒模式来进行3D视频显示,既能够保证会议等场景不被打扰,又能保证用户可以感知来电,提升了终端设备的智能性。存储器120可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器120可进一步包括相对于处理器180远程设置的存储器,这些远程存储器可以通过网络连接至终端设备1200。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入单元130可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131,也称为触控显示屏或者触控板,可收集用户在其上或附近的触控操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面131可包括触控检测装置和触控控制器两个部分。其中,触控检测装置检测用户的触控方位,并检测触控操作带来的信号,将信号传送给触控控制器;触控控制器从触控检测装置上接收触控信息,并将它转换成触点坐标,再送给处理器180,并能接收处理器180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131,输入单元130还可以包括其他输入设备132。具体地,其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端设备1200的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141,可选的,可以采用LCD(Liquid CrystalDisplay,液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的,触敏表面131可覆盖显示面板141,当触敏表面131检测到在其上或附近的触控操作后,传送给处理器180以确定触控事件的类型,随后处理器180根据触控事件的类型在显示面板141上提供相应的视觉输出。虽然在图4中,触敏表面131与显示面板141是作为两个独立的部件来实现输入和输出功能,但是在某些实施例中,可以将触敏表面131与显示面板141集成而实现输入和输出功能。
终端设备1200还可包括至少一种传感器150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板141的亮度,接近传感器可在终端设备1200移动到耳边时,关闭显示面板141和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于终端设备1200还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路160、扬声器161,传声器162可提供用户与终端设备1200之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,传声器162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器180处理后,经RF电路110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔,以提供外设耳机与终端设备1200的通信。
终端设备1200通过传输模块170(例如Wi-Fi模块)可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图4示出了传输模块170,但是可以理解的是,其并不属于终端设备1200的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器180是终端设备1200的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器120内的软件程序和/或模块,以及调用存储在存储器120内的数据,执行终端设备1200的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器180可包括一个或多个处理核心;在一些实施例中,处理器180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器180中。
终端设备1200还包括给各个部件供电的电源190,在一些实施例中,电源可以通过电源管理系统与处理器180逻辑相连,从而通过电源管理系统实现管理放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出,终端设备1200还可以包括摄像头(如前置摄像头、后置摄像头)、蓝牙模块等,在此不再赘述。具体在本实施例中,终端设备1200的显示单元140是触控屏显示器,终端设备1200还包括有存储器120,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器120中,且经配置以由一个或者一个以上处理器180执行一个或者一个以上程序包含用于进行以下操作的指令:
响应指令,用于响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
备份指令,用于按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
比较指令,用于将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
替换指令,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
在一些实施例中,所述程序还包括触发指令,用于等待所述第n帧图像帧为预设帧图像帧时,开始执行所述将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较的步骤,同时在所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致时,将所述第n帧图像帧生成对应的备份图像帧存入所述缓存区。
在一些实施例中,所述程序还包括送显指令,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则将所述第n帧图像帧送往显示端合成所述目标3D视频。
在一些实施例中,所述缓存区设有至少n+2个图像帧存储区块,每个图像帧存储区块对应存储一帧图像帧。
在一些实施例中,若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,所述程序还包括标记指令,用于在所述缓存区中将所述第n帧图像帧对应的目标备份图像帧标记为异常图像帧。
在一些实施例中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中的所述异常图像帧。
在一些实施例中,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中最先存入的图像帧。
本申请实施例还提供一种终端设备。所述终端设备可以是智能手机、电脑等设备。
由上可知,本申请实施例提供了一种终端设备1200,所述终端设备1200执行以下步骤:
响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
本申请实施例还提供一种存储介质,所述存储介质中存储有计算机程序,当所述计算机程序在计算机上运行时,所述计算机执行上述任一实施例所述的3D视频显示方法。
需要说明的是,对本申请所述3D视频显示方法而言,本领域普通测试人员可以理解实现本申请实施例所述3D视频显示方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述计算机程序可存储于一计算机可读存储介质中,如存储在终端设备的存储器中,并被该终端设备内的至少一个处理器执行,在执行过程中可包括如所述3D视频显示方法的实施例的流程。其中,所述存储介质可为磁碟、光盘、只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)等。
对本申请实施例的所述3D视频显示装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读存储介质中,所述存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的3D视频显示方法、装置、介质及设备进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种3D视频显示方法,其特征在于,包括:
响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
2.如权利要求1所述的3D视频显示方法,其特征在于,在所述将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较之前,所述方法还包括:
等待所述第n帧图像帧为预设帧图像帧时,开始执行所述将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较的步骤;
同时在所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致时,所述方法还包括:
将所述第n帧图像帧生成对应的备份图像帧存入所述缓存区。
3.如权利要求1所述的3D视频显示方法,其特征在于,在所述得到比较结果之后,所述方法还包括:
若所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则将所述第n帧图像帧送往显示端合成所述目标3D视频。
4.如权利要求3所述的3D视频显示方法,其特征在于,所述缓存区设有至少n+2个图像帧存储区块,每个图像帧存储区块对应存储一帧图像帧。
5.如权利要求4所述的3D视频显示方法,其特征在于,若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,所述方法还包括:
在所述缓存区中将所述第n帧图像帧对应的目标备份图像帧标记为异常图像帧。
6.如权利要求5所述的3D视频显示方法,其特征在于,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中的所述异常图像帧。
7.如权利要求4所述的3D视频显示方法,其特征在于,若当前的所述缓存区已存满且所述比较结果为所述第n帧图像帧与第n-1帧图像帧不一致,则所述待送显的第n帧图像帧在存入所述缓存区时覆盖所述缓存区中最先存入的图像帧。
8.一种3D视频显示装置,其特征在于,包括:
响应模块,用于响应3D视频显示指令,获取用于构建目标3D视频的图像帧序列,所述图像帧序列包括左眼图像帧和右眼图像帧;
备份模块,用于按照所述左眼图像帧或右眼图像帧在其所在图像帧序列中的排列顺序依次生成对应的备份图像帧并存入缓存区;
比较模块,用于将所述图像帧序列中待送显的第n帧图像帧与所述缓存区中第n-1帧图像帧进行比较,得到比较结果;
替换模块,用于若所述比较结果为所述第n帧图像帧与第n-1帧图像帧一致,则将所述第n帧图像帧替换为所述缓存区中的第n-2帧图像备份帧后送往显示端合成所述目标3D视频。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1-7任一项所述的3D视频显示方法。
10.一种终端设备,其特征在于,包括处理器和存储器,所述存储器存储有多条指令,所述处理器加载所述指令以执行权利要求1-7任一项所述的3D视频显示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311102615.0A CN117412016A (zh) | 2023-08-29 | 2023-08-29 | 3d视频显示方法、装置、介质及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311102615.0A CN117412016A (zh) | 2023-08-29 | 2023-08-29 | 3d视频显示方法、装置、介质及设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117412016A true CN117412016A (zh) | 2024-01-16 |
Family
ID=89485998
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311102615.0A Pending CN117412016A (zh) | 2023-08-29 | 2023-08-29 | 3d视频显示方法、装置、介质及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117412016A (zh) |
-
2023
- 2023-08-29 CN CN202311102615.0A patent/CN117412016A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113553014B (zh) | 多窗口投屏场景下的应用界面显示方法及电子设备 | |
CN111866433B (zh) | 视频源切换方法、播放方法、装置、设备和存储介质 | |
CN106658064B (zh) | 虚拟礼物展示方法及装置 | |
CN107843993B (zh) | 一种显示屏可视角度的控制方法、移动终端及计算机存储介质 | |
EP3159876A1 (en) | Method and apparatus for displaying content | |
CN111866140B (zh) | 融合管理设备、管理系统、服务调用方法及介质 | |
CN110162254B (zh) | 一种显示方法和终端设备 | |
CN103488450A (zh) | 一种投射图片的方法、装置及终端设备 | |
US20220253976A1 (en) | Image processing method and display apparatus | |
JP7427802B2 (ja) | 電力調整方法及び電子機器 | |
JP2023518548A (ja) | 検出結果出力方法、電子機器及び媒体 | |
CN113144622A (zh) | 节点切换方法、装置、设备及计算机可读存储介质 | |
CN109104573B (zh) | 一种确定对焦点的方法及终端设备 | |
US12061662B2 (en) | Methods, apparatuses and systems for displaying alarm file | |
CN112130949B (zh) | 提示资源的显示方法、装置及计算机可读存储介质 | |
CN110381155B (zh) | 任务管理方法、装置、存储介质及终端 | |
CN111682983A (zh) | 界面显示方法、装置、终端及服务器 | |
CN115828845A (zh) | 多媒体数据查看方法、装置、介质及设备 | |
CN117412016A (zh) | 3d视频显示方法、装置、介质及设备 | |
US20210042083A1 (en) | Mage display method, apparatus, electronic device and computer readable storage medium | |
CN114063962A (zh) | 图像显示方法、装置、终端和存储介质 | |
WO2024139539A1 (zh) | 3d图像显示方法、装置、介质及设备 | |
CN117082227A (zh) | 图像处理方法、装置、介质及设备 | |
CN113254137B (zh) | 动态图像展示方法、装置、存储介质及移动终端 | |
CN116582585B (zh) | 消息推送方法、装置、介质及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |