CN110012284A - 一种基于头戴设备的视频播放方法及装置 - Google Patents
一种基于头戴设备的视频播放方法及装置 Download PDFInfo
- Publication number
- CN110012284A CN110012284A CN201711490280.9A CN201711490280A CN110012284A CN 110012284 A CN110012284 A CN 110012284A CN 201711490280 A CN201711490280 A CN 201711490280A CN 110012284 A CN110012284 A CN 110012284A
- Authority
- CN
- China
- Prior art keywords
- video
- played
- image
- source
- judgment value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 78
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 230000011218 segmentation Effects 0.000 claims description 4
- 235000013399 edible fruits Nutrition 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 11
- 210000003128 head Anatomy 0.000 description 4
- 238000005192 partition Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0092—Image segmentation from stereoscopic image signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本申请提供一种基于头戴设备的视频播放方法及装置,在实际使用中,先对待播放视频源的视频类型进行判断,再根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式,最后根据所确定的发送方式,将所述待播放视频源发送到头戴设备的左侧屏幕和右侧屏幕进行播放显示。通过本申请提供的视频播放方法,可以避免头戴设备在播放不同视频类型的视频源文件时,出现显示错误。并且通过对待播放视频源中间隔选取的N帧图像进行视频类型的判断可以减少数据的处理量,提高视频类型的识别效率,解决传统视频播放方法对视频源的识别速度慢,识别时间长的问题。
Description
技术领域
本申请涉及头戴设备技术领域,尤其涉及一种基于头戴设备的视频播放方法及装置。
背景技术
片源主要包括普通片源和3D片源两种类型,其中3D片源是指能够在播放设备上提供视频信号,为用户呈现三维立体影像的视频影片资源。3D片源主要分为左右型片源和上下型片源两种类型,在提供视频信号时,通过左右两部分或上下两部分区域,分别提供两个角度的视频信号。播放设备再分别将两个角度的视频信号显示在对应的屏幕中,以呈现出立体效果。例如,对于头戴显示设备,当播放左右型3D片源时,一般是将片源影像中左侧区域的影像呈现在头戴显示设备的左侧屏幕,将片源影像中右侧区域的影像呈现在右侧屏幕;而当播放上下型3D片源时,一般根据影片的拍摄角度,将上部区域的影像呈现在左侧屏幕,将下部区域的影像呈现在右侧屏幕。
片源一般来源于网络或本地文件,在播放前,用户需要对片源的类型进行人工判断和分类,即通过直接播放对应的视频文件来判断其类型,这种方法需要人工参与,在海量的网络片源中,确定符合用户播放设备的片源类型工作量非常大,为用户带来使用上的不便。为了改善上述问题,现有技术中常通过识别影像的画面比例和播放影片的类型,来判断片源的类型,例如,电影的画面比例一般为16:9或16:10,当呈现3D影像时,其画面尺寸将在一个方向上增大,即左右型片源的画面尺寸为32:9或32:10,上下型片源的画面尺寸为16:18或16:20,从而判断出片源的类型。但上述方法仅适用于具有严格画面尺寸要求的片源,根据不同的拍摄设备,录制的视频资源往往比例并不统一,使得上述方法在进行片源判断时容易出现误判的问题。
为了改善片源误判的问题,现有技术中还提供一种基于图像帧画质分析的3D信号识别方法,即通过分析连续N帧图像中的平均亮度,确定每帧图像固定点画质数据,再根据画质数据识别片源的类型。但这种方法根据每帧图像固定点画质数据识别片源类型的方式较片面,并不能准确反映图像中的画面内容。并且在分析连续N帧图像的平均亮度时,数据的处理量较大,会增加处理器负荷,而对于分辨率和帧率较高的高清片源,分析连续N帧图像的平均亮度数据处理量非常巨大,会使片源类型的识别速度变慢,识别时间延长。
发明内容
本申请提供了一种基于头戴设备的视频播放方法及装置,以解决传统视频播放方法对视频源的识别速度慢,识别时间长的问题。
一方面,本申请提供一种基于头戴设备的视频播放方法,包括:
在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,判断所述待播放视频源的视频类型,所述待播放视频源的视频类型包括:普通片源,左右型3D片源以及上下型3D片源;
根据所述待播放视频的视频类型判断结果,确定将所述待播放视频源发送给所述头戴设备的左侧屏幕和右侧屏幕的发送方式;
将所述待播放视频源根据所确定的发送方式发送至所述头戴设备的左侧屏幕和右侧屏幕进行播放显示。
可选的,判断所述待播放视频源的视频类型包括:
获取待播放视频源中,N个不相邻帧对应的判断图像;
逐一对每个所述判断图像在中心位置进行分割,生成识别图像组,所述识别图像组包括沿纵向分割生成的,左侧图像和右侧图像;以及,沿横向分割生成的,上侧图像和下侧图像;
根据所述识别图像组确定识别图像相似度;所述识别图像相似度包括所述左侧图像与右侧图像的横向相似度,以及所述上侧图像与下侧图像的纵向相似度;
根据所述识别图像相似度,确定判断值,所述判断值包括第一判断值和第二判断值,所述第一判断值为N组识别图像相似度中,所述横向相似度大于相似度阈值的数量,所述第二判断值为N组识别图像相似度中,所述纵向相似度大于相似度阈值的数量;
根据所述判断值,确定所述待播放视频源的视频类型。
可选的,根据所述判断值,确定所述待播放视频源的视频类型包括:
获取识别图像的预设判断值;
对比所述判断值与所述预设判断值,根据对比结果,确定所述待播放视频源的视频类型;
如果所述第一判断值和所述第二判断值均小于预设判断值,确定所述待播放视频源的视频类型为普通片源。
可选的,确定所述待播放视频源的视频类型还包括:
如果所述第一判断值大于所述预设判断值,所述第二判断值小于所述预设判断值,确定所述待播放视频源的视频类型为左右型3D片源;
如果所述第一判断值小于所述预设判断值,所述第二判断值大于所述预设判断值,确定所述待播放视频源的视频类型为上下型3D片源。
可选的,确定所述待播放视频源的视频类型还包括:
如果所述第一判断值和所述第二判断值均大于所述预设判断值,对比所述第一判断值与所述第二判断值;
根据对比结果确定所述待播放视频源的视频类型;
如果所述第一判断值大于所述第二判断值,确定所述待播放视频源的视频类型为左右型3D片源;
如果所述第一判断值小于所述第二判断值,确定所述待播放视频源的视频类型为上下型3D片源。
可选的,根据所述识别图像组确定识别图像相似度的步骤包括:
根据感知哈希算法,将所述识别图像组中的图像进行缩小尺寸,生成多个大小相同的对比图像;
将所述对比图像转化为灰度图像;
计算所述灰度图像中所有像素点的平均灰度值;
逐一对比所述灰度图像中每个像素点的灰度值与所述平均灰度值,生成对比结果;
根据所述对比结果确定所述识别图像组中每个图像的哈希值;
比较所述左侧图像与所述右侧图像的哈希值,根据比较结果确定所述横向相似度;比较所述上侧图像与所述下侧图像的哈希值,根据比较结果确定所述纵向相似度。
可选的,根据所述识别图像组确定识别图像相似度包括:
将所述识别图像组中的图像转化为灰度图像;
根据感知哈希算法,将转化后的灰度图像进行缩小尺寸,生成多个大小相同的缩放灰度图像;
计算所述缩放灰度图像中所有像素点的平均灰度值;
逐一对比所述缩放灰度图像中每个像素点的灰度值与所述平均灰度值,生成对比结果;
根据所述对比结果确定所述识别图像组中每个图像的哈希值;
比较所述左侧图像与所述右侧图像的哈希值,根据比较结果确定所述横向相似度;比较所述上侧图像与所述下侧图像的哈希值,根据比较结果确定所述纵向相似度。
可选的,所述方法还包括:
如果所述待播放视频源的视频类型的确定结果为普通片源,获取二次判断图像,所述二次判断图像为所述待播放视频源中,与所述判断图像在不同时间点上的N个不相邻帧对应的图像;
确定所述二次判断图像的所述判断值,并根据所述判断值再次确定所述待播放视频源的视频类型。
可选的,根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式包括:
如果判断所述待播放视频源的视频类型为左右型3D片源,解析出所述播放视频源的左眼视频信号和右眼视频信号,将所述左眼视频信号发送给头戴设备的左侧屏幕,将所述右眼视频信号发送给头戴设备的右侧屏幕;
如果判断所述待播放视频源的视频类型为上下型3D片源,解析出所述播放视频源的上视频信号和下视频信号,将所述上视频信号发送给头戴设备的左侧屏幕,将所述下视频信号发送给头戴设备的右侧屏幕;
如果判断所述待播放视频源的视频类型普通片源,将所述待播放视频源同时发给头戴设备的左侧屏幕和右侧屏幕,使所述头戴设备的左侧屏幕和右侧屏幕显示相同的画面。
另一方面,本申请还提供一种基于头戴设备的视频播放装置,包括:
视频类型判断模块,用于在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,判断所述待播放视频源的视频类型,所述待播放视频源的视频类型包括:普通片源,左右型3D片源以及上下型3D片源;
发送方式确定模块,用于根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式;
视频播放模块,用于将所述待播放视频源根据所确定的发送方式发送至头戴设备的左侧屏幕和右侧屏幕进行播放显示。
由以上技术方案可知,本申请提供的基于头戴设备的视频播放方法及装置,在实际进行视频播放过程中,先对待播放视频源的视频类型进行判断,判断所述待播放视频源的视频类型是普通片源,左右型3D片源或上下型3D片源,再根据所述待播放视频的视频类型判断结果,确定将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式,最后根据所确定的发送方式,将所述待播放视频源发送到头戴设备的左侧屏幕和右侧屏幕进行播放显示。
通过本申请提供的视频播放方法,可以在播放前预先判断待播放视频源的视频类型,再根据不同的视频类型,确定对应的视频显示方式,避免头戴设备在播放不同类型的视频源文件时,出现显示错误。并且通过对待播放视频源中间隔选取的N帧图像进行视频类型的判断可以减少数据的处理量,提高视频类型的识别效率,解决传统视频播放方法对视频源的识别速度慢,识别时间长的问题。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1一种基于头戴设备视频播放方法的流程示意图;
图2为本申请判断待播放视频源视频类型的流程示意图;
图3为本申请普通片源的判断流程示意图;
图4为本申请3D片源的判断流程示意图;
图5为本申请3D片源的一种特殊情况判断流程示意图;
图6为本申请视频类型判断中相似度的确定流程示意图;
图7为本申请视频类型判断中相似度的另一种确定方式的流程示意图;
图8为本申请一个实施例的流程示意图;
图9为本申请视频信号发送方式的流程示意图;
图10为一种基于头戴设备的视频播放装置的结构示意图。
具体实施方式
下面将详细地对实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。仅是与权利要求书中所详述的、本申请的一些方面相一致的系统和方法的示例。
本申请提供的技术方案中,所述的头戴设备是指可以佩戴在使用者头部,能够向使用者的双眼呈现视频影像的显示设备。在头戴设备中,虚拟现实(Virtual Reality,VR)设备是最为常见的一种。典型的虚拟现实设备,如VR眼镜,内置独立的屏幕,即对应于佩戴者左眼的左侧屏幕和对应于佩戴者右眼的右侧屏幕。虚拟现实设备内置的屏幕可以用于将输入的视频信号演示成虚拟现实影像画面,在实际使用中,虚拟现实设备一般是通过播放3D影片资源,左侧屏幕和右侧屏幕分别显示不同的视频影像,使佩戴者产生观看立体影像的沉浸感。
影片资源,简称为片源,即在本申请中所称的视频类型,所述视频类型不仅包括普通片源和3D片源两个大类,在3D片源中还进一步包括左右型3D片源和上下型3D片源。其中,普通片源包括2D片源和其他类型的片源,如,全景片源。2D片源又称为二维影片资源或平面影片资源,即常规影片资源,每一帧画面中仅存在一个影像;3D片源为三维影片资源或立体影片资源,一般在一帧画面中同时存在两个影像,是由两个摄像机同时对一个影片场景进行视频录制生成的影片资源。通常,在拍摄3D影片时,两个摄像机之间的相互位置和角度是固定不变的,并且为了适应人体双眼的成像规律,两个摄像机之间的距离往往比较近,因此在3D影片中,同一帧画面中的两个影像极其相似。
对于部分由计算机动画(Computer Graphics,简称CG)制成的3D影片,采用相同的方式对建立的CG模型同时生成两个角度上的影像,一帧画面也同样存在两个相似的影像。3D影片资源在放映时,由显示设备提取一帧内的两个相似影像,并在显示设备上呈现出来。例如,对于虚拟现实设备,一般在提取一帧内的两个影像后,分别在左右两个屏幕上进行显示。由于3D影片资源根据制作方式的不同,主要分为左右型和上下型两种,但显示设备往往不能快速判断出片源的类型,使观影过程中容易出现以左右型的方式显示上下型的片源,或者以上下型的方式显示左右型片源的错误,为了避免上述错误,本申请提供一种基于头戴设备的视频播放方法。
参见图1,为一种基于头戴设备的视频播放方法的流程示意图。由图1可知,本申请提供的视频播放方法在实际使用中,主要包括以下步骤:
S101:在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,判断所述待播放视频源的视频类型,所述待播放视频源的视频类型包括:普通片源,左右型3D片源以及上下型3D片源;
S102:根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式;
S103:将所述待播放视频源根据所确定的发送方式发送至头戴设备的左侧屏幕和右侧屏幕进行播放显示。
由以上步骤可知,本申请提供的视频播放方法在实际进行视频播放过程中,先通过步骤S101对待播放视频源的视频类型进行判断,识别出所述待播放视频源的视频类型是普通片源,左右型3D片源或上下型3D片源中的哪一种。在确定了带播放视频源的视频类型后,执行步骤S102,即根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式,最后根据所确定的发送方式,将所述待播放视频源发送到头戴设备的左侧屏幕和右侧屏幕进行播放显示。
进一步地,如图2所示,本申请提供的技术方案中,判断所述待播放视频源的视频类型包括:
S201:获取待播放视频源中,N个不相邻帧对应的判断图像;
S202:逐一对每个所述判断图像在中心位置进行分割,生成识别图像组,所述识别图像组包括沿纵向分割生成的,左侧图像和右侧图像;以及,沿横向分割生成的,上侧图像和下侧图像;
S203:根据所述识别图像组确定识别图像相似度;所述识别图像相似度包括所述左侧图像与右侧图像的横向相似度,以及所述上侧图像与下侧图像的纵向相似度;
S204:根据所述识别图像相似度,确定判断值,所述判断值包括第一判断值和第二判断值,所述第一判断值为N组识别图像相似度中,所述横向相似度大于相似度阈值的数量,所述第二判断值为N组识别图像相似度中,所述纵向相似度大于相似度阈值的数量;
S205:根据所述判断值,确定所述待播放视频源的视频类型。
对于步骤S201,在实际视频播放过程中,先对带播放视频源进行预读,从待播放视频源中间隔选取N个不相邻的帧,抽取出N个帧分别对应的画面图像,作为判断图像。为了避免视频源中画面影像到视频类型的判断结果,例如,电影资源在开始或某个时间段中,画面是全黑的,因此,本申请提供的技术方案中,N个不相邻的帧之间应尽可能增大各帧的间隔时间。例如,可以根据待播放视频源的总时长,在总时长内生成随机时刻,分别提取每个时刻对应的帧。进一步地,为了提高视频类型判断的准确率,N应该尽量设置的大一些,即获得更多数量帧所对应的图像,可以避免由于画面内容对视频类型的判断结果产生的影响。优选的,所述N应大于或等于3。
对于步骤S202,通过对每一个判断图像分别进行横向和纵向两种分割方式,在本实施例中,提取一幅判断图像后,先对图像进行复制,获得两个相同的判断图像,其中一幅判断采用纵向分割的方式,生成左侧图像和右侧图像,另一幅判断图像采用横向分割的方式生成上侧图像和下侧图像。即,在本实施例中,左侧图像和右侧图像,上侧图像和下侧图像的大小均等于所述判断图像大小的1/2。
对于步骤S204,其中第一判断值为N组识别图像相似度中,所述横向相似度大于相似度阈值的数量,所述第二判断值为N组识别图像相似度中,所述纵向相似度大于相似度阈值的数量。例如,N=10,在10组横向相似度中,如果有8组横向相似度大于预设的相似度阈值,则第一判断值为8;同理,在10组纵向相似度中,如果有1组纵向相似度大于预设相似度阈值,则第二判断值为1。
由以上技术方案可知,本实施例在进行待播放视频源视频类型的识别过程中,先获取待播放视频源中,N个不相邻帧对应的判断图像,再逐一对每个判断图像在中心位置进行分割,生成识别图像组,再根据识别图像组确定识别图像相似度,以及根据识别图像相似度,确定判断值,最后根据所述判断值,确定所述待播放视频源的视频类型。通过以上步骤,可以通过分析视频源中N个帧对应的图像来识别视频类型,不必连续分析视频源,避免提前解析并播放视频过程中所占用的时间,提高视频类型的识别效率。
在一种技术方案中,如图3所示,在根据所述判断值,确定所述待播放视频源的视频类型的步骤中,所述方法还包括:
S301:获取识别图像的预设判断值;
S302:对比所述判断值与所述预设判断值,根据对比结果,确定所述待播放视频源的视频类型;
S303:如果所述第一判断值和所述第二判断值均小于预设判断值,确定所述待播放视频源的视频类型为普通片源。
在本申请提供的技术方案中,相似度是指每个识别图像组中两幅图像之间的相似程度,是根据两幅图像中对应像素点的值,或对应像素点的亮度信息,或选定的对应区域中的图像内容等信息确定的一个代表值,本实施例中,相似度越高,表示两幅图像中的画面内容越相近。由于3D片源在拍摄或制作过程中模拟了人眼所观看的内容,因此,对于大部分3D片源,一般都会存在相似度较高的识别图像组,例如,当视频类型为左右型3D片源时,其沿着纵向分割生成的左侧图像和右侧图像的相似度较高,而沿着横向分割生成的上侧图像和下侧图像的相似度则较低;同理对于上下型3D片源,其沿着横向分割生成的上侧图像与下侧图像的相似度较高,而沿着纵向分割生成的左侧图像和右侧图像的相似度则较低;而对于普通片源,由于画面成左右或上下对称的可能性较低,其沿着横向分割生成的上侧图像与下侧图像的相似度,和沿着纵向分割生成的左侧图像和右侧图像的相似度都较低。因此,在本实施例中,通过相似度的判断,可以直接识别出待播放视频源的视频类型。
进一步地,如图4所示,确定所述待播放视频源的视频类型还包括:
S304:如果所述第一判断值大于所述预设判断值,所述第二判断值小于所述预设判断值,确定所述待播放视频源的视频类型为左右型3D片源;
S305:如果所述第一判断值小于所述预设判断值,所述第二判断值大于所述预设判断值,确定所述待播放视频源的视频类型为上下型3D片源。
进一步地,如图5所示,确定所述待播放视频源的视频类型还包括:
S306:如果所述第一判断值和所述第二判断值均大于所述预设判断值,对比所述第一判断值与所述第二判断值;
S3061:根据对比结果确定所述待播放视频源的视频类型;
S3062:如果所述第一判断值大于所述第二判断值,确定所述待播放视频源的视频类型为左右型3D片源;
S3063:如果所述第一判断值小于所述第二判断值,确定所述待播放视频源的视频类型为上下型3D片源。
由以上实施例可以看出,在确定了第一判断值和第二判断值后,通过对比第一判断值,第二判断值以及预设判断值之间的大小关系,确定待播放视频源的视频类型。其中,对于步骤S301,获取识别图像的预设判断值是指,在获得待播放视频源后,根据视频源的分类,如电影,CG,短片等,预先设置并保存的预设判断值。例如,对于电影,色调差别不大,两幅对比图像本身的相似度可能较大,因此可以将电影的预设判断值设置的相对较大。
在本申请的部分实施例中,如图6所示,根据所述识别图像组确定识别图像相似度的步骤包括:
S401:根据感知哈希算法,将所述识别图像组中的图像进行缩小尺寸,生成多个大小相同的对比图像;
S402:将所述对比图像转化为灰度图像;
S403:计算所述灰度图像中所有像素点的平均灰度值;
S404:逐一对比所述灰度图像中每个像素点的灰度值与所述平均灰度值,生成对比结果;
S405:根据所述对比结果确定所述识别图像组中每个图像的哈希值;
S406:比较所述左侧图像与所述右侧图像的哈希值,根据比较结果确定所述横向相似度;比较所述上侧图像与所述下侧图像的哈希值,根据比较结果确定所述纵向相似度。
由以上技术方案可知,本实施例中,通过感知哈希算法,分别计算左侧图像和右侧图像的哈希值,再通过比较哈希值,确定一组图像中的相似度。通过感知哈希算法可以直接得到量化的相似度值,并能够在后续的判断中直接参与比较。另外,由于通过感知哈希算法计算的两幅图像相似度,是以图像的整体作为相似度的计算依据,因此本实施例中不会出现现有技术中对单独区域或单个像素点进行相似度判断时,待播放视频源中画面对相似度结果极容易产生的影响,提高视频类型判断的准确率。
在本申请的部分实施例中,如图7所示,根据所述识别图像组确定识别图像相似度包括:
S501:将所述识别图像组中的图像转化为灰度图像;
S502:根据感知哈希算法,将转化后的灰度图像进行缩小尺寸,生成多个大小相同的缩放灰度图像;
S503:计算所述缩放灰度图像中所有像素点的平均灰度值;
S504:逐一对比所述缩放灰度图像中每个像素点的灰度值与所述平均灰度值,生成对比结果;
S505:根据所述对比结果确定所述识别图像组中每个图像的哈希值;
S506:比较所述左侧图像与所述右侧图像的哈希值,根据比较结果确定所述横向相似度;比较所述上侧图像与所述下侧图像的哈希值,根据比较结果确定所述纵向相似度。
本实施例与上述实施例的区别在于,本实施例先将识别图像组中的图像转化为灰度图像,再根据感知哈希算法对转化后的灰度图像进行缩小,以便确定识别图像组中两幅图像的哈希值。通过本实施例提供的图像处理方式,可以减少在根据感知哈希算法进行图像的缩小过程中需要处理的数据量,提高图像处理的效率,从而进一步加快对待播放视频源视频类型的识别速度。
进一步地,如图8所示,本申请提供的视频播放方法还包括:
S601:如果所述待播放视频源的视频类型的确定结果为普通片源,获取二次判断图像,所述二次判断图像为所述待播放视频源片源中,与所述判断图像在不同时间点上的N个不相邻帧对应的图像;
S602:确定所述二次判断图像的所述判断值,并根据所述判断值再次确定所述待播放视频源的视频类型。
本实施例中,为了避免由于选定N帧图像画面对结果的影响,例如,间隔选取的N个不相邻帧对应的图像都处于纯色画面。对于判断结果为普通的视频类型,还需要重新选取与前次判断选取所处位置的不同帧,进行进一步判断,如果判断结果依然是普通片源,则确定待播放视频源的视频类型是普通片源。
进一步的,为了提高判断精度,对于上述第一判断值和第二判断值相差不大的判断结果,也可以重新选取不同位置的帧对应的画面,以减少错误判断的情况发生。
在一种技术方案中,如图9所示,根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式包括:
S701:如果判断所述待播放视频源的视频类型为左右型3D片源;
S702:解析出所述播放视频源的左眼视频信号和右眼视频信号,将所述左眼视频信号发送给头戴设备的左侧屏幕,将所述右眼视频信号发送给头戴设备的右侧屏幕;
S703:如果判断所述待播放视频源的视频类型为上下型3D片源;
S704:解析出所述播放视频源的上视频信号和下视频信号,将所述上视频信号发送给头戴设备的左侧屏幕,将所述下视频信号发送给头戴设备的右侧屏幕;
S705:如果判断所述待播放视频源的视频类型为普通片源;
S706:将所述待播放视频源同时发给头戴设备的左侧屏幕和右侧屏幕,使所述头戴设备的左侧屏幕和右侧屏幕显示相同的画面。
在以上步骤中,对于判断了视频类型的待播放视频源,根据其各类型的画面排布方式进行显示,即左右型3D片源的左侧图像发送到头戴设备的左侧屏幕进行播放,右侧图像发送到头戴设备的右侧屏幕进行播放。而对于普通片源的视频类型,可以直接将待播放视频源中的图像,同时发送到头戴设备的左侧屏幕和右侧屏幕,使两侧的屏幕显示相同的画面,从而方便用户进行视频的观看。
进一步地,在进行播放前,还可以对片源类型进行显示,例如在对于普通片源的视频类型,可以显示文字内容“当前视频文件为普通影片,已按照平面方式进行显示”。而对于3D影片还可以添加手动调整的方式改变视频信号的发送方式,例如,在开始显示画面的一段时间内,可以显示文本提示信息“当前视频文件为3D影片,已按照立体方式进行显示,若您观察的画面出现差错,请点击变换显示方式按钮手动选择显示方式”。
进一步地,在本申请提供的技术方案中,还可以包括:确定所述待播放视频源的视频类型后,为所述待播放视频源片源添加说明标记,所述说明标记至少包括所述待播放视频源的视频类型。即在确定了待播放视频源的视频类型后,通过为视频源添加说明标记,提示再次播放该视频源的其他头戴设备视频类型。相应的,在本申请提供的技术方案中,在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,还应包括,获取待播放视频源的说明标记,并根据说明标记确定所述待播放视频源的视频类型。如果待播放视频源的说明标记中不存在该视频源的视频类型,或待播放视频源没有被添加说明标记,则执行上述S101步骤,即,在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,判断所述待播放视频源的视频类型。
基于上述视频播放方法,本申请还提供一种基于头戴设备的视频播放装置,包括:
视频类型判断模块1,用于在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,判断所述待播放视频源的视频类型,所述待播放视频源的视频类型包括:普通片源,左右型3D片源以及上下型3D片源;
发送方式确定模块2,用于根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式;
视频播放模块3,用于将所述待播放视频源根据所确定的发送方式发送头戴设备的左侧屏幕和右侧屏幕进行播放显示。
本申请提供的视频播放装置在实际使用中,先在视频资源库中获取待播放视频源,后通过视频类型判断模块1识别出待播放视频源的视频类型,再由发送方式确定模块2根据识别出的视频源类型确定与待播放视频源的视频类型相对应的视频信号发送方式,最后通过视频播放模块3,使头戴设备的左侧屏幕和右侧屏幕按照发送的视频信号对待播放视频源进行播放。
由以上技术方案可知,本申请提供的基于头戴设备的视频播放方法及装置,在实际进行视频播放过程中,先对待播放视频源的视频类型进行判断,判断所述待播放视频源的视频类型是普通片源,左右型3D片源或上下型3D片源,再根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式,最后根据所确定的发送方式,将所述待播放视频源发送到头戴设备的左侧屏幕和右侧屏幕进行播放显示。
通过本申请提供的视频播放方法,可以在播放前预先判断待播放视频源的视频类型,再根据不同的视频类型,确定对应的视频显示方式,避免头戴设备在播放不同视频类型的视频源文件时,出现显示错误。并且通过对待播放视频源中间隔选取的N帧图像进行视频类型的判断可以减少数据的处理量,提高视频类型的识别效率,解决传统视频播放方法对视频源的识别速度慢,识别时间长的问题。
本申请提供的视频播放方法及装置,不仅适用于虚拟现实设备,基于上述技术方案,本领域技术人员容易想到将本申请提供的技术方案应用到其他头戴设备中,并且本申请所提及的头戴设备,包括但不限于虚拟现实设备、增强现实设备、游戏设备、移动计算设备以及其它可穿戴式计算机等。
本申请提供的实施例之间的相似部分相互参见即可,以上提供的具体实施方式只是本申请总的构思下的几个示例,并不构成本申请保护范围的限定。对于本领域的技术人员而言,在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。
Claims (10)
1.一种基于头戴设备的视频播放方法,其特征在于,包括:
在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,判断所述待播放视频源的视频类型,所述待播放视频源的视频类型包括:普通片源,左右型3D片源以及上下型3D片源;
根据所述待播放视频的视频类型判断结果,确定将所述待播放视频源发送给所述头戴设备的左侧屏幕和右侧屏幕的发送方式;
将所述待播放视频源根据所确定的发送方式发送至所述头戴设备的左侧屏幕和右侧屏幕进行播放显示。
2.根据权利要求1所述的视频播放方法,其特征在于,判断所述待播放视频源的视频类型包括:
获取待播放视频源中,N个不相邻帧对应的判断图像;
逐一对每个所述判断图像在中心位置进行分割,生成识别图像组,所述识别图像组包括沿纵向分割生成的,左侧图像和右侧图像;以及,沿横向分割生成的,上侧图像和下侧图像;
根据所述识别图像组确定识别图像相似度;所述识别图像相似度包括所述左侧图像与右侧图像的横向相似度,以及所述上侧图像与下侧图像的纵向相似度;
根据所述识别图像相似度,确定判断值,所述判断值包括第一判断值和第二判断值,所述第一判断值为N组识别图像相似度中,所述横向相似度大于相似度阈值的数量,所述第二判断值为N组识别图像相似度中,所述纵向相似度大于相似度阈值的数量;
根据所述判断值,确定所述待播放视频源的视频类型。
3.根据权利要求2所述的视频播放方法,其特征在于,根据所述判断值,确定所述待播放视频源的视频类型包括:
获取识别图像的预设判断值;
对比所述判断值与所述预设判断值,根据对比结果,确定所述待播放视频源的视频类型;
如果所述第一判断值和所述第二判断值均小于预设判断值,确定所述待播放视频源的视频类型为普通片源。
4.根据权利要求3所述的视频播放方法,其特征在于,确定所述待播放视频源的视频类型还包括:
如果所述第一判断值大于所述预设判断值,所述第二判断值小于所述预设判断值,确定所述待播放视频源的视频类型为左右型3D片源;
如果所述第一判断值小于所述预设判断值,所述第二判断值大于所述预设判断值,确定所述待播放视频源的视频类型为上下型3D片源。
5.根据权利要求4所述的视频播放方法,其特征在于,确定所述待播放视频源的视频类型还包括:
如果所述第一判断值和所述第二判断值均大于所述预设判断值,对比所述第一判断值与所述第二判断值;
根据对比结果确定所述待播放视频源的视频类型;
如果所述第一判断值大于所述第二判断值,确定所述待播放视频源的视频类型为左右型3D片源;
如果所述第一判断值小于所述第二判断值,确定所述待播放视频源的视频类型为上下型3D片源。
6.根据权利要求2所述的视频播放方法,其特征在于,根据所述识别图像组确定识别图像相似度的步骤包括:
根据感知哈希算法,将所述识别图像组中的图像进行缩小尺寸,生成多个大小相同的对比图像;
将所述对比图像转化为灰度图像;
计算所述灰度图像中所有像素点的平均灰度值;
逐一对比所述灰度图像中每个像素点的灰度值与所述平均灰度值,生成对比结果;
根据所述对比结果确定所述识别图像组中每个图像的哈希值;
比较所述左侧图像与所述右侧图像的哈希值,根据比较结果确定所述横向相似度;比较所述上侧图像与所述下侧图像的哈希值,根据比较结果确定所述纵向相似度。
7.根据权利要求2所述的视频播放方法,其特征在于,根据所述识别图像组确定识别图像相似度包括:
将所述识别图像组中的图像转化为灰度图像;
根据感知哈希算法,将转化后的灰度图像进行缩小尺寸,生成多个大小相同的缩放灰度图像;
计算所述缩放灰度图像中所有像素点的平均灰度值;
逐一对比所述缩放灰度图像中每个像素点的灰度值与所述平均灰度值,生成对比结果;
根据所述对比结果确定所述识别图像组中每个图像的哈希值;
比较所述左侧图像与所述右侧图像的哈希值,根据比较结果确定所述横向相似度;比较所述上侧图像与所述下侧图像的哈希值,根据比较结果确定所述纵向相似度。
8.根据权利要求2-7任一项所述的视频播放方法,其特征在于,所述方法还包括:
如果所述待播放视频源的视频类型的确定结果为普通片源,获取二次判断图像,所述二次判断图像为所述待播放视频源中,与所述判断图像在不同时间点上的N个不相邻帧对应的图像;
确定所述二次判断图像的所述判断值,并根据所述判断值再次确定所述待播放视频源的视频类型。
9.根据权利要求1所述的视频播放方法,其特征在于,根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式包括:
如果判断所述待播放视频源的视频类型为左右型3D片源,解析出所述播放视频源的左眼视频信号和右眼视频信号,将所述左眼视频信号发送给头戴设备的左侧屏幕,将所述右眼视频信号发送给头戴设备的右侧屏幕;
如果判断所述待播放视频源的视频类型为上下型3D片源,解析出所述播放视频源的上视频信号和下视频信号,将所述上视频信号发送给头戴设备的左侧屏幕,将所述下视频信号发送给头戴设备的右侧屏幕;
如果判断所述待播放视频源的视频类型普通片源,将所述待播放视频源同时发给头戴设备的左侧屏幕和右侧屏幕,使所述头戴设备的左侧屏幕和右侧屏幕显示相同的画面。
10.一种基于头戴设备的视频播放装置,其特征在于,包括:
视频类型判断模块,用于在将待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕之前,判断所述待播放视频源的视频类型,所述待播放视频源的视频类型包括:普通片源,左右型3D片源以及上下型3D片源;
发送方式确定模块,用于根据所述待播放视频的视频类型判断结果,确定待播放视频源发送给头戴设备的左侧屏幕和右侧屏幕的发送方式;
视频播放模块,用于将所述待播放视频源根据所确定的发送方式发送至头戴设备的左侧屏幕和右侧屏幕进行播放显示。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711490280.9A CN110012284A (zh) | 2017-12-30 | 2017-12-30 | 一种基于头戴设备的视频播放方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711490280.9A CN110012284A (zh) | 2017-12-30 | 2017-12-30 | 一种基于头戴设备的视频播放方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110012284A true CN110012284A (zh) | 2019-07-12 |
Family
ID=67164155
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711490280.9A Pending CN110012284A (zh) | 2017-12-30 | 2017-12-30 | 一种基于头戴设备的视频播放方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110012284A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112040287A (zh) * | 2020-08-31 | 2020-12-04 | 聚好看科技股份有限公司 | 显示设备及视频播放方法 |
| CN114302221A (zh) * | 2021-03-26 | 2022-04-08 | 海信视像科技股份有限公司 | 一种虚拟现实设备及投屏媒资播放方法 |
| WO2022111005A1 (zh) * | 2020-11-30 | 2022-06-02 | 海信视像科技股份有限公司 | 虚拟现实设备及vr场景图像识别方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101980545A (zh) * | 2010-11-29 | 2011-02-23 | 深圳市九洲电器有限公司 | 一种自动检测3dtv视频节目格式的方法 |
| CN102547344A (zh) * | 2011-12-23 | 2012-07-04 | Tcl集团股份有限公司 | 一种视频格式识别方法及装置 |
| US20140050402A1 (en) * | 2012-08-15 | 2014-02-20 | Novatek Microelectronics Corp. | Method of automatically detecting image format and device thereof |
| CN105069042A (zh) * | 2015-07-23 | 2015-11-18 | 北京航空航天大学 | 基于内容的无人机侦察图像数据检索方法 |
| CN105657398A (zh) * | 2015-12-31 | 2016-06-08 | 北京小鸟看看科技有限公司 | 一种多媒体资源播放方法和装置 |
| CN105847789A (zh) * | 2016-03-31 | 2016-08-10 | 深圳多哚新技术有限责任公司 | 一种基于vr图像的显示屏驱动的方法和装置 |
-
2017
- 2017-12-30 CN CN201711490280.9A patent/CN110012284A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101980545A (zh) * | 2010-11-29 | 2011-02-23 | 深圳市九洲电器有限公司 | 一种自动检测3dtv视频节目格式的方法 |
| CN102547344A (zh) * | 2011-12-23 | 2012-07-04 | Tcl集团股份有限公司 | 一种视频格式识别方法及装置 |
| US20140050402A1 (en) * | 2012-08-15 | 2014-02-20 | Novatek Microelectronics Corp. | Method of automatically detecting image format and device thereof |
| CN105069042A (zh) * | 2015-07-23 | 2015-11-18 | 北京航空航天大学 | 基于内容的无人机侦察图像数据检索方法 |
| CN105657398A (zh) * | 2015-12-31 | 2016-06-08 | 北京小鸟看看科技有限公司 | 一种多媒体资源播放方法和装置 |
| CN105847789A (zh) * | 2016-03-31 | 2016-08-10 | 深圳多哚新技术有限责任公司 | 一种基于vr图像的显示屏驱动的方法和装置 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112040287A (zh) * | 2020-08-31 | 2020-12-04 | 聚好看科技股份有限公司 | 显示设备及视频播放方法 |
| WO2022111005A1 (zh) * | 2020-11-30 | 2022-06-02 | 海信视像科技股份有限公司 | 虚拟现实设备及vr场景图像识别方法 |
| CN114302221A (zh) * | 2021-03-26 | 2022-04-08 | 海信视像科技股份有限公司 | 一种虚拟现实设备及投屏媒资播放方法 |
| CN114302221B (zh) * | 2021-03-26 | 2023-09-08 | 海信视像科技股份有限公司 | 一种虚拟现实设备及投屏媒资播放方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10834379B2 (en) | 2D-to-3D video frame conversion | |
| US8515172B2 (en) | Segmentation of image data | |
| EP3238213B1 (en) | Method and apparatus for generating an extrapolated image based on object detection | |
| EP2432229A2 (en) | Object tracking and highlighting in stereoscopic images | |
| US11416964B2 (en) | Method and device for adjusting resolution of HMD apparatus | |
| CN110720114A (zh) | 图像处理装置、图像处理方法和程序 | |
| CN110012284A (zh) | 一种基于头戴设备的视频播放方法及装置 | |
| US12081722B2 (en) | Stereo image generation method and electronic apparatus using the same | |
| KR100560464B1 (ko) | 관찰자의 시점에 적응적인 다시점 영상 디스플레이 시스템을 구성하는 방법 | |
| TWI790560B (zh) | 並排影像偵測方法與使用該方法的電子裝置 | |
| Zhang et al. | Visual comfort assessment of stereoscopic images with multiple salient objects | |
| JP2010226391A (ja) | 画像処理装置、プログラムおよび画像処理方法 | |
| Calagari et al. | Gradient-based 2D-to-3D conversion for soccer videos | |
| CN115118949A (zh) | 立体图像产生方法与使用该方法的电子装置 | |
| TWI871793B (zh) | 端對端的並排影像處理系統及方法 | |
| CN106101698A (zh) | 一种基于图像类型判断的自动播放方法和装置 | |
| CN106034233B (zh) | 信息处理方法及电子设备 | |
| CN120014110A (zh) | 图像生成方法、装置及电子设备 | |
| Bouchard | Perception and detection of occlusion-stereopsis conflicts in stereoscopic imagery | |
| CN121547567A (zh) | 一种显示处理方法、装置和电子设备 | |
| TWM626645U (zh) | 電子裝置 | |
| Doan et al. | Hole-Filling Algorithm with Spatio-Temporal Background Information for View Synthesis |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190712 |
|
| RJ01 | Rejection of invention patent application after publication |