CN115412757A - 视频播放方法、装置及电子设备 - Google Patents
视频播放方法、装置及电子设备 Download PDFInfo
- Publication number
- CN115412757A CN115412757A CN202211058949.8A CN202211058949A CN115412757A CN 115412757 A CN115412757 A CN 115412757A CN 202211058949 A CN202211058949 A CN 202211058949A CN 115412757 A CN115412757 A CN 115412757A
- Authority
- CN
- China
- Prior art keywords
- playing
- video
- playing progress
- audio
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 71
- 238000004590 computer program Methods 0.000 claims description 22
- 238000005070 sampling Methods 0.000 claims description 17
- 230000008569 process Effects 0.000 description 20
- 230000000694 effects Effects 0.000 description 14
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 239000006185 dispersion Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本申请实施例涉及计算机技术领域，公开了一种视频播放方法、装置及电子设备。所述方法包括：对音视频文件进行分流，得到音频数据和视频数据；对所述视频数据进行画质处理之后，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度；在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。本申请实施例解决了现有技术中，播放音视频文件时，视频画面的延时较长，降低音画同步的精确程度的问题。
Description
技术领域
本申请涉及计算机技术领域，具体而言，本申请涉及一种视频播放方法、装置及电子设备。
背景技术
随着互联网行业的迅速发展，视频已经成为主流的媒体形式，视频播放成为用户工作、生活中十分常见的场景。在视频播放场景中，电子设备会对所播放的音视频进行音画同步处理，播放都需要进行音画同步处理。音画同步的程度直接关系到播放效果的好坏；具体地，音画同步是指电子设备的播放器正在渲染的每一帧画面和正在播放的每一段声音为严格的对应关系，不存在偏差。然而，相关技术中，视频画面的延时较长，降低音画同步的精确程度。
发明内容
本申请实施例提供了一种视频播放方法，以解决现有技术中，播放音视频文件时，视频画面的延时较长，降低音画同步的精确程度的问题。
相应的，本申请实施例还提供了一种视频播放装置、一种电子设备以及一种存储介质，用以保证上述方法的实现及应用。
为了解决上述问题，本申请实施例公开了一种视频播放方法，所述方法包括：
对音视频文件进行分流，得到音频数据和视频数据；
对所述视频数据进行画质处理之后，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度；
在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。
可选地，所述对所述视频数据进行画质处理之前，所述方法包括：
分别对所述音频数据和视频数据进行解码处理。
可选地，所述获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度，包括：
获取所述音频数据在第一时刻的播放时长以及所述音频数据的总播放时长，根据所述第一时刻的播放时长以及所述总播放时长，确定所述第一播放进度；
以及
获取所述视频数据在所述第一时刻的时间戳；
根据所述时间戳确定所述第二播放进度。
可选地，所述获取所述音频数据在第一时刻的播放时长，包括：
获取所述音频数据的采样率以及在第一时刻所播放的采样数据量；
根据所述采样数据量以及所述采样率，确定所述音频数据在第一时刻的播放时长。
可选地，所述播放所述第一播放进度对应的视频数据，包括：
确定所述视频数据中，与所述第一播放进度对应的目标视频数据；
播放所述目标视频数据。
可选地，所述获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度之后，所述方法还包括：
在所述第二播放进度大于所述第一播放进度的情况下，等待所述第一播放进度与所述第二播放进度相等的时刻，播放所述第二播放进度对应的视频数据。
本申请实施例还公开了一种视频播放装置，所述装置包括：
文件分流模块，用于对音视频文件进行分流，得到音频数据和视频数据；
进度获取模块，用于对所述视频数据进行画质处理之后，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度；
进度调整模块，用于在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。
本申请实施例还公开了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行程序时实现本申请实施例中一个或多个所述的方法。
本申请实施例还公开了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现如本申请实施例中一个或多个所述的方法。
本申请实施例还公开了一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如本申请实施例中一个或多个所述的方法。
本申请实施例提供的技术方案带来的有益效果是：
本申请实施例中，对音视频文件进行分流，得到音频数据和视频数据；对所述视频数据进行画质处理之后，执行音画同步过程，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度，并在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据；在画质处理之后进行音画同步，避免画质处理的时延影响音画同步的效果，提升音画同步的精确度，提升音视频文件播放效果。
本申请实施例附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本申请实施例提供的视频播放方法的流程图之一；
图2为本申请实施例提供的视频播放方法的流程图之二；
图3为本申请实施例提供的示例的示意图；
图4为本申请实施例提供的视频播放装置的结构示意图；
图5为本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面结合本申请中的附图描述本申请的实施例。应理解，下面结合附图所阐述的实施方式，是用于解释本申请实施例的技术方案的示例性描述，对本申请实施例的技术方案不构成限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请实施例所使用的术语“包括”以及“包含”是指相应特征可以实现为所呈现的特征、信息、数据、步骤、操作、元件和/或组件，但不排除实现为本技术领域所支持其他特征、信息、数据、步骤、操作、元件、组件和/或它们的组合等。应该理解，当我们称一个元件被“连接”或“耦接”到另一元件时，该一个元件可以直接连接或耦接到另一元件，也可以指该一个元件和另一元件通过中间元件建立连接关系。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的术语“和/或”指示该术语所限定的项目中的至少一个，例如“A和/或B”可以实现为“A”，或者实现为“B”，或者实现为“A和B”。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
参见图1，本申请实施例提供了一种视频播放方法，可选地，所述方法应用于电子设备，所述电子设备可以播放音视频文件，例如安装有播放器或其他可以播放音视频文件的应用程序。
如图1中所示，该方法可以包括以下步骤：
步骤101，对音视频文件进行分流，得到音频数据和视频数据。
其中，音视频文件包括音频信息和视频信息；所述音视频文件可以来自于互联网，例如用户通过电子设备实时接收来自网络的音视频；或者电子设备本地预先存储的，例如用户播放电子设备中预先缓存的音视频文件。
在电子设备播放音视频文件之前，首先对音视频文件进行分流，即将音频流和视频流分开，得到音频数据和视频数据。音频数据即包括音频信息的数据，视频数据即包括视频画面帧的数据。
步骤102，对所述视频数据进行画质处理之后，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度。
其中，画质处理例如通过预设的画质处理算法，对画面质量进行处理，画面质量包括例如清晰度、锐度、镜头畸变、色散度、解析度、色域范围、色彩纯度(或色彩艳度)、色彩平衡等其中至少一个指标参数；可选地，画质处理算法例如运动估计和运动补偿(MotionEstimate and Motion Compensation，MEMC)算法、高动态范围成像(High Dynamic RangeImaging，HDR)算法、超分(Super-Resolution,SR)算法、降噪(Noise Reduce，NR)算法。通过画质处理，提升视频画面的质量。
申请人发现，在画质处理过程会带来一定的时延；因此，本申请实施例中，在画质处理之后，执行音画同步过程，获取音频数据的第一播放进度以及视频数据的第二播放进度；具体地，以音频数据为例，可根据音频数据起播时的时间戳以及所播放的数据量确定播放进度，例如，音频数据的起播时的时间戳为5秒，当前时刻所播放音频数据量对应的播放时间为2秒，则音频播放进度为5+2＝7秒；可选地，第一播放进度可以用时间值表示，比如为前述7秒；还可以用百分比来表示，例如音视频文件的总播放时长为100秒，则播放进度为7/100。
其中，在播放进度用时间值表示时，视频播放进度的可以根据当前时刻的视频帧的时间戳确定；在播放进度用百分比表示时，视频播放进度的可以根据当前时刻的视频帧的时间戳以及视频数据的总播放时长确定。可以理解的是，本申请实施例中，第一播放进度与第二播放进度应采用同一种数据格式，例如都为时间值或都为百分比。
此外，申请人还发现，画质处理过程带来的时延为非固定时延，即该时延的长度是动态、随机的，导致音画同步的精确度进一步降低；本申请实施例在画质处理之后进行音画同步，避免画质处理的时延影响音画同步的效果。
步骤103，在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。
在视频数据的播放进度小于或等于音频数据的播放进度的情况下，例如视频播放进度慢于音频播放进度的情况下，播放所述音频播放进度对应的目标视频数据；其中，由于画质处理可能带来时延，因此，通常情况下，容易出现音画不同步的现象，较多的是视频播放进度慢于音频播放进度，因此，在视频播放进度慢于音频播放进度的情况下，确定与音频播放进度对应的目标视频数据，播放目标视频数据对应的视频画面帧。
此外，在视频播放进度等于音频播放进度的情况下，也可播放所述音频播放进度对应的目标视频数据。
可以理解的是，本申请实施例中，在音画同步的过程中，音频数据按照预设的播放规则正常播放。
本申请实施例中，对音视频文件进行分流，得到音频数据和视频数据；对所述视频数据进行画质处理之后，执行音画同步过程，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度，并在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据；在画质处理之后进行音画同步，避免画质处理的时延影响音画同步的效果，提升音画同步的精确度，提升音视频文件播放效果。本申请实施例解决了现有技术中，播放音视频文件时，视频画面的延时较长的问题，通过本实施例可以有效提升音画同步的精确程度。
在一个可选实施例中，所述对所述视频数据进行画质处理之前，所述方法包括：
分别对所述音频数据和视频数据进行解码处理。
其中，在电子设备播放音视频文件之前，电子设备首先对音视频文件进行分流，即将音频流和视频流分开，得到音频数据和视频数据。音频数据即包括音频信息的数据，视频数据即包括视频画面帧的数据。然后分别对音频数据和视频数据进行解码；例如，电子设备包括音频解码器和视频解码器，则通过音频解码器对音频数据解码，并通过视频解码器对视频数据解码。解码之后对所述视频数据进行画质处理，提升视频画面的质量。
参见图2，本申请实施例提供了一种视频播放方法，可选地，所述方法应用于电子设备，所述电子设备可以播放音视频文件，例如安装有播放器或其他可以播放音视频文件的应用程序。
如图2中所示，该方法可以包括以下步骤：
步骤201，对音视频文件进行分流，得到音频数据和视频数据。
其中，音视频文件包括音频信息和视频信息；所述音视频文件可以来自于互联网，例如用户通过电子设备实时接收来自网络的音视频；或者电子设备本地预先存储的，例如用户播放电子设备中预先缓存的音视频文件。
在电子设备播放音视频文件之前，首先对音视频文件进行分流，即将音频流和视频流分开，得到音频数据和视频数据。音频数据即包括音频信息的数据，视频数据即包括视频画面帧的数据。
步骤202，对所述视频数据进行画质处理。
其中，画质处理例如通过预设的画质处理算法，对画面质量进行处理，画面质量包括例如清晰度、锐度、镜头畸变、色散度、解析度、色域范围、色彩纯度(或色彩艳度)、色彩平衡等其中至少一个指标参数；可选地，画质处理算法例如MEMC算法、HDR算法、SR算法、NR算法。通过画质处理，提升视频画面的质量。
申请人发现，在画质处理过程会带来一定的时延；因此，本申请实施例中，在画质处理之后，执行音画同步过程，分别执行步骤203和步骤205。
步骤203，获取所述音频数据在第一时刻的播放时长以及所述音频数据的总播放时长。
步骤204，根据所述第一时刻的播放时长以及所述总播放时长，确定所述第一播放进度。
其中，获取所述音频数据在第一时刻(第一时刻例如当前时刻)的播放时长以及所述音频数据的总播放时长，然后根据所述播放时长以及总播放时长确定音频播放进度。
可选地，第一时刻的播放时长可根据当前时刻的绝对播放时长确定，也可根据与起始播放时刻的相对播放时长确定。
绝对播放时长即从时间进度为0开始到第一时刻的播放时间长度；例如，当前时刻的时间戳为8秒，则从时间进度为0至第一时刻的播放时长为7秒。
相对播放时长即从本次音频播放操作的起始播放时刻至第一时刻之间的播放时间长度。具体地，首先获取所述音频数据在播放起始时刻的起始时间戳以及获取所述音频数据在第一时刻所播放的音频播放时间；然后根据所述起始时间戳、音频播放时间以及所述音频数据的播放时长确定所述第一播放进度；相对播放时长根据音频数据起播时起始播放时刻的时间戳以及所播放的数据量确定播放进度，例如，音频数据的起播时的起始时间戳为5秒，当前时刻所播放音频数据量对应的播放时间为2秒，则音频播放进度为5+2＝7秒；可选地，第一播放进度可以用时间值表示，比如为前述7秒；还可以用百分比来表示，例如音视频文件的总时长为100秒，则播放进度为7/100。
步骤205，获取所述视频数据在所述第一时刻的时间戳；
步骤206，根据所述时间戳确定所述第二播放进度。
其中，在播放进度用时间值表示时，视频播放进度可以根据当前时刻的视频帧的时间戳确定，例如，当前时刻所播放视频帧的时间戳为8秒，则视频播放进度为8秒。在播放进度用百分比表示时，视频播放进度的可以根据当前时刻的视频帧的时间戳以及视频数据的总播放时长确定；例如，当前时刻所播放视频帧的时间戳为8秒，视频数据的总播放时长为100秒，则视频播放进度为8/100。
步骤207，在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。
可以理解的是，本申请实施例中，第一播放进度与第二播放进度应采用同一种数据格式，例如都为时间值或都为百分比。
在视频数据的播放进度小于或等于音频数据的播放进度的情况下，例如视频播放进度慢于音频播放进度的情况下，播放所述音频播放进度对应的目标视频数据；其中，由于画质处理可能带来时延，因此，通常情况下，容易出现音画不同步的现象，较多的是视频播放进度慢于音频播放进度，因此，在视频播放进度慢于音频播放进度的情况下，确定与音频播放进度对应的目标视频数据，播放目标视频数据对应的视频画面帧。
可选地，在视频播放进度等于音频播放进度的情况下，也可播放所述音频播放进度对应的目标视频数据。
此外，申请人还发现，画质处理过程带来的时延为非固定时延，即该时延的长度是动态、随机的，导致音画同步的精确度进一步降低；本申请实施例在画质处理之后进行音画同步，避免画质处理的时延影响音画同步的效果。
在一个可选实施例中，所述获取所述音频数据在第一时刻的播放时长，包括：
获取所述音频数据的采样率以及在第一时刻所播放的采样数据量；
根据所述采样数据量以及所述采样率，确定所述音频数据在第一时刻的播放时长。
其中，确定音频数据在第一时刻(第一时刻即当前时刻)所播放的音频播放时间时，获取音频数据的采样率以及在第一时刻所播放的采样数据量，根据所播放的采样数据量以及采样率确定音频播放时间；例如，音频数据的高级音频编码(Advanced AudioCoding，AAC)采样率为44100Hz，如果当前已经播放了88200个采样数据，则所播放的播放时长为2秒。
在一个可选实施例中，所述播放所述第一播放进度对应的视频数据，包括：
确定所述视频数据中，与所述第一播放进度对应的目标视频数据；
播放所述目标视频数据。
通常情况下，出现音画不同步的现象，较多的是视频播放进度慢于音频播放进度，因此，在视频播放进度慢于音频播放进度的情况下，确定与音频播放进度对应的目标视频数据，播放目标视频数据对应的视频画面帧，避免画质处理的时延影响音画同步的效果，提升音画同步的精确度。
在一个可选实施例中，所述获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度之后，所述方法还包括：
在所述第二播放进度大于所述第一播放进度的情况下，等待所述第一播放进度与所述第二播放进度相等的时刻，播放所述第二播放进度对应的视频数据。
其中，在视频播放进度大于(快于)音频播放进度的情况下，停止画面刷新，待音频播放进度与视频播放进度相等的情况下，再播放第二播放进度对应的视频画面；即音频播放进度赶上视频播放进度的时刻，再刷新视频画面。
可选地，本申请实施例中，可预先进行音频播放进度与视频播放进度的判断，比如提前20毫秒进行判断；这样，当出现音频播放进度与视频播放进度不相等的情况下，可根据音频播放进度调整视频画面，为音画同步操作预留出操作时间。
作为示例，参见图3，图3示出了本申请实施例的一个具体示例，包括以下过程：
1.音视频文件。
电子设备获取到音视频文件，该文件可以是本地文件，也可以是通过网络获取到的文件。
2.音视频数据分流。
由于音视频数据是按一定格式打包到同一文件中的，所以需要将音视频数据流分离后，分别送到音频解码器和视频解码器。
3.音频数据解码。
301.音频数据输出。
音频数据解码后会通过音频设备输出。
4.视频数据解码。
401.画质处理。
视频数据解码后会进行必要的画质处理。
5.音画同步。
6.音视频输出。
完成画质处理后进行音画同步，例如，将视频同步到音频的播放进度上，避免画质处理的时延影响音画同步的效果，提升音画同步的精确度。
本申请实施例中，对音视频文件进行分流，得到音频数据和视频数据；对所述视频数据进行画质处理之后，执行音画同步过程，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度，并在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据；在画质处理之后进行音画同步，避免画质处理的时延影响音画同步的效果，提升音画同步的精确度，提升音视频文件播放效果。
基于与本申请实施例所提供的方法相同的原理，本申请实施例还提供了一种视频播放装置，如图4所示，该装置包括：
文件分流模块401，用于对音视频文件进行分流，得到音频数据和视频数据。
其中，音视频文件包括音频信息和视频信息；所述音视频文件可以来自于互联网，例如用户通过电子设备实时接收来自网络的音视频；或者电子设备本地预先存储的，例如用户播放电子设备中预先缓存的音视频文件。
在电子设备播放音视频文件之前，首先对音视频文件进行分流，即将音频流和视频流分开，得到音频数据和视频数据。音频数据即包括音频信息的数据，视频数据即包括视频画面帧的数据。
进度获取模块402，用于对所述视频数据进行画质处理之后，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度。
其中，画质处理例如通过预设的画质处理算法，对画面质量进行处理，画面质量包括例如清晰度、锐度、镜头畸变、色散度、解析度、色域范围、色彩纯度(或色彩艳度)、色彩平衡等其中至少一个指标参数；可选地，画质处理算法例如运动估计和运动补偿(MotionEstimate and Motion Compensation，MEMC)算法、高动态范围成像(High Dynamic RangeImaging，HDR)算法、超分(Super-Resolution,SR)算法、降噪(Noise Reduce，NR)算法。通过画质处理，提升视频画面的质量。
申请人发现，在画质处理过程会带来一定的时延；因此，本申请实施例中，在画质处理之后，执行音画同步过程，获取音频数据的第一播放进度以及视频数据的第二播放进度；具体地，以音频数据为例，可根据音频数据起播时的时间戳以及所播放的数据量确定播放进度，例如，音频数据的起播时的时间戳为5秒，当前时刻所播放音频数据量对应的播放时间为2秒，则音频播放进度为5+2＝7秒；可选地，第一播放进度可以用时间值表示，比如为前述7秒；还可以用百分比来表示，例如音视频文件的总播放时长为100秒，则播放进度为7/10。
其中，在播放进度用时间值表示时，视频播放进度的可以根据当前时刻的视频帧的时间戳确定；在播放进度用百分比表示时，视频播放进度的可以根据当前时刻的视频帧的时间戳以及视频数据的总播放时长确定。可以理解的是，本申请实施例中，第一播放进度与第二播放进度应采用同一种数据格式，例如都为时间值或都为百分比。
此外，申请人还发现，画质处理过程带来的时延为非固定时延，即该时延的长度是动态、随机的，导致音画同步的精确度进一步降低；本申请实施例在画质处理之后进行音画同步，避免画质处理的时延影响音画同步的效果。
进度调整模块403，用于在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。
在视频数据的播放进度小于或等于音频数据的播放进度的情况下，例如视频播放进度慢于音频播放进度的情况下，播放所述音频播放进度对应的目标视频数据；其中，由于画质处理可能带来时延，因此，通常情况下，容易出现音画不同步的现象，较多的是视频播放进度慢于音频播放进度，因此，在视频播放进度慢于音频播放进度的情况下，确定与音频播放进度对应的目标视频数据，播放目标视频数据对应的视频画面帧。
此外，在视频播放进度等于音频播放进度的情况下，也可播放所述音频播放进度对应的目标视频数据。
可以理解的是，本申请实施例中，在音画同步的过程中，音频数据按照预设的播放规则正常播放。
在一个可选实施例中，所述装置包括：
解码模块，用于在所述进度获取模块402对所述视频数据进行画质处理之前，分别对所述音频数据和视频数据进行解码处理。
在一个可选实施例中，所述进度获取模块402包括：
第一获取子模块，用于获取所述音频数据在第一时刻的播放时长以及所述音频数据的总播放时长；
第一确定子模块，用于根据所述第一时刻的播放时长以及所述总播放时长，确定所述第一播放进度；
以及
第二获取子模块，用于获取所述视频数据在所述第一时刻的时间戳；
第二确定子模块，用于根据所述时间戳确定所述第二播放进度。
在一个可选实施例中，所述第一获取子模块用于：
获取所述音频数据的采样率以及在第一时刻所播放的采样数据量；
根据所述采样数据量以及所述采样率，确定所述音频数据在第一时刻的播放时长。
在一个可选实施例中，所述进度调整模块403用于：
确定所述视频数据中，与所述第一播放进度对应的目标视频数据；
播放所述目标视频数据。
在一个可选实施例中，所述进度调整模块403，还用于：
获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度之后，在所述第二播放进度大于所述第一播放进度的情况下，等待所述第一播放进度与所述第二播放进度相等的时刻，播放所述第二播放进度对应的视频数据。
本申请实施例提供的视频播放装置能够实现图1至图4的方法实施例中实现的各个过程，为避免重复，这里不再赘述。
本申请提供的视频播放装置，文件分流模块401对音视频文件进行分流，得到音频数据和视频数据；进度获取模块402对所述视频数据进行画质处理之后，执行音画同步过程，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度，进度调整模块403在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据；在画质处理之后进行音画同步，避免画质处理的时延影响音画同步的效果，提升音画同步的精确度，提升音视频文件播放效果。
本申请实施例的视频播放装置可执行本申请实施例所提供的视频播放方法，其实现原理相类似，本申请各实施例中的视频播放装置中的各模块、单元所执行的动作是与本申请各实施例中的视频播放方法中的步骤相对应的，对于视频播放装置的各模块的详细功能描述具体可以参见前文中所示的对应的视频播放方法中的描述，此处不再赘述。
基于与本申请的实施例中所示的方法相同的原理，本申请实施例还提供了一种电子设备，该电子设备可以包括但不限于：处理器和存储器；存储器，用于存储计算机程序；处理器，用于通过调用计算机程序执行本申请任一可选实施例所示的视频播放方法。
在一个可选实施例中，还提供了一种电子设备，如图5所示，图5所示的电子设备5000包括：处理器5001和存储器5003。其中，处理器5001和存储器5003相连，如通过总线5002相连。可选地，电子设备5000还可以包括收发器5004，收发器5004可以用于该电子设备与其他电子设备之间的数据交互，如数据的发送和/或数据的接收等。需要说明的是，实际应用中收发器5004不限于一个，该电子设备5000的结构并不构成对本申请实施例的限定。
处理器5001可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器5001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线5002可包括一通路，在上述组件之间传送信息。总线5002可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线5002可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器5003可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质、其他磁存储设备、或者能够用于携带或存储计算机程序并能够由计算机读取的任何其他介质，在此不做限定。
存储器5003用于存储执行本申请实施例的计算机程序，并由处理器5001来控制执行。处理器5001用于执行存储器5003中存储的计算机程序，以实现前述方法实施例所示的步骤。
其中，电子设备包括但不限于：移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图5示出的电子设备仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时可实现前述方法实施例的步骤及相应内容。
本申请实施例还提供了一种计算机程序产品，包括计算机程序，计算机程序被处理器执行时可实现前述方法实施例的步骤及相应内容。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”、“1”、“2”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除图示或文字描述以外的顺序实施。
应该理解的是，虽然本申请实施例的流程图中通过箭头指示各个操作步骤，但是这些步骤的实施顺序并不受限于箭头所指示的顺序。除非本文中有明确的说明，否则在本申请实施例的一些实施场景中，各流程图中的实施步骤可以按照需求以其他的顺序执行。此外，各流程图中的部分或全部步骤基于实际的实施场景，可以包括多个子步骤或者多个阶段。这些子步骤或者阶段中的部分或全部可以在同一时刻被执行，这些子步骤或者阶段中的每个子步骤或者阶段也可以分别在不同的时刻被执行。在执行时刻不同的场景下，这些子步骤或者阶段的执行顺序可以根据需求灵活配置，本申请实施例对此不限制。
以上所述仅是本申请部分实施场景的可选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请的方案技术构思的前提下，采用基于本申请技术思想的其他类似实施手段，同样属于本申请实施例的保护范畴。
Claims (10)
1.一种视频播放方法，其特征在于，包括：
对音视频文件进行分流，得到音频数据和视频数据；
对所述视频数据进行画质处理之后，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度；
在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。
2.根据权利要求1所述的视频播放方法，其特征在于，所述对所述视频数据进行画质处理之前，所述方法包括：
分别对所述音频数据和视频数据进行解码处理。
3.根据权利要求1所述的视频播放方法，其特征在于，所述获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度，包括：
获取所述音频数据在第一时刻的播放时长以及所述音频数据的总播放时长，根据所述第一时刻的播放时长以及所述总播放时长，确定所述第一播放进度；
以及
获取所述视频数据在所述第一时刻的时间戳；
根据所述时间戳确定所述第二播放进度。
4.根据权利要求3所述的视频播放方法，其特征在于，所述获取所述音频数据在第一时刻的播放时长，包括：
获取所述音频数据的采样率以及在第一时刻所播放的采样数据量；
根据所述采样数据量以及所述采样率，确定所述音频数据在第一时刻的播放时长。
5.根据权利要求1所述的视频播放方法，其特征在于，所述播放所述第一播放进度对应的视频数据，包括：
确定所述视频数据中，与所述第一播放进度对应的目标视频数据；
播放所述目标视频数据。
6.根据权利要求1所述的视频播放方法，其特征在于，所述获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度之后，所述方法还包括：
在所述第二播放进度大于所述第一播放进度的情况下，等待所述第一播放进度与所述第二播放进度相等的时刻，播放所述第二播放进度对应的视频数据。
7.一种视频播放装置，其特征在于，包括：
文件分流模块，用于对音视频文件进行分流，得到音频数据和视频数据；
进度获取模块，用于对所述视频数据进行画质处理之后，获取所述音频数据的第一播放进度以及所述视频数据的第二播放进度；
进度调整模块，用于在所述第二播放进度小于或等于所述第一播放进度的情况下，播放所述第一播放进度对应的视频数据。
8.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现权利要求1至6中任一项所述的方法。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的方法。
10.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211058949.8A CN115412757A (zh) | 2022-08-31 | 2022-08-31 | 视频播放方法、装置及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211058949.8A CN115412757A (zh) | 2022-08-31 | 2022-08-31 | 视频播放方法、装置及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115412757A true CN115412757A (zh) | 2022-11-29 |
Family
ID=84164333
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211058949.8A Pending CN115412757A (zh) | 2022-08-31 | 2022-08-31 | 视频播放方法、装置及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115412757A (zh) |
-
2022
- 2022-08-31 CN CN202211058949.8A patent/CN115412757A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10200768B2 (en) | Low-latency mobile device audiovisual streaming | |
| US10930318B2 (en) | Gapless video looping | |
| US6163647A (en) | Apparatus for synchronized playback of audio-video signals | |
| US8620134B2 (en) | Video and audio reproducing apparatus and video and audio reproducing method for reproducing video images and sound based on video and audio streams | |
| WO2017063399A1 (zh) | 一种视频播放方法和装置 | |
| KR100862630B1 (ko) | 비디오 프레임들 및 오디오 프레임들을 동기화하기 위한시스템 및 방법 | |
| US11595731B2 (en) | Implementation method and system of real-time subtitle in live broadcast and device | |
| US20070217505A1 (en) | Adaptive Decoding Of Video Data | |
| CN109167890B (zh) | 一种音画同步方法和装置及显示设备 | |
| CN110418183B (zh) | 音视频同步方法、装置、电子设备及可读介质 | |
| KR20210029829A (ko) | 미디어 스트림 재생들 사이를 트랜지션하는 동안 트랜지션 프레임들의 동적 재생 | |
| CN104113778A (zh) | 一种视频流解码方法及装置 | |
| CN114567812A (zh) | 音频播放方法、装置、系统、电子设备及存储介质 | |
| CN112770168B (zh) | 视频的播放方法以及相关装置、设备 | |
| CN113207044A (zh) | 视频处理方法、装置、电子设备和存储介质 | |
| CN115412757A (zh) | 视频播放方法、装置及电子设备 | |
| CN116708892A (zh) | 一种音画同步检测方法、装置、设备和存储介质 | |
| EP1753235A2 (en) | Apparatus and method for displaying a secondary video signal with a primary video signal | |
| CN114339289B (zh) | 视频播放处理的方法 | |
| CN112511887A (zh) | 视频播放控制方法及相应的装置、设备、系统和存储介质 | |
| CN111601157B (zh) | 一种音频输出方法及显示设备 | |
| CN113395581B (zh) | 音频播放方法、装置、电子设备及存储介质 | |
| WO2023036275A1 (zh) | 视频处理方法、装置、电子设备、介质及程序产品 | |
| CN112351317A (zh) | 一种自适应播放终端播放方法及装置 | |
| CN116668754A (zh) | 一种同步播放方法、装置、计算机设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |