CN114189728A - 一种数字视频和音频输入转换成模拟格式的播放系统 - Google Patents
一种数字视频和音频输入转换成模拟格式的播放系统 Download PDFInfo
- Publication number
- CN114189728A CN114189728A CN202111522409.6A CN202111522409A CN114189728A CN 114189728 A CN114189728 A CN 114189728A CN 202111522409 A CN202111522409 A CN 202111522409A CN 114189728 A CN114189728 A CN 114189728A
- Authority
- CN
- China
- Prior art keywords
- signal
- video
- audio
- digital
- analog
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000006243 chemical reaction Methods 0.000 claims abstract description 157
- 230000003139 buffering effect Effects 0.000 claims abstract description 11
- 238000012937 correction Methods 0.000 claims description 16
- 238000005070 sampling Methods 0.000 claims description 16
- 230000008859 change Effects 0.000 claims description 13
- 238000000034 method Methods 0.000 claims description 12
- 238000007781 pre-processing Methods 0.000 claims description 12
- 230000005236 sound signal Effects 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 11
- 230000008569 process Effects 0.000 claims description 10
- 238000000605 extraction Methods 0.000 claims description 6
- 238000012544 monitoring process Methods 0.000 claims description 6
- 238000004806 packaging method and process Methods 0.000 claims description 5
- 238000001914 filtration Methods 0.000 claims description 3
- 238000012163 sequencing technique Methods 0.000 claims description 3
- 238000012360 testing method Methods 0.000 claims description 3
- 230000009286 beneficial effect Effects 0.000 description 11
- 238000013461 design Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4392—Processing of audio elementary streams involving audio buffer management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Receiver Circuits (AREA)
Abstract
本发明提供了一种数字视频和音频输入转换成模拟格式的播放系统，包括：数据缓冲模块，用于缓冲待播放的音频数据和视频数据；格式转换模块，用于对所述音频数据和视频数据进行格式转换，得到目标音频数据和目标视频数据；数模转换模块，用于对所述目标音频数据进行数模转换得到音频模拟信号，对所述目标视频数据进行数模转换，得到视频模拟信号；同步模块，用于对所述音频模拟信号和视频模拟信号进行同步，并输出至对应的终端，本发明保证l得到音频模拟信号和视频模拟信号的质量，保证了音频视频播放的同步性，从而保证了所述播放系统音频和视频播放质量。
Description
技术领域
本发明涉及音视频播放领域，特别涉及一种数字视频和音频输入转换成模拟格式的播放系统。
背景技术
数字音频和视频首先将音频和视频文件转换为电平信号，然后将电平信号转换成二进制数据进行存储。播放时，将数据转换为模拟信号，然后进行播放，数字视频和音频具有可以不失真，进行多次复制，并可以长时间存放的优点。
数字音频和视频需要最终转换为模拟格式进行播放，在转换为模拟格式时，由于各方面因素的干扰，会使得信号失真变形等，造成转化为模拟格式的音频和视频声音卡顿、画质不清晰、音画不同步等问题。
因此，本发明提供一种数字视频和音频输入转换成模拟格式的播放系统。
发明内容
本发明提供一种数字视频和音频输入转换成模拟格式的播放系统，保证播放视频和音频的播放质量和播放同步。
一种数字视频和音频输入转换成模拟格式的播放系统，包括：
数据缓冲模块，用于缓冲待播放的音频数据和视频数据；
格式转换模块，用于对所述音频数据和视频数据进行格式转换，得到目标音频数据和目标视频数据；
数模转换模块，用于对所述目标音频数据进行数模转换得到音频模拟信号，对所述目标视频数据进行数模转换，得到视频模拟信号；
同步模块，用于对所述音频模拟信号和视频模拟信号进行同步，并输出至对应的终端。
在一种可能实现的方式中，所述数据缓冲模块，包括：
缓冲接收单元，用于将所述接收到音频数据和视频数据填满缓冲空间；
数据量监测单元，用于监测所述缓冲空间的数据量，当监测到所述数据量小于预设数据量值时，获取新的音频数据和视频数据到所述缓冲空间。
在一种可能实现的方式中，所述数据缓冲模块，还包括：
时间获取单元，用于获取所述音频数据的第一播放时间，以及所述视频数据的第二播放时间；
缓冲确定单元，用于基于所述第一播放时间、第二播放时间，将所述音频数据和视频数据进行匹配打包，得到缓冲数据，并对所述缓冲数据进行排序，确定缓冲序列。
在一种可能实现的方式中，所述格式转换模块包括：
格式确定单元，用于确定所述数模转换模块的输入数据格式，所述输入数据格式包括目标音频格式和目标视频格式；
格式转换单元，用于查询所述音频数据和视频数据的当前数据格式与目标音频格式和目标视频格式之间的转换协议，基于所述转换协议，将所述音频数据和视频数据进行格式转换，得到目标音频数据和目标视频数据。
在一种可能实现的方式中，所述数模转换模块包括：
数据预处理单元，用于根据数模转换的规则，预测数模转换过程的输出误差，并基于所述输出误差对所述目标音频数据和目标视频数据进行预处理，得到音频数字信号和视频数字信号；
音频转换单元，用于基于音频数模转换规则，对所述音频数字信号进行转换，得到音频模拟信号；
视频转换单元，用于基于视频数模转换规则，对所述视频数字信号进行转换，得到视频数字信号。
在一种可能实现的方式中，所述数据预处理单元包括：
模型建立单元，用于基于所述数模转换规则，确定数模转换的参数配置，并基于所述参数配置，建立数模转换模型，并确定所述数模转换模型的预设转换精度；
测试单元，用于将预设输入信号输入所述数模转换模型中，得到预测输出信号，将所述预测输出信号和预设输出信号进行差异比较，确定斜率变化比，并基于所述斜率变化比确定所述数模转换模型的实际转换精度；
误差判断单元，用于根据所述实际转换精度与预设转换精度之间的差值作为输出误差，判断所述输出误差是否在预设范围内；
若是，将所述目标音频数据和目标视频数据分别作为音频数字信号和视频数字信号；
否则，基于所述输出误差，确定第一幅度调节值，并基于所述斜率变化比，从所述预测输出信号提取大于所述斜率变化比对应的差异输出信号，获取所述差异输出信号对应的第一数字信号，从所述预设输入信号中获取与所述差异输出信号对应的第二数字信号，基于所述第一数字信号与第二数字信号之间的差异，确定第二幅度调节值；
预处理单元，用于基于所述第一幅度调节值对所述目标音频数据和目标视频数据的所有采样点的数值进行第一幅度调整，得到第一音频信号和第一视频信号，对所述第二数字信号进行特征提取，获取数字信号特征，从所述第一音频信号和第一视频信号提取与所述数字信号特征对应的部分采样点，并根据所述第二幅度调节值，对所述部分采样点进行第二幅度调整，得到第二音频信号和第二视频信号；
所述第二音频信号和第二视频信号即为音频数字信号和视频数字信号。
在一种可能实现的方式中，所述音频转换单元包括：
电压确定单元，用于基于所述音频数模转换规则确定电压上限值，根据所述电压上限值对对音频数字信号进行滤波处理，得到不高于所述电压上限值的音频数字信号；
第一转换单元，用于对滤波后的音频数字信号进行数模转换，得到音频模拟信号。
在一种可能实现的方式中，所述视频转换单元，包括：
第二转换单元，用于基于所述视频数模转换规则，确定第一脉冲信号，并将所述第一脉冲信号与视频数字信号进行卷积计算，得到第一模拟信号，并确定在卷积计算过程中产生的噪声信号；
信噪比确定单元，用于对所述第一模拟信号和噪声信号进行采样分析，确定所述在第二转换单元下的信噪比；
判断输出单元，用于判断所述信噪比是否大于预设信噪比；
若是，将所述第一模拟信号作为视频模拟信号输出；
否则，基于所述信噪比，确定校正因子，并利用所述校正因子，确定第二脉冲信号，将所述第二脉冲信号与视频数字信号进行卷积计算，得到第二模拟信号，并基于所述第一模拟信号、第二模拟信号，输出视频模拟信号。
在一种可能实现的方式中，所述判断输出单元，包括：
信号提取单元，用于确定所述第一模拟信号的第二模拟信号之间的信号差，并从所述第一模拟信号中选取所述信号差大于预设信号差的信号段；
信号修正单元，用于获取在所述信号段时间内，所述第一模拟信号的第二模拟信号的平均信号，将所述第一模拟信号中信号段用所述平均信号代替，得到视频模拟信号。
在一种可能实现的方式中，所述同步模块，包括：
时间获取单元，用于基于所述音频模拟信号获取音频数据流，基于所述视频模拟信号获取视频数据流，并确定所述音频数据流的第一时间戳，视频数据流的第二时间戳；
差异确定单元，用于基于所述第一时间戳、第二时间戳，确定所述音频数据流和视频数据流之间的播放差异误差，并基于所述播放差异误差与预设误差之间的差值；
初步调节单元，用于若所述差值小于预设差值范围，在所述视频数据流中插入第一正向时间调节因子或在所述音频数据流中插入第一负向时间调节因子，对所述视频数据流或音频数据流的播放速度进行初步调节；
若所述差值在所述预设差值范围内，在所述音频数据流中插入第二负向时间调节因子，对视频数据流的播放速度进行初步调节；
若所述差值大于所述预设差值范围，在所述音频数据流中插入第三负向时间调节因子且在所述视频数据流中插入第二正向时间调节因子，对所述视频数据流和音频数据流的播放速度进行初步调节；
播放控制单元，用于将调节后的音频数据流和视频数据流进行音频和视频播放，并基于预设播放要求，对当前播放的音频和视频帧进行比较，当监测到音频超于视频帧时，获取超前值，若所述超前值小于预设值，立即对当前视频帧进行刷新，播放下一视频帧，否则，立即跳过当前视频帧，播放下一视频帧；当监测到视频帧超于音频时，不对当前视频帧进行刷新。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1为本发明实施例中一种数字视频和音频输入转换成模拟格式的播放系统的结构图；
图2为本发明实施例中数模转换模块的结构图；
图3为本发明实施例中同步模块的结构图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
实施例1
基于实施例1的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，如图1所示，包括：
数据缓冲模块，用于缓冲待播放的音频数据和视频数据；
格式转换模块，用于对所述音频数据和视频数据进行格式转换，得到目标音频数据和目标视频数据；
数模转换模块，用于对所述目标音频数据进行数模转换得到音频模拟信号，对所述目标视频数据进行数模转换，得到视频模拟信号；
同步模块，用于对所述音频模拟信号和视频模拟信号进行同步，并输出至对应的终端。
在该实施例中，所述目标音频数据和目标视频数据为播放系统所需要的目标格式，有有利于数模的转换过程。
上述设计方案的有益效果是：通过对音频数据和视频数据进行格式转换模块，为数模转换提供好的数据基础，通过数模转换模块，保证得到音频模拟信号和视频模拟信号的质量，通过同步模块，保证音频视频播放的同步性，从而保证所述播放系统音频和视频播放质量。
实施例2
基于实施例1的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，所述数据缓冲模块包括：
缓冲接收单元，用于将所述接收到音频数据和视频数据填满缓冲空间；
数据量监测单元，用于监测所述缓冲空间的数据量，当监测到所述数据量小于预设数据量值时，获取新的音频数据和视频数据到所述缓冲空间。
在该实施例中，当格式转换模块、数模转换模块从所述数据缓冲模块接收到音频数据和视频数据并播放完成后，将对应的音频数据和视频数据从缓冲空间进行清除，给新的音频数据和视频数据提供缓冲空间。
上述设计方案的有益效果是：通过对播放完的音频数据和视频数据从缓冲空间中进行自动清除，为新的音频数据和视频数据提供缓冲空间，可以减小所述播放系统的负荷，有利于音频和视频播放品质。
实施例3
基于实施例2的基础上，本发明提供一种数字视频和音频输入转换成模拟格式的播放系统，所述数据缓冲模块，还包括：
时间获取单元，用于获取所述音频数据的第一播放时间，以及所述视频数据的第二播放时间；
缓冲确定单元，用于基于所述第一播放时间、第二播放时间，将所述音频数据和视频数据进行匹配打包，得到缓冲数据，并对所述缓冲数据进行排序，确定缓冲序列。
在该实施例中，将所述音频数据和视频数据进行匹配打包具体为根据所述第一播放时间、第二播放时间将音频数据和视频数据时间一致的数据进行匹配打包，作为缓冲数据，缓冲时将对时间一致音频数据和视频数据一起缓冲。
上述设计方案的有益效果是：通过根据音频数据和视频数据的播放时间，确定缓冲的数据内容，保证缓冲到的音频数据和视频数据在时间上的一致性，为音频和视频的同步播放提供基础。
实施例4
基于实施例1的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，所述格式转换模块包括：
格式确定单元，用于确定所述数模转换模块的输入数据格式，所述输入数据格式包括目标音频格式和目标视频格式；
格式转换单元，用于查询所述音频数据和视频数据的当前数据格式与目标音频格式和目标视频格式之间的转换协议，基于所述转换协议，将所述音频数据和视频数据进行格式转换，得到目标音频数据和目标视频数据。
在该实施例中，所述输入数据格式为适用与所述数模转换模块的数据格式，可以提高数模转换的效率和质量。
上述设计方案的有益效果是：通过对音频数据和视频数据进行格式转换，使得音频数据和视频数据的格式适用于所述数模转换模块，提高数模转换的效率和质量，保证得到模拟信号的准确性。
实施例5
基于实施例1的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，如图2所示，所述数模转换模块包括：
数据预处理单元，用于根据数模转换的规则，预测数模转换过程的输出误差，并基于所述输出误差对所述目标音频数据和目标视频数据进行预处理，得到音频数字信号和视频数字信号；
音频转换单元，用于基于音频数模转换规则，对所述音频数字信号进行转换，得到音频模拟信号；
视频转换单元，用于基于视频数模转换规则，对所述视频数字信号进行转换，得到视频数字信号。
上述设计方案的有益效果是：通过在数模转换之前，对目标音频数据和目标视频数据进行预处理，减少信号本身存在的噪声干扰，并根据不同的转换规则对音频和视频分别进行转换，提高数模转换的转换精度，保证得到音频模拟信号和视频模拟信号的质量，从而保证得到模拟格式的音频和视频的质量。
实施例6
基于实施例5的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，所述数据预处理单元包括：
模型建立单元，用于基于所述数模转换规则，确定数模转换的参数配置，并基于所述参数配置，建立数模转换模型，并确定所述数模转换模型的预设转换精度；
测试单元，用于将预设输入信号输入所述数模转换模型中，得到预测输出信号，将所述预测输出信号和预设输出信号进行差异比较，确定斜率变化比，并基于所述斜率变化比确定所述数模转换模型的实际转换精度；
误差判断单元，用于根据所述实际转换精度与预设转换精度之间的差值作为输出误差，判断所述输出误差是否在预设范围内；
若是，将所述目标音频数据和目标视频数据分别作为音频数字信号和视频数字信号；
否则，基于所述输出误差，确定第一幅度调节值，并基于所述斜率变化比，从所述预测输出信号提取大于所述斜率变化比对应的差异输出信号，获取所述差异输出信号对应的第一数字信号，从所述预设输入信号中获取与所述差异输出信号对应的第二数字信号，基于所述第一数字信号与第二数字信号之间的差异，确定第二幅度调节值；
预处理单元，用于基于所述第一幅度调节值对所述目标音频数据和目标视频数据的所有采样点的数值进行第一幅度调整，得到第一音频信号和第一视频信号，对所述第二数字信号进行特征提取，获取数字信号特征，从所述第一音频信号和第一视频信号提取与所述数字信号特征对应的部分采样点，并根据所述第二幅度调节值，对所述部分采样点进行第二幅度调整，得到第二音频信号和第二视频信号；
所述第二音频信号和第二视频信号即为音频数字信号和视频数字信号。
在该实施例中，所述预设输入信号根据所述目标音频数据和目标视频数据的特征决定。
在该实施例中，所述预设输入信号为数字信号，所述预测输出信号和预设输出信号为模拟信号。
在该实施例中，所述配置参数包括端口功能参数、噪声模拟参数等完成数模转换所需的配置。
在该实施例中，所述预测输出信号和预设输出信号的差异越大，斜率变化比越大。
在该实施例中，所述输出误差越大，表明所述预设输入信号的噪声干扰越大，所以确定第一幅度调节值应该越大，提高整体的数模转换精度。
在该实施例中，所述每个采样点对应数字信号的一个数字。
在该实施例中，所述部分采样点对应的数字信号在数模转换规则下的转换精度相比于其他数字信号较低，因此需要对其进行第二幅度调整，提高局部的数模转换精度。
上述设计方案的有益效果是：通过根据数模转换规则，利用预设输入信号对数模转换过程进行模拟，根据结果来对目标音频数据和目标视频数据进行预处理，消除了在数模转换过程中的噪声干扰，提高了得到的音频数字信号和视频数字信号的信噪比，提高数模转换的精度，减少模拟信号失真变形从而提高播放系统的画质和声音质量。
实施例7
基于实施例5的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，所述音频转换单元包括：
电压确定单元，用于基于所述音频数模转换规则确定电压上限值，根据所述电压上限值对对音频数字信号进行滤波处理，得到不高于所述电压上限值的音频数字信号；
第一转换单元，用于对滤波后的音频数字信号进行数模转换，得到音频模拟信号。
在该实施例中，所述音频数模转换规则包括对音频数字信号的电压值的限制，确保由音频数字信号转换得到的音频的音质，需要对音频数字信号的电压值进行限制，防止因音频数字信号电压过高，造成得到音频的信噪比不满足要求。
上述设计方案的有益效果是：通过根据音频数模转换规则，对音频数字信号的电压值进行限制，防止因音频数字信号电压过高，造成得到音频的信噪比不满足要求，保证由音频数字信号转换得到的音频的音质。
实施例8
基于实施例5的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，所述视频转换单元，包括：
第二转换单元，用于基于所述视频数模转换规则，确定第一脉冲信号，并将所述第一脉冲信号与视频数字信号进行卷积计算，得到第一模拟信号，并确定在卷积计算过程中产生的噪声信号；
信噪比确定单元，用于对所述第一模拟信号和噪声信号进行采样分析，确定所述在第二转换单元下的信噪比；
所述信噪比的计算公式如下：
其中，Amax表示所述第一模拟信号中的幅值最大值，n表示对第一模拟信号或噪声信号的采样次数，Ai表示所述第一模拟信号中第i个采样点对应的幅值，Bmax表示所述噪声信号中的幅值最大值，Bi表示所述噪声信号中第i个采样点对应的幅值；
判断输出单元，用于判断所述信噪比是否大于预设信噪比；
若是，将所述第一模拟信号作为视频模拟信号输出；
否则，基于所述信噪比，确定校正因子，并利用所述校正因子，确定第二脉冲信号，将所述第二脉冲信号与视频数字信号进行卷积计算，得到第二模拟信号，并基于所述第一模拟信号、第二模拟信号，输出视频模拟信号；
所述校正因子的计算公式如下：
其中，SNR0表示所述预设信噪比，VA表示所述第一模拟信号在第二转换单元的输出电压，VB表示所述噪声信号在第二转换单元的输出电压，
表示所述第二转换单元的预设输出电压。
在该实施例中，所述第一脉冲信号由视频数模转换规则、第二转换单元的转换电路构造、转换精度和分辨率的设定决定。
在该实施例中，所述第二转换单元下的信噪比可以由第一模拟信号和噪声信号的幅值比确定。
在该实施例中，对于公式
例如可以是
SNR＝200dB。
在该实施例中，对于公式
例如可以是SNR0＝120dB，SNR＝100dB，VA＝4v，VB＝3v，
则γ＝0.25。
在该实施例中，并利用所述校正因子，确定第二脉冲信号为在所述第一脉冲信号的基础上，利用所述校正因子确定校正方法，对所述第一脉冲信号进行校正，得到第二脉冲信号。
在该实施例中，在计算校正因子时，根据信噪比与预设信噪比的差异，以及在所述第二转换单元下的输出电压与预设电压之间的关系，确定所述第二转换单元下的转换特征，利用转换特征来确定校正因子，使在得到的第二脉冲信号下进行数模转换的效果更好。
上述设计方案的有益效果是：通过视频转换单元，对视频数字信号进行模数转换，并在转换过程中根据信噪比来确定是否进行第二次转换，在第一转换不符合要求的情况下，进行再次转换，保证转换得到的视频模拟信号的质量。
实施例9
基于实施例8的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，所述判断输出单元，包括：
信号提取单元，用于确定所述第一模拟信号的第二模拟信号之间的信号差，并从所述第一模拟信号中选取所述信号差大于预设信号差的信号段；
信号修正单元，用于获取在所述信号段时间内，所述第一模拟信号的第二模拟信号的平均信号，将所述第一模拟信号中信号段用所述平均信号代替，得到视频模拟信号。
在该实施例中，所述第一模拟信号的信号段为信号存在噪声干扰较大的信号段。
在该实施例中，将所述第一模拟信号中信号段用所述平均信号代替可以对所述第一模拟信号中的噪声干扰进行消除。
上述设计方案的有益效果是：通过根据校正因子得到的第二模拟信号，对第一模拟信号进行修正，减少信号中的噪声干扰，保证得到视频模拟信号的质量。
实施例10
基于实施例1的基础上，本发明实施例提供一种数字视频和音频输入转换成模拟格式的播放系统，如图3所示，所述同步模块，包括：
时间获取单元，用于基于所述音频模拟信号获取音频数据流，基于所述视频模拟信号获取视频数据流，并确定所述音频数据流的第一时间戳，视频数据流的第二时间戳；
差异确定单元，用于基于所述第一时间戳、第二时间戳，确定所述音频数据流和视频数据流之间的播放差异误差，并基于所述播放差异误差与预设误差之间的差值；
初步调节单元，用于若所述差值小于预设差值范围，在所述视频数据流中插入第一正向时间调节因子或在所述音频数据流中插入第一负向时间调节因子，对所述视频数据流或音频数据流的播放速度进行初步调节；
若所述差值在所述预设差值范围内，在所述音频数据流中插入第二负向时间调节因子，对视频数据流的播放速度进行初步调节；
若所述差值大于所述预设差值范围，在所述音频数据流中插入第三负向时间调节因子且在所述视频数据流中插入第二正向时间调节因子，对所述视频数据流和音频数据流的播放速度进行初步调节；
播放控制单元，用于将调节后的音频数据流和视频数据流进行音频和视频播放，并基于预设播放要求，对当前播放的音频和视频帧进行比较，当监测到音频超于视频帧时，获取超前值，若所述超前值小于预设值，立即对当前视频帧进行刷新，播放下一视频帧，否则，立即跳过当前视频帧，播放下一视频帧；当监测到视频帧超于音频时，不对当前视频帧进行刷新。
在该实施例中，通常音频数据的解码和缓冲的速度都大于视频数据，因此会造成音频视频的播放存在时间差，因此需要对音频和视频进行同步。
在该实施例中，正向时间调节因子为加快播放速度，负向时间调节因子为减慢播放速度。
在该实施例中，所述第一正向时间调节因子，根据差值确定，差值越小，第一正向时间调节因子越小。
在该实施例中，若所述差值小于预设差值范围，表明视频数据流和音频数据流的播放速度差异很小，调节音频数据流和视频数据流中的任一个都不会对音频视频的播放产生较大的影响，因此可对音频数据流和视频数据流中的任一进行调节，减慢音频播放速度或加快视频播放速度，达到初步同步；若所述差值在所述预设差值范围内，表明视频数据流和音频数据流的播放速度差异较小，为保证视频播放的稳定性，可利用第二负向调节因子对音频数据流进行调节，减慢音频播放速度，达到初步同步；若所述差值大于所述预设差值范围，表明视频数据流和音频数据流的播放速度差异较大，为保证音频视频播放的稳定性，需要对音频数据流和视频数据流同时进行调节，在减慢音频播放速度的同时加快视频播放速度，达到初步同步，避免了只对任意一项进行调节时，对音频或视频的播放产生卡顿和噪声的影响。
在该实施例中，刷新当前视频帧比跳过当前视频帧的切换慢。
在该实施例中，用于人的听觉大于视觉的灵敏程度，因此在对音频数据流和视频数据流进行音频和视频播放时，利用音频播放的结果来对视频播放进行监测和调节，提高用户对播放系统的使用体验。
上述设计方案的有益效果是：通过根据时间戳，对音频和视频在播放前进行初步调节，达到初步同步的效果，并在播放的过程中，利用音频播放的信息，来对视频播放的视频帧进行控制调节，保证音频和视频播放的同步性，同时又保证音频和视频的播放质量，并结合人体对视觉听觉的灵敏度，来对视频帧进行控制调节，给用户带来对播放系统的良好的使用体验。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，包括：
数据缓冲模块，用于缓冲待播放的音频数据和视频数据；
格式转换模块，用于对所述音频数据和视频数据进行格式转换，得到目标音频数据和目标视频数据；
数模转换模块，用于对所述目标音频数据进行数模转换得到音频模拟信号，对所述目标视频数据进行数模转换，得到视频模拟信号；
同步模块，用于对所述音频模拟信号和视频模拟信号进行同步，并输出至对应的终端。
2.根据权利要求1所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述数据缓冲模块，包括：
缓冲接收单元，用于将所述接收到音频数据和视频数据填满缓冲空间；
数据量监测单元，用于监测所述缓冲空间的数据量，当监测到所述数据量小于预设数据量值时，获取新的音频数据和视频数据到所述缓冲空间。
3.根据权利要求2所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述数据缓冲模块，还包括：
时间获取单元，用于获取所述音频数据的第一播放时间，以及所述视频数据的第二播放时间；
缓冲确定单元，用于基于所述第一播放时间、第二播放时间，将所述音频数据和视频数据进行匹配打包，得到缓冲数据，并对所述缓冲数据进行排序，确定缓冲序列。
4.根据权利要求1所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述格式转换模块包括：
格式确定单元，用于确定所述数模转换模块的输入数据格式，所述输入数据格式包括目标音频格式和目标视频格式；
格式转换单元，用于查询所述音频数据和视频数据的当前数据格式与目标音频格式和目标视频格式之间的转换协议，基于所述转换协议，将所述音频数据和视频数据进行格式转换，得到目标音频数据和目标视频数据。
5.根据权利要求1所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述数模转换模块包括：
数据预处理单元，用于根据数模转换的规则，预测数模转换过程的输出误差，并基于所述输出误差对所述目标音频数据和目标视频数据进行预处理，得到音频数字信号和视频数字信号；
音频转换单元，用于基于音频数模转换规则，对所述音频数字信号进行转换，得到音频模拟信号；
视频转换单元，用于基于视频数模转换规则，对所述视频数字信号进行转换，得到视频数字信号。
6.根据权利要求5所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述数据预处理单元包括：
模型建立单元，用于基于所述数模转换规则，确定数模转换的参数配置，并基于所述参数配置，建立数模转换模型，并确定所述数模转换模型的预设转换精度；
测试单元，用于将预设输入信号输入所述数模转换模型中，得到预测输出信号，将所述预测输出信号和预设输出信号进行差异比较，确定斜率变化比，并基于所述斜率变化比确定所述数模转换模型的实际转换精度；
误差判断单元，用于根据所述实际转换精度与预设转换精度之间的差值作为输出误差，判断所述输出误差是否在预设范围内；
若是，将所述目标音频数据和目标视频数据分别作为音频数字信号和视频数字信号；
否则，基于所述输出误差，确定第一幅度调节值，并基于所述斜率变化比，从所述预测输出信号提取大于所述斜率变化比对应的差异输出信号，获取所述差异输出信号对应的第一数字信号，从所述预设输入信号中获取与所述差异输出信号对应的第二数字信号，基于所述第一数字信号与第二数字信号之间的差异，确定第二幅度调节值；
预处理单元，用于基于所述第一幅度调节值对所述目标音频数据和目标视频数据的所有采样点的数值进行第一幅度调整，得到第一音频信号和第一视频信号，对所述第二数字信号进行特征提取，获取数字信号特征，从所述第一音频信号和第一视频信号提取与所述数字信号特征对应的部分采样点，并根据所述第二幅度调节值，对所述部分采样点进行第二幅度调整，得到第二音频信号和第二视频信号；
所述第二音频信号和第二视频信号即为音频数字信号和视频数字信号。
7.根据权利要求5所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述音频转换单元包括：
电压确定单元，用于基于所述音频数模转换规则确定电压上限值，根据所述电压上限值对对音频数字信号进行滤波处理，得到不高于所述电压上限值的音频数字信号；
第一转换单元，用于对滤波后的音频数字信号进行数模转换，得到音频模拟信号。
8.根据权利要求5所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述视频转换单元，包括：
第二转换单元，用于基于所述视频数模转换规则，确定第一脉冲信号，并将所述第一脉冲信号与视频数字信号进行卷积计算，得到第一模拟信号，并确定在卷积计算过程中产生的噪声信号；
信噪比确定单元，用于对所述第一模拟信号和噪声信号进行采样分析，确定所述在第二转换单元下的信噪比；
判断输出单元，用于判断所述信噪比是否大于预设信噪比；
若是，将所述第一模拟信号作为视频模拟信号输出；
否则，基于所述信噪比，确定校正因子，并利用所述校正因子，确定第二脉冲信号，将所述第二脉冲信号与视频数字信号进行卷积计算，得到第二模拟信号，并基于所述第一模拟信号、第二模拟信号，输出视频模拟信号。
9.根据权利要求8所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述判断输出单元，包括：
信号提取单元，用于确定所述第一模拟信号的第二模拟信号之间的信号差，并从所述第一模拟信号中选取所述信号差大于预设信号差的信号段；
信号修正单元，用于获取在所述信号段时间内，所述第一模拟信号的第二模拟信号的平均信号，将所述第一模拟信号中信号段用所述平均信号代替，得到视频模拟信号。
10.根据权利要求1所述的一种数字视频和音频输入转换成模拟格式的播放系统，其特征在于，所述同步模块，包括：
时间获取单元，用于基于所述音频模拟信号获取音频数据流，基于所述视频模拟信号获取视频数据流，并确定所述音频数据流的第一时间戳，视频数据流的第二时间戳；
差异确定单元，用于基于所述第一时间戳、第二时间戳，确定所述音频数据流和视频数据流之间的播放差异误差，并基于所述播放差异误差与预设误差之间的差值；
初步调节单元，用于若所述差值小于预设差值范围，在所述视频数据流中插入第一正向时间调节因子或在所述音频数据流中插入第一负向时间调节因子，对所述视频数据流或音频数据流的播放速度进行初步调节；
若所述差值在所述预设差值范围内，在所述音频数据流中插入第二负向时间调节因子，对视频数据流的播放速度进行初步调节；
若所述差值大于所述预设差值范围，在所述音频数据流中插入第三负向时间调节因子且在所述视频数据流中插入第二正向时间调节因子，对所述视频数据流和音频数据流的播放速度进行初步调节；
播放控制单元，用于将调节后的音频数据流和视频数据流进行音频和视频播放，并基于预设播放要求，对当前播放的音频和视频帧进行比较，当监测到音频超于视频帧时，获取超前值，若所述超前值小于预设值，立即对当前视频帧进行刷新，播放下一视频帧，否则，立即跳过当前视频帧，播放下一视频帧；当监测到视频帧超于音频时，不对当前视频帧进行刷新。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111522409.6A CN114189728B (zh) | 2021-12-13 | 2021-12-13 | 一种数字视频和音频输入转换成模拟格式的播放系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111522409.6A CN114189728B (zh) | 2021-12-13 | 2021-12-13 | 一种数字视频和音频输入转换成模拟格式的播放系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114189728A true CN114189728A (zh) | 2022-03-15 |
| CN114189728B CN114189728B (zh) | 2022-08-09 |
Family
ID=80604850
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111522409.6A Active CN114189728B (zh) | 2021-12-13 | 2021-12-13 | 一种数字视频和音频输入转换成模拟格式的播放系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114189728B (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101656089A (zh) * | 2009-09-11 | 2010-02-24 | 中国农业大学 | 数字音视频播放装置和方法 |
| CN102811383A (zh) * | 2012-07-06 | 2012-12-05 | 深圳市同洲电子股份有限公司 | 一种基于机顶盒的视频文件播放方法及装置 |
| CN203181090U (zh) * | 2013-01-22 | 2013-09-04 | 深圳市显盈电子科技有限公司 | 高清晰度多媒体信号转换装置 |
| CN106375820A (zh) * | 2016-08-30 | 2017-02-01 | 京东方科技集团股份有限公司 | 对音频和视频信号进行同步的方法和装置 |
| CN107124641A (zh) * | 2017-06-02 | 2017-09-01 | 广东暨通信息发展有限公司 | 一种音视频同步播放的控制方法 |
| WO2021042655A1 (zh) * | 2019-09-04 | 2021-03-11 | 海信视像科技股份有限公司 | 一种音画同步处理方法及显示设备 |
-
2021
- 2021-12-13 CN CN202111522409.6A patent/CN114189728B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101656089A (zh) * | 2009-09-11 | 2010-02-24 | 中国农业大学 | 数字音视频播放装置和方法 |
| CN102811383A (zh) * | 2012-07-06 | 2012-12-05 | 深圳市同洲电子股份有限公司 | 一种基于机顶盒的视频文件播放方法及装置 |
| CN203181090U (zh) * | 2013-01-22 | 2013-09-04 | 深圳市显盈电子科技有限公司 | 高清晰度多媒体信号转换装置 |
| CN106375820A (zh) * | 2016-08-30 | 2017-02-01 | 京东方科技集团股份有限公司 | 对音频和视频信号进行同步的方法和装置 |
| CN107124641A (zh) * | 2017-06-02 | 2017-09-01 | 广东暨通信息发展有限公司 | 一种音视频同步播放的控制方法 |
| WO2021042655A1 (zh) * | 2019-09-04 | 2021-03-11 | 海信视像科技股份有限公司 | 一种音画同步处理方法及显示设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114189728B (zh) | 2022-08-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| AU599799B2 (en) | High efficiency coding apparatus | |
| US7228059B2 (en) | Audio reproducing apparatus and audio reproduction control method for use in the same | |
| US8086587B2 (en) | Information processing apparatus, method, and program | |
| JP4230027B2 (ja) | アナログ画像信号の信号処理方法 | |
| CN110177298B (zh) | 一种基于语音的视频倍速播放方法及系统 | |
| CN100438590C (zh) | 视频设备和视频处理方法 | |
| CN111460094B (zh) | 一种基于tts的音频拼接优化的方法及其装置 | |
| EP1513353A3 (en) | Video stream processing apparatus and video stream processing method | |
| CN114189728B (zh) | 一种数字视频和音频输入转换成模拟格式的播放系统 | |
| CN115379229A (zh) | 内容自适应视频编码方法及装置 | |
| US6026181A (en) | Image processing apparatus | |
| US7463308B2 (en) | Data slicer circuit | |
| CN114915840A (zh) | 适用于嵌入式设备的音视频处理方法、装置、设备及介质 | |
| US5621851A (en) | Method of expanding differential PCM data of speech signals | |
| CN113055711B (zh) | 一种音视频同步检测方法及其检测系统 | |
| CN113316001A (zh) | 视频对齐方法及装置 | |
| CN103069790B (zh) | 图像捕获设备、图像及声音校正方法 | |
| EP0009829A1 (en) | Scan rate converter utilizing discrete differentially coded signals | |
| JP3492585B2 (ja) | 映像判別回路及び自動画質調整装置 | |
| US12081757B2 (en) | Information processing device, imaging device, information processing method, and program | |
| CN113781586B (zh) | 对图像中人体皮肤区域进行肤色调整的方法及系统 | |
| CN114822580B (zh) | 基于重采样加速计算的修正音频的音高及音色的方法及装置 | |
| EP3996032A1 (en) | Image processing with reduced latency and improved local processing | |
| US20240212099A1 (en) | Correction method for image color range conversion and image-processing system | |
| CN117812281A (zh) | 基于人工智能技术的视频生成及处理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |