CN114422840A - 音轨切换的方法及装置 - Google Patents

音轨切换的方法及装置 Download PDF

Info

Publication number
CN114422840A
CN114422840A CN202210001060.XA CN202210001060A CN114422840A CN 114422840 A CN114422840 A CN 114422840A CN 202210001060 A CN202210001060 A CN 202210001060A CN 114422840 A CN114422840 A CN 114422840A
Authority
CN
China
Prior art keywords
data
audio
track
audio data
timestamp
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210001060.XA
Other languages
English (en)
Inventor
王云刚
李斌
朱宗花
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202210001060.XA priority Critical patent/CN114422840A/zh
Publication of CN114422840A publication Critical patent/CN114422840A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4392—Processing of audio elementary streams involving audio buffer management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Abstract

本申请公开了一种音轨切换的方法及装置，用以解决音频切换时静音方式影响用户体验的问题。本申请中提供的方法包括：接收音轨切换指令，所述音轨切换指令指示将当前播放的音频数据由第一音轨的数据切换为第二音轨的数据；获取解码缓存区包括的第一音轨的数据的第一最大时间戳，所述解码缓存区包括已解码且未渲染的音频数据；根据所述第一最大时间戳，对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码后保存到所述解码缓冲区。

Description

音轨切换的方法及装置
技术领域
本申请涉及音频处理技术领域，尤其涉及一种音轨切换的方法及装置。
背景技术
音轨切换时，当切换前后音频数据的编码格式不同时，会涉及到编码器切换，即旧解码器的释放和新解码器的创建，需要耗费一定的时间。解码器将音频数据进行解码并发送至解码缓冲区，渲染模块从解码缓冲区获取音频数据并进行渲染输出。目前在音轨切换时，在切换的开始就将缓存在解码缓冲区中的前一个音轨已经完成解码的数据全部丢弃。由于新的音轨的数据需要耗时完成解码器创建和解码，且新的数据下发到渲染模块需要一定的时间。目前该时间内直接设置静音，等新的数据到达渲染模块后再解除静音。但是，这种静音的方式在一定程度上会影响用户的体验感。
发明内容
本申请提出了一种音轨切换的方法及装置，用以解决音频切换时静音方式影响用户体验的问题。
第一方面，本申请实施例提供了一种音轨切换的方法，包括：
接收音轨切换指令，所述音轨切换指令指示将当前播放的音频数据由第一音轨的数据切换为第二音轨的数据；获取解码缓存区包括的第一音轨的数据的第一最大时间戳，所述解码缓存区包括已解码且未渲染的音频数据；根据所述第一最大时间戳，对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码后保存到所述解码缓冲区。
基于上述方案，在接收到音频切换指令将当前播放的音频数据从第一音轨的数据切换至第二音轨的数据时，不再丢掉第一音轨中已完成解码的音频数据，而是将已解码的音频数据保存在解码缓冲区中，通过获取已解码的第一音轨的数据的第一最大时间戳，对第二音轨的数据中大于第一最大时间戳的音频数据进行解码并保存至解码缓冲区中，以达到数据上的连续输出，避免了突然静音造成的用户体验感较差的问题。
一种可能的实现方式中，所述方法还包括：接收视频流；在接收到音轨切换指令的情况下，在渲染所述解码缓存区中最小时间戳的音频数据时，同步渲染所述视频流包括的所述最小时间戳的音频数据对应的视频数据。
基于上述方案，在切换播放的音轨时，不再设置静音模式，而是连续的输出音频数据。因此，在切换播放的音轨数据时，视频流不需要进行暂停或者追帧使视频流与音频数据同步，改善了用户的观感提体验。
一种可能的实现方式中，在确定第一解码器不支持解码所述第二音轨的数据时，创建第二解码器；所述第一解码器支持解码所述第一音轨的数据；对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码，包括：通过所述解码器对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码。
基于上述方案，通过释放旧的解码器并创建新的解码器，以便于对切换后的第二音轨的数据进行解码。
一种可能的实现方式中，在完成切换后，获取已渲染的音频数据的第二最大时间戳；根据所述第二最大时间戳对所述第一音轨的数据与所述已渲染的音频数据进行同步。
一种可能的实现方式中，在完成切换后，丢弃所述第一音轨的数据中时间戳小于所述第一最大时间戳的音频数据。
基于上述方案，丢弃所述第一音轨的数据中时间戳小于所述第一最大时间戳的音频数据，以便于与第二音轨已渲染的音频数据进行同步。
第二方面，本申请实施例提供了一种显示设备，包括通信接口、处理器、音频输出接口和显示屏；
所述通信接口，用于接收音轨切换指令，所述音轨切换指令指示将当前播放的音频数据由第一音轨的数据切换为第二音轨的数据；
所述处理器，用于获取解码缓存区包括的第一音轨的数据的第一最大时间戳，所述解码缓存区包括已解码且未渲染的音频数据。所述处理器，还用于根据所述第一最大时间戳，对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码后保存到所述解码缓冲区，并对解码缓冲区的音频数据进行渲染处理。
所述音频输出接口，用于输出经过渲染处理后的音频数据。
所述显示屏，用于显示与所述音频数据对应的视频数据。
一些实施例中，显示设备还包括扬声器，扬声器用于播放音频输出接口输出的音频数据。
一些实施例中，所述通信接口，还用于接收视频流；
所述处理器，在接收到音轨切换指令的情况下，还用于在渲染所述解码缓存区中最小时间戳的音频数据时，同步渲染所述视频流包括的所述最小时间戳的音频数据对应的视频数据。
一些实施例中，所述处理器，还用于：在确定第一解码器不支持解码所述第二音轨的数据时，创建第二解码器；所述第一解码器支持解码所述第一音轨的数据；
所述处理器，在对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码时，具体用于：对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码。
一些实施例中，所述处理器，还用于：在完成切换后，获取已渲染的音频数据的第二最大时间戳；根据所述第二最大时间戳对所述第一音轨的数据与所述已渲染的音频数据进行同步。
第三方面，本申请实施例提供了一种音轨切换的装置，包括存储器与处理器；
存储器，用于存储程序指令；
处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行第一方面以及第一方面不同实现方式所述的方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行第一方面以及第一方面不同实现方式所述的方法。
另外，第二方面至第四方面中任一种实现方式所带来的技术效果可参见第一方面以及第一方面不同实现方式所带来的技术效果，此处不再赘述。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种显示设备的使用场景的示意图；
图2为本申请实施例提供的控制装置的配置框图；
图3为本申请实施例提供的一种显示设备的硬件结构示意图；
图4为本申请实施例提供的一种显示设备的系统的示意图；
图5为本申请实施例提供的一种媒体播放器的逻辑结构示意图；
图6为本申请实施例提供的一种音轨切换的方法的流程图；
图7为本申请实施例提供的一种音轨切换的示意图；
图8为本申请实施例提供的一种音轨切换的示意图；
图9为本申请实施例提供的一种音轨切换的场景示例图；
图10为本申请实施例提供的一种显示装置示意图；
图11为本申请实施例提供的一种音轨切换的装置示意图。
具体实施方式
下面将结合本申请实施例中附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。
因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
需要说明的是，术语“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
音轨队列中的音频数据从解码器输出时，需要经过解码器解码并发送至解码缓冲区，渲染模块从解码缓冲区读取音频数据并进行渲染处理并输出。解码缓冲区可以缓存已经解码完成且未进行渲染的音频数据。因此，在某一时刻解码器正在解码的音频数据的时间戳和渲染模块所渲染的音频数据的时间戳并不相同。某一时刻解码器解码的音频数据的时间戳会晚于渲染模块所渲染的音频数据的时间戳。在音轨切换过程中，若当前播放的音频数据与待切换的音频数据的编码格式不同时，且当前编码器无法对待切换的音频数据进行解码时，需要切换解码器，即释放当前解码器和创建新的解码器。在释放当前解码器和创建新的解码器时，需要消耗一定的时间。在现有的技术方案中，在进行音轨切换时，将正在播放的音轨中已经完成解码的音频数据全部丢弃，即将解码缓冲区中的音频数据全部丢弃。但是待切换的新音轨中的音频数据下发到渲染模块需要一定的时间。因此一般会在切换的最开始直接设置静音，直到渲染模块能够从解码缓冲区读取到待切换的音轨中的音频数据时解除静音。然而，这种突然静音的方式会影响用户体验。
针对上述问题，本申请实施例提供了一种音轨切换的数据处理方法及装置，当音轨切换时，不再将解码缓冲区的音频数据全部丢弃，而是将当前播放的音轨中已完成解码的音频数据发送至解码缓冲区，并根据当前播放的音轨队列中已完成解码的音频数据的时间戳(T)对待切换的音轨队列的音频数据进行同步，并输出待切换的音轨队列中时间戳(T)之后的音频数据。切换过程中，不需要设置静音，并且切换前后的音频数据是连续的。
下面，为了便于理解本申请的方案，将以不同场景下的多个实施例对本申请的方案进行说明。本申请提出的方案可以应用于终端设备中，本申请涉及的终端设备具备音轨切换功能，比如可以是收音机、MP4、音箱、电脑、电视、智能手机或者平板电脑等。一些实施例中，本申请实施例涉及的终端设备还可以具有显示功能，示例性地，终端设备可以是音视频播放设备(或者称为显示设备)，比如电视。
图1为根据实施例中显示设备的使用场景的示意图。如图1所示，显示设备200还与服务器400进行数据通信，用户可通过智能设备300或控制装置100与显示设备200建立蓝牙连接或者红外连接以操作显示设备200。
在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备200的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式中的至少一种，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等至少一种输入用户指令，来控制显示设备200。如：用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令，来实现控制显示设备200的功能。
在一些实施例中，智能设备300可以包括移动终端、平板电脑、计算机、笔记本电脑，增强现实(Augmented Reality，AR)或者虚拟现实(Virtual Reality，VR)设备等中的任意一种。在一些实施例中，也可以使用智能设备300以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。
在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，还可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制装置来接收用户的语音指令控制。一些场景中，显示设备200上配置触屏面板，触屏面板上设置有多个虚拟键，用户可以通过触屏面板上的多个虚拟键输入相应控制指令，来实现控制显示设备200的功能。
在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。服务器400可以为显示设备200提供音频数据流和视频流。
图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括处理器110、存储器120、通信接口130、用户输入/输出接口140、供电电源150。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起到用户与显示设备200之间交互中介作用。在一些实施例中，通信接口130用于和外部通信，包含无线保真(Wireless Fidelity，Wi-Fi)芯片，蓝牙组件，近场通信(NearField Communication，NFC)或可替代模块中的至少一种。蓝牙组件包括用于发送及接收蓝牙信号的天线，还可以包括用于接收处理器110发送的指令的控制器，蓝牙组件可以用于在处理器110的控制下向外发送蓝牙信号或者接收外来的蓝牙信号。例如，处理器110可以通过蓝牙组件与显示设备200建立蓝牙连接，从而实现控制显示设备200。在一些实施例中，用户输入/输出接口140包含麦克风，触摸板，传感器，按键或可替代模块中的至少一种。
图3示例性的展示了显示设备200的硬件结构示意图。在一些实施例中，显示设备200包括：射频(radio frequency，RF)电路210、存储器220、显示单元230、摄像头240、传感器250、音频电路260、扬声器261、麦克风262、无线保真(Wireless Fidelity，Wi-Fi)模块270、处理器280、蓝牙组件281、以及电源290等部件。
RF电路210可用于在收发信息或通话过程中信号的接收和发送，可以接收基站的下行数据后交给处理器280处理；可以将上行数据发送给基站。存储器220可用于存储软件程序及数据、使得显示设备200能运行的操作系统以及执行本申请实施例方法的代码。处理器280通过运行存储在存储器220的软件程序或数据，从而执行显示设备200的各种功能以及数据处理。
显示单元230可用于接收输入的数字或字符信息，产生与显示设备200的用户设置以及功能控制有关的信号输入，具体地，显示单元230可以包括设置在显示设备200正面的触摸屏231，可收集用户在其上或附近的触摸操作，例如点击按钮，拖动滚动框等。显示单元230还可用于显示由用户输入的信息或提供给用户的信息以及显示设备200的各种菜单的图形用户界面(graphical user interface，GUI)。具体地，显示单元230可以包括设置在显示设备200正面的显示屏232。其中，显示屏232可以采用液晶显示器、发光二极管等形式来配置。显示单元230可以用于显示本申请中的各种图形用户界面。
摄像头240可用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件把光信号转换成电信号，之后将电信号传递给处理器280转换成数字图像信号。显示设备200还可以包括至少一种传感器250，比如加速度传感器251、距离传感器252、指纹传感器253、温度传感器254。
音频电路260、扬声器261、麦克风262可提供用户与显示设备200之间的音频接口。音频电路260可将接收到的音频数据转换后的电信号，传输到扬声器261，由扬声器261转换为声音信号输出。显示设备200还可配置音量按钮，用于调节声音信号的音量。另一方面，麦克风262将收集的声音信号转换为电信号，由音频电路260接收后转换为音频数据，再将音频数据输出至RF电路210以发送给比如另一显示设备，或者将音频数据输出至存储器220以便进一步处理。本申请中麦克风262可以获取用户的语音。
显示设备200还包括Wi-Fi模块270，Wi-Fi模块270为用户提供了无线的宽带互联网访问。处理器280是显示设备200的控制中心，利用各种接口和线路连接整个显示设备的各个部分，通过运行或执行存储在存储器220内的软件程序，以及调用存储在存储器220内的数据，执行显示设备200的各种功能和处理数据。在一些实施例中，处理器280可包括一个或多个处理单元。本申请中处理器280可以运行操作系统、应用程序、用户界面显示及触控响应，以及本申请实施例的处理方法。另外，处理器280与显示单元230耦接。
蓝牙组件281，用于通过蓝牙协议来与其他具有蓝牙组件的蓝牙设备进行信息交互。显示设备200还包括给各个部件供电的电源290(比如电池)。电源可以通过电源管理系统与处理器280逻辑相连，从而通过电源管理系统实现管理充电、放电以及功耗等功能。
在一些实施例中，从软件层面来看，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程，参见图4。
需要说明的是，不同显示设备的硬件配置可能会有不同，因此上述图1-图4仅作为一种示例性的描述。
在一些实施例中，终端设备为了实现音频或者视频播放功能，终端设备中部署有媒体播放器(Media Player)500，媒体播放器500从逻辑功能角度划分可以包括播控模块310、音轨选择器320、解码器330、解码缓冲区340和渲染模块350，如图5所示。其中，媒体播放器500的功能可以由前面所述的一个或者多个处理器来实现。媒体播放器500本身具有解复用(demux)功能，可以将音视频文件中的音频数据流分离出来，并将多个音频数据保存到音轨队列中。播控模块310用于通过控制装置100接收用户发送的切换音轨的信号，根据接收的切换音轨的信号对音轨队列进行切换处理。音轨选择器320用于接收播控模块310发送的切换音轨队列的指令，根据指令切换到与用户设置的音轨对应的音轨队列，将该音轨队列与解码器330关联，并将该音轨队列中的音频数据发送到解码器330中。解码器330对接收到的音频数据进行解码，并将解码后的音频数据发送至解码缓冲区340。渲染模块350可以从解码缓冲区340中获取音频数据，将获取到的音频数据进行渲染处理并输出。
一些实施例中，当媒体播放器播放的数据既包括音频数据也包括视频数据时，在确定播放音轨队列后，可以将媒体播放器的播放时钟与播放音轨队列进行关联，即在播放视频数据时以播放音轨队列的播放进度为基准，使得播放的音频数据与视频数据同步。
需要说明的是，图5所展示的媒体播放器的逻辑结构仅作为一种示例，本申请实施例对此不做限定。
下面结合实施例对本申请提供方案进行详细说明。为了便于描述，后续不再对终端设备的各个组件的标识进行示例。
本申请实施例提供了一种音轨切换的方法，图6示例性地示出了音轨切换方法的流程，该方法可由终端设备执行，或者由终端设备中媒体播放器，或者由媒体播放器中播控模块来实现。以方法由终端设备中的媒体播放器实现为例进行说明。
601，媒体播放器接收音轨切换指令，音轨切换指令指示音轨切换。本申请实施例中，以当前的播放音轨为第一音轨，切换后的音轨为第二音轨为例。即音轨切换指令用于指示将当前播放的音频数据由第一音轨的数据切换为第二音轨的数据。
一些实施例中，媒体播放器的解复用功能可以将音视频文件中的音频数据流分离出来，然后将多个音频数据进行保存。作为一种举例，媒体播放器分离出的音频数据可以通过三个音轨输出。三个音轨的数据分别对应不同播放语言类型的音频数据，如音轨1的数据为播放语言类型为英语的音频数据流，音轨2、3的数据分别为播放语言类型为汉语、法语的音频数据流，如图7所示。当接收到音轨切换指令时，音轨切换指令指示将当前播放的语言类型从英语切换到汉语，媒体播放器控制当前播放的音频数据由音轨1的数据切换为音轨2的数据。示例性地，媒体播放器中的播放模块接收到音轨切换指令后，可以控制音轨选择器将已选择的音轨1的数据切换为音轨2的数据。
一些场景中，媒体播放器接收到媒体数据时，媒体数据可以包括多条音轨的音频数据，每条音轨对应一条音频数据流，一条音频数据流可以包括多段音频数据。不同音轨的数据可以是不同语言类型的音频数据流，如汉语、英语或法语等；或者不同音轨的数据也可以是不同音质的音频数据流，如杜比音效、AAC、立体声等。用户可以通过媒体播放器切换音轨，以满足不同的需求。
一些场景中，播放的音频数据可以是录播的音频数据，也可以是直播音频数据，在此并不作限定。
602，媒体播放器获取解码缓存区包括的第一音轨的数据的最大时间戳。解码缓存区包括已解码且未渲染的音频数据。为了便于与后续描述的最大时间戳区分，此处将解码缓冲区包括的第一音轨的数据的最大时间戳称为第一最大时间戳。
一些场景中，音频数据中还包括时间戳信息，该时间戳信息在媒体播放器的解复用阶段从音频数据流中解析生成。示例性地，输出的音轨的数据可以是多段音频数据，可以根据音轨的音频数据信息的时间基计算每段音频数据各自的时间戳。
一些实施例中，解码器在接收到第一音轨的音频数据后，对第一音轨的音频数据进行解码，在完成解码后，将解码后的音频数据发送至解码缓冲区。解码器可以在解码过程中获取解码的音频数据的时间戳。播控模块可以从解码器中获取已完成解码的音频数据的时间戳。当接收到音轨切换指令时，播控模块可以从解码器中获取解码缓冲区中第一音轨已解码的数据的第一最大时间戳。例如，音轨1的数据经过解码器解码后发送至解码缓冲区，解码缓冲区可以缓存音轨1的已解码的多段音频数据。当接收到音轨切换指令时，解码器正好刚完成音轨1的数据中T1时间戳之前的音频数据的解码并已经发送至解码缓冲区中。播控模块可以获取解码缓冲区包括的音轨1已完成解码的音频数据的第一最大时间戳T1，参见图7。
603，媒体播放器根据第一最大时间戳，对第二音轨的数据中时间戳大于第一最大时间戳的音频数据进行解码后保存到解码缓冲区。
一些实施例中，媒体播放器会实时对不活跃的音轨的数据与渲染模块正在渲染的音频数据进行同步。不活跃的音轨是指当前未解码音频数据的音轨。比如媒体播放器接收到三个音轨的数据，分别为音轨1-3。当前正在播放音轨1的音频数据，则除音轨1以外的其它音轨(音轨2和音轨3)均为不活跃的音轨。可以理解的是，媒体播放器对不活跃的音轨的数据与渲染模块正在渲染的音频数据进行同步时，可以是根据渲染模块所渲染的音频数据的时间戳对接收到的不活跃的音轨的数据进行同步。比如渲染模块所渲染的音频数据的时间戳为T1，则媒体播放器会丢弃不活跃的音轨的数据中小于或者等于T1时间戳的音频数据。基于此，上述第二音轨的音频数据的最小时间戳小于第一最大时间戳，当当前播放的音频数据切换至第二音轨的数据时，需要将第二音轨的数据中时间戳小于或者等于第一最大时间戳的音频数据丢弃，将第二音轨的数据中时间戳大于第一最大时间戳的音频数据进行解码后保存到解码缓冲区。例如，当前播放的音频数据从音轨1的数据切换至音轨2的数据时，音轨1已完成解码的音频数据的最大时间戳为T1，此时，音轨2的数据中最小时间戳为T2，T2<T1。因此，在将当前播放的音频数据切换至音轨2的数据时，丢弃音轨2的T2-T1时间段的音频数据，输出音轨2的数据中时间戳大于T1的音频数据，并对其解码后保存到解码缓冲区。
一些实施例中，当当前播放的音频数据需要从第一音轨的数据切换至第二音轨的数据时，播控模块向音轨选择器发送切换指令，切换指令指示音轨选择器不再将第一音轨的数据发送给解码器，将第二音轨的数据发送给解码器。当音轨选择器将第二音轨的数据中大于第一时间戳的音频数据发送到解码器中后，且当前解码器支持对第二音轨的数据进行解码时，解码器对接收到的第二音轨的数据进行解码并保存至解码缓冲区。
另一些实施例中，播控模块可以在获取到第一最大时间戳后，在切换指令中携带该第一最大时间戳，从而音轨选择器根据第一最大时间戳来切换音轨。比如将第二音轨中早于第一最大时间戳的音频数据丢弃，以及第一音轨中早于或者等于第一最大时间戳的音频数据发送给解码器。
一些实施例中，当媒体数据既包括音频数据又包括视频数据时，媒体播放器接收视频流，在接收到音轨切换指令的情况下，在渲染解码缓存区中最小时间戳的音频数据时，同步渲染视频流包括的最小时间戳的音频数据对应的视频数据。例如，当前播放的音频数据为音轨1的数据，音轨1已解码的音频数据的时间戳为T1，正在渲染的音频数据的时间戳为T2。媒体播放器以渲染模块输出的音频数据的时间戳为参考时钟，则也针对时间戳为T2的视频数据进行渲染。当接收到音轨切换指令时，播放的音轨数据从音轨1的数据切换至音轨2的数据，此时，渲染模块从解码缓冲区中读取解码缓冲区保存的音轨1的数据中已解码的最小时间戳T5的音频数据，并对其进行渲染。与此同时，视频流的渲染模块同步渲染时间戳为T5的视频数据。
基于上述方案，当音轨切换时，不再将已解码的当前播放的音轨的数据丢弃，即不再将解码缓冲区中已解码的音频数据丢弃，而是将切换后的音轨中时间戳大于已解码的音频数据的时间戳的音频数据发送至解码器进行解码，并缓存值解码缓冲区，以达到数据上的连续输出。此外，在切换播放音轨时，视频数据不需要暂停或者追帧，改善了用户的观感体验。
一些实施例中，不同的音轨的数据可以是完全相同的，也可以是完全不同的。例如，不同音轨的音频数据的编码格式不同，如编码格式可以为MP3、AAC、WMA、AC-3、APE、FLAC等等；或者不同音轨的数据封装格式不同，如：FLV、MP4、MP3等等；或者音频数据采样率、采样位数、通道数等，传输协议file，http(Hypertext Transfer Protocol，超文本传送协议)，rtmp等等。因此，在对音轨的音频数据进行解码时，需要考虑解码器对于输入的音频数据是否能够解码。一些实施例中，当前播放的音频数据为第一音轨的数据，解码器对第一音轨的数据进行解码。当当前播放的音频数据切换为第二音轨的数据时，若当前解码器能够对第二音轨的音频数据进行解码，则直接对接收到的第二音轨的音频数据进行解码并保存至解码缓冲区。另一些实施例中，在确定当前解码器不能对第二音轨的音频数据进行解码时，释放当前解码器，并创建新的解码器，使创建的新的解码器能够对第二音轨的音频数据进行解码。为了便于区分，将释放掉的解码器称为第一解码器，将创建的新的解码器称为第二解码器。其中，释放当前解码器，并创建新的解码器可以理解为创建第二解码器，并断开第一解码器与解码缓冲区、音轨选择器之间的关联关系，将第二解码器与解码缓冲区、音轨选择器进行关联。音轨选择器将第二音频的音频数据发送给第二解码器，从而第二解码器对第二音轨的数据中时间戳大于第一最大时间戳的音频数据进行解码，并保存至解码缓冲区中。
一些实施例中，在完成切换后，获取已渲染的音频数据的第二最大时间戳，并根据第二最大时间戳对第一音轨的数据与已渲染的音频数据进行同步，使得已丢弃的第一音轨的数据的最大时间戳与已渲染的音频数据的时间戳相同。例如，在当前播放的音频数据从音轨1的数据切换至音轨2的数据后，播放的音频数据为音轨2的数据。之后，当获取到的音轨2已渲染的音频数据的最大时间戳T3时，音轨1与音轨3的数据的最小时间戳为T4，参见图8。当T4<T3时，丢弃音轨1与音轨3的数据中时间戳小于T3的音频数据，使已丢弃的音轨1、音轨3的数据的最大时间戳与音轨2已渲染的音频数据的时间戳相同。
一些实施例中，播放的音频数据可以是多个音轨中的任一个音轨的音频数据。一些场景中，当媒体播放器开始播放音频数据时，可以将任一个音轨设置为默认的播放音轨并输出该音轨的数据，也可以将音轨中的第一个音轨设置为默认的播放音轨，并输出该音轨的数据，本申请对此不做限定。
在一些实施例中，显示设备用于播放视频流以及与视频流对应的音频数据，当前播放的音频数据为立体声音频数据所在的音轨数据。音频数据通过显示设备中的音频输出接口输出，音频数据可以通过显示设备中的扬声器进行播放，视频流通过显示设备上的显示屏进行输出。用户可以通过控制装置对播放的音频数据进行切换，例如，用户可以通过遥控器将当前播放的音频数据由立体声切换至杜比音效，参见图9。当用户通过点击遥控器上的按钮将立体声切换至杜比音效时，媒体播放器接收到音轨切换指令，将当前播放的音轨由立体声音频数据所在的音轨切换至杜比音效音频数据所在的音轨。媒体播放器获取解码缓存区包括的立体声音频数据的最大时间戳，并根据最大时间戳将杜比音效的音频数据中时间戳大于该最大时间戳的音频数据进行解码后保存到解码缓冲区。当立体声音频数据与杜比音效的音频数据的编码格式、采样率以及采样位数不同时，对立体声音频数据进行解码的解码器不能对杜比音效的音频数据进行解码时，释放当前解码器，并创建新的解码器，使创建后的新的解码器能够对杜比音效的音频数据进行解码。新的解码器接收到杜比音效的音频数据中时间戳大于该最大时间戳的音频数据进行解码并保存到解码缓冲区。渲染模块从解码缓冲区读取已解码的音频数据，并对其进行渲染处理。渲染后的音频数据可以通过音频输出接口发送至扬声器，并通过扬声器播放。通过本申请实施例提供的方案实现在进行音轨切换时，音频数据的播放在时间上是连续的，因此显示屏播放的视频流不需要暂停或者追帧，可以减少视频处理的复杂度，且提升用户体验。
基于相同的技术构思，参见图10所示，本申请实施例提供了一种显示装置900，该装置900能够执行上述方法中的各个步骤，为了避免重复，此处不再详述。控制装置900包括，包括通信接口901、处理器902。
通信接口901，用于接收音轨切换指令，所述音轨切换指令指示将当前播放的音频数据由第一音轨的数据切换为第二音轨的数据。
处理器902，用于获取解码缓存区包括的第一音轨的数据的第一最大时间戳，所述解码缓存区包括已解码且未渲染的音频数据。处理器902，还用于根据所述第一最大时间戳，对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码后保存到所述解码缓冲区，并对解码缓冲区中的音频数据进行渲染处理。
一些实施例中，该装置900还包括音频输出接口903和显示屏904，所述音频输出接口903用于输出经过渲染处理的音频数据，所述显示屏904用于显示与音频数据对应的视频数据。
一些实施例中，该装置900还可以包括扬声器(图9中未示出)。扬声器可以用于播放音频输出接口903输出的音频数据。另一些实施例中，扬声器可以部署于装置900之外，装置900通过音频数据输出接口903与扬声器电连接。
一些实施例中，通信接口901，还用于接收视频流。处理器902，在接收到音轨切换指令的情况下，还用于在渲染所述解码缓存区中最小时间戳的音频数据时，同步渲染所述视频流包括的所述最小时间戳的音频数据对应的视频数据。
一些实施例中，所述处理器902，还用于：在确定第一解码器不支持解码所述第二音轨的数据时，创建第二解码器；所述第一解码器支持解码所述第一音轨的数据。所述处理器902，在对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码时，具体用于：通过所述解码器对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码。
一些实施例中，所述处理器902，还用于：在完成切换后，获取已渲染的音频数据的第二最大时间戳；根据所述第二最大时间戳对所述第一音轨的数据与所述已渲染的音频数据进行同步。
基于相同的技术构思，如图11所示，本申请实施例提供了一种音轨切换的装置1000，控制装置1000包括：存储器1001和处理器1002。
存储器1001，用于存储程序指令；
处理器1002，用于调用存储器中存储的程序指令，按照获得的程序执行上述音轨切换的方法。
在本申请实施例中，处理器可以是通用处理器、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件，可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
存储器作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块。存储器可以包括至少一种类型的存储介质，例如可以包括闪存、硬盘、多媒体卡、卡型存储器、随机访问存储器(Random Access Memory，RAM)、静态随机访问存储器(Static Random Access Memory，SRAM)、可编程只读存储器(Programmable Read Only Memory，PROM)、只读存储器(Read Only Memory，ROM)、带电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory，EEPROM)、磁性存储器、磁盘、光盘等等。存储器是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。本申请实施例中的存储器还可以是电路或者其它任意能够实现存储功能的装置，用于存储程序指令和/或数据。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种音轨切换的方法，其特征在于，包括：
接收音轨切换指令，所述音轨切换指令指示将当前播放的音频数据由第一音轨的数据切换为第二音轨的数据；
获取解码缓存区包括的第一音轨的数据的第一最大时间戳，所述解码缓存区包括已解码且未渲染的音频数据；
根据所述第一最大时间戳，对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码后保存到所述解码缓冲区。
2.如权利要求1所述的方法，其特征在于，所述方法还包括：
接收视频流；
在接收到音轨切换指令的情况下，在渲染所述解码缓存区中最小时间戳的音频数据时，同步渲染所述视频流包括的所述最小时间戳的音频数据对应的视频数据。
3.如权利要求1或2所述的方法，其特征在于，所述方法还包括：
在确定第一解码器不支持解码所述第二音轨的数据时，创建第二解码器；所述第一解码器支持解码所述第一音轨的数据；
对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码，包括：
通过所述解码器对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码。
4.如权利要求1或2所述的方法，其特征在于，所述方法还包括：
在完成切换后，获取已渲染的音频数据的第二最大时间戳；
根据所述第二最大时间戳对所述第一音轨的数据与所述已渲染的音频数据进行同步。
5.如权利要求1或2所述的方法，其特征在于，所述方法还包括：
丢弃所述第一音轨的数据中时间戳小于所述第一最大时间戳的音频数据。
6.一种显示设备，其特征在于，包括通信接口、处理器、音频输出接口和显示屏；
所述通信接口，用于接收音轨切换指令，所述音轨切换指令指示将当前播放的音频数据由第一音轨的数据切换为第二音轨的数据；
所述处理器，用于获取解码缓存区包括的第一音轨的数据的第一最大时间戳，所述解码缓存区包括已解码且未渲染的音频数据；根据所述第一最大时间戳，对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码后保存到所述解码缓冲区，并对解码缓冲区的音频数据进行渲染处理；
所述音频输出接口，用于输出经过渲染处理后的音频数据；
所述显示屏，用于显示与所述音频数据对应的视频数据。
7.如权利要求6所述的显示设备，其特征在于，所述通信接口，还用于接收视频流；
所述处理器，在接收到音轨切换指令的情况下，还用于在渲染所述解码缓存区中最小时间戳的音频数据时，同步渲染所述视频流包括的所述最小时间戳的音频数据对应的视频数据。
8.如权利要求6或7所述的显示设备，其特征在于，所述处理器，还用于：
在确定第一解码器不支持解码所述第二音轨的数据时，创建第二解码器；所述第一解码器支持解码所述第一音轨的数据；
对所述第二音轨的数据中时间戳大于所述第一最大时间戳的音频数据进行解码。
9.如权利要求6或7所述的显示设备，其特征在于，所述处理器，还用于：
在完成切换后，获取已渲染的音频数据的第二最大时间戳；
根据所述第二最大时间戳对所述第一音轨的数据与所述已渲染的音频数据进行同步。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，当所述计算机指令在计算机上运行时，使得计算机执行权利要求1～5中任一项所述的方法。
CN202210001060.XA 2022-01-04 2022-01-04 音轨切换的方法及装置 Pending CN114422840A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210001060.XA CN114422840A (zh) 2022-01-04 2022-01-04 音轨切换的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210001060.XA CN114422840A (zh) 2022-01-04 2022-01-04 音轨切换的方法及装置

Publications (1)

Publication Number Publication Date
CN114422840A true CN114422840A (zh) 2022-04-29

Family

ID=81271014

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210001060.XA Pending CN114422840A (zh) 2022-01-04 2022-01-04 音轨切换的方法及装置

Country Status (1)

Country Link
CN (1) CN114422840A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101771869A (zh) * 2008-12-30 2010-07-07 深圳市万兴软件有限公司 一种音视频编解码装置及方法
CN103780943A (zh) * 2014-01-24 2014-05-07 华为技术有限公司 一种音轨切换的方法、设备及系统
CN113596545A (zh) * 2021-07-21 2021-11-02 中央广播电视总台 音轨切换方法、装置、媒体播放设备和计算机存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101771869A (zh) * 2008-12-30 2010-07-07 深圳市万兴软件有限公司 一种音视频编解码装置及方法
CN103780943A (zh) * 2014-01-24 2014-05-07 华为技术有限公司 一种音轨切换的方法、设备及系统
CN113596545A (zh) * 2021-07-21 2021-11-02 中央广播电视总台 音轨切换方法、装置、媒体播放设备和计算机存储介质

Similar Documents

Publication Publication Date Title
US9924205B2 (en) Video remote-commentary synchronization method and system, and terminal device
KR101712537B1 (ko) 원격 장치 상에서의 적응성 미디어 콘텐츠 스크러빙
CN1981524B (zh) 信息处理设备和方法
CN111757171A (zh) 一种显示设备及音频播放方法
CN106385621A (zh) 智能设备控制方法和装置
KR20130095519A (ko) 스크린 미러링 방법 및 그 장치
CN110996134A (zh) 视频播放方法、装置及存储介质
KR20090003809A (ko) 복수개의 망을 이용한 방송 정보 재생 방법 및 장치
CN105338393A (zh) 媒体同步方法和装置
CN103096128A (zh) 一种实现视频互动的方法、服务器、终端及系统
CN112272170A (zh) 语音通信方法及装置、电子设备、存储介质
CN101232611A (zh) 图像处理设备及其方法
CN112165645A (zh) 播放设备的控制方法、播放设备及计算机存储介质
KR101624904B1 (ko) 휴대용 단말기에서 디엔엘에이를 이용하여 멀티 사운드 채널 컨텐츠를 재생하기 위한 장치 및 방법
CN114666516A (zh) 显示设备及流媒体文件合成方法
CN114827679A (zh) 显示设备和音画同步方法
CN104053057A (zh) 一种硬件升级的方法、设备及系统
KR20130044618A (ko) 미디어 카드, 미디어 장치, 컨텐츠 서버 및 그 동작방법
CN114697742A (zh) 一种视频录制方法及电子设备
CN107710754A (zh) 音视频数据同步方法和装置
CN114422840A (zh) 音轨切换的方法及装置
CN115550705A (zh) 一种音频播放方法及装置
CN112055238B (zh) 视频播放的控制方法、设备及系统
CN111355996A (zh) 一种音频播放方法及计算设备
CN114339388A (zh) 一种音频输出模式的控制方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination