CN109525881A - 音画同步方法、装置及设备 - Google Patents
音画同步方法、装置及设备 Download PDFInfo
- Publication number
- CN109525881A CN109525881A CN201811440560.3A CN201811440560A CN109525881A CN 109525881 A CN109525881 A CN 109525881A CN 201811440560 A CN201811440560 A CN 201811440560A CN 109525881 A CN109525881 A CN 109525881A
- Authority
- CN
- China
- Prior art keywords
- audio output
- audio
- output apparatus
- terminal device
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000001360 synchronised effect Effects 0.000 title claims abstract description 42
- 230000003111 delayed effect Effects 0.000 claims abstract description 60
- 241001269238 Data Species 0.000 claims abstract description 24
- 230000006870 function Effects 0.000 claims description 31
- 238000004590 computer program Methods 0.000 claims description 6
- 238000004891 communication Methods 0.000 description 11
- 238000012545 processing Methods 0.000 description 10
- 230000005236 sound signal Effects 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 230000000712 assembly Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000012092 media component Substances 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43632—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
- H04N21/43635—HDMI
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4852—End-user interface for client configuration for modifying audio parameters, e.g. switching between mono and stereo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Computer Interaction (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明实施例提供一种音画同步方法、装置及设备。该方法包括：分别获取多个音频输出设备输出音频数据的延迟时间，所述音频输出设备包括外接音频输出设备和内置音频输出设备；根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，所述同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延；控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制所述终端设备按照所述内置音频输出设备对应的同步时延输出图像数据。本发明实施例的方法，简化了音画同步的操作，提高了音画同步的精度。
Description
技术领域
本发明实施例涉及多媒体技术领域，尤其涉及一种音画同步方法、装置及设备。
背景技术
随着电子技术的不断发展，终端设备可以使用的音频输出设备越来越多，例如，电视可以通过HDMI连接功放设备，通过同轴电缆连接功放设备，通过蓝牙连接音箱，甚至还可以通过通用串行总线(Universal Serial Bus，USB)连接音箱。
由于不同的连接方式会产生不同的传输时延，且不同的音频输出设备解码所需的时间也存在差异，因此，各个音频输出设备的延迟时间不同。当终端设备同时使用多个音频输出设备时，会产生音画不同步的问题。例如：当电视中的内置扬声器与电视上连接的音箱均开启使用时，由于音箱会对音频数据进行解码、音效处理等过程，可能造成音箱较扬声器延迟输出音频数据，导致两者播放的声音不同步；进一步的，由于电视中的显示屏输出图像数据与内置扬声器输出音频数据通常设置为同步输出，进而导致电视显示屏播放的画面与音箱播放的声音不同步。
针对上述情况，目前的解决方案为用户通过菜单中的“音画同步”选项，手动调整以达到音画同步的效果。图1为现有技术中调整音画同步的界面示意图。如图1所示，该方案中需要用户根据音频输出设备的实际情况，手动调整各个音频输出设备的时延。在调整的过程中，用户可能需要经过多次尝试，操作繁杂，而且所能设置的时延为预设的离散值，音画同步控制精度差。
发明内容
本发明实施例提供一种音画同步方法、装置及设备，用以解决现有技术中实现音画同步操作繁杂，控制精度差的问题。
第一方面，本发明实施例提供一种用于终端设备连接多个音频输出设备时的音画同步方法，包括：
分别获取多个音频输出设备输出音频数据的延迟时间，音频输出设备包括外接音频输出设备和内置音频输出设备；
根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延；
控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制终端设备按照内置音频输出设备对应的同步时延输出图像数据。
在一种可能的实现方式中，分别获取多个音频输出设备输出音频数据的延迟时间，包括：
控制与终端设备连接的任一个音频输出设备处于开启状态以及其他音频输出设备处于关闭状态；
记录通过音频输出设备开始播放预置音频文件的第一时刻；
记录通过麦克风采集得到的声音数据与预置音频文件播放的声音数据一致的第二时刻；
将第一时刻与第二时刻之差确定为音频输出设备输出音频数据的延迟时间。
在一种可能的实现方式中，预置音频文件为单音频文件。
在一种可能的实现方式中，根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，包括：
将所获取的多个音频输出设备的延迟时间中最长的确定为最大延迟时间；
针对任一个音频输出设备，将音频输出设备的延迟时间与最大延迟时间之差确定为音频输出设备输出音频数据的同步时延。
在一种可能的实现方式中，在分别获取多个音频输出设备输出音频数据的延迟时间之前，方法还包括：开启终端设备的音画同步功能。
在一种可能的实现方式中，开启终端设备的音画同步功能，包括通过以下方式中任一种：
在终端设备连接的音频输出设备的数量增加时，开启终端设备的音画同步功能；或，
在终端设备使用的音频输出设备发生变化时，开启终端设备的音画同步功能；或，
根据用户指令开启终端设备的音画同步功能；或，
在终端设备开机时，开启终端设备的音画同步功能。
第二方面，本发明实施例提供一种用于终端设备连接多个音频输出设备时的音画同步装置，包括：
获取模块，用于分别获取多个音频输出设备输出音频数据的延迟时间，音频输出设备包括外接音频输出设备和内置音频输出设备；
确定模块，用于根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延；
控制模块，用于控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制终端设备按照内置音频输出设备对应的同步时延输出图像数据。
在一种可能的实现方式中，获取模块具体用于：
控制与终端设备连接的一个音频输出设备处于开启状态以及其他音频输出设备处于关闭状态；
记录通过音频输出设备开始播放预置音频文件的第一时刻；
记录通过麦克风采集得到的声音数据与播放的预置音频文件一致的第二时刻；
将第一时刻与第二时刻之差确定为音频输出设备输出音频数据的延迟时间。
在一种可能的实现方式中，确定模块具体用于：
将所获取的多个音频输出设备的延迟时间中最长的确定为最大延迟时间；
针对任一个音频输出设备，将所述音频输出设备的延迟时间与所述最大延迟时间之差确定为所述音频输出设备输出音频数据的同步时延。
第三方面，本发明实施例提供一种终端设备，包括：
存储器；
处理器；以及
计算机程序；
其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如第一方面任一项所述的音画同步方法。
本发明实施例提供的音画同步方法、装置及设备，通过获取终端设备使用的外接音频输出设备以及内置音频输出设备输出音频数据的延迟时间；根据所获取的多个延迟时间，确定多个音频输出设备输出音频数据的同步时延，该同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延；并根据多个音频输出设备的同步时延，控制终端设备使用的音频输出设备按照其对应的同步时延输出音频数据，控制终端设备按照内置音频输出设备对应的同步时延输出图像数据。这样，不仅使终端设备使用的多个音频输出设备实现同步播放声音，而且使终端设备实现快速准确的音画同步。在音画同步过程中，无需用户参与，简化了音画同步的操作；本实施例中各个音频输出设备的同步时延可以是连续取值的，提高了音画同步的精度。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1为现有技术中调整音画同步的界面示意图；
图2为本发明提供的音画同步方法的应用场景示意图；
图3为本发明提供的音画同步方法一实施例的流程图；
图4为本发明提供的音画同步装置一实施例的结构示意图；
图5为本发明提供的终端设备一实施例的结构示意图。
通过上述附图，已示出本发明明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本发明构思的范围，而是通过参考特定实施例为本领域技术人员说明本发明的概念。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
本发明的说明书和权利要求书中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明中的“第一”和“第二”只起标识作用，而不能理解为指示或暗示顺序关系、相对重要性或者隐含指明所指示的技术特征的数量。“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
本发明的说明书中通篇提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
图2为本发明提供的音画同步方法的应用场景示意图。如图2所示，终端设备20通过多种连接方式连接了多个外接音频输出设备：终端设备20通过蓝牙与外接音频输出设备202连接；终端设备20通过USB与外接音频输出设备203连接；终端设备20通过同轴电缆与外接音频输出设备204连接；终端设备20通过高清晰多媒体接口(High DefinitionMultimedia Interface，HDMI)与外接音频输出设备205连接。终端设备20包括内置音频输出设备201，内置音频输出设备例如可以为内置扬声器。本实施例中的终端设备包括但不限于：智能电视、智能手机、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。本实施例中的外接音频输出设备例如可以是音箱、功放等。本实施例中的多个外接音频输出设备可以是相同型号的设备，也可以是不同型号的设备，本实施例对此不作限制。
可以理解的是，不同的连接方式将会产生不同的传输时延，例如，蓝牙连接方式产生的传输时延将大于HDMI连接方式产生的传输时延。不同的音频输出设备对于音频信号解码所需的时间不同。因此，当终端设备同时使用多个音频输出设备时，将会产生音画不同步的现象。图2所示应用场景中，终端设备通过四种不同的连接方式连接了四个外接音频输出设备，仅作示例。在实际使用中，可以根据实际需要选择连接方式以及音频输出设备的数量，本申请对此不做限制。
需要说明的是，在本申请中终端设备的图像输出与终端设备的内置音频输出设备是同步的。
图3为本发明提供的音画同步方法一实施例的流程图。本实施例提供的方法可以应用于终端设备，包括但不限于：智能电视、智能手机、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。如图3所示，本实施例提供的用于终端设备连接多个音频输出设备时的音画同步方法可以包括：
S301、分别获取当前使用的多个音频输出设备输出音频数据的延迟时间，所述音频输出设备包括外接音频输出设备和内置音频输出设备。
本实施例中音频输出设备输出音频数据的延迟时间至少包括传输音频信号的传输延迟时间和解码音频信号的解码延迟时间。其中，延迟时间用于表示终端设备开始播放音频信号至音频输出设备输出所述音频信号之间的延迟。
由于终端设备的图像输出与终端设备的内置音频输出设备是同步的，因此本实施例中通过获取终端设备的内置音频输出设备的延迟时间，可以用于调整终端设备的图像输出。
本实施例中获取音频输出设备输出音频数据的的延迟时间，例如可以根据预设的音频输出设备的型号与延迟时间之间的对应关系，获取各音频输出设备的延迟时间。其中，预设的音频输出设备的型号与延迟时间之间的对应关系，例如可以预先通过测试确定。预设的音频输出设备的型号与延迟时间之间的对应关系可以预先存储于终端设备中。
S302、根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，所述同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延。
本实施例中的同步时延用于表示为实现音画同步，各音频输出设备输出音频数据时需要增加的时延。举例来说，若音频输出设备A的延迟时间为100毫秒，音频输出设备B的延迟时间为200毫秒，则可以根据如下方法确定同步时延：
音频输出设备A的同步时延为100毫秒，音频输出设备B的同步时延为0毫秒；或者，
音频输出设备A的同步时延为200毫秒，音频输出设备B的同步时延为100毫秒。其中，数值仅作示例，并不对本申请形成任何限制。
需要说明的是，本实施例中根据所获取的各个音频输出设备的延迟时间，确定出的各个音频输出设备输出音频数据的同步时延可以是连续取值的，能够更加准确的表示为实现音画同步需要增加的时延。相较于图1所示的现有技术所提供的离散取值的同步时延，本申请所提供的音画同步控制将更加精确。
表1为本实施例中的同步时延与图1所示现有技术中的同步时延的对比。其中，假设图1所示现有技术可以提供10个等级的同步时延，分别对应100毫秒、200毫秒、……、900毫秒和1000毫秒。如表1所示，在获取了五个音频输出设备的延迟时间之后，本实施例中根据所获取的五个音频输出设备的延迟时间，确定出的五个音频输出设备的同步时延是连续取值的，而图1所示现有技术中所能提供的同步时延只能是预设等级的离散值。其中，1号音频输出设备为内置音频输出设备，2-5号音频输出设备为终端设备同时使用的外接音频输出设备。表1中各时间数值的单位为毫秒。
表1
S303、控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制所述终端设备按照所述内置音频输出设备对应的同步时延输出图像数据。
本实施例中在确定了各个音频输出设备输出音频数据的同步时延之后，则根据各个音频输出设备的同步时延，对终端设备进行音画同步。
本实施例中控制各个音频输出设备按照各自对应的同步时延输出音频数据，以使各个音频输出设备同时输出音频。由于终端设备的图像输出与终端设备的内置音频输出设备是同步的，通过将终端设备的图像输出延迟内置音频输出设备所对应的同步时延，以使声音与图像同步。
以表1所示的终端设备同时使用2-5号四个外接音频输出设备为例，则需要将2号音频输出设备的音频输出延迟334毫秒，将3号音频输出设备的音频输出延迟211毫秒，将4号音频输出设备的音频输出延迟56毫秒，同时将终端设备的图像输出延迟465毫秒。则终端设备在开始播放之后，用户将会在500毫秒之后，在看到图像的同时收听到4个外接音频输出设备输出的声音，实现音画同步。
需要说明的是，终端设备连接的音频输出设备的数量大于等于终端设备使用的音频输出设备的数量，与终端设备连接的音频输出设备一定包括终端设备的内置音频输出设备。以图2所示应用场景为例，终端设备20连接的音频输出设备有5个，而终端设备20可以仅使用其中的2个进行音频输出，终端设备20还可以在所连接的5个音频输出设备中切换音频输出。
本实施例提供的音画同步方法，通过分别获取多个音频输出设备输出音频数据的延迟时间，根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，并控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制终端设备按照内置音频输出设备对应的同步时延输出图像数据，实现了快速准确的音画同步。在音画同步过程中，无需用户参与，简化了音画同步的操作；本实施例中各个音频输出设备的同步时延可以是连续取值的，提高了音画同步的精度。
在一些实施例中，分别获取多个音频输出设备输出音频数据的延迟时间的一种可能的实现方式可以是：控制与终端设备连接的一个音频输出设备处于开启状态以及其他音频输出设备处于关闭状态；记录通过所述音频输出设备开始播放预置音频文件的第一时刻；记录通过麦克风采集得到的声音数据与播放的所述预置音频文件的声音数据一致的第二时刻；将第一时刻与第二时刻之差确定为音频输出设备输出音频数据的延迟时间。
仍以图2所示应用场景为例，则可以通过如下步骤获取终端设备连接的5个音频输出设备的延迟时间：
打开内置音频输出设备201，关闭其他4个音频输出设备，保证同一时间仅有一个音频输出时设备处于工作状态。播放预置音频文件，并记录开始播放的时刻T0，同时开始通过麦克风进行录音，实时分析判断得到的录音是否与预置音频文件一致，当通过麦克风得到的录音与预置音频文件一致时，停止预置音频文件的播放并停止麦克风的录音，记录该时刻为T1，内置音频输出设备201的延迟时间等于(T1-T0)。按照同样的方法，依次获取外接音频输出设备202、外接音频输出设备203、外接音频输出设备204和外接音频输出设备205的延迟时间。
可选的，本实施例中的预置音频文件可以为单音频文件。单音频文件便于快速判断麦克风采集得到的声音数据与播放预置音频文件的声音数据一致性，可以缩短获取音频输出设备延迟时间的用时，提高音画同步的实现速度。
本实施例中的麦克风可以是终端设备的内置麦克风，也可以是外接麦克风。
在一些实施例中，根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延的一种实现方式可以是：将所获取的多个音频输出设备的延迟时间中最长的确定为最大延迟时间；针对一个音频输出设备，将音频输出设备的延迟时间与最大延迟时间之差确定为音频输出设备输出音频数据的同步时延。
可选的，在上述实施例的基础上，本实施例提供的方法在获取多个音频输出设备输出音频数据的延迟时间之前，还可以包括：开启终端设备的音画同步功能。当音画同步功能开启后，可以在终端设备的屏幕上显示提示信息，用于提示用户终端设备正在进行音画同步。提示信息例如可以是“音画同步中，请稍后”，还可以通过图标、图片、视频等方式进行提示。
其中，开启终端设备的音画同步功能，包括通过以下方式中的一种开启终端设备的音画同步功能：
在终端设备连接的音频输出设备的数量增加时，开启终端设备的音画同步功能。当终端设备检测到有新增加的音频输出设备时，开启音画同步功能。
在终端设备使用的音频输出设备发生变化时，开启终端设备的音画同步功能。当终端设备切换音频输出设备时，开启音画同步功能。
根据用户指令开启终端设备的音画同步功能。例如可以提供开启音画同步功能的菜单，用户可以通过遥控器或者触摸终端设备的屏幕的方式输入指令，则终端设备可以根据用户指令开启音画同步功能。
在终端设备开机时，开启终端设备的音画同步功能。
本发明实施例还提供一种用于终端设备连接多个音频输出设备时的音画同步装置，请参见图4所示，本发明实施例仅以图4为例进行说明，并不表示本发明仅限于此。图4为本发明提供的音画同步装置一实施例的结构示意图。如图4所示，本实施例提供的音画同步装置40可以包括：获取模块401、确定模块402和控制模块403。
获取模块401，用于分别获取多个音频输出设备输出音频数据的延迟时间，所述音频输出设备包括外接音频输出设备和内置音频输出设备。
确定模块402，用于根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，所述同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延。
控制模块403，用于控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制所述终端设备按照所述内置音频输出设备对应的同步时延输出图像数据。
本实施例的装置，可以用于执行图3所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
可选的，获取模块401具体可以用于：控制与终端设备连接的一个音频输出设备处于开启状态以及其他音频输出设备处于关闭状态；记录通过音频输出设备开始播放预置音频文件的第一时刻；记录通过麦克风采集得到的声音数据与播放的预置音频文件的声音数据一致的第二时刻；将第一时刻与第二时刻之差确定为音频输出设备输出音频数据的延迟时间。
可选的，预置音频文件可以为单音频文件。
可选的，确定模块402具体可以用于：将所获取的多个音频输出设备的延迟时间中最长的确定为最大延迟时间；针对一个音频输出设备，将音频输出设备的延迟时间与最大延迟时间之差确定为音频输出设备输出音频数据的同步时延。
可选的，音画同步装置40还可以包括启动模块(图中未示出)，用于在分别获取多个音频输出设备输出音频数据的延迟时间之前，开启终端设备的音画同步功能。
可选的，音画同步装置40具体可以通过以下方式中的一种开启终端设备的音画同步功能：
在终端设备连接的音频输出设备的数量增加时，开启终端设备的音画同步功能；
在终端设备使用的音频输出设备发生变化时，开启终端设备的音画同步功能；
根据用户指令开启终端设备的音画同步功能；
在终端设备开机时，开启终端设备的音画同步功能。
本发明实施例还提供一种终端设备，请参见图5所示，本发明实施例仅以图5为例进行说明，并不表示本发明仅限于此。图5为本发明提供的终端设备一实施例的结构示意图。该终端设备包括但不限于：智能电视、智能手机、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。如图5所示，本实施例提供的终端设备可以包括以下一个或多个组件：处理组件501，存储器502，电源组件504，多媒体组件506，音频组件503，输入/输出(I/O)接口508，传感器组件507，以及通信组件505。
处理组件501通常控制终端设备的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件501可以包括一个或多个处理器5011来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件501可以包括一个或多个模块，便于处理组件501和其他组件之间的交互。例如，处理组件501可以包括多媒体模块，以方便多媒体组件506和处理组件501之间的交互。
存储器502被配置为存储各种类型的数据以支持在终端设备的操作。这些数据的示例包括用于在终端设备上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器502可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。本实施例中，存储器502中存储有计算机程序，该计算机程序可以由处理器5011执行，以实现上述任一方法实施例提供的音画同步方法实施例的技术方案。
电源组件504为终端设备的各种组件提供电力。电源组件504可以包括电源管理系统，一个或多个电源，及其他与为终端设备生成、管理和分配电力相关联的组件。
多媒体组件506包括在所述终端设备和用户之间的提供一个输出接口的屏幕，用于显示终端设备的图像输出。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件506包括一个前置摄像头和/或后置摄像头。当终端设备处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件503被配置为输出和/或输入音频信号。例如，音频组件503包括一个麦克风(MIC)，当终端设备处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器502或经由通信组件505发送。本实施例中，可以通过麦克风采集用户对终端设备进行语音控制的语音信号，然后经由通信组件505发送至云端服务器。在一些实施例中，音频组件503还包括一个扬声器，用于输出音频信号。本实施例中，可以通过扬声器播放对用户的提示信息。
I/O接口508为处理组件501和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件507包括一个或多个传感器，用于为终端设备提供各个方面的状态评估。例如，传感器组件507可以检测到终端设备的打开/关闭状态，组件的相对定位，例如所述组件为终端设备的显示器和小键盘，传感器组件507还可以检测终端设备或终端设备一个组件的位置改变，用户与终端设备接触的存在或不存在，终端设备方位或加速/减速和终端设备的温度变化。传感器组件507可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件507还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件507还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件505被配置为便于终端设备和其他设备之间有线或无线方式的通信。本实施例中通信组件505用于实现终端设备和云端服务器之间的交互。终端设备可以接入基于通信标准的无线网络，如WiFi，2G、3G或4G，或它们的组合。在一个示例性实施例中，通信组件505经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件505还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，终端设备可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器502，上述指令可由终端设备的处理器5011执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本实施例提供的终端设备可用于执行上述任一方法实施例提供的音画同步方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时可以实现上述任一方法实施例提供的音画同步方法方法。本实施例中的计算机可读存储介质可以是计算机能够存取的任何可用介质，或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备，可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如SSD)等。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (10)
1.一种用于终端设备连接多个音频输出设备时的音画同步方法，其特征在于，包括：
分别获取多个音频输出设备输出音频数据的延迟时间，所述音频输出设备包括外接音频输出设备和内置音频输出设备；
根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，所述同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延；
控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制所述终端设备按照所述内置音频输出设备对应的同步时延输出图像数据。
2.根据权利要求1所述的方法，其特征在于，所述分别获取多个音频输出设备输出音频数据的延迟时间，包括：
控制与所述终端设备连接的任一个音频输出设备处于开启状态以及其他音频输出设备处于关闭状态；
记录通过所述音频输出设备开始播放预置音频文件的第一时刻；
记录通过麦克风采集得到的声音数据与所述预置音频文件播放的声音数据一致的第二时刻；
将所述第一时刻与所述第二时刻之差确定为所述音频输出设备输出音频数据的延迟时间。
3.根据权利要求2所述的方法，其特征在于，所述预置音频文件为单音频文件。
4.根据权利要求1所述的方法，其特征在于，所述根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，包括：
将所获取的多个音频输出设备的延迟时间中最长的确定为最大延迟时间；
针对任一个音频输出设备，将所述音频输出设备的延迟时间与所述最大延迟时间之差确定为所述音频输出设备输出音频数据的同步时延。
5.根据权利要求1-4任一项所述的方法，其特征在于，在所述分别获取多个音频输出设备输出音频数据的延迟时间之前，所述方法还包括：开启所述终端设备的音画同步功能。
6.根据权利要求5所述的方法，其特征在于，所述开启所述终端设备的音画同步功能，包括通过以下方式中任一种：
在所述终端设备连接的音频输出设备的数量增加时，开启所述终端设备的音画同步功能；或，
在所述终端设备使用的音频输出设备发生变化时，开启所述终端设备的音画同步功能；或，
根据用户指令开启所述终端设备的音画同步功能；或，
在所述终端设备开机时，开启所述终端设备的音画同步功能。
7.一种用于终端设备连接多个音频输出设备时的音画同步装置，其特征在于，包括：
获取模块，用于分别获取多个音频输出设备输出音频数据的延迟时间，所述音频输出设备包括外接音频输出设备和内置音频输出设备；
确定模块，用于根据获取的多个延迟时间，分别确定多个音频输出设备输出音频数据的同步时延，所述同步时延用于指示多个音频输出设备同步输出音频数据所需增加的时延；
控制模块，用于控制多个音频输出设备按照其对应的同步时延输出音频数据，以及控制所述终端设备按照所述内置音频输出设备对应的同步时延输出图像数据。
8.根据权利要求7所述的装置，其特征在于，所述获取模块具体用于：
控制与所述终端设备连接的任一个音频输出设备处于开启状态以及其他音频输出设备处于关闭状态；
记录通过所述音频输出设备开始播放预置音频文件的第一时刻；
记录通过麦克风采集得到的声音数据与所述预置音频文件播放的声音数据一致的第二时刻；
将所述第一时刻与所述第二时刻之差确定为所述音频输出设备输出音频数据的延迟时间。
9.根据权利要求7所述的装置，其特征在于，所述确定模块具体用于：
将所获取的多个音频输出设备的延迟时间中最长的确定为最大延迟时间；
针对任一个音频输出设备，将所述音频输出设备的延迟时间与所述最大延迟时间之差确定为所述音频输出设备输出音频数据的同步时延。
10.一种终端设备，其特征在于，包括：
存储器；
处理器；以及
计算机程序；
其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如权利要求1-6任一项所述的音画同步方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811440560.3A CN109525881A (zh) | 2018-11-29 | 2018-11-29 | 音画同步方法、装置及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811440560.3A CN109525881A (zh) | 2018-11-29 | 2018-11-29 | 音画同步方法、装置及设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109525881A true CN109525881A (zh) | 2019-03-26 |
Family
ID=65793544
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811440560.3A Pending CN109525881A (zh) | 2018-11-29 | 2018-11-29 | 音画同步方法、装置及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109525881A (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110708582A (zh) * | 2019-09-18 | 2020-01-17 | 深圳酷派技术有限公司 | 同步播放的方法、装置、电子设备及介质 |
| CN111124332A (zh) * | 2019-11-18 | 2020-05-08 | 北京小米移动软件有限公司 | 设备呈现内容的控制方法、控制装置及存储介质 |
| CN111355995A (zh) * | 2020-03-03 | 2020-06-30 | 北京字节跳动网络技术有限公司 | 蓝牙设备声音延迟时长的确定方法、装置及终端设备 |
| CN111988603A (zh) * | 2020-08-12 | 2020-11-24 | 深圳创维－Rgb电子有限公司 | 外部功放的调测方法、装置、电子设备及存储介质 |
| CN112017666A (zh) * | 2020-08-31 | 2020-12-01 | 广州市百果园信息技术有限公司 | 一种延迟控制方法和装置 |
| CN112860211A (zh) * | 2021-01-28 | 2021-05-28 | 成都极米科技股份有限公司 | 确定时延的方法、装置、终端与存储介质 |
| CN114598917A (zh) * | 2022-01-27 | 2022-06-07 | 海信视像科技股份有限公司 | 显示设备及音频处理方法 |
| WO2022120782A1 (en) * | 2020-12-11 | 2022-06-16 | Qualcomm Incorporated | Multimedia playback synchronization |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101127987A (zh) * | 2006-08-18 | 2008-02-20 | 施乐公司 | 共同使用多个移动设备的音频系统 |
| CN104299632A (zh) * | 2014-09-23 | 2015-01-21 | 广东欧珀移动通信有限公司 | 音频同步方法、装置及相应系统 |
| CN105847926A (zh) * | 2016-03-31 | 2016-08-10 | 乐视控股（北京）有限公司 | 一种多媒体数据的同步播放方法及装置 |
| CN106452644A (zh) * | 2016-10-08 | 2017-02-22 | 广东欧珀移动通信有限公司 | 播放控制方法、装置及终端 |
| CN107113465A (zh) * | 2014-12-10 | 2017-08-29 | 艾科星科技公司 | 用于与多个输出装置的视听同步的方法、装置及系统 |
| CN108012177A (zh) * | 2017-12-01 | 2018-05-08 | 晨星半导体股份有限公司 | 音视频播放系统及应用于其上的音频数据的播放方法 |
| US20180146236A1 (en) * | 2016-11-19 | 2018-05-24 | ANI Technologies Private Limited | Method and system for synchronizing playback of multimedia files |
| CN108289232A (zh) * | 2018-01-26 | 2018-07-17 | 广东欧珀移动通信有限公司 | 一种播放设备的控制方法、终端设备及存储介质 |
-
2018
- 2018-11-29 CN CN201811440560.3A patent/CN109525881A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101127987A (zh) * | 2006-08-18 | 2008-02-20 | 施乐公司 | 共同使用多个移动设备的音频系统 |
| CN104299632A (zh) * | 2014-09-23 | 2015-01-21 | 广东欧珀移动通信有限公司 | 音频同步方法、装置及相应系统 |
| CN107113465A (zh) * | 2014-12-10 | 2017-08-29 | 艾科星科技公司 | 用于与多个输出装置的视听同步的方法、装置及系统 |
| CN105847926A (zh) * | 2016-03-31 | 2016-08-10 | 乐视控股（北京）有限公司 | 一种多媒体数据的同步播放方法及装置 |
| CN106452644A (zh) * | 2016-10-08 | 2017-02-22 | 广东欧珀移动通信有限公司 | 播放控制方法、装置及终端 |
| US20180146236A1 (en) * | 2016-11-19 | 2018-05-24 | ANI Technologies Private Limited | Method and system for synchronizing playback of multimedia files |
| CN108012177A (zh) * | 2017-12-01 | 2018-05-08 | 晨星半导体股份有限公司 | 音视频播放系统及应用于其上的音频数据的播放方法 |
| CN108289232A (zh) * | 2018-01-26 | 2018-07-17 | 广东欧珀移动通信有限公司 | 一种播放设备的控制方法、终端设备及存储介质 |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110708582A (zh) * | 2019-09-18 | 2020-01-17 | 深圳酷派技术有限公司 | 同步播放的方法、装置、电子设备及介质 |
| CN110708582B (zh) * | 2019-09-18 | 2022-01-18 | 深圳酷派技术有限公司 | 同步播放的方法、装置、电子设备及介质 |
| CN111124332A (zh) * | 2019-11-18 | 2020-05-08 | 北京小米移动软件有限公司 | 设备呈现内容的控制方法、控制装置及存储介质 |
| CN111124332B (zh) * | 2019-11-18 | 2024-03-01 | 北京小米移动软件有限公司 | 设备呈现内容的控制方法、控制装置及存储介质 |
| CN111355995A (zh) * | 2020-03-03 | 2020-06-30 | 北京字节跳动网络技术有限公司 | 蓝牙设备声音延迟时长的确定方法、装置及终端设备 |
| CN111988603A (zh) * | 2020-08-12 | 2020-11-24 | 深圳创维－Rgb电子有限公司 | 外部功放的调测方法、装置、电子设备及存储介质 |
| CN112017666A (zh) * | 2020-08-31 | 2020-12-01 | 广州市百果园信息技术有限公司 | 一种延迟控制方法和装置 |
| CN112017666B (zh) * | 2020-08-31 | 2024-06-11 | 广州市百果园信息技术有限公司 | 一种延迟控制方法和装置 |
| WO2022120782A1 (en) * | 2020-12-11 | 2022-06-16 | Qualcomm Incorporated | Multimedia playback synchronization |
| CN112860211A (zh) * | 2021-01-28 | 2021-05-28 | 成都极米科技股份有限公司 | 确定时延的方法、装置、终端与存储介质 |
| CN114598917A (zh) * | 2022-01-27 | 2022-06-07 | 海信视像科技股份有限公司 | 显示设备及音频处理方法 |
| CN114598917B (zh) * | 2022-01-27 | 2024-03-29 | 海信视像科技股份有限公司 | 显示设备及音频处理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109525881A (zh) | 音画同步方法、装置及设备 | |
| JP6626440B2 (ja) | マルチメディアファイルを再生するための方法及び装置 | |
| CN104699248A (zh) | 音频播放的控制方法及装置、电子设备 | |
| CN105244048A (zh) | 音频播放控制方法和装置 | |
| CN104219388A (zh) | 语音控制方法和装置 | |
| CN104318934A (zh) | 关闭多媒体文件播放的方法、终端、穿戴设备及播放装置 | |
| EP2296358B1 (en) | Terminal and control method of a camera thereof | |
| CN104112459B (zh) | 播放音频数据的方法和装置 | |
| CN105306718A (zh) | 事件提示方法及装置 | |
| CN105183132A (zh) | 节能模式启动方法和装置 | |
| CN105288941A (zh) | 跑步机调速方法及装置 | |
| CN103986821A (zh) | 一种进行参数调整的方法、设备和系统 | |
| CN104618783A (zh) | 遥控方法及装置 | |
| CN104639977A (zh) | 节目播放的方法及装置 | |
| CN105430161A (zh) | 消息处理方法及装置 | |
| CN106453032B (zh) | 信息推送方法及装置、系统 | |
| CN105407368A (zh) | 多媒体播放方法、装置及系统 | |
| CN104394137A (zh) | 一种提醒语音通话的方法及装置 | |
| CN105451056A (zh) | 音视频同步方法及装置 | |
| CN104539871A (zh) | 多媒体通话方法及装置 | |
| CN105159709A (zh) | 应用启动方法和装置、智能终端 | |
| CN104682908A (zh) | 控制音量的方法及装置 | |
| CN104702988A (zh) | 音视频播放方法和装置 | |
| CN112910592B (zh) | 时钟同步方法及装置、终端及存储介质 | |
| CN104104987A (zh) | 视频播放中画面与声音同步方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: 266555 Qingdao economic and Technological Development Zone, Shandong, Hong Kong Road, No. 218 Applicant after: Hisense Visual Technology Co., Ltd. Address before: 266555 Qingdao economic and Technological Development Zone, Shandong, Hong Kong Road, No. 218 Applicant before: QINGDAO HISENSE ELECTRONICS Co.,Ltd. |
|
| CB02 | Change of applicant information | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190326 |
|
| RJ01 | Rejection of invention patent application after publication |