CN108462892B - 图像和音频同步播放的处理方法及设备 - Google Patents

图像和音频同步播放的处理方法及设备 Download PDF

Info

Publication number
CN108462892B
CN108462892B CN201810251988.7A CN201810251988A CN108462892B CN 108462892 B CN108462892 B CN 108462892B CN 201810251988 A CN201810251988 A CN 201810251988A CN 108462892 B CN108462892 B CN 108462892B
Authority
CN
China
Prior art keywords
broadcasting
data
audio data
mapping relations
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810251988.7A
Other languages
English (en)
Other versions
CN108462892A (zh
Inventor
罗兴
沈光昊
蒋絮霏
顾修忠
张洋洋
段芳
陈武臣
郝庆畅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Shanghai Xiaodu Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201810251988.7A priority Critical patent/CN108462892B/zh
Publication of CN108462892A publication Critical patent/CN108462892A/zh
Priority to JP2018202625A priority patent/JP6853228B2/ja
Priority to US16/175,617 priority patent/US10965982B2/en
Application granted granted Critical
Publication of CN108462892B publication Critical patent/CN108462892B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437—Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders

Abstract

本申请提供一种图像和音频同步播放的处理方法及设备，该方法包括：获取播报终端发送的播放服务请求；获取播放服务请求对应的播放画面数据和音频数据，播放画面数据根据播放内容分为多个分组；将播放画面数据、音频数据、用于确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理。由于建立了音频数据与各分组的播放内容的对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性，从而使用户更好地定位显示界面中与当前语音播报内容对应的显示信息。

Description

图像和音频同步播放的处理方法及设备
技术领域
本申请涉及计算机技术领域，具体涉及人工智能领域，尤其涉及一种图像和音频同步播放的处理方法及设备。
背景技术
随着信息的数字化及人们生活水平的提高，智能家居越来越多的出现在了人们的日常生活中，智能音箱作为其中一类产品广受大众欢迎。
现有的一些智能音箱，其上设置有显示屏，可以显示相关信息。但是，现有的智能音箱，通常是预先存储的音频文件和文本文件，并预先标注了音频文件播报内容与显示文字的对应关系，才能实现播报内容与显示文字的同步，比如，听歌时歌词的显示。而对于实时获取到的文字和图片信息，在进行播报时则不能准确地实现同步，从而导致用户的产品体验较差。因此，如何提高图文和音频同步的准确性成为亟需解决的技术问题。
发明内容
本申请提供一种图像和音频同步播放的处理方法及设备，以解决现有技术图像和音频播放不能准确同步等缺陷。
本申请第一个方面提供一种图像和音频同步播放的处理方法，包括：
获取播报终端发送的播放服务请求；
获取所述播放服务请求对应的播放画面数据和音频数据，所述播放画面数据根据播放内容分为多个分组；
将所述播放画面数据、所述音频数据、用于确定每个所述分组与所述音频数据的属性信息的第一对应关系的信息发送给所述播报终端，以使所述播报终端根据所述第一对应关系对所述播放画面数据和所述音频数据进行相应的同步播放处理。
本申请的第二个方面提供一种图像和音频同步播放的处理方法，包括：
向服务器发送播放服务请求，并接收所述服务器根据所述播放服务请求返回的播放画面数据、音频数据、用于确定每个分组与所述音频数据的属性信息的第一对应关系的信息；其中，所述播放画面数据根据播放内容分为多个分组；
根据所述第一对应关系，对播放的所述音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
本申请的第三个方面提供一种服务器，包括：
第一获取模块，用于获取播报终端发送的播放服务请求；
第二获取模块，用于获取所述播放服务请求对应的播放画面数据和音频数据，所述播放画面数据根据播放内容分为多个分组；
第一发送模块，用于将所述播放画面数据、所述音频数据、用于确定每个所述分组与所述音频数据的属性信息的第一对应关系的信息发送给所述播报终端，以使所述播报终端根据所述第一对应关系对所述播放画面数据和所述音频数据进行相应的同步播放处理。
本申请的第四个方面提供一种播报终端，包括：
第二发送模块，向服务器发送播放服务请求；
接收模块，用于接收所述服务器根据所述播放服务请求返回的播放画面数据、音频数据、用于确定每个分组与所述音频数据的属性信息的第一对应关系的信息；其中，所述播放画面数据根据播放内容分为多个分组；
处理模块，用于根据所述第一对应关系，对播放的所述音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
本申请的第五个方面提供一种服务器，包括：至少一个处理器和存储器；
所述存储器存储计算机程序；所述至少一个处理器执行所述存储器存储的计算机程序，以实现第一个方面提供的方法。
本申请的第六个方面提供一种播报终端，包括：处理器和存储器；
所述存储器存储计算机程序；所述处理器执行所述存储器存储的计算机程序，以实现第二个方面提供的方法。
本申请的第七个方面提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，所述计算机程序被执行时实现第一个方面提供的方法。
本申请的第八个方面提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，所述计算机程序被执行时实现第二个方面提供的方法。
本申请提供的图像和音频同步播放的处理方法及设备，通过根据播放内容将播放画面数据分为多个分组，并将确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理，由于建立了音频数据与各分组的播放内容的对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的服务系统的结构示意图；
图2为本申请一实施例提供的图像和音频同步播放的处理方法的流程示意图；
图3为本申请另一实施例提供的图像和音频同步播放的处理方法的流程示意图；
图4为本申请再一实施例提供的图像和音频同步播放的处理方法的流程示意图；
图5为本申请又一实施例提供的图像和音频同步播放的处理方法的流程示意图；
图6为本申请一实施例提供的逐行高亮的示意图；
图7为本申请一实施例提供的高亮显示及向下滚动的界面示意图；
图8为本申请一实施例提供的播报翻页同步的界面示意图；
图9为本申请一实施例提供的服务器的结构示意图；
图10为本申请一实施例提供的播报终端的结构示意图；
图11为本申请另一实施例提供的服务器的结构示意图；
图12为本申请另一实施例提供的播报终端的结构示意图。
通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
首先对本申请所涉及的名词进行解释：
播报终端，是指具有扬声器及显示屏的智能终端，能够实现音频播报和屏幕显示。包括但不限于智能带屏音箱、智能手机、平板电脑等。
此外，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。在以下各实施例的描述中，“多个”的含义是两个以上，除非另有明确具体的限定。
下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本发明的实施例进行描述。
本申请实施例提供的图像和音频同步播放的处理方法，适用于包括播报终端和服务器的服务系统，如图1所示，为本申请实施例提供的服务系统的结构示意图。用户可以采用语音输入或手动文字输入等输入方式向播报终端输入播放服务请求，由播报终端将播放服务请求发送给服务器，服务器负责响应播报终端发送的播放服务请求，将相应的响应数据返回给播报终端，播报终端根据响应数据进行相应的同步播放处理。
实施例一
本实施例提供一种图像和音频同步播放的处理方法，用于播放服务中音频播报和显示内容的同步播放，提高同步的准确性。本实施例的执行主体可以为服务器。
如图2所示，为本实施例提供的图像和音频同步播放的处理方法的流程示意图，该方法包括：
步骤101，获取播报终端发送的播放服务请求。
具体的，当用户需要播报服务时，可以采用语音输入或手动文字输入等输入方式向播报终端输入播放服务请求，由播报终端将播放服务请求发送给服务器，服务器则可以获取播报终端发送的播放服务请求。
可选地，播放服务请求具体可以是但不限于是天气预报服务请求、闹钟提醒服务请求、餐厅介绍服务请求、短信读取服务请求、地理位置服务请求等等。比如，用户语音请求智能音箱播报天气情况，智能音箱接收用户的音频请求信息，智能音箱可以把音频请求信息直接转发给服务器，或者也可以将音频请求信息转化为文本信息转发给服务器，本实施例不做限定。
步骤102，获取播放服务请求对应的播放画面数据和音频数据，播放画面数据根据播放内容分为多个分组。
具体的，服务器在获取到播报终端发送的播放服务请求后，则可以获取播放服务请求对应的播放画面数据和音频数据，其中，播放画面数据根据播放内容分为多个分组。
可选地，播放画面数据可以包括图像数据和文字数据中的至少一个，播放画面数据根据播放内容分为多个分组，比如预警相关画面、气温相关画面、空气质量相关画面等等。图像数据可以是图片也可以是视频。音频数据为播放服务请求对应的待播放的音频数据。
可选地，服务器可以解析播放服务请求，得到用户意图的表示，根据用户意图，在服务系统内搜索获取播放服务请求对应的播放画面数据和音频数据。或者，服务器还可以根据用户意图借助第三方服务，从第三方服务处获取播放服务请求对应的播放画面数据和音频数据。本实施例不做限定。
可选地，服务器获取播放服务请求对应的音频数据，具体还可以包括，获取播放服务请求对应的文字内容，根据文字内容生成播放服务请求对应的音频数据。本实施例不做限定。
可选地，播放画面数据根据播放内容分为多个分组可以包括：根据播放内容的不同事件进行分组、根据播放内容的播放时长分组、根据播放内容的大小分组等等，具体不做限定。
示例性的，以天气播报为例，若音频数据的播报内容包括“西安今天道路结冰黄色预警，全天阴转多云，零下8摄氏度到1摄氏度，空气质量指数276，重度污染”，播放画面数据包括西安今天预警相关图像、气温相关图像和空气质量相关图像，则根据播放内容分为三个分组。其中预警相关图像与播报内容“西安今天道路结冰黄色预警”对应，气温相关图像与播报内容“全天阴转多云，零下8摄氏度到1摄氏度”对应，空气质量相关图像与“空气质量指数276，重度污染”对应。
步骤103，将播放画面数据、音频数据、用于确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理。
具体的，服务器在获取到播放服务请求对应的播放画面数据和音频数据后，则可以将播放画面数据、音频数据、用于确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理。示例性的，音频数据的属性信息可以为音频数据的播报时长。
可选地，用于确定每个分组与音频数据的属性信息的第一对应关系的信息可以是服务器根据用户意图进行搜索时获取到的，也可以是服务器在获取到播放画面数据和音频数据后，根据播放画面数据和音频数据的具体内容生成的。
示例性的，天气预报服务，服务器从第三方天气预报服务处获取到天气信息“西安今天道路结冰黄色预警，全天阴转多云，零下8摄氏度到1摄氏度，空气质量指数276，重度污染”，以及分组信息“W:0-13，T:14-32，A:33-44”和对应的图像数据，其中分组信息表示：前13个字是播报预警、14-32个字是播报气温、33-44个字是播报空气质量。服务器根据获取到的分组信息对播放画面数据进行分组。
示例性的，闹钟提醒服务，服务器获取到用户的多个闹钟提醒服务请求，根据用户要求的不同提醒时间进行分组，显示不同的提醒内容，在到指定时间时，进行语音播报提醒，并在显示界面显示对应的提醒内容。
本实施例提供的图像和音频同步播放的处理方法，根据播放内容将播放画面数据分为多个分组，并将确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理，由于建立了音频数据与各分组的播放内容的对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性。
实施例二
本实施例对实施例一提供的图像和音频同步播放的处理方法做进一步补充说明。
如图3所示，为本实施例提供的图像和音频同步播放的处理方法的流程示意图。该流程示意图仅为示例性的提供一种综合的处理流程，并非对本申请的限定，实际应用中，可以不包括某个或某些步骤，各步骤的顺序也可以根据实际情况与该流程不同。
作为一种可实施的方式，在上述实施例一的基础上，可选地，步骤103中，用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据的属性信息的第一映射关系；或者，每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系。每个分组与音频数据的属性信息的第一对应关系可以是服务器确定后发送给播报终端，也可以是服务器将每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系发送给播报终端，由播报终端确定每个分组与音频数据的属性信息的第一对应关系。即若用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据的属性信息的第一映射关系，步骤103具体包括：
步骤1031，将播放画面数据、音频数据、每个分组与音频数据的属性信息的第一映射关系发送给播报终端。
若用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系，步骤103具体包括：
步骤1032，将播放画面数据、音频数据、每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系发送给播报终端。
可选地，该方法还可以包括：将音频数据对应的文字内容发送给播报终端，以使播报终端在播报时，在显示界面上显示对应的文字内容。
可选地，在步骤103之前，该方法还可以包括：
步骤201，根据文字内容，获取音频数据的大小与文字内容的第四映射关系。
具体的，服务器可以获取音频数据以及音频数据对应的文字内容，若获取到的原始数据为音频数据，则可以将音频数据通过语音识别转化成文字内容，若获取到的原始数据为文字内容，则可以将文字内容转换成对应的音频数据，具体的音频数据和文字内容的转换过程为现有技术，在此不再赘述。服务器还可以获取音频数据的大小与文字内容的第四映射关系，比如，文字内容“西安今天道路结冰黄色预警，全天阴转多云，零下8摄氏度到1摄氏度，空气质量指数276，重度污染”与其对应的音频数据的大小的映射关系为“(25k,5个字)(49k,9个字)…(220k,44个字)”，其表示文字内容前5个字对应音频数据大小的前25k，文字内容前9个字对应音频数据大小的前49k，依次类推，不再赘述。需要说明的是，音频数据大小与文字内容的映射关系的粒度可以根据实际需求设置，比如可以以每个字为粒度，也可以以多个字为粒度，比如(5k，1个字)(10k，2个字)，具体不做限定。
步骤202，根据音频数据和第四映射关系，确定音频数据的播报时长与文字内容的第三映射关系。
具体的，服务器可以获取音频数据的播报时长，具体可以根据音频数据的大小计算获得音频数据的播报时长，并可以获取播报时长与音频数据大小的映射关系，从而进一步获取音频数据的播报时长与文字内容的第三映射关系。
可选地，步骤202具体可以包括：
步骤2021，根据音频数据的大小，确定音频数据的播报时长与音频数据的大小的第五映射关系。
示例性的，音频数据大小与播报时长的映射关系可以为“(25k,100ms)(49k,200ms)…”。
步骤2022，根据第四映射关系和第五映射关系，确定音频数据的播报时长与文字内容的第三映射关系。
示例性的，第三映射关系可以为“(100ms,5个字)(200ms,9个字)…”。
作为另一种可实施的方式，在上述实施例一的基础上，可选地，播放画面数据包括：图像数据和文字数据中的至少一个；若播放画面数据中包括文字数据，则该方法还可以包括：确定每个分组中每行文字数据与音频数据的属性信息的第二对应关系，并发送给播报终端，以使播报终端根据第二对应关系控制每行文字数据与该行对应的音频数据同步播放。
具体的，若播放画面数据中包括文字数据，则服务器还可以确定每个分组中，每行文字数据与音频数据的属性信息的第二对应关系，并发送给播报终端，以使播报终端根据第二对应关系控制每行文字数据与该行对应的音频数据同步播放。示例性的，仍以上述西安天气为例，若要在显示界面上显示与音频数据同步的文字内容，则可以确定每行文字数据与音频数据的属性信息的对应关系为“(西安今天道路结冰黄色预警，0-280ms)(全天阴转多云，280-300ms)(零下8摄氏度到1摄氏度，300-500ms)…”。具体每行文字数据的确定，可以是根据文字内容的标点符号进行截断，也可以是根据音频数据中音频的停顿进行截断，具体实现方式可以为现有技术中任意可实施的方式，在此不再赘述。
需要说明的是，本实施例中各可实施的方式可以单独实施，也可以在不冲突的情况下以任意组合方式结合实施，本申请不做限定。
本实施例提供的图像和音频同步播放的处理方法，在上述实施例一的基础上，若播放画面数据中包括文字数据，还可以控制每行文字数据与音频数据的同步播放，可以实现逐行高亮等有助于用户对屏幕关键信息的定位的显示效果，进一步提高了用户体验。若播放画面数据中既包括图像数据又包括文字数据，可以实现语音、文字、图像三者准确地同步播放，进一步提高用户体验。
实施例三
本实施例提供一种图像和音频同步播放的处理方法，用于播放服务中音频播报和显示内容的同步播放，提高同步的准确性。本实施例的执行主体可以为播报终端，播报终端具体可以包括但不限于智能带屏音箱、智能手机、平板电脑等。
如图4所示，为本实施例提供的图像和音频同步播放的处理方法的流程示意图。该方法包括：
步骤301，向服务器发送播放服务请求。
具体的，当用户需要播报服务时，可以采用语音输入或手动文字输入等输入方式向播报终端输入播放服务请求，由播报终端将播放服务请求发送给服务器，服务器则可以获取播报终端发送的播放服务请求。
步骤302，接收服务器根据播放服务请求返回的播放画面数据、音频数据、用于确定每个分组与音频数据的属性信息的第一对应关系的信息。
其中，播放画面数据根据播放内容分为多个分组。
步骤303，根据第一对应关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
具体的，在播放音频数据时，根据每个分组与音频数据的属性信息的对应关系，同步地在显示界面上显示对应的播放画面。
示例性的，在播报“西安今天道路结冰黄色预警”的过程中，显示界面上显示预警相关的图像，还可以在显示图像上显示“预警”等提示信息，以使用户更清楚当前显示画面是什么内容。在播报完上述内容，开始播报“全天阴转多云，零下8摄氏度到1摄氏度”时，显示界面上变为气温相关的图像，以及“气温”提示信息，等等。
本实施例提供的图像和音频同步播放的处理方法，根据服务器返回的每个分组与音频数据的属性信息的第一对应关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理，由于建立了音频数据与各分组的播放内容对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性。
实施例四
本实施例对实施例三提供的图像和音频同步播放的处理方法做进一步补充说明。
如图5所示，为本实施例提供的图像和音频同步播放的处理方法的流程示意图。该流程示意图仅为示例性的提供一种综合的处理流程，并非对本申请的限定，实际应用中，可以不包括某个或某些步骤，各步骤的顺序也可以根据实际情况与该流程不同。
作为一种可实施的方式，在上述实施例三的基础上，可选地，用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据的属性信息的第一映射关系；则步骤303包括：根据第一映射关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。具体的，由服务器确定好每个分组与音频数据的属性信息的第一映射关系，发送给播报终端，播报终端则可以直接根据第一映射关系对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
可选地，用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系；则步骤302具体包括：
步骤3021，接收服务器根据播放服务请求返回的播放画面数据、音频数据、每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系。
则步骤303包括：
步骤3031，根据第二映射关系和第三映射关系，确定每个分组与音频数据的属性信息的第六映射关系。
步骤3032，根据第六映射关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
具体的，服务器确定了每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系，发送给播报终端，播报终端根据第二映射关系和第三映射关系，确定每个分组与音频数据的属性信息的第六映射关系，并进一步根据第六映射关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
可选地，步骤3032具体可以包括：
步骤30321，对在显示界面上播放的播放画面数据，根据每个分组进行计时处理，以控制每个分组与该分组对应的音频数据同步播放。
具体的，每个分组与音频数据的属性信息的映射关系可以是每个分组与音频数据的播报时长的对应关系，对在显示界面上播放的播放画面数据，根据每个分组进行计时处理，根据每个分组与音频数据的播报时长的对应关系，控制每个分组的播放画面与音频数据的同步播放。
作为另一种可实施的方式，在上述实施例三的基础上，可选地，该方法还可以包括：
步骤401，接收服务器发送的每个分组中每行文字数据与音频数据的属性信息的第二对应关系。
步骤402，根据第二对应关系，对在显示界面上播放的文字数据，根据行进行计时处理，以控制每行文字数据与该行对应的音频数据同步播放。
具体的，若播放画面数据中包括文字数据，并接收到服务器发送的每个分组中每行文字数据与音频数据的属性信息的第二对应关系，播报终端则可以根据第二对应关系，对在显示界面上播放的文字数据，根据行进行计时处理，以控制每行文字数据与该行对应的音频数据同步播放。比如在语音播报“西安今天道路结冰黄色预警”时，在显示界面上同步显示文字“西安今天道路结冰黄色预警”。可以理解的，若播放画面数据中包括图像数据和文字数据，播报终端可以同时控制音频数据与显示界面上显示的图像数据和文字数据的同步播放。
可选的，该方法还可以包括：控制当前播放的音频数据所对应的该行文字数据，在显示界面上的显示方式区别于其他行的文字数据。
具体的，可以控制当前播放的音频数据所对应的该行文字数据，在显示界面上高亮显示，或者通过不同的颜色区别于其他行的文字数据等等。
示例性的，如图6所示，为本实施例提供的逐行高亮的示意图。其中，图像可以是迈克尔杰克逊的照片或其相关视频，这里仅为示例性说明。
可选地，还可以根据音频数据与文字数据的细粒度对应关系，即音频数据的播报时长与每行中每个文字的对应关系，控制音频播报的每个文字，在显示界面上的显示方式区别于其他行的文字以及该行中其他文字，即逐字高亮显示。
可选地，还可以控制显示界面通过向下滚动，逐行显示出当前未在显示界面中的各行文字，并可以高亮显示，或通过不同颜色显示。
示例性的，如图7所示，为本实施例提供的高亮显示及向下滚动的界面示意图。在播报完第1条“提醒我买生日礼物后”，向下滚动，显示出第4条提醒，相应的第1条提醒则滚动出显示界面，即显示界面上显示2、3、4三条提醒。如图8所示，为本实施例提供的播报翻页同步的界面示意图。在播报雷电暴雨蓝色预警相关内容时，高亮显示雷电暴雨，并且“蓝色预警”四个字可以采用蓝色表示，并同步显示雷电暴雨相关图像，当播报到当前气温相关内容时相关内容时，则高亮显示“当前5℃，今天全天2℃-9℃”，并同步翻页到气温相关图像。
需要说明的是，本实施例中各可实施的方式可以单独实施，也可以在不冲突的情况下以任意组合方式结合实施，本申请不做限定。
本实施例提供的图像和音频同步播放的处理方法，在上述实施例三的基础上，若播放画面数据中包括文字数据，还可以控制每行文字数据与音频数据的同步播放，并可以控制当前播放的音频数据所对应的该行文字数据在显示界面上的显示方式区别于其他行的文字数据，可以实现逐行高亮等有助于用户对屏幕关键信息的定位的显示效果，进一步提高了用户体验。
实施例五
本实施例提供一种服务器，用于执行上述实施例一的图像和音频同步播放的处理方法。
如图9所示，为本实施例提供的服务器的结构示意图。该服务器50包括第一获取模块51、第二获取模块52和第一发送模块53。
其中，第一获取模块51用于获取播报终端发送的播放服务请求；第二获取模块52用于获取播放服务请求对应的播放画面数据和音频数据，播放画面数据根据播放内容分为多个分组；第一发送模块53用于将播放画面数据、音频数据、用于确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理。
关于本实施例中的服务器，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
根据本实施例提供的服务器，根据播放内容将播放画面数据分为多个分组，并将确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理，由于建立了音频数据与各分组的播放内容的对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性。
实施例六
本实施例对上述实施例五提供的服务器做进一步补充说明，用于执行上述实施例二提供的图像和音频同步播放的处理方法。
作为一种可实施的方式，在上述实施例五的基础上，可选地，用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据的属性信息的第一映射关系；或者，每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系。
可选地，第一发送模块53还可以用于将音频数据对应的文字内容发送给播报终端。
可选地，服务器50还可以包括第三获取模块和第四获取模块。
其中，第三获取模块用于根据文字内容，获取音频数据的大小与文字内容的第四映射关系；第四获取模块用于根据音频数据和第四映射关系，确定音频数据的播报时长与文字内容的第三映射关系。
可选地，第四获取模块，具体可以包括第一获取子模块和第二获取子模块。
其中，第一获取子模块用于根据音频数据的大小，确定音频数据的播报时长与音频数据的大小的第五映射关系；第二获取子模块用于根据第四映射关系和第五映射关系，确定音频数据的播报时长与文字内容的第三映射关系。
作为另一种可实施的方式，在上述实施例五的基础上，可选地，播放画面数据包括：图像数据和文字数据中的至少一个。
若播放画面数据中包括文字数据，则服务器50还可以包括第一确定模块。
其中，第一确定模块用于确定每个分组中每行文字数据与音频数据的属性信息的第二对应关系；第一发送模块还用于将第二对应关系发送给播报终端。
关于本实施例中的服务器，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
需要说明的是，本实施例中各可实施的方式可以单独实施，也可以在不冲突的情况下以任意组合方式结合实施本申请不做限定。
根据本实施例的服务器，在上述实施例五的基础上，若播放画面数据中包括文字数据，还可以控制每行文字数据与音频数据的同步播放，可以实现逐行高亮等有助于用户对屏幕关键信息的定位的显示效果，进一步提高了用户体验。若播放画面数据中既包括图像数据又包括文字数据，可以实现语音、文字、图像三者准确地同步播放，进一步提高用户体验。
实施例七
本实施例提供一种播报终端，用于执行上述实施例三提供的图像和音频同步播放的处理方法。
如图10所示，为本实施例提供的播报终端的结构示意图。该播报终端70包括第二发送模块71、接收模块72和处理模块73。
其中，第二发送模块71向服务器发送播放服务请求；接收模块72用于接收服务器根据播放服务请求返回的播放画面数据、音频数据、用于确定每个分组与音频数据的属性信息的第一对应关系的信息；其中，播放画面数据根据播放内容分为多个分组；处理模块73用于根据第一对应关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
关于本实施例中的播报终端，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
根据本实施例的播报终端，根据服务器返回的每个分组与音频数据的属性信息的第一对应关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理，由于建立了音频数据与各分组的播放内容对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性。
实施例八
本实施例对上述实施例七提供的服务器做进一步补充说明，用于执行上述实施例四提供的图像和音频同步播放的处理方法。
作为一种可实施的方式，在上述实施例七的基础上，可选地，处理模块73具体可以用于：若用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据的属性信息的第一映射关系，则根据第一映射关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理；若用于确定每个分组与音频数据的属性信息的第一对应关系的信息包括：每个分组与音频数据对应的文字内容的第二映射关系，以及文字内容与音频数据的属性信息的第三映射关系，则根据第二映射关系和第三映射关系，确定每个分组与音频数据的属性信息的第六映射关系；根据第六映射关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
可选地，处理模块具体可以用于：对在显示界面上播放的播放画面数据，根据每个分组进行计时处理，以控制每个分组与该分组对应的音频数据同步播放。
作为另一种可实施的方式，在上述实施例七的基础上，可选地，接收模块还用于接收服务器发送的每个分组中每行文字数据与音频数据的属性信息的第二对应关系。
处理模块还用于根据第二对应关系，对在显示界面上播放的文字数据，根据行进行计时处理，以控制每行文字数据与该行对应的音频数据同步播放。
可选地，该播报终端还可以包括控制模块，用于控制当前播放的音频数据所对应的该行文字数据，在显示界面上的显示方式区别于其他行的文字数据。
关于本实施例中的播报终端，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
需要说明的是，本实施例中各可实施的方式可以单独实施，也可以在不冲突的情况下以任意组合方式结合实施，本申请不做限定。
根据本实施例的播报终端，在上述实施例七的基础上，若播放画面数据中包括文字数据，还可以控制每行文字数据与音频数据的同步播放，并可以控制当前播放的音频数据所对应的该行文字数据在显示界面上的显示方式区别于其他行的文字数据，可以实现逐行高亮等有助于用户对屏幕关键信息的定位的显示效果，进一步提高了用户体验。
实施例九
本实施例提供一种服务器，用于执行上述实施例一或实施例二提供的方法。
如图11所示，为本实施例提供的服务器的结构示意图。该服务器90包括：至少一个处理器91和存储器92。
其中，存储器存储计算机程序；至少一个处理器执行存储器存储的计算机程序，以实现实施例一或实施例二提供的方法。
本实施例提供的服务器，根据播放内容将播放画面数据分为多个分组，并将确定每个分组与音频数据的属性信息的第一对应关系的信息发送给播报终端，以使播报终端根据第一对应关系对播放画面数据和音频数据进行相应的同步播放处理，由于建立了音频数据与各分组的播放内容的对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性。
实施例十
本实施例提供一种播报终端，用于执行上述实施例三或实施例四提供的方法。
如图12所示，为本实施例提供的播报终端的结构示意图，该播报终端100包括：处理器1001和存储器1002。
其中，存储器存储计算机程序；处理器执行存储器存储的计算机程序，以实现实施例三或实施例四提供的方法。
本实施例提供的播报终端，根据服务器返回的每个分组与音频数据的属性信息的第一对应关系，对播放的音频数据和在显示界面上显示的播放画面数据进行相应的同步处理，由于建立了音频数据与各分组的播放内容对应关系，使得播报终端在播放时能够准确地进行播报的音频内容与显示的播放画面的同步，有效提高了音频播报与屏幕显示同步的准确性。
实施例十一
本实施例提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，计算机程序被执行时实现实施例一或实施例二提供的方法。
实施例十二
本实施例提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，计算机程序被执行时实现实施例三或实施例四提供的方法。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (18)

1.一种图像和音频同步播放的处理方法，其特征在于，包括：
获取播报终端发送的播放服务请求；
获取所述播放服务请求对应的播放画面数据和音频数据，所述播放画面数据根据播放内容分为多个分组；
根据所述播放服务请求对应的播放画面数据和音频数据，获取每个所述分组与所述音频数据对应的文字内容的第二映射关系；
根据所述文字内容，获取所述音频数据的大小与所述文字内容的第四映射关系；
根据所述音频数据的大小，确定所述音频数据的播报时长与所述音频数据的大小的第五映射关系；
根据所述第四映射关系和所述第五映射关系，确定所述音频数据的播报时长与所述文字内容的第三映射关系；
将所述播放画面数据、所述音频数据、每个所述分组与所述音频数据对应的文字内容的第二映射关系以及所述音频数据的播报时长与所述文字内容的第三映射关系发送给所述播报终端，以使所述播报终端根据所述第二映射关系和所述第三映射关系对所述播放画面数据和所述音频数据进行相应的同步播放处理。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
将所述音频数据对应的文字内容发送给所述播报终端。
3.根据权利要求1或2所述的方法，其特征在于，所述播放画面数据包括：图像数据和文字数据中的至少一个；
若所述播放画面数据中包括文字数据，则所述方法还包括：
确定每个所述分组中每行文字数据与所述音频数据的属性信息的第二对应关系，并发送给所述播报终端。
4.一种图像和音频同步播放的处理方法，其特征在于，包括：
向服务器发送播放服务请求，并接收所述服务器根据所述播放服务请求返回的播放画面数据、音频数据、每个分组与所述音频数据对应的文字内容的第二映射关系以及所述音频数据的播报时长与所述文字内容的第三映射关系；其中，所述播放画面数据根据播放内容分为多个分组；
根据所述第二映射关系和所述第三映射关系，确定每个所述分组与所述音频数据的播报时长的第六映射关系；根据所述第六映射关系，对播放的所述音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
5.根据权利要求4所述的方法，其特征在于，所述根据所述第六映射关系，对播放的所述音频数据和在显示界面上显示的播放画面数据进行相应的同步处理，包括：
对在所述显示界面上播放的播放画面数据，根据每个分组进行计时处理，以控制每个分组与该分组对应的音频数据同步播放。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
接收服务器发送的每个所述分组中每行文字数据与所述音频数据的属性信息的第二对应关系；
根据所述第二对应关系，对在所述显示界面上播放的文字数据，根据行进行计时处理，以控制每行文字数据与该行对应的音频数据同步播放。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
控制当前播放的音频数据所对应的该行文字数据，在所述显示界面上的显示方式区别于其他行的文字数据。
8.一种服务器，其特征在于，包括：
第一获取模块，用于获取播报终端发送的播放服务请求；
第二获取模块，用于获取所述播放服务请求对应的播放画面数据和音频数据，所述播放画面数据根据播放内容分为多个分组；
所述第二获取模块，还用于根据所述播放服务请求对应的播放画面数据和音频数据，获取每个所述分组与所述音频数据对应的文字内容的第二映射关系；
第三获取模块，用于根据所述文字内容，获取所述音频数据的大小与所述文字内容的第四映射关系；
第四获取模块，用于根据所述音频数据的大小，确定所述音频数据的播报时长与所述音频数据的大小的第五映射关系；
所述第四获取模块，还用于根据所述第四映射关系和所述第五映射关系，确定所述音频数据的播报时长与所述文字内容的第三映射关系；
第一发送模块，用于将所述播放画面数据、所述音频数据、每个所述分组与所述音频数据对应的文字内容的第二映射关系以及所述音频数据的播报时长与所述文字内容的第三映射关系发送给所述播报终端，以使所述播报终端根据所述第二映射关系和所述第三映射关系对所述播放画面数据和所述音频数据进行相应的同步播放处理。
9.根据权利要求8所述的服务器，其特征在于，所述第一发送模块，还用于将所述音频数据对应的文字内容发送给所述播报终端。
10.根据权利要求8或9所述的服务器，其特征在于，所述播放画面数据包括：图像数据和文字数据中的至少一个；
若所述播放画面数据中包括文字数据，则所述服务器，还包括：
第一确定模块，用于确定每个所述分组中每行文字数据与所述音频数据的属性信息的第二对应关系；
所述第一发送模块，还用于将所述第二对应关系发送给所述播报终端。
11.一种播报终端，其特征在于，包括：
第二发送模块，用于向服务器发送播放服务请求；
接收模块，用于接收所述服务器根据所述播放服务请求返回的播放画面数据、音频数据、每个分组与所述音频数据对应的文字内容的第二映射关系以及所述音频数据的播报时长与所述文字内容的第三映射关系；其中，所述播放画面数据根据播放内容分为多个分组；
处理模块，用于根据所述第二映射关系和所述第三映射关系，确定每个所述分组与所述音频数据的播报时长的第六映射关系；根据所述第六映射关系，对播放的所述音频数据和在显示界面上显示的播放画面数据进行相应的同步处理。
12.根据权利要求11所述的播报终端，其特征在于，所述处理模块，具体用于：
对在所述显示界面上播放的播放画面数据，根据每个分组进行计时处理，以控制每个分组与该分组对应的音频数据同步播放。
13.根据权利要求12所述的播报终端，其特征在于，所述接收模块，还用于：
接收服务器发送的每个所述分组中每行文字数据与所述音频数据的属性信息的第二对应关系；
所述处理模块，还用于根据所述第二对应关系，对在所述显示界面上播放的文字数据，根据行进行计时处理，以控制每行文字数据与该行对应的音频数据同步播放。
14.根据权利要求13所述的播报终端，其特征在于，还包括：
控制模块，用于控制当前播放的音频数据所对应的该行文字数据，在所述显示界面上的显示方式区别于其他行的文字数据。
15.一种服务器，其特征在于，包括：至少一个处理器和存储器；
所述存储器存储计算机程序；所述至少一个处理器执行所述存储器存储的计算机程序，以实现权利要求1-3中任一项所述的方法。
16.一种播报终端，其特征在于，包括：处理器和存储器；
所述存储器存储计算机程序；所述处理器执行所述存储器存储的计算机程序，以实现权利要求4-7中任一项所述的方法。
17.一种计算机可读存储介质，其特征在于，该计算机可读存储介质中存储有计算机程序，所述计算机程序被执行时实现权利要求1-3中任一项所述的方法。
18.一种计算机可读存储介质，其特征在于，该计算机可读存储介质中存储有计算机程序，所述计算机程序被执行时实现权利要求4-7中任一项所述的方法。
CN201810251988.7A 2018-03-26 2018-03-26 图像和音频同步播放的处理方法及设备 Active CN108462892B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201810251988.7A CN108462892B (zh) 2018-03-26 2018-03-26 图像和音频同步播放的处理方法及设备
JP2018202625A JP6853228B2 (ja) 2018-03-26 2018-10-29 画像とオーディオの同期再生の処理方法及びデバイス
US16/175,617 US10965982B2 (en) 2018-03-26 2018-10-30 Method and apparatus for synchronously playing image and audio

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810251988.7A CN108462892B (zh) 2018-03-26 2018-03-26 图像和音频同步播放的处理方法及设备

Publications (2)

Publication Number Publication Date
CN108462892A CN108462892A (zh) 2018-08-28
CN108462892B true CN108462892B (zh) 2019-08-06

Family

ID=63238010

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810251988.7A Active CN108462892B (zh) 2018-03-26 2018-03-26 图像和音频同步播放的处理方法及设备

Country Status (3)

Country Link
US (1) US10965982B2 (zh)
JP (1) JP6853228B2 (zh)
CN (1) CN108462892B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109408164B (zh) * 2018-09-07 2022-04-15 百度在线网络技术（北京）有限公司 控制屏幕显示内容的方法、装置、设备及可读存储介质
CN109462777B (zh) * 2018-12-21 2021-05-07 广州酷狗计算机科技有限公司 视频热度更新方法、装置、终端及存储介质
CN110267080A (zh) * 2019-04-30 2019-09-20 北京云迹科技有限公司 用于机器人播报内容同步的数据处理方法以及装置
CN111082950B (zh) * 2019-11-05 2022-12-27 福建升腾资讯有限公司 一种云桌面广播方法、装置、系统、设备和介质
JP2021093051A (ja) 2019-12-12 2021-06-17 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、及び制御方法
CN112423105B (zh) * 2020-10-27 2024-03-15 深圳Tcl新技术有限公司 数据传输方法、设备及介质
CN112397104B (zh) * 2020-11-26 2022-03-29 北京字节跳动网络技术有限公司 音频与文本的同步方法、装置、可读介质和电子设备
CN114827686A (zh) * 2022-05-09 2022-07-29 维沃移动通信有限公司 录制数据处理方法、装置及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103440137A (zh) * 2013-09-06 2013-12-11 叶鼎 一种同步显示演奏乐器位置的数字音频播放方法及其系统
CN104503996A (zh) * 2014-12-04 2015-04-08 百度在线网络技术（北京）有限公司 信息展现方法和装置
EP2961172A1 (en) * 2014-06-26 2015-12-30 Xiaomi Inc. Method and device for information acquisition
CN106507171A (zh) * 2016-10-13 2017-03-15 深圳市创易联合科技有限公司 多媒体播放方法及多媒体播放器

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006244002A (ja) * 2005-03-02 2006-09-14 Sony Corp コンテンツ再生装置およびコンテンツ再生方法
JP4948147B2 (ja) * 2006-12-15 2012-06-06 富士通株式会社 複合コンテンツファイルの編集方法および装置
CN101971262A (zh) * 2007-12-21 2011-02-09 皇家飞利浦电子股份有限公司 用于播放图片的方法和设备
JP2011223323A (ja) * 2010-04-09 2011-11-04 Ntt Docomo Inc 対話型サービス提供システム、対話型サービス提供装置、動画像提供装置、対話型サービス提供方法、動画像提供プログラム
EP2738686A1 (en) * 2012-11-29 2014-06-04 Thomson Licensing Synchronization of different versions of a multimedia content
CN105898501A (zh) * 2015-12-30 2016-08-24 乐视致新电子科技（天津）有限公司 视频播放方法、视频播放器及电子装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103440137A (zh) * 2013-09-06 2013-12-11 叶鼎 一种同步显示演奏乐器位置的数字音频播放方法及其系统
EP2961172A1 (en) * 2014-06-26 2015-12-30 Xiaomi Inc. Method and device for information acquisition
CN104503996A (zh) * 2014-12-04 2015-04-08 百度在线网络技术（北京）有限公司 信息展现方法和装置
CN106507171A (zh) * 2016-10-13 2017-03-15 深圳市创易联合科技有限公司 多媒体播放方法及多媒体播放器

Also Published As

Publication number Publication date
JP2019174783A (ja) 2019-10-10
JP6853228B2 (ja) 2021-03-31
US10965982B2 (en) 2021-03-30
CN108462892A (zh) 2018-08-28
US20190297374A1 (en) 2019-09-26

Similar Documents

Publication Publication Date Title
CN108462892B (zh) 图像和音频同步播放的处理方法及设备
CN109525853B (zh) 直播间封面展示方法、装置、终端、服务器及可读介质
CN103718528B (zh) 一种多终端协同播放多媒体文件的方法和相关装置及系统
CN105228013A (zh) 弹幕信息处理方法、装置及弹幕视频播放器
Herrera et al. 10 good practices for news organizations using Twitter
US20240126403A1 (en) Interaction method and apparatus, medium, and electronic device
EP4213005A1 (en) Method and apparatus for music sharing, electronic device, and storage medium
CN105323704A (zh) 一种用户评论分享方法、装置及系统
CN112087669B (zh) 赠送虚拟礼物的方法、装置及电子设备
CN103856390A (zh) 即时通讯方法及系统、通讯信息处理方法、终端
CN105721813A (zh) 一种视频轨迹自动形成方法及系统
CN102819969A (zh) 多媒体教育平台的实现方法及多媒体教育平台系统
CN110650255B (zh) 彩铃编辑的方法、装置、彩铃编辑单元及存储介质
CN103856817A (zh) 超媒体的互动播放方法及系统
CN104038774B (zh) 生成铃声文件的方法及装置
CN107566912A (zh) 一种节目播放方法、服务器、收听装置及车载系统
CN109829755A (zh) 一种信息的处理方法、装置
CN106888406A (zh) 一种基于时间的互动内容推送方法及系统
CN104902336A (zh) 远程媒体内容点播方法和系统
CN109255593A (zh) 日程表执行方法、装置、设备及计算机可读存储介质
CN102082918B (zh) 一种进行多样化字幕飞播的字幕机
Liu et al. News Narration, Local Visibility and Public Life in Chinese Short Videos
CN104125305A (zh) 动态推送日历信息的方法与系统
Wu Application Research of Vlog in the Field of News Media
Cao The politics and poetics of television documentary in China

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210519

Address after: 100085 Baidu Building, 10 Shangdi Tenth Street, Haidian District, Beijing

Patentee after: BEIJING BAIDU NETCOM SCIENCE AND TECHNOLOGY Co.,Ltd.

Patentee after: Shanghai Xiaodu Technology Co.,Ltd.

Address before: 100085 Baidu Building, 10 Shangdi Tenth Street, Haidian District, Beijing

Patentee before: BEIJING BAIDU NETCOM SCIENCE AND TECHNOLOGY Co.,Ltd.