CN102842326B - 一种视音频及图文同步播放方法 - Google Patents

一种视音频及图文同步播放方法 Download PDF

Info

Publication number
CN102842326B
CN102842326B CN201210237586.4A CN201210237586A CN102842326B CN 102842326 B CN102842326 B CN 102842326B CN 201210237586 A CN201210237586 A CN 201210237586A CN 102842326 B CN102842326 B CN 102842326B
Authority
CN
China
Prior art keywords
audio
content
text
video
graph
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210237586.4A
Other languages
English (en)
Other versions
CN102842326A (zh
Inventor
赵凡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou grandwell Polytron Technologies Inc
Original Assignee
HANGZHOU LINKER DIGITAL TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HANGZHOU LINKER DIGITAL TECHNOLOGY Co Ltd filed Critical HANGZHOU LINKER DIGITAL TECHNOLOGY Co Ltd
Priority to CN201210237586.4A priority Critical patent/CN102842326B/zh
Publication of CN102842326A publication Critical patent/CN102842326A/zh
Application granted granted Critical
Publication of CN102842326B publication Critical patent/CN102842326B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种视音频及图文同步播放方法,首先通过编译系统建立视音频内容和图文内容之间的同步关系,使视音频的帧和图文的页码、段落、句子对应,然后将该同步关系作为播放的控制指令和视音频内容、图文内容打包在一起形成一个独立的媒体包文件。当用户得到该媒体包文件后,可以由播放器分别解出视音频内容、图文内容和控制指令。在播放该媒体包文件时,用户可以选择播放模式,播放模式包括视音频模式和图文模式,当用户观看过程中切换播放模式时,切换后的内容的播放点为与切换前的内容对应的点。播放器根据控制指令同步视音频内容和图文内容的播放进度。本发明适用于各种播放设备。

Description

一种视音频及图文同步播放方法
技术领域
本发明涉及媒体文件的播放和切换,尤其是涉及一种视音频及图文同步播放方法。
背景技术
目前计算机、智能手机、智能终端等多媒体播放器可以播放视音频内容,也可以显示图片及文字内容。目前有大量的小说、漫画被改编为电影、电视或动漫,也有很多小说被录为有声小说,同一个内容可以有图片、文字、音频、视频等多种不同的表现形式,用户也会根据不同情况选择不同的播放方式。如何使用户可以方便地在不同表现形式之间切换选择显得非常必要。
中华人民共和国国家知识产权局于2008年3月26日公开了公开号为CN101150729A的专利文献,名称是音视频同步播放方法,其包括以下步骤:对播放文件的音频帧及视频帧进行索引解析;根据该解析的索引进行播放;根据该音频帧及视频帧的误差对播放进行修正。此方案可以利用播放文件中的音频帧及视频帧的交叉特性对媒体流进行动态的交叉修正,使得播放效果达到音频与视频同步,但是对于文字和图片格式的文件无法进行同步,用户无法做到切换播放方式时的候保持不同播放方式下观看进度的一致。
发明内容
本发明主要是解决现有技术所存在的用户无法做到在不影响观看进度情况下的切换播放方式的技术问题,提供一种不同格式的文件具有同步性、用户可以自由切换播放方式并保持各种播放方式的观看进度的视音频及图文同步播放方法。
本发明针对上述技术问题主要是通过下述技术方案得以解决的:一种视音频及图文同步播放方法,首先通过编译系统建立视音频内容和图文内容之间的同步关系,使视音频的帧和图文的页码、段落、句子对应,然后将该同步关系作为播放的控制指令和视音频内容、图文内容打包在一起形成一个独立的媒体包文件。当用户得到该媒体包文件后,可以由播放器(播放设备)分别解出视音频内容、图文内容和控制指令。在播放该媒体包文件时,用户可以选择播放模式,播放模式包括视音频模式和图文模式,当用户观看过程中切换播放模式时,切换后的内容的播放点为与切换前的内容对应的点。播放器根据控制指令同步视音频内容和图文内容的播放进度。
作为优选,播放模式还包括混合模式,混合模式下播放设备的屏幕分成两部分,一部分显示视频内容,另一部分显示图文内容,同时播放设备的扬声器播放音频内容,图文内容随着视音频内容的播放而滚动或翻页,当用户拖动视音频的进度条时,图文内容也作相应的滚动或翻页以与视音频内容保持同步,当用户滚动或翻页图文内容时,视音频也作相应的快进或快退以与图文内容保持同步。
作为优选,在混合模式下,当用户暂停视音频的播放时,图文内容的自动滚动及翻页也停止。
作为优选,当用户从图文模式切换到混合模式时,播放设备的屏幕分为两个部分,一部分显示图文内容,所显示的图文内容的位置与切换前一致,另一部分显示视频内容,所显示的视频内容与当前显示的图文内容同步,播放设备的扬声器开始播放与视频内容对应的音频。
作为优选,当用户从视音频模式切换到混合模式时,播放设备的屏幕分为两个部分,一部分显示视频内容,所显示的视频内容的位置与切换前一致,另一部分显示图文内容,所显示的图文内容与当前显示的图文内容同步,播放设备的扬声器继续播放音频不作改变。
作为优选,当用户从混合模式切换到视音频模式时,播放设备的屏幕的两个部分合为一个部分,并继续播放视频内容,同时播放设备的扬声器继续播放音频不作改变。
作为优选,当用户从混合模式切换到图文模式时,播放设备的屏幕的两个部分合为一个部分,并继续播放图文内容,并且图文内容停止滚动及翻页,同时播放设备的扬声器停止播放音频。
作为优选,播放设备可以检测车辆速度,当车辆速度大于0时,如果当前播放模式为混合模式或图文模式,则自动切换为视音频模式。
作为优选,播放设备可以检测车辆速度,所述播放模式还包括音频模式,音频模式下播放设备的屏幕不显示任何内容,播放设备的扬声器播放音频内容,当播放设备检测到车辆速度大于0时,如果当前播放模式为混合模式或图文模式或视音频模式,则自动切换为音频模式。
本发明主要针对既有图文内容又有视音频内容的多媒体内容,而且视音频内容和图文内容有关联性,如图文内容是音视频内容的内容说明、配文配图等,向用户提供一种方便的在收听、收看和阅读之间自由切换的方法,使用户可以在不同的场合用不同的方式欣赏该内容。
附图说明
图1是本发明的一种流程图;
图2是本发明的一种三种模式之间切换的示意图。
具体实施方式
下面通过实施例,并结合附图,对本发明的技术方案作进一步具体的说明。
实施例1:本实施例的一种视音频及图文同步播放方法,如图1和图2所示,包括以下步骤:
建立视音频内容与图文内容的同步信息,将视音频内容的帧与图文内容的段落开始和结束、或者句子的开始与结束、或者字、词、或者图像关联起来;
视音频和图文在两个窗口或者一个窗口的两个区域显示,该窗口或者区域可以隐藏;
播放器支持视音频模式(只播放音频和视频)、图文模式(只显示图片和/或文字)、混合模式(视音频内容播放的同时图文内容也在同步显示),并支持视音频到图文和图文到视音频的自动同步;
手动切换指用户暂停、停止视音频模式并进入图文模式或者反之;自动切换指在视音频播放的同时用户滚动图文内容,播放器自动切换到图文阅读模式,停止视音频播放;
播放器得到完整视音频内容、图文内容与同步信息,或者通过流的方式获取视音频内容、图文内容与同步信息;
用户可以自主选择、设置,或者由播放器指定,打开视音频和图文内容的时候进入播放器的某个模式;
在视音频播放模式下用户可以通过停止、暂停视音频播放自动切换到图文模式,显示图文内容并定位到与视音频停止、暂停位置对应的位置,方便用户从该处阅读;或者通过主动切换到图文模式,这时候视音频播放可以根据播放器中的设置进入图文阅读模式显示图文内容并定位到与视音频停止、暂停位置对应的位置,或者进入混合模式;
在混合模式中,用户可以拖动视音频播放进度,同时图文内容与视音频播放进度保持同步滚动;用户也可以滚动图文内容,视音频播放进度与图文内容保持同步;用户也可以暂停、停止播放进入图文模式,或者关闭图文显示进入视音频模式;
在图文模式中,用户可以滚动图文内容进行阅读,如果用户开始播放,播放器可以从当前显示的段、句子、图像、词等对应的视音频位置开始播放视音频内容。
用户打开播放器,从网络上流媒体服务器获得一本有声小说,其中包括音频内容,小说的文本和配图,同步信息等。用户开始播放音频内容,边开车边听播放的内容。到达目的地后,用户停车休息,该小说没有播放完,因为播放的速度比阅读的速度慢,用户想阅读剩下的部分,于是停止视音频的播放,此时播放器自动切换到图文模式,用户从最后听的地方开始快速阅读图文内容。10分钟后,还没有阅读完该小说,用户需要继续开车,播放器检测到车速大于0以后自动从图文模式转入视音频模式,从正在阅读的段落开始听。这样用户就用听和读结合的方式欣赏完该小说。
实施例2:本实施例的一种视音频及图文同步播放方法,除了实施例1所包含的模式以外,播放设备还支持音频模式,音频模式下只播放音频内容,播放设备的屏幕不显示视频内容和图文内容。播放设备与汽车的车身控制器连接,当检测到汽车的车速不为0时,如果当前的模式为图文模式或者视音频模式或者混合模式,则自动切换到音频模式,防止驾驶员分散注意力到播放设备的屏幕上,最大程度提高行车安全。当车速重新变为0并且超过30秒以后,播放设备自动从音频模式切换到之前的模式,驾驶员可以继续观看。在不同模式之间切换时,所播放的内容保存同步,即切换以后进度与切换之间的进度相同。
本文中所描述的具体实施例仅仅是对本发明精神作举例说明。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,但并不会偏离本发明的精神或者超越所附权利要求书所定义的范围。
尽管本文较多地使用了播放模式、同步等术语,但并不排除使用其它术语的可能性。使用这些术语仅仅是为了更方便地描述和解释本发明的本质;把它们解释成任何一种附加的限制都是与本发明精神相违背的。

Claims (8)

1.一种视音频及图文同步播放方法,其特征在于,首先通过编译系统建立视音频内容和图文内容之间的同步关系,使视音频的帧和图文的页码、段落及句子对应,然后将所述的同步关系作为播放的控制指令和视音频内容、图文内容打包形成一个独立的媒体包文件;播放器从媒体包文件中解出视音频内容、图文内容和控制指令,并按照用户选择的播放模式进行播放,播放模式包括视音频模式和图文模式,当用户观看过程中切换播放模式时,切换后的内容的播放点为与切换前的内容对应的点;
在视音频播放模式下用户可以通过停止、暂停视音频播放自动切换到图文模式,显示图文内容并定位到与视音频停止、暂停位置对应的位置;
播放模式还包括混合模式,混合模式下播放设备的屏幕分成两部分,一部分显示视频内容,另一部分显示图文内容,同时播放设备的扬声器播放音频内容,图文内容随着视音频内容的播放而滚动或翻页,当用户拖动视音频的进度条时,图文内容也作相应的滚动或翻页以与视音频内容保持同步,当用户滚动或翻页图文内容时,视音频也作相应的快进或快退以与图文内容保持同步。
2.根据权利要求1所述的一种视音频及图文同步播放方法,其特征在于,在混合模式下,当用户暂停视音频的播放时,图文内容的自动滚动及翻页也停止。
3.根据权利要求2所述的一种视音频及图文同步播放方法,其特征在于,当用户从图文模式切换到混合模式时,播放设备的屏幕分为两个部分,一部分显示图文内容,所显示的图文内容的位置与切换前一致,另一部分显示视频内容,所显示的视频内容与当前显示的图文内容同步,播放设备的扬声器开始播放与视频内容对应的音频。
4.根据权利要求2所述的一种视音频及图文同步播放方法,其特征在于,当用户从视音频模式切换到混合模式时,播放设备的屏幕分为两个部分,一部分显示视频内容,所显示的视频内容的位置与切换前一致,另一部分显示图文内容,所显示的图文内容与当前显示的图文内容同步,播放设备的扬声器继续播放音频不作改变。
5.根据权利要求2所述的一种视音频及图文同步播放方法,其特征在于,当用户从混合模式切换到视音频模式时,播放设备的屏幕的两个部分合为一个部分,并继续播放视频内容,同时播放设备的扬声器继续播放音频不作改变。
6.根据权利要求2所述的一种视音频及图文同步播放方法,其特征在于,当用户从混合模式切换到图文模式时,播放设备的屏幕的两个部分合为一个部分,并继续播放图文内容,并且图文内容停止滚动及翻页,同时播放设备的扬声器停止播放音频。
7.根据权利要求1到6中的任意一项所述的一种视音频及图文同步播放方法,其特征在于,当播放设备检测到车辆速度大于0时,如果当前播放模式为混合模式或图文模式,则自动切换为视音频模式。
8.根据权利要求1到6中的任意一项所述的一种视音频及图文同步播放方法,其特征在于,所述播放模式还包括音频模式,音频模式下播放设备的屏幕不显示任何内容,播放设备的扬声器播放音频内容,当播放设备检测到车辆速度大于0时,如果当前播放模式为混合模式或图文模式或视音频模式,则自动切换为音频模式。
CN201210237586.4A 2012-07-11 2012-07-11 一种视音频及图文同步播放方法 Active CN102842326B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210237586.4A CN102842326B (zh) 2012-07-11 2012-07-11 一种视音频及图文同步播放方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210237586.4A CN102842326B (zh) 2012-07-11 2012-07-11 一种视音频及图文同步播放方法

Publications (2)

Publication Number Publication Date
CN102842326A CN102842326A (zh) 2012-12-26
CN102842326B true CN102842326B (zh) 2015-11-04

Family

ID=47369605

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210237586.4A Active CN102842326B (zh) 2012-07-11 2012-07-11 一种视音频及图文同步播放方法

Country Status (1)

Country Link
CN (1) CN102842326B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150043745A1 (en) * 2013-08-12 2015-02-12 GM Global Technology Operations LLC Methods, systems and apparatus for providing audio information and corresponding textual information for presentation at an automotive head unit
CN104376001B (zh) * 2013-08-13 2019-06-25 腾讯科技(深圳)有限公司 一种ppt播放方法及装置
CN103489424B (zh) * 2013-10-08 2016-01-13 东南大学 一种图文视频混合显示驱动器的实现方法
CN104581320A (zh) * 2013-10-16 2015-04-29 中兴通讯股份有限公司 一种切换播放模式的方法、装置和终端
CN105185125A (zh) * 2015-07-27 2015-12-23 苏州宏展信息科技有限公司 基于速度检测的车用播放方法
CN105139873A (zh) * 2015-07-27 2015-12-09 苏州宏展信息科技有限公司 基于速度检测的车用播放器
US10952054B2 (en) * 2015-10-09 2021-03-16 Ford Global Technologies, Llc Vehicle based content sharing
CN105635775B (zh) * 2015-12-30 2019-09-24 惠州Tcl移动通信有限公司 一种移动终端视频播放的节电方法、系统及移动终端
CN105930059A (zh) * 2016-04-20 2016-09-07 网易(杭州)网络有限公司 一种移动终端的显示方法和装置
CN106131621A (zh) * 2016-06-29 2016-11-16 乐视控股(北京)有限公司 一种调整车载视频播放的方法和装置
CN106331878A (zh) * 2016-08-30 2017-01-11 北京奇艺世纪科技有限公司 一种视频片段和电子书片段切换展示方法及装置
CN106341552A (zh) * 2016-10-24 2017-01-18 北京网梯科技发展有限公司 移动终端播放教学视频的方法及装置
CN108696489B (zh) * 2017-04-11 2021-02-02 腾讯科技(北京)有限公司 媒体信息的播放方法和装置
CN107357494B (zh) * 2017-07-05 2020-06-02 广州阿里巴巴文学信息技术有限公司 数据处理方法、装置和终端设备
CN109766305A (zh) * 2018-12-11 2019-05-17 中新金桥数字科技(北京)有限公司 基于Android系统的Epub电子书文本与音视频对照阅读方法及系统
CN112397104B (zh) * 2020-11-26 2022-03-29 北京字节跳动网络技术有限公司 音频与文本的同步方法、装置、可读介质和电子设备
CN113436604B (zh) * 2021-06-22 2022-11-29 北京百度网讯科技有限公司 播报内容的方法及装置、电子设备和存储介质
CN115080172A (zh) * 2022-07-20 2022-09-20 灵智信息服务(深圳)有限公司 图文数据集的浏览方法、计算机设备、存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101052105A (zh) * 2006-04-03 2007-10-10 广州市纽帝亚资讯科技有限公司 一种视频相关信息表示方法及其播放系统
CN101751967A (zh) * 2008-12-05 2010-06-23 康佳集团股份有限公司 多媒体文件制作及播放方法、多媒体文件制作装置、播放器
CN101833876A (zh) * 2009-03-09 2010-09-15 索尼公司 具有增强的特征的电子书

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7239842B2 (en) * 2002-05-22 2007-07-03 Thomson Licensing Talking E-book

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101052105A (zh) * 2006-04-03 2007-10-10 广州市纽帝亚资讯科技有限公司 一种视频相关信息表示方法及其播放系统
CN101751967A (zh) * 2008-12-05 2010-06-23 康佳集团股份有限公司 多媒体文件制作及播放方法、多媒体文件制作装置、播放器
CN101833876A (zh) * 2009-03-09 2010-09-15 索尼公司 具有增强的特征的电子书

Also Published As

Publication number Publication date
CN102842326A (zh) 2012-12-26

Similar Documents

Publication Publication Date Title
CN102842326B (zh) 一种视音频及图文同步播放方法
US8472779B2 (en) Concurrently displaying multiple trick streams for video
US20150128163A1 (en) Coordinated second-screen advertisement
JP4679647B2 (ja) 映像音声再生装置および映像音声再生方法
US8931024B2 (en) Receiving apparatus and subtitle processing method
WO2012103267A3 (en) Digital asset management, authoring, and presentation techniques
US9071788B2 (en) Video vehicle entertainment device with driver safety mode
CN103559902B (zh) 移动终端设备与车载影音系统之间的交互控制的方法
US8655157B2 (en) Content reproduction apparatus and content reproduction system
CN106028078A (zh) 个性化内容制作方法、装置以及播放方法、装置
RU2295781C2 (ru) Носитель данных, содержащий интерактивный графический поток для изменения состояния воспроизведения аудио/видео данных, способ и устройство воспроизведения
CN103412702B (zh) 用户进入频道的展示方法和系统
CN103986961B (zh) 一种基于qnx车载系统实现画中画的方法和装置
JP2013046198A (ja) テレビ視聴装置
JP4846022B2 (ja) 再生装置、再生方法、再生プログラムおよびコンピュータに読み取り可能な記録媒体
CN102665051A (zh) 基于嵌入式系统的播放终端及其字幕显示方法、系统
CN101859582A (zh) 一种多个窗口播放音视频的方法和装置
JP2012019386A (ja) 再生装置、再生方法、およびプログラム
CN112040288B (zh) 一种多媒体系统
CN105895125A (zh) 多媒体播放状态切换方法、装置以及车载播放器
WO2002049354A1 (en) Content searching/presenting system and method, and storage medium
CN103745582B (zh) 移动终端与车机的互联方法及一种车机
JP2007335006A (ja) 車両用コンテンツ再生装置
WO2013088760A1 (ja) コンテンツ再生装置、その制御方法および制御プログラム、並びにコンテンツ表示制御装置
CN203340192U (zh) 客车视听播放系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee
CP03 Change of name, title or address

Address after: 310052, Zhejiang, Hangzhou province Binjiang District Long River Street No. 399, No. 3, four, five floor

Patentee after: Hangzhou grandwell Polytron Technologies Inc

Address before: Hangzhou City, Zhejiang province Binjiang District 310053 Spring Road No. 1517 Kim Science Park building C

Patentee before: Hangzhou Linker Digital Technology Co., Ltd.