CN107657973B - 文本及音频混合显示方法、装置、终端设备及存储介质 - Google Patents
文本及音频混合显示方法、装置、终端设备及存储介质 Download PDFInfo
- Publication number
- CN107657973B CN107657973B CN201710903447.3A CN201710903447A CN107657973B CN 107657973 B CN107657973 B CN 107657973B CN 201710903447 A CN201710903447 A CN 201710903447A CN 107657973 B CN107657973 B CN 107657973B
- Authority
- CN
- China
- Prior art keywords
- reading
- text
- audio
- playing
- mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000004590 computer program Methods 0.000 claims description 21
- 238000012790 confirmation Methods 0.000 claims description 7
- 230000001360 synchronised effect Effects 0.000 claims description 5
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000013467 fragmentation Methods 0.000 description 5
- 238000006062 fragmentation reaction Methods 0.000 description 5
- 230000004438 eyesight Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
Landscapes
- Toys (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种文本及音频混合显示方法，包括：获取第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面；获取用户选择的阅读模式；当所述阅读模式为听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置；其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系；从所述第一播放位置播放文本内容。本发明还提供了一种文本及音频混合显示装置、终端设备及存储介质，准确定位用户阅读或听书的位置，使用户在再次进入时准确跳转到上次阅读或听书位置，并在该位置自由选择接下来的阅读方式，极大方便用户，提高用户体验。
Description
技术领域
本发明涉及计算机领域，尤其涉及一种文本及音频混合显示方法、装置、终端设备及存储介质。
背景技术
在中国经济高度发展的当下，各个阶层对于阅读的需求，也是逐步旺盛的，由中国新闻出版研究院组织实施的第十四次全国国民阅读调查结果于4月18日发布。数据显示，过去一年中，我国成年国民数字化阅读率增长显著。其中，成年国民人均每天手机接触时长为74.4分钟，同比增长19.6％。报告显示，2016年我国成年国民的网络在线阅读接触率和手机阅读接触率有所上升，其他数字化阅读方式的接触率有所下降。而且现代人们在工作学习的过程中存在较多的碎片化时间，人们大多希望高效利用自己的碎片化时间，因此在线碎片化阅读的需求日益增加，现有的阅读应用中，或全部只能通过阅读的方式，或全部只能通过听书的方式，上述阅读应用功能比较单一，没有供用户自由选择的机会，用户体验不佳，或存在有阅读和听书两种应用的阅读应用，但听书只有全部章节的阅读，若用户下次进入选择听书的方式只能选择章节从头开始然后需要用户手动自行调节至上次听书位置，造成用户的极大不方便，且操作繁琐，用户体验不佳。
发明内容
针对上述问题，本发明的目的在于提供一种文本及音频混合显示方法、装置、终端设备及存储介质，准确定位用户阅读或听书的位置，使用户在再次进入时准确跳转到上次阅读或听书位置，并在该位置自由选择接下来的阅读方式，极大方便用户，提高用户体验。
本发明提供了一种文本及音频混合显示方法，包括以下步骤：
获取第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面；
获取用户选择的阅读模式；
当所述阅读模式为听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置；其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系；
从所述第一播放位置播放文本内容。
优选地，还包括：
当所述阅读模式为听书模式且监听到阅读模式切换指令时，获取所述第一音频的暂停播放位置；
当可以从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中与所述暂停播放位置完全对应的第二阅读位置；
当无法从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中存储的与所述暂停播放位置最近的播放位置对应的阅读位置作为第二阅读位置；其中，所述播放位置在整段音频中所处的位置在所述暂停播放位置之前；
显示与所述第二阅读位置对应的第二阅读页面。
优选地，所述从所述第一播放位置播放文本内容，具体包括：
从所述第一播放位置播放文本内容并同步标识识别所述第一音频对应的文本信息。
则所述文本及音频混合显示方法，还包括：
当所述阅读模式为听书模式且监听到阅读模式切换指令时，根据同步标识识别的所述文本信息获取第三阅读位置，显示与所述第三阅读位置对应的第三阅读页面。
优选地，所述阅读模式包括听书模式和文本阅读模式；
则所述文本及音频混合显示方法，还包括：
当所述阅读模式为文本阅读模式且监听到关闭所述第一阅读页面操作时，显示可移动标注线以使用户标记本次阅读的第四阅读位置；
接收所述第四阅读位置确认指令，根据所述可移动标注线获取并保存所述第四阅读位置。
优选地，所述阅读模式包括听书模式和文本阅读模式；
则所述文本及音频混合显示方法，还包括：
当所述阅读模式为文本阅读模式且监听到阅读模式切换指令时，显示可移动标注线以使用户标记本次阅读的第五阅读位置；
当无法从所述对应关系库中获取与所述第五阅读位置完全对应的第二播放位置时，获取所述对应关系库中存储的与所述第五阅读位置距离最近的阅读位置对应的播放位置作为第二播放位置；其中，所述阅读位置在整段文本中所处的位置在所述第五阅读位置之前；
从所述第二播放位置播放文本内容。
优选地，所述对应关系库用于存储音频的播放位置与对应的阅读文本的每行文字的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设段数的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设句数的起始阅读位置的对应关系。
优选地，还包括：
当所述阅读模式为听书模式时，接收语速选择指令，以用户选择的语速播放所述音频；或者，
当所述阅读模式为听书模式时，接收声调选择指令，以用户选择的声调播放所述音频；或者，
当所述阅读模式为听书模式时，接收音色选择指令，以用户选择的音色播放所述音频。
本发明还提供了一种文本及音频混合显示装置，包括：
第一阅读位置获取模块，用于获取第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面；
模式获取模块，用于获取用户选择的阅读模式；
第一播放位置获取模块，用于当所述阅读模式为听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置；其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系；
第一播放模块，用于从所述第一播放位置播放文本内容。
优选地，还包括：
暂停位置获取模块，用于当所述阅读模式为听书模式且监听到阅读模式切换指令时，获取所述第一音频的暂停播放位置；
第二阅读位置获取模块，用于当可以从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中与所述暂停播放位置完全对应的第二阅读位置；
第一模糊获取模块，用于当无法从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中存储的与所述暂停播放位置最近的播放位置对应的阅读位置作为第二阅读位置；其中，所述播放位置在整段音频中所处的位置在所述暂停播放位置之前；
第一显示模块，用于显示与所述第二阅读位置对应的第二阅读页面。
优选地，所述第一播放模块，具体包括：
从所述第一播放位置播放文本内容并同步标识识别所述第一音频对应的文本信息。
则所述文本及音频混合显示装置，还包括：
第三阅读位置获取模块，用于当所述阅读模式为听书模式且监听到阅读模式切换指令时，根据同步标识识别的所述文本信息获取第三阅读位置，显示与所述第三阅读位置对应的第三阅读页面。
优选地，所述阅读模式包括听书模式和文本阅读模式；
则所述文本及音频混合显示装置，还包括：
第四阅读位置获取模块，用于当所述阅读模式为文本阅读模式且监听到关闭所述第一阅读页面操作时，显示可移动标注线以使用户标记本次阅读的第四阅读位置；
保存模块，用于接收所述第四阅读位置确认指令，根据所述可移动标注线获取并保存所述第四阅读位置。
优选地，所述阅读模式包括听书模式和文本阅读模式；
则所述文本及音频混合显示装置，还包括：
第五阅读位置获取模块，用于当所述阅读模式为文本阅读模式且监听到阅读模式切换指令时，显示可移动标注线以使用户标记本次阅读的第五阅读位置；
第二模糊获取模块，用于当无法从所述对应关系库中获取与所述第五阅读位置完全对应的第二播放位置时，获取所述对应关系库中存储的与所述第五阅读位置距离最近的阅读位置对应的播放位置作为第二播放位置；其中，所述阅读位置在整段文本中所处的位置在所述第五阅读位置之前；
第二播放模块，用于从所述第二播放位置播放文本内容。
优选地，所述对应关系库用于存储音频的播放位置与对应的阅读文本的每行文字的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设段数的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设句数的起始阅读位置的对应关系。
优选地，还包括：
语速切换模块，用于当所述阅读模式为听书模式时，接收语速选择指令，以用户选择的语速播放所述音频；或者，
声调切换模块，用于当所述阅读模式为听书模式时，接收声调选择指令，以用户选择的声调播放所述音频；或者，
音色切换模块，用于当所述阅读模式为听书模式时，接收音色选择指令，以用户选择的音色播放所述音频。
本发明还提供了一种文本及音频混合显示终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现上述中任意一项所述的文本及音频混合显示方法。
本发明还提供了一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如上述中任意一项所述的文本及音频混合显示方法。
本发明提供了一种文本及音频混合显示方法、装置、终端设备及存储介质，在用户再次进入本平台进行阅读时定位上次阅读的第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面，并获取用户选择的阅读模式，当用户选择听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置并从所述第一播放位置播放文本内容，准确定位用户阅读或听书的位置，使用户在再次进入时准确跳转到上次阅读或听书位置，并根据具体的情景在该位置自由选择接下来的阅读方式，当用户选择听书模式时，另一方面也减少了读书时视力的劳累，保护视力并且可以同时进行其他工作或活动，且多模式阅读方式的选择也使用户利用各种碎片化时间进行提升，提高用户体验。
附图说明
为了更清楚地说明本发明的技术方案，下面将对实施方式中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的一种文本及音频混合显示方法的流程示意图。
图2是本发明中用户在进入阅读平台后准备进入阅读的示意图。
图3是本发明中用户选择阅读书目的示意图。
图4是本发明第六实施例提供的一种文本及音频混合显示装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1，本发明第一实施例提供了一种文本及音频混合显示方法，其可由终端设备来执行，并包括以下步骤：
S10，获取第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面。
在本发明实施例中，所述终端设备可为移动终端(如智能手机、智能平板)、也可为台式机、笔记本电脑等，本发明不做具体限定。
在本发明实施例中，在用户再次进入该本台进行阅读时，请参阅图2，即用户点击“开始阅读”的虚拟按键时，所述终端设备定位用户上次结束阅读保存的第一阅读位置，获取所述第一阅读位置的相关信息，然后跳转到所述第一阅读位置所在的第一阅读页面供用户进行阅读，避免用户需要手动翻到上次阅读位置，极大方便用户。
需要说明的是，若用户在进入本平台进行阅读时，所述移动终端没有检测到用户上次结束阅读保存的阅读位置，则用户为首次进入本平台进行阅读状态或者已结束上一本书的阅读还未选择下一本书的阅读状态，请参阅图3，此时所述终端设备以书页形式展示各本书籍的目录基础内容供用户进行选择。
S20，获取用户选择的阅读模式。
在本发明实施例中，所述阅读模式包括听书模式和文本阅读模式，在用户进入上次阅读位置对应的阅读页面后，所述终端设备自动弹出阅读模式选择页面供用户选择，或者用户终端手动自行进行阅读模式选择。当用户选择文本阅读模式进行阅读时，阅读页面不做任何变化，供用户进行阅读；当然，用户为了自己的阅读习惯，可进行字号、行距、边距、翻页方式、背景或亮度中任意一种的设置，本发明对此不做任何限制。
S30，当所述阅读模式为听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置；其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系。
在本发明实施例中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系，当用户选择的阅读模式为听书模式时，所述终端设备从音频库中查找所述第一阅读位置对应的阅读文本对应的第一音频，再从所述对应关系库中查找与所述第一阅读位置对应的第一音频的第一播放位置。
在本发明实施例中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的每行文字的起始阅读位置的对应关系；或者所述关系库用于存储音频的播放位置与对应的阅读文本的预设段数的起始阅读位置的对应关系；或者所述关系库用于存储音频的播放位置与对应的阅读文本的预设句数的起始阅读位置的对应关系；其中，所述预设段数及预设句数可依据具体阅读情况进行设置，例如可以是1段、2句或者2段等等。则当所述终端设备无法从所述对应关系库中获取与所述第一阅读位置完全对应的第一播放位置时，所述终端设备获取所述对应关系库中存储的与所述第一阅读位置距离最近的阅读位置对应的播放位置作为第一播放位置，需要满足一个要求是所述阅读位置在整段阅读文本中所处的位置在所述第一阅读位置之前，这样才能保证用户不会漏了某一段信息，保证用户接收信息的完整性。
S40，从所述第一播放位置播放文本内容。
在本发明实施例中，在用户选择听书模式后，所述用户终端获取相应的音频的播放位置，从所述第一播放位置开始播放文本内容。其中，所述终端设备可接收语速选择指令，以用户选择的语速播放所述音频；所述终端设备也可接收声调选择指令，以用户选择的声调播放所述音频；或者，所述终端设备也可接收音色选择指令，以用户选择的音色播放所述音频。需要说明的是，当用户选择听书模式时，页面以音频播放页面展示或者阅读文本页面展示，本发明对此不做任何限定。
综上所述，本发明提供了一种文本及音频混合显示方法在用户再次进入本平台进行阅读时定位上次阅读的第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面，并获取用户选择的阅读模式，当用户选择听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置并从所述第一播放位置播放文本内容，准确定位用户阅读或听书的位置，使用户在再次进入时准确跳转到上次阅读或听书位置，并根据具体的情景在该位置自由选择接下来的阅读方式，当用户选择听书模式时，另一方面也减少了读书时视力的劳累，保护视力并且可以同时进行其他工作或活动，且多模式阅读方式的选择也使用户利用各种碎片化时间进行提升，提高用户体验。
为了便于对本发明的理解，下面将对本发明的一些优选实施例做更进一步的描述。
本发明第二实施例：
在本发明第一实施例的基础上，还包括：
当所述阅读模式为听书模式且监听到阅读模式切换指令时，获取所述第一音频的暂停播放位置。
在本发明实施例中，当用户想要从听书模式切换为文本阅读模式时，此时应该暂停正在播放的第一音频再进行阅读模式的切换，所述设备终端获取正在播放的第一音频的暂停播放位置，或者用户直接进行阅读模式的切换，所述设备终端监听到阅读模式切换指令后自动暂停播放第一音频并获取所述第一音频的暂停播放位置，以便根据所述暂停播放位置在所述对应关系库中找到相应的阅读位置。
当可以从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中与所述暂停播放位置完全对应的第二阅读位置。
在本发明实施例中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的每行文字的起始阅读位置的对应关系，所述设备终端根据所述暂停播放位置从对应关系库中查找与所述暂停播放位置对应的第二阅读位置，当可以从所述对应关系库直接找到完全对应的第二阅读位置时，直接获取所述第二阅读位置。
当无法从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中存储的与所述暂停播放位置最近的播放位置对应的阅读位置作为第二阅读位置；其中，所述播放位置在整段音频中所处的位置在所述暂停播放位置之前。
在本发明实施例中，当所述设备终端无法从所述对应关系库中找到与所述暂停播放位置完全对应的第二阅读位置时，则所述终端设备从所述对应关系库获取与所述暂停播放位置属于同一音频段且播放位置在所述暂停播放位置之前的且距离所述暂停播放位置最近的播放位置，获取所述播放位置对应的阅读位置作为所述第二阅读位置，这样才能保证用户不会漏了某一段信息，保证用户接收信息的完整性。
显示与所述第二阅读位置对应的第二阅读页面。
在本发明实施例中，所述设备终端在获取所述暂停播放位置的完全对应或最接近的第二阅读位置后，显示与所述第二阅读位置对应的第二阅读页面以供切换阅读模式的用户进行阅读。
本发明第三实施例：
所述S40，具体包括：
从所述第一播放位置播放文本内容并同步标识识别所述第一音频对应的文本信息。
则在本发明第一实施例的基础上，还包括：
当所述阅读模式为听书模式且监听到阅读模式切换指令时，根据同步标识识别的所述文本信息获取第三阅读位置，显示与所述第三阅读位置对应的第三阅读页面。
在本发明实施例中，所述设备终端在进入听书模式开始播放音频文件时同步标识识别所述音频文件对应的文本信息，所述音频文件播放到哪里，所述设备终端使用语音识别技术进行识别并在所述音频文件对应的文本文件上进行同步标识，则用户无论何时想要转换阅读模式，所述设备终端都能随时获取到音频文件的暂停播放位置对应的文本的阅读位置，而不需要先从对应关系库中查找相应的对应关系再获取对应的阅读位置，提高了处理效率。
本发明第四实施例：
在本发明第一实施例的基础上，还包括：
当所述阅读模式为文本阅读模式且监听到关闭所述第一阅读页面操作时，显示可移动标注线以使用户标记本次阅读的第四阅读位置。
在本发明实施例中，当用户选择文本阅读模式进行阅读并且用户在结束阅读想要离开本阅读平台时，所述设备终端监听到用户准备离开的操作，自动显示可移动标注线，用户使用可移动标注线标注本次在阅读平台的第一阅读页面上读到哪一行，在标注确认后离开本阅读平台；其中，所述可移动标注线可以通过颜色标识划分状态，例如未确定阅读位置前的可移动标准线为蓝色，在客户确认阅读位置后的所述可移动标注线为红色。
接收所述第四阅读位置确认指令，根据所述可移动标注线获取并保存所述第四阅读位置。
在本发明实施例中，所述设备终端在接收到用户根据所述可移动标注线标注第四阅读位置的确认指令后，根据所述可移动标注线获取并保存所述第四阅读位置以使用户在下次进入本阅读平台进行阅读时直接定位到该阅读位置，减少用户操作步骤。
需要说明的是，当所述阅读模式为听书模式且监听到用户关闭音频离开本阅读平台的操作时，获取所述音频的关闭位置，从所述对应关系库中找到所述关闭位置完全对应或最接近的阅读位置，获取并保存该阅读位置以使用户在下次进入本阅读平台进行阅读时直接定位到该阅读位置。
本发明第五实施例：
在本发明第一实施例的基础上，还包括：
当所述阅读模式为文本阅读模式且监听到阅读模式切换指令时，显示可移动标注线以使用户标记本次阅读的第五阅读位置。
在本发明实施例中，当用户想要从文本阅读模式切换为听书模式时，所述设备终端监听到该阅读模式切换指令，显示可移动标注线，用户使用可移动标注线标注本次在阅读平台的阅读页面上读到哪一行并在标注后进行第五阅读位置的确认，所述设备终端在接收到确认指令后，从所述对应关系库中找到所述第五阅读位置对应的第二播放位置，使该文本文件对应的音频文件从该第二播放位置进行播放。
当无法从所述对应关系库中获取与所述第五阅读位置完全对应的第二播放位置时，获取所述对应关系库中存储的与所述第五阅读位置距离最近的阅读位置对应的播放位置作为第二播放位置；其中，所述阅读位置在整段文本中所处的位置在所述第五阅读位置之前。
在本发明实施例中，与听书模式切换为文本阅读模式相对应，当所述设备终端无法从所述对应关系库中找到与所述第五阅读位置完全对应的第二播放位置时，则所述终端设备从所述对应关系库获取与所述第五阅读位置属于同一文本文件且阅读位置在所述第五阅读位置之前的距离所述第五阅读位置最近的阅读位置，获取所述阅读位置对应的播放位置作为所述第二播放位置，这样才能保证用户不会漏了某一段信息，保证用户接收信息的完整性。
从所述第二播放位置播放文本内容。
在本发明实施例中，所述设备终端在获取到文本文件的阅读位置完全对应或最接近的第二播放位置后，使该文本文件对应的音频文件从该第二播放位置进行播放。
请参阅图4，本发明第六实施例还提供了一种文本及音频混合显示装置，包括：
第一阅读位置获取模块10，用于获取第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面。
模式获取模块20，用于获取用户选择的阅读模式。
第一播放位置获取模块30，用于当所述阅读模式为听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置；其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系。
第一播放模块40，用于从所述第一播放位置播放文本内容。
优选地，还包括：
暂停位置获取模块，用于当所述阅读模式为听书模式且监听到阅读模式切换指令时，获取所述第一音频的暂停播放位置。
第二阅读位置获取模块，用于当可以从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中与所述暂停播放位置完全对应的第二阅读位置。
第一模糊获取模块，用于当无法从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中存储的与所述暂停播放位置最近的播放位置对应的阅读位置作为第二阅读位置；其中，所述播放位置在整段音频中所处的位置在所述暂停播放位置之前。
第一显示模块，用于显示与所述第二阅读位置对应的第二阅读页面。
优选地，所述第一播放模块，具体包括：
从所述第一播放位置播放文本内容并同步标识识别所述第一音频对应的文本信息。
则所述文本及音频混合显示装置，还包括：
第三阅读位置获取模块，用于当所述阅读模式为听书模式且监听到阅读模式切换指令时，根据同步标识识别的所述文本信息获取第三阅读位置，显示与所述第三阅读位置对应的第三阅读页面。
优选地，所述阅读模式包括听书模式和文本阅读模式。
则所述文本及音频混合显示装置，还包括：
第四阅读位置获取模块，用于当所述阅读模式为文本阅读模式且监听到关闭所述第一阅读页面操作时，显示可移动标注线以使用户标记本次阅读的第四阅读位置。
保存模块，用于接收所述第四阅读位置确认指令，根据所述可移动标注线获取并保存所述第四阅读位置。
优选地，所述阅读模式包括听书模式和文本阅读模式。
则所述文本及音频混合显示装置，还包括：
第五阅读位置获取模块，用于当所述阅读模式为文本阅读模式且监听到阅读模式切换指令时，显示可移动标注线以使用户标记本次阅读的第五阅读位置；
第二模糊获取模块，用于当无法从所述对应关系库中获取与所述第五阅读位置完全对应的第二播放位置时，获取所述对应关系库中存储的与所述第五阅读位置距离最近的阅读位置对应的播放位置作为第二播放位置；其中，所述阅读位置在整段文本中所处的位置在所述第五阅读位置之前。
第二播放模块，用于从所述第二播放位置播放文本内容。
优选地，所述对应关系库用于存储音频的播放位置与对应的阅读文本的每行文字的起始阅读位置的对应关系。
或者，所述关系库用于存储音频的播放位置与对应的阅读文本的预设段数的起始阅读位置的对应关系。
或者，所述关系库用于存储音频的播放位置与对应的阅读文本的预设句数的起始阅读位置的对应关系。
优选地，还包括：
语速切换模块，用于当所述阅读模式为听书模式时，接收语速选择指令，以用户选择的语速播放所述音频。
或者，声调切换模块，用于当所述阅读模式为听书模式时，接收声调选择指令，以用户选择的声调播放所述音频。
或者，音色切换模块，用于当所述阅读模式为听书模式时，接收音色选择指令，以用户选择的音色播放所述音频。
本发明第七实施例提供的文本及音频混合显示终端设备的示意图。该实施例的文本及音频混合显示终端设备包括：处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，例如文本及音频混合显示程序。所述处理器执行所述计算机程序时实现上述各个文本及音频混合显示方法实施例中的步骤，例如图1所示的步骤S10。或者，所述处理器执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能，例如第一播放位置获取模块30。
示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器中，并由所述处理器执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述文本及音频混合显示终端设备中的执行过程。
所述文本及音频混合显示终端设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述文本及音频混合显示终端设备可包括，但不仅限于，处理器、存储器。本领域技术人员可以理解，所述示意图仅仅是文本及音频混合显示终端设备的示例，并不构成对文本及音频混合显示终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述文本及音频混合显示终端设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述文本及音频混合显示终端设备的控制中心，利用各种接口和线路连接整个文本及音频混合显示终端设备的各个部分。
所述存储器可用于存储所述计算机程序和/或模块，所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现所述文本及音频混合显示终端设备的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、文本数据等)等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
其中，所述文本及音频混合显示终端设备集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
需说明的是，以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外，本发明提供的装置实施例附图中，模块之间的连接关系表示它们之间具有通信连接，具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。
Claims (7)
1.一种文本及音频混合显示方法，其特征在于，包括以下步骤：
获取第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面；
获取用户选择的阅读模式；
当所述阅读模式为听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置；其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系；
从所述第一播放位置播放文本内容，具体包括：从所述第一播放位置播放文本内容并同步标识识别所述第一音频对应的文本信息，则所述文本及音频混合显示方法，还包括：当所述阅读模式为听书模式且监听到阅读模式切换指令时，根据同步标识识别的所述文本信息获取第三阅读位置，显示与所述第三阅读位置对应的第三阅读页面；
当所述阅读模式为听书模式且监听到阅读模式切换指令时，获取所述第一音频的暂停播放位置；
当可以从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中与所述暂停播放位置完全对应的第二阅读位置；
当无法从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中存储的与所述暂停播放位置最近的播放位置对应的阅读位置作为第二阅读位置；其中，所述与所述暂停播放位置最近的播放位置在整段音频中所处的位置在所述暂停播放位置之前；
显示与所述第二阅读位置对应的第二阅读页；
其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的每行文字的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设段数的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设句数的起始阅读位置的对应关系。
2.根据权利要求1所述的文本及音频混合显示方法，其特征在于，所述阅读模式包括听书模式和文本阅读模式；
则所述文本及音频混合显示方法，还包括：
当所述阅读模式为文本阅读模式且监听到关闭所述第一阅读页面操作时，显示可移动标注线以使用户标记本次阅读的第四阅读位置；
接收所述第四阅读位置确认指令，根据所述可移动标注线获取并保存所述第四阅读位置。
3.根据权利要求1所述的文本及音频混合显示方法，其特征在于，所述阅读模式包括听书模式和文本阅读模式；
则所述文本及音频混合显示方法，还包括：
当所述阅读模式为文本阅读模式且监听到阅读模式切换指令时，显示可移动标注线以使用户标记本次阅读的第五阅读位置；
当无法从所述对应关系库中获取与所述第五阅读位置完全对应的第二播放位置时，获取所述对应关系库中存储的与所述第五阅读位置距离最近的阅读位置对应的播放位置作为第二播放位置；其中，所述与所述第五阅读位置距离最近的阅读位置在整段文本中所处的位置在所述第五阅读位置之前；
从所述第二播放位置播放文本内容。
4.根据权利要求1至3任意一项所述的文本及音频混合显示方法，其特征在于，还包括：
当所述阅读模式为听书模式时，接收语速选择指令，以用户选择的语速播放所述音频；或者，
当所述阅读模式为听书模式时，接收声调选择指令，以用户选择的声调播放所述音频；或者，
当所述阅读模式为听书模式时，接收音色选择指令，以用户选择的音色播放所述音频。
5.一种文本及音频混合显示装置，其特征在于，包括：
第一阅读位置获取模块，用于获取第一阅读位置，显示与所述第一阅读位置对应的第一阅读页面；
模式获取模块，用于获取用户选择的阅读模式；
第一播放位置获取模块，用于当所述阅读模式为听书模式时，从对应关系库中获取所述第一阅读位置对应的第一音频的第一播放位置；其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的阅读位置的对应关系；
第一播放模块，用于从所述第一播放位置播放文本内容，具体包括：从所述第一播放位置播放文本内容并同步标识识别所述第一音频对应的文本信息。
则所述文本及音频混合显示装置，还包括：
第三阅读位置获取模块，用于当所述阅读模式为听书模式且监听到阅读模式切换指令时，根据同步标识识别的所述文本信息获取第三阅读位置，显示与所述第三阅读位置对应的第三阅读页面；
暂停位置获取模块，用于当所述阅读模式为听书模式且监听到阅读模式切换指令时，获取所述第一音频的暂停播放位置。
第二阅读位置获取模块，用于当可以从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中与所述暂停播放位置完全对应的第二阅读位置。
第一模糊获取模块，用于当无法从所述对应关系库中获取与所述暂停播放位置完全对应的第二阅读位置时，获取所述对应关系库中存储的与所述暂停播放位置最近的播放位置对应的阅读位置作为第二阅读位置；其中，所述播放位置在整段音频中所处的位置在所述暂停播放位置之前。
第一显示模块，用于显示与所述第二阅读位置对应的第二阅读页面；
其中，所述对应关系库用于存储音频的播放位置与对应的阅读文本的每行文字的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设段数的起始阅读位置的对应关系；或者，
所述关系库用于存储音频的播放位置与对应的阅读文本的预设句数的起始阅读位置的对应关系。
6.一种文本及音频混合显示终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至4中任意一项所述的文本及音频混合显示方法。
7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1至4中任意一项所述的文本及音频混合显示方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710903447.3A CN107657973B (zh) | 2017-09-27 | 2017-09-27 | 文本及音频混合显示方法、装置、终端设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710903447.3A CN107657973B (zh) | 2017-09-27 | 2017-09-27 | 文本及音频混合显示方法、装置、终端设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107657973A CN107657973A (zh) | 2018-02-02 |
| CN107657973B true CN107657973B (zh) | 2020-05-08 |
Family
ID=61116224
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710903447.3A Active CN107657973B (zh) | 2017-09-27 | 2017-09-27 | 文本及音频混合显示方法、装置、终端设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107657973B (zh) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109766305A (zh) * | 2018-12-11 | 2019-05-17 | 中新金桥数字科技(北京)有限公司 | 基于Android系统的Epub电子书文本与音视频对照阅读方法及系统 |
| CN112182198A (zh) * | 2019-07-01 | 2021-01-05 | 腾讯科技（深圳）有限公司 | 一种信息同步方法、装置、电子设备以及存储介质 |
| CN110750230A (zh) * | 2019-09-30 | 2020-02-04 | 北京淇瑀信息科技有限公司 | 一种语音界面显示方法、装置及电子设备 |
| CN111125314B (zh) * | 2019-12-25 | 2020-11-10 | 掌阅科技股份有限公司 | 书籍查询页面的展示方法、电子设备及计算机存储介质 |
| CN113835669B (zh) * | 2020-06-24 | 2024-03-29 | 青岛海信移动通信技术有限公司 | 电子设备及其语音播报方法 |
| CN112990173B (zh) * | 2021-02-04 | 2023-10-27 | 上海哔哩哔哩科技有限公司 | 阅读处理方法、装置及系统 |
| CN113658458B (zh) * | 2021-08-20 | 2024-02-13 | 北京得间科技有限公司 | 对话小说的阅读处理方法、计算设备及存储介质 |
| CN114615612B (zh) * | 2022-01-26 | 2024-07-09 | 大连即时智能科技有限公司 | 文本与音频呈现处理方法及装置 |
| CN114595355B (zh) * | 2022-01-26 | 2024-07-23 | 大连即时智能科技有限公司 | 文本音频呈现方法及装置 |
| CN115426533A (zh) * | 2022-07-22 | 2022-12-02 | 北京多氪信息科技有限公司 | 一种音频数据的播放方法、装置及电子设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101833876A (zh) * | 2009-03-09 | 2010-09-15 | 索尼公司 | 具有增强的特征的电子书 |
| CN102119382A (zh) * | 2008-08-13 | 2011-07-06 | 惠普开发有限公司 | 用于对公开资料进行灵活集成访问的书签 |
| CN103703431A (zh) * | 2011-06-03 | 2014-04-02 | 苹果公司 | 自动创建文本数据与音频数据之间的映射 |
| CN104423868A (zh) * | 2013-09-04 | 2015-03-18 | 腾讯科技（深圳）有限公司 | 电子书阅读定位方法及装置 |
| CN104765714A (zh) * | 2014-01-08 | 2015-07-08 | 中国移动通信集团浙江有限公司 | 一种电子阅读与听书的切换方法及装置 |
| CN106354380A (zh) * | 2015-07-17 | 2017-01-25 | 阿里巴巴集团控股有限公司 | 阅读提示方法及装置 |
-
2017
- 2017-09-27 CN CN201710903447.3A patent/CN107657973B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102119382A (zh) * | 2008-08-13 | 2011-07-06 | 惠普开发有限公司 | 用于对公开资料进行灵活集成访问的书签 |
| CN101833876A (zh) * | 2009-03-09 | 2010-09-15 | 索尼公司 | 具有增强的特征的电子书 |
| CN103703431A (zh) * | 2011-06-03 | 2014-04-02 | 苹果公司 | 自动创建文本数据与音频数据之间的映射 |
| CN104423868A (zh) * | 2013-09-04 | 2015-03-18 | 腾讯科技（深圳）有限公司 | 电子书阅读定位方法及装置 |
| CN104765714A (zh) * | 2014-01-08 | 2015-07-08 | 中国移动通信集团浙江有限公司 | 一种电子阅读与听书的切换方法及装置 |
| CN106354380A (zh) * | 2015-07-17 | 2017-01-25 | 阿里巴巴集团控股有限公司 | 阅读提示方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107657973A (zh) | 2018-02-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107657973B (zh) | 文本及音频混合显示方法、装置、终端设备及存储介质 | |
| US9323756B2 (en) | Audio book and e-book synchronization | |
| CN108122161B (zh) | 一种商品推荐方法、装置、终端及可读存储介质 | |
| CN109842820B (zh) | 弹幕信息输入方法及装置、移动终端及可读存储介质 | |
| CN105843681B (zh) | 一种移动终端及其操作系统切换的方法 | |
| CN107967110A (zh) | 播放方法、播放装置、电子设备及计算机可读存储介质 | |
| CN108920070B (zh) | 基于异形显示屏的分屏方法、装置、存储介质及移动终端 | |
| US20170277382A1 (en) | Page switching method and device applied to electronic equipment | |
| CN106227483B (zh) | 一种显示控制方法及移动终端 | |
| US11209951B2 (en) | Method and apparatus for displaying application program, terminal device, and storage medium | |
| CN112115245A (zh) | 查询语句处理方法、装置、终端及存储介质 | |
| CN110708423A (zh) | 消息内容展示方法、装置及存储介质 | |
| CN105139848A (zh) | 数据转换方法和装置 | |
| US20200034101A1 (en) | Data displaying method and electronic device | |
| CN105678688B (zh) | 一种图片处理方法及装置 | |
| CN112688859B (zh) | 语音消息的发送方法、装置、电子设备及可读存储介质 | |
| CN110753246A (zh) | 视频播放方法、客户端、服务器及系统 | |
| CN109948155B (zh) | 一种多意图的选择方法及装置、终端设备 | |
| CN112114770A (zh) | 基于语音交互的界面引导方法、装置及设备 | |
| CN110290517B (zh) | 数字媒体无线wifi通信点读系统及方法 | |
| CN112990173B (zh) | 阅读处理方法、装置及系统 | |
| CN107203325B (zh) | 一种搜索方法以及装置、计算机装置、可读存储介质 | |
| CN112036149B (zh) | 一种文件编辑方法、装置、电子设备及存储介质 | |
| CN107786744A (zh) | 日期展示方法、装置、计算机装置及计算机可读存储介质 | |
| CN114116105A (zh) | 动态桌面的控制方法及装置、存储介质、电子装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP02 | Change in the address of a patent holder | ||
| CP02 | Change in the address of a patent holder |
Address after: 1402, building 1, Xunmei science and Technology Plaza, Yuehai street, Nanshan District, Shenzhen, Guangdong 518000 Patentee after: FORCHANGE TECHNOLOGY (SHENZHEN) Co.,Ltd. Address before: 518000 area a, 5th floor, metropolis famous garden, Baoan South Road, Guiyuan street, Luohu District, Shenzhen City, Guangdong Province Patentee before: FORCHANGE TECHNOLOGY (SHENZHEN) Co.,Ltd. |
|
| CP02 | Change in the address of a patent holder | ||
| CP02 | Change in the address of a patent holder |
Address after: 518000 27a, building 1, Xunmei science and Technology Plaza, No. 8, Keyuan Road, science and Technology Park community, Yuehai street, Nanshan District, Shenzhen, Guangdong Patentee after: FORCHANGE TECHNOLOGY (SHENZHEN) CO.,LTD. Address before: 1402, building 1, Xunmei science and Technology Plaza, Yuehai street, Nanshan District, Shenzhen, Guangdong 518000 Patentee before: FORCHANGE TECHNOLOGY (SHENZHEN) CO.,LTD. |
|
| CP02 | Change in the address of a patent holder | ||
| CP02 | Change in the address of a patent holder |
Address after: 518000 1901, Dachong Building, No. 2009, Shahe West Road, Dachong Community, Yuehai Street, Nanshan District, Shenzhen, Guangdong Province Patentee after: FORCHANGE TECHNOLOGY (SHENZHEN) CO.,LTD. Address before: 518000 27a, building 1, Xunmei science and Technology Plaza, No. 8, Keyuan Road, science and Technology Park community, Yuehai street, Nanshan District, Shenzhen, Guangdong Patentee before: FORCHANGE TECHNOLOGY (SHENZHEN) CO.,LTD. |