CN110727629A - 有声电子书的播放方法、电子设备及计算机存储介质 - Google Patents

有声电子书的播放方法、电子设备及计算机存储介质 Download PDF

Info

Publication number
CN110727629A
CN110727629A CN201910959910.5A CN201910959910A CN110727629A CN 110727629 A CN110727629 A CN 110727629A CN 201910959910 A CN201910959910 A CN 201910959910A CN 110727629 A CN110727629 A CN 110727629A
Authority
CN
China
Prior art keywords
entity
image information
electronic book
type
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910959910.5A
Other languages
English (en)
Other versions
CN110727629B (zh
Inventor
刘洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhangyue Technology Co Ltd
Original Assignee
Zhangyue Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhangyue Technology Co Ltd filed Critical Zhangyue Technology Co Ltd
Priority to CN201910959910.5A priority Critical patent/CN110727629B/zh
Publication of CN110727629A publication Critical patent/CN110727629A/zh
Application granted granted Critical
Publication of CN110727629B publication Critical patent/CN110727629B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/02—Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators
    • G06F15/025—Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators adapted to a specific application
    • G06F15/0291—Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators adapted to a specific application for reading, e.g. e-books
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/532—Query formulation, e.g. graphical querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54—Browsing; Visualisation therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • G11B2020/10546—Audio or video recording specifically adapted for audio data
    • G11B2020/10555—Audio or video recording specifically adapted for audio data wherein the frequency, the amplitude, or other characteristics of the audio signal is taken into account
    • G11B2020/10574—Audio or video recording specifically adapted for audio data wherein the frequency, the amplitude, or other characteristics of the audio signal is taken into account volume or amplitude

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Hardware Design (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种有声电子书的播放方法、电子设备及计算机存储介质，该方法包括：在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；在所述当前播放内容的播放过程中，同步展示所述实体图像信息。该方式能够在有声电子书的播放过程中同步展示实体图像信息，进而从视觉感官方面给予用户刺激，以使用户能够从听觉和视觉两方面了解书籍内容，从而使播放形式多样化，提升了阅读效果。

Description

有声电子书的播放方法、电子设备及计算机存储介质
技术领域
本发明涉及计算机领域，具体涉及一种有声电子书的播放方法、电子设备及计算机存储介质。
背景技术
目前，电子书应用得到了日益广泛的普及。为了方便用户读书，很多电子书应用都推出了有声电子书，以使传统的“看书”转变为“听书”。通过有声电子书，用户能够直接收听该电子书文本所对应的音频内容，从而既能够保护用户视力，防止视觉疲劳；又能够使用户在各种不便于阅读的情况下获取知识。
但是，现有技术中的上述方案至少存在下述缺陷：有声电子书的播放形式单一，仅仅通过播放按钮实现音频内容的持续播放，在播放过程中，用户只能从听觉方面了解书籍内容，无法通过其他感官方式更加全面地了解书籍内容。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的有声电子书的播放方法、电子设备及计算机存储介质。
根据本发明的一个方面，提供了一种有声电子书的播放方法，包括：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
根据本发明的另一方面，提供了一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
根据本发明的又一方面，提供了一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
在本发明提供的有声电子书的播放方法、电子设备及计算机存储介质中，能够在有声电子书的播放过程中确定当前播放内容中包含的目标实体，进而从图像数据库中获取与该目标实体相匹配的实体图像信息，并同步展示该实体图像信息。由此可见，本发明中的方式能够在有声电子书的播放过程中同步展示实体图像信息，进而从视觉感官方面给予用户刺激，以使用户能够从听觉和视觉两方面了解书籍内容，从而使播放形式多样化，提升了阅读效果。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了本发明一个实施例提供的有声电子书的播放方法的流程图；
图2示出了本发明另一个实施例提供的有声电子书的播放方法的流程图；
图3示出了根据本发明另一个实施例的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
实施例一
图1示出了本发明一个实施例提供的有声电子书的播放方法的流程图。如图1所示，该方法包括以下步骤：
步骤S110：在有声电子书的播放过程中，确定当前播放内容中包含的目标实体。
其中，在有声电子书的播放过程中，实时确定当前播放内容，并根据当前播放内容确定其中包含的目标实体。所谓目标实体是指：有声电子书中提到的人物、动物、植物、景物、物体等各类实体对象。实际上，本实施例中的目标实体的概念更加宽泛，甚至可以包括部分具有代表性的动作或事件等(如武侠人物的绝招动作)。
步骤S120：从图像数据库中获取与当前播放内容中包含的目标实体相匹配的实体图像信息。
其中，图像数据库可以通过各种类型的数据库或其他存储设备实现，具体用于存储与各个目标实体相匹配的实体图像信息。具体地，可以将电子书数据库中的全部有声电子书中的目标实体所匹配的实体图像信息均存储在同一个图像数据库中。或者，当电子书数据库中的有声电子书数量众多时，也可以设置多个分别对应于不同类型的有声电子书的图像数据库，或者将一个图像数据库进一步划分为多个存储空间，分别用于存储不同类型的有声电子书对应的实体图像信息，以提升匹配效率。
其中，在本实施例中，针对各个目标实体设置有对应的实体图像信息，以使该目标实体得以形象化。其中，一个目标实体可以设置有一个或多个实体图像信息。并且，实体图像信息既可以是静态图片信息，也可以是动态视频信息，本发明对此不做限定。
步骤S130：在当前播放内容的播放过程中，同步展示实体图像信息。
具体地，在当前播放内容的播放过程中，将该实体图像信息同步展示在播放界面中。具体实施时，可以在播放界面的上层覆盖一层图像视图，在该图像视图中展示该实体图像信息；或者，也可以将播放界面划分为第一区域以及第二区域，其中，第一区域用于展示播放按钮等控件，第二区域用于展示实体图像信息，本发明对具体实现细节不做限定。
由此可见，在本发明提供的有声电子书的播放方法中，能够在有声电子书的播放过程中确定当前播放内容中包含的目标实体，进而从图像数据库中获取与该目标实体相匹配的实体图像信息，并同步展示该实体图像信息。由此可见，本发明中的方式能够在有声电子书的播放过程中同步展示实体图像信息，进而从视觉感官方面给予用户刺激，以使用户能够从听觉和视觉两方面了解书籍内容，从而使播放形式多样化，提升了阅读效果。
实施例二
图2示出了本发明另一个实施例提供的有声电子书的播放方法的流程图。如图2所示，该方法包括以下步骤：
步骤S210：预先分析有声电子书的各个时间段所对应的目标实体。
其中，有声电子书在播放过程中能够在时间轴上同步显示时间进度信息，该时间进度信息能够表明当前播放内容在整个时间轴上对应的具体时间点。相应地，针对有声电子书的上述特点，可以预先分析有声电子书的各个时间段所对应的目标实体，并根据分析结果针对各个时间段配置对应的实体图像信息。
其中，目标实体主要是电子书中包含的有代表性的实体对象。考虑到电子书中的实体对象数量较多，为了从多个实体对象中挑选具有代表性且用户感兴趣的对象作为目标实体，可以通过如下方式实现：
首先，获取有声电子书的各个时间段所对应的文本信息，识别文本信息中包含的多个命名实体。其中，对于有原文的有声电子书而言，有声电子书的各个时间段所对应的文本信息可以直接根据电子书原文确定；对于无原文的有声电子书而言，有声电子书的各个时间段所对应的文本信息可以通过对当前时间段所播放的语音内容进行语音识别的方式得到。具体实施时，针对各个时间段所对应的文本信息进行分词处理，针对分词后得到的各个词语进行词性识别，并根据词性识别结果挑选其中的名词作为命名实体。
然后，根据各个命名实体在有声电子书中的出现频次和/或各个命名实体所对应的用户交互数据，从多个命名实体中提取目标实体。由于文本信息中包含的命名实体通常数量较多，因此，为了筛选用户感兴趣的实体，可以通过如下方式中的至少一种进行筛选：
在第一种方式中，统计各个命名实体在有声电子书中的出现频次，根据出现频次提取目标实体。例如，根据各个命名实体在有声电子书中的出现频次，提取出现频次较高的命名实体作为该时间段所对应的目标实体。其中，出现频次较高的命名实体往往为电子书中的重要内容，因此，将其筛选为目标实体有利于提升阅读效果。
在第二种方式中，统计各个命名实体所对应的用户交互数据的交互频次，根据交互频次提取目标实体。例如，根据各个命名实体所对应的用户交互数据，统计交互频次较高的命名实体，将其确定为目标实体。其中，交互频次较高，说明用户针对该命名实体的交互意愿较强烈，通常为用户感兴趣的内容，因此，将交互频次较高的命名实体提取为目标实体有助于展示用户感兴趣的内容。
在第三种方式中，确定各个命名实体所对应的用户交互数据的交互类型，提取用户交互数据的交互类型为预设交互类型的命名实体作为目标实体。其中，用户交互数据的交互类型包括评论类型、搜索类型、笔记类型、分享类型、收藏类型等，其中，预设交互类型可以包括：评论类型、分享类型、以及收藏类型等各类能够反映用户对其感兴趣的类型。由于预设交互类型能够反映用户的兴趣度，因此，通过该方式提取出的目标实体通常为用户喜爱的内容，展示该类内容的图像信息更能迎合用户需求。
另外，上述的三种方式既可以单独使用也可以结合使用。例如，可以预先针对各种交互类型设置不同的权重，然后，根据各个命名实体的交互类型对交互次数进行加权运算，以得到加权运算结果，根据加权运算结果的高低选择目标实体。
其中，有声电子书中的命名实体通常包括：人物角色实体、动植物实体、和/或非生物类实体等。相应地，有声电子书中的目标实体也包括：人物角色实体、动植物实体、和/或非生物类实体等。当目标实体为人物角色实体时，有些类型的电子书是由多个分别对应于不同的人物角色实体、且由不同朗读者提供的音频段组成的，此时，可以根据有声电子书的各个时间段的音频属性信息确定对应的人物角色实体。
步骤S220：根据分析结果针对各个时间段所对应的目标实体配置对应的实体图像信息，在图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息。
其中，分别针对各个时间段，为该时间段所对应的目标实体配置实体图像信息。例如，当该时间段所对应的目标实体为人物时，实体图像信息可以为由演员饰演的人物图片或卡通动画图片；当该时间段所对应的目标实体为动物时，实体图像信息可以为对应的动物照片或卡通图片。
具体实施时，实体图像信息可以是静态图片信息、动态图片信息、动画模型信息和/或视频信息等各种形式。例如，可以结合具体场景，针对同一有声电子书中的各个目标实体分别配置静态图片信息、动态图片信息、以及动画模型信息。在本实施例中，为了使展现效果更加多样化，实体图像信息的信息类型包括以下信息类型中的至少两种：静态图片类型、动态图片类型、以及动画模型类型。相应地，预先将有声电子书中的目标实体划分为至少两种实体类型，分别针对每种实体类型配置与该实体类型相匹配的信息类型。例如，可以将有声电子书中的目标实体划分为第一类实体、第二类实体以及第三类实体。其中，第一类实体的重要性最高，通常为电子书中的主要人物角色或重点描述对象，相应地，针对第一类实体配置动画模型类型的实体图像信息，由于动画模型能够根据需求定制，因此展示效果更佳。第二类实体的重要性略低，通常为电子书中的次要人物角色，相应地，针对第二类实体配置动态图片类型的实体图像信息。第三类实体的重要性最低，通常为电子书中的配角，相应地，针对第三类实体配置静态图片类型的实体图像信息，以节约数据流量、降低传输时延。总之，通过针对不同类型的目标实体配置不同类型的实体图像信息，能够凸显重要人物，满足用户针对不同级别的角色的不同阅读需求。具体实施时，可以根据各个目标实体的加权运算结果划分实体类型，也可以根据目标实体的实体属性划分实体类型，如人物类实体为第一类实体，动物类实体为第二类实体等。总之，本发明不限定目标实体的类型划分方式。
另外，除了根据目标实体的实体类型为其配置对应的信息类型的实体图像信息之外，针对同一个目标实体，还可以进一步为其配置多个相同信息类型或不同信息类型的实体图像信息，以便根据具体场景灵活展示与当前场景相匹配的实体图像信息。例如，在图像数据库中，针对同一目标实体的实体名称，配置多个与该目标实体的实体名称相匹配的候选图像信息，并根据目标实体的实体属性信息，如动作、表情、情绪、和/或事件类型等，从多个候选图像信息中选择一个进行展示。
另外，在本实施例中，进一步在图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息。也就是说，在本步骤中，预先建立了各个时间段的时间标记(如时间戳、时间线等)与该时间段内的目标实体所对应的实体图像信息之间的映射关系，以便在后续步骤中基于该映射关系快速展示实体图像信息。
步骤S230：在有声电子书的播放过程中，确定当前播放内容中包含的目标实体。
由于上一步骤中已经建立了各个时间段的时间标记与该时间段内的目标实体所对应的实体图像信息之间的映射关系，因此，在本步骤中，可以直接基于当前播放内容所在时间段的时间标记，确定当前播放内容中包含的目标实体。
当然，在本发明其他的实施例中，在确定当前播放内容中包含的目标实体时，也可以实时获取当前播放内容，并针对当前播放内容进行实时分析，以确定其中包含的目标实体。
例如，在本发明的一个可选实施例中，获取与当前播放内容相对应的音频属性信息，根据音频属性信息确定与当前播放内容相对应的人物角色实体；其中，音频属性信息包括：语调、声纹、以及高低音。在该可选实施例中，有声电子书由多个分别对应于不同的人物角色实体、且由不同朗读者提供的音频段组成。相应地，通过分析各个音频段的音频属性信息，能够快速识别出朗读者的声音，从而根据不同朗读者的声音确定对应的人物角色。
又如，在本发明的又一个可选实施例中，获取与当前播放内容相对应的文本信息；针对文本信息进行语义分析，以确定当前播放内容中包含的目标实体。其中，与当前播放内容相对应的文本信息包括：与当前播放内容相对应的原文信息、和/或与当前播放内容相对应的语音转文本信息。
步骤S240：从图像数据库中获取与当前播放内容中包含的目标实体相匹配的实体图像信息。
在本实施例中，由于预先建立了各个时间段的时间标记与该时间段内的目标实体所对应的实体图像信息之间的映射关系，因此，在本步骤中，直接根据当前播放内容所在时间段的时间标记，查询并获取与该时间标记关联存储的实体图像信息即可。
另外，在本发明的一个可选实施例中，还可以根据目标实体的实体类型确定匹配的实体图像信息。例如，当实体图像信息的信息类型包括至少两种，且有声电子书中的目标实体的实体类型也包括至少两种时，需要确定当前播放内容中包含的目标实体的实体类型以及与该实体类型相匹配的信息类型，根据与该实体类型相匹配的信息类型，获取与当前播放内容中包含的目标实体相匹配的实体图像信息。当然，根据实体类型确定信息类型并确定实体图像信息的操作既可以在本步骤中实时执行，也可以在上一步骤中预先执行，本发明对此不做限定。当根据实体类型确定信息类型并确定实体图像信息的操作在上一步骤中预先执行时，结合各个目标实体的实体类型为其配置对应信息类型的实体图像信息并建立二者之间的映射关系。
另外，在本发明的又一个可选实施例中，还可以根据目标实体的实体属性信息确定匹配的实体图像信息。具体地，根据目标实体的实体名称，从图像数据库中查询与目标实体的实体名称相匹配的多个候选图像信息；分析当前播放内容中包含的目标实体的实体属性信息，从多个候选图像信息中选择与实体属性信息相匹配的实体图像信息。其中，实体属性信息包括：实体的动作、表情、情绪、和/或事件类型等。例如，预先针对“孙悟空”这一目标实体配置多个候选图像信息，分别对应于孙悟空翻筋斗云、与妖怪打斗、嬉皮笑脸、怒目而视等多个动作，并根据当前播放内容中的动作类型选择匹配的实体图像信息。当然，根据目标实体的实体属性信息确定匹配的实体图像信息的操作既可以在本步骤中实时执行，也可以在上一步骤中预先执行，本发明对此不做限定。当根据目标实体的实体属性信息确定匹配的实体图像信息的操作在上一步骤中预先执行时，结合各个目标实体的实体属性信息为其配置对应的实体图像信息并建立二者之间的映射关系。
步骤S250：在当前播放内容的播放过程中，同步展示实体图像信息。
具体地，在当前播放内容的播放过程中，将该实体图像信息同步展示在播放界面中。具体实施时，可以在播放界面的上层覆盖一层图像视图，在该图像视图中展示该实体图像信息。例如，以悬浮框的形式在播放界面之上播放实体图像信息。又如，也可以将播放界面划分为第一区域以及第二区域，其中，第一区域用于展示播放按钮等控件，第二区域用于展示实体图像信息，本发明对具体展示细节不做限定。
另外，为了降低实体图像信息的传输时延，加快展示速度，在本实施例中，实体图像信息进一步包括：包含实体对象且不包含附加信息的第一类图像信息、以及包含实体对象以及附加信息的第二类图像信息。相应地，在本步骤中，分别获取第一类图像信息以及第二类图像信息，当第一类图像信息获取完毕时，同步展示第一类图像信息；当第二类图像信息获取完毕时，将正在展示的第一类图像信息切换为第二类图像信息。由于第一类图像信息包含实体对象且不包含附加信息，因此，数据量较少，能够快速获取并展示，确保用户及时浏览。第二类图像信息既包含实体对象又包含附加信息，因此，数据量较大，获取时延稍长，但是，由于第二类图像信息包含丰富的附加信息，因此，展示效果较佳，有利于提升用户的视觉体验。通过上述方式能够兼顾展示的实时性和视觉效果。实际情况中，上述附加信息可以是场景信息，也可以是人物装饰信息、特效信息等。
另外，上述方式尤其适用于动画模型类型的实体图像信息，其中，实体图像信息可以是AR动画模型，第一类图像信息所对应的AR动画模型中仅包含目标实体的实体对象，因此，加载速度快。第二类图像信息所对应的AR动画模型中除包含目标实体的实体对象外，还包含背景信息，因此，加载速度慢但视觉效果更佳。
其中，第二类图像信息所对应的AR动画模型中包含的背景信息既可以预先生成，也可以在有声电子书播放过程中动态生成。例如，在后一种方式中，进一步通过摄像头捕获运行有声电子书的终端设备周边的环境图像，并根据环境图像生成该背景信息，以便将电子书中的目标实体展示在由用户所处的真实环境制作的背景中，从而增强用户的代入感。
另外，在本实施例中，第二类图像信息所对应的AR动画模型中包含的背景信息还可以进一步根据终端设备的倾斜角度、倾斜方向和/或焦距变化进行调整，例如，当检测到终端设备向右侧倾斜时，将背景信息的展示内容也切换为画面右侧的内容，从而使用户具有身临其境的感觉。
本领域技术人员还可以对上述步骤进行各种改动和变形，例如，合并为更少的步骤，或拆分为更多的步骤，并且，还可以调整各个步骤的执行顺序，本发明对此不做限定。
另外，发明人在实现本发明的过程中发现，很多用户在听书过程中习惯于将终端设备设置为息屏状态，若在息屏状态下同步展示实体图像信息将造成资源的浪费，使系统开销过大，从而不仅增加终端设备的耗电量，还会增加终端设备的网络流量等消耗。为了解决上述问题，在本实施例中，需要对终端设备的设备状态进行判断，并仅在终端设备处于亮屏状态时执行同步展示实体图像信息的操作。
具体地，在步骤S230中，进一步执行以下操作：在有声电子书的播放过程中，检测运行有声电子书的终端设备是否处于亮屏状态，和/或检测运行有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；当检测到运行有声电子书的终端设备处于亮屏状态，和/或运行有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，确定当前播放内容中包含的目标实体。
具体实施时，可以通过以下两种方式中的至少一种实现：
在第一种实现方式中，在有声电子书的播放过程中，检测运行有声电子书的终端设备是否处于亮屏状态，并在检测到运行有声电子书的终端设备处于亮屏状态时，执行确定当前播放内容中包含的目标实体的操作及其后续操作。若有声电子书处于息屏状态则不执行确定当前播放内容中包含的目标实体的操作及其后续操作，该方式能够有效防止在息屏状态下展示实体图像信息所导致的资源浪费。
在第二种实现方式中，在有声电子书的播放过程中，检测运行有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；当检测到运行有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，执行确定当前播放内容中包含的目标实体的操作及其后续操作。具体地，检测运行有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面的目的在于：判断有声电子书应用是否处于前台运行且占据屏幕的状态，若是，则说明用户的视觉关注点在有声电子书应用的播放界面上，此时展示实体图像信息有助于提升用户的阅读效果；若否，则说明用户的视觉关注点在其他应用上，此时不展示实体图像信息以避免资源浪费。具体实施时，还可以进一步检测有声电子书的播放界面在终端设备的显示界面中所占的比例，并仅在有声电子书的播放界面在终端设备的显示界面中所占的比例大于预设比例(如三分之二)时，执行确定当前播放内容中包含的目标实体的操作及其后续操作。优选的，检测有声电子书是否处于全屏运行状态，并仅在全屏运行状态下执行确定当前播放内容中包含的目标实体的操作及其后续操作。
上述两种方式既可以单独使用，也可以结合使用，本发明对此不做限定。通过上述方式，能够有效降低资源消耗，提升实体图像信息的展示效果。另外，除了在步骤S230中通过上述方式进行判断之外，也可以在步骤S240之前执行检测运行有声电子书的终端设备是否处于亮屏状态，和/或检测运行有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面的操作；并仅在检测到运行有声电子书的终端设备处于亮屏状态，和/或运行有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，执行步骤S240中的从图像数据库中获取与当前播放内容中包含的目标实体相匹配的实体图像信息的操作及其后续操作。或者，也可以在步骤S250之前执行检测运行有声电子书的终端设备是否处于亮屏状态，和/或检测运行有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面的操作；并仅在检测到运行有声电子书的终端设备处于亮屏状态，和/或运行有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，执行步骤S250中同步展示实体图像信息的操作。总之，本发明不限定上述检测操作的执行时机，只要能够实现节约资源的目的即可。综上可知，通过本发明中的上述方式，能够针对有声电子书中的目标实体同步展示图像信息，从而使用户能够在听书的同时获得视觉享受，从而加深用户的印象。并且，在上述方式中，能够针对书中不同类型的实体分别配置不同类型的实体图像信息，从而满足了多样化的需求，提升了展示效果。
实施例三
本申请实施例提供了一种非易失性计算机存储介质，所述计算机存储介质存储有至少一可执行指令，该计算机可执行指令可执行上述任意方法实施例中的有声电子书的播放方法。
可执行指令具体可以用于使得处理器执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，检测运行所述有声电子书的终端设备是否处于亮屏状态，和/或检测运行所述有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；
当检测到运行所述有声电子书的终端设备处于亮屏状态，和/或运行所述有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，确定当前播放内容中包含的目标实体。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
根据所述目标实体的实体名称，从图像数据库中查询与所述目标实体的实体名称相匹配的多个候选图像信息；
分析所述当前播放内容中包含的目标实体的实体属性信息，从多个候选图像信息中选择与所述实体属性信息相匹配的实体图像信息；其中，所述实体属性信息包括：动作、表情、情绪、和/或事件类型。
在一种可选的方式中，所述实体图像信息的信息类型包括以下信息类型中的至少两种：静态图片类型、动态图片类型、以及动画模型类型；且所述可执行指令使所述处理器执行以下操作：
预先将有声电子书中的目标实体划分为至少两种实体类型，分别针对每种实体类型配置与该实体类型相匹配的信息类型；
确定所述当前播放内容中包含的目标实体的实体类型以及与该实体类型相匹配的信息类型，根据所述与该实体类型相匹配的信息类型，获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
预先分析有声电子书的各个时间段所对应的目标实体，根据分析结果针对各个时间段所对应的目标实体配置对应的实体图像信息；
在所述图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息；
根据当前播放内容所在时间段的时间标记，查询并获取与该时间标记关联存储的实体图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
获取有声电子书的各个时间段所对应的文本信息，识别所述文本信息中包含的多个命名实体；
根据各个命名实体在所述有声电子书中的出现频次和/或各个命名实体所对应的用户交互数据，从多个命名实体中提取目标实体。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
针对各个时间段所对应的文本信息进行分词处理，针对分词后得到的各个词语进行词性识别，并根据词性识别结果挑选名词作为命名实体。
在一种可选的方式中，所述实体图像信息进一步包括：包含实体对象且不包含附加信息的第一类图像信息、以及包含实体对象以及附加信息的第二类图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
分别获取所述第一类图像信息以及所述第二类图像信息；
当所述第一类图像信息获取完毕时，同步展示所述第一类图像信息；
当所述第二类图像信息获取完毕时，将正在展示的第一类图像信息切换为所述第二类图像信息。
在一种可选的方式中，所述目标实体包括：人物角色实体、动植物实体、和/或非生物类实体；
当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的音频属性信息，根据所述音频属性信息确定与当前播放内容相对应的人物角色实体；其中，所述音频属性信息包括：语调、声纹、以及高低音；其中，所述有声电子书由多个分别对应于不同的人物角色实体、且由不同朗读者提供的音频段组成。
在一种可选的方式中，当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的文本信息；针对所述文本信息进行语义分析，以确定所述当前播放内容中包含的目标实体；其中，所述与当前播放内容相对应的文本信息包括：与当前播放内容相对应的原文信息、和/或与当前播放内容相对应的语音转文本信息。
实施例四
图3示出了根据本发明另一个实施例的一种电子设备的结构示意图，本发明具体实施例并不对电子设备的具体实现做限定。
如图3所示，该电子设备可以包括：处理器(processor)302、通信接口(Communications Interface)304、存储器(memory)306、以及通信总线308。
其中：处理器302、通信接口304、以及存储器306通过通信总线308完成相互间的通信。通信接口304，用于与其它设备比如客户端或其它服务器等的网元通信。处理器302，用于执行程序310，具体可以执行上述有声电子书的播放方法实施例中的相关步骤。
具体地，程序310可以包括程序代码，该程序代码包括计算机操作指令。
处理器302可能是中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路。电子设备包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。
存储器306，用于存放程序310。存储器306可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
程序310具体可以用于使得处理器302执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，检测运行所述有声电子书的终端设备是否处于亮屏状态，和/或检测运行所述有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；
当检测到运行所述有声电子书的终端设备处于亮屏状态，和/或运行所述有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，确定当前播放内容中包含的目标实体。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
根据所述目标实体的实体名称，从图像数据库中查询与所述目标实体的实体名称相匹配的多个候选图像信息；
分析所述当前播放内容中包含的目标实体的实体属性信息，从多个候选图像信息中选择与所述实体属性信息相匹配的实体图像信息；其中，所述实体属性信息包括：动作、表情、情绪、和/或事件类型。
在一种可选的方式中，所述实体图像信息的信息类型包括以下信息类型中的至少两种：静态图片类型、动态图片类型、以及动画模型类型；且所述可执行指令使所述处理器执行以下操作：
预先将有声电子书中的目标实体划分为至少两种实体类型，分别针对每种实体类型配置与该实体类型相匹配的信息类型；
确定所述当前播放内容中包含的目标实体的实体类型以及与该实体类型相匹配的信息类型，根据所述与该实体类型相匹配的信息类型，获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
预先分析有声电子书的各个时间段所对应的目标实体，根据分析结果针对各个时间段所对应的目标实体配置对应的实体图像信息；
在所述图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息；
根据当前播放内容所在时间段的时间标记，查询并获取与该时间标记关联存储的实体图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
获取有声电子书的各个时间段所对应的文本信息，识别所述文本信息中包含的多个命名实体；
根据各个命名实体在所述有声电子书中的出现频次和/或各个命名实体所对应的用户交互数据，从多个命名实体中提取目标实体。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
针对各个时间段所对应的文本信息进行分词处理，针对分词后得到的各个词语进行词性识别，并根据词性识别结果挑选名词作为命名实体。
在一种可选的方式中，所述实体图像信息进一步包括：包含实体对象且不包含附加信息的第一类图像信息、以及包含实体对象以及附加信息的第二类图像信息。
在一种可选的方式中，所述可执行指令使所述处理器执行以下操作：
分别获取所述第一类图像信息以及所述第二类图像信息；
当所述第一类图像信息获取完毕时，同步展示所述第一类图像信息；
当所述第二类图像信息获取完毕时，将正在展示的第一类图像信息切换为所述第二类图像信息。
在一种可选的方式中，所述目标实体包括：人物角色实体、动植物实体、和/或非生物类实体；
当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的音频属性信息，根据所述音频属性信息确定与当前播放内容相对应的人物角色实体；其中，所述音频属性信息包括：语调、声纹、以及高低音；其中，所述有声电子书由多个分别对应于不同的人物角色实体、且由不同朗读者提供的音频段组成。
在一种可选的方式中，当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的文本信息；针对所述文本信息进行语义分析，以确定所述当前播放内容中包含的目标实体；其中，所述与当前播放内容相对应的文本信息包括：与当前播放内容相对应的原文信息、和/或与当前播放内容相对应的语音转文本信息。
在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明还公开了A1.一种有声电子书的播放方法，包括：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
A2.根据A1所述的方法，其中，所述在有声电子书的播放过程中，确定当前播放内容中包含的目标实体包括：
在有声电子书的播放过程中，检测运行所述有声电子书的终端设备是否处于亮屏状态，和/或检测运行所述有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；
当检测到运行所述有声电子书的终端设备处于亮屏状态，和/或运行所述有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，确定当前播放内容中包含的目标实体。
A3.根据A1所述的方法，其中，所述从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息包括：
根据所述目标实体的实体名称，从图像数据库中查询与所述目标实体的实体名称相匹配的多个候选图像信息；
分析所述当前播放内容中包含的目标实体的实体属性信息，从多个候选图像信息中选择与所述实体属性信息相匹配的实体图像信息；其中，所述实体属性信息包括：动作、表情、情绪、和/或事件类型。
A4.根据A1-3任一所述的方法，其中，所述实体图像信息的信息类型包括以下信息类型中的至少两种：静态图片类型、动态图片类型、以及动画模型类型；且所述方法执行之前，进一步包括：预先将有声电子书中的目标实体划分为至少两种实体类型，分别针对每种实体类型配置与该实体类型相匹配的信息类型；
则所述从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息包括：
确定所述当前播放内容中包含的目标实体的实体类型以及与该实体类型相匹配的信息类型，根据所述与该实体类型相匹配的信息类型，获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息。
A5.根据A1-4任一所述的方法，其中，所述方法执行之前，进一步包括：
预先分析有声电子书的各个时间段所对应的目标实体，根据分析结果针对各个时间段所对应的目标实体配置对应的实体图像信息；
在所述图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息；
则所述确定当前播放内容中包含的目标实体；从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息包括：
根据当前播放内容所在时间段的时间标记，查询并获取与该时间标记关联存储的实体图像信息。
A6.根据A5所述的方法，其中，所述预先分析有声电子书的各个时间段所对应的目标实体包括：
获取有声电子书的各个时间段所对应的文本信息，识别所述文本信息中包含的多个命名实体；
根据各个命名实体在所述有声电子书中的出现频次和/或各个命名实体所对应的用户交互数据，从多个命名实体中提取目标实体。
A7.根据A6所述的方法，其中，所述识别所述文本信息中包含的多个命名实体包括：针对各个时间段所对应的文本信息进行分词处理，针对分词后得到的各个词语进行词性识别，并根据词性识别结果挑选名词作为命名实体。
A8.根据A1-7任一所述的方法，其中，所述实体图像信息进一步包括：包含实体对象且不包含附加信息的第一类图像信息、以及包含实体对象以及附加信息的第二类图像信息。
A9.根据A8所述的方法，其中，所述获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；在所述当前播放内容的播放过程中，同步展示所述实体图像信息包括：
分别获取所述第一类图像信息以及所述第二类图像信息；
当所述第一类图像信息获取完毕时，同步展示所述第一类图像信息；
当所述第二类图像信息获取完毕时，将正在展示的第一类图像信息切换为所述第二类图像信息。
A10.根据A1-9任一所述的方法，其中，所述目标实体包括：人物角色实体、动植物实体、和/或非生物类实体；
当所述目标实体为人物角色实体时，所述确定当前播放内容中包含的目标实体包括：
获取与当前播放内容相对应的音频属性信息，根据所述音频属性信息确定与当前播放内容相对应的人物角色实体；其中，所述音频属性信息包括：语调、声纹、以及高低音；其中，所述有声电子书由多个分别对应于不同的人物角色实体、且由不同朗读者提供的音频段组成。
A11.根据A1-9任一所述的方法，其中，当所述目标实体为人物角色实体时，所述确定当前播放内容中包含的目标实体包括：
获取与当前播放内容相对应的文本信息；针对所述文本信息进行语义分析，以确定所述当前播放内容中包含的目标实体；其中，所述与当前播放内容相对应的文本信息包括：与当前播放内容相对应的原文信息、和/或与当前播放内容相对应的语音转文本信息。
B12.一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
B13.根据B12所述的电子设备，其中，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，检测运行所述有声电子书的终端设备是否处于亮屏状态，和/或检测运行所述有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；
当检测到运行所述有声电子书的终端设备处于亮屏状态，和/或运行所述有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，确定当前播放内容中包含的目标实体。
B14.根据B12所述的电子设备，其中，所述可执行指令使所述处理器执行以下操作：
根据所述目标实体的实体名称，从图像数据库中查询与所述目标实体的实体名称相匹配的多个候选图像信息；
分析所述当前播放内容中包含的目标实体的实体属性信息，从多个候选图像信息中选择与所述实体属性信息相匹配的实体图像信息；其中，所述实体属性信息包括：动作、表情、情绪、和/或事件类型。
B15.根据B12-14任一所述的电子设备，其中，所述实体图像信息的信息类型包括以下信息类型中的至少两种：静态图片类型、动态图片类型、以及动画模型类型；且所述可执行指令使所述处理器执行以下操作：
预先将有声电子书中的目标实体划分为至少两种实体类型，分别针对每种实体类型配置与该实体类型相匹配的信息类型；
确定所述当前播放内容中包含的目标实体的实体类型以及与该实体类型相匹配的信息类型，根据所述与该实体类型相匹配的信息类型，获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息。
B16.根据B12-15任一所述的电子设备，其中，所述可执行指令使所述处理器执行以下操作：
预先分析有声电子书的各个时间段所对应的目标实体，根据分析结果针对各个时间段所对应的目标实体配置对应的实体图像信息；
在所述图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息；
根据当前播放内容所在时间段的时间标记，查询并获取与该时间标记关联存储的实体图像信息。
B17.根据B16所述的电子设备，其中，所述可执行指令使所述处理器执行以下操作：
获取有声电子书的各个时间段所对应的文本信息，识别所述文本信息中包含的多个命名实体；
根据各个命名实体在所述有声电子书中的出现频次和/或各个命名实体所对应的用户交互数据，从多个命名实体中提取目标实体。
B18.根据B17所述的电子设备，其中，所述可执行指令使所述处理器执行以下操作：
针对各个时间段所对应的文本信息进行分词处理，针对分词后得到的各个词语进行词性识别，并根据词性识别结果挑选名词作为命名实体。
B19.根据B12-18任一所述的电子设备，其中，所述实体图像信息进一步包括：包含实体对象且不包含附加信息的第一类图像信息、以及包含实体对象以及附加信息的第二类图像信息。
B20.根据B19所述的电子设备，其中，所述可执行指令使所述处理器执行以下操作：
分别获取所述第一类图像信息以及所述第二类图像信息；
当所述第一类图像信息获取完毕时，同步展示所述第一类图像信息；
当所述第二类图像信息获取完毕时，将正在展示的第一类图像信息切换为所述第二类图像信息。
B21.根据B12-20任一所述的电子设备，其中，所述目标实体包括：人物角色实体、动植物实体、和/或非生物类实体；
当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的音频属性信息，根据所述音频属性信息确定与当前播放内容相对应的人物角色实体；其中，所述音频属性信息包括：语调、声纹、以及高低音；其中，所述有声电子书由多个分别对应于不同的人物角色实体、且由不同朗读者提供的音频段组成。
B22.根据B12-21任一所述的电子设备，其中，当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的文本信息；针对所述文本信息进行语义分析，以确定所述当前播放内容中包含的目标实体；其中，所述与当前播放内容相对应的文本信息包括：与当前播放内容相对应的原文信息、和/或与当前播放内容相对应的语音转文本信息。
C23.一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
C24.根据C23所述的计算机存储介质，其中，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，检测运行所述有声电子书的终端设备是否处于亮屏状态，和/或检测运行所述有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；
当检测到运行所述有声电子书的终端设备处于亮屏状态，和/或运行所述有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，确定当前播放内容中包含的目标实体。
C25.根据C23所述的计算机存储介质，其中，所述可执行指令使所述处理器执行以下操作：
根据所述目标实体的实体名称，从图像数据库中查询与所述目标实体的实体名称相匹配的多个候选图像信息；
分析所述当前播放内容中包含的目标实体的实体属性信息，从多个候选图像信息中选择与所述实体属性信息相匹配的实体图像信息；其中，所述实体属性信息包括：动作、表情、情绪、和/或事件类型。
C26.根据C23-25任一所述的计算机存储介质，其中，所述实体图像信息的信息类型包括以下信息类型中的至少两种：静态图片类型、动态图片类型、以及动画模型类型；且所述可执行指令使所述处理器执行以下操作：
预先将有声电子书中的目标实体划分为至少两种实体类型，分别针对每种实体类型配置与该实体类型相匹配的信息类型；
确定所述当前播放内容中包含的目标实体的实体类型以及与该实体类型相匹配的信息类型，根据所述与该实体类型相匹配的信息类型，获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息。
C27.根据C23-26任一所述的计算机存储介质，其中，所述可执行指令使所述处理器执行以下操作：
预先分析有声电子书的各个时间段所对应的目标实体，根据分析结果针对各个时间段所对应的目标实体配置对应的实体图像信息；
在所述图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息；
根据当前播放内容所在时间段的时间标记，查询并获取与该时间标记关联存储的实体图像信息。
C28.根据C27所述的计算机存储介质，其中，所述可执行指令使所述处理器执行以下操作：
获取有声电子书的各个时间段所对应的文本信息，识别所述文本信息中包含的多个命名实体；
根据各个命名实体在所述有声电子书中的出现频次和/或各个命名实体所对应的用户交互数据，从多个命名实体中提取目标实体。
C29.根据C28所述的计算机存储介质，其中，所述可执行指令使所述处理器执行以下操作：
针对各个时间段所对应的文本信息进行分词处理，针对分词后得到的各个词语进行词性识别，并根据词性识别结果挑选名词作为命名实体。
C30.根据C23-29任一所述的计算机存储介质，其中，所述实体图像信息进一步包括：包含实体对象且不包含附加信息的第一类图像信息、以及包含实体对象以及附加信息的第二类图像信息。
C31.根据C30所述的计算机存储介质，其中，所述可执行指令使所述处理器执行以下操作：
分别获取所述第一类图像信息以及所述第二类图像信息；
当所述第一类图像信息获取完毕时，同步展示所述第一类图像信息；
当所述第二类图像信息获取完毕时，将正在展示的第一类图像信息切换为所述第二类图像信息。
C32.根据C23-31任一所述的计算机存储介质，其中，所述目标实体包括：人物角色实体、动植物实体、和/或非生物类实体；
当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的音频属性信息，根据所述音频属性信息确定与当前播放内容相对应的人物角色实体；其中，所述音频属性信息包括：语调、声纹、以及高低音；其中，所述有声电子书由多个分别对应于不同的人物角色实体、且由不同朗读者提供的音频段组成。
C33.根据C23-32任一所述的计算机存储介质，其中，当所述目标实体为人物角色实体时，所述可执行指令使所述处理器执行以下操作：
获取与当前播放内容相对应的文本信息；针对所述文本信息进行语义分析，以确定所述当前播放内容中包含的目标实体；其中，所述与当前播放内容相对应的文本信息包括：与当前播放内容相对应的原文信息、和/或与当前播放内容相对应的语音转文本信息。

Claims (10)

1.一种有声电子书的播放方法，包括：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
2.根据权利要求1所述的方法，其中，所述在有声电子书的播放过程中，确定当前播放内容中包含的目标实体包括：
在有声电子书的播放过程中，检测运行所述有声电子书的终端设备是否处于亮屏状态，和/或检测运行所述有声电子书的终端设备的显示界面中是否包含有声电子书的播放界面；
当检测到运行所述有声电子书的终端设备处于亮屏状态，和/或运行所述有声电子书的终端设备的显示界面中包含有声电子书的播放界面时，确定当前播放内容中包含的目标实体。
3.根据权利要求1所述的方法，其中，所述从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息包括：
根据所述目标实体的实体名称，从图像数据库中查询与所述目标实体的实体名称相匹配的多个候选图像信息；
分析所述当前播放内容中包含的目标实体的实体属性信息，从多个候选图像信息中选择与所述实体属性信息相匹配的实体图像信息；其中，所述实体属性信息包括：动作、表情、情绪、和/或事件类型。
4.根据权利要求1-3任一所述的方法，其中，所述实体图像信息的信息类型包括以下信息类型中的至少两种：静态图片类型、动态图片类型、以及动画模型类型；且所述方法执行之前，进一步包括：预先将有声电子书中的目标实体划分为至少两种实体类型，分别针对每种实体类型配置与该实体类型相匹配的信息类型；
则所述从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息包括：
确定所述当前播放内容中包含的目标实体的实体类型以及与该实体类型相匹配的信息类型，根据所述与该实体类型相匹配的信息类型，获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息。
5.根据权利要求1-4任一所述的方法，其中，所述方法执行之前，进一步包括：
预先分析有声电子书的各个时间段所对应的目标实体，根据分析结果针对各个时间段所对应的目标实体配置对应的实体图像信息；
在所述图像数据库中关联存储各个时间段的时间标记以及针对各个时间段所对应的目标实体配置的实体图像信息；
则所述确定当前播放内容中包含的目标实体；从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息包括：
根据当前播放内容所在时间段的时间标记，查询并获取与该时间标记关联存储的实体图像信息。
6.根据权利要求5所述的方法，其中，所述预先分析有声电子书的各个时间段所对应的目标实体包括：
获取有声电子书的各个时间段所对应的文本信息，识别所述文本信息中包含的多个命名实体；
根据各个命名实体在所述有声电子书中的出现频次和/或各个命名实体所对应的用户交互数据，从多个命名实体中提取目标实体。
7.根据权利要求6所述的方法，其中，所述识别所述文本信息中包含的多个命名实体包括：针对各个时间段所对应的文本信息进行分词处理，针对分词后得到的各个词语进行词性识别，并根据词性识别结果挑选名词作为命名实体。
8.根据权利要求1-7任一所述的方法，其中，所述实体图像信息进一步包括：包含实体对象且不包含附加信息的第一类图像信息、以及包含实体对象以及附加信息的第二类图像信息。
9.一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；
所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
10.一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行以下操作：
在有声电子书的播放过程中，确定当前播放内容中包含的目标实体；
从图像数据库中获取与所述当前播放内容中包含的目标实体相匹配的实体图像信息；
在所述当前播放内容的播放过程中，同步展示所述实体图像信息。
CN201910959910.5A 2019-10-10 2019-10-10 有声电子书的播放方法、电子设备及计算机存储介质 Active CN110727629B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910959910.5A CN110727629B (zh) 2019-10-10 2019-10-10 有声电子书的播放方法、电子设备及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910959910.5A CN110727629B (zh) 2019-10-10 2019-10-10 有声电子书的播放方法、电子设备及计算机存储介质

Publications (2)

Publication Number Publication Date
CN110727629A true CN110727629A (zh) 2020-01-24
CN110727629B CN110727629B (zh) 2024-01-23

Family

ID=69220928

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910959910.5A Active CN110727629B (zh) 2019-10-10 2019-10-10 有声电子书的播放方法、电子设备及计算机存储介质

Country Status (1)

Country Link
CN (1) CN110727629B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111369841A (zh) * 2020-03-20 2020-07-03 珠海格力电器股份有限公司 有声书籍的播放控制方法、装置、存储介质及播放设备
CN113391866A (zh) * 2021-06-15 2021-09-14 亿览在线网络技术（北京）有限公司 一种界面展示方法
CN114328359A (zh) * 2020-09-27 2022-04-12 广州市久邦数码科技有限公司 一种有声电子书的播放方法和系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102708099A (zh) * 2010-12-02 2012-10-03 北大方正集团有限公司 用于图片标题的提取方法和装置
KR20150043620A (ko) * 2013-10-14 2015-04-23 이두한 사용자 맞춤형 사운드북 제작방법 및 제작시스템
US9213705B1 (en) * 2011-12-19 2015-12-15 Audible, Inc. Presenting content related to primary audio content
CN107644019A (zh) * 2016-07-20 2018-01-30 江苏云媒数字科技有限公司 一种超媒体电子书内容制作系统
CN107704161A (zh) * 2017-09-30 2018-02-16 广州阿里巴巴文学信息技术有限公司 信息展示方法、装置及终端设备
US20180053431A1 (en) * 2016-05-19 2018-02-22 Timothy J. Young Computer architecture for customizing the content of publications and multimedia
CN108182232A (zh) * 2017-12-27 2018-06-19 掌阅科技股份有限公司 基于电子书的人物展示方法、电子设备及计算机存储介质
CN108230428A (zh) * 2017-12-29 2018-06-29 掌阅科技股份有限公司 基于增强现实的电子书呈现方法、电子设备及存储介质
CN108877764A (zh) * 2018-06-28 2018-11-23 掌阅科技股份有限公司 有声电子书的音频合成方法、电子设备及计算机存储介质
CN109657095A (zh) * 2018-12-19 2019-04-19 广州绿桦环保科技有限公司 一种智能听书方法及智能听书设备
CN110083291A (zh) * 2019-04-23 2019-08-02 掌阅科技股份有限公司 电子书的翻页处理方法、电子设备及计算机存储介质
CN110221747A (zh) * 2019-05-21 2019-09-10 掌阅科技股份有限公司 电子书阅读页面的呈现方法、计算设备及计算机存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102708099A (zh) * 2010-12-02 2012-10-03 北大方正集团有限公司 用于图片标题的提取方法和装置
US9213705B1 (en) * 2011-12-19 2015-12-15 Audible, Inc. Presenting content related to primary audio content
KR20150043620A (ko) * 2013-10-14 2015-04-23 이두한 사용자 맞춤형 사운드북 제작방법 및 제작시스템
US20180053431A1 (en) * 2016-05-19 2018-02-22 Timothy J. Young Computer architecture for customizing the content of publications and multimedia
CN107644019A (zh) * 2016-07-20 2018-01-30 江苏云媒数字科技有限公司 一种超媒体电子书内容制作系统
CN107704161A (zh) * 2017-09-30 2018-02-16 广州阿里巴巴文学信息技术有限公司 信息展示方法、装置及终端设备
CN108182232A (zh) * 2017-12-27 2018-06-19 掌阅科技股份有限公司 基于电子书的人物展示方法、电子设备及计算机存储介质
CN108230428A (zh) * 2017-12-29 2018-06-29 掌阅科技股份有限公司 基于增强现实的电子书呈现方法、电子设备及存储介质
CN108877764A (zh) * 2018-06-28 2018-11-23 掌阅科技股份有限公司 有声电子书的音频合成方法、电子设备及计算机存储介质
CN109657095A (zh) * 2018-12-19 2019-04-19 广州绿桦环保科技有限公司 一种智能听书方法及智能听书设备
CN110083291A (zh) * 2019-04-23 2019-08-02 掌阅科技股份有限公司 电子书的翻页处理方法、电子设备及计算机存储介质
CN110221747A (zh) * 2019-05-21 2019-09-10 掌阅科技股份有限公司 电子书阅读页面的呈现方法、计算设备及计算机存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张建凤;: "欧美有声书发展现状、原因与服务类型", 科技与出版, no. 05, pages 89 - 95 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111369841A (zh) * 2020-03-20 2020-07-03 珠海格力电器股份有限公司 有声书籍的播放控制方法、装置、存储介质及播放设备
CN114328359A (zh) * 2020-09-27 2022-04-12 广州市久邦数码科技有限公司 一种有声电子书的播放方法和系统
CN113391866A (zh) * 2021-06-15 2021-09-14 亿览在线网络技术（北京）有限公司 一种界面展示方法

Also Published As

Publication number Publication date
CN110727629B (zh) 2024-01-23

Similar Documents

Publication Publication Date Title
US10706889B2 (en) Selective content insertion into areas of media objects
CN111241340B (zh) 视频标签确定方法、装置、终端及存储介质
CN110727629A (zh) 有声电子书的播放方法、电子设备及计算机存储介质
JP2011215963A (ja) 電子機器、画像処理方法及びプログラム
US11511200B2 (en) Game playing method and system based on a multimedia file
CN105204886B (zh) 一种激活应用程序的方法、用户终端和服务器
CN110234018A (zh) 多媒体内容描述生成方法、训练方法、装置、设备及介质
CN109154943A (zh) 自动播放内容到点击播放内容的基于服务器的转换
CN109286848B (zh) 一种终端视频信息的交互方法、装置及存储介质
CN115237301B (zh) 互动小说中弹幕的处理方法及装置
CN114511359A (zh) 显示方法、装置、设备及介质
CN113450804A (zh) 语音可视化方法、装置、投影设备及计算机可读存储介质
CN110781327B (zh) 图像搜索方法、装置、终端设备及存储介质
WO2021134229A1 (zh) 文字识别方法、装置、存储介质及电子设备
US11876634B2 (en) Group contact lists generation
CN117033556A (zh) 基于人工智能的记忆保存和记忆提取方法及相关设备
CN112114770A (zh) 基于语音交互的界面引导方法、装置及设备
CN112333554B (zh) 多媒体数据的处理方法、装置、电子设备以及存储介质
CN108334806B (zh) 图像处理方法、装置和电子设备
CN110717066A (zh) 基于有声电子书的智能搜索方法及电子设备
CN111124988A (zh) 基于书籍图谱的书籍显示方法、计算设备及存储介质
WO2024077492A1 (zh) 播放界面的显示方法、装置、设备、介质及程序产品
TWI780333B (zh) 動態處理並播放多媒體內容的方法及多媒體播放裝置
CN115171163A (zh) 动态封面生成方法、装置及电子设备
CN110647637B (zh) 基于电子书的关联内容展示方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant