CN106599219B - 一种数字图书交互分享系统的实现方法 - Google Patents

一种数字图书交互分享系统的实现方法 Download PDF

Info

Publication number
CN106599219B
CN106599219B CN201611170557.5A CN201611170557A CN106599219B CN 106599219 B CN106599219 B CN 106599219B CN 201611170557 A CN201611170557 A CN 201611170557A CN 106599219 B CN106599219 B CN 106599219B
Authority
CN
China
Prior art keywords
module
annotation
page
sound
digital book
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611170557.5A
Other languages
English (en)
Other versions
CN106599219A (zh
Inventor
施日良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Day Reading Communication Co Ltd
Original Assignee
Hangzhou Day Reading Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Day Reading Communication Co Ltd filed Critical Hangzhou Day Reading Communication Co Ltd
Publication of CN106599219A publication Critical patent/CN106599219A/zh
Application granted granted Critical
Publication of CN106599219B publication Critical patent/CN106599219B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9566—URL specific, e.g. using aliases, detecting broken or misspelled links
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/169—Annotation, e.g. comment data or footnotes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Document Processing Apparatus (AREA)

Abstract

本发明公开了一种数字图书交互分享系统，其特征在于，包括：阅读模块，用于打开PDF格式的数字图书并展示图书页面；注释模块，连接阅读模块，用于在图书页面上进行注释；录制模块，连接阅读模块，用于录制声音，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出注释为FDF文件；播放模块，用于播放录制的声音，导入FDF文件到数字图书，同时根据声音的时间轴，同步播放注释内容。同步模块，为每个声音和导出的注释文件分配相同的UUID，以页和用户ID为主键，上传到云平台供其他客户端下载。本发明还公开了一种数字图书交互分享系统的实现方法。本发明能够实现对数字图书交互性的进一步实现，读者可以在数字图书上进行注释和录音，并播放录音和注释，实现人机的双向交互。

Description

一种数字图书交互分享系统的实现方法
技术领域
本发明涉及数字阅读领域，具体涉及一种能够实现数字图书的语音录制播放、笔记注释的数字图书交互分享系统及其实现方法。
背景技术
数字图书可以在智能手机、平板等移动端上进行阅读。读者在移动端上阅读时，需要借助专门的阅读软件来进行具体的操作。现有技术能够实现对数字图书的导入、下载、阅读等一般操作，这种互动性和交互性均比较弱，其主要是读者通过移动端来获取数字图书本身的信息。中国专利Z L201110096549.1公开了一种原排版可听可读互动数字图书的实现系统及其方法，该系统能够实现对中文书籍逐句随声音的同步高亮显示，能够实现大批量中文在线可听可读互动图书得到制作和展示。但是该专利主要是实现文字的语音读取的功能，仍然是将数字图书本身的信息通过语音形式传给读者。由此，需要继续对数字图书的交互性继续改进，实现读者阅读数字读书更好地体验。
发明内容
为解决现有技术的不足，本发明的目的在于提供一种数字图书交互分享系统及其实现方法，以解决现有技术中读者和数字图书之间交互性较弱的技术问题。
为了实现上述目标，本发明采用如下的技术方案：
一种数字图书交互分享系统，其特征在于，包括：
阅读模块，用于打开PDF格式的数字图书并展示图书页面；
注释模块，连接阅读模块，用于在图书页面上进行注释；
录制模块，连接阅读模块，用于录制声音，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出注释文件；
播放模块，用于播放录制的声音，导入注释文件到数字图书，同时根据声音的时间轴，同步播放注释内容；
同步模块，用于将注释文件和声音上传到云平台。
前述的一种数字图书交互分享系统，其特征在于，所述阅读模块用于在屏幕上以单页或连续页模式来展示数字图书。
前述的一种数字图书交互分享系统，其特征在于，还包括分享模块，分享模块用于将页面的URL发送给第三方平台。
前述一种数字图书交互分享系统，其特征在于，同步模块用于为每个声音和导出的注释文件分配相同的UUID，以页面和用户ID为主键，上传到云平台供其他终端用户下载。
前述一种数字图书交互分享系统的实现方法，其特征在于，包括如下步骤：
步骤一：阅读模块读入PDF格式的数字图书并展示图书页面；
步骤二：读者通过注释模块在图书页面上进行注释；
步骤三：读者通过录制模块录制声音，录制模块连接阅读模块，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出注释文件；
步骤四：读者通过播放模块播放录制的声音，播放模块导入注释文件到数字图书，同时根据声音的时间轴，同步播放注释内容；
步骤五：读者通过同步模块将页面上的注释和录音上传给云平台，其他终端通过云平台进行下载。
前述的一种数字图书交互分享系统的实现方法，其特征在于，所述步骤一包括：阅读模块包括内存管理对象，内存管理对象管理文档和页面的内存开销，当内存不够用时触发OOM，销毁部分临时对象和缓存；阅读模块包括渲染线程池和内存缓存，渲染线程池将每个页面的渲染过程按优先级放入线程池，当前页面优先级最高，预加载页面优先级较低，结果放入内存缓存。
前述的一种数字图书交互分享系统的实现方法，其特征在于，所述步骤二包括：注释模块能够建立状态机，状态机用于区分阅读状态，注释状态，注释状态按不同的注释，再区分状态，建立链表存储每一步状态的改变，最后写入PDF流。
前述的一种数字图书交互分享系统的实现方法，其特征在于，所述步骤三包括：
录制模块先将带有录制标记的注释删除，保持导出的注释都为该次录音的注释；录制模块生成唯一标识UUID，以这个标识命名声音文件和注释文件FDF，录音时链接注释模块，添加注释时，记录该时刻的时间戳，将时间戳和UUID合并写入注释字段；录音完成后，本地按文件id、用户id、页数分目录存储，存储录制的声音和导出的注释，导出的注释以XML格式存储。
前述的一种数字图书交互分享系统的实现方法，其特征在于，所述步骤四包括：播放模块，根据录制模块的本地存储结构，判断该页是否有能播放的内容；播放前先将带有录制标记的注释删除，保证每次播放只有该次播放的内容；播放模块建立注释数组，播放时每隔设定时间进行一次数组遍历，检查每个注释的时间戳，当超过播放时间时，则把该注释加入渲染线程，当播放完成后，把带有时间戳的注释从渲染注释数组中移除。
前述的一种数字图书交互分享系统的实现方法，其特征在于，所述步骤五包括：同步模块为每个声音和导出的注释文件分配相同的UUID，以页面和用户ID为主键，检查每个需要上传的文件是否在服务器上存在，如果不存在或计算的MD5值不同，建立上传队列，上传该文件；检查每个文件是否在app端存在，如果不存在或计算的MD5值不同，建立下载队列，下载该文件，下载后从该队列中删除，并通知用户，有更新的内容。
本发明的有益之处在于：本发明能够实现对数字图书交互性的进一步实现，读者可以在数字图书上进行注释和录音，并播放录音和注释，实现人机的双向交互。
发明内容
图1是本发明一种数字图书交互分享系统的结构示意图；
图2是本发明一种数字图书交互分享系统的实现方法的流程示意图；
图3是本发明一种数字图书交互分享系统中图书页面的一种示意图；
图中：1、注释，2、播放器图标，10、阅读模块，20、注释模块，30、录制模块，40、播放模块，50、同步模块，60、分享模块。
具体实施方式
以下结合附图和具体实施例对本发明作具体的介绍。
参照图1所示，本发明一种数字图书交互分享系统，包括：
阅读模块10，用于打开PDF格式的数字图书并展示图书页面；
注释模块20，连接阅读模块10，用于在图书页面上进行注释；
录制模块30，连接阅读模块10，用于录制声音，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出注释为FDF文件；
播放模块40，用于播放录制的声音，导入FDF文件到数字图书，同时根据声音的时间轴，同步播放注释内容。
同步模块，用于将注释文件和声音上传到云平台。同步模块为每个声音和导出的注释文件分配相同的UUID，以页面和用户ID为主键，上传到云平台供其他终端用户下载。
作为进一步改进，本发明还包括分享模块，分享模块用于将页面的URL发送给日阅通通讯录、QQ、微信等第三方平台。同步模块50链接分享模块60，分享模块60将同步模块上传的文件的URL发送到日阅通通讯录、QQ、微信等第三方平台。
本发明的数字图书交互优选用于移动终端，移动终端包括有触摸屏的移动手机、有触摸屏的移动平板等。当然，如果有其他智能终端，也可以适用。比如有屏幕触摸功能的计算机、其他交互设备等。
具体来说，阅读模块10用于在屏幕上以单页或连续页模式来展示数字图书。也就是说，通过阅读模块10可以以单页模式，连续页模式来阅读PDF文档。注释模块20，用于高亮页面文字，随意涂画，添加注释，签名；录制模块30，用于录制声音，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出PDF注释为FDF文件，一个页面可以录制多段内容；播放模块40，用于播放录制的声音，导入FDF文件到指定PDF，同时根据声音的时间轴，同步播放注释内容。
基于上述的数字图书交互分享系统，以下说明一种数字图书交互分享系统的实现方法，其包括如下步骤：
步骤一：阅读模块10读入PDF格式的数字图书并展示图书页面。具体地，阅读模块10包括内存管理对象，建立内存管理对象后，内存管理对象管理文档和页面的内存开销，当内存不够用时触发OOM，销毁部分临时对象和缓存；阅读模块10包括渲染线程池和内存缓存，渲染线程池将每个页面的渲染过程按优先级放入线程池，当前页面优先级最高，预加载页面优先级较低，结果放入内存缓存。由于渲染PDF使用了多线程，通过组建线程池，控制线程的优先级，使得PDF显示流畅，主线程不阻塞。此外，使用预渲染和缓存机制，提高了PDF加载速度，在系统空余时，提前预测用户下一步行为，事先渲染，并且加入缓存，缓存算法优选采用LRU淘汰算法。
步骤二：读者通过注释模块20在图书页面上进行注释。阅读模块10链接注释模块20。注释模块20能够建立状态机，状态机用于区分阅读状态，注释状态，注释状态按不同的注释，再区分状态，建立链表存储每一步状态的改变，最后写入PDF流。注释过程中，注释模块20是通过分析PDF中的文本对象(text object)来提取文字坐标，矩形范围，从而对文字进行高亮，下划线，删除线，波浪线等注释。此外，注释模块20通过添加PDF规范中annotation的ink对象做随意涂鸦，通过改变宽度，颜色等属性实现不同的笔触。
步骤三：读者通过录制模块30录制声音，录制模块30连接阅读模块10，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出注释文件，优选注释文件格式为FDF文件。具体来说，录制模块30先将带有录制标记的注释删除，保持导出的注释都为该次录音的注释；录制模块30生成唯一标识UUID，以这个标识命名声音文件和注释文件FDF，录音时链接注释模块20，添加注释时，记录该时刻的时间戳，将时间戳和UUID合并写入注释字段；录音完成后，本地按文件id、用户id、页数分目录存储，存储2个文件，即分别存储录制的声音文件和导出的注释文件，导出的注释以XML格式存储。上述录制模块30中，一个声音对应一个FDF注释文件，当录制时，插入该声音的UUID到注释中，播放时，仅当时间轴到达该时间戳时，才会渲染该注释。这种录制可以为多端录制，即对页面任意位置的讲解内容进行录制，保存为一个播放器，点击屏幕上播放器图标时即可播放。
步骤四：读者通过播放模块40播放录制的声音，播放模块40导入FDF文件到数字图书，同时根据声音的时间轴，同步播放注释内容。具体来说，播放模块40，根据录制模块30的本地存储结构，判断该页是否有能播放的内容；这种判断会有几种情况，当判断该页只有一个能播放的内容时，直接进行播放，当判断该页有多个能播放的内容时，让用户选择播放。需要注意的是，录制和播放前，都会删除该页上FDF导入的注释，录制完成后导出FDF，播放开始前导入FDF。播放前先将带有录制标记的注释删除，保证每次播放只有该次播放的内容；播放模块40建立注释数组，播放时每隔设定时间(这一设定时间可以由设计人员根据实际情况进行选择，比如优选为100ms)进行一次数组遍历，检查每个注释的时间戳，当超过播放时间时，则把该注释加入渲染线程，当播放完成后，把带有时间戳的注释从渲染注释数组中移除。
步骤五：同步模块50为每个声音和导出的注释文件分配相同的UUID，以页和用户ID为主键，上传到云平台供其他客户端下载。云平台索引录制的内容，要以PDF文件ID，用户ID，页数，录制UUID作为主键。链接同步模块，检查每个文件是否在服务器上存在，如果不存在或计算的MD5值不同，建立上传队列，上传该文件，检查每个文件是否在app端存在，如果不存在或计算的MD5值不同，建立下载队列，下载该文件，下载后从该队列中删除，并通知用户，有更新的内容。同步模块50链接分享模块60，分享模块60将同步模块上传文件的URL发送到日阅通通讯录、QQ、微信等三方平台。实现文件的分享。
从上述可以看出，本发明能够实现对数字图书交互性的进一步实现，读者可以在数字图书上进行注释和录音，并播放录音和注释，实现人机的双向交互。
以上显示和描述了本发明的基本原理、主要特征和优点。本行业的技术人员应该了解，上述实施例不以任何形式限制本发明，凡采用等同替换或等效变换的方式所获得的技术方案，均落在本发明的保护范围内。

Claims (3)

1.一种数字图书交互分享系统的实现方法，其特征在于，所述数字图书交互分享系统包括： 阅读模块，用于打开PDF格式的数字图书并展示图书页面； 注释模块，连接阅读模块，用于在图书页面上进行注释； 录制模块，连接阅读模块，用于录制声音，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出注释文件； 播放模块，用于播放录制的声音，导入注释文件到数字图书，同时根据声音的时间轴，同步播放注释内容； 同步模块，用于为每个声音和导出的注释文件分配相同的UUID，以页面和用户ID为主键，将注释文件和声音上传到云平台；
所述实现方法包括如下步骤：
步骤一：阅读模块读入PDF格式的数字图书并展示图书页面；其中，阅读模块包括内存管理对象，内存管理对象管理文档和页面的内存开销，当内存不够用时触发OOM，销毁部分临时对象和缓存；渲染PDF使用多线程，控制线程的优先级；阅读模块包括渲染线程池和内存缓存，渲染线程池将每个页面的渲染过程按优先级放入线程池，当前页面优先级最高，预加载页面优先级较低，结果放入内存缓存；在系统空余时，提前预测用户下一步行为，事先渲染，并且加入缓存；
步骤二：读者通过注释模块在图书页面上进行注释；其中，注释模块建立状态机，状态机用于区分阅读状态，注释状态，注释状态按不同的注释，再区分状态，建立链表存储每一步状态的改变，最后写入PDF流；注释过程中，注释模块通过分析PDF中的文本对象来提取文字坐标和矩形范围，从而对文字进行注释；
步骤三：读者通过录制模块录制声音，录制模块连接阅读模块，以声音的时间轴来录制注释，将时间戳插入注释的元数据中，导出注释文件；其中，录制模块先将带有录制标记的注释删除，保持导出的注释都为该次录音的注释；录制模块生成唯一标识UUID，以这个标识命名声音文件和注释文件FDF，录音时链接注释模块，添加注释时，记录该时刻的时间戳，将时间戳和UUID合并写入注释字段；录音完成后，本地按文件id、用户id、页数分目录存储，存储录制的声音和导出的注释，导出的注释以XML格式存储；在录制模块中，一个声音对应一个FDF注释文件，当录制时，插入该声音的UUID到注释中，播放时，仅当时间轴到达该时间戳时，才会渲染该注释；录制模块对页面任意位置的讲解内容进行录制，保存为一个播放器，点击屏幕上播放器图标进行播放；
步骤四：读者通过播放模块播放录制的声音，播放模块导入注释文件到数字图书，同时根据声音的时间轴，同步播放注释内容；其中，播放模块，根据录制模块的本地存储结构，判断该页是否有能播放的内容；当判断该页只有一个能播放的内容时，直接进行播放，当判断该页有多个能播放的内容时，让用户选择播放；播放前先将带有录制标记的注释删除，保证每次播放只有该次播放的内容；播放模块建立注释数组，播放时每隔设定时间进行一次数组遍历，检查每个注释的时间戳，当超过播放时间时，则把该注释加入渲染线程，当播放完成后，把带有时间戳的注释从渲染注释数组中移除；
步骤五：读者通过同步模块将页面上的注释和录音上传给云平台，其他终端通过云平台进行下载；其中，同步模块为每个声音和导出的注释文件分配相同的UUID，以页面和用户ID为主键，检查每个需要上传的文件是否在服务器上存在，如果不存在或计算的MD5值不同，建立上传队列，上传该文件；检查每个文件是否在app端存在，如果不存在或计算的MD5值不同，建立下载队列，下载该文件，下载后从该队列中删除，并通知用户，有更新的内容。
2.根据权利要求1所述的一种数字图书交互分享系统的实现方法，其特征在于，所述阅读模块用于在屏幕上以单页或连续页模式来展示数字图书。
3.根据权利要求1所述的一种数字图书交互分享系统的实现方法，其特征在于，所述数字图书交互分享系统还包括分享模块，分享模块用于将页面的URL发送给第三方平台。
CN201611170557.5A 2016-11-25 2016-12-16 一种数字图书交互分享系统的实现方法 Active CN106599219B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201611052996 2016-11-25
CN2016110529966 2016-11-25

Publications (2)

Publication Number Publication Date
CN106599219A CN106599219A (zh) 2017-04-26
CN106599219B true CN106599219B (zh) 2018-02-23

Family

ID=58599860

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611170557.5A Active CN106599219B (zh) 2016-11-25 2016-12-16 一种数字图书交互分享系统的实现方法

Country Status (1)

Country Link
CN (1) CN106599219B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3612949A1 (en) * 2017-10-20 2020-02-26 Google LLC Reconciling conflicts between replicas of tree-structured data
CN116401489B (zh) * 2023-06-06 2023-08-01 深圳高益科技有限公司 一种web网页屏幕分享与双向控制方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102224484A (zh) * 2008-11-25 2011-10-19 吉田健治 手写输入输出系统、手写输入薄板、信息输入系统、信息输入辅助薄板
CN103492996A (zh) * 2011-02-24 2014-01-01 谷歌公司 电子书接口系统和方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110258526A1 (en) * 2010-04-20 2011-10-20 International Business Machines Corporation Web content annotation management web browser plug-in

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102224484A (zh) * 2008-11-25 2011-10-19 吉田健治 手写输入输出系统、手写输入薄板、信息输入系统、信息输入辅助薄板
CN103492996A (zh) * 2011-02-24 2014-01-01 谷歌公司 电子书接口系统和方法

Also Published As

Publication number Publication date
CN106599219A (zh) 2017-04-26

Similar Documents

Publication Publication Date Title
US20170060829A1 (en) Method and system for annotation and connection of electronic documents
US9060007B2 (en) System and methods for facilitating the synchronization of data
CN100403265C (zh) 用于集中式复制/粘贴功能的方法和系统
CN109254733A (zh) 用于存储数据的方法、装置和系统
US7870477B2 (en) Method and system for portable data aggregation
CN104967552A (zh) 消息推送方法及装置
CN106598412B (zh) 一种数字图书交互重排系统的实现方法
JP5374758B2 (ja) コメント配信システム、コメント配信システムの動作方法、プログラム
CN103517158A (zh) 一种生成可展示视频批注的视频的方法、装置及系统
CN103327264B (zh) 集群式插播控制系统及方法和集群式插播管理端
CN106599219B (zh) 一种数字图书交互分享系统的实现方法
CN106095923A (zh) 一种在有序榜单中添加上榜数据的方法及系统
CN105589842A (zh) 数字出版物的排版方法及装置
CN101110842A (zh) 一种移动终端即时输出博客到互联网的方法
CN101482885B (zh) 信息推送方法、信息推送装置及终端
CN103246729A (zh) 一种处理安卓移动端的多媒体文件的方法和系统
CN105706408A (zh) 提供电子书到用户设备
Banham Characters: Cultural Stories Revealed Through Typography. Stephen Banham, Rick Poynor
CN105677579B (zh) 缓存系统中的数据访问方法和系统
CN113822138A (zh) 相似视频确定方法及装置
RU2011124538A (ru) Технологии для управления постоянными массивами документов
CN106527877B (zh) 一种数字图书交互系统的实现方法
CN103312743A (zh) 一种数据同步装置和方法
CN104731824A (zh) 一种显示图片的方法及装置
CN106292374A (zh) 一种基于网络socket技术的演示文稿平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant