CN114449333A - 视频笔记生成方法及电子设备 - Google Patents

视频笔记生成方法及电子设备 Download PDF

Info

Publication number
CN114449333A
CN114449333A CN202011193993.0A CN202011193993A CN114449333A CN 114449333 A CN114449333 A CN 114449333A CN 202011193993 A CN202011193993 A CN 202011193993A CN 114449333 A CN114449333 A CN 114449333A
Authority
CN
China
Prior art keywords
note
video
tag
user
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011193993.0A
Other languages
English (en)
Other versions
CN114449333B (zh
Inventor
陈俊亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Device Co Ltd
Original Assignee
Huawei Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Device Co Ltd filed Critical Huawei Device Co Ltd
Priority to CN202011193993.0A priority Critical patent/CN114449333B/zh
Priority to PCT/CN2021/117569 priority patent/WO2022089034A1/zh
Publication of CN114449333A publication Critical patent/CN114449333A/zh
Application granted granted Critical
Publication of CN114449333B publication Critical patent/CN114449333B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供了一种视频笔记的制作方法，所述方法包括：当用户在录制视频或者观看视频时，事先设定好数个关键词，在录制过程中，通过语音识别关键词，并记录识别出关键词记录时间，形成“关键词”+“时间点”的视频标签；记录用户输入笔记的关键词、页数、笔记开始的时间与结束的时间，形成“页数”+“关键词”+“起始时间”+“结束时间”笔记标签。根据笔记标签和视频标签的关联，形成视频与笔记的关联。本方案使得用户无需对视频进行二次编辑，录制结束后即可完成视频与笔记的匹配，提高了电子视频笔记的灵活性与便利性。

Description

视频笔记生成方法及电子设备
技术领域
本申请涉及计算机技术领域，具体涉及一种视频笔记的生成方法及电子设备。
背景技术
在学校上课或是培训的时候，经常会录制视频给没来的人或是温故复习时观看，然而这会出现一个问题，录制的视频过于冗长，观看者无法确定视频的关键区段，上课时记录的笔记也无法和视频内容自动匹配。
目前，用于制作视频笔记的发明在解决这个问题上大多是对视频进行二次编辑，由用户在对应的区段添加笔记内容，编辑的过程十分耗时，也对视频编辑技术有一定的要求。
发明内容
本申请提供了一种视频笔记生成方法及电子设备，可支持用户在录制视频或在线视频的同时记录笔记，无需用户进行任何视频编辑操作，可自动将视频内容与对应的笔记关联，生成视频笔记。用户在查看视频笔记时，可以同时查看到视频和该区段视频所对应的笔记内容，让用户迅速回顾重点内容，也使视频笔记的制作过程更加高效。
第一方面，本申请提供一种视频笔记生成方法，该方法包括：电子设备获取一条或多条视频标签，一条或多条视频标签中的每条视频标签包括第一关键词和第一时刻，第一关键词为预设关键词中的任意一个，第一时刻为识别到第一关键词的时间点，其中，每条视频标签是根据接收到的视频生成的；电子设备获取一条或多条笔记标签，一条或多条笔记标签中的每条笔记标签包括第二关键词和时间区间，第二关键词为预设关键词中的任意一个，时间区间包括用户记录一条笔记标签对应的笔记的起始时间点和结束时间点，笔记是用户根据视频的内容记录的；根据目标笔记标签，在一条或多条视频标签中匹配目标视频标签，将目标笔记标签对应的笔记和目标视频标签进行关联，目标笔记标签为一条或多条笔记标签中的任意一条。将笔记标签与视频标签对应匹配，即可将笔记与视频关联起来，无需用户编辑即可生成视频笔记，方便回顾重点内容。
在一种可能的实现方式中，在一条或多条视频标签中匹配目标视频标签具体实现可以包括：获取目标关键词，在上述一条或多条视频标签中查询第一关键词与目标关键词相同的视频标签，得到第一视频标签集合，目标关键词为目标笔记标签对应的第二关键词；获取目标笔记标签对应的起始时间点和终止时间点；根据预设条件，提取第一视频标签集合中符合预设条件的目标视频标签，预设条件包括目标视频标签中的第一时刻早于目标笔记标签对应的起始时间点，且目标视频标签中的第一时刻是第一视频标签集合中最早的时刻。用户记录笔记时，先听到需要记录的关键词和重点内容，才会记录下来，因此在为目标笔记标签匹配目标视频标签时，将条件设置为第一时刻在目标笔记标签的起始时间点前，且第一时刻最早，可快速找到目标视频标签。
在一种可能的实现方式中，每条笔记标签还包括页码，一条或多条笔记标签按照页码从小到大排列，其中，页码值越小表示用户记录与页码对应的笔记越早，预设条件还包括：目标视频标签中的第一时刻晚于第一笔记标签对应的结束时间点，第一笔记标签排列在目标笔记标签之前且与目标笔记标签相邻。用户记录笔记时，当前页正在记录的笔记所对应的视频区间在上一页笔记对应的视频区间之后，因此可进一步将条件设置为第一时刻在目标笔记标签的起始时间点前，在目标笔记标签前一笔记标签的结束时间点后，且第一时刻最早，可快速找到目标视频标签。
在一种可能的实现方式中，电子设备将目标笔记标签对应的笔记和目标视频标签进行关联，具体实现可以包括：将目标视频标签中的第一时刻与目标笔记标签对应的终止时间点之间的目标视频，与目标笔记标签对应的笔记进行关联。目标视频标签的第一时刻为用户听到关键重点内容的时间点，目标笔记标签的结束时间点即为用户完成笔记的时间点，两个时间点确定的视频区间即为目标笔记所对应的视频区间，将目标笔记与对应视频区间关联起来。
在一种可能的实现方式中，电子设备获取视频以及与视频对应的语音，根据语音识别预设关键词，在识别到第一关键词时，生成一条视频标签。
在一种可能的实现方式中，电子设备获取用户选择的第二关键词，并获取到第二关键词的时间点作为起始时间点；获取用户触发的翻页指令，记录获取到翻页指令的时间点作为结束时间点，并生成一条笔记标签。
通过语音识别视频中出现的预设关键词生成视频标签，通过获取到的用户输入笔记的开始时间与结束时间生成笔记标签，通过视频标签与笔记标签的匹配将笔记与视频对应起来。
在一种可能的实现方式中，电子设备在检测到用户在查看目标笔记标签对应的笔记时，从目标视频标签中的第一时刻播放目标视频。
结合第一方面，在一些实施例中，电子设备在检测到播放目标视频标签中的第一时刻之后，目标笔记标签对应的终止时间点之前的视频内容时，电子设备在屏幕显示目标笔记标签对应的笔记。
在一种可能的实现方式中，视频是电子设备录制的视频或者电子设备通过网络接收的视频。
本申请中的视频不限于正在录制的视频，也可以是通过网络接收的视频，可以应用于学生上课和视频会议等多种使用场景。
第二方面，本申请提供了一种电子设备，电子设备可包括：一个或多个功能模块，一个或多个功能模块用于执行如上述第一方面或第一方面任一可能的实现方式中所述的方法。
第三方面，本申请提供一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，处理器执行计算机程序时使得计算机设备实现如第一方面中任一可能的实现方式。
第四方面，提供一种计算机可读存储介质，计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行如第一方面或第一方面任一可能的实现方式中所述的方法。
第五方面，一种包含指令的计算机程序产品，其特征在于，当计算机程序产品在电子设备上运行时，使得电子设备执行如第一方面或第一方面任一可能的实现方式中所述的方法。
附图说明
图1是本申请实例提供的一种电子设备结构模块图；
图2是本申请实例提供的一种视频笔记生成方法的流程示意图；
图3是本申请实例提供的一种电子设备的用户界面示意图；
图4是本申请实例提供的一种应用的用户界面示意图；
图5是本申请实例提供的一种新建设置页面示意图；
图6-图7是本申请实例提供的一种新建页面示意图；
图8是本申请实例提供的一种应用场景示意图；
图9是本申请实例提供的一种信息记录方法示意图；
图10是本申请实例提供的一种保存页面示意图；
图11-图12是本申请实例提供的视频笔记播放界面示意图；
图13是本申请实例提供的一种电子设备结构示意图。
具体实施方式
本申请以下实施例中所使用的术语只是为了描述特定实施例的目的，而并非旨在作为对本申请的限制。如在本申请的说明书和所附权利要求书中所使用的那样，单数表达形式“一个”、“一种”、“所述”、“上述”、“该”和“这一”旨在也包括复数表达形式，除非其上下文中明确地有相反指示。还应当理解，本申请中使用的术语“和/或”是指并包含一个或多个所列出项目的任何或所有可能组合。
当前，用户想要对视频添加相应笔记的时候，往往需要录制完成后进行二次编辑，即手动定位想要添加笔记的视频区间并将笔记输入，操作耗时且需要一定视频编辑能力。也就是说，用户录制的视频内容是无法直接与记录的笔记对应起来的。本申请的目的在于提供一种视频笔记的制作方法，可支持用户在录制视频的同时记录笔记，将记录的笔记与视频内容自动匹配，无需用户对视频进行二次编辑来添加笔记，操作便利。用户在查看视频时会自动显示对应的笔记，便于用户对视频内容进行回顾与理解。
如图1所示，本申请实施例提供的视频笔记制作方法可以应用于包括视频获取模块210，语音识别模块220、处理模块230、笔记采集模块240的电子设备100。视频获取模块210用于获取视频数据；语音识别模块220用于采集语音数据并识别关键词；笔记采集模块240用于获取用户输入的笔记；处理模块230用于完成视频与笔记的关联存储。
下面介绍本申请实施例提供的视频笔记制作方法，图2是本申请实施例提供的一种视频笔记制作方法的流程示意图，该方法包括S101至S103。
S101、电子设备获取记录对象的视频信息，识别关键词，生成语音标签记录关键词与关键词出现的时间点。
电子设备获取记录对象的视频信息，获取途径主要有两种，可以通过开启摄像头和麦克风拍摄视频，也可以网络接收视频信息；语音识别到视频中出现预先设定的关键词，记为第一关键词与第一时刻，第一时刻是第一关键词出现在视频中的时间点，即关键词与语音时间点，形成“关键词+语音时间点”的视频标签。
一种可能的示例为，若预先设置关键词集合为“重点，难点，考点”，视频在开始后10分钟11秒捕捉到关键词“重点”，则生成“重点+10:11”的视频标签。
S102、电子设备获取用户输入的笔记与选择的关键词，生成笔记标签记录关键词与笔记开始时间和结束时间。
电子设备获取用户输入的笔记和页数，获取每页笔记用户选择的关键词，记为第二关键词；用户开始输入笔记的视频时间记录为该页笔记的开始时间点，用户输入笔记翻页指令时的视频时间记录为该页笔记的结束时间点；即笔记标签的关键词、页数、笔记开始时间和笔记结束时间，形成“关键词+页数+笔记开始时间+笔记结束时间”的笔记标签。
一种可能的示例为，若用户选择第2页的关键词为“重点”，在视频开始后10分钟34秒开始输入笔记，在视频开始后17分钟21秒翻页，则生成“重点+第2页+10:34+17:21”的笔记标签。
S103、电子设备根据笔记标签中的“关键词”为主键遍历视频标签进行时间点合并，完成视频内容与笔记的匹配。
对每条笔记标签进行匹配时称为目标笔记标签，根据“关键词”作为主键，遍历视频标签，查找“语音时间点”在上一页笔记标签“笔记结束时间”到该页笔记标签“笔记开始时间”内最早出现的视频标签，即目标视频标签，将目标标签的“语音时间点”减10秒作为对应视频区间的开始时间，目标笔记标签的“笔记结束时间”作为对应视频区间的结束时间。每页笔记与对应的视频区间形成关联映射，完成视频内容与笔记的匹配。
该电子设备可以是折叠屏手机、非折叠屏手机，平板电脑、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或个人数字助理(personaldigital assistant，PDA)等，本申请对该电子设备的具体类型不作任何限制。
所述数据获取模块与笔记采集模块可以集中在电子设备上，如折叠屏手机、笔记本电脑等可以同时进行摄像与笔记输入的电子设备；也可以是与电子设备连接的其他设备，作为数据获取模块的可以是摄像头、手机、平板电脑等具有摄像功能的设备；作为笔记采集模块的可以是手机、键盘、手写板等具有信息输入功能的设备。
图3示出了电子设备100上的一种用户界面10，该用户界面10包括应用菜单101，状态栏102以及页面指示符103。其中：
应用菜单101可包括“视频笔记”应用101A在内的一个或多个应用图标；状态栏102可包括移动通信信号的一个或多个信号强度指示符、无线高保真(wirelessfidelity，WiFi)信号的一个或多个信号强度指示符、电池状态指示符以及时间指示符。
页面指示符103用于指示用户当前浏览的是哪一个页面中的应用。应理解，电子设备100中安装有多个应用时，多个应用可以分部在多个页面中，用户能够通过滑动操作切换电子设备100显示的页面。当检测到用户点击某个应用图标时，电子设备100可显示该应用的用户界面。
图3所示的用户界面10可以为主界面(Home screen)。
在其他一些实施例中，电子设备100还可以包括主屏幕键。该主屏幕键可以是实体按键，也可以是虚拟按键。该主屏幕键可用于接收用户的指令，将当前显示的用户界面返回到主界面，这样可以方便用户随时查看主界面。
可以理解的是，图3仅仅示例性示出了电子设备100上的一种用户界面，不应构成对本申请实施例的限定。
下面详细介绍根据本申请实施例提供的方法进行视频笔记制作的操作过程以及示例性的用户界面。
本申请涉及的视频笔记制作方法可以适用于学生录制老师讲课，视频会议等可以录制视频或在线视频的场景，以下实施例中，以学生录制老师讲课的场景进行说明。
在一种具体的实现方式中，视频获取模块210与笔记采集模块240位于同一个电子设备上，接下来以折叠屏手机作为电子设备，介绍视频笔记制作的过程。
如图3所示，电子设备100监听到用户打开“视频笔记”应用101A的用户操作，响应该操作，电子设备100显示“视频笔记”应用101A的用户界面20。例如，用户打开“视频笔记”应用101A的用户操作可以是点击该应用的图标，或者语音、长按、双击等操作均可，本申请实施例对此不做限制。
图4是本申请实施例提供的一种“视频笔记”应用101A的示例性用户界面20，该用户界面20包括视频笔记目录201，视频笔记新建控件202以及文件查找控件203。用户可以通过视频笔记目录201查看已经创建的视频笔记，例如，用户可以点击想要查看的视频笔记查看具体内容，用户可以通过点击视频笔记新建控件202创建新的视频笔记，也可以使用文件查找控件203输入名称查找需要的视频笔记。应理解，上述触发控件的方式还可以是语音、长按或者双击等均可，本申请实施例对此不做限制。
当用户需要创建新的视频笔记时，点击新建控件202，电子设备100响应用户作用于新建控件202的触发操作，电子设备100显示如图5所示的新建设置界面30。其中，新建设置页面30包括名称输入框301、关键词输入框302、确认控件303A与取消控件303B。其中：
名称输入框301用于接收用户输入的名称，该名称作为视频笔记的文件名，便于后续查找与查看，如将要记录的课程内容为计算机网络的运输层相关，可输入“计算机网络-运输层”作为名称；
关键词设置控件302用于接收用户输入的关键词，该关键词为用户根据将要记录的内容主题设置，如将要录制课堂内容制作视频笔记，可输入关键词集合如“重点”、“难点”、“总结”等；
确认控件303A用于确认用户的上述操作，用户在输入名称和关键词之后，点击确定控件303A，电子设备100检测到用户的点击操作后，即可开始创建视频笔记；取消控件303B用于取消用户的上述操作，用户在打开新建设置页面30之后，点击取消控件303B，电子设备检测到用户的点击操作后，即可返回应用101A的用户界面20。新建设置页面30可以包含更多或更少的输入框或控件，本申请实例对此不做限定。
上述图5所示的新建设置页面30仅为示例性说明，在其他实现方式中，该页面还可以有其他名称，在此不列举。视频笔记新建模式的开启也不限于上述方式，在具体实现中，还可以有其他的开启方式，在此不列举。
图6是本申请实施例提供的一种新建页面的示意图。用户在新建页面30输入名称和关键词后，触发确认控件303A，电子设备100响应该触发显示如图6所示新建页面40。新建页面40包括视频录制区401、笔记区402、语音标签栏403，笔记标签栏404和标题栏405。
所述视频录制区401用于显示数据获取模块210获取的视频。视频录制区401包括录制暂停控件401A、录制开始/结束控件401B、摄像头切换控件401C、变焦倍率调节控件401D。其中：
录制暂停控件401A可用于监听触发录像暂停的用户操作。电子设备100可以检测到作用于录制暂停控件401A的用户操作，响应于该操作，电子设备100可以中止正在录制的视频；再次检测到作用于录制暂停控件401A的用户操作后，继续录制。
录制开始/结束控件401B可用于监听触发录像开始或停止的用户操作。电子设备100可以检测到作用于录制开始/结束控件401B的用户操作，响应于该操作，电子设备100可以开始通过摄像头进行录像；再次检测到作用于录制开始/结束控件401B的用户操作，电子设备100将停止视频的录制，将录制的视频保存为在新建设置页面30中输入的名称的视频文件。其中，录制开始/结束控件401B可以是按钮或者其他形式的控件。
摄像头翻转控件401C可用于监听触发切换摄像头的用户操作。电子设备100可以检测到作用于摄像头切换控件401C的用户操作，例如点击操作，响应于该操作，电子设备100可以翻转摄像头，例如将后置摄像头切换为前置摄像头。
变焦倍率调节控件401D可用于指示显示在视频录制区401中的图像所呈现的预览视角变换的比例。其中，变焦倍率调节控件401D越大，显示在视频录制区401中的图像所呈现的预览视角越小。反之，变焦倍率调节控件401D越小，显示在视频录制区401中的图像所呈现的预览视角越大。如图6所示，1X可以默认变焦倍率。当变焦倍率调节控件401D为一倍倍率1X，显示在视频录制区401中的图像所呈现的预览视角与普通摄像头拍摄视角一样大。本申请实施例对上述默认变焦倍率不作限定。
笔记区402用于显示笔记采集模块240获取的用户输入的笔记；笔记区402有笔记关键词显示区域402A和笔记翻页控件402B，其中：
笔记关键词显示区域402A用于监听用户选择笔记关键词的触发操作。笔记关键词显示区域402A显示用户提前输入的关键词集合，电子设备100检测到用户对于笔记关键词显示区域402A的触发操作，记录用户选择的关键词。用户选择笔记关键词的触发操作可以是用户点击、双击、长按或者悬浮操作。
笔记翻页控件402B用于监听用户触发进入笔记上一页或下一页的操作。电子设备100可以检测到作用于笔记翻页控件402B的用户操作，响应于该操作，在笔记区402显示上一页或下一页笔记内容，作用于笔记翻页控件402B的用户操作可以是用户点击、双击、长按或者悬浮操作。
语音标签栏403包括隐藏控件4031和语音标签表4032，隐藏控件4031用于监听用户触发隐藏语音标签表4032的操作，电子设备100检测到用户对隐藏控件4031的触发操作，响应该操作并将语音标签表4032隐藏；语音标签表4032用于显示根据语音识别模块220识别到的关键词与获取到关键词的时间点标签。作用于隐藏控件4031的用户操作可以是用户点击、双击、长按或者悬浮操作。
笔记标签栏404包括隐藏控件4041和笔记标签表4042。隐藏控件4041用于监听用户触发隐藏笔记标签表4042的操作，电子设备100检测到用户对隐藏控件4041的触发操作，响应该操作并将笔记标签表4042隐藏；笔记标签表4042用于显示用户在笔记关键词显示区域402A选择的关键词、页码与时间点标签。隐藏语音标签栏403与笔记标签栏404后的新建页面40如图7所示，呼出控件4033用于监听用户触发显示语音标签表4032的操作，电子设备100检测到用户对呼出控件4033的触发操作，响应该操作并将语音标签表4032显示在新建页面40；呼出控件4043用于监听用户触发显示笔记标签表4042的操作，电子设备100检测到用户对呼出控件4043的触发操作，响应该操作并将笔记标签表4042显示在新建页面40。用户对呼出控件4033和呼出控件4043的触发操作可以是用户点击、双击、长按或者拖拽操作。在实际实现中，上述触发操作还可以通过其他方式，本申请实施例对此不作限制。
标题栏405包括视频笔记名称4051和保存控件4052，视频笔记名称显示用户在新建设置页面30的名称输入框301中输入的视频笔记名称，保存控件4052用于监听用户触发保存视频笔记的操作，电子设备100检测到用户对保存控件4052的触发操作，显示如图10所示保存页面406。
保存页面406包括确认控件406A和取消控件406B。406A用于监听用户触发确认结束制作保存视频笔记文件的操作，电子设备100检测到用户对于406A的触发操作，保存视频笔记并回到用户界面20；取消控件406B用于监听用户触发取消结束制作保存视频笔记文件的操作，电子设备100检测到用户对于406B的触发操作，回到新建页面40。
视频录制区401录制的视频由数据获取模块210获取，视频获取可以通过以下两种方式：
第一种通过摄像模块录制视频，图8示例性的展示了用户录制视频时的使用场景。用户将电子设备100折叠，摄像头对着录制对象方向，视频录制区401所在为第一屏幕，在视频录制区401显示摄像头获取的图像，麦克风获取录制对象的语音。视频标签表4032的生成过程如图9所示，语音识别模块识别录制对象的语音内容，识别到预先设置的关键词就记录下该时间点，形成“关键词+语音时间点”视频标签记录在视频标签表4032并显示在语音标签栏403。如在t1时刻识别到录制对象的语音内容中包含预先设置的关键词“重点”，则在语音标签表4032中形成“重点+t1”的视频标签记录并显示在语音标签栏403；在t2时刻识别到录制对象的语音内容中包含预先设置的关键词“易错点”，则在语音标签表4032中形成“易错点+t2”的视频标签记录并显示在语音标签栏403。
第二种通过通信模块接收通过网络发送的视频数据：视频录制区401所在屏幕为第一屏幕，视频信号接收模块接收实时视频信号并存储，在视频录制401显示视频的图像。视频标签表4032的生成过程如图9所示，语音识别模块识别视频语音内容，识别到预先设置的关键词就记录下该时间点，形成“关键词+语音时间点”视频标签记录在视频标签表4032并显示在语音标签栏403。电子设备100监听到结束录制的用户操作，响应该操作并关闭数据获取模块。
笔记区402所在为第二屏幕，用户作用于笔记关键词显示区域402A进行的关键词选择操作，在预先设置好的关键词中选择每页笔记的关键词，笔记采集模块240获取用户输入的笔记显示在笔记区402，并记录输入开始时间。监听到用户作用于笔记翻页控件402B进入笔记下一页的触发操作，记录该页结束时间，形成“关键词+页数+笔记开始时间+笔记结束时间”笔记标签记录在笔记标签表4042并显示在笔记标签栏404。所述“笔记开始时间”为用户开始输入该页笔记的时间，所述“笔记结束时间”为用户输入进入笔记下一页的指令的时间。
笔记区402显示笔记采集模块240获取的用户输入的笔记内容；用户输入的方式可以是在笔记区402手写输入，可以是输入法提供的虚拟键盘输入，输入方式不限于以上提到的几种，本申请实施例对此不作限定。
视频笔记制作结束后，用户触发保存控件4052，电子设备100显示保存页面406，用户触发确认控件406A，结束视频笔记制作并保存视频笔记文件。处理模块230根据笔记标签表4042中的信息，对每页笔记进行匹配，该页笔记的笔记标签为目标笔记标签，目标笔记标签的“关键词”为第二关键词，以第二关键词为主键遍历视频标签表4032中的视频标签，视频标签的“关键词”为第一关键词，“语音时间点”为第一时刻，找到视频标签表4032中第一关键词与第二关键词相同，且第一时刻在笔记标签表4042中第一笔记标签对应的结束时间点至目标笔记标签对应的开始时间点的时间区段内的至少一条记录，作为第一视频标签集合，将其中最早的视频标签作为目标笔记标签，目标笔记标签的第一时刻减去10秒作为该页笔记对应视频区间的开始时间，将笔记标签表4042中该页笔记的“笔记结束时间”作为对应视频区间的结束时间，对应视频区间作为目标视频，将每页笔记都映射到录制视频的对应区间中。
示例性地，若第1页笔记在笔记标签表4042中的目标笔记标签包括：
Figure BDA0002753532550000081
则在视频标签表4032中查找相同关键词“功能”的第一视频标签集合：
Figure BDA0002753532550000082
第一时刻在笔记标签表4042中第一笔记标签对应的结束时间点至目标笔记标签对应的开始时间点的时间区段内的为第一条视频标签，该条视频标签为目标视频标签，目标视频标签的第一时刻减10秒为第1页笔记对应视频区间开始时间，第1页笔记“笔记结束时间”作为该页笔记对应视频区间结束时间，形成视频笔记标签索引如下：
Figure BDA0002753532550000083
用户可以在应用101A的用户界面20上的视频笔记目录201直接找到想要查看的视频笔记，用户界面20的查看方式包括但不限于滑动查看与翻页查看；用户也可以通过在应用101A的用户界面20搜索视频笔记的名称来找到想要查看的视频笔记。用户查看视频笔记的触发操作可以是用户点击、双击、长按或者悬浮操作视频笔记，在实际实现中，上述用户操作还可以通过其他方式，本申请实施例对此不作限制。
图11为本申请实例提供的一种示例性视频笔记播放界面，用户在“视频笔记”应用101A的用户界面20查看视频笔记目录201，在视频笔记目录20中找到创建好的视频笔记文件，点击视频笔记文件，电子设备100响应用户的触发操作显示如图11所示视频笔记播放页面50。其中，视频笔记播放页面50可以包括视频播放区501、笔记展示区502、视频目录栏503、笔记目录栏504。其中，视频播放区501用于播放制作前述视频笔记时录制的视频；笔记展示区502用于展示制作前述视频笔记时添加的笔记；视频目录栏503用于显示视频的标签索引；笔记目录栏504用于显示笔记的标签索引。
示例性地，所述视频目录栏503显示的目录索引可以包括如下内容：
Figure BDA0002753532550000091
示例性地，所述笔记目录栏503显示的目录索引可以包括如下内容：
Figure BDA0002753532550000092
视频播放区501包括播放暂停控件501A、播放时间显示控件501B、播放进度条控件501C和音量选择控件501D。其中，播放暂停控件501A用于监听视频播放暂停或开始的用户操作，电子设备100可以检测到作用于播放暂停控件501B的用户操作，响应于该操作，电子设备100停止播放视频播放区501显示的视频，再次检测到作用于播放暂停控件501B的用户操作，电子设备100将继续视频的播放；
播放时间显示控件501B用于显示已播放视频的时长与视频总时长；
播放进度条控件501C用于显示当前播放视频进度，用于监听触发视频进度跳转的用户操作；电子设备100可以检测到作用于播放进度条控件501C的用户操作，响应于该操作，电子设备100可以在视频播放区501显示用户选择的时间点对应的视频内容；
音量控件501D用于监听触发视频音量调整的用户操作，电子设备100可以检测到作用于音量控件501D的用户操作，响应与该操作，调节视频音量的大小。
用户进行的上述操作可以是用户点击、双击、长按或者悬浮操作上述控件。在实际实现中，上述操作还可以通过其他方式进行，本申请实施例对此不作限制。
笔记展示区502包括笔记翻页控件502A，笔记翻页控件502A用于监听用户触发进入笔记上一页或下一页的操作。电子设备100可以检测到作用于笔记翻页控件502A的用户操作，响应于该操作，在笔记展示区502显示上一页或下一页笔记内容，作用于笔记翻页控件502A的用户操作可以是用户点击、双击、长按或者悬浮操作所述笔记翻页控件502A。
所述视频目录栏503用于监听视频区间选择的用户操作，电子设备100可以检测到作用于视频目录栏503的用户操作，响应于该操作，在视频播放区501显示的视频跳转至用户选择的关键词标签对应视频区间开始时间进行播放。用户进行的操作可以是用户点击、双击、长按或者悬浮操作视频目录栏503，在实际实现中，上述用户操作还可以通过其他方式进行，本申请实施例对此不作限制。
所述笔记目录栏504用于监听笔记页选择的用户操作，电子设备100可以检测到作用于笔记目录栏504的用户操作，响应于该操作，在笔记展示区502显示用户选择的关键词标签对应页数的笔记。用户进行的上述操作可以是用户点击、双击、长按或者悬浮操作笔记目录栏504，在实际实现中，上述用户操作还可以通过其他方式进行，本申请实施例对此不作限制。
电子设备在视频笔记播放页面50播放视频笔记时，视频播放区501播放视频，笔记展示区502显示用户输入的笔记，电子设备在检测到播放目标视频标签中的第一时刻之后，目标笔记标签对应的终止时间点之前的视频内容时，电子设备在笔记展示区502显示所述目标笔记标签对应的笔记。
笔记展示区502会随着视频播放区501播放的视频进度变化显示对应的笔记。用户触发播放进度条控件501C进行视频跳转操作，视频播放区501播放的视频跳转至用户选择的时间点进度，该时间点在目标视频标签中的第一时刻之后，目标笔记标签对应的终止时间点之前，笔记展示区502显示目标笔记标签对应的笔记。用户也可以触发视频目录栏503中的关键词查看对应的视频区间，笔记显示区502会显示关键词对应的笔记内容。如用户触发视频目录栏503中的关键词“特点”，视频播放区501将跳转至对应视频区间开始时间00:21:24处开始播放，笔记展示区502显示关键词“特点”对应的第4页笔记内容。
视频播放区501会随着笔记展示区502显示的笔记变化播放对应的视频。用户触发笔记翻页控件502A进行笔记翻页操作，笔记展示区502显示的笔记翻页至用户选择的内容，电子设备在检测到用户在查看目标笔记标签对应的笔记时，视频播放区501从目标视频标签中的第一时刻播放目标视频。用户也可以触发笔记目录栏504中的关键词查看对应的笔记，视频播放区501会播放该关键词对应的视频区间。如用户触发笔记标签栏中的关键词“总结”，笔记展示区502显示对应点的第5页笔记，视频播放区501播放跳转至关键词“总结”对应的视频区间开始时间00:28:23处开始播放。
所述视频目录栏503有隐藏控件5031和视频目录表5032。隐藏控件5031用于监听用户触发隐藏视频目录表5032的操作，电子设备100检测到用户对隐藏控件5031的触发操作，响应该操作并将视频目录表5032隐藏；所述笔记目录栏504有隐藏控件5041和笔记目录表5042。隐藏控件5041用于监听用户触发隐藏笔记目录表5042的操作，电子设备100检测到用户对隐藏控件5041的触发操作，响应该操作并将笔记目录表5042隐藏；隐藏视频目录栏503与笔记目录栏504后的视频笔记播放页面50如图12所示，呼出控件5033用于监听用户触发显示视频目录表5032的操作，电子设备100检测到用户对呼出控件5033的触发操作，响应该操作并将视频目录表4032显示在视频笔记播放页面50；呼出控件5043用于监听用户触发显示笔记目录表5042的操作，电子设备100检测到用户对呼出控件5043的触发操作，响应该操作并将笔记目录表5042显示在视频笔记播放页面50。用户进行的触发操作可以是用户点击、双击、长按或者拖拽操作。在实际实现中，上述用户操作还可以通过其他方式进行，本申请实施例对此不作限制。
在另一种具体的实现方式中，数据获取模块210与笔记采集模块240还可以在不同设备上，接下来将平板电脑称为电子设备100，外接键盘作为笔记采集模块240。
用户启动“视频笔记”应用并进入视频笔记新建页面40的过程和用户界面与第一种实现方式相同。创建新的视频笔记，数据获取模块获取到的视频可以通过以下两种方式：
第一种通过摄像模块录制视频，图6示例性的展示了用户录制视频时的使用场景。用户将电子设备100折叠，摄像头对着录制对象方向，视频录制区401所在为第一屏幕，在视频录制区401显示摄像头获取的图像，麦克风获取录制对象的声音，语音识别模块识别录制对象的语音内容，识别到预先设置的关键词就记录下该时间点，形成“关键词+语音时间点”视频标签记录在视频标签表4032并显示在语音标签栏403。获取到结束录制指令，关闭数据获取模块。
第二种通过视频信号接收模块获取视频数据：视频录制区401所在屏幕为第一屏幕，视频信号接收模块接收实时视频信号并存储，在视频录制区401显示视频的图像，语音识别模块识别视频语音内容，识别到预先设置的关键词就记录下该时间点，形成“关键词+语音时间点”视频标签记录在视频标签表4032并显示在语音标签栏403。接收到视频结束指令，关闭数据获取模块。
笔记区402所在为第二屏幕，笔记关键词显示区域402A接收用户输入的关键词选择指令，在预先设置好的关键词中选择每页笔记的关键词，笔记区获取用户输入的笔记，并记录输入开始时间，获取到进入笔记下一页的指令，记录该页结束时间，形成“关键词+页数+笔记开始时间+笔记结束时间”笔记标签记录在笔记标签表4042并显示在笔记标签栏404。所述“笔记开始时间”为用户开始输入该页笔记的时间，所述“笔记结束时间”为用户输入进入笔记下一页的指令的时间。获取到结束笔记指令，关闭笔记采集模块。
所述笔记区获取的用户输入的笔记来自第一输入设备，电子设备100与第一输入设备连接，连接方式可以是硬件连接、蓝牙连接、WLAN连接等。
具体的，采用硬件连接，电子设备100通过USB接口130与第一输入设备连接；采用蓝牙连接，电子设备100通过无线通信模块160与第一输入设备蓝牙连接；采用WLAN连接，电子设备100通过无线通信模块160与第一输入设备WLAN连接。电子设备100与第一输入设备连接后，笔记采集模块240可以获取用户使用第一输入设备输入的笔记；获取的用户输入的笔记，其输入方式可以为手写输入，也可以为打字或语音输入，输入方式不限于以上提到的几种，本申请实施例对此不作限定。
根据视频标签表与笔记标签表的映射关系完成视频和笔记的关联，具体过程与第一种实施方式相同。
下面介绍本申请实施例中提供的示例性电子设备100。
图13示出了电子设备100的结构示意图。
电子设备100可以包括处理器110，外部存储器接口120，内部存储器121，通用串行总线(universal serial bus，USB)接口130，充电管理模块140，电源管理模块141，电池142，天线1，天线2，移动通信模块150，无线通信模块160，音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，按键180，马达181，指示器182，摄像头183，显示屏184，以及用户标识模块(subscriber identification module，SIM)卡接口185等。
可以理解的是，本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中，电子设备100可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。
处理器110中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器110的等待时间，因而提高了系统的效率。
在一些实施例中，处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit，I2C)接口，集成电路内置音频(inter-integrated circuitsound，I2S)接口，脉冲编码调制(pulse code modulation，PCM)接口，通用异步收发传输器(universal asynchronous receiver/transmitter，UART)接口，移动产业处理器接口(mobile industry processor interface，MIPI)，通用输入输出(general-purposeinput/output，GPIO)接口，用户标识模块(subscriber identity module，SIM)接口，和/或通用串行总线(universal serial bus，USB)接口等。
在本申请实施例中，处理器110可用于确定电子设备100当前启动的第三方应用是否有权限使用电子设备的增强功能。在一些实施例中，处理器110还可以用于在当前启动的第三方应用有权限使用电子设备的增强功能的情况下，确定当前提供给用户的增强功能。处理器110确定当前提供给用户的增强功能的方式可参照后续实施例的相关描述，在此不再赘述。
I2C接口是一种双向同步串行总线，包括一根串行数据线(serial data line，SDA)和一根串行时钟线(derail clock line，SCL)。在一些实施例中，处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K，充电器，闪光灯，摄像头193等。例如：处理器110可以通过I2C接口耦合触摸传感器180K，使处理器110与触摸传感器180K通过I2C总线接口通信，实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中，处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合，实现处理器110与音频模块170之间的通信。在一些实施例中，音频模块170可以通过I2S接口向无线通信模块160传递音频信号，实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信，将模拟信号抽样，量化和编码。在一些实施例中，音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中，音频模块170也可以通过PCM接口向无线通信模块160传递音频信号，实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线，用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中，UART接口通常被用于连接处理器110与无线通信模块160。例如：处理器110通过UART接口与无线通信模块160中的蓝牙模块通信，实现蓝牙功能。在一些实施例中，音频模块170可以通过UART接口向无线通信模块160传递音频信号，实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194，摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface，CSI)，显示屏串行接口(displayserial interface，DSI)等。在一些实施例中，处理器110和摄像头193通过CSI接口通信，实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信，实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号，也可被配置为数据信号。在一些实施例中，GPIO接口可以用于连接处理器110与摄像头193，显示屏194，无线通信模块160，音频模块170，传感器模块180等。GPIO接口还可以被配置为I2C接口，I2S接口，UART接口，MIPI接口等。
USB接口130是符合USB标准规范的接口，具体可以是Mini USB接口，Micro USB接口，USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电，也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机，通过耳机播放音频。该接口还可以用于连接其他电子设备，例如AR设备等。
可以理解的是，本申请实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对电子设备100的结构限定。在本申请另一些实施例中，电子设备100也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。在一些有线充电的实施例中，充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中，充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时，还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142，充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入，为处理器110，内部存储器121，显示屏194，摄像头193，和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量，电池循环次数，电池健康状态(漏电，阻抗)等参数。在其他一些实施例中，电源管理模块141也可以设置于处理器110中。在另一些实施例中，电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1，天线2，移动通信模块150，无线通信模块160，调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(low noise amplifier，LNA)等。移动通信模块150可以由天线1接收电磁波，并对接收的电磁波进行滤波，放大等处理，传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。在一些实施例中，移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中，移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中，调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后，被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A，受话器170B等)输出声音信号，或通过显示屏194显示图像或视频。在一些实施例中，调制解调处理器可以是独立的器件。在另一些实施例中，调制解调处理器可以独立于处理器110，与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks，WLAN)(如无线保真(wireless fidelity，Wi-Fi)网络)，蓝牙(bluetooth，BT)，全球导航卫星系统(global navigation satellite system，GNSS)，调频(frequency modulation，FM)，近距离无线通信技术(near field communication，NFC)，红外技术(infrared，IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。
在一些实施例中，电子设备100的天线1和移动通信模块150耦合，天线2和无线通信模块160耦合，使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications，GSM)，通用分组无线服务(general packet radio service，GPRS)，码分多址接入(codedivision multiple access，CDMA)，宽带码分多址(wideband code division multipleaccess，WCDMA)，时分码分多址(time-division code division multiple access，TD-SCDMA)，长期演进(long term evolution，LTE)，BT，GNSS，WLAN，NFC，FM，和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system，GPS)，全球导航卫星系统(global navigation satellite system，GLONASS)，北斗卫星导航系统(beidounavigation satellite system，BDS)，准天顶卫星系统(quasi-zenith satellitesystem，QZSS)和/或星基增强系统(satellite based augmentation systems，SBAS)。
电子设备100通过GPU，显示屏194，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏194和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器110可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像，视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display，LCD)，有机发光二极管(organic light-emittingdiode，OLED)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的，AMOLED)，柔性发光二极管(flex light-emittingdiode，FLED)，Miniled，MicroLed，Micro-oLed，量子点发光二极管(quantum dot lightemitting diodes，QLED)等。在一些实施例中，电子设备100可以包括1个或N个显示屏194，N为大于1的正整数。
在本申请实施例中，显示屏194可用于显示控件，该控件可用于监听展开显示电子设备当前可提供的增强功能所对应的控件的操作。响应于该操作，显示屏194还可以用于显示电子设备当前提供的增强功能所对应的控件。电子设备当前提供的增强功能所对应的控件可用于监听启用对应的增强功能的操作。电子设备确定当前提供给用户的增强功能的方式可参照后续实施例的相关描述，在此不再赘述。
电子设备100可以通过ISP，摄像头193，视频编解码器，GPU，显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如，拍照时，打开快门，光线通过镜头被传递到摄像头感光元件上，光信号转换为电信号，摄像头感光元件将所述电信号传递给ISP处理，转化为肉眼可见的图像。ISP还可以对图像的噪点，亮度，肤色进行算法优化。ISP还可以对拍摄场景的曝光，色温等参数优化。在一些实施例中，ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB，YUV等格式的图像信号。在一些实施例中，电子设备100可以包括1个或N个摄像头193，N为大于1的正整数。
数字信号处理器用于处理数字信号，除了可以处理数字图像信号，还可以处理其他数字信号。例如，当电子设备100在频点选择时，数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样，电子设备100可以播放或录制多种编码格式的视频，例如：动态图像专家组(moving picture experts group，MPEG)1，MPEG2，MPEG3，MPEG4等。
NPU为神经网络(neural-network，NN)计算处理器，通过借鉴生物神经网络结构，例如借鉴人脑神经元之间传递模式，对输入信息快速处理，还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用，例如：图像识别，人脸识别，语音识别，文本理解等。
外部存储器接口120可以用于连接外部存储卡，例如Micro SD卡，实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用(比如声音播放功能，图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器121可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flash storage，UFS)等。处理器110通过运行存储在内部存储器121的指令，和/或存储在设置于处理器中的存储器的指令，执行电子设备100的各种功能应用以及数据处理。
电子设备100可以通过音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，以及应用处理器等实现音频功能。例如音乐播放，录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中，音频模块170可以设置于处理器110中，或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐，或收听免提通话。
受话器170B，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时，可以通过将受话器170B靠近人耳接听语音。
麦克风170C，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风170C发声，将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中，电子设备100可以设置两个麦克风170C，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，电子设备100还可以设置三个，四个或更多麦克风170C，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130，也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform，OMTP)标准接口，美国蜂窝电信工业协会(cellular telecommunications industry association of the USA，CTIA)标准接口。
按键180包括开机键，音量键等。按键180可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入，产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达181可以产生振动提示。马达181可以用于来电振动提示，也可以用于触摸振动反馈。例如，作用于不同应用(例如拍照，音频播放等)的触摸操作，可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作，马达181也可对应不同的振动反馈效果。不同的应用场景(例如：时间提醒，接收信息，闹钟，游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器182可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示消息，未接来电，通知等。
SIM卡接口185用于连接SIM卡。SIM卡可以通过插入SIM卡接口185，或从SIM卡接口185拔出，实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口，N为大于1的正整数。SIM卡接口185可以支持Nano SIM卡，Micro SIM卡，SIM卡等。同一个SIM卡接口185可以同时插入多张卡。所述多张卡的类型可以相同，也可以不同。SIM卡接口185也可以兼容不同类型的SIM卡。SIM卡接口185也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互，实现通话以及数据通信等功能。在一些实施例中，电子设备100采用eSIM，即：嵌入式SIM卡。eSIM卡可以嵌在电子设备100中，不能和电子设备100分离。

Claims (12)

1.一种视频笔记生成方法，其特征在于，包括：
电子设备获取一条或多条视频标签，所述一条或多条视频标签中的每条视频标签包括第一关键词和第一时刻，所述第一关键词为预设关键词中的任意一个，所述第一时刻为识别到所述第一关键词的时间点，其中，所述每条视频标签是根据接收到的视频生成的；
电子设备获取一条或多条笔记标签，所述一条或多条笔记标签中的每条笔记标签包括第二关键词和时间区间，所述第二关键词为所述预设关键词中的任意一个，所述时间区间包括用户记录一条笔记标签对应的笔记的起始时间点和结束时间点，所述笔记是所述用户根据所述视频的内容记录的；
根据目标笔记标签，在所述一条或多条视频标签中匹配目标视频标签，将所述目标笔记标签对应的笔记和所述目标视频标签进行关联，所述目标笔记标签为所述一条或多条笔记标签中的任意一条。
2.根据权利要求1所述的方法，其特征在于，所述在所述一条或多条视频标签中匹配目标视频标签，包括：
获取目标关键词，在所述一条或多条视频标签中查询所述第一关键词与所述目标关键词相同的视频标签，得到第一视频标签集合，所述目标关键词为所述目标笔记标签对应的第二关键词；
获取所述目标笔记标签对应的起始时间点和终止时间点；根据预设条件，提取所述第一视频标签集合中符合所述预设条件的目标视频标签，所述预设条件包括所述目标视频标签中的第一时刻早于所述目标笔记标签对应的起始时间点，且所述目标视频标签中的第一时刻是所述第一视频标签集合中最早的时刻。
3.根据权利要求2所述的方法，其特征在于，所述每条笔记标签还包括页码，所述一条或多条笔记标签按照页码从小到大排列，其中，页码值越小表示用户记录与所述页码对应的笔记越早，所述预设条件还包括：
所述目标视频标签中的第一时刻晚于第一笔记标签对应的结束时间点，所述第一笔记标签排列在所述目标笔记标签之前且与所述目标笔记标签相邻。
4.根据权利要求3所述的方法，其特征在于，所述将所述目标笔记标签对应的笔记和所述目标视频标签进行关联，包括：
将所述目标视频标签中的第一时刻与所述目标笔记标签对应的终止时间点之间的目标视频，与所述目标笔记标签对应的笔记进行关联。
5.根据权利要求1至4任一项所述的方法，其特征在于，所述方法还包括：
获取所述视频以及与所述视频对应的语音，根据所述语音识别所述预设关键词，在识别到所述第一关键词时，生成一条所述视频标签。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：
获取用户选择的所述第二关键词，并记录获取到所述第二关键词的时间点作为所述起始时间点；
获取用户触发的翻页指令，记录获取到所述翻页指令的时间点作为结束时间点，并生成一条所述笔记标签，所述翻页指令指示用户完成一页笔记的记录。
7.根据权利要求3或4所述的方法，其特征在于，所述方法还包括：
电子设备在检测到所述用户在查看所述目标笔记标签对应的笔记时，播放所述目标视频。
8.根据权利要求4所述的方法，其特征在于，所述方法还包括：
电子设备在检测到播放所述目标视频时，所述电子设备在屏幕显示所述目标笔记标签对应的笔记。
9.根据权利要求8所述的方法，其特征在于，所述视频是所述电子设备录制的视频或者所述电子设备通过网络接收的视频。
10.一种电子设备，包括：一个或多个功能模块，所述一个或多个功能模块用于执行如权利要求1-9任一项所述的方法。
11.一种计算机设备，包括存储器、处理器以及存储在所述存储器上并在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时使得所述计算机设备实现如权利要求1-9任一项所述的方法。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得所述计算机执行如权利要求1-9任一项所述的方法。
CN202011193993.0A 2020-10-30 2020-10-30 视频笔记生成方法及电子设备 Active CN114449333B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011193993.0A CN114449333B (zh) 2020-10-30 2020-10-30 视频笔记生成方法及电子设备
PCT/CN2021/117569 WO2022089034A1 (zh) 2020-10-30 2021-09-10 视频笔记生成方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011193993.0A CN114449333B (zh) 2020-10-30 2020-10-30 视频笔记生成方法及电子设备

Publications (2)

Publication Number Publication Date
CN114449333A true CN114449333A (zh) 2022-05-06
CN114449333B CN114449333B (zh) 2023-09-01

Family

ID=81357576

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011193993.0A Active CN114449333B (zh) 2020-10-30 2020-10-30 视频笔记生成方法及电子设备

Country Status (2)

Country Link
CN (1) CN114449333B (zh)
WO (1) WO2022089034A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115134650A (zh) * 2022-06-27 2022-09-30 上海哔哩哔哩科技有限公司 视频笔记展示方法及装置
CN115934647A (zh) * 2022-10-21 2023-04-07 广州文石信息科技有限公司 笔记标签生成方法、装置、存储介质及计算机设备

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5799315A (en) * 1995-07-07 1998-08-25 Sun Microsystems, Inc. Method and apparatus for event-tagging data files automatically correlated with a time of occurence in a computer system
US20120245936A1 (en) * 2011-03-25 2012-09-27 Bryan Treglia Device to Capture and Temporally Synchronize Aspects of a Conversation and Method and System Thereof
CN102906735A (zh) * 2010-05-21 2013-01-30 微软公司 语音流增强的笔记记录
US20140033040A1 (en) * 2012-07-24 2014-01-30 Apple Inc. Portable device with capability for note taking while outputting content
WO2017201935A1 (zh) * 2016-05-23 2017-11-30 乐视控股（北京）有限公司 视频播放方法及装置
CN107707936A (zh) * 2016-08-09 2018-02-16 作业帮教育科技（北京）有限公司 在线答疑时的视频回放方法和装置
CN108009140A (zh) * 2017-11-27 2018-05-08 上海爱优威软件开发有限公司 一种终端信息编辑方法及系统
CN109145149A (zh) * 2018-08-16 2019-01-04 科大讯飞股份有限公司 一种信息对齐方法、装置、设备及可读存储介质
CN109246472A (zh) * 2018-08-01 2019-01-18 平安科技（深圳）有限公司 视频播放方法、装置、终端设备及存储介质
CN110223365A (zh) * 2019-06-14 2019-09-10 广东工业大学 一种笔记生成方法、系统、装置及计算机可读存储介质
CN110347866A (zh) * 2019-07-05 2019-10-18 联想(北京)有限公司 信息处理方法、装置、存储介质及电子设备
CN110381382A (zh) * 2019-07-23 2019-10-25 腾讯科技（深圳）有限公司 视频笔记生成方法、装置、存储介质和计算机设备
US10657176B1 (en) * 2019-06-11 2020-05-19 Amazon Technologies, Inc. Associating object related keywords with video metadata

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140280186A1 (en) * 2013-03-15 2014-09-18 International Business Machines Corporation Crowdsourcing and consolidating user notes taken in a virtual meeting
US10657834B2 (en) * 2017-01-20 2020-05-19 Coursera, Inc. Smart bookmarks
CN109672940B (zh) * 2018-12-11 2021-10-01 北京砍石高科技有限公司 基于笔记内容的视频回放方法以及视频回放系统
CN110569393B (zh) * 2019-09-05 2022-04-19 杭州米络星科技(集团)有限公司 一种空中课堂的短视频裁剪方法

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5799315A (en) * 1995-07-07 1998-08-25 Sun Microsystems, Inc. Method and apparatus for event-tagging data files automatically correlated with a time of occurence in a computer system
CN102906735A (zh) * 2010-05-21 2013-01-30 微软公司 语音流增强的笔记记录
US20120245936A1 (en) * 2011-03-25 2012-09-27 Bryan Treglia Device to Capture and Temporally Synchronize Aspects of a Conversation and Method and System Thereof
US20140033040A1 (en) * 2012-07-24 2014-01-30 Apple Inc. Portable device with capability for note taking while outputting content
WO2017201935A1 (zh) * 2016-05-23 2017-11-30 乐视控股（北京）有限公司 视频播放方法及装置
CN107707936A (zh) * 2016-08-09 2018-02-16 作业帮教育科技（北京）有限公司 在线答疑时的视频回放方法和装置
CN108009140A (zh) * 2017-11-27 2018-05-08 上海爱优威软件开发有限公司 一种终端信息编辑方法及系统
CN109246472A (zh) * 2018-08-01 2019-01-18 平安科技（深圳）有限公司 视频播放方法、装置、终端设备及存储介质
CN109145149A (zh) * 2018-08-16 2019-01-04 科大讯飞股份有限公司 一种信息对齐方法、装置、设备及可读存储介质
US10657176B1 (en) * 2019-06-11 2020-05-19 Amazon Technologies, Inc. Associating object related keywords with video metadata
CN110223365A (zh) * 2019-06-14 2019-09-10 广东工业大学 一种笔记生成方法、系统、装置及计算机可读存储介质
CN110347866A (zh) * 2019-07-05 2019-10-18 联想(北京)有限公司 信息处理方法、装置、存储介质及电子设备
CN110381382A (zh) * 2019-07-23 2019-10-25 腾讯科技（深圳）有限公司 视频笔记生成方法、装置、存储介质和计算机设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115134650A (zh) * 2022-06-27 2022-09-30 上海哔哩哔哩科技有限公司 视频笔记展示方法及装置
CN115934647A (zh) * 2022-10-21 2023-04-07 广州文石信息科技有限公司 笔记标签生成方法、装置、存储介质及计算机设备
CN115934647B (zh) * 2022-10-21 2023-10-13 广州文石信息科技有限公司 笔记标签生成方法、装置、存储介质及计算机设备

Also Published As

Publication number Publication date
CN114449333B (zh) 2023-09-01
WO2022089034A1 (zh) 2022-05-05

Similar Documents

Publication Publication Date Title
CN109660842B (zh) 一种播放多媒体数据的方法及电子设备
CN112714214B (zh) 一种内容接续方法、设备、系统、gui及计算机可读存储介质
US11889180B2 (en) Photographing method and electronic device
CN114115674B (zh) 录音和文档内容的定位方法、电子设备及存储介质
WO2022089034A1 (zh) 视频笔记生成方法及电子设备
CN115278377A (zh) 一种设备间多媒体内容续播的方法
EP4266208A1 (en) Video switching method and apparatus, storage medium, and device
CN113473013A (zh) 图像美化效果的显示方法、装置和终端设备
CN114185503A (zh) 多屏交互的系统、方法、装置和介质
CN113727287A (zh) 一种短消息通知方法和电子终端设备
CN111819830B (zh) 一种通信过程中信息的记录及显示方法及终端
CN113497851B (zh) 控制显示方法及电子设备
CN113593567A (zh) 视频声音转文本的方法及相关设备
CN114008579A (zh) 一种折叠设备的自定义按键方法、设备及存储介质
WO2022095752A1 (zh) 帧解复用方法、电子设备及存储介质
CN114120987B (zh) 一种语音唤醒方法、电子设备及芯片系统
CN113656099A (zh) 一种应用快捷启动方法、装置和终端设备
CN114327198A (zh) 控制功能推送方法及设备
CN115841099B (zh) 基于数据处理的页面填充词的智能推荐方法
CN113672187A (zh) 一种数据双面显示方法、装置、电子设备及存储介质
WO2020077503A1 (zh) 一种信息显示方法及装置
CN115033149A (zh) 消息回复的方法和装置
CN117979156A (zh) 图片拍摄方法、图片处理方法、电子设备及存储介质
CN114338891A (zh) 一种通信方法及装置
CN114327924A (zh) 一种终端设备交互方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant