CN118075532A - 一种视频的摘录方法、电子设备及存储介质 - Google Patents

一种视频的摘录方法、电子设备及存储介质 Download PDF

Info

Publication number
CN118075532A
CN118075532A CN202211466111.2A CN202211466111A CN118075532A CN 118075532 A CN118075532 A CN 118075532A CN 202211466111 A CN202211466111 A CN 202211466111A CN 118075532 A CN118075532 A CN 118075532A
Authority
CN
China
Prior art keywords
video
extraction
tool
note
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211466111.2A
Other languages
English (en)
Inventor
李欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202211466111.2A priority Critical patent/CN118075532A/zh
Publication of CN118075532A publication Critical patent/CN118075532A/zh
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供了一种视频的摘录方法、电子设备及存储介质,涉及终端技术领域。其中,该方法包括:电子设备响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用;然后响应于摘录操作,利用所述摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;再将所述摘录笔记保存至所述笔记应用中。如此,用户可以在视频播放界面,唤醒视频摘录功能以后,利用悬浮在视频播放区域的摘录工具,对播放的视频进行摘录操作,然后电子设备将摘录的笔记保存在笔记应用中。如此,可以方便用户观看笔记,提高用户对于视频信息的管理效率。

Description

一种视频的摘录方法、电子设备及存储介质
技术领域
本申请涉及终端技术领域,尤其涉及一种视频的摘录方法、电子设备及存储介质。
背景技术
视频作为信息的载体,传达信息更为准确、直观,并且便于用户理解。当今社会,基于视频载体的内容分发和信息获取成为了信息传递的重要途径,用户对于视频内容的提取和整理需求越来越大,如何提高视频信息整理效率成为用户关注的问题。
现有技术中,用户在使用电子设备播放视频时,无法实现在播放视频的过程中在视频中做笔记,导致用户整理视频信息的效果不佳。
发明内容
为了解决上述问题,本申请提供了一种视频的摘录方法、电子设备及存储介质,旨在解决现有技术中无法实现在播放视频的过程中在视频中做笔记,导致用户整理视频信息的效果不佳的问题。
第一方面,本申请提供了一种视频的摘录方法,该方法包括:
电子设备响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用;唤醒操作为用户触发的唤醒视频摘录功能的操作,响应于唤醒操作也就是在视频播放界面调用摘录工具和笔记应用;响应于摘录操作,利用摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;摘录操作是用户利用摘录工具对视频播放界面中的视频进行的摘录操作;然后电子设备将摘录笔记保存至笔记应用中。当用户回看笔记时,由于该笔记是基于观看的视频所做的摘录,可以很好的将笔记与观看的视频建立联系,提高了用户整理视频信息的效率。
在一种可能的实现方式中,摘录操作包括以下中的至少一种:
截图摘录操作、录屏视频摘录操作、文本摘录操作或语音转文本摘录操作。
用户可以利用摘录工具对播放界面的视频进行截图摘录操作、录屏视频摘录操作、文本摘录操作或语音转文本摘录操作。截图摘录操作是指用户可以对视频播放界面进行截图的操作;录屏视频摘录操作是指用户可以对视频播放界面播放的视频进行录屏的操作;文本摘录操作是指用户可以对视频播放界面中的文本进行识别的操作;语音转文本摘录操作是指用户可以对视频播放界面播放的视频进行语音转文本的操作。
在一种可能的实现方式中,当摘录操作为截图摘录操作时,利用摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
当用户点击摘录工具中的截屏图标时,电子设备调起摘录工具中的截图摘录工具;根据视频播放区域的位置信息,利用截图摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,摘录笔记为视频播放区域的截图。如此可以获取到视频播放界面的截图,并且使得截图不会截取到无关播放界面的显示内容。
在一种可能的实现方式中,根据视频播放区域的位置信息,利用截图摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
电子设备在媒体流处根据视频播放区域的位置信息,利用截图摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;摘录笔记为不含视频杂声的视频画面;如此可以实现截取的图片为不含弹幕等视频杂声的截图。如果无法在媒体流处对视频播放界面中的视频进行摘录,则在视频播放窗口根据视频播放区域的位置信息,利用截图摘录工具对视频播放界面中的视频进行摘录。
在一种可能的实现方式中,当摘录操作为录屏摘录操作时,利用摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
电子设备调起摘录工具中的录屏摘录工具;然后根据视频播放区域的位置信息,利用录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,摘录笔记为视频播放区域的录屏视频。用户可以利用摘录工具中的录屏摘录工具实现对播放的视频的录屏,并可以将录屏得到的视频插入到笔记中。
在一种可能的实现方式中,根据视频播放区域的位置信息,利用录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
用户在利用录屏摘录工具对视频播放界面中的视频进行摘录的过程中,可以利用摘录工具对视频播放界面中的视频进行标注操作,标注操作包括以下中的至少一种:截屏、涂鸦或打标签的操作;得到摘录笔记,其中,标注操作中截屏或打标签操作得到的摘录笔记,按照标注操作的操作顺序排列在录屏得到的视频的下方;标注操作中涂鸦得到的摘录笔记按照涂鸦操作的时间在录屏得到的视频中显示。如此可以进一步提高用户管理视频信息的效率。
在一种可能的实现方式中,根据视频播放区域的位置信息,利用录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
在媒体流处根据视频播放区域的位置信息,利用录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;摘录笔记为不含视频杂声的录屏视频;如此可以实现录屏得到的视频为不含弹幕等视频杂声的视频。若无法在媒体流处对视频播放界面中的视频进行摘录,则在视频播放窗口根据视频播放区域的位置信息,利用录屏摘录工具对视频播放界面中的视频进行摘录。
在一种可能的实现方式中,当摘录操作为文本摘录操作时,利用摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
电子设备调起摘录工具中的文本摘录工具;然后根据视频播放区域的位置信息,利用文本摘录工具对视频播放界面中的文本进行摘录,得到摘录笔记,摘录笔记为视频播放界面中的文本内容。如此可以实现将视频播放界面中的文本进行识别并提取,并且不会提取到视频播放界面之外的无关的文本。
在一种可能的实现方式中,当摘录操作为语音转文本摘录操作时,利用摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
电子设备调起摘录工具中的语音转文本摘录工具;然后根据视频播放区域的位置信息,利用语音转文本摘录工具对视频播放界面中的语音进行转文本操作并摘录,得到摘录笔记,摘录笔记为视频播放界面中的语音转换成文本的内容。如此可以实现将视频中的语音内容转换为文本,方便用户整理视频信息。
在一种可能的实现方式中,响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用,具体包括:
电子设备响应于用户利用预设操作手势触碰视频播放界面的操作,在视频播放区域悬浮显示摘录工具和笔记应用。该实现方式中,用户可以利用预设操作手势触碰视频播放界面,以唤醒视频摘录功能,实现方式简单方便。
在一种可能的实现方式中,响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用,具体包括:
在用于播放视频的电子设备连接了手写笔的情况下,电子设备响应于用户点击视频播放界面中的手写笔悬浮框的操作;弹出视频摘录选项框;然后响应于用户点击视频摘录选项框中的视频摘录选项的操作,在视频播放区域悬浮显示摘录工具和笔记应用。该实现方式在电子设备连接了手写笔的情况下,可以点击手写笔的悬浮框以唤醒视频摘录功能。
在一种可能的实现方式中,响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用,具体包括:
电子设备响应于用户点击笔记应用中的视频摘录选项的操作,打开显示播放视频的应用的界面;然后响应于用于点击播放视频的应用的操作,打开用户点击的播放视频的应用;再响应于用户点击视频播放的操作,在视频播放区域悬浮显示摘录工具和笔记应用。此种实现方式支持用户在笔记应用界面开启视频摘录功能。
在一种可能的实现方式中,将摘录笔记保存至笔记应用中,具体包括:
将对应于摘录操作生成的摘录笔记按照摘录操作的顺序保存在笔记应用中。如此用户可以在笔记应用中按照笔记的生成顺序观看视频摘录笔记。
在一种可能的实现方式中,当再次播放目标视频时,目标视频为摘录笔记摘录的视频中的任意一个视频,方法还包括:
电子设备响应于唤醒操作,调起对应于目标视频的摘录笔记;在播放目标视频时,显示与目标视频对应的摘录笔记。如此,用户可以在播放视频的时候调用对应该播放视频的笔记,使得视频笔记与原视频建立联系,方便用户观看。
第二方面,本申请提供了一种电子设备,该电子设备包括、处理器和存储器;
其中,在存储器中存储有一个或多个计算机程序,一个或多个计算机程序包括指令;当指令被处理器执行时,使得电子设备执行如上述第一方面中任一种可能的设计中所述的视频的摘录方法。
第三方面,本申请提供了一种计算机存储介质,该计算机存储介质包括计算机指令,当所述计算机指令在电子设备上运行时,所述电子设备执行如上述第一方面中任一种可能的设计中所述的视频的摘录方法。
附图说明
图1为本申请实施例提供的一种对视频进行摘录的操作界面示意图;
图2A为本申请实施例提供的一种电子设备的结构示意图;
图2B为本申请实施例提供的一种电子设备的软件结构框图;
图3A为本申请实施例提供的一种视频摘录功能唤醒界面示意图;
图3B为本申请实施例提供的另一种视频摘录功能唤醒界面示意图;
图3C为本申请实施例提供的又一种视频摘录功能唤醒界面一示意图;
图3D为本申请实施例提供的又一种视频摘录功能唤醒界面二示意图;
图3E为本申请实施例提供的又一种视频摘录功能唤醒界面三示意图;
图4A为本申请实施例提供的一种对视频进行截屏摘录操作并保存成笔记的时序图;
图4B为本申请实施例提供的一种将截屏画面插入到笔记中的界面示意图;
图5A为本申请实施例提供的一种对视频进行录屏摘录操作并保存成笔记的时序图;
图5B为本申请实施例提供的一种摘录工具条示意图;
图5C为本申请实施例提供的一种将录屏笔记插入到笔记中的界面示意图;
图6A为本申请实施例提供的一种对视频进行文本摘录操作并保存成笔记的时序图;
图6B为本申请实施例提供的一种对视频进行文本摘录操作的界面示意图;
图6C为本申请实施例提供的另一种对视频进行文本摘录操作的界面示意图;
图7A为本申请实施例提供的一种对视频进行语音转文本摘录操作并保存成笔记的时序图;
图7B为本申请实施例提供的一种对视频进行语音转文本摘录操作并保存成笔记的界面示意图。
具体实施方式
本申请说明书和权利要求书及附图说明中的术语“第一”、“第二”和“第三”等是用于区别不同对象,而不是用于限定特定顺序。
在本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
视频作为信息的载体,传达信息更为准确、直观,并且便于用户理解。例如,视频会议、视频教学等,都是采用视频的方式进行信息的传递,方便且高效。当今社会,基于视频载体的内容分发和信息获取成为了信息传递的重要途径,用户对于视频内容的提取和整理需求越来越大,例如视频会议中,对于会议重点内容进行批注,在视频教学过程中,学生做笔记记录重点内容,当回看视频时能够根据记录的内容与视频紧密联系起来。由此如何提高视频信息整理效率成为用户关注的问题。
现有技术中,无法实现在观看视频过程中在视频中做笔记等操作,使得笔记记录的内容无法与原视频产生关联,导致用户整理视频信息的效果不佳。
有鉴于此,本申请实施例提供一种视频的摘录方法,应用于电子设备,在视频播放的过程中,用户可以通过唤醒操作首先唤醒视频笔记摘录功能,也就是使得摘录工具和笔记应用悬浮在视频播放界面,然后利用摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;再将所述摘录笔记保存至笔记应用中。由于该方案提供的方法中,用户可以在原视频内容上做笔记记录,由此可以将视频与笔记建立联系,提高用户对于视频的管理效率。此外,在后续再次播放视频的过程中,当用户再次通过唤醒操作唤醒视频笔记摘录功能时,用户还可以在进行视频播放的过程中同时预览笔记应用的界面。
为了使本领域技术人员更清楚地理解本申请的方案,下面首先说明本申请技术方案的应用场景。
以远程教育为例,当用户观看视频时想对视频的内容做批注,例如,标注关键知识点,标记用户没听懂的地方,或摘录视频中的某些内容等,用户需要做笔记,由于现有技术并不支持用户在原视频中做笔记,当用户回看视频时,可能出现做的笔记与视频内容关联不起来的情况,使得对于视频管理的效果不佳。而本申请提供的方法,可以在用户观看视频的过程中,对视频内容进行摘录、批注等操作。
如图1所示,用户可以在观看视频的时候,进行截屏,或者插入标签等操作,截取的图片和插入的内容会加入笔记中,当用户需要看笔记时,可以在笔记中观看摘录的视频笔记。如此提高了视频的管理效率。
在一些实施例中,电子设备可以是手机、平板电脑、桌面型、膝上型、笔记本电脑、超级移动个人计算机(Ultra-mobile Personal Computer,UMPC)、手持计算机、上网本、个人数字助理(Personal Digital Assistant,PDA)、可穿戴电子设备、智能手表等设备,本申请对上述电子设备的具体形式不做特殊限制。在本实施例中,电子设备的结构可以如图2A所示,图2A为本申请实施例提供的一种电子设备的结构示意图。
电子设备200可以包括处理器210,外部存储器接口220,内部存储器222,充电接口22,充电管理模块240,电源管理模块241,电池242,天线1,天线2,移动通信模块250,无线通信模块260,音频模块270,扬声器270A,受话器270B,麦克风270C,耳机接口270D,传感器模块280,按键290,马达291,指示器292,摄像头293,显示屏294,以及用户标识模块(subscriber identification module,SIM)卡接口295等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备200的具体限定。在本申请另一些实施例中,电子设备200可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器210可以包括一个或多个处理单元,例如:处理器210可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器210中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器210中的存储器为高速缓冲存储器。该存储器可以保存处理器210刚用过或循环使用的指令或数据。如果处理器210需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器210的等待时间,因而提高了系统的效率。
在一些实施例中,处理器210可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器210可以包含多组I2C总线。处理器210可以通过不同的I2C总线接口分别耦合传感器,充电器,闪光灯,摄像头293等。例如:处理器210可以通过I2C接口耦合摄像头293,使处理器210与摄像头293通过I2C总线接口通信,实现电子设备200的摄像功能。
I2S接口可以用于音频通信。在一些实施例中,处理器210可以包含多组I2S总线。处理器210可以通过I2S总线与音频模块270耦合,实现处理器210与音频模块270之间的通信。在一些实施例中,音频模块270可以通过I2S接口向无线通信模块260传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块270与无线通信模块260可以通过PCM总线接口耦合。在一些实施例中,音频模块270也可以通过PCM接口向无线通信模块260传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器210与无线通信模块260。例如:处理器210通过UART接口与无线通信模块260中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块270可以通过UART接口向无线通信模块260传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器210与显示屏294,摄像头293等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器210和摄像头293通过CSI接口通信,实现电子设备200的拍摄功能。处理器210和显示屏294通过DSI接口通信,实现电子设备200的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器210与摄像头293,显示屏294,无线通信模块260,音频模块270,传感器模块280等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备200的结构限定。在本申请另一些实施例中,电子设备200也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块240用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块240可以通过USB接口接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块240可以通过电子设备200的无线充电线圈接收无线充电输入。充电管理模块240为电池242充电的同时,还可以通过电源管理模块241为电子设备供电。
电源管理模块241用于连接电池242,充电管理模块240与处理器210。电源管理模块241接收电池242和/或充电管理模块240的输入,为处理器210,内部存储器222,显示屏294,摄像头293,和无线通信模块260等供电。电源管理模块241还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块241也可以设置于处理器210中。在另一些实施例中,电源管理模块241和充电管理模块240也可以设置于同一个器件中。
电子设备200的无线通信功能可以通过天线1,天线2,移动通信模块250,无线通信模块260,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备200中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块250可以提供应用在电子设备200上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块250可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块250可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块250还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块250的至少部分功能模块可以被设置于处理器210中。在一些实施例中,移动通信模块250的至少部分功能模块可以与处理器210的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器270A,受话器270B等)输出声音信号,或通过显示屏294显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器210,与移动通信模块250或其他功能模块设置在同一个器件中。
无线通信模块260可以提供应用在电子设备200上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块260可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块260经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器210。无线通信模块260还可以从处理器210接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备200的天线1和移动通信模块250耦合,天线2和无线通信模块260耦合,使得电子设备200可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备200通过GPU,显示屏294,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏294和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器210可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏294用于显示图像,视频等。显示屏294包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备200可以包括1个或N个显示屏294,N为大于1的正整数。
电子设备200可以通过视频编解码器,NPU,显示屏294以及应用处理器等实现视频播放功能。
视频编解码器用于对数字视频压缩或解压缩。电子设备200可以支持一种或多种视频编解码器。这样,电子设备200可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口220可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备200的存储能力。外部存储卡通过外部存储器接口220与处理器210通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器222可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器222可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能,视频播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本,视频笔记等)等。此外,内部存储器222可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器210通过运行存储在内部存储器222的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备200的各种功能应用以及数据处理。
音频模块270用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块270还可以用于对音频信号编码和解码。在一些实施例中,音频模块270可以设置于处理器210中,或将音频模块270的部分功能模块设置于处理器210中。
扬声器270A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备200可以通过扬声器270A获取视频中的声音。
受话器270B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备200接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风270C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风270C发声,将声音信号输入到麦克风270C。电子设备200可以设置至少一个麦克风270C。在另一些实施例中,电子设备200可以设置两个麦克风270C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备200还可以设置三个,四个或更多麦克风270C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口270D用于连接有线耳机。耳机接口270D可以是USB接口,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
按键290包括开机键,音量键等。按键290可以是机械按键。也可以是触摸式按键。电子设备200可以接收按键输入,产生与电子设备200的用户设置以及功能控制有关的键信号输入。
马达291可以产生振动提示,可以用于触摸振动反馈。例如,作用于不同应用,例如视频播放等的触摸操作,可以对应不同的振动反馈效果。作用于显示屏294不同区域的触摸操作,马达291也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器292可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
电子设备200的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本发明实施例以分层架构的Android系统为例,示例性说明电子设备200的软件结构。
图2B是本发明实施例的电子设备200的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2B所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,笔记,短信息、摘录工具等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2B所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等,手势识别服务,图像处理器。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,录屏、截取屏幕等,还可以响应于在视频中做笔记的操作,唤醒笔记窗口。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备200的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面1管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),二维图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了二维和三维图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
二维图形引擎是二维绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
结合图2B,介绍下本方案的实现过程:
当用户打开某一个视频应用程序后,可以采用唤醒操作唤醒笔记摘录功能。
唤醒操作可以为用户执行的预设操作手势触碰视频播放界面的操作,以下说明中以唤醒操作为预设操作手势为例进行说明,预设操作手势可以为三指下滑,可以理解的是,唤醒操作也可以为其它的手势动作。在一些实施例中,用户可以在笔记摘录功能的相关设置选项中进行自定义的设置。
用户执行三指下滑的唤醒操作唤醒笔记摘录功能,应用程序框架层的手势识别服务会根据三指下滑的动作,调起笔记应用和摘录工具,即在视频播放区域悬浮显示摘录工具和笔记应用。
当用户触发摘录工具中的某一个操作后,摘录工具识别视频的播放区域,并将视频播放区域的位置信息传送给图像处理器,图形处理器根据视频播放区域的位置信息将视频处理成预设格式的视频传输给摘录工具,摘录工具对基于预设格式的视频进行摘录操作。如此可以实现摘录的视频笔记基于视频播放区域显示界面的内容进行摘录。
摘录工具将对视频进行摘录生成的笔记插入到笔记应用的数据库中,笔记应用根据笔记的插入时间将笔记按时间顺序显示在笔记应用界面。
为了使得本申请的技术方案更加清楚、易于理解,下面以电子设备为手机为例,对本申请实施例提供的电子设备进行介绍。
参见图3A,图3A为本申请实施例提供的一种视频摘录功能唤醒界面示意图。
当用户打开视频播放界面的时候,用户可以三指下滑并停顿的方式,松手便可触发视频摘录功能,也即调起系统笔记应用301及摘录工具302,摘录工具302支持用户对视频进行截图摘录操作、录屏视频摘录操作、文本摘录操作或语音转文本摘录操作。摘录工具302的起始状态包括截屏图标3021,录屏图标3022,视频界面文本识别图标3023及视频语音转文本图标3024,各图标的功能分别对应截图摘录操作、录屏视频摘录操作、文本摘录操作和语音转文本摘录操作。
在一种可能的实现方式中,如果电子设备连接了手写笔,视频显示界面会出现手写笔悬浮球,如图3B中的a界面所示,此时,点击悬浮球,显示的界面如图3B中的b所示,在菜单里点击视频摘录选项,即可调起摘录工具和笔记应用,即在视频播放区域悬浮显示摘录工具和笔记应用。
在一种可能的实现方式中,唤醒视频摘录功能可以首先打开笔记的应用界面,如图3C所示,然后点击笔记应用界面的添加按钮,如图3C中的a界面所示。
在弹出来的菜单栏中选择视频摘录选项,如图3C中的b界面所示;界面会跳转到图3D中的a界面;然后选择播放视频的目标应用,如图3D中的b界面所示;例如,选择“应用A”的应用软件,界面跳转到图3E,在视频播放的过程中可以对视频进行摘录。如果是在未选中某一个播放视频时,例如,应用A只是停留在视频首页,有关视频摘录功能的按键置灰。
本申请实施例提供的方案中,在视频播放的过程中,可以实现对视频进行录屏、截屏、对视频画面进行涂鸦、插入标签、识别视频画面中的文本并保存文本、将视频中的语音转换为文字记录到笔记中。下面逐一说明对视频画面所做的每一个操作的具体实现过程。
参见图4A,图4A为本申请实施例提供的一种对视频进行截屏摘录操作并保存成笔记的时序图,具体包括以下步骤:
S400、用户打开视频播放界面。
用户打开某一个播放视频的应用软件,选中一个视频进行播放。
S401、用户在视频播放界面唤醒视频摘录功能,打开摘录工具和笔记应用。
当用户打开某一视频播放软件后,选择某一个视频进行播放,用户可以通过上述介绍的摘录视频工具唤醒方式中的任意一种,唤醒视频摘录功能。例如,用户可以采用三指下滑的唤醒操作,在视频播放界面中三个手指向下滑动并停顿,松手后唤醒视频摘录功能。
S402、笔记应用和摘录工具悬浮显示在视频播放界面的播放区域中。
视频摘录功能被唤醒后,电子设备调起摘录工具和笔记应用,即摘录工具和笔记应用悬浮框显示在播放的视频界面中。显示效果如图3A中的b界面所示,其中,摘录工具302的起始状态包括截屏图标3021,录屏图标3022,视频界面文本识别图标3023及视频语音转文本图标3024。
S403、用户点击摘录工具中的截屏图标。
用户点击摘录工具中的截屏图标3021,以控制摘录工具对视频播放界面进行截屏的操作。截屏图标3021对应于截屏摘录工具。
S404、摘录工具对视频界面进行截屏操作,并将截屏数据传送给笔记应用。
用户点击摘录工具中的截屏图标3021后,摘录工具对视频画面进行截屏的操作,并且摘录工具根据视频播放区域的位置信息,仅对视频播放区域的界面进行截屏操作。如此可以减少无关的画面内容。摘录工具默认从媒体流处进行截屏,如此可以确保截屏画面为不含弹幕等视频杂声的纯净视频画面。如果获取不到视频源,也就是无法在媒体流处对视频播放界面中的视频进行摘录,则摘录工具会在视频窗口进行截屏。然后将得到的摘录笔记,即视频播放区域的截图画面传送给笔记应用。
S405、笔记应用将截屏保存至笔记中。
摘录工具将截屏数据传送给笔记应用后,笔记应用自动将截屏画面插入到笔记中,截屏画面插入到笔记中的示意图如图4B所示。
在一些可能的实现方式中,摘录工具在对屏幕界面进行截屏时,可以自动识别视频的有效显示区域,可以自动滤除视频有效显示区域以外的区域。例如,某些视频在播放的时候会有黑边,摘录工具可以自动滤除黑边。
用户在回顾笔记的时候,可以打开笔记列表观看记录的视频截图。在笔记应用列表中显示的是预览图片,是按照预设比例缩小后的图片,点击可以放大预览图片。
参见图5A,图5A为本申请实施例提供的一种对视频进行录屏摘录操作并保存成笔记的时序图,具体包括以下步骤:
S500、用户打开视频播放界面。
用户打开某一个播放视频的应用软件,选中一个视频进行播放。
S501、用户在视频播放界面唤醒视频摘录功能,打开摘录工具和笔记应用。
当用户打开某一视频播放软件后,选择某一个视频进行播放,用户可以通过上述介绍的摘录视频工具唤醒方式中的任意一种,唤醒视频摘录功能。例如,用户可以采用三指下滑的唤醒操作,在视频播放界面中三个手指向下滑动并停顿,松手后唤醒笔记应用。
S502、笔记应用和摘录工具悬浮显示在视频播放界面中。
该实现过程与402中的步骤实现过程相同,在此不再赘述。
S503、用户点击摘录工具中的录屏图标。
用户点击图5B中的摘录工具中的录屏图标3022,以控制摘录工具进行录屏的操作。录屏图标3022即为录屏摘录工具。
S504、摘录工具对视频界面进行录屏操作,并将录屏视频传送给笔记应用。
用户点击录屏图标3022以后,摘录工具条变为如图5B所示,相比于图3A中b界面中的工具条,图5B所示的工具条增加了涂鸦图标5010和标签图标5011,这两个图标支持在开启视频录屏功能后使用。用户点击截屏图标3021以后,摘录工具开始对视频进行录屏,并且摘录工具根据视频播放区域的位置信息,仅对视频播放区域的界面进行录屏操作。如此可以减少无关的画面内容。摘录工具默认从媒体流处进行录屏,如此可以确保录屏画面为不含弹幕等视频杂声的纯净视频画面。如果获取不到视频源,也就是无法在媒体流处对视频播放界面中的视频进行摘录,则摘录工具会在视频窗口进行录屏。
在对视频进行录屏的过程,可以利用摘录工具对视频播放界面中的视频进行标注操作,标注操作包括以下中的至少一种:截屏、涂鸦或打标签的操作。例如点击工具条上的涂鸦图标5010,可以在录屏的过程中对录屏的视频进行涂鸦的操作,例如对重点内容进行标记或圈点,在界面内容上写文字等操作。这些涂鸦内容会保存在录屏视频里,在回看录屏视频时,涂鸦的过程会在视频中展现出来,例如,涂鸦是对某些内容进行圈点,视频笔记播放的时候会还原圈点的过程。
在对视频进行录屏的过程中,用户还可以点击工具条上的打标签图标5011,可以在录屏的过程中对录屏的视频进行做批注的操作,点击一次打标签图标5011可以添加一条标签,并能够显示添加标签在录屏视频的时间节点,例如,可以在录屏录到30秒的地方添加“此处为重点”的文字标签。然后标签会保存在录屏笔记视频的下方,当播放视频录屏笔记时,未播放到30秒时,该标签被置灰,当视频播放到30秒时,该标签处于高亮态,也就是观看视频录屏笔记时,录屏视频会将在录屏过程中做的标签按照做标签的时间依次播放。该文字标签的字数可设置最多容纳的字数,例如,可设置最多容纳50字。
在对视频进行录屏的过程中,用户还可以点击工具条上的截屏图标3021,对当前的视频界面进行截屏,该截屏带有标签属性。由于该截屏操作是在录屏的过程中进行的,故该截屏会保存在该录屏视频的下方,并且用户截完屏后可以在截屏带有的标签栏做文字说明,例如,可以对截屏做“此处没听懂”等说明,该文字标签的字数可设置最多容纳的字数,例如,可设置最多容纳50字。用户在观看录屏视频笔记时,同样是在未播放到该截屏时,该截屏笔记被置灰,当播放到该截屏笔记时,该截屏笔记高亮进行显示。
如果在对视频进行录屏的过程中,用户既对录屏视频进行了截屏、涂鸦、打标签等操作,上述操作会按照时间顺序排列在录屏视频的下方,也就是标注操作中截屏或打标签操作得到的摘录笔记,按照标注操作的操作顺序排列在录屏得到的视频的下方进行显示;标注操作中涂鸦得到的摘录笔记按照涂鸦操作的时间在录屏得到的视频中显示。如图5C所示,该录屏视频为30秒的视频,在录屏3秒的时刻添加了一条标签“重点”;在录屏10秒的时刻截了一张图,该截图带有标签属性,可以在图中“可对该张截图做文字说明”的位置进行文字说明;当录屏到20秒的时刻,添加了一条标签,但是没有写内容,可以在图中“点击此处可添加标签”处填写标签的内容。
当用户回看录屏笔记时,播放到相应的节点时,对应的操作会以高亮显示,未播放到该操作,或该操作播放完成后,会被置灰;也就是在播放录屏笔记的视频时,笔记中的标签和记录的文本及截屏等会被置灰,随着视频的播放逐步显示,以表征当前播放的位置记录的信息。
当录制完成视频以后,可以对录制的视频添加标题,例如,可以将视频标题设置为录制时间,视频的内容,视频的来源等。
用户在回看视频的录屏笔记的时候,也可以点击录屏视频下方的截屏、标签等内容,例如,用户点击录屏视频下方的标签,视频会自动跳转到录屏视频制作标签的时间节点进行播放。如此用户可以更加方便的观看制作的视频笔记,使得视频笔记观看更具灵活性。
在一些可能的实现方式中,摘录工具在对屏幕界面进行录屏时,可以自动识别视频的有效显示区域,可以自动滤除视频有效显示区域以外的区域。例如,某些视频在播放的时候会有黑边,笔记应用可以自动滤除黑边。
参见图6A,图6A为本申请实施例提供的一种对视频进行文本摘录操作并保存成笔记的时序图,具体包括以下步骤:
S600、用户打开视频播放界面。
用户打开某一个播放视频的应用软件,选中一个视频进行播放。
S601、用户在视频播放界面唤醒视频摘录功能。
该实现过程与401中的步骤实现过程相同,在此不再赘述。
S602、笔记应用和摘录工具悬浮显示在视频播放界面中。
该实现过程与402中的步骤实现过程相同,在此不再赘述。
S603、用户点击摘录工具中的视频界面文本识别图标。视频界面文本识别图标即为文本摘录工具。
S604、摘录工具提取视频中的文本内容,并发送给笔记应用。
摘录工具根据视频播放区域的位置信息,对视频播放界面中的文本进行摘录,得到摘录笔记,摘录笔记为视频播放界面中的文本内容。
S605、笔记应用将提取的视频中的文本内容保存至笔记中。
以远程教育场景为例,当用户观看视频时,有重要知识点,或有关键信息需要摘录时,用户可以通过点击视频界面文本识别图标3023进行视频显示界面的内容提取,用户通过摘录工具提取视频界面中的文本内容的具体实现过程如下:
用户点击视频界面文本识别图标3023,摘录工具会自动提取当前视频界面中的文本内容。
以观看的视频为非直播视频为例,也就是说观看的视频可以暂停,用户点击视频界面文本识别图标3023后,摘录工具会自动生成一个冻帧悬浮窗,悬浮在视频画面的最上层,并且悬浮窗上面的文本会以高亮的状态显示,用于提示用户可以对该文本进行拖拽等操作。用户可以使用手写笔或手动拖拽移动识别出的文本至笔记中。具体地,用户点击视频界面文本识别图标3023后,摘录工具调用图片文本识别控件,以实现将图片中的文本识别出来并提供给用户可拖拽或复制的文本。由于用户开启视频界面文本识别图标3023后,视频会自动暂停,用户需要手动关闭视频界面文本识别图标3023,视频会继续播放。
在一些可能的实现方式中,如果用户在点击视频界面文本识别图标3023后,视频自动暂停了,但是用户并没有将选中区域识别出的文本内容添加到笔记中,用户在此时点击了视频继续播放按钮,冻帧悬浮窗的内容还在,视频可以在冻帧悬浮窗的后面继续播放,当用户提取完成冻帧悬浮窗中的文本内容至笔记中后,关闭视频界面文本识别图标3023。
在一些可能的实现方式中,用户在点击视频界面文本识别图标3023后,视频也可以继续播放,即视频可以在冻帧悬浮窗的后面继续播放,当用户提取完成冻帧悬浮窗中的文本内容至笔记中后,关闭视频界面文本识别图标3023即可。
以观看的视频为直播视频为例,也就是说观看的视频不可以暂停,用户在点击视频界面文本识别图标3023后,笔记应用同样会自动生成一个冻帧悬浮窗,悬浮在视频画面的最上层,并且悬浮窗上面的文本会以高亮的状态显示,用于提示用户可以对该文本进行拖拽等操作。用户可以使用手写笔或手动拖拽移动识别出的文本至笔记中。由于观看的视频为直播视频,不支持暂停,则视频会在冻帧悬浮窗的后面继续播放,当用户提取完成冻帧悬浮窗中的文本内容至笔记中后,关闭视频界面文本识别图标3023即可。
默认的用户点击视频界面文本识别图标3023后,视频默认是自动变为暂停状态,如果视频已经处于暂停的状态,不会再触发暂停视频的操作;如果是直播视频,开启视频界面文本识别图标3023后,视频并不会暂停。
默认的用户关闭视频界面文本识别图标3023后,视频默认是自动变为播放状态,如果视频已经处于播放的状态,不会再触发播放视频的操作。
如图6B所示,视频界面如图6B中的a界面所示,用户在当前界面进行视频界面文本内容的提取操作,用户可以采用两种方式进行:
第一种,用户可以在不录屏的情况下,直接点击视频界面文本识别图标3023,这样识别完成后的文字以图6B中b界面存储在笔记中。
第二种,用户可以在录屏的情况下,点击视频界面文本识别图标3023,这样识别的文字会插入在录屏视频生成的视频笔记的下面,并且可以显示在录屏到具体的时间节点进行的文字识别操作。
当摘录工具提供给用户可拖拽的文本以后,用户可以对视频界面中的文本进行选择性的拖拽,如图6C所示,仅选中“天涯若比邻”的文字文本,然后可以对选中的文本进行插入笔记、复制、分享、翻译、搜索等操作。
参见图7A,图7A为本申请实施例提供的一种对视频进行语音转文本摘录操作并保存成笔记的时序图,具体包括以下步骤:
S700、用户打开视频播放界面。
用户打开某一个播放视频的应用软件,选中一个视频进行播放。
S701、用户在视频播放界面唤醒视频摘录功能。
该实现过程与401中的步骤实现过程相同,在此不再赘述。
S702、笔记应用和摘录工具悬浮显示在视频播放界面中。
该实现过程与402中的步骤实现过程相同,在此不再赘述。
S703、用户点击摘录工具中的视频语音转文本图标3024。
S704、摘录工具将视频中的语音转换成文本内容并传送给笔记应用。
S705、笔记应用将视频中的语音转换成的文本内容保存至笔记中
用户有时候需要将视频中的语音内容记录下来,用户可以通过点击摘录工具中的视频语音转文本图标3024,从用户点击该视频语音转文本图标3024开始,至用户点击该视频语音转文本图标3024结束,摘录工具会根据所述视频播放区域的位置信息,将这段时间内视频中的语音转换成文本内容,并将转换完成的文本内容保存至笔记中。
在利用该视频语音转文本选项进行语音转文本时,图7B中的a界面为视频的播放界面,用户可以单独对视频中的语音进行提取并转换成文本内容,存储至笔记中,并不需要在录屏状态时提取,提取的笔记显示界面如图7B中的b界面所示。
在一些可能的实现方式中,用户还可以将转换的文本对应的视频同样录屏下来,保存在笔记中,也就是可以在对视频进行录屏的时候,对录屏中的内容进行提取语音的文本内容的操作,提取的笔记显示界面如图7B中的c界面所示这样可以在观看视频笔记的时候,更加方便用户将提取的文本内容与视频进行对应。视频语音转文本功能需要在视频播放的时候对视频中的语音进行识别,在视频未播放时,不能实现对视频中的语音进行识别。由此,使得对视频的摘录方式更加灵活。
当视频中的语音转化的文本比较多的时候,转换的字数可以不受限制,但是文本的显示可以设置默认只显示三行的文本内容,其他的文本可以滚动进行显示;或者可以对多于三行的文本进行隐藏,当点击下拉菜单时,可以显示更多的文本,点击下拉菜单后的显示方式可以设置显示的文本的区域占屏幕显示区域的比例,例如设置显示的文本的区域占屏幕的1/3高;也可以设置文本的显示区域内的文本同样可以滚动显示。
如果已经用户之前对相同的语音进行了转文本操作,如果用户再次点击视频语音转文本图标3024,笔记应用会发送弹窗,用于询问用户是否需要再次进行语音转文本内容的操作,待用户确认后,将最新转换的文本内容覆盖之前转换的文本内容。
如果用户在观看视频的过程中,对视频同时进行了多次视频摘录操作,每一次摘录的内容会按照摘录操作顺序由上到下保存至笔记列表中,用户可以点击笔记列表进行回看。
在一些实施例中,当用户在此播放目标视频的时候,也就是播放摘录笔记摘录的视频中的任意一个视频时,同样可以在视频播放界面,唤醒视频笔记摘录功能,如此可以将与目标视频对应的摘录笔记列表显示在视频播放界面中,用户可以在播放视频的同时回顾笔记内容,使得笔记与原视频建立的联系,进一步提高了用户整理视频信息的效率。
在一些实施例中,用户也可以将做好的笔记与其他的电子设备进行分享,并且分享的笔记可以保存至其他的电子设备的笔记中,如此丰富了视频笔记的创建方式,方便用户进行资源的交流。
当用户想要删除做好的截图笔记时,可以长按笔记中笔记页的空白区域,会弹出删除的选项,用户点击删除后会删除该页笔记,并且支持用户撤销删除笔记的操作。
本实施例还提供了一种电子设备,该电子设备包括:处理器和存储器;
在所述存储器中存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令;当所述指令被所述处理器执行时,使得所述电子设备执行上述实施例描述的视频的摘录方法。
本实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中包括指令,当上述指令在电子设备上运行时,使得该电子设备执行上述实施例描述的相关方法步骤,以实现上述实施例中描述的视频的摘录方法。
本申请实施例提供的方案中,主要采用以下几个步骤实现视频的摘录:
响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用;用户触发唤醒电子设备视频摘录功能的操作,具体唤醒的方式参见上述实施例的描述,此处不再赘述。当用户触发唤醒操作后,电子设备会响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用。
响应于摘录操作,利用摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;用户触发摘录操作后,例如触发摘录工具中的摘录操作中的任一项操作后,电子设备响应于用户触发的摘录操作,利用摘录工具对视频播放界面中的视频进行摘录,并得到摘录笔记。
将摘录笔记保存至笔记应用中。将摘录笔记保存至笔记应用中,用户就可以在笔记应用中观看摘录的笔记了,由于该摘录的笔记是基于原播放视频的摘录,由此用户可以根据摘录笔记将笔记与原视频建立联系,提高用户对于视频的管理效率。
应当理解,在本申请中,“至少一个(项)”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:只存在A,只存在B以及同时存在A和B三种情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,“a和b”,“a和c”,“b和c”,或“a和b和c”,其中a,b,c可以是单个,也可以是多个。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (16)

1.一种视频的摘录方法,其特征在于,所述方法包括:
响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用;
响应于摘录操作,利用所述摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;
将所述摘录笔记保存至所述笔记应用中。
2.根据权利要求1所述的方法,其特征在于,所述摘录操作包括以下中的至少一种:
截图摘录操作、录屏视频摘录操作、文本摘录操作或语音转文本摘录操作。
3.根据权利要求2所述的方法,其特征在于,当所述摘录操作为截图摘录操作时,所述利用所述摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
调起所述摘录工具中的截图摘录工具;
根据所述视频播放区域的位置信息,利用所述截图摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,所述摘录笔记为所述视频播放区域的截图。
4.根据权利要求3所述的方法,其特征在于,所述根据所述视频播放区域的位置信息,利用所述截图摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
在媒体流处根据所述视频播放区域的位置信息,利用所述截图摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;所述摘录笔记为不含视频杂声的视频画面;
若无法在媒体流处对视频播放界面中的视频进行摘录,则在视频播放窗口根据所述视频播放区域的位置信息,利用所述截图摘录工具对视频播放界面中的视频进行摘录。
5.根据权利要求2所述的方法,其特征在于,当所述摘录操作为录屏摘录操作时,所述利用所述摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
调起所述摘录工具中的录屏摘录工具;
根据所述视频播放区域的位置信息,利用所述录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,所述摘录笔记为所述视频播放区域的录屏视频。
6.根据权利要求5所述的方法,其特征在于,所述根据所述视频播放区域的位置信息,利用所述录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
在利用所述录屏摘录工具对视频播放界面中的视频进行摘录的过程中,利用所述摘录工具对视频播放界面中的视频进行标注操作,所述标注操作包括以下中的至少一种:截屏、涂鸦或打标签的操作;
得到摘录笔记,其中,所述标注操作中截屏或打标签操作得到的摘录笔记,按照标注操作的操作顺序排列在录屏得到的视频的下方;所述标注操作中涂鸦得到的摘录笔记按照涂鸦操作的时间在录屏得到的视频中显示。
7.根据权利要求5所述的方法,其特征在于,所述根据所述视频播放区域的位置信息,利用所述录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
在媒体流处根据所述视频播放区域的位置信息,利用所述录屏摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记;所述摘录笔记为不含视频杂声的录屏视频;
若无法在媒体流处对视频播放界面中的视频进行摘录,则在视频播放窗口根据所述视频播放区域的位置信息,利用所述录屏摘录工具对视频播放界面中的视频进行摘录。
8.根据权利要求2所述的方法,其特征在于,当所述摘录操作为文本摘录操作时,所述利用所述摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
调起所述摘录工具中的文本摘录工具;
根据所述视频播放区域的位置信息,利用所述文本摘录工具对视频播放界面中的文本进行摘录,得到摘录笔记,所述摘录笔记为所述视频播放界面中的文本内容。
9.根据权利要求2所述的方法,其特征在于,当所述摘录操作为语音转文本摘录操作时,所述利用所述摘录工具对视频播放界面中的视频进行摘录,得到摘录笔记,具体包括:
调起所述摘录工具中的语音转文本摘录工具;
根据所述视频播放区域的位置信息,利用所述语音转文本摘录工具对视频播放界面中的语音进行转文本操作并摘录,得到摘录笔记,所述摘录笔记为所述视频播放界面中的语音转换成文本的内容。
10.根据权利要求1所述的方法,其特征在于,所述响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用,具体包括:
响应于用户利用预设操作手势触碰视频播放界面的操作,在视频播放区域悬浮显示摘录工具和笔记应用。
11.根据权利要求1所述的方法,其特征在于,所述响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用,具体包括:
在用于播放视频的电子设备连接了手写笔的情况下,响应于用户点击视频播放界面中的手写笔悬浮框的操作;
弹出视频摘录选项框;
响应于用户点击所述视频摘录选项框中的视频摘录选项的操作,在视频播放区域悬浮显示摘录工具和笔记应用。
12.根据权利要求1所述的方法,其特征在于,所述响应于唤醒操作,在视频播放区域悬浮显示摘录工具和笔记应用,具体包括:
响应于用户点击笔记应用中的视频摘录选项的操作,打开显示播放视频的应用的界面;
响应于用于点击播放视频的应用的操作,打开用户点击的播放视频的应用;
响应于用户点击视频播放的操作,在视频播放区域悬浮显示摘录工具和笔记应用。
13.根据权利要求1-12任一项所述的方法,其特征在于,所述将所述摘录笔记保存至所述笔记应用中,具体包括:
将对应于摘录操作生成的摘录笔记按照摘录操作的顺序保存在笔记应用中。
14.根据权利要求1-12任一项所述的方法,其特征在于,当再次播放目标视频时,所述目标视频为摘录笔记摘录的视频中的任意一个视频,所述方法还包括:
响应于唤醒操作,调起对应于所述目标视频的摘录笔记;
在播放所述目标视频时,显示与所述目标视频对应的摘录笔记。
15.一种电子设备,其特征在于,包括:处理器和存储器;
在所述存储器中存储有一个或多个计算机程序,所述一个或多个计算机程序包括指令;当所述指令被所述处理器执行时,使得所述电子设备执行如权利要求1-14中任一项所述的视频的摘录方法。
16.一种计算机存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,所述电子设备执行如权利要求1-14中任一项所述的视频的摘录方法。
CN202211466111.2A 2022-11-22 2022-11-22 一种视频的摘录方法、电子设备及存储介质 Pending CN118075532A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211466111.2A CN118075532A (zh) 2022-11-22 2022-11-22 一种视频的摘录方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211466111.2A CN118075532A (zh) 2022-11-22 2022-11-22 一种视频的摘录方法、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN118075532A true CN118075532A (zh) 2024-05-24

Family

ID=91102640

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211466111.2A Pending CN118075532A (zh) 2022-11-22 2022-11-22 一种视频的摘录方法、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN118075532A (zh)

Similar Documents

Publication Publication Date Title
JP7142783B2 (ja) 音声制御方法及び電子装置
CN110351422B (zh) 一种通知消息的预览方法、电子设备及相关产品
WO2020211709A1 (zh) 一种添加批注的方法及电子设备
WO2020238356A1 (zh) 界面显示方法、装置、终端及存储介质
CN111078091A (zh) 分屏显示的处理方法、装置及电子设备
CN114461111B (zh) 启动功能的方法及电子设备
CN112130714B (zh) 可进行学习的关键词搜索方法和电子设备
CN111970401B (zh) 一种通话内容处理方法、电子设备和存储介质
WO2020155875A1 (zh) 电子设备的显示方法、图形用户界面及电子设备
CN113986070B (zh) 一种应用卡片的快速查看方法及电子设备
CN112068907A (zh) 一种界面显示方法和电子设备
WO2023236794A1 (zh) 一种音轨标记方法及电子设备
CN115756268A (zh) 跨设备交互的方法、装置、投屏系统及终端
CN113852714A (zh) 一种用于电子设备的交互方法和电子设备
CN115016697A (zh) 投屏方法、计算机设备、可读存储介质和程序产品
CN112740148A (zh) 一种向输入框中输入信息的方法及电子设备
WO2021042881A1 (zh) 消息通知方法及电子设备
CN114650330A (zh) 一种添加操作序列的方法、电子设备和系统
CN113448658A (zh) 截屏处理的方法、图形用户接口及终端
WO2023029916A1 (zh) 批注展示方法、装置、终端设备及可读存储介质
CN111752648A (zh) 一种系统语言的切换方法及相关装置
CN118075532A (zh) 一种视频的摘录方法、电子设备及存储介质
CN114664306A (zh) 一种编辑文本的方法、电子设备和系统
WO2023098417A1 (zh) 一种界面显示方法以及装置
CN117130527A (zh) 日程管理方法、电子设备和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
SE01 Entry into force of request for substantive examination