发明内容
鉴于现有技术的不足,本发明的目的是提供视频数据与文本数据互相定位和文字速录的方法及装置,以便于快捷录入文字,并且使视频与文字相互对应跳转定位。
为达上述目的,一方面,本发明实施例提供了一种利用视频数据定位文本数据的方法,所述方法包括:
输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息包括所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
在所述视频数据的播放过程中,根据用户对所述视频数据的定位操作,获取定位后的视频相对时间值;
查找所述时间签信息中与所述视频相对时间值最接近的相对时间长度,以及最接近的相对时间长度对应的段落值;
根据查找到的段落值,将所述文本数据定位到所述查找到的段落值对应的段落。
为达上述目的,另一方面,本发明实施例提供了一种利用文本数据定位视频数据的方法,所述方法包括:
输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息为所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
根据用户对文本数据的段落选中操作,获取用户选中段落对应的第一段落值;
查找所述时间签信息中与所述第一段落值最接近的第二段落值,以及所述第二段落值对应的相对时间长度;
将所述第二段落值对应的相对时间长度作为视频相对时间值,并将所述视频数据定位到从所述视频相对时间值开始播放。
为达上述目的,又一方面,本发明实施例提供了一种快速录入文字的方法,所述方法包括:
建立问题答案模板文件;
读取所述问题答案模板文件中的问题信息,根据所述问题信息生成问题索引;
将用户从所述问题索引中选定的问题发送给文字编辑器;
从所述问题答案模板文件中读取与用户选定的问题对应的答案信息,根据与用户选定的问题对应的答案信息生成答案索引;
将用户从所述答案索引中选定的答案发送给文字编辑器;
在所述文字编辑器中呈现用户从所述问题索引中选定的问题和用户从所述答案索引中选定的答案。
为达上述目的,又一方面,本发明实施例提供了一种利用视频数据定位文本数据的装置,所述装置包括:
输入单元,用于输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息为所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
视频相对时间值获取单元,用于在所述视频数据的播放过程中,根据用户对所述视频数据的定位操作,获取定位后的视频相对时间值;
查找单元,用于查找所述时间签信息中与所述视频相对时间值最接近的相对时间长度,以及最接近的相对时间长度对应的段落值;
文本数据定位单元,用于根据查找到的段落值,将所述文本数据定位到所述查找到的段落值对应的段落。
为达上述目的,又一方面,本发明实施例提供了一种利用文本数据定位视频数据的装置,所述装置包括:
输入单元,用于输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息为所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
段落值获取单元,用于根据用户对文本数据的段落选中操作,获取用户选中段落对应的第一段落值;
查找单元,用于查找所述时间签信息中与所述第一段落值最接近的第二段落值,以及所述第二段落值对应的相对时间长度;
视频数据定位单元,用于将所述第二段落值对应的相对时间长度作为视频相对时间值,并将所述视频数据定位到从所述视频相对时间值开始播放。
为达上述目的,又一方面,本发明实施例提供了一种快速录入文字的装置,所述装置包括:
模板建立单元,用于建立问题答案模板文件;
问题索引生成单元,用于读取所述问题答案模板文件中的问题信息,根据所述问题信息生成问题索引;
发送单元,用于将用户从所述问题索引中选定的问题发送给文字编辑器;
答案索引生成单元,用于从所述问题答案模板文件中读取与用户选定的问题对应的答案信息,根据与用户选定的问题对应的答案信息生成答案索引;
所述发送单元,还用于将用户从所述答案索引中选定的答案发送给文字编辑器,以使得在所述文字编辑器中呈现用户从所述问题索引中选定的问题和用户从所述答案索引中选定的答案。
本发明实施例提供的上述技术方案的有益技术效果在于,可加快文字录入效率,并实现文本数据与视频数据之间的相互定位,还能实现视频与文字的互相校对。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供了一种用于文字录入系统中的文字速录方法。该方法利用利用问题答案模板进行速录。本发明涉及一种在视频、文字记录系统中加快使用者录入速率、提高录入准确率的方法,尤其涉及一种针对部分记录内容相对固定、文本格式相对简单灵活的特点,利用文字编辑器字符串录入和字体属性设置的特性,属于字处理系统的电子文档领域。
图1为本发明实施例的一种快速录入文字的方法的流程图,如图1所示,该方法包括:
110、建立问题答案模板文件。
该问题答案模板包括问题信息和答案信息;该问题信息包括多个预设的问题,该答案信息包括与这些问题相关联的多个预设的答案,每一个预设的问题对应于一个或多个预设的答案。该问题答案模板文件较佳地是格式化的问题答案模板文件,其可以是一个txt文件,在txt文件中,一个问题文本在一行保存,根据换行判断是否是同一问题;与问题对应的一个或多个答案紧跟于对应的问题之后,用例如“~”符区分问题与答案,同样地,一个答案保存在一行,用换行符区别是否为同一个答案。
120、读取所述问题答案模板文件中的问题信息,根据所述问题信息生成问题索引。
具体地,该问题索引较佳地形成为一个问题索引界面,请参阅图2示例性绘示的一个问题索引界面的示意图。本步骤是读取所述问题答案模板文件中的问题信息到内存缓存中的向量数组(vector)中,根据向量中的节点生成问题索引界面,该界面以列表(ListView)的形式展示问题索引。
130、将用户从所述问题索引中选定的问题发送给文字编辑器。
140、从所述问题答案模板文件中读取与用户选定的问题对应的答案信息,根据与用户选定的问题对应的答案信息生成答案索引。
该答案索引较佳地形成为一个答案索引界面,请参阅图3示例性绘示的本发明实施例的一个答案索引界面的示意图,图3中的答案索引界面中的内容是对应于图2中的第一个问题。该答案索引界面中的内容根据用户对该问题索引中的问题的选择而动态地更新变化。
150、将用户从所述答案索引中选定的答案发送给文字编辑器。
160、在所述文字编辑器中呈现用户从所述问题索引中选定的问题和用户从所述答案索引中选定的答案。请参阅图4示例性绘示的本发明实施例的文本编辑器显示快速录入的问答文字的示意图。其中,在文字编辑器中较佳地以不同的颜色区别问题文字和答案文字。
在一种实现方式中,请参阅图5示例性绘示的一种快速录入文字的方法对应的界面示意图,该方法应用于一种文字速录装置,200为文字速录界面,使用者左键单击问题索引界面210中某一项问题,此时文字速录装置从上述的问题答案模板文件中读取该问题对应的所有答案,同样以列表的形式展示答案索引,可以形成一个与上述被选中问题相对应的答案索引界面220。当使用者双击问题索引界面210中某一个问题后,文字速录装置将该问题所有文字信息并发送给文字编辑器230。文字编辑器230从输入接口获取到该问题对应的文字信息后,根据光标位置和文字类型判断下一步处理步骤:若当前光标位置在段落首,且文字类型为问题,则直接插入该问题对应的文字信息,并设置字体颜色(问题和答案在文字编辑器中用设置字体颜色加以区别);或者,若当前光标位置不在段落首,例如在段落中间,且文字信息为问题,则先将光标移至段落尾,再输入换行符,之后插入问题文字,最后设置字体颜色。另外,用户还可从该答案索引界面220中选择与上述被选中问题对应的一个答案,文字速录装置将该答案发送给文字编辑器230,文字编辑器230将该答案显示于上述问题的下一行。
在另一种实现方式中,请参阅图6示例性绘示的另一种快速录入文字的方法对应的界面示意图,该方法应用于一种文字速录装置,200为文字速录界面,首先生成问题索引界面210,以列表的形式异展示问题索引,当用户双击该问题索引界面210中的某个问题时,文字速录装置将该问题的所有文字信息发送给文字编辑器230。文字编辑器230判断若当前插入的为问题信息,则在成功插入问题文字后,获取文字信息末端位置,在该位置生成针对此问题的答案索引,较佳地为形成答案索引列表界面230,并默认激活第一个答案。
可选地,该方法还进一步提供问题答案模板自定义筛选方法,即在界面展示问题索引之后,使用者可触发筛选功能,分别从多个问题答案模板文件中筛选需要使用的问题,并将这些需要使用的问题存储于临时模板文件中,最终使用的问题索引依据此临时模板文件生成。
本发明实施例的上述方法,可实现文字的快速录入,尤其适用于法庭书记员记录视频笔录资料、公安检察院审讯室问询记录。
图7为本发明实施例的一种利用视频数据定位文本数据的方法的流程图。如图7所示,该方法包括:
310、输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息包括所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
在本实施例中,时间签信息定为在电子文档中,包含时间值与文档段落对应关系的结构体(类似书签),此时间签信息较佳地隐藏在电子文档中。在记载了与视频数据相关联的文本数据的电子文档中,也可较佳地可视化呈现用户在该视频数据的录制过程中通过输入设备的快捷键输入的一个或多个时间签标记,这些标记可位于相应段落的段首,用户输入该时间签标记的时间(相对于视频数据的录制起始点)为该时间签的生成时间。
320、在所述视频数据的播放过程中,根据用户对所述视频数据的定位操作,获取定位后的视频相对时间值;
330、查找所述时间签信息中与所述视频相对时间值最接近的相对时间长度,以及最接近的相对时间长度对应的段落值;
340、根据查找到的段落值,将所述文本数据定位到所述查找到的段落值对应的段落。
进一步地,图7所示方法还可以包括如下步骤:根据所述时间签信息,生成时间签索引,所述时间签索引包括多个时间签;在所述时间签索引中,突出显示与所述视频相对时间值最接近的时间签。
较佳地,该时间签索引可形成为一个包含时间签索引列表的界面,界面中的每一个时间签可包含时间签索引值(时间签的序号)、该时间签对应的相对时间长度值、该时间签对应的文本数据的段落值、该段落的摘要或者部分文字(如段落的第一句)等。在一种简化的呈现方式中,时间签索引列表界面中的每一个时间签仅向用户呈现时间签索引值及其相应的相对时间长度值。
进一步地,图7所示方法还可以包括如下步骤:根据用户从时间签索引中选定的索引值,获取与所述索引值对应的时间签;解析所述时间签,获得解析后的视频相对时间值以及与所述解析后的视频相对时间值对应的解析后的段落值;将所述视频数据定位到从所述解析后的视频相对时间值开始播放;将所述文本数据定位到所述解析后的段落值对应的段落。
较佳地,步骤350具本可以包括:根据查找到的段落值,在文本数据的文本编辑器中将光标跳转到所述查找到的段落值对应的段落。
图8为本发明实施例的一种利用文本数据定位视频数据的方法的流程图。如图8所示,该方法包括:
410、输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息为所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
420、根据用户对文本数据的段落选中操作,获取用户选中段落对应的第一段落值;
430、查找所述时间签信息中与所述第一段落值最接近的第二段落值,以及所述第二段落值对应的相对时间长度;
440、将所述第二段落值对应的相对时间长度作为视频相对时间值,并将所述视频数据定位到从所述视频相对时间值开始播放。
步骤430中,如果第一段落值接近的第二段落值有多个,则可选择第一段落值之前的那个作为最优匹配结果。
进一步地,图8所示方法还可以包括如下步骤:根据所述时间签信息,生成时间签索引,所述时间签索引包括多个时间签;在所述时间签索引中,突出显示与用户选中段落对应的第一段落值最接近的时间签。
较佳地,该时间签索引可形成为一个包含时间签索引列表的界面,界面中的每一个时间签可包含时间签索引值(时间签的序号)、该时间签对应的相对时间长度值、该时间签对应的文本数据的段落值、该段落的摘要或者部分文字(如段落的第一句)等。
进一步地,图8所示方法还可以包括如下步骤:根据用户从时间签索引中选定的索引值,获取与所述索引值对应的时间签;解析所述时间签,获得解析后的视频相对时间值以及与所述解析后的视频相对时间值相对应的解析后的段落值;将所述视频数据定位到从所述解析后的视频相对时间值开始播放;将所述文本数据定位到所述解析后的段落值对应的段落。
以下通过举例更加详细地说明图7、图8所示的方法。本发明实施例的视频数据、文本数据之间互相定位的方法可应用于视频与文本的互相校对。其中校对仅是定位方法的一种具体应用。图9示例性地绘示了作为一个举例的视频笔录校对装置的界面示意图。500为视频笔录校对装置,510为视频播放器及其界面,520为时间签索引及其界面,530为文字编辑器及其界面。使用者可通过操作播放器510、文字编辑器530、时间签索引520达到相互校对的目的,以下将详细描述这三者之间的互动关系。其中,视频笔录校对装置500为本发明实施例图11A-图12B中的装置700、装置800的一种具体应用实例,该视频笔录校对装置500同时具有装置700和装置800的功能。
首先保存视频与文本之间的校对信息,包括时间签信息,该时间签信息包括相对时间长度与文本段落之间的对应关系。校对信息和文本数据一起构成电子文档,例如为笔录文本。关于时间签的建立和对应关系形成的过程:开始录制时,校对系统记录当前系统时间,并将该系统时间转换为WinAPI中CTime值,该值与时间签索引值合并,组成视频对应的时间签。例如一个时间签:b009342,其中b009342代表该时间签录入的相对时间,即自录制开始的第9342秒。笔录编辑器,作为一种具体的文字编辑器,通过接口将该值与段落位置相捆绑,并将捆绑信息或对应信息记录在笔录文件附属信息中。开始录制同时,启动时间签定时写入线程,时间循环与使用者配置值管理。
利用视频数据驱动校对文本数据的方法包括如下步骤:视频笔录校对装置500获取输入的电子文档(例如笔录文件)中的时间签信息,根据上述时间签信息解析生成时间签索引,较佳地形成时间签索引列表界面520。当使用者拖动播放器510的进度条512时,播放器510通过接口获取视频相对时间值并发送给上述视频笔录校对装置500。视频笔录校对装置500接收该视频相对时间值,在上述时间签信息中查找与该视频相对时间值最接近的时间签。由于视频时间值与时间签值可能不存在精确对应,算法为查找最近似值。视频笔录校对装置500根据查找到的时间签生成索引值和与所述时间签对应的文本段落值,发送所述索引值给时间签索引520以及发送文本段落值给文本编辑器530。文本编辑器530将光标跳转到与所述文本段落值对应的文本段落。具体地,文本编辑器530收到时间签后,通过段落定位接口将光标跳转到与所述时间签对应的笔录段落位置。时间签索引520收到该索引值后,查找界面中匹配的位置,并高亮显示与该索引值对应的时间签。至此完成视频驱动文本校对。
利用文本数据驱动校对视频数据的方法包括如下步骤:当用户双击文本编辑器530的某一区域时,通过接口获取该区域所在段落值,查找段落值对应的时间签,发送给视频笔录校对装置500;视频笔录校对装置500收到时间签后,解析相对时间值,发送给播放器510,并解析时间签索引值发送给时间签索引列表520;播放器510收到时间值后,通过内部提供的seek接口,跳转到对应的视频时间点;时间签索引列表520收到时间签索引值后,查找界面中匹配的位置,并高亮显示与该时间签索引值对应的时间签。至此完成文本驱动视频校对。
在校对中,利用时间签索引驱动校对视频数据与文本数据的方法包括如下步骤:使用者双击时间签索引列表520中某一项索引值,界面控件获取索引值对应的时间签后发送给视频笔录校对装置500;装置500收到时间签后进行解析,将相对时间解析后发送给播放器510,将与所述时间签信息相对应的段落值解析后发送给文本编辑器530;播放器收510到相对时间值后跳转到相应视频时间点;文本编辑器530收到段落信息后将光标跳转到相应的段落处。至此完成时间签索引列表520驱动视频与文本校对。
通过本发明实施例的方法,可实现视频数据和文本数据之间的互相定位。视频数据和文本数据之间的互相定位,可以用于法庭、审讯室中书记员笔录校对,或者视频直播、点播应用中音视频与笔录文件对应显示。同时由于此技术支持复杂的电子文档,如word、wps,故可用于对于文字处理较为专业的速录行业使用。
图10为本发明实施例的一种快速录入文字的装置的功能框图。如图10所法,该装置600包括:
模板建立单元610,用于建立问题答案模板文件;
问题索引生成单元620,用于读取所述问题答案模板文件中的问题信息,根据所述问题信息生成问题索引;
发送单元630,用于将用户从所述问题索引中选定的问题发送给文字编辑器;
答案索引生成单元640,用于从所述问题答案模板文件中读取与用户选定的问题对应的答案信息,根据与用户选定的问题对应的答案信息生成答案索引;
所述发送单元630,还用于将用户从所述答案索引中选定的答案发送给文字编辑器,以使得在所述文字编辑器中呈现用户从所述问题索引中选定的问题和用户从所述答案索引中选定的答案。
图11A为本发明实施例的一种利用视频数据定位文本数据的装置的整体功能框图,如图11A所示,该装置700包括:
输入单元710,用于输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息为所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
视频相对时间值获取单元720,用于在所述视频数据的播放过程中,根据用户对所述视频数据的定位操作,获取定位后的视频相对时间值;
查找单元730,用于查找所述时间签信息中与所述视频相对时间值最接近的相对时间长度,以及最接近的相对时间长度对应的段落值;
文本数据定位单元740,用于根据查找到的段落值,将所述文本数据定位到所述查找到的段落值对应的段落。
图11B为本发明实施例的一种利用视频数据定位文本数据的装置的具体功能框图。如图11B所示,进一步地,所述装置还可以包括:时间签索引生成单元750,用于根据所述时间签信息,生成时间签索引,所述时间签索引包括多个时间签;时间签索引提示单元760,用于在所述时间签索引中,突出显示与所述视频相对时间值最接近的时间签。
具体地,文本数据定位单元740,具体可以用于根据查找到的段落值,在文本数据的文本编辑器中将光标跳转到所述查找到的段落值对应的段落。
进一步地,如图11B所示,所述装置700还可以包括:
时间签索引响应单元770,用于根据用户从时间签索引中选定的索引值,获取与所述索引值对应的时间签;
时间签解析单元780,用于解析所述时间签,获得解析后的视频相对时间值以及与所述解析后的视频相对时间值对应的解析后的段落值;
视频数据定位单元790,用于将所述视频数据定位到从所述解析后的视频相对时间值开始播放;
文本数据定位单元740,用于将所述文本数据定位到所述解析后的段落值对应的段落。
图12A为本发明实施例的一种利用文本数据定位视频数据的装置的整体功能框图。如图12A所示,该装置800包括:
输入单元810,用于输入视频数据、与所述视频数据相关联的文本数据、以及时间签信息;所述时间签信息为所述文本数据的段落值与相对时间长度之间的对应关系,所述相对时间长度为从所述视频数据的起始时间点至时间签生成时间点之间的时间长度;
段落值获取单元820,用于根据用户对文本数据的段落选中操作,获取用户选中段落对应的第一段落值;
查找单元830,用于查找所述时间签信息中与所述第一段落值最接近的第二段落值,以及所述第二段落值对应的相对时间长度;
视频数据定位单元840,用于将所述第二段落值对应的相对时间长度作为视频相对时间值,并将所述视频数据定位到从所述视频相对时间值开始播放。
图12B为本发明实施例的一种利用文本数据定位视频数据的装置的具体功能框图。如图12B所示,进一步地,所述装置800还包括:
时间签索引生成单元850,用于根据所述时间签信息,生成时间签索引,所述时间签索引包括多个时间签;
时间签索引提示单元860,用于在所述时间签索引中,突出显示与用户选中段落对应的第一段落值最接近的时间签。
进一步地,如图12B所示,所述装置800还可以包括:
时间签索引响应单元870,用于根据用户从时间签索引中选定的索引值,获取与所述索引值对应的时间签;
时间签解析单元880,用于解析所述时间签,获得解析后的视频相对时间值以及与所述解析后的视频相对时间值相对应的解析后的段落值;
该视频数据定位单元840,还可用于将所述视频数据定位到从所述解析后的视频相对时间值开始播放;
文本数据定位单元890,用于将所述文本数据定位到所述解析后的段落值对应的段落。
图10-图12B所示装置的工作过程也在前面的方法实施例中详述,故在此不再赘述。本发明实施例的装置可实现文本与视频之间的互相定位,并能实现文本与视频之间的互相校对。本发明实施例的视频数据和文本数据之间的互相定位的装置,可以用于法庭、审讯室中书记员笔录校对,或者视频直播、点播应用中音视频与笔录文件对应/同步显示。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,或者二者的结合来实施。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该软件模块或计算机软件产品可以存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。存储介质可以是随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质。
以上实施例仅用以说明本发明实施例的技术方案,而非对其限制;尽管参照前述实施例对本发明实施例进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明实施例各实施例技术方案的精神和范围。