CN113539253A - 一种基于认知评估的音频数据处理方法和装置 - Google Patents

一种基于认知评估的音频数据处理方法和装置 Download PDF

Info

Publication number
CN113539253A
CN113539253A CN202010988651.1A CN202010988651A CN113539253A CN 113539253 A CN113539253 A CN 113539253A CN 202010988651 A CN202010988651 A CN 202010988651A CN 113539253 A CN113539253 A CN 113539253A
Authority
CN
China
Prior art keywords
data
audio data
array
voice recognition
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010988651.1A
Other languages
English (en)
Inventor
雷彪
姚凌翔
余滢
林腾达
肖衍
陈晓晓
章伏清
吴秀兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen Hejia Jiannao Intelligent Technology Co ltd
Original Assignee
Xiamen Hejia Jiannao Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen Hejia Jiannao Intelligent Technology Co ltd filed Critical Xiamen Hejia Jiannao Intelligent Technology Co ltd
Priority to CN202010988651.1A priority Critical patent/CN113539253A/zh
Publication of CN113539253A publication Critical patent/CN113539253A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/194Calculation of difference between files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems

Abstract

本发明公开了一种基于认知评估的音频数据处理方法和装置,通过采集用户根据预设的语音识别相关内容所输入的音频数据,通过语音识别技术将音频数据转换为文本数据;获取语音识别相关内容经过文字转换所生成的预设数据;将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。通过对音频数据的处理可以有效减少认知功能障碍的评估的难度,并给整个认知评估过程带来更加智能化和高效快捷的体验。而且对用户在认知评估过程中所采集的数据更加多元化和精确化,可以实时进行记录和评估,有效提高认知评估的准确度。

Description

一种基于认知评估的音频数据处理方法和装置
技术领域
本发明涉及计算机技术领域,具体涉及一种基于认知评估的音频数据处理方法和装置。
背景技术
目前,认知功能障碍已成为影响中老年人健康和生活质量的重要疾病之一,认知功能障碍的表现不仅包括记忆障碍、失语、失认及视空间障碍等,还可伴随焦虑、抑郁、激越、冲动等情感行为障碍,这些情感和行为障碍同样也是患者致残的原因,给社会和家庭带来沉重的负担。通常医生在问诊过程中通过常规问询和纸质的量表对患者的认知功能进行评估,医生主要根据患者的表现以及对纸质的量表的测试结果进行评估。这个过程所带来的工作量巨大及花费的时间非常多,而且效率低,因此给整个认知功能障碍的评估带来很大的难度,需要对整个认知评估过程进行更加智能化和高效快捷的改进,以方便对患者进行准确的评估。
在现有技术中,医生通过常规问询的手段与患者进行交流,根据患者的回答进行判断,或者根据纸质的量表中的题目由患者进行回答,但是医生能够接收到的语音回答信息只是在瞬间的接收和判断,由此比较片面和主观,缺乏更加准确的记录和评判标准。
有鉴于此,提出一种基于认知评估的音频数据处理的方法和装置是非常重要的。
发明内容
针对上述提到的关于认知水平评估过程中比较片面和主观、缺乏更加准确的记录和评判标准等问题。本申请的实施例的目的在于提出了一种基于认知评估的音频数据处理方法和装置来解决以上背景技术部分提到的技术问题。
第一方面,本申请的实施例提供了一种基于认知评估的音频数据处理方法,包括以下步骤:
S1:采集用户根据预设的语音识别相关内容所输入的音频数据,通过语音识别技术将音频数据转换为文本数据;
S2:获取语音识别相关内容经过文字转换所生成的预设数据;
S3:将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及
S4:采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。
在一些实施例中,语音识别相关内容包括图形或数字,语音识别相关内容的展示方式包括图形界面显示内容或录音播放内容。通过图形界面显示内容或录音播放内容展示或引导用户阐述预设部分的内容。
在一些实施例中,预设数据包括第一数组,第一数组包括由图形界面显示内容中的文字所对应形成的一维数组、或者将相邻图形界面显示内容中的文字通过数字运算所得到的一维数组、或者由图形界面显示内容中的图形所对应的多个名词所形成的二维数组、或者由图形界面显示内容中的图形所对应的多个名词及其分类所形成的二维数组。预设数据是事先根据语音识别相关内容所设定的数组数据,通过预设数据可以针对用户所输入的音频数据进行数组匹配,从而客观地体现出用户的认知水平。
在一些实施例中,步骤S3具体包括:
S31:通过正则表达式的match方法将文本数据中的其中一组文字信息与第一数组中所存在的文字进行匹配,若匹配到则将匹配到的文字信息与第一数组中所对应的元素进行比对,判断比对结果是否相同,若相同则匹配成功,否则未匹配上;
S32:重复步骤S31依次对文本数据的所有文字信息进行匹配,获取每个文字信息的比对结果。
通过对文本数据中的其中一组文字信息与第一数组中所存在的文字进行一一比对,获得对比结果中的正确错误情况。
在一些实施例中,根据参与匹配的文本信息的匹配完成度确定图形界面显示内容中光标的定位位置。通过改变光标的定位位置可以引导用户完成图形界面显示内容所显示的要求输入音频数据,提高数组匹配的正确率和完成的效率。
在一些实施例中,预设数据包括第二数组,第二数组包括由录音播放内容所对应的文字所构成的一维数组或者将录音播放内容所对应的文字通过反向取值所生成的一维数组。用户根据录音播放内容所对应的文字或要求完成输入音频数据,然后进行比对,从而根据比对结果去评估用户的认知能力。
在一些实施例中,步骤S3具体包括:
S31’:通过正则表达式判断文本数据是否与第二数组中的元素属于相同的类型,若是则将文本数据中对应的文本信息提取出来,否则不提取;
S32’:将提取的文本信息通过split算法转换为数组并通过every方法查看,判断提取的文本信息是否属于第二数组中的元素,若是,则判断提取的文本信息是否与第二数组中的元素所在的位置一致,若是则匹配成功。
通过分析匹配判断文本数据与第二数组中的对应元素是否匹配上,从而判断文本数据的结果正确与否。
第二方面,本申请的实施例还提出了一种基于认知评估的音频数据处理装置,包括:
音频数据采集模块,被配置为采集用户根据预设的语音识别相关内容所输出的音频数据,通过语音识别技术将音频数据转换为文本数据;
内容数据转换模块,被配置为将获取语音识别相关内容经过文字转换所生成的预设数据;以及
比对模块,被配置为将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及
时间数据采集模块,被配置为采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。
第三方面,本申请实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实现方式描述的系统的功能。
第四方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如第一方面中任一实现方式描述的系统。
本发明公开了一种基于认知评估的音频数据处理方法和装置,通过采集用户根据预设的语音识别相关内容所输入的音频数据,通过语音识别技术将音频数据转换为文本数据;获取语音识别相关内容经过文字转换所生成的预设数据;将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。通过对音频数据的处理可以有效减少认知功能障碍的评估的难度,并给整个认知评估过程带来更加智能化和高效快捷的体验。而且对用户在认知评估过程中所采集的数据更加多元化和精确化,可以实时进行记录和评估,有效提高认知评估的准确度。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请的一个实施例可以应用于其中的示例性装置架构图;
图2为本发明的实施例的基于认知评估的音频数据处理方法的流程示意图;
图3为本发明的实施例的基于认知评估的音频数据处理方法的一个实施例中的步骤S3的流程示意图;
图4为本发明的实施例的基于认知评估的音频数据处理方法的另外一个实施例的步骤S3的流程示意图;
图5为本发明的实施例的基于认知评估的音频数据处理装置的示意图;
图6是适于用来实现本申请实施例的电子设备的计算机装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
图1示出了可以应用本申请实施例的基于认知评估的音频数据处理方法或基于认知评估的音频数据处理装置的示例性装置架构100。
如图1所示,装置架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。终端设备101、102、103上可以安装有各种应用,例如数据处理类应用、文件处理类应用等。
终端设备101、102、103可以是硬件,也可以是软件。当终端设备101、102、103为硬件时,可以是各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。当终端设备101、102、103为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
服务器105可以是提供各种服务的服务器,例如对终端设备101、102、103上传的文件或数据进行处理的后台数据处理服务器。后台数据处理服务器可以对获取的文件或数据进行处理,生成处理结果。
需要说明的是,本申请实施例所提供的基于认知评估的音频数据处理方法可以由服务器105执行,也可以由终端设备101、102、103执行,相应地,基于认知评估的音频数据处理装置可以设置于服务器105中,也可以设置于终端设备101、102、103中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。在所处理的数据不需要从远程获取的情况下,上述装置架构可以不包括网络,而只需服务器或终端设备。
继续参考图2,其示出了根据本申请的实施例中提供的一种基于认知评估的音频数据处理方法,该方法包括以下步骤:
S1:采集用户根据预设的语音识别相关内容所输入的音频数据,通过语音识别技术将音频数据转换为文本数据;
S2:获取语音识别相关内容经过文字转换所生成的预设数据;
S3:将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及
S4:采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。
在具体的实施例中,语音识别相关内容包括图形或数字,语音识别相关内容的展示方式包括图形界面显示内容或录音播放内容。通过图形界面显示内容或录音播放内容展示或引导用户阐述预设部分的内容。
在具体的实施例中,预设数据包括第一数组,第一数组包括由图形界面显示内容中的文字所对应形成的一维数组、或者将相邻图形界面显示内容中的文字通过数字运算所得到的一维数组、或者由图形界面显示内容中的图形所对应的多个名词所形成的二维数组、或者由图形界面显示内容中的图形所对应的多个名词及其分类所形成的二维数组。通过图形界面显示内容所展示的文字或图像可以获得,针对用户所输入的音频数据进行数组匹配,从而客观地体现出用户的认知水平。
在具体的实施例中,如图3所示,步骤S3具体包括:
S31:通过正则表达式的match方法将文本数据中的其中一组文字信息与第一数组中所存在的文字进行匹配,若匹配到则将匹配到的文字信息与第一数组中所对应的元素进行比对,判断比对结果是否相同,若相同则匹配成功,否则未匹配上;
S32:重复步骤S31依次对文本数据的所有文字信息进行匹配,获取每个文字信息的比对结果。
在优选的实施例中,根据参与匹配的文本信息的匹配完成度确定图形界面显示内容中光标的定位位置。通过改变光标的定位位置可以引导用户完成图形界面显示内容所显示的要求输入音频数据,提高数组匹配的正确率和完成的效率。
当图形界面显示内容所展示的图像为指示图形,例如预设数据为箭头图形,可以将对应的箭头图形的方向转换成为对应的数组,例如图形箭号↑↑↓↑↓识别为文字数组[“上面”、“上面”、“下面”、“上面”、“下面”],因此文字数组就成为第一数组。通过外部的语音听写控件采集用户在看到箭头图形所指示发出的语音后,将语音转化为音频数据再进一步转化为文本数据。然后在文本数据中匹配上面或下面,如果通过正则表达式的match方法返回的数组长度大于0,则表示匹配到,否则未匹配到。因此可以将文本数据中除上面或下面之外的数据过滤掉。最后将匹配到的数组与第一数组中的对应元素进行比对,判断是否是同一个元素,若相同则说明匹配成功,否则未匹配成功。此时可以将文本数据与文字数组中的元素及其顺序进行一一比对,根据比对结果判断获取比对结果正确的数量。在此过程中,根据文本数据中的每个值的匹配完成度来确定图形界面显示内容中光标的定位位置。开始时,光标定位在图形界面显示内容所展示的图像中第一个位置,第一次匹配到上面或下面时,光标往下移一位。图形界面显示内容所展示的每个图像所对应的文本数据的每个值匹配完成后对应的光标调转到下一个图像。在此过程中可以采集到用户根据图形界面显示内容所输入的音频数据的时间数据,以及图形界面显示内容对应的文本数据与预设数据之间的正确错误情况。例如用户根据图形箭号读取3遍,可以记录下每一遍读取图形箭号所需的语音的时间以及每一遍的结果的正确错误情况,还可以记录下每一遍中读取“上面”的平均时间和“下面”的平均时间,然后根据最后一遍的时间和前三次平均时间可以计算出注意力控制能力的时间,最后综合评估出用户的认知能力。当图形界面显示内容所展示的图像为其他的图形时也同样可以采用以上的方法进行数据采集。相比于传统的认知评估方式,采用此方式可以采集到更多维度的数据,以此来更加准确地判断用户的认知能力。
当图形界面显示内容所展示的图像为具有对应于多个具体名词的图片时,预设数据也可以为同时建立一个由图形界面显示内容中的图形所对应的多个名词所形成的二维数组、或者由图形界面显示内容中的图形所对应的多个名词及其分类所形成的二维数组。因此也可以采用上述的方式进行执行以采集到相应的数据。例如[[“小鸟”]、[“轮船”、“船”]、[“菠萝”、“凤梨”]、[“小兔子”、“小白兔”、“兔子”、“白兔”]],下面以兔子做解析:当图形界面显示内容出现一个兔子的图形时,通过外部的语音听写控件采集用户在看到图形所发出的语音后,将语音转化为音频数据再进一步转化为文本数据,然后将该文本数据与[“小兔子”、“小白兔”、“兔子”、“白兔”]中的每个元素进行循环遍历,确定该文本数据中是否与预设数据中的所存在的文字一致,最后再确定多个具体名词的图片中的每个图片所对应的文本数据是否与二位数组中的所对应的图形元素相一致。
当预设数据由图形界面显示内容中的图形所对应的多个名词及其分类所形成的二维数组例如:日用品[[“毛笔”、“纸张”、“椅子”]...]、水果[[“苹果”、“梨”、“香梨”、“雪梨”]...]、动物[[“鸭子”、“火鸡”、“芦花鸡”]...]。同样也可以采用上述的方式进行执行以采集到相应的数据。当图形界面显示内容所展示的图像为数字时,预设数据可以为相邻图形界面显示内容中的文字通过数字运算所得到的一维数组,在优选的实施例中,数字运算采用加法。例如在预设数据中存在[“14”、“24”],在第一个图形界面显示内容中显示5,第二个图形界面显示内容中显示9,要求计算两者之和,则采用上述方法确定用户所输入的音频数据中是否与预设数据中的对应数组的值和位置一致。
在具体的实施例中,预设数据包括第二数组,第二数组包括由录音播放内容所对应的文字所构成的一维数组或者将录音播放内容所对应的文字通过反向取值所生成的一维数组。用户根据录音播放内容所对应的文字或要求完成输入音频数据,然后进行比对,从而根据比对结果和所采集的时间数据去评估用户的认知能力。
在具体的实施例中,如图4所示,步骤S3具体包括:
S31’:通过正则表达式判断文本数据是否与第二数组中的元素属于相同的类型,若是则将文本数据中对应的文本信息提取出来,否则不提取;
S32’:将提取的文本信息通过split算法转换为数组并通过every方法查看,判断提取的文本信息是否属于第二数组中的元素,若是,则判断提取的文本信息是否与第二数组中的元素所在的位置一致,若是则匹配成功。
通过分析匹配判断文本数据与第二数组中的对应元素是否匹配上,从而判断文本数据的结果正确与否。在具体的实施例中,语音识别技术包括随机模型法或人工神经网络方法。语音识别技术比较成熟,识别效率高。
当预设数据中的第二数组中包括由录音播放内容所对应的文字所构成的一维数组。预设数据可以为数字,例如设置为[“742”、“285”、“3419”],播放完录音播放内容后,记录播放次数,并通过外部的语音听写控件采集用户在看到图形所发出的语音后,将语音转化为音频数据再进一步转化为文本数据。首先通过正则表达式判断文本数据中是否有数字[0-9]中的其中一个,如果有则通过正则表达式的match方法将文本数据中的数字提取出来。然后将提取的数字通过split算法转换为数组并通过every方法查看,判断提取的数字是否属于预设的第二数组中的数字,若是,则判断提取的数字是否与第二数组中的数字所在的位置一致,若是则匹配成功。同样,当预设数据中的第二数组中包括将录音播放内容所对应的文字通过反向取值所生成的一维数组。基于上述数字通过reserve取反向取值生成第二数组,然后采用与上述相同的方式执行以进行数据采集。
进一步参考图5,作为对上述各图所示方法的实现,本申请提供了一种用于认知评估的图形绘制装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图5所示,本实施例的基于认知评估的音频数据处理装置包括:
音频数据采集模块1,被配置为采集用户根据预设的语音识别相关内容所输出的音频数据,通过语音识别技术将音频数据转换为文本数据;
内容数据转换模块2,被配置为将获取语音识别相关内容经过文字转换所生成的预设数据;以及
比对模块3,被配置为将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及
时间数据采集模块4,被配置为采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。
在具体的实施例中,语音识别相关内容包括图形或数字,语音识别相关内容的展示方式包括图形界面显示内容或录音播放内容。通过图形界面显示内容或录音播放内容展示或引导用户阐述预设部分的内容。
在具体的实施例中,预设数据包括第一数组,第一数组包括由图形界面显示内容中的文字所对应形成的一维数组、或者将相邻图形界面显示内容中的文字通过数字运算所得到的一维数组、或者由图形界面显示内容中的图形所对应的多个名词所形成的二维数组、或者由图形界面显示内容中的图形所对应的多个名词及其分类所形成的二维数组。通过图形界面显示内容所展示的文字或图像可以获得,针对用户所输入的音频数据进行数组匹配,从而客观地体现出用户的认知水平。
在具体的实施例中,比对模块3具体包括:
第一匹配模块(图中未示出),用于通过正则表达式的match方法将文本数据中的其中一组文字信息与第一数组中所存在的文字进行匹配,若匹配到则将匹配到的文字信息与第一数组中所对应的元素进行比对,判断比对结果是否相同,若相同则匹配成功,否则未匹配上;
循环匹配模块(图中未示出),用于重复执行第一匹配模块(图中未示出)依次对文本数据的所有文字信息进行匹配,获取每个文字信息的比对结果。
在优选的实施例中,根据参与匹配的文本信息的匹配完成度确定图形界面显示内容中光标的定位位置。通过改变光标的定位位置可以引导用户完成图形界面显示内容所显示的要求输入音频数据,提高数组匹配的正确率和完成的效率。
在具体的实施例中,预设数据包括第二数组,第二数组包括由录音播放内容所对应的文字所构成的一维数组或者将录音播放内容所对应的文字通过反向取值所生成的一维数组。用户根据录音播放内容所对应的文字或要求完成输入音频数据,然后进行比对,从而根据比对结果和所采集的时间数据去评估用户的认知能力。
在具体的实施例中,比对模块3具体还可以包括:
数据提取模块(图中未示出),用于通过正则表达式判断文本数据是否与第二数组中的元素属于相同的类型,若是则将文本数据中对应的文本信息提取出来,否则不提取;
第二匹配模块(图中未示出),用于将提取的文本信息通过split算法转换为数组并通过every方法查看,判断提取的文本信息是否属于第二数组中的元素,若是,则判断提取的文本信息是否与第二数组中的元素所在的位置一致,若是则匹配成功。
本发明公开了一种基于认知评估的音频数据处理方法和装置,通过采集用户根据预设的语音识别相关内容所输入的音频数据,通过语音识别技术将音频数据转换为文本数据;获取语音识别相关内容经过文字转换所生成的预设数据;将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。通过对音频数据的处理可以有效减少认知功能障碍的评估的难度,并给整个认知评估过程带来更加智能化和高效快捷的体验。而且对用户在认知评估过程中所采集的数据更加多元化和精确化,可以实时进行记录和评估,有效提高认知评估的准确度。
下面参考图6,其示出了适于用来实现本申请实施例的电子设备(例如图1所示的服务器或终端设备)的计算机装置600的结构示意图。图6示出的电子设备仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图6所示,计算机装置600包括中央处理单元(CPU)601和图形处理器(GPU)602,其可以根据存储在只读存储器(ROM)603中的程序或者从存储部分609加载到随机访问存储器(RAM)606中的程序而执行各种适当的动作和处理。在RAM 604中,还存储有装置600操作所需的各种程序和数据。CPU 601、GPU602、ROM 603以及RAM604通过总线605彼此相连。输入/输出(I/O)接口606也连接至总线605。
以下部件连接至I/O接口606:包括键盘、鼠标等的输入部分607;包括诸如、液晶显示器(LCD)等以及扬声器等的输出部分608;包括硬盘等的存储部分609;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分610。通信部分610经由诸如因特网的网络执行通信处理。驱动器611也可以根据需要连接至I/O接口606。可拆卸介质612,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器611上,以便于从其上读出的计算机程序根据需要被安装入存储部分609。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分610从网络上被下载和安装,和/或从可拆卸介质612被安装。在该计算机程序被中央处理单元(CPU)601和图形处理器(GPU)602执行时,执行本申请的方法中限定的上述功能。
需要说明的是,本申请所述的计算机可读介质可以是计算机可读信号介质或者计算机可读介质或者是上述两者的任意组合。计算机可读介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的装置、装置或器件,或者任意以上的组合。计算机可读介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行装置、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行装置、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请的操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本申请各种实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的装置来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:采集用户根据预设的语音识别相关内容所输入的音频数据,通过语音识别技术将音频数据转换为文本数据;获取语音识别相关内容经过文字转换所生成的预设数据;将文本数据与预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及采集用户在完成语音识别相关内容的过程中的时间数据用于结合比对结果对用户的认知能力进行评估。
对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种基于认知评估的音频数据处理方法,其特征在于,包括以下步骤:
S1:采集用户根据预设的语音识别相关内容所输入的音频数据,通过语音识别技术将所述音频数据转换为文本数据;
S2:获取所述语音识别相关内容经过文字转换所生成的预设数据;
S3:将所述文本数据与所述预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及
S4:采集用户在完成所述语音识别相关内容的过程中的时间数据用于结合所述比对结果对所述用户的认知能力进行评估。
2.根据权利要求1所述的基于认知评估的音频数据处理方法,其特征在于,所述语音识别相关内容包括图形或数字,所述语音识别相关内容的展示方式包括图形界面显示内容或录音播放内容。
3.根据权利要求2所述的基于认知评估的音频数据处理方法,其特征在于,所述预设数据包括第一数组,所述第一数组包括由所述图形界面显示内容中的文字所对应形成的一维数组、或者将相邻所述图形界面显示内容中的文字通过数字运算所得到的一维数组、或者由所述图形界面显示内容中的图形所对应的多个名词所形成的二维数组、或者由所述图形界面显示内容中的图形所对应的多个名词及其分类所形成的二维数组。
4.根据权利要求3所述的基于认知评估的音频数据处理方法,其特征在于,所述步骤S3具体包括:
S31:通过正则表达式的match方法将所述文本数据中的其中一组文字信息与所述第一数组中所存在的文字进行匹配,若匹配到则将匹配到的文字信息与所述第一数组中所对应的元素进行比对,判断比对结果是否相同,若相同则匹配成功,否则未匹配上;
S32:重复步骤S31依次对所述文本数据的所有文字信息进行匹配,获取每个所述文字信息的比对结果。
5.根据权利要求4所述的基于认知评估的音频数据处理方法,其特征在于,根据参与匹配的所述文本信息的匹配完成度确定所述图形界面显示内容中光标的定位位置。
6.根据权利要求2所述的基于认知评估的音频数据处理方法,其特征在于,所述预设数据包括第二数组,所述第二数组包括由所述录音播放内容所对应的文字所构成的一维数组或者将所述录音播放内容所对应的文字通过反向取值所生成的一维数组。
7.根据权利要求6所述的基于认知评估的音频数据处理方法,其特征在于,所述步骤S3具体包括:
S31’:通过正则表达式判断所述文本数据是否与所述第二数组中的元素属于相同的类型,若是则将所述文本数据中对应的文本信息提取出来,否则不提取;
S32’:将提取的文本信息通过split算法转换为数组并通过every方法查看,判断所述提取的文本信息是否属于所述第二数组中的元素,若是,则判断所述提取的文本信息是否与所述第二数组中的元素所在的位置一致,若是则匹配成功。
8.一种基于认知评估的音频数据处理装置,其特征在于,包括:
音频数据采集模块,被配置为采集用户根据预设的语音识别相关内容所输出的音频数据,通过语音识别技术将所述音频数据转换为文本数据;
内容数据转换模块,被配置为将获取所述语音识别相关内容经过文字转换所生成的预设数据;以及
比对模块,被配置为将所述文本数据与所述预设数据通过正则表达式匹配算法进行比对,获得比对结果;以及
时间数据采集模块,被配置为采集用户在完成所述语音识别相关内容的过程中的时间数据用于结合所述比对结果对所述用户的认知能力进行评估。
9.一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN202010988651.1A 2020-09-18 2020-09-18 一种基于认知评估的音频数据处理方法和装置 Pending CN113539253A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010988651.1A CN113539253A (zh) 2020-09-18 2020-09-18 一种基于认知评估的音频数据处理方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010988651.1A CN113539253A (zh) 2020-09-18 2020-09-18 一种基于认知评估的音频数据处理方法和装置

Publications (1)

Publication Number Publication Date
CN113539253A true CN113539253A (zh) 2021-10-22

Family

ID=78094284

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010988651.1A Pending CN113539253A (zh) 2020-09-18 2020-09-18 一种基于认知评估的音频数据处理方法和装置

Country Status (1)

Country Link
CN (1) CN113539253A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115798718A (zh) * 2022-11-24 2023-03-14 广州市第一人民医院(广州消化疾病中心、广州医科大学附属市一人民医院、华南理工大学附属第二医院) 一种认知测试评估方法及系统
CN116048282A (zh) * 2023-03-06 2023-05-02 中国医学科学院生物医学工程研究所 一种数据处理方法、系统、装置、设备及存储介质

Citations (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6278996B1 (en) * 1997-03-31 2001-08-21 Brightware, Inc. System and method for message process and response
WO2002037223A2 (en) * 2000-11-06 2002-05-10 Invention Machine Corporation Computer based integrated text and graphic document analysis
JP2004184535A (ja) * 2002-11-29 2004-07-02 Fujitsu Ltd 音声認識装置及び方法
US20040166480A1 (en) * 2003-02-14 2004-08-26 Sayling Wen Language learning system and method with a visualized pronunciation suggestion
RU2253365C1 (ru) * 2003-11-17 2005-06-10 Государственное образовательное учреждение высшего профессионального образования Московская медицинская академия им. И.М. Сеченова МЗ РФ Способ психолингвистической диагностики невротических расстройств
US20060256083A1 (en) * 2005-11-05 2006-11-16 Outland Research Gaze-responsive interface to enhance on-screen user reading tasks
KR20070019596A (ko) * 2005-08-12 2007-02-15 캐논 가부시끼가이샤 정보처리방법 및 정보처리장치
KR20090000662A (ko) * 2007-03-16 2009-01-08 장성옥 언어 학습 시스템
US20110054908A1 (en) * 2009-08-25 2011-03-03 Konica Minolta Business Technologies, Inc Image processing system, image processing apparatus and information processing apparatus
CA2820599A1 (en) * 2010-11-24 2012-05-31 Digital Artefacts, Llc Systems and methods to assess cognitive function
CN103251418A (zh) * 2013-06-05 2013-08-21 清华大学 一种图像认知心理分析系统
CN103400579A (zh) * 2013-08-04 2013-11-20 徐华 一种语音识别系统和构建方法
CN104021786A (zh) * 2014-05-15 2014-09-03 北京中科汇联信息技术有限公司 一种语音识别的方法和装置
US20140297262A1 (en) * 2013-03-31 2014-10-02 International Business Machines Corporation Accelerated regular expression evaluation using positional information
KR101538317B1 (ko) * 2014-02-20 2015-07-29 ㈜빅스바이트 영어 리터러시 자동측정 시스템
CN106446165A (zh) * 2016-09-26 2017-02-22 厦门吉信德宠物用品有限公司 一种基于大数据处理的识别方法
CN108846119A (zh) * 2018-06-27 2018-11-20 清远墨墨教育科技有限公司 一种单词认知度的排名方法、存储装置及移动终端
CN109222882A (zh) * 2018-10-08 2019-01-18 浙江工业大学 一种阅读视力检查系统及方法
CN109344231A (zh) * 2018-10-31 2019-02-15 广东小天才科技有限公司 一种补全语义残缺的语料的方法及系统
CN109407946A (zh) * 2018-09-11 2019-03-01 昆明理工大学 基于语音识别的图形界面目标选择方法
CN109933671A (zh) * 2019-01-31 2019-06-25 平安科技(深圳)有限公司 构建个人知识图谱的方法、装置、计算机设备和存储介质
CN110473605A (zh) * 2018-05-09 2019-11-19 深圳市前海安测信息技术有限公司 阿尔茨海默症患者图形认知能力评估系统及方法
CN111295141A (zh) * 2017-11-02 2020-06-16 松下知识产权经营株式会社 认知功能评估装置、认知功能评估系统、认知功能评估方法及程序
US20200251115A1 (en) * 2019-02-04 2020-08-06 International Business Machines Corporation Cognitive Audio Classifier

Patent Citations (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6278996B1 (en) * 1997-03-31 2001-08-21 Brightware, Inc. System and method for message process and response
WO2002037223A2 (en) * 2000-11-06 2002-05-10 Invention Machine Corporation Computer based integrated text and graphic document analysis
JP2004184535A (ja) * 2002-11-29 2004-07-02 Fujitsu Ltd 音声認識装置及び方法
US20040166480A1 (en) * 2003-02-14 2004-08-26 Sayling Wen Language learning system and method with a visualized pronunciation suggestion
RU2253365C1 (ru) * 2003-11-17 2005-06-10 Государственное образовательное учреждение высшего профессионального образования Московская медицинская академия им. И.М. Сеченова МЗ РФ Способ психолингвистической диагностики невротических расстройств
KR20070019596A (ko) * 2005-08-12 2007-02-15 캐논 가부시끼가이샤 정보처리방법 및 정보처리장치
US20060256083A1 (en) * 2005-11-05 2006-11-16 Outland Research Gaze-responsive interface to enhance on-screen user reading tasks
KR20090000662A (ko) * 2007-03-16 2009-01-08 장성옥 언어 학습 시스템
US20110054908A1 (en) * 2009-08-25 2011-03-03 Konica Minolta Business Technologies, Inc Image processing system, image processing apparatus and information processing apparatus
CA2820599A1 (en) * 2010-11-24 2012-05-31 Digital Artefacts, Llc Systems and methods to assess cognitive function
US20140297262A1 (en) * 2013-03-31 2014-10-02 International Business Machines Corporation Accelerated regular expression evaluation using positional information
CN103251418A (zh) * 2013-06-05 2013-08-21 清华大学 一种图像认知心理分析系统
CN103400579A (zh) * 2013-08-04 2013-11-20 徐华 一种语音识别系统和构建方法
KR101538317B1 (ko) * 2014-02-20 2015-07-29 ㈜빅스바이트 영어 리터러시 자동측정 시스템
CN104021786A (zh) * 2014-05-15 2014-09-03 北京中科汇联信息技术有限公司 一种语音识别的方法和装置
CN106446165A (zh) * 2016-09-26 2017-02-22 厦门吉信德宠物用品有限公司 一种基于大数据处理的识别方法
CN111295141A (zh) * 2017-11-02 2020-06-16 松下知识产权经营株式会社 认知功能评估装置、认知功能评估系统、认知功能评估方法及程序
CN110473605A (zh) * 2018-05-09 2019-11-19 深圳市前海安测信息技术有限公司 阿尔茨海默症患者图形认知能力评估系统及方法
CN108846119A (zh) * 2018-06-27 2018-11-20 清远墨墨教育科技有限公司 一种单词认知度的排名方法、存储装置及移动终端
CN109407946A (zh) * 2018-09-11 2019-03-01 昆明理工大学 基于语音识别的图形界面目标选择方法
CN109222882A (zh) * 2018-10-08 2019-01-18 浙江工业大学 一种阅读视力检查系统及方法
CN109344231A (zh) * 2018-10-31 2019-02-15 广东小天才科技有限公司 一种补全语义残缺的语料的方法及系统
CN109933671A (zh) * 2019-01-31 2019-06-25 平安科技(深圳)有限公司 构建个人知识图谱的方法、装置、计算机设备和存储介质
US20200251115A1 (en) * 2019-02-04 2020-08-06 International Business Machines Corporation Cognitive Audio Classifier

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
傅桂涛;潘荣;陈国东;陈思宇;: "产品认知语境的类型及其应用", 包装工程, no. 08 *
安改红;王静;陈学伟;李超;陈佩延;安芳红;张文正;李正东;袭著革;马强;: "军人个体认知能力综合评估研究", 人民军医, no. 01 *
张晴;刘巧云;杜晓新;黄昭鸣;祝亚平;: "基于PASS理论的五项认知能力与中文阅读理解能力的关系研究", 中国儿童保健杂志, no. 02, 5 January 2018 (2018-01-05) *
王莉;毕凤春;: "元认知策略与大学英语阅读能力的提高", 高等农业教育, no. 04, 28 April 2006 (2006-04-28) *
高奎;张丽娜;涂虹;刘晓微;李婷;肖雄;: "在校医学生对于老年健康的认知现状分析", 中国医药导报, no. 03 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115798718A (zh) * 2022-11-24 2023-03-14 广州市第一人民医院(广州消化疾病中心、广州医科大学附属市一人民医院、华南理工大学附属第二医院) 一种认知测试评估方法及系统
CN115798718B (zh) * 2022-11-24 2024-03-29 广州市第一人民医院(广州消化疾病中心、广州医科大学附属市一人民医院、华南理工大学附属第二医院) 一种认知测试评估方法及系统
CN116048282A (zh) * 2023-03-06 2023-05-02 中国医学科学院生物医学工程研究所 一种数据处理方法、系统、装置、设备及存储介质
CN116048282B (zh) * 2023-03-06 2023-08-04 中国医学科学院生物医学工程研究所 一种数据处理方法、系统、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN107680019B (zh) 一种考试方案的实现方法、装置、设备及存储介质
WO2020000879A1 (zh) 图像识别方法和装置
CN109447156B (zh) 用于生成模型的方法和装置
WO2020000876A1 (zh) 用于生成模型的方法和装置
CN111709630A (zh) 语音质检方法、装置、设备及存储介质
CN111767366A (zh) 问答资源挖掘方法、装置、计算机设备及存储介质
CN108510084B (zh) 用于生成信息的方法和装置
CN113539253A (zh) 一种基于认知评估的音频数据处理方法和装置
CN111651497A (zh) 用户标签挖掘方法、装置、存储介质及电子设备
CN114140814A (zh) 情绪识别能力的训练方法、装置及电子设备
CN109101956B (zh) 用于处理图像的方法和装置
CN111723180A (zh) 一种面试方法和装置
Shanthi et al. An integrated approach for mental health assessment using emotion analysis and scales
Moon et al. Rich representations for analyzing learning trajectories: Systematic review on sequential data analytics in game-based learning research
CN113268575B (zh) 一种实体关系识别方法、装置及可读介质
CN115801980A (zh) 视频生成方法和装置
CN114240250A (zh) 一种职业评测的智能管理方法及系统
CN114691903A (zh) 一种智能课程测试方法及系统、电子设备、存储介质
CN114613350A (zh) 测试方法、装置、电子设备和存储介质
CN112131378A (zh) 用于识别民生问题类别的方法、装置及电子设备
CN114138960A (zh) 用户意图识别方法、装置、设备及介质
CN111260756B (zh) 用于发送信息的方法和装置
CN112231444A (zh) 结合rpa和ai的语料数据的处理方法、装置和电子设备
CN112308745A (zh) 用于生成信息的方法和装置
CN111723188A (zh) 用于问答系统的基于人工智能的语句显示方法、电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination