CN109388804A - 利用深度学习模型的证券研报核心观点提取方法及装置 - Google Patents
利用深度学习模型的证券研报核心观点提取方法及装置 Download PDFInfo
- Publication number
- CN109388804A CN109388804A CN201811228490.5A CN201811228490A CN109388804A CN 109388804 A CN109388804 A CN 109388804A CN 201811228490 A CN201811228490 A CN 201811228490A CN 109388804 A CN109388804 A CN 109388804A
- Authority
- CN
- China
- Prior art keywords
- subordinate sentence
- security
- report
- analyzed
- learning model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
- G06F40/35—Discourse or dialogue representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/049—Temporal neural networks, e.g. delay elements, oscillating neurons or pulsed inputs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- General Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Evolutionary Computation (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Biophysics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Machine Translation (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开一种利用深度学习模型的证券研报核心观点提取方法，包括：接收待分析证券研报；对该证券研报进行分句得到各分句；将各分句采用第一深度学习模型进行评分得到各分句的第一评分并基于第一评分确定观点类分句；将各观点类分句采用第二深度学习模型进行评分得到各观点类分句的第二评分并基于第二评分确定行业观点类分句；提取第二评分最高的行业观点类分句作为待分析证券研报的核心观点进行输出。本发明利用深度学习模型进行智能化评分的方式实现对证券研报中核心观点的提取，可解决现有技术中针对证券研报分析方案的效率及准确率较低的问题，可高效且准确的提取出证券研报中的核心观点。
Description
技术领域
本发明涉及计算机技术领域，具体涉及一种利用深度学习模型的证券研报核心观点提取方法及装置。
背景技术
证券研究报告，也可简称为证券研报，是指相关研究人员(比如证券公司内的研究人员等)对证券及相关产品的价值、或者影响其市场价格的因素进行分析，所作出的研究报告。
对证券研报进行分析，可以及时了解证券研报中关于行业、政策、投资可行性等方面情况，但目前主要还是通过人工方式对证券研报进行阅读分析，以获得作者的核心观点等有用信息，此种方式需要耗费大量人力，效率及准确率都较低。
相关技术中针对证券研报分析方案的效率及准确率较低的问题，目前尚未提出有效的解决方案。
发明内容
本发明的目的在于提供一种利用深度学习模型的证券研报核心观点提取方法、装置、计算机设备及可读存储介质，进而在一定程度上克服上述现有技术中存在的问题，可高效且准确的提取出证券研报中的核心观点。
本发明是通过下述技术方案来解决上述技术问题：
根据本发明的一个方面，提供了一种利用深度学习模型的证券研报核心观点提取方法，包括如下步骤：
S01，接收输入的待分析证券研报；
S02，对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
S03，将待分析证券研报中的各分句采用预先训练好的第一深度学习模型进行评分，以得到针对待分析证券研报中的各分句的第一评分，并基于第一评分从待分析证券研报中的各分句中确定观点类分句；
S04，将待分析证券研报中的各观点类分句采用预先训练好的第二深度学习模型进行评分，以得到针对待分析证券研报中的各观点类分句的第二评分，并基于第二评分从待分析证券研报中的各观点类分句中确定行业观点类分句；
S05，提取第二评分最高的行业观点类分句作为待分析证券研报的核心观点进行输出。
进一步的，S01接收输入的待分析证券研报，包括：
判断接收到的待分析证券研报的格式是否为文本类型；
若否，则将所述待分析证券研报的格式转换为文本类型。
进一步的，S02对待分析证券研报进行分句处理，得到待分析证券研报中的各分句，包括：
根据预置类型的符号对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
对待分析证券研报中的各分句进行分词处理，得到待分析证券研报中的各分词；
基于预置的包括分词与数值的对应转换关系的字典，确定待分析证券研报中的各分词对应的数值；
根据确定结果，将待分析证券研报中的各分句转换成数值向量格式的分句。
进一步的，第一深度学习模型的训练过程，包括如下步骤：
步骤110，确定第一数据集，所述第一数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类；
步骤120，将标注有第一类型标签的各分句进行分词处理，得到标注有第一类型标签的各分词；
步骤130，根据预置规则将标注有第一类型标签的各分词转换为对应的第一数值，并将标注有第一类型标签的各分词与其对应的第一数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤140，根据所述词典，将标注有第一类型标签的各分句转换成数值向量格式的分句，形成第一数值向量分句集合；
步骤150，从第一数值向量分句集合中选取第一预置数量的分句作为第一训练数据；
步骤160，将第一训练数据经深度学习模型进行训练，以获得第一深度学习模型。
进一步的，第二深度学习模型的训练过程，包括如下步骤：
步骤210，确定第二数据集，所述第二数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类，且标注有观点类标签的分句同时具有预先标注的第二类型标签，第二类型标签包括行业观点类和非行业观点类；
步骤220，将标注有第二类型标签的各分句进行分词处理，得到标注有第二类型标签的各分词；
步骤230，根据预置规则将标注有第二类型标签的各分词转换为对应的第二数值，并将标注有第二类型标签的各分词与其对应的第二数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤240，根据所述字典，将标注有第二类型标签的各分句转换成数值向量格式的分句，形成第二数值向量分句集合；
步骤250，从第二数值向量分句集合中选取第二预置数量的分句作为第二训练数据；
步骤260，将第二训练数据经深度学习模型进行训练，以获得第二深度学习模型。
进一步的，所述深度学习模型为长短期记忆网络机器学习模型。
进一步的，采用jieba分词模块对各分句进行分词处理。
为了实现上述目的，本发明还提供一种利用深度学习模型的证券研报核心观点提取装置，包括：
接收模块，用于接收输入的待分析证券研报；
分句模块，用于对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
第一评分模块，用于将待分析证券研报中的各分句采用预先训练好的第一深度学习模型进行评分，以得到针对待分析证券研报中的各分句的第一评分，并基于第一评分从待分析证券研报中的各分句中确定观点类分句；
第二评分模块，用于将待分析证券研报中的各观点类分句采用预先训练好的第二深度学习模型进行评分，以得到针对待分析证券研报中的各观点类分句的第二评分，并基于第二评分从待分析证券研报中的各观点类分句中确定行业观点类分句；
提取模块，用于提取第二评分最高的行业观点类分句作为待分析证券研报的核心观点进行输出。
进一步的，所述接收模块，具体用于：
判断接收到的待分析证券研报的格式是否为文本类型；
若否，则将所述待分析证券研报的格式转换为文本类型。
进一步的，所述分句模块，包括：
分句单元，用于根据预置类型的符号对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
分词单元，用于对待分析证券研报中的各分句进行分词处理，得到待分析证券研报中的各分词；
数值确定单元，用于基于预置的包括分词与数值的对应转换关系的字典，确定待分析证券研报中的各分词对应的数值；
转换单元，用于根据确定结果，将待分析证券研报中的各分句转换成数值向量格式的分句。
进一步的，第一深度学习模型的训练过程，包括如下步骤：
步骤110，确定第一数据集，所述第一数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类；
步骤120，将标注有第一类型标签的各分句进行分词处理，得到标注有第一类型标签的各分词；
步骤130，根据预置规则将标注有第一类型标签的各分词转换为对应的第一数值，并将标注有第一类型标签的各分词与其对应的第一数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤140，根据所述词典，将标注有第一类型标签的各分句转换成数值向量格式的分句，形成第一数值向量分句集合；
步骤150，从第一数值向量分句集合中选取第一预置数量的分句作为第一训练数据；
步骤160，将第一训练数据经深度学习模型进行训练，以获得第一深度学习模型。
进一步的，第二深度学习模型的训练过程，包括如下步骤：
步骤210，确定第二数据集，所述第二数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类，且标注有观点类标签的分句同时具有预先标注的第二类型标签，第二类型标签包括行业观点类和非行业观点类；
步骤220，将标注有第二类型标签的各分句进行分词处理，得到标注有第二类型标签的各分词；
步骤230，根据预置规则将标注有第二类型标签的各分词转换为对应的第二数值，并将标注有第二类型标签的各分词与其对应的第二数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤240，根据所述字典，将标注有第二类型标签的各分句转换成数值向量格式的分句，形成第二数值向量分句集合；
步骤250，从第二数值向量分句集合中选取第二预置数量的分句作为第二训练数据；
步骤260，将第二训练数据经深度学习模型进行训练，以获得第二深度学习模型。
进一步的，所述深度学习模型为长短期记忆网络机器学习模型。
进一步的，采用jieba分词模块对各分句进行分词处理。
为了实现上述目的，本发明还提供一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述方法的步骤。
为了实现上述目的，本发明还提供一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现上述方法的步骤。
本发明提供的利用深度学习模型的证券研报核心观点提取方法、装置、计算机设备及可读存储介质，可先将待分析证券研报进行分句处理得到各分句，再将各分句采用预先训练好的第一深度学习模型进行评分以得到各分句的第一评分，并根据第一评分判断分句是否为观点类分句，然后将判断出的观点类分句采用预先训练好的第二深度学习模型进行评分以得到各观点类分句的第二评分，并根据第二评分判断各观点类分句是否为行业观点类分句，在判断出行业观点类分句后，可提取第二评分最高的行业观点类分句作为该待分析证券研报中的核心观点进行输出。通过上述方案，可利用预先训练好的深度学习模型通过智能化评分的方式挑选出观点类分句及行业观点类分句，并最终通过客观的评分从行业观点类分句中提取出能够代表整篇证券研报的核心观点的分句，由此，上述利用深度学习模型智能评分并分析的过程，不但可大大节省人力，而且可提高操作效率及提取结果的准确率。
附图说明
图1是根据本发明实施例的利用深度学习模型的证券研报核心观点提取方法的一种可选的流程示意图；
图2是根据本发明实施例的利用深度学习模型的证券研报核心观点提取装置的一种可选的程序模块示意图；
图3是根据本发明实施例的利用深度学习模型的证券研报核心观点提取装置的另一种可选的程序模块示意图；
图4是根据本发明实施例的计算机设备的一种可选的硬件架构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一
下面结合附图对本发明提供的利用深度学习模型的证券研报核心观点提取方法进行说明。
图1为本发明利用深度学习模型的证券研报核心观点提取方法的一种可选的流程示意图，如图1所示，该方法可以包括以下步骤：
S01，接收输入的待分析证券研报。
在本实施例中，比如可以一篇证券研报为单位进行其核心观点的提取，当接收到一篇待分析的证券研报后，可先对该篇证券研报的格式进行判断。具体的，可判断该篇证券研报的格式是否为文本类型，比如“.txt”格式、“.doc”格式等。若判断结果为否，也就是说该证券研报的格式不是文本类型，则可将该证券研报的格式转换为文本类型，比如该证券研报的格式为便携文件格式(PDF格式)，则可使用现有的“PDFParser”等工具将PDF格式的证券研报转换txt格式的证券研报。以此，可统一接收到的待分析证券研报的格式，以更方便且更高效的对待分析证券研报的内容进行读取。
S02，对待分析证券研报进行分句处理，得到待分析证券研报中的各分句。
在本实施例中，可根据预置类型的符号对待分析证券研报进行分句处理，比如可根据逗号“，”、句号“。”、点号“.”、破折号“—”、中括号“[]、【】”、分号“；”等符号，对待分析证券研报进行分句处理，以得到待分析证券研报中的各分句。
在得到待分析证券研报中的各分句后，可进一步采用jieba分词模块对各分句进行分词处理，以得到待分析证券研报中的各分词。
在得到待分析证券研报中的各分词后，可基于在预置的包括分词与数值的对应转换关系的字典，确定待分析证券研报中各分词所对应的数值(在本实施例中为整数型数值)。
然后，再根据各分词与其对应数值的确定结果，将待分析证券研报中每个由多个分词组成的分句转换成数值向量格式的分句。
以此，可在后续步骤中，将数值向量格式的分句输入深度学习模型中，以便深度学习模型对各分句进行评分并可根据评分对分句的类型进行判断。
S03，将待分析证券研报中的各分句采用预先训练好的第一深度学习模型进行评分，以得到针对待分析证券研报中的各分句的第一评分，并基于第一评分从待分析证券研报中的各分句中确定观点类分句。
首先，先对第一深度学习模型的训练过程进行说明，该训练过程可包括如下步骤：
步骤110，确定第一数据集。
比如，我们可预先精心挑选预置篇数(比如500篇)证券研报，比如可挑选一定比例的观点比较明显、尤其是行业观点比较明显的证券研报，还可挑选一定比例的观点比较模糊、尤其是行业观点比较模糊的证券研报等，然后可对这些证券研报的摘要部分进行分句处理以得到多个分句，然后以人工方式对每个分句进行第一类型标签的标注，该第一类型标签可包括观点类和非观点类。也就是说，经第一类型标签标注后，在第一数据集中的分句可包括观点类分句和非观点类分句。
步骤120，将标注有第一类型标签的各分句进行分词处理，得到标注有第一类型标签的各分词。
比如，可使用现有的jieba分词模块对第一数据集中的标注有第一类型标签的各分句进行分词处理，以得到标注有第一类型标签的各分词。
步骤130，根据预置规则将标注有第一类型标签的各分词转换为对应的第一数值，并将标注有第一类型标签的各分词与其对应的第一数值存储于预置的包括分词与数值的对应转换关系的字典中。
具体的，可根据预置规则(比如随机转换，或者可根据实际需求预先设定词语到数值的转换规则等)将标注有第一类型标签的各分词一一转换为数值(在本实施例中，可称为第一数值)，并可将标注有第一类型标签的各分词与第一数值存储于预置的包括分词与数值的对应转换关系的字典中。
在本实施例中，可将标注有第一类型标签的各分词与第一数值的对应转换关系以文件或者数据表的形式保存于字典中，内容可如表1所示。
表1分词与数值的对应转换关系
| 分词 | 数值 |
| 分词1 | 2 |
| 分词2 | 175 |
| 分词3 | 50 |
| ... | ... |
步骤140，根据字典，将标注有第一类型标签的各分句转换成数值向量格式的分句，形成第一数值向量分句集合。
也即，可根据上述包括分词与数值的对应转换关系的字典，将每个标注有第一类型标签的由多个分词组成的分句，转换成数值向量格式的分句，并形成数值向量分句集合，在本实施例中，可称为第一数值向量分句集合。
步骤150，从第一数值向量分句集合中选取第一预置数量的分句作为第一训练数据。
通常在进行深度学习模型训练之前，可先确定用于训练的训练集和用于测试的测试集，在本实施例中，可从上述第一数值向量分句集合中选取预置数量(比如占比90％)的分句作为第一训练数据，剩余(比如占比10％)的分句则可作为第一测试数据。
步骤160，将第一训练数据经深度学习模型进行训练，以获得第一深度学习模型。
在本实施例中，该深度学习模型可为长短期记忆网络(LSTM，Long Short-TermMemory)机器学习模型，在训练之前，可对一些关键参数进行设置，比如嵌入层大小(embedding size)、隐藏层大小(hidden layer size)、批次训练大小(batch size)、全样本循环次数(num epochs)、遗忘率(dropout)、激活函数(activation，分类型变量使用sigmoid)、损失函数(loss，分类型问题使用binary-crossentropy)等参数。然后，可将第一训练数据输入LSTM机器学习模型进行训练，以在训练完毕后获得第一深度学习模型。
此外，在训练完毕获得第一深度学习模型后，还可将第一测试数据输入第一深度学习模型进行测试，以得到该第一深度学习模型的准确率，经多次试验，我们的第一深度学习模型在第一测试数据上的准确率可达到85％左右。在准确率低于预定标准(比如70％)时，可通过调整参数、对训练集数据进行调整等方式重新进行训练，以得到符合预定标准的准确率的第一深度学习模型，从而可保证利用训练好的第一深度模型可更为准确的对分句进行评分并判断出句子类型。
由此，可将待分析证券研报中的各分句采用上述第一深度学习模型进行评分以得到针对待分析证券研报中的各分句的第一评分，并可基于第一评分从待分析证券研报中的各分句中确定观点类分句。
在本实施例中，该第一评分可为该模型认为的评分，该评分可视为概率(在0至1之间)，比如模型认为比较偏向于观点类的分句，则评分更接近于1(比如0.75)，模型认为比较偏向于非观点类的分句，则评分更接近于0(比如0.22)。
在得到第一评分后，可根据该第一评分与预先设置的第一分数阈值进行比较，并根据比较结果判断出观点类分句，比如可将第一评分大于第一分数阈值的分句判定为观点类分句，将第一评分不大于第一分数阈值的分句判定为非观点分句。在本实施例中，可将该第一分数阈值设置为0.5，也就是说，第一评分不大于0.5的分句均可确定为非观点类分句，不再参与后续步骤；第一评分大于0.5的分句均可确定为观点类分句，可以继续参与后续步骤。
以此，采用预先训练好的第一深度学习模型，以智能化评分的方式来判断分句的类型(观点类分句或非观点类分句)，一方面，可大大节省人力，提高判断效率；另一方面，可提高判断结果的准确率。
S04，将待分析证券研报中的各观点类分句采用预先训练好的第二深度学习模型进行评分，以得到针对待分析证券研报中的各观点类分句的第二评分，并基于第二评分从待分析证券研报中的各观点类分句中确定行业观点类分句。
首先，先对第二深度学习模型的训练过程进行说明，该训练过程可包括如下步骤：
步骤210，确定第二数据集。
比如，预先挑选预置篇数(比如500篇)证券研报，比如可挑选一定比例的观点比较明显、尤其是行业观点比较明显的证券研报，还可挑选一定比例的观点比较模糊、尤其是行业观点比较模糊的证券研报等，然后可对证券研报的摘要部分进行分句处理以得到多个分句，然后以人工方式对每个分句进行第一类型标签的标注，该第一类型标签可包括观点类和非观点类。也就是说，经第一类型标签标注后，第二数据集中的分句可包括观点类分句和非观点类分句。然后，再以人工方式对每个观点类分句进行第二类型标签的标注，该第二类型标签可包括行业观点类和非行业观点类。也就是说，经第二类型标签标注后，在第二数据集中的分句可包括观点类分句和非观点类分句，且观点类分句中还包括行业观点类分句和非行业观点类分句。
步骤220，将标注有第二类型标签的各分句进行分词处理，得到标注有第二类型标签的各分词。
也就是说，将第二数据集中标准有第二类型标签的各分句(也即第二数据集中的行业观点类分句和非行业观点类分句进行分词处理，比如，可使用现有的jieba分词模块对上述各分句进行分词处理，以得到标注有第二类型标签的各分词。
步骤230，根据预置规则将标注有第二类型标签的各分词转换为对应的第二数值，并将标注有第二类型标签的各分词与其对应的第二数值存储于预置的包括分词与数值的对应转换关系的字典中。
具体的，可根据预置规则(比如随机转换，或者可根据实际需求预先设定词语到数值的转换规则等)将标注有第二类型标签的各分词一一转换为数值(在本实施例中，可称为第二数值)，并可将标注有第二类型标签的各分词与第二数值的转换结果存储于预置的包括分词与数值的对应转换关系的字典中。
在本实施例中，可将标注有第二类型标签的各分词与第二数值的对应转换关系以文件或者数据表的形式保存于字典中，内容可如上述表1所示。
步骤240，根据字典，将标注有第二类型标签的各分句转换成数值向量格式的分句，形成第二数值向量分句集合。
也即，可根据上述包括分词与数值的对应转换关系的字典，将每个标注有第二类型标签的由多个分词组成的分句，转换成数值向量格式的分句，并形成数值向量分句集合，在本实施例中，可称为第二数值向量分句集合。
步骤250，从第二数值向量分句集合中选取第二预置数量的分句作为第二训练数据。
通常在进行深度学习模型训练之前，可先确定用于训练的训练集和用于测试的测试集，在本实施例中，可从上述第二数值向量分句集合中选取预置数量(比如占比90％)的分句作为第二训练数据，剩余(比如占比10％)的分句则可作为第二测试数据。
步骤260，将第二训练数据经深度学习模型进行训练，以获得第二深度学习模型。
在本实施例中，该深度学习模型可为长短期记忆网络(LSTM，Long Short-TermMemory)机器学习模型，在训练之前，可对一些关键参数进行设置，比如嵌入层大小(embedding size)、隐藏层大小(hidden layer size)、批次训练大小(batch size)、全样本循环次数(num epochs)、遗忘率(dropout)、激活函数(activation，分类型变量使用sigmoid)、损失函数(loss，分类型问题使用binary-crossentropy)等参数。然后，可将第二训练数据输入LSTM机器学习模型进行训练，以在训练完毕后获得第二深度学习模型。
此外，在训练完毕获得第二深度学习模型后，还可将第二测试数据输入第二深度学习模型进行测试，以得到该第二深度学习模型的准确率。经多次试验，我们的第二深度学习在第二测试数据上的准确率可达到85％左右。在准确率低于预定标准(比如70％)时，可通过调整参数、对训练集数据进行调整等方式重新进行训练，以得到符合预定标准的准确率的第二深度学习模型，从而可保证利用训练好的第二深度模型可更为准确的对分句进行评分并判断出句子类型。
由此，可将由S03中判定的待分析证券研报中的各观点类分句采用上述第二深度学习模型进行评分以得到针对待分析证券研报中的各观点类分句的第二评分，并可基于第二评分从观点类分句中确定待分析证券研报中的行业观点类分句。
在本实施例中，该第二评分可为该模型认为的评分，该评分可视为概率(在0至1之间)，比如模型认为比较偏向于行业观点类的分句，则评分更接近于1(比如0.85)，模型认为比较偏向于非行业观点类的分句，则评分更接近于0(比如0.3)。
在得到第二评分后，可根据该第二评分与预先设置的第二分数阈值进行比较，并根据比较结果判断出观点类分句，比如可将第二评分大于二分数阈值的分句判定为行业观点类分句，第二评分不大于第二分数阈值的分句判定为非行业观点分句。在本实施例中，可将该第二分数阈值设置为0.5，也就是说，第二评分不大于0.5的分句均可确定为非行业观点类分句，不再参与后续步骤；第二评分大于0.5的分句均可确定为行业观点类分句，可以继续参与后续步骤。
以此，采用预先训练好的第二深度学习模型，以智能化评分的方式来判断观点类分句的具体类型(行业观点类分句或非行业观点类分句)，一方面，可大大节省人力，提高判断效率；另一方面，可提高判断结果的准确率。
S05，提取第二评分最高的行业观点类分句作为待分析证券研报的核心观点进行输出。
在本实施例中，一方面，由于第二评分是由第二深度学习模型根据分句是偏向于行业观点类还是偏向于非行业观点类而给出的分数，且越偏向于行业观点类的分句的第二评分越高(即越接近1)，另一方面，由于在通常情况下，整篇证券研报的核心观点必然包含于行业观点中，因此，可将第二评分最高的行业观点类分句看作是最为重要且核心的行业观点。
在具体实现时，可在得到第二评分后，将第二评分进行排序(比如以正序排序)，并将第二评分最高(比如排序第一)的行业观点类分句作为待分析证券研报的核心观点进行输出。
根据本实施例的各个实施方式，可先将待分析证券研报进行分句处理得到各分句，再将各分句采用预先训练好的第一深度学习模型进行评分以得到各分句的第一评分，并根据第一评分判断分句是否为观点类分句，然后将判断出的观点类分句采用预先训练好的第二深度学习模型进行评分以得到各观点类分句的第二评分，并根据第二评分判断各观点类分句是否为行业观点类分句，在判断出行业观点类分句后，可提取第二评分最高的行业观点类分句作为该待分析证券研报中的核心观点进行输出。通过上述方案，可利用预先训练好的深度学习模型通过智能化评分的方式挑选出观点类分句及行业观点类分句，并最终通过客观的评分从行业观点类分句中提取出能够代表整篇证券研报的核心观点的分句，由此，上述利用深度学习模型智能评分并分析的过程，不但可大大节省人力，而且可提高操作效率及提取结果的准确率。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。
实施例二
基于上述实施例一中提供的利用深度学习模型的证券研报核心观点提取方法，本实施例中提供一种利用深度学习模型的证券研报核心观点提取装置，具体地，图2至3示出了该利用深度学习模型的证券研报核心观点提取装置的可选的结构框图，该利用深度学习模型的证券研报核心观点提取装置被分割成一个或多个程序模块，一个或者多个程序模块被存储于存储介质中，并由一个或多个处理器所执行，以完成本发明。本发明所称的程序模块是指能够完成特定功能的一系列计算机程序指令段，比程序本身更适合描述利用深度学习模型的证券研报核心观点提取装置在存储介质中的执行过程，以下描述将具体介绍本实施例各程序模块的功能。
如图2所示，该利用深度学习模型的证券研报核心观点提取装置20可包括：
接收模块21，可用于接收输入的待分析证券研报；
分句模块22，可用于对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
第一评分模块23，可用于将待分析证券研报中的各分句采用预先训练好的第一深度学习模型进行评分，以得到针对待分析证券研报中的各分句的第一评分，并基于第一评分从待分析证券研报中的各分句中确定观点类分句；
第二评分模块24，可用于将待分析证券研报中的各观点类分句采用预先训练好的第二深度学习模型进行评分，以得到针对待分析证券研报中的各观点类分句的第二评分，并基于第二评分从待分析证券研报中的各观点类分句中确定行业观点类分句；
提取模块25，可用于提取第二评分最高的行业观点类分句作为待分析证券研报的核心观点进行输出。
在具体实现时，接收模块21，可具体用于：
判断接收到的待分析证券研报的格式是否为文本类型；
若否，则将所述待分析证券研报的格式转换为文本类型。
进一步的，参看图3所示，分句模块22，可具体包括：
分句单元221，用于根据预置类型的符号对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
分词单元222，用于对待分析证券研报中的各分句进行分词处理，得到待分析证券研报中的各分词；
数值确定单元223，用于基于预置的包括分词与数值的对应转换关系的字典，确定待分析证券研报中的各分词对应的数值；
转换单元224，用于根据确定结果，将待分析证券研报中的各分句转换成数值向量格式的分句。
在本实施例中，第一深度学习模型的训练过程，包括如下步骤：
步骤110，确定第一数据集，其中，第一数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类；
步骤120，将标注有第一类型标签的各分句进行分词处理，得到标注有第一类型标签的各分词；
步骤130，根据预置规则将标注有第一类型标签的各分词转换为对应的第一数值，并将标注有第一类型标签的各分词与其对应的第一数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤140，根据词典，将标注有第一类型标签的各分句转换成数值向量格式的分句，形成第一数值向量分句集合；
步骤150，从第一数值向量分句集合中选取第一预置数量的分句作为第一训练数据；
步骤160，将第一训练数据经深度学习模型进行训练，以获得第一深度学习模型。
在本实施例中，第二深度学习模型的训练过程，包括如下步骤：
步骤210，确定第二数据集，其中，第二数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类，且标注有观点类标签的分句同时具有预先标注的第二类型标签，第二类型标签包括行业观点类和非行业观点类；
步骤220，将标注有第二类型标签的各分句进行分词处理，得到标注有第二类型标签的各分词；
步骤230，根据预置规则将标注有第二类型标签的各分词转换为对应的第二数值，并将标注有第二类型标签的各分词与其对应的第二数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤240，根据字典，将标注有第二类型标签的各分句转换成数值向量格式的分句，形成第二数值向量分句集合；
步骤250，从第二数值向量分句集合中选取第二预置数量的分句作为第二训练数据；
步骤260，将第二训练数据经深度学习模型进行训练，以获得第二深度学习模型。
进一步的，深度学习模型为长短期记忆网络机器学习模型。
进一步的，采用jieba分词模块对各分句进行分词处理。
关于上述实施例中的装置，其中各个单元、模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
通过本实施例的各个实施方式，可先将待分析证券研报进行分句处理得到各分句，再将各分句采用预先训练好的第一深度学习模型进行评分以得到各分句的第一评分，并根据第一评分判断分句是否为观点类分句，然后将判断出的观点类分句采用预先训练好的第二深度学习模型进行评分以得到各观点类分句的第二评分，并根据第二评分判断各观点类分句是否为行业观点类分句，在判断出行业观点类分句后，可提取第二评分最高的行业观点类分句作为该待分析证券研报中的核心观点进行输出。通过上述方案，可利用预先训练好的深度学习模型通过智能化评分的方式挑选出观点类分句及行业观点类分句，并最终通过客观的评分从行业观点类分句中提取出能够代表整篇证券研报的核心观点的分句，由此，上述利用深度学习模型智能评分并分析的过程，不但可大大节省人力，而且可提高操作效率及提取结果的准确率。
实施例三
本实施例还提供一种计算机设备，如可以执行程序的智能手机、平板电脑、笔记本电脑、台式计算机、机架式服务器、刀片式服务器、塔式服务器或机柜式服务器(包括独立的服务器，或者多个服务器所组成的服务器集群)等。如图4所示，本实施例的计算机设备40至少包括但不限于：可通过系统总线相互通信连接的存储器41、处理器42，如图4所示。需要指出的是，图4仅示出了具有组件41-42的计算机设备40，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。
本实施例中，存储器41(即可读存储介质)包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中，存储器41可以是计算机设备40的内部存储单元，例如该计算机设备40的硬盘或内存。在另一些实施例中，存储器41也可以是计算机设备40的外部存储设备，例如该计算机设备40上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。当然，存储器41还可以既包括计算机设备40的内部存储单元也包括其外部存储设备。本实施例中，存储器41通常用于存储安装于计算机设备40的操作系统和各类应用软件，例如实施例二的利用深度学习模型的证券研报核心观点提取装置的程序代码等。此外，存储器41还可以用于暂时地存储已经输出或者将要输出的各类数据。
处理器42在一些实施例中可以是中央处理器(Central Processing Unit，CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器42通常用于控制计算机设备40的总体操作。本实施例中，处理器42用于运行存储器41中存储的程序代码或者处理数据，例如利用深度学习模型的证券研报核心观点提取装置等。
实施例四
本实施例还提供一种计算机可读存储介质，如闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘、服务器、App应用商城等等，其上存储有计算机程序，程序被处理器执行时实现相应功能。本实施例的计算机可读存储介质用于利用深度学习模型的证券研报核心观点提取装置，被处理器执行时实现实施例一的利用深度学习模型的证券研报核心观点提取方法。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种利用深度学习模型的证券研报核心观点提取方法，其特征在于，包括如下步骤：
S01，接收输入的待分析证券研报；
S02，对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
S03，将待分析证券研报中的各分句采用预先训练好的第一深度学习模型进行评分，以得到针对待分析证券研报中的各分句的第一评分，并基于第一评分从待分析证券研报中的各分句中确定观点类分句；
S04，将待分析证券研报中的各观点类分句采用预先训练好的第二深度学习模型进行评分，以得到针对待分析证券研报中的各观点类分句的第二评分，并基于第二评分从待分析证券研报中的各观点类分句中确定行业观点类分句；
S05，提取第二评分最高的行业观点类分句作为待分析证券研报的核心观点进行输出。
2.根据权利要求1所述的利用深度学习模型的证券研报核心观点提取方法，其特征在于，S01接收输入的待分析证券研报，包括：
判断接收到的待分析证券研报的格式是否为文本类型；
若否，则将所述待分析证券研报的格式转换为文本类型。
3.根据权利要求1所述的利用深度学习模型的证券研报核心观点提取方法，其特征在于，S02对待分析证券研报进行分句处理，得到待分析证券研报中的各分句，包括：
根据预置类型的符号对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
对待分析证券研报中的各分句进行分词处理，得到待分析证券研报中的各分词；
基于预置的包括分词与数值的对应转换关系的字典，确定待分析证券研报中的各分词对应的数值；
根据确定结果，将待分析证券研报中的各分句转换成数值向量格式的分句。
4.根据权利要求1所述的利用深度学习模型的证券研报核心观点提取方法，其特征在于，第一深度学习模型的训练过程，包括如下步骤：
步骤110，确定第一数据集，所述第一数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类；
步骤120，将标注有第一类型标签的各分句进行分词处理，得到标注有第一类型标签的各分词；
步骤130，根据预置规则将标注有第一类型标签的各分词转换为对应的第一数值，并将标注有第一类型标签的各分词与其对应的第一数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤140，根据所述词典，将标注有第一类型标签的各分句转换成数值向量格式的分句，形成第一数值向量分句集合；
步骤150，从第一数值向量分句集合中选取第一预置数量的分句作为第一训练数据；
步骤160，将第一训练数据经深度学习模型进行训练，以获得第一深度学习模型。
5.根据权利要求1所述的利用深度学习模型的证券研报核心观点提取方法，其特征在于，第二深度学习模型的训练过程，包括如下步骤：
步骤210，确定第二数据集，所述第二数据集包括预先对预置篇数的证券研报的摘要部分进行分句处理后得到的多个分句，其中每个分句具有预先标注的第一类型标签，第一类型标签包括观点类和非观点类，且标注有观点类标签的分句同时具有预先标注的第二类型标签，第二类型标签包括行业观点类和非行业观点类；
步骤220，将标注有第二类型标签的各分句进行分词处理，得到标注有第二类型标签的各分词；
步骤230，根据预置规则将标注有第二类型标签的各分词转换为对应的第二数值，并将标注有第二类型标签的各分词与其对应的第二数值存储于预置的包括分词与数值的对应转换关系的字典中；
步骤240，根据所述字典，将标注有第二类型标签的各分句转换成数值向量格式的分句，形成第二数值向量分句集合；
步骤250，从第二数值向量分句集合中选取第二预置数量的分句作为第二训练数据；
步骤260，将第二训练数据经深度学习模型进行训练，以获得第二深度学习模型。
6.根据权利要求4或5所述的利用深度学习模型的证券研报核心观点提取方法，其特征在于，所述深度学习模型为长短期记忆网络机器学习模型。
7.根据权利要求3至5任一项所述的利用深度学习模型的证券研报核心观点提取方法，其特征在于，采用jieba分词模块对各分句进行分词处理。
8.一种利用深度学习模型的证券研报核心观点提取装置，其特征在于，包括：
接收模块，用于接收输入的待分析证券研报；
分句模块，用于对待分析证券研报进行分句处理，得到待分析证券研报中的各分句；
第一评分模块，用于将待分析证券研报中的各分句采用预先训练好的第一深度学习模型进行评分，以得到针对待分析证券研报中的各分句的第一评分，并基于第一评分从待分析证券研报中的各分句中确定观点类分句；
第二评分模块，用于将待分析证券研报中的各观点类分句采用预先训练好的第二深度学习模型进行评分，以得到针对待分析证券研报中的各观点类分句的第二评分，并基于第二评分从待分析证券研报中的各观点类分句中确定行业观点类分句；
提取模块，用于提取第二评分最高的行业观点类分句作为待分析证券研报的核心观点进行输出。
9.一种计算机设备，所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至7任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于：所述程序被处理器执行时实现权利要求1至7任一项所述方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811228490.5A CN109388804A (zh) | 2018-10-22 | 2018-10-22 | 利用深度学习模型的证券研报核心观点提取方法及装置 |
| PCT/CN2019/070292 WO2020082613A1 (zh) | 2018-10-22 | 2019-01-03 | 利用深度学习模型的证券研报核心观点提取方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811228490.5A CN109388804A (zh) | 2018-10-22 | 2018-10-22 | 利用深度学习模型的证券研报核心观点提取方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109388804A true CN109388804A (zh) | 2019-02-26 |
Family
ID=65427490
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811228490.5A Pending CN109388804A (zh) | 2018-10-22 | 2018-10-22 | 利用深度学习模型的证券研报核心观点提取方法及装置 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN109388804A (zh) |
| WO (1) | WO2020082613A1 (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110110295A (zh) * | 2019-04-04 | 2019-08-09 | 平安科技（深圳）有限公司 | 大样本研报信息提取方法、装置、设备及存储介质 |
| CN110889291A (zh) * | 2019-11-21 | 2020-03-17 | 山东浪潮人工智能研究院有限公司 | 一种基于深度学习和区块链的研报评价方法 |
| CN113127595A (zh) * | 2021-04-26 | 2021-07-16 | 数库（上海）科技有限公司 | 研报摘要的观点详情提取方法、装置、设备和存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101667194A (zh) * | 2009-09-29 | 2010-03-10 | 北京大学 | 基于用户评论文本特征的自动摘要方法及其自动摘要系统 |
| CN102841940A (zh) * | 2012-08-17 | 2012-12-26 | 浙江大学 | 一种基于数据重构的文档摘要提取方法 |
| CN106227722A (zh) * | 2016-09-12 | 2016-12-14 | 中山大学 | 一种基于上市公司公告摘要的自动提取方法 |
| US20180025268A1 (en) * | 2016-07-21 | 2018-01-25 | Tessera Advanced Technologies, Inc. | Configurable machine learning assemblies for autonomous operation in personal devices |
| CN107797990A (zh) * | 2017-10-18 | 2018-03-13 | 渡鸦科技（北京）有限责任公司 | 用于确定文本核心语句的方法和装置 |
| CN108182247A (zh) * | 2017-12-28 | 2018-06-19 | 东软集团股份有限公司 | 文摘生成方法和装置 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104915327B (zh) * | 2014-03-14 | 2019-01-29 | 腾讯科技（深圳）有限公司 | 一种文本信息的处理方法及装置 |
| CN106776551B (zh) * | 2016-12-06 | 2020-05-08 | 桂林电子科技大学 | 一种英语作文情感观点的分析方法 |
| CN108491406B (zh) * | 2018-01-23 | 2021-09-24 | 深圳市阿西莫夫科技有限公司 | 信息分类方法、装置、计算机设备和存储介质 |
-
2018
- 2018-10-22 CN CN201811228490.5A patent/CN109388804A/zh active Pending
-
2019
- 2019-01-03 WO PCT/CN2019/070292 patent/WO2020082613A1/zh active Application Filing
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101667194A (zh) * | 2009-09-29 | 2010-03-10 | 北京大学 | 基于用户评论文本特征的自动摘要方法及其自动摘要系统 |
| CN102841940A (zh) * | 2012-08-17 | 2012-12-26 | 浙江大学 | 一种基于数据重构的文档摘要提取方法 |
| US20180025268A1 (en) * | 2016-07-21 | 2018-01-25 | Tessera Advanced Technologies, Inc. | Configurable machine learning assemblies for autonomous operation in personal devices |
| CN106227722A (zh) * | 2016-09-12 | 2016-12-14 | 中山大学 | 一种基于上市公司公告摘要的自动提取方法 |
| CN107797990A (zh) * | 2017-10-18 | 2018-03-13 | 渡鸦科技（北京）有限责任公司 | 用于确定文本核心语句的方法和装置 |
| CN108182247A (zh) * | 2017-12-28 | 2018-06-19 | 东软集团股份有限公司 | 文摘生成方法和装置 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110110295A (zh) * | 2019-04-04 | 2019-08-09 | 平安科技（深圳）有限公司 | 大样本研报信息提取方法、装置、设备及存储介质 |
| CN110110295B (zh) * | 2019-04-04 | 2023-10-20 | 平安科技（深圳）有限公司 | 大样本研报信息提取方法、装置、设备及存储介质 |
| CN110889291A (zh) * | 2019-11-21 | 2020-03-17 | 山东浪潮人工智能研究院有限公司 | 一种基于深度学习和区块链的研报评价方法 |
| CN113127595A (zh) * | 2021-04-26 | 2021-07-16 | 数库（上海）科技有限公司 | 研报摘要的观点详情提取方法、装置、设备和存储介质 |
| CN113127595B (zh) * | 2021-04-26 | 2022-08-16 | 数库（上海）科技有限公司 | 研报摘要的观点详情提取方法、装置、设备和存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2020082613A1 (zh) | 2020-04-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110163478B (zh) | 一种合同条款的风险审查方法及装置 | |
| CN108629043B (zh) | 网页目标信息的提取方法、装置及存储介质 | |
| CN109815487B (zh) | 文本质检方法、电子装置、计算机设备及存储介质 | |
| CN109492222B (zh) | 基于概念树的意图识别方法、装置及计算机设备 | |
| CN111105209B (zh) | 适用于人岗匹配推荐系统的职位简历匹配方法及装置 | |
| CN109284504A (zh) | 利用深度学习模型的证券研报分析方法及装置 | |
| CN109388804A (zh) | 利用深度学习模型的证券研报核心观点提取方法及装置 | |
| CN111475615B (zh) | 一种情感增强的细粒度情感预测方法、装置、系统及存储介质 | |
| CN107491536B (zh) | 一种试题校验方法、试题校验装置及电子设备 | |
| CN111460250A (zh) | 用于画像的数据的清洗方法、装置、介质及电子设备 | |
| CN111309910A (zh) | 文本信息挖掘方法及装置 | |
| CN109389418A (zh) | 基于lda模型的供电服务客户诉求识别方法 | |
| CN108241867A (zh) | 一种分类方法及装置 | |
| CN110910175A (zh) | 一种旅游门票产品画像生成方法 | |
| CN114240672B (zh) | 绿色资产的占比的识别方法及相关产品 | |
| CN111930937A (zh) | 基于bert的智慧政务文本多分类方法及系统 | |
| CN113240322B (zh) | 气候风险披露质量方法、装置、电子设备及存储介质 | |
| CN117875320A (zh) | 基于人工智能的数据处理方法、装置、设备及存储介质 | |
| CN110489514B (zh) | 提升事件抽取标注效率的系统及方法、事件抽取方法及系统 | |
| CN108733702B (zh) | 用户查询上下位关系提取的方法、装置、电子设备和介质 | |
| CN110414819B (zh) | 一种工单评分方法 | |
| CN106815592A (zh) | 模型训练方法及装置和错别字识别方法及装置 | |
| CN112748951B (zh) | 基于XGBoost的自承认技术债务多分类方法 | |
| CN113312482B (zh) | 问题分类方法、装置、电子设备及可读存储介质 | |
| CN114020643B (zh) | 一种知识库测试方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |