CN108536679A - 命名实体识别方法、装置、设备及计算机可读存储介质 - Google Patents

命名实体识别方法、装置、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN108536679A
CN108536679A CN201810332490.3A CN201810332490A CN108536679A CN 108536679 A CN108536679 A CN 108536679A CN 201810332490 A CN201810332490 A CN 201810332490A CN 108536679 A CN108536679 A CN 108536679A
Authority
CN
China
Prior art keywords
text
models
vector
identified
entity recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810332490.3A
Other languages
English (en)
Other versions
CN108536679B (zh
Inventor
晁阳
李东
陆遥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Chengdu Co Ltd
Original Assignee
Tencent Technology Chengdu Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Chengdu Co Ltd filed Critical Tencent Technology Chengdu Co Ltd
Priority to CN201810332490.3A priority Critical patent/CN108536679B/zh
Publication of CN108536679A publication Critical patent/CN108536679A/zh
Application granted granted Critical
Publication of CN108536679B publication Critical patent/CN108536679B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
    • G06F40/295—Named entity recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Character Discrimination (AREA)
  • Machine Translation (AREA)

Abstract

本发明实施例公开了一种命名实体识别方法、装置、设备及计算机可读存储介质。方法包括：获取待识别文本的字符向量和词向量，对字符向量和词向量进行加权求和，得到加权求和结果；将加权求和结果输入至目标双向LSTM模型中进行处理，得到文本特征序列；将文本特征序列输入至目标CRF模型中进行处理，得到待识别文本的命名实体识别结果。获取待识别文本的字符向量和词向量之后，通过对字符向量和词向量进行加权求和，更好的利用了动态的权重信息，通过采用双向LSTM模型更充分的考虑了上下文词与词的关系，充分利用了双向信息，再结合CRF模型进行处理，从而提高了命名实体识别的准确率。

Description

命名实体识别方法、装置、设备及计算机可读存储介质
技术领域
本发明实施例涉及互联网技术领域，特别涉及一种命名实体识别方法、装置、设备及计算机可读存储介质。
背景技术
在信息抽取、实体链接等自然语言处理任务的场景中，常常需要进行NER(NamedEntity Recognition，命名实体识别)。其中，NER是指在文档集合中识别出特定类型的事物名称或符号的过程。
相关技术在进行命名实体识别时，一般采用CRF(Conditional Random Field，条件随机场算法)或单向RNN(Recurrent neural Network、循环神经网络)等模型对待识别文本进行识别。
然而，由于无论采用CRF还是采用单向RNN进行识别，得到的语义信息比较有限，因此，识别的准确率不高。
发明内容
本发明实施例提供了一种命名实体识别方法、装置、设备及计算机可读存储介质，可用于解决相关技术中的问题。所述技术方案如下：
一方面，本发明实施例提供一种命名实体识别方法，所述方法包括：
获取待识别文本的字符向量和词向量，对所述字符向量和词向量进行加权求和，得到加权求和结果；
将所述加权求和结果输入至目标Bi-LSTM(Bi-directional Long Short-TermMemory，双向长短期记忆)模型中进行处理，得到文本特征序列；
将所述文本特征序列输入至目标CRF(Conditional Random Field，条件随机场)模型中进行处理，得到所述待识别文本的命名实体识别结果。
一方面，提供了一种命名实体识别装置，所述装置包括：预处理层、双向LSTM层和CRF层；
所述预处理层，用于获取待识别文本的字符向量和词向量，对所述字符向量和词向量进行加权求和，得到加权求和结果，将所述加权求和结果输入至所述双向LSTM层；
所述双向LSTM层，用于对所述加权求和结果进行处理，得到文本特征序列，将所述文本特征序列输入至所述CRF层；
所述CRF层，用于对所述文本特征序列进行处理，得到所述待识别文本的命名实体识别结果。
一方面，提供了一种命名实体识别装置，所述装置包括：
预处理模块，用于获取待识别文本的字符向量和词向量，对所述字符向量和词向量进行加权求和，得到加权求和结果；
第一处理模块，用于将所述加权求和结果输入至目标双向LSTM模型中进行处理，得到文本特征序列；
第二处理模块，用于将所述文本特征序列输入至目标CRF模型中进行处理，得到所述待识别文本的命名实体识别结果。
一方面，提供了一种计算机设备，所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或所述指令集在被所述处理器执行时实现上述的命名实体识别方法。
一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或所述指令集在被执行时实现上述的命名实体识别方法。
本发明实施例提供的技术方案可以带来如下有益效果：
获取待识别文本的字符向量和词向量之后，通过对字符向量和词向量进行加权求和，更好的利用了动态的权重信息，通过采用双向LSTM模型更充分的考虑了上下文词与词的关系，充分利用了双向信息，再结合CRF模型进行处理，从而提高了命名实体识别的准确率。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种实施环境的示意图；
图2是本发明实施例提供的一种命名实体识别方法流程图；
图3是本发明实施例提供的一种双向LSTM模型结构示意图；
图4是本发明实施例提供的一种CRF模型结构示意图；
图5是本发明实施例提供的一种命名实体识别的装置结构示意图；
图6是本发明实施例提供的一种命名实体识别的交互示意图；
图7是本发明实施例提供的一种命名实体识别的效果示意图；
图8是本发明实施例提供的一种命名实体识别装置的结构示意图；
图9是本发明实施例提供的一种命名实体识别装置的结构示意图；
图10是本发明实施例提供的一种服务器的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
随着互联网技术的发展，在信息抽取、实体链接等场景中，常常需要进行NER。命名实体识别是信息抽取、实体链接等NLP(Natural Language Processing，自然语言处理)任务的基础，它主要有如下3个作用：
1、根据词性标注，确定场景的人名，地名，机构名等；
2、有了命名实体识别，才可以做实体与实体之间的关联抽取；
3、为策划美术在海量的文档中，提供有效的信息识别和抽取；
为此，本发明实施例提供了一种命名实体识别方法，该方法通过结合CNN(Convolutional Neural Network，卷积神经网络)、双向LSTM、Attention(注意力)、CRF等多种模型来实现命名实体识别，从而提高命名实体识别的准确率。
为了便于理解，在对本发明实施例提供的技术方案进行详细介绍之前，先对本申请涉及的一些词语进行介绍，具体如下：
NER：是指识别文本中具有特定意义的实体，主要包括人名、地名、机构名、专有名词等。NER是信息提取、问答系统、句法分析、机器翻译等应用领域的重要基础工具，在自然语言处理技术走向实用化的过程中占有重要地位。
机器学习模型：是一种运算模型，由大量的节点(或称神经元)之间相互联接构成，每个节点对应一个策略函数，每两个节点间的连接代表一个对于通过该连接信号的加权值，称之为权重。样本输入机器学习模型的节点后，通过每个节点输出一个输出结果，该输出结果作为下一个节点的输入样本，机器学习模型通过样本最终输出结果对每个节点的策略函数和权重进行调整，该过程被称为训练。
CNN：是一种机器学习模型，包括至少两层级联的卷积层、顶端的全连接层(FullyConnected Layers，FC)和软最大化函数(Softmax)组成，可选的，每一层卷积层后包括一层池化层。其通过共享参数降低模型的参数量，使之在图像和语音识别方面得到广泛应用。
CRF：是一种判别式概率模型，是随机场的一种，常用于标注或分析序列资料，如自然语言文字或是生物序列。
LSTM(Long Short-Term Memory，长短期记忆)：是一种时间递归神经网络，适合于处理和预测时间序列中间隔和延迟相对较长的重要事件，其可有效解决传统循环神经网络长路径依赖的问题。
Bi-LSTM：即双向LSTM，可以充分考虑上下文词与词之间的关系，充分利用了双向信息。
Word2vec：是一种分布式空间向量表示方法，是从大量文本语料中以无监督的方式学习语义知识的一种模型，它被大量的用在NLP中。实际应用中，Word2vec是通过学习文本来用词向量的方式表征词的语义信息，即通过一个嵌入空间使得语义上相似的单词在该空间内距离很近。Word2vec中包含embedding(嵌入)层，该embedding其实是一个映射，将单词从原所属的空间映射到新的多维空间中，即是将单词所在原空间嵌入到一个新的空间中去。
Glove：是一种考虑全局信息的向量表示方法。
注意力模型(Attention Model)：模拟的是人脑的注意力模型，例如，当人们在读一篇文章时，其实眼睛聚焦的就只有当前看到的文字，这个时候人的大脑主要关注在这一部分文字上。也就是说，这个时候人脑对整篇文章的关注并不是均衡的，是有一定的权重区分的。有鉴于此，注意力机制在序列学习任务上具有巨大的提升作用，在模型的编解码器框架内，通过在编码阶段加入注意力模型，对源数据序列进行数据加权变换，可以有效提高序列对序列的自然方式下的系统表现。因此，注意力模型被广泛使用在自然语言处理、图像识别及语音识别等各种不同类型的深度学习任务中。
请参考图1，其示出了本发明实施例提供的实施环境的示意图。该实施环境可以包括：终端11和服务器12。
终端11安装有应用程序客户端，例如，命名实体识别类应用程序客户端等。当该应用程序客户端启动后，可通过终端11向服务器12请求进行命名实体识别，将待识别文本发送至服务器12。此外，除了发送待识别文本，还可以发送用户账号，以便于服务器12返回命名实体识别结果。
服务器12用于对终端11请求识别的待识别文本进行处理，得到命名实体识别结果后，将其发送给终端11，如通过用户账号将命名实体识别结果发送给对应的终端11。
其中，终端11可以是诸如手机、平板电脑、个人计算机等电子设备。
服务器12可以是一台服务器，也可以是由多台服务器组成的服务器集群，或者是一个云计算服务中心。
终端11与服务器12通过有线或无线网络建立通信连接。
本发明实施例提供了一种命名实体识别方法，请参考图2，其示出了本发明实施例提供的命名实体识别方法流程图，该方法可应用于图1所示实施环境的服务器12中。如图2所示，本发明实施例提供的方法可以包括如下几个步骤：
在步骤201中，获取待识别文本的字符向量和词向量。
当有命名实体识别需求时，用户可以开启命名实体识别的应用程序客户端，通过该客户端获取待识别文本。例如，可以针对某小说文本进行命名实体识别，根据用户的选择操作，当用户选择小说文本中的一段内容后，获取命名实体识别指令，根据该命名实体识别指令触发将小说文本中被选择的一段内容作为获取到的待识别文本。
当终端获取到待识别文本后，将其发送至服务器，服务器由此获取到待识别文本。
进一步地，由于深度学习模型接受数字的输入，而不是字符串，因而在获取到待识别文本后，需要将其转换成向量的形式。而常见的向量训练表示方法有word2vec和glove，可通过word2vec模型或glove模型获取待识别文本的词向量。具体选择word2vec模型还是glove模型，可根据场景来定。
例如，在对比了word2vec和glove的特点之后，在策划文案和小说集的各类信息抽取场景下，本发明实施例提供的方法选择word2vec的向量训练表示方法。word2vec是一个常见的分布式向量表示方法，可将相似的词的距离拉的很近。
为此，在一种实现方式中，本发明实施例提供的方法在获取待识别文本的词向量时，包括但不限于：通过word2vec模型获取待识别文本的词向量。
为了能够采用word2vec模型得到更准确的词向量，本发明实施例提供的方法在训练word2vec模型时，利用公开的中文语料，用word2vec训练得到预设维度的词向量，并按照预设迭代次数进行迭代。例如，用word2vec训练得到了500维的词向量，预设迭代次数选择了200次。其中，500维是为了保证可以得到更长的有效的信息表示。当然，实际应用中，还可以训练得到不止500维的词向量，也可以选择设置其他数量的迭代次数，具体可依据实际情况进行调整，本发明实施例对此不加以限定。
此外，在训练得到目标word2vec的时候，对初始word2vec模型中的wordembedding(嵌入)层初始化后，前期的神经网络损失太大，反向传播时梯度较大，造成神经网络初期内部参数变化明显。因此，为保证有效利用初始化值，在训练初期，训练目标word2vec模型时，本发明实施例提供的方法对初始word2vec模型中的word embedding(词嵌入)层初始化后，将word embedding层的参数设置为不可训练状态，直至迭代到达预设时间后，对word embedding层的参数进行训练，得到目标word2vec模型。例如，迭代3、4轮之后达到预设时间，在后续的训练过程中，将word embedding层的参数设置为可训练状态，对word embedding层的参数进行训练，得到目标word2vec模型。其中，预设时间可以根据经验设置，也可以后续再根据命名实体识别的识别效果进行调整。
进一步地，由于CNN模型对字符char级别的向量有着很好的识别效果，利用CNN可训练得到字符char的向量。为此，本发明实施例提供的方法在获取待识别文本的字符向量时，包括但不限于将待识别文本输入至CNN模型中，得到待识别文本的字符向量。
为了能够采用CNN模型识别更准确的字符向量，本发明实施例提供的方法在训练CNN模型时，针对每个char(字符)，选择了68个char字符向量，通过二层CNN网络训练得到。当然，实际应用中，选择的字符数量可以不仅仅局限于68个，本发明实施例对此不加以限定。
需要说明的是，在获取待识别文本的字符向量和词向量时，本发明实施例不对具体的获取顺序进行限定。具体实施时，既可以先获取待识别文本的字符向量，再获取待识别文本的词向量；也可以先获取待识别文本的词向量，再获取待识别文本的字符向量；当然，也可以同时获取待识别文本的字符向量和词向量。
在步骤202中，对字符向量和词向量进行加权求和，得到加权求和结果。
由于单纯的直接拼接字符向量和词向量，是一个固定维度的向量，无法更好的利用动态权重信息，因此，本发明实施例提供的方法采用对字符向量和词向量进行加权求和的方式。
在一种实现方式中，可以为字符向量和词向量设置有各自对应的权重，将字符向量按照其对应的权重进行处理，得到处理后的字符向量，将词向量按照其对应的权重进行处理，得到处理后的词向量。之后，将处理后的字符向量与处理后的词向量进行求和，得到加权求和结果。
在一种实现方式中，本发明实施例提供的方法引入了attention机制。具体实施时，采用attention模型可动态地训练向量的权重，对词向量和字符向量进行数据加权变换。此外，在本发明实施例中，例如，选取了attention模型中的Soft-Attention，使得CNN训练得到的原始的字符向量和词向量拼接变成了权重求和，使用了两层传统神经网络隐层学习attention的值。
在步骤203中，将加权求和结果输入至目标双向LSTM模型中进行处理，得到文本特征序列。
由于LSTM模型在处理自然语言语句时，因为是序列输入，处理这一时刻的输入数据时只收到当前输入词和此时刻前输入词的影响，而日常生活中人们所说的语句中存在前后关联，并不只是受到前面词语的影响。
因此，本发明实施例提供的方法使用Bi-LSTM即双向LSTM对sentence(句子)进行处理，是指LSTM处理语句时有两个方向不同的LSTM对数据进行处理，分别从前后两个不同的方向进行传播，避免了在处理序列数据时只收到前时刻数据的影响。
如图3所示，本发明实施例采用了Bi-LSTM，双向的LSTM对比单向的LSTM有所区别，本实施例中定义了一个前向的LSTM_CELL和一个后向的LSTM_CELL，分别得到隐层的状态，最后拼接成为了一个长度为2倍的隐含层节点数的向量作为Bi-LSTM的输出，并将其作为CRF的输入。其中，图3中的x代表输入层，h代表隐含层，y代表输出层。
在步骤204中，将文本特征序列输入至目标CRF模型中进行处理，得到待识别文本的命名实体识别结果。
在传统的机器学习任务中，CRF是根据海量的特征工程提取足够的不同维度的特征，然后根据这些特征做序列标注。实际应用中，CRF模型是一种无向图模型，它是在给定需要标记的观察序列(词、句子数值等)的条件下，计算整个标记序列的联合概率分布。
在本发明实施例中，如图4所示，CRF模型是一个端到端的，所有特征提取的工作交给深度学习模型来做，根据双向LSTM得到的X(如X1、X2…Xi…Xn)，可以利用立足于局部最优解，算出可能的序列Y(如Y1、Y2…Yi…Yn)的概率分布，也就是最终的tag标记，即命名实体识别结果。
基于上述过程，本发明实施例提供的命名实体识别的装置结构可如图5所示，不难看出，本发明实施例提供的装置结构结合了几个模型的特点：CNN对字符char级别的向量有着很好的识别效果，利用CNN训练得到字符char的向量，和word2vec训练出的词向量，利用attention进行动态的叠加拼接，即加权求和，然后输入到双向LSTM中，动态的利用词向量和字符char向量，更有效的利用深度网络的隐层信息。根据CNN+Bi-LSTM+Attention的模型输出，再利用CRF层，给输入序列求预测输出序列最大化的最优序列，然后去预测输出每个词的标签，即得到命名实体识别结果。
进一步地，为了实现上述装置中各个层的功能，本发明实施例提供的方法还包括：获取数据集，将数据集划分为训练集、验证集和测试集，其中，数据集包括目标文本资源、已标注的目标命名实体及词向量；根据训练集对初始双向LSTM模型及初始CRF模型进行训练，得到训练后的双向LSTM模型及CRF模型；根据验证集对训练后的双向LSTM模型及CRF模型进行验证；当验证通过后，采用测试集对训练后的双向LSTM模型及CRF模型进行测试，得到目标双向LSTM模型及目标CRF模型。
其中，获取数据集，包括但不限于：获取初始文本资源，对初始文本资源进行预处理，得到语句序列；对语句序列进行分词处理，得到至少一个词序列；按照词频对词序列中的词进行排序，确定每个词对应的标签信息，得到多个词与标签信息的组合，将词与标签信息的组合作为目标文本资源。得到目标文本资源之后，可通过对其进行向量转换，得到词向量和字符向量。对于目标文本资源中已标注的目标命名实体所对应的词，其对应的标签即为标注的命名实体信息，而对于未知的词，可将其标签标注为未知。
可选地，在获取目标文本资源时，对初始文本资源进行预处理，可以进一步减少干扰，提高识别的准确性。在一种实施方式中，对初始文本资源进行预处理，得到语句序列，包括但不限于：对初始文本资源进行词过滤及特殊字符过滤，得到语句序列。其中，词过滤可以是过滤一些停用词、词频小于一定值的词等等，特殊字符包括但不限于停用字符、无意义字符等。
对语句序列进行分词处理时，可以采用基于字符串匹配的分词处理方式，也可以采用基于统计以及机器学习的分词方式，如基于人工标注的词性和统计特征，对文本进行建模，即根据观测到的数据(标注好的语料)对模型参数进行估计，即训练。在分词阶段再通过模型计算各种分词出现的概率，将概率最大的分词结果作为最终结果。当然，也可以采用其他分词方式，本发明实施例不对具体的分词方式进行限定。
按照词频对词序列中的词进行排序时，可以采用词频由大到小的顺序进行排序，也可以采用词频由小到大的顺序进行排序，具体排序方式不加以限定。
进一步地，获取到数据集之后，考虑到在模型训练的时候，通常会将数据集分成三部分。分别是training set(训练集)，dev set(也称validation set，验证集)和test set(测试集)，它们分别起着不同的作用。training set用来训练模型，dev set用来统计单一评估指标，调节参数,选择算法。test set则用来在最后整体评估模型的性能，最终得到的目标模型用于命名实体识别。在本发明实施例中，上述提及的模型均可采用这三个数据集进行训练、验证和测试，得到目标模型。
实际应用中，上述方法的交互过程可如图6所示：
1、各个需求方客户端向中心服务端发起请求，服务端做分布式调度，然后向本接口发送请求，请求包含最重要的用户text(文本)和ID(标识)。
2、服务器端程序收到用户text和ID后，去调用深度学习模块，解析答案。
3、服务端接口处理完毕，以json的形式返回中心服务端，然后发送给业务方，得到对应的答案，即命名实体识别结果。
具体实施时，本发明实施例提供的上述深度学习模块程序部署在服务器上，服务器配置为Intel(R)Xeon(R)CPU E5-2620v3，40G内存；深度学习模块基于以python，调用tensorflow检测模块，服务器配置为Intel(R)Xeon(R)CPU E5-2620v3，60G内存，512SSD。
此外，本发明实施例提供的装置提供七大类别的实体，如：时间，地点，人名，组织名，公司名，国家名和游戏专用名词，提供http post的接口方式，内部做了token的校验，http请求body是json格式需要做命名实体识别检测的文本或者文本列表和ID。另外考虑到服务器的负载，本接口限制了一次传入的文章不能超过预设数量，如50篇。http返回的body是json格式的结果：
key type 说明
word list 分词结果
tag list 命名实体结果
例如，基于上述本发明实施例提供的方法，识别效果可如图7所示。如图7中的(1)所示，针对待识别文本“天气很好，小明去爬泰山了”，应用本发明实施例提供的命名实体识别方法进行识别后，得到的识别结果为PERSON(人名)小明，LOCATION(地名)泰山。
除了如图7中(1)所示的将命名实体识别结果单独显示之外，本发明实施例提供的方法还包括在原待识别文本基础上显示识别结果的方式。例如，如图7中的(2)所示，对于待识别文本“小明，你不是喜欢爬山吗？这周六天气不错，咱们一起去爬泰山吧，约上其他几个好朋友一起出发。”，应用本发明实施例提供的方法进行命名实体识别后，识别出的命名实体“小明”、“周六”、“泰山”被标注显示出来。
由于本发明实施例通过整合了各类模型，在应用过程中，通过统计，识别率由机器学习的80％和旧的深度学习模型提高了将近十个百分点，而且该命名实体识别作为信息抽取的重要组成部分，为游戏策划和美术资源抽取提高了效率和准确率，有效的提高了整个工作流程的效率。
此外，本发明实施例提供的方法目前可以采用离线模型训练，作为接口组件提供服务，当然，也可以采用在线方式，本发明实施例对此不加以限定。
本发明实施例提供的方法，获取待识别文本的字符向量和词向量之后，通过对字符向量和词向量进行加权求和，更好的利用了动态的权重信息，通过采用双向LSTM模型更充分的考虑了上下文词与词的关系，充分利用了双向信息，再结合CRF模型进行处理，从而提高了命名实体识别的准确率。
基于与方法同样的构思，参见图8，本发明实施例提供了一种命名实体识别装置，用于执行上述命名实体识别方法，该装置包括：
预处理模块801，用于获取待识别文本的字符向量和词向量，对所述字符向量和词向量进行加权求和，得到加权求和结果；
第一处理模块802，用于将所述加权求和结果输入至目标双向LSTM模型中进行处理，得到文本特征序列；
第二处理模块803，用于将所述文本特征序列输入至目标条件随机场CRF模型中进行处理，得到所述待识别文本的命名实体识别结果。
在一种实现方式中，预处理模块801，用于将所述待识别文本输入至目标卷积神经网络CNN模型中，得到所述待识别文本的字符向量；通过目标word2vec模型或目标glove模型获取所述待识别文本的词向量。
在一种实现方式中，预处理模块801，还用于对初始word2vec模型中的嵌入层初始化后，将所述嵌入层的参数设置为不可训练状态，直至迭代到达预设时间后，对所述嵌入层的参数进行训练，得到所述目标word2vec模型。
在一种实现方式中，参见图9，该装置还包括：
获取模块804，用于获取数据集，将数据集划分为训练集、验证集和测试集，其中，数据集包括目标文本资源、已标注的目标命名实体及词向量；
训练模块805，用于根据训练集对初始双向LSTM模型及初始CRF模型进行训练，得到训练后的双向LSTM模型及CRF模型；
验证模块806，用于根据验证集对训练后的双向LSTM模型及CRF模型进行验证；
测试模块807，用于当验证通过后，采用测试集对训练后的双向LSTM模型及CRF模型进行测试，得到目标双向LSTM模型及目标CRF模型。
本发明实施例提供的装置，获取待识别文本的字符向量和词向量之后，通过对字符向量和词向量进行加权求和，更好的利用了动态的权重信息，通过采用双向LSTM模型更充分的考虑了上下文词与词的关系，充分利用了双向信息，再结合CRF模型进行处理，从而提高了命名实体识别的准确率。
需要说明的是，上述实施例提供的装置在实现其功能时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的装置与方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
图10是本发明实施例提供的一种命名实体识别的设备结构示意图，该设备可以为服务器，服务器可以是单独的服务器或集群服务器。具体来讲：
服务器包括中央处理单元(CPU)1001、随机存取存储器(RAM)1002和只读存储器(ROM)1003的系统存储器1004，以及连接系统存储器1004和中央处理单元1001的系统总线1005。服务器还包括帮助计算机内的各个器件之间传输信息的基本输入/输出系统(I/O系统)1006，和用于存储操作系统1013、应用程序1014和其他程序模块1015的大容量存储设备1007。
基本输入/输出系统1006包括有用于显示信息的显示器1008和用于用户输入信息的诸如鼠标、键盘之类的输入设备1009。其中显示器1008和输入设备1009都通过连接到系统总线1005的输入输出控制器1010连接到中央处理单元1001。基本输入/输出系统1006还可以包括输入输出控制器1010以用于接收和处理来自键盘、鼠标、或电子触控笔等多个其他设备的输入。类似地，输入输出控制器1010还提供输出到显示屏、打印机或其他类型的输出设备。
大容量存储设备1007通过连接到系统总线1005的大容量存储控制器(未示出)连接到中央处理单元1001。大容量存储设备1007及其相关联的计算机可读介质为服务器提供非易失性存储。也就是说，大容量存储设备1007可以包括诸如硬盘或者CD-ROM驱动器之类的计算机可读介质(未示出)。
不失一般性，计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括RAM、ROM、EPROM、EEPROM、闪存或其他固态存储其技术，CD-ROM、DVD或其他光学存储、磁带盒、磁带、磁盘存储或其他磁性存储设备。当然，本领域技术人员可知计算机存储介质不局限于上述几种。上述的系统存储器1004和大容量存储设备1007可以统称为存储器。
根据本发明的各种实施例，服务器还可以通过诸如因特网等网络连接到网络上的远程计算机运行。也即服务器可以通过连接在系统总线1005上的网络接口单元1011连接到网络1012，或者说，也可以使用网络接口单元1011来连接到其他类型的网络或远程计算机系统(未示出)。
上述存储器还包括一个或者一个以上的程序，一个或者一个以上程序存储于存储器中，被配置由CPU执行。所述一个或者一个以上程序包含用于进行本发明实施例提供的命名实体识别方法的指令。
在示例中实施例中，还提供了一种计算机设备，所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集。所述至少一条指令、至少一段程序、代码集或指令集经配置以由一个或者一个以上处理器执行，以实现上述命名实体识别方法。
在示例性实施例中，还提供了一种计算机可读存储介质，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或所述指令集在被计算机设备的处理器执行时实现上述命名实体识别方法。
可选地，上述计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
应当理解的是，在本文中提及的“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
以上所述仅为本发明的示例性实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种命名实体识别方法，其特征在于，所述方法包括：
获取待识别文本的字符向量和词向量，对所述字符向量和词向量进行加权求和，得到加权求和结果；
将所述加权求和结果输入至目标双向长短期记忆LSTM模型中进行处理，得到文本特征序列；
将所述文本特征序列输入至目标条件随机场CRF模型中进行处理，得到所述待识别文本的命名实体识别结果。
2.根据权利要求1所述的方法，其特征在于，所述获取待识别文本的字符向量和词向量，包括：
将所述待识别文本输入至目标卷积神经网络CNN模型中，得到所述待识别文本的字符向量；
通过目标word2vec模型或目标glove模型获取所述待识别文本的词向量。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
对初始word2vec模型中的嵌入层初始化后，将所述嵌入层的参数设置为不可训练状态，直至迭代到达预设时间后，对所述嵌入层的参数进行训练，得到所述目标word2vec模型。
4.根据权利要求1-3中任一所述的方法，其特征在于，所述方法还包括：
获取数据集，将所述数据集划分为训练集、验证集和测试集，其中，所述数据集包括目标文本资源、已标注的目标命名实体及词向量；
根据所述训练集对初始双向LSTM模型及初始CRF模型进行训练，得到训练后的双向LSTM模型及CRF模型；
根据所述验证集对所述训练后的双向LSTM模型及CRF模型进行验证；
当验证通过后，采用所述测试集对所述训练后的双向LSTM模型及CRF模型进行测试，得到目标双向LSTM模型及目标CRF模型。
5.根据权利要求4所述的方法，其特征在于，所述获取数据集，包括：
获取初始文本资源，对所述初始文本资源进行预处理，得到语句序列；
对所述语句序列进行分词处理，得到至少一个词序列；
按照词频对所述词序列中的词进行排序，确定每个词对应的标签信息，得到多个词与标签信息的组合，将所述词与标签信息的组合作为目标文本资源。
6.根据权利要求5所述的方法，其特征在于，所述对所述初始文本资源进行预处理，得到语句序列，包括：
对所述初始文本资源进行词过滤及特殊字符过滤，得到语句序列。
7.一种命名实体识别装置，其特征在于，所述装置包括：预处理层、双向长短期记忆LSTM层和条件随机场CRF层；
所述预处理层，用于获取待识别文本的字符向量和词向量，对所述字符向量和词向量进行加权求和，得到加权求和结果，将所述加权求和结果输入至所述双向LSTM层；
所述双向LSTM层，用于对所述加权求和结果进行处理，得到文本特征序列，将所述文本特征序列输入至所述CRF层；
所述CRF层，用于对所述文本特征序列进行处理，得到所述待识别文本的命名实体识别结果。
8.一种命名实体识别装置，其特征在于，所述装置包括：
预处理模块，用于获取待识别文本的字符向量和词向量，对所述字符向量和词向量进行加权求和，得到加权求和结果；
第一处理模块，用于将所述加权求和结果输入至目标双向长短期记忆LSTM模型中进行处理，得到文本特征序列；
第二处理模块，用于将所述文本特征序列输入至目标条件随机场CRF模型中进行处理，得到所述待识别文本的命名实体识别结果。
9.一种计算机设备，其特征在于，所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或所述指令集在被所述处理器执行时实现如权利要求1至6任一项所述的命名实体识别方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或所述指令集在被执行时实现如权利要求1至6任一项所述的命名实体识别方法。
CN201810332490.3A 2018-04-13 2018-04-13 命名实体识别方法、装置、设备及计算机可读存储介质 Active CN108536679B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810332490.3A CN108536679B (zh) 2018-04-13 2018-04-13 命名实体识别方法、装置、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810332490.3A CN108536679B (zh) 2018-04-13 2018-04-13 命名实体识别方法、装置、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN108536679A true CN108536679A (zh) 2018-09-14
CN108536679B CN108536679B (zh) 2022-05-20

Family

ID=63480530

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810332490.3A Active CN108536679B (zh) 2018-04-13 2018-04-13 命名实体识别方法、装置、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN108536679B (zh)

Cited By (119)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109284400A (zh) * 2018-11-28 2019-01-29 电子科技大学 一种基于Lattice LSTM和语言模型的命名实体识别方法
CN109359297A (zh) * 2018-09-20 2019-02-19 清华大学 一种关系抽取方法及系统
CN109446530A (zh) * 2018-11-03 2019-03-08 上海犀语科技有限公司 一种基于lstm模型由文本中抽取信息的方法及装置
CN109460450A (zh) * 2018-09-27 2019-03-12 清华大学 对话状态跟踪方法、装置、计算机设备和存储介质
CN109460434A (zh) * 2018-10-25 2019-03-12 北京知道创宇信息技术有限公司 数据提取模型建立方法及装置
CN109471895A (zh) * 2018-10-29 2019-03-15 清华大学 电子病历表型抽取、表型名称规范化方法及系统
CN109522920A (zh) * 2018-09-18 2019-03-26 义语智能科技（上海）有限公司 基于结合语义特征的同义判别模型的训练方法及设备
CN109543600A (zh) * 2018-11-21 2019-03-29 成都信息工程大学 一种实现可行驶区域检测方法及系统和应用
CN109685056A (zh) * 2019-01-04 2019-04-26 达而观信息科技（上海）有限公司 获取文档信息的方法及装置
CN109710922A (zh) * 2018-12-06 2019-05-03 深港产学研基地产业发展中心 文本识别方法、装置、计算机设备和存储介质
CN109710927A (zh) * 2018-12-12 2019-05-03 东软集团股份有限公司 命名实体的识别方法、装置、可读存储介质及电子设备
CN109710918A (zh) * 2018-11-26 2019-05-03 平安科技（深圳）有限公司 舆情关系识别方法、装置、计算机设备和存储介质
CN109726397A (zh) * 2018-12-27 2019-05-07 网易（杭州）网络有限公司 中文命名实体的标注方法、装置、存储介质和电子设备
CN109740151A (zh) * 2018-12-23 2019-05-10 北京明朝万达科技股份有限公司 基于迭代膨胀卷积神经网络的公安笔录命名实体识别方法
CN109753653A (zh) * 2018-12-25 2019-05-14 金蝶软件（中国）有限公司 实体名称识别方法、装置、计算机设备和存储介质
CN109815952A (zh) * 2019-01-24 2019-05-28 珠海市筑巢科技有限公司 品牌名称识别方法、计算机装置及计算机可读存储介质
CN109858037A (zh) * 2019-02-27 2019-06-07 华侨大学 一种对ocr识别结果进行结构化输出的方法及系统
CN109871545A (zh) * 2019-04-22 2019-06-11 京东方科技集团股份有限公司 命名实体识别方法及装置
CN109885825A (zh) * 2019-01-07 2019-06-14 平安科技（深圳）有限公司 基于注意力机制的命名实体识别方法、装置和计算机设备
CN109902309A (zh) * 2018-12-17 2019-06-18 北京百度网讯科技有限公司 翻译方法、装置、设备和存储介质
CN109902307A (zh) * 2019-03-15 2019-06-18 北京金山数字娱乐科技有限公司 命名实体识别方法、命名实体识别模型的训练方法及装置
CN109933796A (zh) * 2019-03-19 2019-06-25 厦门商集网络科技有限责任公司 一种公告文本关键信息提取方法及设备
CN109933801A (zh) * 2019-03-25 2019-06-25 北京理工大学 基于预测位置注意力的双向lstm命名实体识别方法
CN109960728A (zh) * 2019-03-11 2019-07-02 北京市科学技术情报研究所(北京市科学技术信息中心) 一种开放域会议信息命名实体识别方法及系统
CN109977402A (zh) * 2019-03-11 2019-07-05 北京明略软件系统有限公司 一种命名实体识别方法及系统
CN110008469A (zh) * 2019-03-19 2019-07-12 桂林电子科技大学 一种多层次命名实体识别方法
CN110008472A (zh) * 2019-03-29 2019-07-12 北京明略软件系统有限公司 一种实体抽取的方法、装置、设备和计算机可读存储介质
CN110046806A (zh) * 2019-03-29 2019-07-23 阿里巴巴集团控股有限公司 用于客服派单的方法、装置和计算设备
CN110110086A (zh) * 2019-05-13 2019-08-09 湖南星汉数智科技有限公司 一种中文语义角色标注方法、装置、计算机装置及计算机可读存储介质
CN110147532A (zh) * 2019-01-24 2019-08-20 腾讯科技（深圳）有限公司 编码方法、装置、设备及存储介质
CN110147551A (zh) * 2019-05-14 2019-08-20 腾讯科技（深圳）有限公司 多类别实体识别模型训练、实体识别方法、服务器及终端
CN110188200A (zh) * 2019-05-27 2019-08-30 哈尔滨工程大学 一种使用社交上下文特征的深度微博情感分析方法
CN110210017A (zh) * 2019-04-29 2019-09-06 厦门一品威客网络科技股份有限公司 一种自动命名方法、装置、计算机设备及存储介质
CN110222343A (zh) * 2019-06-13 2019-09-10 电子科技大学 一种中药种植资源命名实体识别方法
CN110222330A (zh) * 2019-04-26 2019-09-10 平安科技（深圳）有限公司 语义识别方法及装置、存储介质、计算机设备
CN110263338A (zh) * 2019-06-18 2019-09-20 北京明略软件系统有限公司 替换实体名称方法、装置、存储介质及电子装置
CN110287479A (zh) * 2019-05-20 2019-09-27 平安科技（深圳）有限公司 命名实体识别方法、电子装置及存储介质
CN110298019A (zh) * 2019-05-20 2019-10-01 平安科技（深圳）有限公司 命名实体识别方法、装置、设备及计算机可读存储介质
CN110298044A (zh) * 2019-07-09 2019-10-01 广东工业大学 一种实体关系识别方法
CN110414229A (zh) * 2019-03-29 2019-11-05 腾讯科技（深圳）有限公司 操作命令检测方法、装置、计算机设备及存储介质
CN110489727A (zh) * 2019-07-12 2019-11-22 深圳追一科技有限公司 人名识别方法及相关装置
CN110516231A (zh) * 2019-07-12 2019-11-29 北京邮电大学 基于注意力机制的膨胀卷积实体名识别方法
CN110633474A (zh) * 2019-09-26 2019-12-31 北京声智科技有限公司 一种数学算式识别方法、装置、设备及可读存储介质
CN110688854A (zh) * 2019-09-02 2020-01-14 平安科技（深圳）有限公司 命名实体识别方法、装置及计算机可读存储介质
CN110705294A (zh) * 2019-09-11 2020-01-17 苏宁云计算有限公司 命名实体识别模型训练方法、命名实体识别方法及装置
CN110705302A (zh) * 2019-10-11 2020-01-17 掌阅科技股份有限公司 命名实体的识别方法、电子设备及计算机存储介质
CN110716991A (zh) * 2019-10-11 2020-01-21 掌阅科技股份有限公司 基于电子书的实体关联信息的展示方法及电子设备
CN110738054A (zh) * 2019-10-14 2020-01-31 携程计算机技术（上海）有限公司 识别邮件中酒店信息的方法、系统、电子设备及存储介质
CN110738051A (zh) * 2019-09-17 2020-01-31 北京三快在线科技有限公司 菜名实体识别方法、装置、电子设备及存储介质
CN110750992A (zh) * 2019-10-09 2020-02-04 吉林大学 命名实体识别方法、装置、电子设备及介质
CN110782871A (zh) * 2019-10-30 2020-02-11 百度在线网络技术（北京）有限公司 一种韵律停顿预测方法、装置以及电子设备
CN110782002A (zh) * 2019-09-12 2020-02-11 成都四方伟业软件股份有限公司 一种lstm神经网络训练方法及装置
CN110781682A (zh) * 2019-10-23 2020-02-11 腾讯科技（深圳）有限公司 命名实体识别模型训练方法、识别方法、装置及电子设备
CN110795940A (zh) * 2019-10-26 2020-02-14 创新工场(广州)人工智能研究有限公司 一种命名实体识别方法、系统及电子设备
CN110826330A (zh) * 2019-10-12 2020-02-21 上海数禾信息科技有限公司 人名识别方法及装置、计算机设备及可读存储介质
CN110889287A (zh) * 2019-11-08 2020-03-17 创新工场(广州)人工智能研究有限公司 一种用于命名实体识别的方法与装置
CN110929026A (zh) * 2018-09-19 2020-03-27 阿里巴巴集团控股有限公司 一种异常文本识别方法、装置、计算设备及介质
WO2020073673A1 (zh) * 2018-10-11 2020-04-16 平安科技（深圳）有限公司 一种文本分析方法及终端
CN111026851A (zh) * 2019-10-18 2020-04-17 平安科技（深圳）有限公司 模型预测能力优化方法、装置、设备及可读存储介质
CN111061840A (zh) * 2019-12-18 2020-04-24 腾讯音乐娱乐科技（深圳）有限公司 数据识别方法、装置及计算机可读存储介质
CN111079437A (zh) * 2019-12-20 2020-04-28 深圳前海达闼云端智能科技有限公司 一种实体识别方法、电子设备及存储介质
CN111126069A (zh) * 2019-12-30 2020-05-08 华南理工大学 一种基于视觉对象引导的社交媒体短文本命名实体识别方法
CN111159377A (zh) * 2019-12-30 2020-05-15 深圳追一科技有限公司 属性召回模型训练方法、装置、电子设备以及存储介质
CN111191459A (zh) * 2019-12-25 2020-05-22 医渡云（北京）技术有限公司 一种文本处理方法、装置、可读介质及电子设备
CN111209738A (zh) * 2019-12-31 2020-05-29 浙江大学 一种联合文本分类的多任务命名实体识别方法
CN111275038A (zh) * 2020-01-17 2020-06-12 平安医疗健康管理股份有限公司 图像文本识别方法、装置、计算机设备及计算机存储介质
CN111291566A (zh) * 2020-01-21 2020-06-16 北京明略软件系统有限公司 一种事件主体识别方法、装置、存储介质
CN111310456A (zh) * 2020-02-13 2020-06-19 支付宝(杭州)信息技术有限公司 一种实体名称匹配方法、装置及设备
CN111339760A (zh) * 2018-12-18 2020-06-26 北京京东尚科信息技术有限公司 词法分析模型的训练方法、装置、电子设备、存储介质
CN111353308A (zh) * 2018-12-20 2020-06-30 北京深知无限人工智能研究院有限公司 命名实体识别方法、装置、服务器及存储介质
CN111368541A (zh) * 2018-12-06 2020-07-03 北京搜狗科技发展有限公司 命名实体识别方法及装置
CN111368564A (zh) * 2019-04-17 2020-07-03 腾讯科技（深圳）有限公司 文本处理方法、装置、计算机可读存储介质和计算机设备
CN111382569A (zh) * 2018-12-27 2020-07-07 深圳市优必选科技有限公司 对话语料中实体的识别方法、装置和计算机设备
CN111414757A (zh) * 2019-01-04 2020-07-14 阿里巴巴集团控股有限公司 一种文本识别方法及装置
CN111444720A (zh) * 2020-03-30 2020-07-24 华南理工大学 一种英文文本的命名实体识别方法
CN111444715A (zh) * 2020-03-24 2020-07-24 腾讯科技（深圳）有限公司 实体关系识别方法、装置、计算机设备和存储介质
CN111476023A (zh) * 2020-05-22 2020-07-31 北京明朝万达科技股份有限公司 识别实体关系的方法及装置
CN111597814A (zh) * 2020-05-22 2020-08-28 北京慧闻科技(集团)有限公司 一种人机交互命名实体识别方法、装置、设备及存储介质
CN111651989A (zh) * 2020-04-13 2020-09-11 上海明略人工智能(集团)有限公司 命名实体识别方法和装置、存储介质及电子装置
CN111737999A (zh) * 2020-06-24 2020-10-02 深圳前海微众银行股份有限公司 一种序列标注方法、装置、设备及可读存储介质
CN111753600A (zh) * 2019-03-29 2020-10-09 北京市商汤科技开发有限公司 文本识别方法、装置及存储介质
WO2020215694A1 (zh) * 2019-04-22 2020-10-29 平安科技（深圳）有限公司 一种基于深度学习的中文分词方法、装置、存储介质及计算机设备
CN111859964A (zh) * 2019-04-29 2020-10-30 普天信息技术有限公司 一种语句中命名实体的识别方法及装置
CN111859963A (zh) * 2019-04-08 2020-10-30 中移(苏州)软件技术有限公司 命名实体识别方法、设备、装置和计算机可读存储介质
CN111950279A (zh) * 2019-05-17 2020-11-17 百度在线网络技术（北京）有限公司 实体关系的处理方法、装置、设备及计算机可读存储介质
CN112016313A (zh) * 2020-09-08 2020-12-01 迪爱斯信息技术股份有限公司 口语化要素识别方法及装置、警情分析系统
CN112115721A (zh) * 2020-09-28 2020-12-22 青岛海信网络科技股份有限公司 一种命名实体识别方法及装置
WO2020253052A1 (zh) * 2019-06-18 2020-12-24 平安普惠企业管理有限公司 一种基于自然语义理解的行为识别方法及相关设备
CN112183076A (zh) * 2020-08-28 2021-01-05 北京望石智慧科技有限公司 一种物质名称提取方法、装置及存储介质
CN112417874A (zh) * 2020-11-16 2021-02-26 珠海格力电器股份有限公司 命名实体的识别方法和装置、存储介质、电子装置
CN112487813A (zh) * 2020-11-24 2021-03-12 中移（杭州）信息技术有限公司 命名实体识别方法及系统、电子设备及存储介质
CN112507126A (zh) * 2020-12-07 2021-03-16 厦门渊亭信息科技有限公司 一种基于循环神经网络的实体链接装置和方法
CN112528659A (zh) * 2020-11-30 2021-03-19 京东方科技集团股份有限公司 实体识别方法、实体识别装置、电子设备和存储介质
CN112699684A (zh) * 2020-12-30 2021-04-23 北京明朝万达科技股份有限公司 命名实体识别方法和装置、计算机可读存储介质及处理器
CN112800769A (zh) * 2021-02-20 2021-05-14 深圳追一科技有限公司 命名实体识别方法、装置、计算机设备和存储介质
CN112861533A (zh) * 2019-11-26 2021-05-28 阿里巴巴集团控股有限公司 实体词识别方法及装置
CN112906381A (zh) * 2021-02-02 2021-06-04 北京有竹居网络技术有限公司 对话归属的识别方法、装置、可读介质和电子设备
CN112925887A (zh) * 2019-12-05 2021-06-08 北京四维图新科技股份有限公司 交互方法和装置、电子设备、存储介质、文本识别方法
CN112989829A (zh) * 2021-02-10 2021-06-18 海尔数字科技（上海）有限公司 一种命名实体识别方法、装置、设备及存储介质
CN112989054A (zh) * 2021-04-26 2021-06-18 腾讯科技（深圳）有限公司 一种文本处理方法和装置
CN113011186A (zh) * 2021-01-25 2021-06-22 腾讯科技（深圳）有限公司 命名实体识别方法、装置、设备及计算机可读存储介质
CN113076751A (zh) * 2021-02-26 2021-07-06 北京工业大学 命名实体识别方法及系统、电子设备和存储介质
CN113362540A (zh) * 2021-06-11 2021-09-07 江苏苏云信息科技有限公司 基于多模交互的交通票务处理装置、系统及方法
CN113407672A (zh) * 2021-06-22 2021-09-17 珠海格力电器股份有限公司 一种命名实体识别方法、装置、存储介质及电子设备
CN113408507A (zh) * 2021-08-20 2021-09-17 北京国电通网络技术有限公司 基于履历文件的命名实体识别方法、装置和电子设备
CN113627187A (zh) * 2021-08-12 2021-11-09 平安国际智慧城市科技股份有限公司 命名实体识别方法、装置、电子设备及可读存储介质
CN113627139A (zh) * 2021-08-11 2021-11-09 平安国际智慧城市科技股份有限公司 企业申报表生成方法、装置、设备及存储介质
CN113705234A (zh) * 2021-03-19 2021-11-26 腾讯科技（深圳）有限公司 命名实体识别方法、装置、计算机可读介质及电子设备
CN113723102A (zh) * 2021-06-30 2021-11-30 平安国际智慧城市科技股份有限公司 命名实体识别方法、装置、电子设备及存储介质
CN113761923A (zh) * 2020-10-26 2021-12-07 北京沃东天骏信息技术有限公司 命名实体识别方法、装置、电子设备及存储介质
CN113761140A (zh) * 2020-08-13 2021-12-07 北京沃东天骏信息技术有限公司 一种答案排序方法和装置
CN113761142A (zh) * 2020-09-25 2021-12-07 北京沃东天骏信息技术有限公司 一种生成答案摘要的方法和装置
CN113761878A (zh) * 2020-07-02 2021-12-07 北京沃东天骏信息技术有限公司 用于输出信息的方法和装置
CN113792127A (zh) * 2021-09-15 2021-12-14 平安国际智慧城市科技股份有限公司 基于大数据的法规识别方法、装置、电子设备及介质
CN113919338A (zh) * 2020-07-09 2022-01-11 腾讯科技（深圳）有限公司 处理文本数据的方法及设备
CN114330343A (zh) * 2021-12-13 2022-04-12 广州大学 词性感知嵌套命名实体识别方法、系统、设备和存储介质
CN114816577A (zh) * 2022-05-11 2022-07-29 平安普惠企业管理有限公司 配置业务平台功能的方法、装置、电子设备及介质
EP4027267A4 (en) * 2019-12-30 2022-11-02 Huawei Technologies Co., Ltd. METHOD, APPARATUS AND SYSTEM FOR IDENTIFYING TEXT IN AN IMAGE
CN111401064B (zh) * 2019-01-02 2024-04-19 中国移动通信有限公司研究院 一种命名实体识别方法、装置及终端设备

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033879A (zh) * 2009-09-27 2011-04-27 腾讯科技（深圳）有限公司 一种中文人名识别的方法和装置
CN102937960A (zh) * 2012-09-06 2013-02-20 北京邮电大学 突发事件热点话题的识别与评估装置和方法
CN106055538A (zh) * 2016-05-26 2016-10-26 达而观信息科技（上海）有限公司 主题模型和语义分析相结合的文本标签自动抽取方法
EP3128439A1 (en) * 2015-08-07 2017-02-08 Google, Inc. Text classification and transformation based on author
CN106557462A (zh) * 2016-11-02 2017-04-05 数库（上海）科技有限公司 命名实体识别方法和系统
CN106569998A (zh) * 2016-10-27 2017-04-19 浙江大学 一种基于Bi‑LSTM、CNN和CRF的文本命名实体识别方法
CN106997382A (zh) * 2017-03-22 2017-08-01 山东大学 基于大数据的创新创意标签自动标注方法及系统
CN107133220A (zh) * 2017-06-07 2017-09-05 东南大学 一种地理学科领域命名实体识别方法
US20170278514A1 (en) * 2016-03-23 2017-09-28 Amazon Technologies, Inc. Fine-grained natural language understanding
CN107562752A (zh) * 2016-06-30 2018-01-09 富士通株式会社 对实体词的语义关系进行分类的方法、装置和电子设备
CN107644014A (zh) * 2017-09-25 2018-01-30 南京安链数据科技有限公司 一种基于双向lstm和crf的命名实体识别方法
CN107679234A (zh) * 2017-10-24 2018-02-09 上海携程国际旅行社有限公司 客服信息提供方法、装置、电子设备、存储介质
CN107797992A (zh) * 2017-11-10 2018-03-13 北京百分点信息科技有限公司 命名实体识别方法及装置
US20180082197A1 (en) * 2016-09-22 2018-03-22 nference, inc. Systems, methods, and computer readable media for visualization of semantic information and inference of temporal signals indicating salient associations between life science entities
CN107885721A (zh) * 2017-10-12 2018-04-06 北京知道未来信息技术有限公司 一种基于lstm的命名实体识别方法

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033879A (zh) * 2009-09-27 2011-04-27 腾讯科技（深圳）有限公司 一种中文人名识别的方法和装置
CN102937960A (zh) * 2012-09-06 2013-02-20 北京邮电大学 突发事件热点话题的识别与评估装置和方法
EP3128439A1 (en) * 2015-08-07 2017-02-08 Google, Inc. Text classification and transformation based on author
US20170278514A1 (en) * 2016-03-23 2017-09-28 Amazon Technologies, Inc. Fine-grained natural language understanding
CN106055538A (zh) * 2016-05-26 2016-10-26 达而观信息科技（上海）有限公司 主题模型和语义分析相结合的文本标签自动抽取方法
CN107562752A (zh) * 2016-06-30 2018-01-09 富士通株式会社 对实体词的语义关系进行分类的方法、装置和电子设备
US20180082197A1 (en) * 2016-09-22 2018-03-22 nference, inc. Systems, methods, and computer readable media for visualization of semantic information and inference of temporal signals indicating salient associations between life science entities
CN106569998A (zh) * 2016-10-27 2017-04-19 浙江大学 一种基于Bi‑LSTM、CNN和CRF的文本命名实体识别方法
CN106557462A (zh) * 2016-11-02 2017-04-05 数库（上海）科技有限公司 命名实体识别方法和系统
CN106997382A (zh) * 2017-03-22 2017-08-01 山东大学 基于大数据的创新创意标签自动标注方法及系统
CN107133220A (zh) * 2017-06-07 2017-09-05 东南大学 一种地理学科领域命名实体识别方法
CN107644014A (zh) * 2017-09-25 2018-01-30 南京安链数据科技有限公司 一种基于双向lstm和crf的命名实体识别方法
CN107885721A (zh) * 2017-10-12 2018-04-06 北京知道未来信息技术有限公司 一种基于lstm的命名实体识别方法
CN107679234A (zh) * 2017-10-24 2018-02-09 上海携程国际旅行社有限公司 客服信息提供方法、装置、电子设备、存储介质
CN107797992A (zh) * 2017-11-10 2018-03-13 北京百分点信息科技有限公司 命名实体识别方法及装置

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
BOJANOWSKI PIOTR 等: "Enriching word vectors with subword information", 《TRANSACTIONS OF THE ASSOCIATION FOR COMPUTATIONAL LINGUISTICS》 *
XIANG YANG 等: "Answer selection in community question answering via attentive neural networks", 《IEEE SIGNAL PROCESSING LETTERS》 *
江大鹏: "基于词向量的短文本分类方法研究", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 *
高俊平 等: "面向维基百科的领域知识演化关系抽取", 《计算机学报》 *

Cited By (177)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109522920A (zh) * 2018-09-18 2019-03-26 义语智能科技（上海）有限公司 基于结合语义特征的同义判别模型的训练方法及设备
CN110929026B (zh) * 2018-09-19 2023-04-25 阿里巴巴集团控股有限公司 一种异常文本识别方法、装置、计算设备及介质
CN110929026A (zh) * 2018-09-19 2020-03-27 阿里巴巴集团控股有限公司 一种异常文本识别方法、装置、计算设备及介质
CN109359297A (zh) * 2018-09-20 2019-02-19 清华大学 一种关系抽取方法及系统
CN109359297B (zh) * 2018-09-20 2020-06-09 清华大学 一种关系抽取方法及系统
CN109460450A (zh) * 2018-09-27 2019-03-12 清华大学 对话状态跟踪方法、装置、计算机设备和存储介质
WO2020073673A1 (zh) * 2018-10-11 2020-04-16 平安科技（深圳）有限公司 一种文本分析方法及终端
CN109460434A (zh) * 2018-10-25 2019-03-12 北京知道创宇信息技术有限公司 数据提取模型建立方法及装置
CN109471895A (zh) * 2018-10-29 2019-03-15 清华大学 电子病历表型抽取、表型名称规范化方法及系统
CN109446530A (zh) * 2018-11-03 2019-03-08 上海犀语科技有限公司 一种基于lstm模型由文本中抽取信息的方法及装置
CN109543600A (zh) * 2018-11-21 2019-03-29 成都信息工程大学 一种实现可行驶区域检测方法及系统和应用
CN109710918A (zh) * 2018-11-26 2019-05-03 平安科技（深圳）有限公司 舆情关系识别方法、装置、计算机设备和存储介质
CN109284400B (zh) * 2018-11-28 2020-10-23 电子科技大学 一种基于Lattice LSTM和语言模型的命名实体识别方法
CN109284400A (zh) * 2018-11-28 2019-01-29 电子科技大学 一种基于Lattice LSTM和语言模型的命名实体识别方法
CN111368541A (zh) * 2018-12-06 2020-07-03 北京搜狗科技发展有限公司 命名实体识别方法及装置
CN109710922A (zh) * 2018-12-06 2019-05-03 深港产学研基地产业发展中心 文本识别方法、装置、计算机设备和存储介质
CN111368541B (zh) * 2018-12-06 2024-06-11 北京搜狗科技发展有限公司 命名实体识别方法及装置
CN109710927A (zh) * 2018-12-12 2019-05-03 东软集团股份有限公司 命名实体的识别方法、装置、可读存储介质及电子设备
CN109902309B (zh) * 2018-12-17 2023-06-02 北京百度网讯科技有限公司 翻译方法、装置、设备和存储介质
CN109902309A (zh) * 2018-12-17 2019-06-18 北京百度网讯科技有限公司 翻译方法、装置、设备和存储介质
CN111339760A (zh) * 2018-12-18 2020-06-26 北京京东尚科信息技术有限公司 词法分析模型的训练方法、装置、电子设备、存储介质
CN111353308A (zh) * 2018-12-20 2020-06-30 北京深知无限人工智能研究院有限公司 命名实体识别方法、装置、服务器及存储介质
CN109740151A (zh) * 2018-12-23 2019-05-10 北京明朝万达科技股份有限公司 基于迭代膨胀卷积神经网络的公安笔录命名实体识别方法
CN109753653A (zh) * 2018-12-25 2019-05-14 金蝶软件（中国）有限公司 实体名称识别方法、装置、计算机设备和存储介质
CN111382569A (zh) * 2018-12-27 2020-07-07 深圳市优必选科技有限公司 对话语料中实体的识别方法、装置和计算机设备
CN109726397B (zh) * 2018-12-27 2024-02-02 网易（杭州）网络有限公司 中文命名实体的标注方法、装置、存储介质和电子设备
CN111382569B (zh) * 2018-12-27 2024-05-03 深圳市优必选科技有限公司 对话语料中实体的识别方法、装置和计算机设备
CN109726397A (zh) * 2018-12-27 2019-05-07 网易（杭州）网络有限公司 中文命名实体的标注方法、装置、存储介质和电子设备
CN111401064B (zh) * 2019-01-02 2024-04-19 中国移动通信有限公司研究院 一种命名实体识别方法、装置及终端设备
CN109685056A (zh) * 2019-01-04 2019-04-26 达而观信息科技（上海）有限公司 获取文档信息的方法及装置
CN109685056B (zh) * 2019-01-04 2023-04-04 达而观信息科技（上海）有限公司 获取文档信息的方法及装置
CN111414757B (zh) * 2019-01-04 2023-06-20 阿里巴巴集团控股有限公司 一种文本识别方法及装置
CN111414757A (zh) * 2019-01-04 2020-07-14 阿里巴巴集团控股有限公司 一种文本识别方法及装置
WO2020143163A1 (zh) * 2019-01-07 2020-07-16 平安科技（深圳）有限公司 基于注意力机制的命名实体识别方法、装置和计算机设备
CN109885825A (zh) * 2019-01-07 2019-06-14 平安科技（深圳）有限公司 基于注意力机制的命名实体识别方法、装置和计算机设备
US11995406B2 (en) 2019-01-24 2024-05-28 Tencent Technology (Shenzhen) Company Limited Encoding method, apparatus, and device, and storage medium
CN109815952A (zh) * 2019-01-24 2019-05-28 珠海市筑巢科技有限公司 品牌名称识别方法、计算机装置及计算机可读存储介质
CN110147532A (zh) * 2019-01-24 2019-08-20 腾讯科技（深圳）有限公司 编码方法、装置、设备及存储介质
CN110147532B (zh) * 2019-01-24 2023-08-25 腾讯科技（深圳）有限公司 编码方法、装置、设备及存储介质
CN109858037A (zh) * 2019-02-27 2019-06-07 华侨大学 一种对ocr识别结果进行结构化输出的方法及系统
CN109960728A (zh) * 2019-03-11 2019-07-02 北京市科学技术情报研究所(北京市科学技术信息中心) 一种开放域会议信息命名实体识别方法及系统
CN109977402B (zh) * 2019-03-11 2022-11-11 北京明略软件系统有限公司 一种命名实体识别方法及系统
CN109977402A (zh) * 2019-03-11 2019-07-05 北京明略软件系统有限公司 一种命名实体识别方法及系统
CN109902307B (zh) * 2019-03-15 2023-06-02 北京金山数字娱乐科技有限公司 命名实体识别方法、命名实体识别模型的训练方法及装置
CN109902307A (zh) * 2019-03-15 2019-06-18 北京金山数字娱乐科技有限公司 命名实体识别方法、命名实体识别模型的训练方法及装置
CN109933796B (zh) * 2019-03-19 2022-05-24 厦门商集网络科技有限责任公司 一种公告文本关键信息提取方法及设备
CN109933796A (zh) * 2019-03-19 2019-06-25 厦门商集网络科技有限责任公司 一种公告文本关键信息提取方法及设备
CN110008469B (zh) * 2019-03-19 2022-06-07 桂林电子科技大学 一种多层次命名实体识别方法
CN110008469A (zh) * 2019-03-19 2019-07-12 桂林电子科技大学 一种多层次命名实体识别方法
CN109933801A (zh) * 2019-03-25 2019-06-25 北京理工大学 基于预测位置注意力的双向lstm命名实体识别方法
CN110414229B (zh) * 2019-03-29 2023-12-12 腾讯科技（深圳）有限公司 操作命令检测方法、装置、计算机设备及存储介质
CN110046806B (zh) * 2019-03-29 2022-12-09 创新先进技术有限公司 用于客服派单的方法、装置和计算设备
CN111753600A (zh) * 2019-03-29 2020-10-09 北京市商汤科技开发有限公司 文本识别方法、装置及存储介质
CN110008472B (zh) * 2019-03-29 2022-11-11 北京明略软件系统有限公司 一种实体抽取的方法、装置、设备和计算机可读存储介质
CN111753600B (zh) * 2019-03-29 2024-05-17 北京市商汤科技开发有限公司 文本识别方法、装置及存储介质
CN110046806A (zh) * 2019-03-29 2019-07-23 阿里巴巴集团控股有限公司 用于客服派单的方法、装置和计算设备
CN110008472A (zh) * 2019-03-29 2019-07-12 北京明略软件系统有限公司 一种实体抽取的方法、装置、设备和计算机可读存储介质
CN110414229A (zh) * 2019-03-29 2019-11-05 腾讯科技（深圳）有限公司 操作命令检测方法、装置、计算机设备及存储介质
CN111859963B (zh) * 2019-04-08 2024-06-11 中移(苏州)软件技术有限公司 命名实体识别方法、设备、装置和计算机可读存储介质
CN111859963A (zh) * 2019-04-08 2020-10-30 中移(苏州)软件技术有限公司 命名实体识别方法、设备、装置和计算机可读存储介质
CN111368564A (zh) * 2019-04-17 2020-07-03 腾讯科技（深圳）有限公司 文本处理方法、装置、计算机可读存储介质和计算机设备
CN109871545B (zh) * 2019-04-22 2022-08-05 京东方科技集团股份有限公司 命名实体识别方法及装置
WO2020215694A1 (zh) * 2019-04-22 2020-10-29 平安科技（深圳）有限公司 一种基于深度学习的中文分词方法、装置、存储介质及计算机设备
US11574124B2 (en) 2019-04-22 2023-02-07 Boe Technology Group Co., Ltd. Method and apparatus of recognizing named entity
CN109871545A (zh) * 2019-04-22 2019-06-11 京东方科技集团股份有限公司 命名实体识别方法及装置
CN110222330B (zh) * 2019-04-26 2024-01-30 平安科技（深圳）有限公司 语义识别方法及装置、存储介质、计算机设备
CN110222330A (zh) * 2019-04-26 2019-09-10 平安科技（深圳）有限公司 语义识别方法及装置、存储介质、计算机设备
CN111859964A (zh) * 2019-04-29 2020-10-30 普天信息技术有限公司 一种语句中命名实体的识别方法及装置
CN110210017A (zh) * 2019-04-29 2019-09-06 厦门一品威客网络科技股份有限公司 一种自动命名方法、装置、计算机设备及存储介质
CN110110086A (zh) * 2019-05-13 2019-08-09 湖南星汉数智科技有限公司 一种中文语义角色标注方法、装置、计算机装置及计算机可读存储介质
CN110147551A (zh) * 2019-05-14 2019-08-20 腾讯科技（深圳）有限公司 多类别实体识别模型训练、实体识别方法、服务器及终端
CN110147551B (zh) * 2019-05-14 2023-07-11 腾讯科技（深圳）有限公司 多类别实体识别模型训练、实体识别方法、服务器及终端
CN111950279A (zh) * 2019-05-17 2020-11-17 百度在线网络技术（北京）有限公司 实体关系的处理方法、装置、设备及计算机可读存储介质
CN110298019B (zh) * 2019-05-20 2023-04-18 平安科技（深圳）有限公司 命名实体识别方法、装置、设备及计算机可读存储介质
WO2020232861A1 (zh) * 2019-05-20 2020-11-26 平安科技（深圳）有限公司 命名实体识别方法、电子装置及存储介质
CN110287479A (zh) * 2019-05-20 2019-09-27 平安科技（深圳）有限公司 命名实体识别方法、电子装置及存储介质
CN110298019A (zh) * 2019-05-20 2019-10-01 平安科技（深圳）有限公司 命名实体识别方法、装置、设备及计算机可读存储介质
CN110188200A (zh) * 2019-05-27 2019-08-30 哈尔滨工程大学 一种使用社交上下文特征的深度微博情感分析方法
CN110222343A (zh) * 2019-06-13 2019-09-10 电子科技大学 一种中药种植资源命名实体识别方法
CN110263338A (zh) * 2019-06-18 2019-09-20 北京明略软件系统有限公司 替换实体名称方法、装置、存储介质及电子装置
WO2020253052A1 (zh) * 2019-06-18 2020-12-24 平安普惠企业管理有限公司 一种基于自然语义理解的行为识别方法及相关设备
CN110298044A (zh) * 2019-07-09 2019-10-01 广东工业大学 一种实体关系识别方法
CN110298044B (zh) * 2019-07-09 2023-04-18 广东工业大学 一种实体关系识别方法
CN110489727A (zh) * 2019-07-12 2019-11-22 深圳追一科技有限公司 人名识别方法及相关装置
CN110516231A (zh) * 2019-07-12 2019-11-29 北京邮电大学 基于注意力机制的膨胀卷积实体名识别方法
CN110489727B (zh) * 2019-07-12 2023-07-07 深圳追一科技有限公司 人名识别方法及相关装置
CN110688854A (zh) * 2019-09-02 2020-01-14 平安科技（深圳）有限公司 命名实体识别方法、装置及计算机可读存储介质
CN110705294B (zh) * 2019-09-11 2023-06-23 苏宁云计算有限公司 命名实体识别模型训练方法、命名实体识别方法及装置
CN110705294A (zh) * 2019-09-11 2020-01-17 苏宁云计算有限公司 命名实体识别模型训练方法、命名实体识别方法及装置
CN110782002B (zh) * 2019-09-12 2022-04-05 成都四方伟业软件股份有限公司 一种lstm神经网络训练方法及装置
CN110782002A (zh) * 2019-09-12 2020-02-11 成都四方伟业软件股份有限公司 一种lstm神经网络训练方法及装置
CN110738051A (zh) * 2019-09-17 2020-01-31 北京三快在线科技有限公司 菜名实体识别方法、装置、电子设备及存储介质
CN110633474A (zh) * 2019-09-26 2019-12-31 北京声智科技有限公司 一种数学算式识别方法、装置、设备及可读存储介质
CN110750992A (zh) * 2019-10-09 2020-02-04 吉林大学 命名实体识别方法、装置、电子设备及介质
CN110705302B (zh) * 2019-10-11 2023-12-12 掌阅科技股份有限公司 命名实体的识别方法、电子设备及计算机存储介质
CN110716991B (zh) * 2019-10-11 2020-10-27 掌阅科技股份有限公司 基于电子书的实体关联信息的展示方法及电子设备
CN110705302A (zh) * 2019-10-11 2020-01-17 掌阅科技股份有限公司 命名实体的识别方法、电子设备及计算机存储介质
WO2021068932A1 (zh) * 2019-10-11 2021-04-15 掌阅科技股份有限公司 基于电子书的实体关联信息的展示方法及电子设备
CN110716991A (zh) * 2019-10-11 2020-01-21 掌阅科技股份有限公司 基于电子书的实体关联信息的展示方法及电子设备
CN110826330B (zh) * 2019-10-12 2023-11-07 上海数禾信息科技有限公司 人名识别方法及装置、计算机设备及可读存储介质
CN110826330A (zh) * 2019-10-12 2020-02-21 上海数禾信息科技有限公司 人名识别方法及装置、计算机设备及可读存储介质
CN110738054A (zh) * 2019-10-14 2020-01-31 携程计算机技术（上海）有限公司 识别邮件中酒店信息的方法、系统、电子设备及存储介质
CN111026851B (zh) * 2019-10-18 2023-09-15 平安科技（深圳）有限公司 模型预测能力优化方法、装置、设备及可读存储介质
CN111026851A (zh) * 2019-10-18 2020-04-17 平安科技（深圳）有限公司 模型预测能力优化方法、装置、设备及可读存储介质
CN110781682B (zh) * 2019-10-23 2023-04-07 腾讯科技（深圳）有限公司 命名实体识别模型训练方法、识别方法、装置及电子设备
CN110781682A (zh) * 2019-10-23 2020-02-11 腾讯科技（深圳）有限公司 命名实体识别模型训练方法、识别方法、装置及电子设备
CN110795940B (zh) * 2019-10-26 2024-01-12 创新工场(广州)人工智能研究有限公司 一种命名实体识别方法、系统及电子设备
CN110795940A (zh) * 2019-10-26 2020-02-14 创新工场(广州)人工智能研究有限公司 一种命名实体识别方法、系统及电子设备
US11200382B2 (en) 2019-10-30 2021-12-14 Baidu Online Network Technology (Beijing) Co., Ltd. Prosodic pause prediction method, prosodic pause prediction device and electronic device
CN110782871B (zh) * 2019-10-30 2020-10-30 百度在线网络技术（北京）有限公司 一种韵律停顿预测方法、装置以及电子设备
CN110782871A (zh) * 2019-10-30 2020-02-11 百度在线网络技术（北京）有限公司 一种韵律停顿预测方法、装置以及电子设备
CN110889287A (zh) * 2019-11-08 2020-03-17 创新工场(广州)人工智能研究有限公司 一种用于命名实体识别的方法与装置
CN112861533A (zh) * 2019-11-26 2021-05-28 阿里巴巴集团控股有限公司 实体词识别方法及装置
CN112925887A (zh) * 2019-12-05 2021-06-08 北京四维图新科技股份有限公司 交互方法和装置、电子设备、存储介质、文本识别方法
CN111061840A (zh) * 2019-12-18 2020-04-24 腾讯音乐娱乐科技（深圳）有限公司 数据识别方法、装置及计算机可读存储介质
CN111079437A (zh) * 2019-12-20 2020-04-28 深圳前海达闼云端智能科技有限公司 一种实体识别方法、电子设备及存储介质
CN111191459B (zh) * 2019-12-25 2023-12-12 医渡云（北京）技术有限公司 一种文本处理方法、装置、可读介质及电子设备
CN111191459A (zh) * 2019-12-25 2020-05-22 医渡云（北京）技术有限公司 一种文本处理方法、装置、可读介质及电子设备
CN111126069B (zh) * 2019-12-30 2022-03-29 华南理工大学 一种基于视觉对象引导的社交媒体短文本命名实体识别方法
CN111126069A (zh) * 2019-12-30 2020-05-08 华南理工大学 一种基于视觉对象引导的社交媒体短文本命名实体识别方法
CN111159377A (zh) * 2019-12-30 2020-05-15 深圳追一科技有限公司 属性召回模型训练方法、装置、电子设备以及存储介质
EP4027267A4 (en) * 2019-12-30 2022-11-02 Huawei Technologies Co., Ltd. METHOD, APPARATUS AND SYSTEM FOR IDENTIFYING TEXT IN AN IMAGE
CN111209738B (zh) * 2019-12-31 2021-03-26 浙江大学 一种联合文本分类的多任务命名实体识别方法
CN111209738A (zh) * 2019-12-31 2020-05-29 浙江大学 一种联合文本分类的多任务命名实体识别方法
CN111275038A (zh) * 2020-01-17 2020-06-12 平安医疗健康管理股份有限公司 图像文本识别方法、装置、计算机设备及计算机存储介质
CN111291566A (zh) * 2020-01-21 2020-06-16 北京明略软件系统有限公司 一种事件主体识别方法、装置、存储介质
CN111291566B (zh) * 2020-01-21 2023-04-28 北京明略软件系统有限公司 一种事件主体识别方法、装置、存储介质
CN111310456B (zh) * 2020-02-13 2023-06-20 支付宝(杭州)信息技术有限公司 一种实体名称匹配方法、装置及设备
CN111310456A (zh) * 2020-02-13 2020-06-19 支付宝(杭州)信息技术有限公司 一种实体名称匹配方法、装置及设备
CN111444715A (zh) * 2020-03-24 2020-07-24 腾讯科技（深圳）有限公司 实体关系识别方法、装置、计算机设备和存储介质
CN111444720A (zh) * 2020-03-30 2020-07-24 华南理工大学 一种英文文本的命名实体识别方法
CN111651989B (zh) * 2020-04-13 2024-04-02 上海明略人工智能(集团)有限公司 命名实体识别方法和装置、存储介质及电子装置
CN111651989A (zh) * 2020-04-13 2020-09-11 上海明略人工智能(集团)有限公司 命名实体识别方法和装置、存储介质及电子装置
CN111476023B (zh) * 2020-05-22 2023-09-01 北京明朝万达科技股份有限公司 识别实体关系的方法及装置
CN111476023A (zh) * 2020-05-22 2020-07-31 北京明朝万达科技股份有限公司 识别实体关系的方法及装置
CN111597814A (zh) * 2020-05-22 2020-08-28 北京慧闻科技(集团)有限公司 一种人机交互命名实体识别方法、装置、设备及存储介质
CN111597814B (zh) * 2020-05-22 2023-05-26 北京慧闻科技(集团)有限公司 一种人机交互命名实体识别方法、装置、设备及存储介质
CN111737999A (zh) * 2020-06-24 2020-10-02 深圳前海微众银行股份有限公司 一种序列标注方法、装置、设备及可读存储介质
CN113761878A (zh) * 2020-07-02 2021-12-07 北京沃东天骏信息技术有限公司 用于输出信息的方法和装置
CN113919338A (zh) * 2020-07-09 2022-01-11 腾讯科技（深圳）有限公司 处理文本数据的方法及设备
CN113919338B (zh) * 2020-07-09 2024-05-24 腾讯科技（深圳）有限公司 处理文本数据的方法及设备
CN113761140A (zh) * 2020-08-13 2021-12-07 北京沃东天骏信息技术有限公司 一种答案排序方法和装置
CN112183076A (zh) * 2020-08-28 2021-01-05 北京望石智慧科技有限公司 一种物质名称提取方法、装置及存储介质
CN112016313B (zh) * 2020-09-08 2024-02-13 迪爱斯信息技术股份有限公司 口语化要素识别方法及装置、警情分析系统
CN112016313A (zh) * 2020-09-08 2020-12-01 迪爱斯信息技术股份有限公司 口语化要素识别方法及装置、警情分析系统
CN113761142A (zh) * 2020-09-25 2021-12-07 北京沃东天骏信息技术有限公司 一种生成答案摘要的方法和装置
CN112115721B (zh) * 2020-09-28 2024-05-17 青岛海信网络科技股份有限公司 一种命名实体识别方法及装置
CN112115721A (zh) * 2020-09-28 2020-12-22 青岛海信网络科技股份有限公司 一种命名实体识别方法及装置
CN113761923A (zh) * 2020-10-26 2021-12-07 北京沃东天骏信息技术有限公司 命名实体识别方法、装置、电子设备及存储介质
CN112417874A (zh) * 2020-11-16 2021-02-26 珠海格力电器股份有限公司 命名实体的识别方法和装置、存储介质、电子装置
CN112487813A (zh) * 2020-11-24 2021-03-12 中移（杭州）信息技术有限公司 命名实体识别方法及系统、电子设备及存储介质
CN112487813B (zh) * 2020-11-24 2024-05-10 中移（杭州）信息技术有限公司 命名实体识别方法及系统、电子设备及存储介质
CN112528659A (zh) * 2020-11-30 2021-03-19 京东方科技集团股份有限公司 实体识别方法、实体识别装置、电子设备和存储介质
CN112507126A (zh) * 2020-12-07 2021-03-16 厦门渊亭信息科技有限公司 一种基于循环神经网络的实体链接装置和方法
CN112699684A (zh) * 2020-12-30 2021-04-23 北京明朝万达科技股份有限公司 命名实体识别方法和装置、计算机可读存储介质及处理器
CN113011186B (zh) * 2021-01-25 2024-04-26 腾讯科技（深圳）有限公司 命名实体识别方法、装置、设备及计算机可读存储介质
CN113011186A (zh) * 2021-01-25 2021-06-22 腾讯科技（深圳）有限公司 命名实体识别方法、装置、设备及计算机可读存储介质
CN112906381A (zh) * 2021-02-02 2021-06-04 北京有竹居网络技术有限公司 对话归属的识别方法、装置、可读介质和电子设备
CN112906381B (zh) * 2021-02-02 2024-05-28 北京有竹居网络技术有限公司 对话归属的识别方法、装置、可读介质和电子设备
CN112989829A (zh) * 2021-02-10 2021-06-18 海尔数字科技（上海）有限公司 一种命名实体识别方法、装置、设备及存储介质
CN112989829B (zh) * 2021-02-10 2024-03-08 卡奥斯数字科技(上海)有限公司 一种命名实体识别方法、装置、设备及存储介质
CN112800769A (zh) * 2021-02-20 2021-05-14 深圳追一科技有限公司 命名实体识别方法、装置、计算机设备和存储介质
CN113076751A (zh) * 2021-02-26 2021-07-06 北京工业大学 命名实体识别方法及系统、电子设备和存储介质
CN113705234A (zh) * 2021-03-19 2021-11-26 腾讯科技（深圳）有限公司 命名实体识别方法、装置、计算机可读介质及电子设备
CN112989054A (zh) * 2021-04-26 2021-06-18 腾讯科技（深圳）有限公司 一种文本处理方法和装置
CN113362540A (zh) * 2021-06-11 2021-09-07 江苏苏云信息科技有限公司 基于多模交互的交通票务处理装置、系统及方法
CN113407672A (zh) * 2021-06-22 2021-09-17 珠海格力电器股份有限公司 一种命名实体识别方法、装置、存储介质及电子设备
CN113723102B (zh) * 2021-06-30 2024-04-26 平安国际智慧城市科技股份有限公司 命名实体识别方法、装置、电子设备及存储介质
CN113723102A (zh) * 2021-06-30 2021-11-30 平安国际智慧城市科技股份有限公司 命名实体识别方法、装置、电子设备及存储介质
CN113627139A (zh) * 2021-08-11 2021-11-09 平安国际智慧城市科技股份有限公司 企业申报表生成方法、装置、设备及存储介质
CN113627187A (zh) * 2021-08-12 2021-11-09 平安国际智慧城市科技股份有限公司 命名实体识别方法、装置、电子设备及可读存储介质
CN113627187B (zh) * 2021-08-12 2024-09-13 平安国际智慧城市科技股份有限公司 命名实体识别方法、装置、电子设备及可读存储介质
CN113408507A (zh) * 2021-08-20 2021-09-17 北京国电通网络技术有限公司 基于履历文件的命名实体识别方法、装置和电子设备
CN113792127B (zh) * 2021-09-15 2023-12-26 平安国际智慧城市科技股份有限公司 基于大数据的法规识别方法、装置、电子设备及介质
CN113792127A (zh) * 2021-09-15 2021-12-14 平安国际智慧城市科技股份有限公司 基于大数据的法规识别方法、装置、电子设备及介质
CN114330343A (zh) * 2021-12-13 2022-04-12 广州大学 词性感知嵌套命名实体识别方法、系统、设备和存储介质
CN114816577A (zh) * 2022-05-11 2022-07-29 平安普惠企业管理有限公司 配置业务平台功能的方法、装置、电子设备及介质

Also Published As

Publication number Publication date
CN108536679B (zh) 2022-05-20

Similar Documents

Publication Publication Date Title
CN108536679A (zh) 命名实体识别方法、装置、设备及计算机可读存储介质
CN111783474B (zh) 一种评论文本观点信息处理方法、装置及存储介质
CN112131350B (zh) 文本标签确定方法、装置、终端及可读存储介质
CN111738003B (zh) 命名实体识别模型训练方法、命名实体识别方法和介质
CN110232109A (zh) 一种网络舆情分析方法以及系统
CN110222178A (zh) 文本情感分类方法、装置、电子设备及可读存储介质
CN109271493A (zh) 一种语言文本处理方法、装置和存储介质
CN113010702B (zh) 多媒体信息的互动处理方法、装置、电子设备及存储介质
CN115329779B (zh) 一种多人对话情感识别方法
CN110991290B (zh) 基于语义指导与记忆机制的视频描述方法
CN113704460B (zh) 一种文本分类方法、装置、电子设备和存储介质
CN108376132A (zh) 相似试题的判定方法及系统
CN109344404A (zh) 情境感知的双重注意力自然语言推理方法
CN110750998B (zh) 一种文本输出方法、装置、计算机设备和存储介质
CN112307164A (zh) 信息推荐方法、装置、计算机设备和存储介质
CN111898369A (zh) 文章标题生成方法、模型的训练方法、装置和电子设备
CN112131430A (zh) 视频聚类方法、装置、存储介质和电子设备
CN112347269A (zh) 基于BERT和Att-BiLSTM的论点对识别方法
CN110597968A (zh) 一种回复选择方法及装置
CN110321918A (zh) 基于微博的舆论机器人系统情感分析和图像标注的方法
CN112069781A (zh) 一种评语生成方法、装置、终端设备及存储介质
CN117172978A (zh) 学习路径信息生成方法、装置、电子设备和介质
CN109271636A (zh) 词嵌入模型的训练方法及装置
CN113741759B (zh) 评论信息的展示方法、装置、计算机设备和存储介质
CN117271745A (zh) 一种信息处理方法、装置及计算设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant