CN107169021A - 用于预测应用功能标签的方法和设备 - Google Patents

用于预测应用功能标签的方法和设备 Download PDF

Info

Publication number
CN107169021A
CN107169021A CN201710224830.6A CN201710224830A CN107169021A CN 107169021 A CN107169021 A CN 107169021A CN 201710224830 A CN201710224830 A CN 201710224830A CN 107169021 A CN107169021 A CN 107169021A
Authority
CN
China
Prior art keywords
app
participle
description text
essential information
oneth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710224830.6A
Other languages
English (en)
Inventor
纪志伟
孙造诣
张佩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Machine Co Ltd
Original Assignee
Huawei Machine Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Machine Co Ltd filed Critical Huawei Machine Co Ltd
Priority to CN201710224830.6A priority Critical patent/CN107169021A/zh
Publication of CN107169021A publication Critical patent/CN107169021A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/36Creation of semantic tools, e.g. ontology or thesauri
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/35Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/279Recognition of textual entities
    • G06F40/289Phrasal analysis, e.g. finite state techniques or chunking

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Machine Translation (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请提供了一种用于预测应用App功能标签的方法和系统,该方法包括:获取描述目标App的目标描述文本;对该目标描述文本进行分词,获得预测数据;根据该预测数据和目标主题模型,生成该目标App在多个功能标签下的概率分布,该多个功能标签为该目标主题模型的多个主题。本申请用于预测应用功能标签的方法,通过对App的标描述文本进行分词,获得预测数据,并通过主题模型对预测数据进行处理,可以得到App在多个功能标签下的概率分布,从而能够实现对多功能的App的更加客观的分类,更加全面的刻画App的功能。并且,由于该方法是利用计算机自动为App打上标签,告别了人工为App打标签的繁琐过程。

Description

用于预测应用功能标签的方法和设备
技术领域
本申请涉及应用App领域,并且更具体地,涉及一种用于预测应用(application,App)功能标签的方法和设备。
背景技术
随着网络环境的日益完善、移动互联网技术的发展,各类移动互联网应用的需求逐渐被激发,手机App应用市场前景巨大。App不再仅仅具有单一的功能,而是能够满足用户多方面的需求。应用市场上现有的对于App的功能划分主要还是人工进行的,即由App的应用市场规定App的功能标签的类别,由App的开发者人工对App打上功能标签,提交到App的应用市场。但是,这种人工对App打上功能标签的方法存在很大的主观性,无法全面刻画App的功能,同时也很耗费时间。
因此,亟需一种对于多功能的App的更加客观的分类方法,以更全面的刻画App的功能。
发明内容
本申请提供一种用于预测应用App功能标签的方法和设备,能够实现对多功能的App的更加客观的分类,更加全面的刻画App的功能。
第一方面,提供了一种用于预测应用App功能标签的方法,包括:
获取描述目标App的目标描述文本;
对该目标描述文本进行分词,获得预测数据;
根据该预测数据和目标主题模型,生成该目标App在多个功能标签下的概率分布,该多个功能标签为该目标主题模型的多个主题。
可选地,在对该目标描述文本进行分词时,可以采用NLPIR汉语分词系统对目标描述文本进行分词。其中,NLPIR汉语分词系统又名ICTCLAS2013。
可选地,该目标主题模型可以是潜在狄利克雷分配(latent dirichletallocation,LDA)模型。
其中,多个可以理解成至少两个或者至少三个。
本申请实施例的用于预测应用功能标签的方法,通过对App的标描述文本进行分词,获得预测数据,并通过主题模型对预测数据进行处理,可以得到App在多个功能标签下的概率分布,从而能够实现对多功能的App的更加客观的分类,更加全面的刻画App的功能。并且,由于该方法是利用计算机自动为App打上标签,告别了人工为App打标签的繁琐过程。
在一种可能的实现方式中,该对该目标描述文本进行分词,获得预测数据,包括:
对该目标描述文本进行分词,获得分词结果;
过滤该分词结果中的停用词、非法字符、在该目标描述文本中出现频次小于n次的词汇或字符长度小于一个中文字符的词汇中的至少一种,获得该预测数据,n为整数,且n≥1。
在一种可能的实现方式中,在该获取目标应用App的目标描述文本之前,该方法还可以包括:
获取至少两个App的基本信息,该至少两个App不包括该目标App,该基本信息包括描述文本;
将第一分词词库输入至分词系统中,并采用该分词系统对该至少两个App的描述文本进行分词,获得训练数据;
采用该训练数据进行主题建模,生成候选主题模型;
采用该多个功能标签替换该候选主题模型的该多个主题,生成该目标主题模型,其中,该多个功能标签是根据该候选主题模型输出的词分布确定的。
可选地,采用分词系统对该至少两个App的描述文本进行分词,获得训练数据具体可以包括:先采用分词系统对该至少两个App的描述文本进行分词,再过滤该分词结果中的停用词、非法字符、在该目标描述文本中出现频次小于n次的词汇或字符长度小于一个中文字符的词汇中的至少一种,获得该预测数据,n为整数,且n≥1。
在一种可能的实现方式中,该方法还可以包括:将根据该词分布确定的关键词添加至该第一分词词库中,获得更新后的第一分词词库。
在一种可能的实现方式中,该更新后的第一分词词库还包括所述至少两个App的名称以及所述分词系统未能分出的词。
在一种可能的实现方式中,该对该目标描述文本进行分词,获得分词结果,包括:
将该更新后的第一分词词库输入至该分词系统中,并采用该分词系统对该目标描述文本进行分词,获得该分词结果。
通过这样不断地更新分析系统,能够不断完善分词系统,提高分词系统的分词性能。
在一种可能的实现方式中,该获取至少两个App的基本信息,包括:
获取第一应用市场中至少两个第一App的基本信息;
根据该至少两个第一App的基本信息,获取至第二应用市场中的至少两个第二App的基本信息,其中,该至少两个第一App与该至少两个第二App一一对应,且该至少两个第一App中的第i个第一App与该至少两个第二App中的第i个第二App的匹配度大于或等于匹配阈值,i为整数,且i≥1。
将该至少两个第一App中的第i个第一App的基本信息和该至少两个第二App中的第i个第二App的基本信息作为该至少两个App中的第i个App的基本信息。
在一种可能的实现方式中,该基本信息还可以包括名称和/或图标。
可选地,该至少两个第一App中的第i个第一App与该至少两个第二App中的第i个第二App的匹配度大于或等于匹配阈值,具体可以是该至少两个第一App中的第i个第一App与该至少两个第二App中的第i个第二App的图标编码之间的汉明距离大于或等于匹配阈值。
例如,可以利用感知哈希算法对每一款(或称为,每一个)App的图标生成一串64位的字符串,当两款App的的图标生成的64位的字符串中不相同位数不超过6位时,则认为这两款App的匹配。
在一种可能的实现方式中,在该将第一分词词库输入至分词系统中,并采用该分词系统对该至少两个App的描述文本进行分词,获得训练数据之前,该方法还包括:
获取至少两个第三App的描述文本,该至少两个第三App不包括该目标App;
将第二分词词库输入至该分词系统中,并采用该分词系统对该至少两个第三App进行分词,其中,该第二分词词库包括该至少两个第三App中每个第三App的名称;
将该分词系统未能分出的词添加至该第二分词系统的词库中,获得该第一分词词库。
从而,能够提高分词结果的可靠性,进而提高预测应用功能标签时的可靠性。
第二方面,提供了一种用于预测应用App功能标签的设备,用于执行第一方面或第一方面的任意可能的实现方式中的方法。具体地,该设备包括用于执行第一方面或第一方面的任意可能的实现方式中的方法的单元。
第三方面,提供了一种用于预测应用App功能标签的设备,该设备包括存储器和处理器,该存储器用于存储计算机程序,该处理器用于从存储器中调用并运行该计算机程序,使得该设备执行上述第一方面及第一方面的任意可能的实现方式中的方法。
第四方面,提供了一种计算机可读存储介质,用于存储计算机程序,该计算机程序包括用于执行第一方面及第一方面的任意可能的实现方式中的方法的指令。
第五方面,提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行第一方面及第一方面的任意可能的实现方式中的方法。
本申请的用于预测应用功能标签的方法和设备,通过对App的标描述文本进行分词,获得预测数据,并通过主题模型对预测数据进行处理,可以得到App在多个功能标签下的概率分布,从而能够实现对多功能的App的更加客观的分类,更加全面的刻画App的功能。并且,由于该方法是利用计算机自动为App打上标签,告别了人工为App打标签的繁琐过程。
附图说明
图1是本申请一个实施例的用于预测应用功能标签的方法的一个示意性流程图。
图2是本申请又一实施例的用于预测应用功能标签的方法的示意性流程图。
图3是本申请实施例的用于预测应用功能标签的方法的词分布的词云示意图。
图4是本申请实施例的用于预测应用功能标签的设备的示意性框图。
图5是本申请实施例的用于预测应用功能标签的又一设备的示意性框图。
具体实施方式
下面将结合附图,对本申请中的技术方案进行描述。
图1是根据本申请实施例的用于预测应用功能标签的方法。图1所示的方法可以由计算机执行。
S110,获取描述目标应用App的描述文本。
以下,为了便于描述和区分,称目标应用App的目标描述文本为目标描述文本。
应理解,App的描述文本也可以称为描述文档。以下,为了统一,均称为描述文本。
某一款App的描述文本,例如,可以是在应用市场中的对这款App的官方描述文档。目标描述文本,可以是应用市场中对目标应用的官方描述文本。
S120,对目标描述文本进行分词,获得预测数据。
对于例如目标描述文本这种整段的文字,计算机无法处理,需要对整段的文字进行降维,即将整段的文字进行分词,将整段的文字变成一个个的词语。
本申请实施例中,可以利用NLPIR汉语分词系统对目标描述文本进行分词,获取每一个单词以及所对应的词性,即分词结果。分词结果可以直接作为预测数据供续步骤所使用。
应理解,本申请实施例对分词所采用的分词系统不作具体限定,利用NLPIR汉语分词系统进行分词只是分词的一种具体实现方式,本申请实施例还可以采用现有技术中的任何一种分词系统进行分词。
在中文分词完之后,分词结果中会出现对之后处理没有意义的词汇。可选地,作为本申请一个实施例,可以对分词结果进行预处理,过滤掉这些对之后处理没有意义的词汇。对分词结果进行预处理后的结果,可以作为预测数据。
例如,可以采用以下四种方式中的一种,或同时采用以下方式中的多种对分词结果进行预处理:
(1)过滤掉停用词。
所谓停用词是指出现频次高,但是没有任何意义的中文词。比如‘的’、‘他’等词。
本申请实施例中,可以利用通用的停用词汇库对分词结果进行过滤,过滤掉分词结果中的停用词。
(2)过滤掉在整个目标描述文本中出现频次小于n次的词汇。n为大于或等于1的整数。
这样可以去掉语料中拼写错误或者没有意义的词汇。比如,n为3时,则过滤掉在整个目标描述文本中出现频次小于3次的词汇。
(3)去除非法字符。
非法字符比如常见的标点符号。本申请实施例可以过滤掉分词结果中的非法字符,仅保留分词结果是中文或者英文的词汇。
(4)过滤掉字符长度小于一个中文字符的词汇。
一般地,一个中文字符的长度为3个英文字母,而一般进行中文分词时不考虑英文字符,因此,可以过滤到字符长度小于一个中文字符的词汇。
如上所述,对目标描述文本进行分词后的分词结果进行如上的(1)-(4)中的任意一种或多种操作后,可以得到测试数据。
可选地,在进行分词后,还可以利用分词结果或者预测数据更新S120步骤中更新分词时所使用的分词词库。应理解,在进行分词时,具体实施例可以将分词词库输入至分词系统中,再采用分词系统进行分词。
具体来讲,进行分词后,可以将分词结果输入分词词库中,如果分词结果中存在分词词库中没有的新词汇,那么分词词库可以将该新词汇保存下来。或者直接将分词词库中没有的新词汇添加至分析系统中。在下一次对某个文档进行分词时,可以将更新后的分词词库输入至分词系统,如果该文档中存在所述新词汇,分词系统就可以将所述新词汇识别出来。通过这样不断地更新分词词库,能够不断完善分词系统,提高分词系统的分词性能。
S130,根据预测数据和目标主题模型,生成目标App在多个功能标签下的概率分布。
该目标主题模型可以是已经训练好的模型。该目标主题模型可以将目标描述文本的主题以概率分布的形式给出。其中该目标主题模型的多个主题与该多个功能标签一一对应,或者说,该多个功能标签为该主题模型的多个主题。
通过将预测数据输入已经训练好的目标主题模型,可以获得目标描述文本中的每个主题下的概率分布,从而也就获得了目标App在每个功能标签下的概率分布。
可选地,该目标主题模型可以是LDA主题模型。LDA主题模型可以理解为采用LDA进行主题建模生成的主题模型。
以目标主题模型为LDA主题模型为例,在本申请实施例中,将预测数据输入已经训练好的LDA主题模型中去,将会生成目标App在多个功能标签下面的概率分布。其中,每一个功能标签是LDA主题模型中的一个主题。
表1示出了App功能标签预测结果的一个示意图。
表1
如表1所示,第一行为多个功能标签,也就是该目标主题模型的多个主题。目标App如果是酷狗音乐,那么其在影音娱乐这个功能标签下所占比重最大;目标App如果是微信,那么其在社交通讯和影音娱乐这两个功能标签下所占比重较大;目标App如果是支付宝,那么其在便捷生活和金融理财这两个功能标签下所占比重较大。
表1中所示的App不再只是具有单一的功能标签,表1描述了App在每一个功能标签下面的概率分布,更加全面的刻画该App的功能。
应理解,表1只是描述App在每一个功能标签下面的概率分布的一种具体的表现形式,是为了帮助本领域技术人员更好的理解本申请,本申请对App在每一个功能标签下面的概率分布的具体表现形式不作特殊限定。
因此,本申请实施例的用于预测应用功能标签的方法,通过对App的标描述文本进行分词,获得预测数据,并通过主题模型对预测数据进行处理,可以得到App在多个功能标签下的概率分布,从而能够实现对多功能的App的更加客观的分类,更加全面的刻画App的功能。并且,由于该方法是利用计算机自动为App打上标签,告别了人工为App打标签的繁琐过程。
上文中结合图1,主要描述了本申请实施例的用于预测应用功能标签的方法中的预测应用功能标签的相应操作。下面结合图2,描述根据本申请实施例的用于预测应用功能标签的方法中的训练主题模型的相关操作。应理解,图2中所描述相关操作或步骤可以在S110之前执行。
S210,获取至少两个App的基本信息。其中,该至少两个App不包括目标App。
具体来讲,在进行主题模型训练时,首先可以获取该至少两个App的基本信息,作为训练语料。基本信息可以包括描述文本,也就是说,可以将获取的该至少两个App的描述文本,作为训练语料。
此外,基本信息还可以包括编号、名称、图标等信息中的至少一种。换句话说,在获取该至少两个App的描述文本的同时,可以获取该至少两个App的编号、名称、图标中的一种或多种。其中,App的编号唯一地标识了该App。
作为获取该至少两个App的基本信息的一个具体实现方式,可以首先获取第一应用市场中至少两个第一App的基本信息。然后,根据该至少两个第一App的基本信息,获取第二应用市场中的至少两个第二App的基本信息。其中,该至少两个第一App与该至少两个第二App一一对应,且该至少两个第一App中的第i个第一App与该至少两个第二App中的第i个第二App的匹配度大于或等于匹配阈值,i为整数,且i≥1。比如,可以根据该至少两个第一App的名称获取至少一个第二应用市场中的多个App的基本信息。然后,再在这多个第二App中寻找与该至少两个第一App中匹配度大于或等于匹配阈值的该至少两个第二App。最后,可以将该至少两个第一App中的第i个第一App的基本信息和该至少两个第二App中的第i个第二App的基本信息作为该至少两个App中的第i个App的基本信息。
举例来说,可以首先获取华为应用市场(第一应用市场的一例)上面至少两个App的基本信息。同时,为了丰富训练的语料,对于华为应用市场上面的至少两个App,可以以每个App的名称作为关键词,在豌豆荚(第二应用市场的一例)、手机百度(第二应用市场的一例)、应用宝(第二应用市场的一例)和安智(第二应用市场的一例)四大应用市场上面进行搜索,保留搜索排名前五位的App的基本信息。可以理解的是,按照搜索排名寻找与至少两个第一App对应的App仅是一种示例性说明。在具体实现时,还可以按照下载量排名等方式寻找与至少两个第一App对应的App。此外,这里的保留搜索排名前五位的App的基本信息也仅是为了帮助本领域技术人员更好的理解本申请,本申请不对具体保留前几位的App的基本信息作限定。
由于App功能标签所需要的训练语料是各大应用市场上对同一款App的描述,而在四大应用市场中获得的App的基本信息与在华为应用市场中获得的App的基本信息可能并不是同一款App的基本信息,此时可以通过App的基本信息的匹配,获得App功能标签所需要的训练语料。
通过匹配处理,对于华为应用市场上面的至少两个App中的每个App,可以将在上述四大应用市场中的每个应用市场中搜索排名前五位的App中与该App的匹配度大于或等于匹配阈值的App视为该App的同款App,通过获取同款App在第一应用市场和每个第二应用市场中的基本信息,就可以获得该款App的基本信息。
可选地,本申请实施例中,可以采用图像匹配的方法对App进行匹配。
例如,可以利用感知哈希算法对每一款App的图标生成一串64位的字符串,然后以华为应用市场的App为基准,计算其它四个应用市场搜到的同名App和这款App图标编码之间的汉明距离。并且可以将匹配度大于或等于90%的App认为是同款App,即,将由App的图标生成的64位的字符串中不相同位数不超过6位的App认为是同款App,从而获得第二App。然后,将同款App在不同应用市场上面的描述文本拼接起来,组成这款App的训练语料。
S220,将第一分词词库输入至分词系统中,并采用该分词系统对所述至少两个App的描述文本进行分词,获得训练数据。
获得训练语料后,再对训练语料进行分词,获得主题建模所需的训练数据。本申请实施例中,可以直接将对训练语料进行分词后的结果作为训练预语料,也可以再对训练语料进行分词后的结果进行如上文S120中所述的预处理操作,比如,过滤掉停用词、去除非法字符等操作,将预处理后的结果作为训练数据。
另外,在该步骤中,分词系统可以采用NLPIR汉语分词系统。在进行分词时,输入至分词系统的分词词库可以是第一分词词库。下面,介绍构建第一分词词库的一种操作方法。
首先,获取至少两个App(为了便于描述和区分,记作第三App)的描述文本,该至少两个第三App不包括该目标App;然后,将第二分词词库输入至该分词系统中,并采用该分词系统对该至少两个第三App进行分词。其中,该第二分词词库包括该至少两个第三App中每个第三App的名称;最后,将该分词系统未能分出的词添加至该第二分词系统的词库中,获得该第一分词词库。
具体来讲,可以随机选取多个或称为多款App,例如,随机选取100款App,将这100款App的名称添加至分词词库中。应理解,这里所讲的分词词库可以是现有技术中的任一种分词词库。然后,将将这100款App的描述文本,以及添加了这100款App的名称的分词词库输入至分词系统中,由分词系统进行分词处理。得到分词结果后,通过将未能分出来的词添加至该分词词库中去,对分词词库进行更新。此时,更新后的分词词库即为上述的第一分词词库。
上述构建的第一分词词库由于词汇较丰富,因此在采用第一分词词库对上述的至少两个App的描述文本进行分词时,能够提高分词结果的可靠性。
应理解,第三App可以是与第一App和第二App相同,也可以不同,本申请实施例对此不作限定。具体实施是,可以使第三App与第一App和第二App不同,这样能够提高预测性能。
S230,采用所述训练数据进行主题建模,生成候选主题模型。
主题模型是一个词袋模型,一篇文档可以包含多个主题,文档中每一个词都由其中的一个主题生成。
一篇文章中每一个词的生成过程,是先以一定的概率选择了一个主题,然后再从这个主题的词分布中以一定的概率选择了某一个词。
主题模型的任务就是从观测到的大量的文本中(例如,S220中获得的训练数据)学习出文档集(例如,S210中获得的至少两个App的描述文本)隐藏的主题分布,以及每一个主题下面的词分布。
主题分布,即在每个App的描述文本中各个主题出现的概率。
表2示出了多款App(或者说,多款App的描述文本)在每一个主题下的概率分布。
表2
词分布,即每一个主题下关键词出现的概率,基于这些关键词可以确定出所述多个功能标签。
词分布可以以词云的方式示出。如图3所示,给出了三个主题下词分布的词云。根据三个主题下词分布的词云,可以确定出功能标签。
例如,根据图3中每个主题中显示较大的词汇,即占该主题比重较大的词汇,可以总结出图3中的(a)的功能标签是医疗健康,图3中的(b)的功能标签是金融理财,图3中的(c)的功能标签是社交通讯。
应理解,本申请实施例中,仅以词分布可以以词云的方式示出为例来说明词分布,但这并不对本申请实施例的词分布的形式构成任何限定,例如,词分布还可以以表格的形式示出。
可选地,可以将多个主题或者说多个功能标签下的关键词添加至所述第一分词词库中,获得更新后的第一分词词库,从而能够丰富第一分词词库。
进一步地,还可以采用S220步骤中所采用的至少两个App的名称以及该步骤中分词系统未能分出的词更新更新后的第一分词词库。也就是说,更新后的第一分词词库还包括所述该两个App的名称以及该分词系统未能分出的词。
更进一步地,在预测阶段对目标描述文本进行分词时,可以将更新后的第一分词词库输入至分词系统中,并采用分词系统对所述目标描述文本进行分词,获得所述分词结果。从而,能够提高分词结果的可靠性,进而提高预测应用功能标签时的可靠性。
S240,采用该多个功能标签替换该候选主题模型的多个主题,生成该目标主题模型。
在根据候选主题模型输出的词分布确定出所述多个功能标签后,可以将该候选主题模型的多个主题替换为该多个功能标签,从而得到目标主题模型。
根据目标主题模型,具体来说就是采用主题模型所输出的主题分布作为App的功能标签分布,可以得到如表3所示的多款App在每一个功能标签下的概率分布。
表3
可以看出,每款App在每个功能标签下基本都占一定的比重。应理解,表2中所示出的App为S210步骤中的至少两个App。
得到目标主题模型后,在进行应用App功能标签的预测时,可以将App,例如目标App的目标描述文本输入该目标主题模型,从而能够得到App在该在多个功能标签下的概率分布。
上文中结合图1至图3,描述了根据本申请实施例的用于预测应用App功能标签的方法。下面,结合图4和图5,描述根据本申请实施例的用于预测应用App功能标签的设备。
图4是根据本申请实施例的用于预测应用App功能标签的设备400的示意性框图。如图4所示,该设备400包括:数据采集单元410,数据预处理单元420和模型输出单元430。
数据采集单元410,用于获取描述目标App的目标描述文本;
数据预处理单元420,用于对所述目标描述文本进行分词,获得预测数据;
模型输出单元430,用于根据所述预测数据和目标主题模型,生成所述目标App在多个功能标签下的概率分布,所述多个功能标签为所述目标主题模型的多个主题。
本申请实施例的用于预测应用功能标签的系统,通过对App的标描述文本进行分词,获得预测数据,并通过主题模型对预测数据进行处理,可以得到App在多个功能标签下的概率分布,从而能够实现对多功能的App的更加客观的分类,更加全面的刻画App的功能。并且,由于该方法是利用计算机自动为App打上标签,告别了人工为App打标签的繁琐过程。
可选地,该数据预处理单元420用于:
对该目标描述文本进行分词,获得分词结果;
过滤该分词结果中的停用词、非法字符、在该目标描述文本中出现频次小于n次的词汇或字符长度小于一个中文字符的词汇中的至少一种,获得该预测数据,n为整数,且n≥1。
可选地,该数据采集单元410还用于:
获取至少两个App的基本信息,该至少两个App不包括该目标App,该基本信息包括描述文本;
该数据预处理单元420还用于,将第一分词词库输入至分词系统中,并采用该分词系统对该至少两个App的描述文本进行分词,获得训练数据;
该系统400还包括:
模型构建单元,用于采用该训练数据进行主题建模,生成候选主题模型;
该模型构建单元还用于,采用该多个功能标签替换该候选主题模型的该多个主题,生成该目标主题模型,其中,该多个功能标签是根据该候选主题模型输出的词分布确定的。
可选地,该设备400还包括:
第一更新单元,用于将所述多个主题下的关键词添加至所述第一分词词库中,获得更新后的第一分词词库。
可选地,所述更新后的第一分词词库还包括所述至少两个App的名称以及所述分词系统未能分出的词。
进一步地,该数据预处理单元420用于:
将该更新后的第一分词词库输入至该分词系统中,并采用该分词系统对该目标描述文本进行分词,获得该分词结果。
可选地,该数据采集单元410用于:
获取第一应用市场中至少两个第一App的基本信息;
根据该至少两个第一App的基本信息,获取第二应用市场中的至少两个第二App的基本信息,其中,该至少两个第一App与该至少两个第二App一一对应,且该至少两个第一App中的第i个第一App与该至少两个第二App中的第i个第二App的匹配度大于或等于匹配阈值,i为整数,且i≥1。
将该至少两个第一App中的第i个第一App的基本信息和该至少两个第二App中的第i个第二App的基本信息作为该至少两个App中的第i个App的基本信息。
可选地,该数据采集单元410还用于:
获取至少两个第三App的描述文本,该至少两个第三App不包括该目标App;
该数据预处理单元420还用于,将第二分词词库输入至该分词系统中,并采用该分词系统对该至少两个第三App进行分词,其中,该第二分词词库包括该至少两个第三App中每个第三App的名称;
该设备400还包括:
第二更新单元,用于将该分词系统未能分出的词添加至该第二分词系统的词库中,获得该第一分词词库。
可选地,该基本信息还包括编号、名称和图标中的至少一种。
应理解,该设备400中各模块或单元分别用于执行上述方法中的各动作或处理过程。这里,为了避免赘述,省略其详细说明。
图5示出了根据本申请实施例的用于预测应用App功能标签的设备500的示意性结构图。如图5所示,该设备500包括:收发器510、处理器520和存储器530。其中,收发器510、处理器520和存储器530之间通过内部连接通路互相通信,传递控制和/或数据信号。
处理器520,用于获取描述目标App的目标描述文本;对所述目标描述文本进行分词,获得预测数据;根据所述预测数据和目标主题模型,生成所述目标App在多个功能标签下的概率分布,所述多个功能标签为所述目标主题模型的多个主题。
本申请实施例的用于预测应用功能标签的系统,通过对App的标描述文本进行分词,获得预测数据,并通过主题模型对预测数据进行处理,可以得到App在多个功能标签下的概率分布,从而能够实现对多功能的App的更加客观的分类,更加全面的刻画App的功能。并且,由于该方法是利用计算机自动为App打上标签,告别了人工为App打标签的繁琐过程。
可选地,该处理器520用于:
对该目标描述文本进行分词,获得分词结果;
过滤该分词结果中的停用词、非法字符、在该目标描述文本中出现频次小于n次的词汇或字符长度小于一个中文字符的词汇中的至少一种,获得该预测数据,n为整数,且n≥1。
可选地,该处理器520还用于:
获取至少两个App的基本信息,该至少两个App不包括该目标App,该基本信息包括描述文本;
该处理器520还用于,将第一分词词库输入至分词系统中,并采用该分词系统对该至少两个App的描述文本进行分词,获得训练数据;采用该训练数据进行主题建模,生成候选主题模型;采用该多个功能标签替换该候选主题模型的该多个主题,生成该目标主题模型,其中,该多个功能标签是根据该候选主题模型输出的词分布确定的。
可选地,该处理器520还用于,将所述多个主题下的关键词添加至所述第一分词词库中,获得更新后的第一分词词库。
可选地,所述更新后的第一分词词库还包括所述至少两个App的名称以及所述分词系统未能分出的词。
进一步地,该处理器520还用于,将该更新后的第一分词词库输入至该分词系统中,并采用该分词系统对该目标描述文本进行分词,获得该分词结果。
可选地,该处理器520用于:
获取第一应用市场中至少两个第一App的基本信息;
根据该至少两个第一App的基本信息,获取第二应用市场中的至少两个第二App的基本信息,其中,该至少两个第一App与该至少两个第二App一一对应,且该至少两个第一App中的第i个第一App与该至少两个第二App中的第i个第二App的匹配度大于或等于匹配阈值,i为整数,且i≥1。
将该至少两个第一App中的第i个第一App的基本信息和该至少两个第二App中的第i个第二App的基本信息作为该至少两个App中的第i个App的基本信息。
可选地,该处理器520还用于:
获取至少两个第三App的描述文本,该至少两个第三App不包括该目标App;
将第二分词词库输入至该分词系统中,并采用该分词系统对该至少两个第三App进行分词,其中,该第二分词词库包括该至少两个第三App中每个第三App的名称;
将该分词系统未能分出的词添加至该第二分词系统的词库中,获得该第一分词词库。
可选地,该基本信息还包括编号、名称和图标中的至少一种。
应理解,在该处理器520从存储器中调用并运行该计算机程序时,处理器520可用于执行用于预测应用App功能标签的方法,并实现该方法的执行主体,例如计算机的功能。
本申请实施例可以应用于处理器中,或者由处理器实现。处理器可以是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法实施例的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是中央处理单元(central processing unit,CPU)、该处理器还可以是其他通用处理器、数字信号处理器(digital signal processor,DSP)、专用集成电路(application specific integratedcircuit,ASIC)、现成可编程门阵列(field programmable gate array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件器组合执行完成。软件器可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
还应理解,本申请实施例中的存储器可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(read-only memory,ROM)、可编程只读存储器(programmable ROM,PROM)、可擦除可编程只读存储器(erasable PROM,EPROM)、电可擦除可编程只读存储器(electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(random access memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(static RAM,SRAM)、动态随机存取存储器(dynamic RAM,DRAM)、同步动态随机存取存储器(synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(double data rateSDRAM,DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(directrambus RAM,DRRAM)。应注意,本文描述的系统和方法的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
应理解,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
应理解,在本申请的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (16)

1.一种用于预测应用App功能标签的方法,其特征在于,包括:
获取描述目标App的目标描述文本;
对所述目标描述文本进行分词,获得预测数据;
根据所述预测数据和目标主题模型,生成所述目标App在多个功能标签下的概率分布,所述多个功能标签为所述目标主题模型的多个主题。
2.如权利要求1所述的方法,其特征在于,所述对所述目标描述文本进行分词,获得预测数据,包括:
对所述目标描述文本进行分词,获得分词结果;
过滤所述分词结果中的停用词、非法字符、在所述目标描述文本中出现频次小于n次的词汇或字符长度小于一个中文字符的词汇中的至少一种,获得所述预测数据,n为整数,且n≥1。
3.如权利要求2所述的方法,其特征在于,在所述获取目标应用App的目标描述文本之前,所述方法还包括:
获取至少两个App的基本信息,所述基本信息包括描述文本;
将第一分词词库输入至分词系统中,并采用所述分词系统对所述至少两个App的描述文本进行分词,获得训练数据;
采用所述训练数据进行主题建模,生成候选主题模型;
采用所述多个功能标签替换所述候选主题模型的所述多个主题,生成所述目标主题模型,其中,所述多个功能标签是根据所述候选主题模型输出的词分布确定的。
4.如权利要求3所述的方法,其特征在于,所述方法还包括:
将所述多个主题下的关键词添加至所述第一分词词库中,获得更新后的第一分词词库。
5.根据权利要求4所述的方法,所述更新后的第一分词词库还包括所述至少两个App的名称以及所述分词系统未能分出的词。
6.如权利要求4或5所述的方法,其特征在于,所述对所述目标描述文本进行分词,获得分词结果,包括:
将所述更新后的第一分词词库输入至所述分词系统中,并采用所述分词系统对所述目标描述文本进行分词,获得所述分词结果。
7.如权利要求3至6中任一项所述的方法,其特征在于,所述获取至少两个App的基本信息,包括:
获取所述至少两个App对应在第一应用市场中的至少两个第一App的基本信息;
根据所述至少两个第一App的基本信息,获取所述至少两个App对应在第二应用市场中的至少两个第二App的基本信息,其中,所述至少两个第一App与所述至少两个第二App一一对应,且所述至少两个第一App中的第i个第一App与所述至少两个第二App中的第i个第二App的匹配度大于或等于匹配阈值,i为整数,且i≥1。
将所述至少两个第一App中的第i个第一App的基本信息和所述至少两个第二App中的第i个第二App的基本信息作为所述至少两个App中的第i个App的基本信息。
8.权利要求3至7中任一项所述的方法,其特征在于,所述基本信息还包括名称和/或图标。
9.一种用于预测应用App功能标签的设备,其特征在于,包括:
数据采集单元,用于获取描述目标App的目标描述文本;
数据预处理单元,用于对所述目标描述文本进行分词,获得预测数据;
模型输出单元,用于根据所述预测数据和目标主题模型,生成所述目标App在多个功能标签下的概率分布,所述多个功能标签为所述目标主题模型的多个主题。
10.如权利要求9所述的设备,其特征在于,所述数据预处理单元用于:
对所述目标描述文本进行分词,获得分词结果;
过滤所述分词结果中的停用词、非法字符、在所述目标描述文本中出现频次小于n次的词汇或字符长度小于一个中文字符的词汇中的至少一种,获得所述预测数据,n为整数,且n≥1。
11.如权利要求10所述的设备,其特征在于,所述数据采集单元还用于:
获取至少两个App的基本信息,所述至少两个App不包括所述目标App,所述基本信息包括描述文本;
所述数据预处理单元还用于,将第一分词词库输入至分词系统中,并采用所述分词系统对所述至少两个App的描述文本进行分词,获得训练数据;
所述设备还包括:
模型构建单元,用于采用所述训练数据进行主题建模,生成候选主题模型;
所述模型构建单元还用于,采用所述多个功能标签替换所述候选主题模型的所述多个主题,生成所述目标主题模型,其中,所述多个功能标签是根据所述候选主题模型输出的词分布确定的。
12.如权利要求11所述的设备,其特征在于,所述设备还包括:
第一更新单元,用于将所述多个主题下的关键词添加至所述第一分词词库中,获得更新后的第一分词词库。
13.如权利要求12所述的设备,其特征在于,所述更新后的第一分词词库还包括所述至少两个App的名称以及所述分词系统未能分出的词。
14.如权利要求12或13所述的设备,其特征在于,所述数据预处理单元用于:
将所述更新后的第一分词词库输入至所述分词系统中,并采用所述分词系统对所述目标描述文本进行分词,获得所述分词结果。
15.如权利要求11至14中任一项所述的设备,其特征在于,所述数据采集单元用于:
获取第一应用市场中至少两个第一App的基本信息;
根据所述至少两个第一App的基本信息,获取第二应用市场中的至少两个第二App的基本信息,其中,所述至少两个第一App与所述至少两个第二App一一对应,且所述至少两个第一App中的第i个第一App与所述至少两个第二App中的第i个第二App的匹配度大于或等于匹配阈值,i为整数,且i≥1。
将所述至少两个第一App中的第i个第一App的基本信息和所述至少两个第二App中的第i个第二App的基本信息作为所述至少两个App中的第i个App的基本信息。
16.权利要求11至15中任一项所述的设备,其特征在于,所述基本信息还包括名称和/或图标。
CN201710224830.6A 2017-04-07 2017-04-07 用于预测应用功能标签的方法和设备 Pending CN107169021A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710224830.6A CN107169021A (zh) 2017-04-07 2017-04-07 用于预测应用功能标签的方法和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710224830.6A CN107169021A (zh) 2017-04-07 2017-04-07 用于预测应用功能标签的方法和设备

Publications (1)

Publication Number Publication Date
CN107169021A true CN107169021A (zh) 2017-09-15

Family

ID=59849606

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710224830.6A Pending CN107169021A (zh) 2017-04-07 2017-04-07 用于预测应用功能标签的方法和设备

Country Status (1)

Country Link
CN (1) CN107169021A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107767237A (zh) * 2017-11-15 2018-03-06 中国联合网络通信集团有限公司 一种网络产品功能的分类方法和分类系统
CN108763194A (zh) * 2018-04-27 2018-11-06 广州优视网络科技有限公司 应用标注标签方法、装置、存储介质及计算机设备
CN110309298A (zh) * 2018-03-23 2019-10-08 优酷网络技术(北京)有限公司 主题预测方法及装置
CN110335114A (zh) * 2019-06-28 2019-10-15 香港乐蜜有限公司 产品的分类方法、装置及设备
CN110362657A (zh) * 2019-07-12 2019-10-22 浙江每日互动网络科技股份有限公司 一种获取app画像标签的计算设备
CN110598070A (zh) * 2019-09-09 2019-12-20 腾讯科技(深圳)有限公司 应用类型识别方法及装置、服务器及存储介质
CN112328977A (zh) * 2020-11-09 2021-02-05 杭州安恒信息技术股份有限公司 一种应用软件真伪检测方法、装置、设备及介质
CN112948526A (zh) * 2021-02-01 2021-06-11 大箴(杭州)科技有限公司 用户画像的生成方法及装置、电子设备、存储介质
CN113159921A (zh) * 2021-04-23 2021-07-23 上海晓途网络科技有限公司 一种逾期预测方法、装置、电子设备及存储介质
CN113704501A (zh) * 2021-08-10 2021-11-26 上海硬通网络科技有限公司 应用的标签获取方法、装置、电子设备及存储介质
CN113704501B (zh) * 2021-08-10 2024-05-31 上海硬通网络科技有限公司 应用的标签获取方法、装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102902700A (zh) * 2012-04-05 2013-01-30 中国人民解放军国防科学技术大学 基于在线增量演化主题模型的软件自动分类方法
CN105608166A (zh) * 2015-12-18 2016-05-25 Tcl集团股份有限公司 一种标签提取方法及装置
CN105808786A (zh) * 2016-04-05 2016-07-27 电子科技大学 一种基于内容互信的协同主题回归标签推荐方法
CN106055538A (zh) * 2016-05-26 2016-10-26 达而观信息科技(上海)有限公司 主题模型和语义分析相结合的文本标签自动抽取方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102902700A (zh) * 2012-04-05 2013-01-30 中国人民解放军国防科学技术大学 基于在线增量演化主题模型的软件自动分类方法
CN105608166A (zh) * 2015-12-18 2016-05-25 Tcl集团股份有限公司 一种标签提取方法及装置
CN105808786A (zh) * 2016-04-05 2016-07-27 电子科技大学 一种基于内容互信的协同主题回归标签推荐方法
CN106055538A (zh) * 2016-05-26 2016-10-26 达而观信息科技(上海)有限公司 主题模型和语义分析相结合的文本标签自动抽取方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
SVITLANA VAKULENKO ET.AL: "Enriching iTunes App Store Categories via Topic Modeling", 《THIRTY FIFTY INTERNATIONAL CONFERENCE ON INFORMATION SYSTEM》 *

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107767237A (zh) * 2017-11-15 2018-03-06 中国联合网络通信集团有限公司 一种网络产品功能的分类方法和分类系统
CN110309298A (zh) * 2018-03-23 2019-10-08 优酷网络技术(北京)有限公司 主题预测方法及装置
CN108763194B (zh) * 2018-04-27 2022-09-27 阿里巴巴(中国)有限公司 应用标注标签方法、装置、存储介质及计算机设备
CN108763194A (zh) * 2018-04-27 2018-11-06 广州优视网络科技有限公司 应用标注标签方法、装置、存储介质及计算机设备
CN110335114A (zh) * 2019-06-28 2019-10-15 香港乐蜜有限公司 产品的分类方法、装置及设备
CN110362657A (zh) * 2019-07-12 2019-10-22 浙江每日互动网络科技股份有限公司 一种获取app画像标签的计算设备
CN110598070A (zh) * 2019-09-09 2019-12-20 腾讯科技(深圳)有限公司 应用类型识别方法及装置、服务器及存储介质
CN112328977A (zh) * 2020-11-09 2021-02-05 杭州安恒信息技术股份有限公司 一种应用软件真伪检测方法、装置、设备及介质
CN112328977B (zh) * 2020-11-09 2024-03-22 杭州安恒信息技术股份有限公司 一种应用软件真伪检测方法、装置、设备及介质
CN112948526A (zh) * 2021-02-01 2021-06-11 大箴(杭州)科技有限公司 用户画像的生成方法及装置、电子设备、存储介质
CN113159921A (zh) * 2021-04-23 2021-07-23 上海晓途网络科技有限公司 一种逾期预测方法、装置、电子设备及存储介质
CN113704501A (zh) * 2021-08-10 2021-11-26 上海硬通网络科技有限公司 应用的标签获取方法、装置、电子设备及存储介质
CN113704501B (zh) * 2021-08-10 2024-05-31 上海硬通网络科技有限公司 应用的标签获取方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN107169021A (zh) 用于预测应用功能标签的方法和设备
US10699080B2 (en) Capturing rich response relationships with small-data neural networks
US11227118B2 (en) Methods, devices, and systems for constructing intelligent knowledge base
CN107122346B (zh) 一种输入语句的纠错方法及装置
US10061766B2 (en) Systems and methods for domain-specific machine-interpretation of input data
CN109635298B (zh) 团体状态识别方法、装置、计算机设备及存储介质
CN106021572B (zh) 二元特征词典的构建方法和装置
CN108629043A (zh) 网页目标信息的提取方法、装置及存储介质
US20120323839A1 (en) Entity recognition using probabilities for out-of-collection data
CN105378707A (zh) 情感反馈
CN110162778B (zh) 文本摘要的生成方法及装置
CN112215008A (zh) 基于语义理解的实体识别方法、装置、计算机设备和介质
CN110147433A (zh) 一种基于字典树的文本模板提取方法
CN109918499A (zh) 一种文本分类方法、装置、计算机设备及存储介质
CN109800346A (zh) 文本匹配方法、装置、计算机设备和存储介质
CN106030568A (zh) 自然语言处理系统、自然语言处理方法、以及自然语言处理程序
CN110851797A (zh) 基于区块链的作品创作方法及装置、电子设备
CN114881035A (zh) 训练数据的增广方法、装置、设备和存储介质
CN113190675A (zh) 文本摘要生成方法、装置、计算机设备和存储介质
US20220164546A1 (en) Machine Learning Systems and Methods for Many-Hop Fact Extraction and Claim Verification
CN109726386B (zh) 一种词向量模型生成方法、装置和计算机可读存储介质
CN109359176A (zh) 数据提取方法、装置、计算机设备和存储介质
CN112527967A (zh) 文本匹配方法、装置、终端和存储介质
Tien et al. Detecting automatically generated sentences with grammatical structure similarity
CN113486169B (zh) 基于bert模型的同义语句生成方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170915