CN109658148B - 一种基于自然语言处理技术的营销活动投诉风险预测方法 - Google Patents

一种基于自然语言处理技术的营销活动投诉风险预测方法 Download PDF

Info

Publication number
CN109658148B
CN109658148B CN201811534891.3A CN201811534891A CN109658148B CN 109658148 B CN109658148 B CN 109658148B CN 201811534891 A CN201811534891 A CN 201811534891A CN 109658148 B CN109658148 B CN 109658148B
Authority
CN
China
Prior art keywords
text
marketing
complaint
activity
texts
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811534891.3A
Other languages
English (en)
Other versions
CN109658148A (zh
Inventor
王彦青
严莲
过临朋
白新宇
张少杰
彭刚
王宏满
朱峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xinxun Digital Technology Hangzhou Co ltd
Original Assignee
EB INFORMATION TECHNOLOGY Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EB INFORMATION TECHNOLOGY Ltd filed Critical EB INFORMATION TECHNOLOGY Ltd
Priority to CN201811534891.3A priority Critical patent/CN109658148B/zh
Publication of CN109658148A publication Critical patent/CN109658148A/zh
Application granted granted Critical
Publication of CN109658148B publication Critical patent/CN109658148B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201Market modelling; Market analysis; Collecting market data
    • G06Q30/0202Market predictions or forecasting for commercial activities
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/194Calculation of difference between files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/205Parsing
    • G06F40/216Parsing using statistical methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • General Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Data Mining & Analysis (AREA)
  • Biomedical Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Molecular Biology (AREA)
  • Evolutionary Computation (AREA)
  • Biophysics (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

一种基于自然语言处理技术的营销活动投诉风险预测方法,包括:提取历史时间内所有投诉文本和营销活动文本,计算投诉文本和营销活动文本的相似度,以识别营销活动所对应的投诉文本,计算每项营销活动的万投比;选取多个万投比大于万投比高阈值的营销活动为正样本,多个万投比低于万投比低阈值的营销活动为负样本,训练基于卷积神经网络的营销文本分类模型;将待预测营销活动的文本指标输入训练后的营销文本分类模型,并根据模型输出的营销活动属于高投诉风险类别的概率来判断待预测的营销活动是否具有高投诉风险,如果是,则发布预警通知消息。本发明属于信息技术领域,能构建投诉信息与营销活动的对应关系,并实现对营销活动风险的准确预测。

Description

一种基于自然语言处理技术的营销活动投诉风险预测方法
技术领域
本发明涉及一种基于自然语言处理技术的营销活动风险预测方法,属于信息技术领域。
背景技术
目前,营销活动策划与客户服务之间相对独立且存在认知盲区,表现为:营销策划人员重点关注市场发展,在营销策划时缺乏有效手段对营销活动带来的投诉风险进行评估,客服人员重点关注客户满意度,认为很多活动规则设置不合理导致客户投诉。但问题的关键在于,投诉工单数据以海量、不规则文本数据为主,很难识别导致投诉的具体营销活动,只能依赖低效的人工处理,从而投诉数据难以为营销活动策划提供闭环数据支撑;同时,目前营销活动从策划到执行,本身自成体系,缺乏从服务、投诉的角度对活动进行评估、优化。
因此,如何构建投诉信息与营销活动的对应关系,并基于投诉信息来实现对营销活动风险的准确预测,已成为技术人员急需解决的技术问题,截至目前为止,还未发现有相关方案。
发明内容
有鉴于此,本发明的目的是提供一种基于自然语言处理技术的营销活动风险预测方法,能构建投诉信息与营销活动的对应关系,并基于投诉信息来实现对营销活动风险的准确预测。
为了达到上述目的,本发明提供了一种基于自然语言处理技术的营销活动投诉风险预测方法,包括有:
步骤一、提取一定历史时间周期内的所有投诉文本和营销活动文本,计算每个投诉文本和每个营销活动文本之间的相似度,以识别每项营销活动所对应的投诉文本,然后根据营销活动文本所对应的投诉文本数,计算每项营销活动的万投比;
步骤二、从历史时间周期内的所有投诉文本和营销活动中,选取多个万投比大于万投比高阈值的营销活动为正样本,多个万投比低于万投比低阈值的营销活动为负样本,训练基于卷积神经网络的营销文本分类模型,营销文本分类模型的输入是每项营销活动的文本指标,输出是营销活动属于高投诉风险类别的概率;
步骤三、将待预测的营销活动的文本指标输入训练后的营销文本分类模型,并根据营销文本分类模型输出的营销活动属于高投诉风险类别的概率来判断待预测的营销活动是否具有高投诉风险,如果是,则发布预警通知消息。
与现有技术相比,本发明的有益效果是:本发明首先构建投诉信息与营销活动的对应关系,搭建活动策划与客户服务之间闭环数据支撑的桥梁,然后通过构建营销文本分类模型,从而能实现对营销活动风险的评估与管控;首先,基于自然语言处理技术计算投诉文本与营销活动的相似度,实现投诉信息与营销活动信息的融合,并首次提出了一种基于投诉文本和营销活动文本的共有词TF-IDF权重文本相似度的计算方法;其次,在实现投诉工单与营销活动的对应关系基础上,统计分析每个营销活动的万投比,将高万投比的活动作为营销文本分类模型的正样本,以营销活动为研究对象,提取活动描述、类型、活动配置的元素、参数、目标用户等信息作为模型输入,基于深度学习技术构建营销文本分类模型,并在其中还使用基于词、字符两种不同粒度的词-文本分类模型和字符-文本分类模型,通过对两个文本分类模型的输出特征进行融合与组合,最后输出营销活动属于高投诉风险类别的概率,从而能获得更好的分类效果,实现对营销活动风险的准确预测。
附图说明
图1是本发明一种基于自然语言处理技术的营销活动投诉风险预测方法。
图2是图1步骤一的具体步骤流程图。
图3是图1步骤二和三中,当将营销活动的文本指标输入营销文本分类模型时,营销文本分类模型对营销活动的文本指标的具体处理流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面结合附图对本发明作进一步的详细描述。
如图1所示,本发明一种基于自然语言处理技术的营销活动投诉风险预测方法,包括有:
步骤一、提取一定历史时间周期内的所有投诉文本和营销活动文本,计算每个投诉文本和每个营销活动文本之间的相似度,以识别每项营销活动所对应的投诉文本,然后根据营销活动文本所对应的投诉文本数,计算每项营销活动的万投比;
步骤二、从历史时间周期内的所有投诉文本和营销活动中,选取多个万投比大于万投比高阈值的营销活动为正样本,多个万投比低于万投比低阈值的营销活动为负样本,训练基于卷积神经网络的营销文本分类模型,营销文本分类模型包括有输入层、卷积层、池化层和全连接层,营销文本分类模型的输入是每项营销活动的文本指标,输出是营销活动属于高投诉风险类别的概率,其中,万投比高阈值、万投比低阈值可以根据实际业务需要而设置;
步骤三、将待预测的营销活动的文本指标输入训练后的营销文本分类模型,并根据营销文本分类模型输出的营销活动属于高投诉风险类别的概率来判断待预测的营销活动是否具有高投诉风险,如果是,则发布预警通知消息。
如图2所示,步骤一可以进一步包括有:
步骤11、从每个投诉工单中提取投诉内容作为对应的投诉文本;
步骤12、将每项营销活动的营销活动名称、营销活动描述、营销活动主题、营销活动渠道这四个文本字段合成对应的营销活动文本;
步骤13、将投诉文本、营销活动文本合并生成语料库,并构建自有词典与停用词,分别对每个投诉文本和每个营销活动文本进行分词处理;
步骤14、计算每个投诉文本和每个营销活动文本的共有词相似度,投诉文本和营销活动文本的共有词相似度是两个文本共有词的总字符数除以两个文本中的最长文本字符数;
步骤15、计算每个投诉文本和每个营销活动文本的Jaccard相似度,投诉文本和营销活动文本的Jaccard相似度是两个文本之间词集合的交集和并集的比值;
步骤16、计算每个投诉文本和每个营销活动文本的共有词TF-IDF权重文本相似度;
TF-IDF的核心思想是:在一篇文章中,某个词语的重要性与该词语在这篇文章中出现的次数成正相关,同时与整个语料库中出现该词语的文章数成负相关。其中,词频=某个词在文章中出现的总次数;TF=某个词在文章中出现的总次数/文章的总词数;IDF=log(词料库的文档总数/包含该词的文档数+1);TF-IDF=TF*IDF。步骤16中,投诉文本和营销活动文本的共有词TF-IDF权重文本相似度是两文本共有词的TF*IDF权重之和与两文本所有词的TF*IDF权重之和的比值;
步骤17、计算每个投诉文本和每个营销活动文本的余弦相似度:可以先通过基于Skip-gram模型的word2vec算法,将投诉文本和营销活动文本中的每个词转化成词向量,然后使用余弦相似度算法计算投诉文本和营销活动文本之间的向量相似度作为投诉文本和营销活动文本的余弦相似度;
步骤18、根据投诉文本和营销活动文本的共有词相似度、Jaccard相似度、共有词TF-IDF权重文本相似度、余弦相似度,计算每个投诉文本和营销活动文本之间的相似度:
Figure GDA0001979815830000031
其中,s1、s2、s3、s4分别是投诉文本和营销活动文本的共有词相似度、Jaccard相似度、共有词TF-IDF权重文本相似度、余弦相似度,wi是si对应的权重,
Figure GDA0001979815830000041
Figure GDA0001979815830000042
是si与共有词相似度、Jaccard相似度、共有词TF-IDF权重文本相似度、余弦相似度的协方差之和,cov(si,sj)是si与sj的协方差,di是历史时间周期内的所有营销活动文本和投诉文本之间的si的方差;
步骤19、从每个营销活动文本和所有投诉文本之间的相似度中挑选出大于相似度阈值的投诉文本,所挑选出的投诉文本即是该营销活动对应的投诉文本,然后计算每项营销活动的万投比,营销活动的万投比是营销活动所对应的投诉文本数和营销活动订购次数的比值。
可以从营销活动的活动基本描述、活动配置元素、活动目标用户三个方面来提取营销活动的文本指标,包括有:活动名称、活动描述、活动主题、活动类别、活动配置元素、活动配置元素参数、活动配置元素参数值、活动目标用户群描述等。为了更好的从营销活动的文本指标中提取更多特征和信息,本发明还可以基于Text-CNN文本分类模型,构建基于词、字符两种不同粒度的词-文本分类模型和字符-文本分类模型,然后对两个文本分类模型的输出特征进行融合与组合,从而能获得更好的分类效果。如图3所示,步骤二和三中,当将营销活动的文本指标输入营销文本分类模型时,营销文本分类模型对营销活动的文本指标的具体处理流程可以进一步包括有:
步骤21、从营销活动的文本指标中过滤掉文本中的无用信息,构建自有词典与停用词,并对文本指标进行分词处理;
步骤22、针对分词处理后的文本指标,运用word2vec算法生成词(word)向量,同时随机生成字符(char)向量;
步骤23、将词(word)向量、字符(char)向量分别输入基于Text-CNN所构建的词-文本分类模型、字符-文本分类模型中,并获得词-文本分类模型、字符-文本分类模型各自全连接层的输出;
步骤24、对词-文本分类模型、字符-文本分类模型各自全连接层的输出进行横向拼接,以获得一个特征向量,然后再将拼接后的特征向量输入全连接层,最后通过全连接层来获得营销活动属于高投诉风险类别的概率。
步骤三中,当待预测的营销活动属于高投诉风险类别的概率大于预先设定的概率阈值时,则表示待预测的营销活动有高投诉风险,发布预警通知消息。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (6)

1.一种基于自然语言处理技术的营销活动投诉风险预测方法,其特征在于,包括有:
步骤一、提取一定历史时间周期内的所有投诉文本和营销活动文本,计算每个投诉文本和每个营销活动文本之间的相似度,以识别每项营销活动所对应的投诉文本,然后根据营销活动文本所对应的投诉文本数,计算每项营销活动的万投比;
步骤二、从历史时间周期内的所有投诉文本和营销活动中,选取多个万投比大于万投比高阈值的营销活动为正样本,多个万投比低于万投比低阈值的营销活动为负样本,训练基于卷积神经网络的营销文本分类模型,营销文本分类模型的输入是每项营销活动的文本指标,输出是营销活动属于高投诉风险类别的概率;
步骤三、将待预测的营销活动的文本指标输入训练后的营销文本分类模型,并根据营销文本分类模型输出的营销活动属于高投诉风险类别的概率来判断待预测的营销活动是否具有高投诉风险,如果是,则发布预警通知消息。
2.根据权利要求1所述的方法,其特征在于,步骤一进一步包括有:
步骤11、从每个投诉工单中提取投诉内容作为对应的投诉文本;
步骤12、将每项营销活动的营销活动名称、营销活动描述、营销活动主题、营销活动渠道这四个文本字段合成对应的营销活动文本;
步骤13、将投诉文本、营销活动文本合并生成语料库,并构建自有词典与停用词,分别对每个投诉文本和每个营销活动文本进行分词处理;
步骤14、计算每个投诉文本和每个营销活动文本的共有词相似度,投诉文本和营销活动文本的共有词相似度是两个文本共有词的总字符数除以两个文本中的最长文本字符数;
步骤15、计算每个投诉文本和每个营销活动文本的Jaccard相似度,投诉文本和营销活动文本的Jaccard相似度是两个文本之间词集合的交集和并集的比值;
步骤16、计算每个投诉文本和每个营销活动文本的共有词TF-I DF权重文本相似度,投诉文本和营销活动文本的共有词TF-IDF权重文本相似度是两文本共有词的TF*IDF权重之和与两文本所有词的TF*IDF权重之和的比值;
步骤17、计算每个投诉文本和每个营销活动文本的余弦相似度:先通过基于Skip-gram模型的word2vec算法,将投诉文本和营销活动文本中的每个词转化成词向量,然后使用余弦相似度算法计算投诉文本和营销活动文本之间的向量相似度作为投诉文本和营销活动文本的余弦相似度;
步骤18、根据投诉文本和营销活动文本的共有词相似度、Jaccard相似度、共有词TF-IDF权重文本相似度、余弦相似度,计算每个投诉文本和营销活动文本之间的相似度:
Figure FDA0001906613600000021
其中,s1、s2、s3、s4分别是投诉文本和营销活动文本的共有词相似度、Jaccard相似度、共有词TF-IDF权重文本相似度、余弦相似度,wi是si对应的权重。
3.根据权利要求2所述的方法,其特征在于,步骤18中,wi的计算公式如下:
Figure FDA0001906613600000022
其中,
Figure FDA0001906613600000023
是si与共有词相似度、Jaccard相似度、共有词TF-IDF权重文本相似度、余弦相似度的协方差之和,cov(si,sj)是si与sj的协方差,di是历史时间周期内的所有营销活动文本和投诉文本之间的si的方差。
4.根据权利要求1所述的方法,其特征在于,步骤一进一步包括有:
从每个营销活动文本和所有投诉文本之间的相似度中挑选出大于相似度阈值的投诉文本,所挑选出的投诉文本即是该营销活动对应的投诉文本,然后计算每项营销活动的万投比,营销活动的万投比是营销活动所对应的投诉文本数和营销活动订购次数的比值。
5.根据权利要求1所述的方法,其特征在于,从营销活动的活动基本描述、活动配置元素、活动目标用户三个方面来提取营销活动的文本指标,包括但不限于:活动名称、活动描述、活动主题、活动类别、活动配置元素、活动配置元素参数、活动配置元素参数值、活动目标用户群描述。
6.根据权利要求1所述的方法,其特征在于,步骤二和三中,当将营销活动的文本指标输入营销文本分类模型时,营销文本分类模型对营销活动的文本指标的具体处理流程进一步包括有:
步骤21、从营销活动的文本指标中过滤掉文本中的无用信息,构建自有词典与停用词,并对文本指标进行分词处理;
步骤22、针对分词处理后的文本指标,运用word2vec算法生成词向量,同时随机生成字符向量;
步骤23、将词向量、字符向量分别输入基于Text-CNN所构建的词-文本分类模型、字符-文本分类模型中,并获得词-文本分类模型、字符-文本分类模型各自全连接层的输出;
步骤24、对词-文本分类模型、字符-文本分类模型各自全连接层的输出进行横向拼接,以获得一个特征向量,然后再将拼接后的特征向量输入全连接层,最后通过全连接层来获得营销活动属于高投诉风险类别的概率。
CN201811534891.3A 2018-12-14 2018-12-14 一种基于自然语言处理技术的营销活动投诉风险预测方法 Active CN109658148B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811534891.3A CN109658148B (zh) 2018-12-14 2018-12-14 一种基于自然语言处理技术的营销活动投诉风险预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811534891.3A CN109658148B (zh) 2018-12-14 2018-12-14 一种基于自然语言处理技术的营销活动投诉风险预测方法

Publications (2)

Publication Number Publication Date
CN109658148A CN109658148A (zh) 2019-04-19
CN109658148B true CN109658148B (zh) 2023-01-17

Family

ID=66113206

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811534891.3A Active CN109658148B (zh) 2018-12-14 2018-12-14 一种基于自然语言处理技术的营销活动投诉风险预测方法

Country Status (1)

Country Link
CN (1) CN109658148B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110889770B (zh) * 2019-10-12 2024-05-24 中国平安财产保险股份有限公司 数据处理方法、装置、设备及存储介质
CN112836011B (zh) * 2020-12-13 2023-05-05 国网甘肃省电力公司信息通信公司 基于大数据应用的分析管理系统构建方法及模型构建

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4525154B2 (ja) * 2004-04-21 2010-08-18 富士ゼロックス株式会社 情報処理システム及び情報処理方法、並びにコンピュータ・プログラム
CN105825403A (zh) * 2016-03-21 2016-08-03 浪潮通信信息系统有限公司 一种预测客户满意度的五位一体方法
CN107729919A (zh) * 2017-09-15 2018-02-23 国网山东省电力公司电力科学研究院 基于大数据技术的深化投诉穿透分析方法

Also Published As

Publication number Publication date
CN109658148A (zh) 2019-04-19

Similar Documents

Publication Publication Date Title
CN107861942B (zh) 一种基于深度学习的电力疑似投诉工单识别方法
CN104820629B (zh) 一种智能的舆情突发事件应急处理系统及方法
Shaffer et al. How we code
CN108363690A (zh) 基于神经网络的对话语义意图预测方法及学习训练方法
CN112765442A (zh) 基于新闻大数据的网络情绪波动指数监测分析方法及系统
CN109710766B (zh) 一种工单数据的投诉倾向分析预警方法及装置
Lalata et al. A sentiment analysis model for faculty comment evaluation using ensemble machine learning algorithms
CN109492097B (zh) 一种企业新闻数据风险分类方法
CN109658148B (zh) 一种基于自然语言处理技术的营销活动投诉风险预测方法
CN105183743A (zh) 一种微博舆情传播范围预测的方法
CN109933783A (zh) 一种不良资产经营领域的合同要素化方法
Smailović Sentiment analysis in streams of microblogging posts
CN117473431A (zh) 一种基于知识图谱的机场数据分类分级方法及系统
KR20230099999A (ko) 인공지능 자연어처리를 이용한 객체 평판 평가 방법, 장치 및 컴퓨터-판독가능 기록매체
CN116910279A (zh) 标签提取方法、设备及计算机可读存储介质
US20230342693A1 (en) Methods and apparatus for natural language processing and governance
Zhang [Retracted] Construction of the Public Management Performance Assessment Algorithm Using Fuzzy Clustering
CN115759078A (zh) 文本信息的处理方法、系统、设备及存储介质
Xia et al. Analysis and prediction of telecom customer churn based on machine learning
CN115080732A (zh) 投诉工单处理方法、装置、电子设备和存储介质
CN105447128A (zh) 一种微博舆情传播范围预测的方法
KR102494256B1 (ko) 업무 정보를 활용한 기업의 의사결정 추천 정보를 생성하는 방법, 장치 및 컴퓨터-판독 가능 기록 매체
Chen [Retracted] Improved Design of Engineering Cost Model Based on Improved Genetic Algorithm
CN113850085B (zh) 企业的等级评估方法、装置、电子设备及可读存储介质
CN113158082B (zh) 一种基于人工智能的媒体内容真实度分析方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 310013 4th floor, No.398 Wensan Road, Xihu District, Hangzhou City, Zhejiang Province

Patentee after: Xinxun Digital Technology (Hangzhou) Co.,Ltd.

Address before: 310013 4th floor, No.398 Wensan Road, Xihu District, Hangzhou City, Zhejiang Province

Patentee before: EB Information Technology Ltd.