CN105426492A - 一种知识产权信息抓取与管理的方法 - Google Patents

一种知识产权信息抓取与管理的方法 Download PDF

Info

Publication number
CN105426492A
CN105426492A CN201510820954.1A CN201510820954A CN105426492A CN 105426492 A CN105426492 A CN 105426492A CN 201510820954 A CN201510820954 A CN 201510820954A CN 105426492 A CN105426492 A CN 105426492A
Authority
CN
China
Prior art keywords
information code
information
data
empty
type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510820954.1A
Other languages
English (en)
Inventor
陈秀成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingyuan Hengnan Information Co ltd
Original Assignee
Qingyuan Hengnan Information Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingyuan Hengnan Information Co ltd filed Critical Qingyuan Hengnan Information Co ltd
Priority to CN201510820954.1A priority Critical patent/CN105426492A/zh
Publication of CN105426492A publication Critical patent/CN105426492A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/951—Indexing; Web crawling techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G06F16/9566—URL specific, e.g. using aliases, detecting broken or misspelled links

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种知识产权信息抓取与管理的方法，其基于专利、商标和软件著作权三种常用的知识产权的公众公开的登记或变更公告数据的页面级别的通过getHTTPPage方法的抓取技术，再结合标记分析方法获得第一信息码、第二信息码和第三信息码，再通过上述信息码之间的对比，在相应程序下生成第四信息码，然后依对应的方法写入第一知识产权信息库和第二知识产权信息库，以备不同的场合使用的一种企业知识产权信息抓取与管理的方法。

Description

一种知识产权信息抓取与管理的方法
技术领域
本发明主要涉及一种企业知识产权信息抓取与管理方法，尤其是通过知识产权公布网站的页面信息抓取、分析、整理和建档的方法。
背景技术
目前，知识产权的信息获取大多基于通过相关部门所公开的数据接口来实现知识产权信息的同步，或者通过复杂的运算与抓取而获得信息量较少的信息。此方法对于经常性的、大数据的企业知识产权的信息获取显得难以胜任，并且应用成本高，风险大，不利于中小中介服务机构推广应用。
知识产权的信息，尤其是建立企业研发信用体系，更显得非常重要，同时也是中介服务机构提高自身服务质量的有力支持。
发明内容
为了解决上述问题，本发明提出了一种基于专利、商标和软件著作权三种常用的知识产权的公众公开的登记或变更公告数据的页面级别的通过getHTTPPage方法的抓取技术，再结合标记分析方法获得第一信息码、第二信息码和第三信息码，再通过上述信息码之间的对比，在相应程序下生成第四信息码，然后依对应的方法写入第一知识产权信息库和第二知识产权信息库，以备不同的场合使用的一种知识产权信息抓取与管理的方法。
一种知识产权信息抓取与管理的方法，其主要包含以下步骤：
步骤S102，在企业信息库中读出企业名称的待查数据；
步骤S103，根据三种类别将步骤S102所读出的企业名称通过函数转为下列所列的对应数据编码：专利公告信息对应编码方式为UTF8，软件著作权公告信息对应编码方式为GB2312，商标公告信息对应编码方式为UTF8；
步骤S104，在步骤S103生成的对应编码方式的数据后，通过URLencode/URLDecode加密/解密函数将上述步骤S103的数据进行加密，并输出为第一变量，其中软件著作权公告信息中，第一变量为明文，不进行加密；
步骤S105，以上述第一变量作为对应的URL的对应参数值生成第一URL；
步骤S106，通过getHTTPPage方式访问步骤S105生成的第一URL，获得第一URL对应的页面的HTML格式的数据源码供步骤S107进行标记截取；
步骤S107，通过S106获得的HTML格式的数据源码，通过以“<title>”标记开始和“</title>”标记结束生成第一信息码；三种类别的知识产权类型对应如下标记生成第二信息码：专利类型的开始标记为“sop-totalCount”，结束标记为“</span>]”，商标类型的开始标记为“regNum”，结束标记为“regNum”，软件著作权类型的开始标记为“登记日期”，结束标记为“>2”；软件著作权类型时获取第三信息码，其开始标记为“中国”，结束标记为“<tdclass=”，其中商标类型和专利类型没有第三信息码；
当第一信息码的值为空时，返回S102步骤，同时检查网络是否正常；当第二信息码为空时，跳过步骤S108，并设置第四信息码的值为“0”；当第二信息码不为空时，执行步骤S108；
步骤S108，生成第四信息码：知识产权类型为软件著作权类型时，当第二信息码不为空，并且第三信息码为空时，第四信息码通过开始标记为“[总数”，结束标记为“]”获取生成，第二信息码不为空并且第三信息码不为空时，第四信息码的值为“1”；知识产权类型为专利时，第二信息码不为空时，第四信息码通过第二信息码去杂质后剩下数字；知识产权类型为商标时，第二信息码不为空时，第四信息码的值为“1”；
步骤S109，当第二信息码不为空时，将第一信息码、第二信息码和第四信息码的信息，以及相应的辅助数据对应存贮在拥有知识产权的企业信息库中；
将所有数据执行步骤S110存入知识产权的企业信息总表，同时返回步骤S101将已经成功检索的记录的进行已执行的标记然后，返回步骤S102循环执行，直至所有符合条件的企业数据检索完成为止。
执行步骤S102前执行步骤S101进行企业信息查询中，进行企业类型、企业名称、企业成立时间、企业注册资金和企业注册地址的一种条件或者多个条件组合检索筛选出所需要检索的数据。
步骤S110还可以通过将数据存贮在步骤S101所述的企业信息表对应的字段中，同时将相应的执行标记字段的值标记为已执行，然后步骤S102循环执行，直至所有符合条件的企业数据检索完成为止。
步骤S109所述的辅助数据包括通过步骤S102所读出的企业名称传递而获得企业名称，通过步骤S107和步骤S108追加获取当前的系统时间。
在执行步骤S102前，通过设置一定数量的采样数据进行采样，采样数据包括企业拥有三种知识产权类别的一种、两种、三种及上述组合的一定量的企业，以及没有任何知识产权的一定量的企业，采样走完整个流程，查看相关采集是否正常，此步骤确定网络是否正常，官方公布数据格式是否发生变化和确定所设置的数据编码方式是否正确。
步骤S107所述的知识产权类型为软件著作权时，当第二信息码不为空时，通过设置第四信息码的值为“1”而不采集生成第三信息码。
步骤S103所述的编码方式，当官方机构公布的数据对应的编码发生变更时，本方法将根据实际所发生的变化变更编码方式。
步骤S104所述的URL中，当官方机构公布时采用的URL进行加密发布时，本方法将根据实际情况进行数据加密编码。
步骤S104所述的URLencode/URLDecode加密/解密函数将上述步骤S103的数据进行加密，其加密编码根据实际情况进行一次加密、二次和多次加密。
附图说明
图1一种知识产权信息抓取与管理的方法流程图。
具体实施方式
一种知识产权信息抓取与管理的方法，其主要包含以下步骤：
步骤S101，进行企业信息查询中，进行企业类型等条件检索筛选出所需要检索的数据。
步骤S102，在企业信息库中读出企业名称的待查数据，设变量为“aa”。
步骤S103，根据三种类别将步骤S102所读出的企业名称通过函数转为下列所列的对应数据编码：专利公告信息对应编码方式为UTF8，软件著作权公告信息对应编码方式为GB2312，商标公告信息对应编码方式为UTF8。
其中UTF8编码的需要在文件头加入以下代码段：
<scriptlanguage="javaScript"runat="Server">
functionce(str)
{
returnencodeURIComponent(str)
}
</script>
<head>
<metahttp-equiv="Content-Type"content="text/html;charset=UTF8">
<metahttp-equiv="Content-Language"content="zh-cn">
</head>
GB2312编码的文件头加入如下代码：
<head>
<metahttp-equiv="Content-Type"content="text/html;charset=gb2312">
</head>
步骤S104，在步骤S103生成的对应编码方式的数据后，通过URLencode/URLDecode加密/解密函数将上述步骤S103的数据进行加密，并输出为第一变量，其中软件著作权公告信息中，第一变量为明文，不进行加密；URLencode/URLDecode加密/解密函数将上述步骤S103的数据进行加密，其加密编码根据实际情况进行一次加密、二次和多次加密，其中一次加密的bb=ce(""&aa&"")，两次加密的方式为cc=ce(""&bb&"")，多次加密的方法类似。
步骤S105，以上述第一变量作为对应的URL的对应参数值生成第一URL，使用ASP分别表达如下第一变量假设为cname：
1.专利公告数据：
http://cpquery.sipo.gov.cn//txnQueryOrdinaryPatents.do?select-key%3Ashenqingh=&select-key%3Azhuanlimc=&select-key%3Ashenqingrxm=<%=cname%>&select-key%3Azhuanlilx=&select-key%3Ashenqingr_from=&select-key%3Ashenqingr_to=&attribute-node:record_start-row=60&attribute-node:record_page-row=100&#anchor
2.商标公告数据：
http://sbcx.saic.gov.cn:9080/tmois/wszhcx_getLikeCondition.xhtml?appCnName=<%cname%>&intCls=&paiType=0
3.软件著作权公告数据：
http://www.ccopyright.com.cn/cpcc/RRegisterAction.do?method=list&no=fck&sql_name=&sql_regnum=&sql_author=<%=cname%>&curPage=1&count=10&sortOrder=&sortLabel=。
步骤S106，通过getHTTPPage方式访问步骤S105生成的第一URL，获得第一URL对应的页面的HTML格式的数据源码供步骤S107进行标记截取。
步骤S107，通过S106获得的HTML格式的数据源码，通过以“<title>”标记开始和“</title>”标记结束生成第一信息码；三种类别的知识产权类型对应如下标记生成第二信息码：专利类型的开始标记为“sop-totalCount”，结束标记为“</span>]”，商标类型的开始标记为“regNum”，结束标记为“regNum”，软件著作权类型的开始标记为“登记日期”，结束标记为“>2”；软件著作权类型时获取第三信息码，其开始标记为“中国”，结束标记为“<tdclass=”，其中商标类型和专利类型没有第三信息码。
当第一信息码的值为空时，返回S102步骤，同时检查网络是否正常；当第二信息码为空时，跳过步骤S108，并设置第四信息码的值为“0”；当第二信息码不为空时，执行步骤S108。
步骤S108，生成第四信息码：知识产权类型为软件著作权类型时，当第二信息码不为空，并且第三信息码为空时，第四信息码通过开始标记为“[总数”，结束标记为“]”获取生成，第二信息码不为空并且第三信息码不为空时，第四信息码的值为“1”；知识产权类型为专利时，第二信息码不为空时，第四信息码通过第二信息码去杂质后剩下数字；知识产权类型为商标时，第二信息码不为空时，第四信息码的值为“1”。
步骤S109，当第二信息码不为空时，将第一信息码、第二信息码和第四信息码的信息，以及相应的辅助数据对应存贮在拥有知识产权的企业信息库中，辅助数据包括通过步骤S102所读出的企业名称传递而获得企业名称，通过步骤S107和步骤S108追加获取当前的系统时间。
将所有数据执行步骤S110存入知识产权的企业信息总表，同时返回步骤S101将已经成功检索的记录的进行已执行的标记然后，返回步骤S102循环执行，直至所有符合条件的企业数据检索完成为止。
在执行步骤S102前，通过设置一定数量的采样数据进行采样，采样数据包括企业拥有三种知识产权类别的一种、两种、三种及上述组合的一定量的企业，以及没有任何知识产权的一定量的企业，采样走完整个流程，查看相关采集是否正常，此步骤确定网络是否正常，官方公布数据格式是否发生变化和确定所设置的数据编码方式是否正确。
上述实施方式仅仅为本发明的其中实施方式之一。

Claims (1)

1.一种知识产权信息抓取与管理的方法，其特征包括，其主要包含以下步骤：
步骤S102，在企业信息库中读出企业名称的待查数据；
步骤S103，根据三种类别将步骤S102所读出的企业名称通过函数转为下列所列的对应数据编码：专利公告信息对应编码方式为UTF8，软件著作权公告信息对应编码方式为GB2312，商标公告信息对应编码方式为UTF8；
步骤S104，在步骤S103生成的对应编码方式的数据后，通过URLencode/URLDecode加密/解密函数将上述步骤S103的数据进行加密，并输出为第一变量，其中软件著作权公告信息中，第一变量为明文，不进行加密；
步骤S105，以上述第一变量作为对应的URL的对应参数值生成第一URL；
步骤S106，通过getHTTPPage方式访问步骤S105生成的第一URL，获得第一URL对应的页面的HTML格式的数据源码供步骤S107进行标记截取；
步骤S107，通过S106获得的HTML格式的数据源码，通过以“<title>”标记开始和“</title>”标记结束生成第一信息码；三种类别的知识产权类型对应如下标记生成第二信息码：专利类型的开始标记为“sop-totalCount”，结束标记为“</span>]”，商标类型的开始标记为“regNum”，结束标记为“regNum”，软件著作权类型的开始标记为“登记日期”，结束标记为“>2”；软件著作权类型时获取第三信息码，其开始标记为“中国”，结束标记为“<tdclass=”，其中商标类型和专利类型没有第三信息码；
当第一信息码的值为空时，返回S102步骤，同时检查网络是否正常；当第二信息码为空时，跳过步骤S108，并设置第四信息码的值为“0”；当第二信息码不为空时，执行步骤S108；
步骤S108，生成第四信息码：知识产权类型为软件著作权类型时，当第二信息码不为空，并且第三信息码为空时，第四信息码通过开始标记为“[总数”，结束标记为“]”获取生成，第二信息码不为空并且第三信息码不为空时，第四信息码的值为“1”；知识产权类型为专利时，第二信息码不为空时，第四信息码通过第二信息码去杂质后剩下数字；知识产权类型为商标时，第二信息码不为空时，第四信息码的值为“1”；
步骤S109，当第二信息码不为空时，将第一信息码、第二信息码和第四信息码的信息，以及相应的辅助数据对应存贮在拥有知识产权的企业信息库中；
将所有数据执行步骤S110存入知识产权的企业信息总表，同时返回步骤S101将已经成功检索的记录的进行已执行的标记然后，返回步骤S102循环执行，直至所有符合条件的企业数据检索完成为止；执行步骤S102前执行步骤S101进行企业信息查询中，进行企业类型、企业名称、企业成立时间、企业注册资金和企业注册地址的一种条件或者多个条件组合检索筛选出所需要检索的数据；步骤S110还可以通过将数据存贮在步骤S101所述的企业信息表对应的字段中，同时将相应的执行标记字段的值标记为已执行，然后步骤S102循环执行，直至所有符合条件的企业数据检索完成为止；步骤S109所述的辅助数据包括通过步骤S102所读出的企业名称传递而获得企业名称，通过步骤S107和步骤S108追加获取当前的系统时间；在执行步骤S102前，通过设置一定数量的采样数据进行采样，采样数据包括企业拥有三种知识产权类别的一种、两种、三种及上述组合的一定量的企业，以及没有任何知识产权的一定量的企业，采样走完整个流程，查看相关采集是否正常，此步骤确定网络是否正常，官方公布数据格式是否发生变化和确定所设置的数据编码方式是否正确；S107所述的知识产权类型为软件著作权时，当第二信息码不为空时，通过设置第四信息码的值为“1”而不采集生成第三信息码；步骤S103所述的编码方式，当官方机构公布的数据对应的编码发生变更时，本方法将根据实际所发生的变化变更编码方式；步骤S104所述的URL中，当官方机构公布时采用的URL进行加密发布时，本方法将根据实际情况进行数据加密编码；步骤S104所述的URLencode/URLDecode加密/解密函数将上述步骤S103的数据进行加密，其加密编码根据实际情况进行一次加密、二次和多次加密。
CN201510820954.1A 2015-11-24 2015-11-24 一种知识产权信息抓取与管理的方法 Pending CN105426492A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510820954.1A CN105426492A (zh) 2015-11-24 2015-11-24 一种知识产权信息抓取与管理的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510820954.1A CN105426492A (zh) 2015-11-24 2015-11-24 一种知识产权信息抓取与管理的方法

Publications (1)

Publication Number Publication Date
CN105426492A true CN105426492A (zh) 2016-03-23

Family

ID=55504704

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510820954.1A Pending CN105426492A (zh) 2015-11-24 2015-11-24 一种知识产权信息抓取与管理的方法

Country Status (1)

Country Link
CN (1) CN105426492A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106776885A (zh) * 2016-11-29 2017-05-31 盐城工学院 一种数据导出方法及装置
CN107122495A (zh) * 2017-05-24 2017-09-01 苏州唯亚信息科技股份有限公司 适用于专利公开科技数据库的信息抓取方法
CN107220227A (zh) * 2017-04-28 2017-09-29 长沙智德知识产权代理有限公司 知识产权官方文件电子存档命名系统及方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106776885A (zh) * 2016-11-29 2017-05-31 盐城工学院 一种数据导出方法及装置
CN106776885B (zh) * 2016-11-29 2021-03-30 盐城工学院 一种数据导出方法及装置
CN107220227A (zh) * 2017-04-28 2017-09-29 长沙智德知识产权代理有限公司 知识产权官方文件电子存档命名系统及方法
CN107122495A (zh) * 2017-05-24 2017-09-01 苏州唯亚信息科技股份有限公司 适用于专利公开科技数据库的信息抓取方法

Similar Documents

Publication Publication Date Title
WO2018036272A1 (zh) 新闻内容的推送方法、电子装置及计算机可读存储介质
Bruns et al. Tools and methods for capturing Twitter data during natural disasters
Bröring et al. OGC Sensor Observation Service Interface Standard, Version 2.0.
CN104077341B (zh) 即时通讯中生成关键词自动回复映射关系的方法和装置
CN104699718A (zh) 用于快速引入业务数据的方法和装置
EP2776951A1 (en) Image annotation method and system
EP2550637A2 (en) Detecting virality paths and supporting referral monetization
CN103780709A (zh) 一种对微信或易信信息进行快捷编辑和发布的方法及系统
CN102546668A (zh) 一种独立访问者的统计方法、装置及系统
WO2019014598A1 (en) METHODS AND SYSTEMS FOR CITATION MANAGEMENT AND ALLOCATION
CN105426492A (zh) 一种知识产权信息抓取与管理的方法
US9069681B1 (en) Real-time log joining on a continuous stream of events that are approximately ordered
Margi et al. Software-defined wireless sensor networks approach: Southbound protocol and its performance evaluation
US20080313291A1 (en) Method and apparatus for encoding data
US20120315931A1 (en) Short message processing method and apparatus
WO2014182419A1 (en) Offline searching of encrypted content
CN105426503A (zh) 一种商标预警的方法
CN105139309A (zh) 一种企业软件著作权公告信息抓取与管理的方法
JP2007041983A (ja) 申請書作成プログラムおよび申請書作成装置
CN105117848A (zh) 一种企业知识产权信息抓取与管理系统
CN105138651A (zh) 一种企业商标公告信息抓取与管理的方法
CN105160472A (zh) 一种企业软件著作权公告信息抓取与管理系统
Baumann et al. OGC® Web Coverage Service 2.0 Interface Standard-Earth Observation Application Profile, Version 1.1.
CN105278965A (zh) 一种专利信息管理的方法
CN105488617A (zh) 一种实现基于知识产权评价的众筹方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160323