CN116956863A - 基于大数据的一种深加工数据校验方法 - Google Patents
基于大数据的一种深加工数据校验方法 Download PDFInfo
- Publication number
- CN116956863A CN116956863A CN202310680956.XA CN202310680956A CN116956863A CN 116956863 A CN116956863 A CN 116956863A CN 202310680956 A CN202310680956 A CN 202310680956A CN 116956863 A CN116956863 A CN 116956863A
- Authority
- CN
- China
- Prior art keywords
- data
- database
- comparison
- sequence
- inspection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 14
- 238000013524 data verification Methods 0.000 title claims abstract description 10
- 238000012545 processing Methods 0.000 title claims abstract description 10
- 238000007689 inspection Methods 0.000 claims abstract description 36
- 238000012360 testing method Methods 0.000 claims abstract description 14
- 238000013075 data extraction Methods 0.000 claims abstract description 6
- 230000000007 visual effect Effects 0.000 claims description 3
- 238000012795 verification Methods 0.000 description 7
- 230000008676 import Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/194—Calculation of difference between files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/083—Shipping
- G06Q10/0831—Overseas transactions
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Economics (AREA)
- Databases & Information Systems (AREA)
- Development Economics (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了数据检验领域的基于大数据的一种深加工数据校验方法，包括步骤：S1：获取海关检验前的产品数据信息，定义为第一数据库，所述第一数据库中的数据顺序排列；获取海关检验后的产品数据信息，定义为第二数据库，所述第二数据库中的数据顺序排列；S2；所述第一数据库中与所述第二数据库中数据的类型及排列顺序一一对应，记为数据组集；S3：通过数据提取模块分别依序提取第一数据库与第二数据库中对应的数据，记为一组数据；S4：通过数据对比模块比对提取的一组数据并输出检验结果。本发明能够及时发现检验前后产品数据的不同，便于统计。
Description
技术领域
本发明涉及数据检验领域，具体涉及基于大数据的一种深加工数据校验方法。
背景技术
进出口的货物均需要在海关处进行上报和登记，海关等主管部门在对货物上传的数据与实际货物的数据进行检验的过程中，可能会存在一些货物无法通过海关安检，使收货的数据发生改变。当货物种类与数量多时，主管部门检验后的数据需要录入到系统中，企业与海关系统数据对接后再与检验前的货物数据进行比对，由于货物种类数量众多，工作量繁杂，难以快速发现检验前后数据的变化，因此需要对其进行改进。
发明内容
解决的技术问题
针对现有技术中的问题，本发明提出基于大数据的一种深加工数据校验方法。
技术方案
本发明通过以下技术方案予以实现：
基于大数据的一种深加工数据校验方法，包括以下步骤：
S1：获取海关检验前的产品数据信息，定义为第一数据库，第一数据库中的数据顺序排列；获取海关检验后的产品数据信息，定义为第二数据库，第二数据库中的数据顺序排列；
S2；所述第一数据库中与所述第二数据库中数据的类型一一对应，所述第一数据库中的数据与所述第二数据库中的数据的排列顺序一一对应，记为对比数据组；
S3：通过数据提取模块分别按照第一数据库中数据的顺序提取所述第一数据库中的数据，并按照与所述第一数据库中数据的顺序提取所述第二数据库中对应的数据，记为第一对比数据组；
S4：通过数据对比模块比对提取的所述第一对比数据组并输出检验结果；
S5：若检验结果表明所述第一数据组无差异，则按照所述第一数据库中的数据顺序，在所述第一数据库和所述第二数据库中提取第二对比数据组；若检验结果表明有差异，则标记所述第二对比数据组后，再按照所述第一数据库中的数据顺序提取下一组对比数据组。
进一步地，通过大数据获取过往五年的海关检验前、海关检验后的产品数据信息，以及海关检验前后产品数据信息的校验结果，预估本次的检验结果，根据所述校验结果以及所述第一数据库中数据的顺序预估与所述第一数据库中数据顺序对应的对比数据组的检验结果，得到预估的检验结果。
进一步地，通过数据对比模块统计出有差异的数据组占总数据组集的比例，与所述预估的检验结果作对比。
进一步地，采用可视化显示方式对检验结果输出有差异的数据组进行标记。
进一步地，标记显示在第一数据库与第二数据库中对应位置的数据上。
进一步地，采用列表形式，将检验结果输出有差异的数据组单独汇成列表排列显示。
有益效果
采用本发明提供的技术方案，与已知的公有技术相比，具有如下
有益效果：
本发明提出了基于大数据的一种深加工数据校验方法，能够将海关检验前与海关检验后收获的产品数据信息定义为两个数据库，并将数据库中的数据按顺序对应排列后记为对比数据组，通过数据提取模块提取对比数据组，通过数据对比模块依次对对比数据组进行对比，能够方便快捷并且及时发现海关检验前后产品数据的不同，便于统计。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明的整体框架图；
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面结合实施例对本发明作进一步的描述。
实施例1，结合图1，基于大数据的一种深加工数据校验方法，包括以下步骤：
S1：获取海关检验前的产品数据信息，定义为第一数据库，第一数据库中的数据顺序排列；获取海关检验后的产品数据信息，定义为第二数据库，第二数据库中的数据顺序排列；
S2；第一数据库中与第二数据库中数据的类型一一对应，第一数据库中数据与第二数据库中数据的排列顺序一一对应，记为对比数据组；
S3：通过数据提取模块分别按照第一数据库中数据的顺序提取第一数据库与第二数据库中对应的数据，记为第一对比数据组；
S4：通过数据对比模块比对提取的第一对比数据组，并输出检验结果；
S5：若检验结果表明所述第一对比数据组无差异，则按照第一数据库中数据的顺序提取第一数据库中的数据和第二数据库中的数据，记作第二对比数据组；经数据对比模块对比所述第二对比数据组，若检验结果输出有差异，则标记所述第二对比数据组后，再按照第一数据库中的数据顺序提取下一组对比数据组。
本发明提出了基于大数据的一种深加工数据校验方法，能够将检验前与检验后收获的产品数据信息定义为两个数据库，并将数据库中的数据按顺序对应排列后记为数据组，通过数据提取模块提取数据组，通过数据对比模块依次对比数据组集，能够及时发现检验前后产品数据的不同，便于统计。
进一步地，通过大数据获取过往五年的检验前、检验后的产品数据信息，以及检验前后产品数据信息的校验结果，预估本次的检验结果。通过数据对比模块统计出有差异的数据组占总数据组集的比例，与预估的检验结果作对比。通过大数据统计，还可以获取过往五年中检验前后产品数据的变化数据，从而对本次的检验结果进行预估，便于作为企业进出口货物时的参考。
进一步地，采用可视化显示方式对检验结果输出有差异的数据组进行标记。标记显示在第一数据库与第二数据库中对应位置的数据上。采用列表形式，将检验结果输出有差异的数据组单独汇成列表排列显示。能够使检验前后有差异的产品的数据及时凸显，使有差异的数据直观显示出来。
在本说明书的描述中，参考术语“一个实施例”、“示例”、“具体示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节，也不限制该发明的具体实施方式。显然，根据本说明书的内容，可作很多的修改和变化。本说明书选取并具体描述这些实施例，是为了更好地解释本发明的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。
Claims (1)
1.基于大数据的一种深加工数据校验方法，其特征在于：包括以下步骤：
S1：获取海关检验前的产品数据信息，定义为第一数据库，第一数据库中的数据顺序排列；获取海关检验后的产品数据信息，定义为第二数据库，第二数据库中的数据顺序排列；
S2；所述第一数据库中与所述第二数据库中数据的类型一一对应，所述第一数据库与所述第二数据库中数据的排列顺序一一对应，记为对比数据组；
S3：通过数据提取模块分别按照所述第一数据库中的数据顺序提取第一数据库中的数据，并按照所述第一数据库中的数据顺序对应第二数据库中对应的数据，记为第一对比数据组；
S4：通过数据对比模块比对提取的所述对比数据组并输出对比后的检验结果；
S5：若检验结果表明所述第一对比数据组无差异，则按所述第一数据库中的数据顺序提取所述第一数据库中的数据和所述第二数据库中的数据，组成第二对比数据组；
若检验结果表明所述第二对比数据组有差异，则标记所述第二数据组后，再按照所述第一数据库中数据的顺序提取所述第一数据库中的数据和所述第二数据库中的数据，组成下一组对比数据组；
采用可视化显示方式对所述检验结果输出有差异的数据组进行标记；
标记显示在第一数据库与第二数据库中对应位置的数据的具体字符上；
采用列表形式，将检验结果输出有差异的对比数据组单独汇成列表排列显示；
通过大数据获取过往五年的海关检验前、海关检验后的产品数据信息，以及海关检验前后产品数据信息的校验结果，根据所述校验结果以及所述第一数据库中数据的顺序预估与所述第一数据库中数据顺序对应的对比数据组的检验结果，得到预估的检验结果；
通过数据对比模块统计出有差异的数据组占总数据组集的比例，与所述预估的检验结果作对比。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310680956.XA CN116956863A (zh) | 2019-06-04 | 2019-06-04 | 基于大数据的一种深加工数据校验方法 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310680956.XA CN116956863A (zh) | 2019-06-04 | 2019-06-04 | 基于大数据的一种深加工数据校验方法 |
| CN201910481935.9A CN110377883A (zh) | 2019-06-04 | 2019-06-04 | 基于大数据的一种深加工数据校验方法 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910481935.9A Division CN110377883A (zh) | 2019-06-04 | 2019-06-04 | 基于大数据的一种深加工数据校验方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116956863A true CN116956863A (zh) | 2023-10-27 |
Family
ID=68249691
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910481935.9A Pending CN110377883A (zh) | 2019-06-04 | 2019-06-04 | 基于大数据的一种深加工数据校验方法 |
| CN202310680956.XA Pending CN116956863A (zh) | 2019-06-04 | 2019-06-04 | 基于大数据的一种深加工数据校验方法 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910481935.9A Pending CN110377883A (zh) | 2019-06-04 | 2019-06-04 | 基于大数据的一种深加工数据校验方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (2) | CN110377883A (zh) |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102445941B (zh) * | 2011-11-18 | 2013-12-18 | 北京交通大学 | 列控系统车载设备互联互通测试结果自动判定及分析方法 |
| CN107688618B (zh) * | 2017-08-08 | 2019-03-12 | 平安科技（深圳）有限公司 | 数据对比方法、装置、计算机设备和存储介质 |
| CN108763358A (zh) * | 2018-05-16 | 2018-11-06 | 阿里巴巴集团控股有限公司 | 一种数据校验方法及装置 |
| CN109635256B (zh) * | 2018-12-20 | 2023-07-11 | 上海掌门科技有限公司 | 用于校验数据的方法和装置 |
-
2019
- 2019-06-04 CN CN201910481935.9A patent/CN110377883A/zh active Pending
- 2019-06-04 CN CN202310680956.XA patent/CN116956863A/zh active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| CN110377883A (zh) | 2019-10-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Velte | Does board composition have an impact on CSR reporting? | |
| AU2023201724A1 (en) | System for counting number of game tokens | |
| WO2008011932A1 (de) | Verfahren zur überprüfung eines zeit- und/oder temperatursensitiveen indikators | |
| DE102011120721A1 (de) | Verfahren und Vorrichtung zum optischen Prüfen von bei der Herstellung und/oder Verpackung von Zigaretten zu prüfenden Objekten | |
| DE102019109289A1 (de) | System und Verfahren zur Erkennung des potenziellen Betrugs seitens des Kassierers, sowie das Verfahren zur Bildung des Warenauszugs fürs Training des künstlichen Neuronennetzes | |
| CN105930461A (zh) | 实现关联信息节点可视化追踪的数据处理方法 | |
| CN115063084A (zh) | 一种卷烟零售商户库存盘点方法及系统 | |
| JP6507459B2 (ja) | 会計処理システム | |
| CN107133266A (zh) | 视频镜头类别的检测方法及装置和数据库更新方法及装置 | |
| WO2007033902A2 (de) | Verfahren und einrichtung zur überprüfung der bildausgabe eines anzeigegerätes | |
| CN116956863A (zh) | 基于大数据的一种深加工数据校验方法 | |
| CN110309737A (zh) | 一种应用于香烟柜台的信息处理方法、装置及系统 | |
| Lutz et al. | The product life cycle and the export position of the United States | |
| NO339507B1 (no) | Fremgangsmåte, anordning og system for import av tekstdata til en database | |
| CN105678113B (zh) | 基于表型性状的花生特异性测试中的近似品种筛选方法 | |
| DE112008000361T5 (de) | Verfahren zur Erfassung der Warenbewegung auf dem Markt und ein Identifikator zur Durchführung des Verfahrens | |
| CN112632953B (zh) | 一种快速准确侦测多次上传的物料清单属于同一产品的方法 | |
| EP3475909A1 (de) | Verfahren und system zur identifikation eines produkts | |
| Penning et al. | Information quality assessment and improvement of student information in the university environment | |
| CN107491906A (zh) | 测绘产品检查方法及系统 | |
| CN110209715A (zh) | 用于涡流检测数据分析的数据预分析方法 | |
| CN109388633A (zh) | 一种数据清洗方法 | |
| DE102019214227A1 (de) | Verfahren und Einrichtung zum Prüfen der Originalität eines Produkts | |
| CN114202518A (zh) | 一种基于深度学习的交互式图像标注方法 | |
| Tonks et al. | Market segments: fallacies and faults |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |