CN117033474A - 散货港口的事件数据采集方法及装置 - Google Patents
散货港口的事件数据采集方法及装置 Download PDFInfo
- Publication number
- CN117033474A CN117033474A CN202310807109.5A CN202310807109A CN117033474A CN 117033474 A CN117033474 A CN 117033474A CN 202310807109 A CN202310807109 A CN 202310807109A CN 117033474 A CN117033474 A CN 117033474A
- Authority
- CN
- China
- Prior art keywords
- data
- execution
- acquisition
- task flow
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000012545 processing Methods 0.000 claims abstract description 14
- 238000013480 data collection Methods 0.000 claims description 19
- 238000003860 storage Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 16
- 230000005856 abnormality Effects 0.000 claims description 7
- 238000012544 monitoring process Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000012800 visualization Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000011112 process operation Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/083—Shipping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/103—Workflow collaboration or project management
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Human Resources & Organizations (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Entrepreneurship & Innovation (AREA)
- General Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Data Mining & Analysis (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本公开涉及数据处理技术领域，提供了散货港口的事件数据采集方法及装置。该方法包括：获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；若采集成功，将实时采集的数据存储至目标数据库；若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。本公开实施例可以提高数据标准化结构化水平，自动收集数据生成事件的详细记录。
Description
技术领域
本公开涉及数据处理技术领域，尤其涉及散货港口的事件数据采集方法及装置。
背景技术
目前散货港口领域中，管控系统，生产执行系统中都包含了大量的设备、物资、流程、人员等大量的数据，数据量大，种类多，范围广。即便某些设备的自动化程度较高，数据采集功能也逐渐完善，但是仍然面临着数据分散，数据结构乱，需要手动录入等问题，且对于某些工作流中，通常需要人工确认，启停。从而影响了流程作业的效率和使用者的作业强度。面临着对于事件信息无法很好的进行追溯。数据处理难度大，数据可用性差，事件流程情况可视化程度差等问题。
发明内容
有鉴于此，本公开实施例提供了散货港口的事件数据采集方法及装置，以解决现有技术中数据处理难度大，数据可用性差，事件流程情况可视化程度差的问题。
本公开实施例的第一方面，提供了一种散货港口的事件数据采集方法，包括：
获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；
根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；
若采集成功，将实时采集的数据存储至目标数据库；
若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
在一些实施例中，所述任务流模板包括多个依序执行的作业模板，每个作业模板包括多个依序执行的执行事件，其中，
若当前执行的执行事件对应的数据在预设的执行时限内采集成功，表示采集成功；
若当前执行的执行事件对应的数据未在预设的执行时限内采集成功，或者检测到对应执行模块的运行状态表示异常，表示采集失败。
在一些实施例中，任一所述任务流模板的生成步骤包括：
获取目标任务流，并将所述目标任务流划分为多个子流程和多个执行事件，其中，每个所述子流程对应至少一个执行事件；
将每个子流程对应的执行事件根据逻辑关系对应至不同类型的网关执行，生成与所述每个子流程对应的多个作业模板；
确定每个作业模板中每个执行事件的执行类型、通过条件和执行时限，并更新至每个作业模板得到任务流模板。
在一些实施例中，所述执行事件对应的采集数据的格式可以为布尔型或数值型；
当所述采集数据为布尔型数据时，所述采集数据发生变化时存储；
当所述采集数据为数值型数据时，根据预设的时长定时存储。
本公开实施例的第二方面，提供了一种散货港口的事件数据采集装置，包括：
获取模块，用于获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；
采集模块，用于根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；
存储模块，用于若采集成功，将实时采集的数据存储至目标数据库；
告警模块，用于若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
在一些实施例中，所述任务流模板包括多个依序执行的作业模板，每个作业模板包括多个依序执行的执行事件，其中，
若当前执行的执行事件对应的数据在预设的执行时限内采集成功，表示采集成功；
若当前执行的执行事件对应的数据未在预设的执行时限内采集成功，或者检测到对应执行模块的运行状态表示异常，表示采集失败。
在一些实施例中，任一所述任务流模板的生成步骤包括：
获取目标任务流，并将所述目标任务流划分为多个子流程和多个执行事件，其中，每个所述子流程对应至少一个执行事件；
将每个子流程对应的执行事件根据逻辑关系对应至不同类型的网关执行，生成与所述每个子流程对应的多个作业模板；
确定每个作业模板中每个执行事件的执行类型、通过条件和执行时限，并更新至每个作业模板得到任务流模板。
在一些实施例中，所述执行事件对应的采集数据的格式可以为布尔型或数值型；
当所述采集数据为布尔型数据时，所述采集数据发生变化时存储；
当所述采集数据为数值型数据时，根据预设的时长定时存储。
本公开实施例的第三方面，提供了一种电子设备，包括存储器、处理器以及存储在存储器中并且可以在处理器上运行的计算机程序，该处理器执行计算机程序时实现上述方法的步骤。
本公开实施例的第四方面，提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现上述方法的步骤。
本公开实施例的第五方面，提供了一种计算机程序产品，该计算机程序产品包括计算机程序或指令，该计算机程序或指令被处理器执行时实现上述方法的步骤。
有益效果
本公开实施例与现有技术相比存在的有益效果至少包括：通过获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；若采集成功，将实时采集的数据存储至目标数据库；若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息，可以提高数据标准化结构化水平，自动收集数据生成事件的详细记录。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1是根据本公开实施例提供的散货港口的事件数据采集方法的一个应场景的示意图；
图2是根据本公开实施例提供的一种散货港口的事件数据采集方法的一些实施例的流程图；
图3是根据本公开实施例提供的另一种散货港口的事件数据采集方法的另一些实施例的流程图；
图4是根据本公开实施例提供的一种散货港口的事件数据采集装置的简易结构示意图；
图5是根据本公开实施例提供的电子设备的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例。相反，提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
另外还需要说明的是，为了便于描述，附图中仅示出了与有关本公开相关的部分。在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的系统、装置、模块或单元进行区分，并非用于限定这些系统、装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
下面将参考附图并结合实施例来详细说明本公开。
图1是根据本公开的一些实施例的散货港口的事件数据采集方法的一个应用场景的示意图。
在图1的应用场景中，首先，计算设备101可以获取至少一个任务流模板102，其中，每个所述任务流模板102对应至少一个数据采集模块103。
其次，计算设备101可以根据每个所述任务流模板102，以及与其对应的至少一个数据采集模块103进行实时的数据采集。
再次，若采集成功，计算设备101可以将实时采集的数据存储至目标数据库104。
最后，若采集失败，计算设备101可以记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
数据采集模块103可以指设置于各采集设备上的数据处理模块。在大型设备上，可能在一个设备商设置有多个数据采集模块103。但每个数据采集模块的数据格式是统一的，即其传输的数据结构相同。
数据采集模块103可以指用于采集数据的设备、电子模块、软件等可以采集数据的模块。该模块兼容PLC、楼宇、电力等行业标准协议，该数据采集模块103可以通过驱动对现场的PLC及智能仪表、模块、板卡等进行数据采集，获取各设备点的实时数据。兼容多种行业标准协议，可以使得数据采集模块103的兼容性大大增强。同时，在重要的采集设备上的数据采集模块103可以设有主采集监控模块和冗余采集监控模块。冗余采集监控模块作为主采集监控模块的冗余。在正常运行过程中，主采集监控模块处于工作状态，冗余采集监控模块处于监视状态，主采集监控模块会将采集到的数据发送给冗余采集监控模块进行数据同步。当主采集监控模块发生网络断开等问题时，冗余采集监控模块接收不到主采集监控模块的数据时，冗余采集监控模块在很短的时间内即可代替其进行采集，保证了数据采集的可靠性。
需要说明的是，上述计算设备101可以是硬件，也可以是软件。当计算设备为硬件时，可以实现成多个服务器或终端设备组成的分布式集群，也可以实现成单个服务器或单个终端设备。当计算设备体现为软件时，可以安装在上述所列举的硬件设备中。其可以实现成例如用来提供分布式服务的多个软件或软件模块，也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解，图1中的计算设备的数目仅仅是示意性的。根据实现需要，可以具有任意数目的计算设备。
继续参考图2，示出了根据本公开的散货港口的事件数据采集方法的一些实施例的流程200。该方法可以由图1中的计算设备101来执行。该散货港口的事件数据采集的方法，包括以下步骤：
步骤201，获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块。
在一些实施例中，散货港口的事件数据采集方法的执行主体(如图1所示的计算设备101)可以通过有线连接方式或无线连接方式连接目标设备，然后，获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块。
由于散货港口对应非常多类型的事件处理流程，每个事件处理流程会涉及多个设备、物资、流程、人员等不同类型的数据，因此在处理散货港口的相关数据时，需要先将散货港口日常运行的事件进行分类。每一类事件从头至尾分为多个事件节点，构成一个任务流模板。数据采集模块参照前述介绍。
在一些可选的实现方式中，任一所述任务流模板的生成步骤包括：获取目标任务流，并将所述目标任务流划分为多个子流程和多个执行事件，其中，每个所述子流程对应至少一个执行事件；将每个子流程对应的执行事件根据逻辑关系对应至不同类型的网关执行，生成与所述每个子流程对应的多个作业模板；确定每个作业模板中每个执行事件的执行类型、通过条件和执行时限，并更新至每个作业模板得到任务流模板。
目标任务流可以指散货港口作业时其中一个任务流程对应的多个依序执行的子流程的集合。子流程可以指由多个依序执行的执行事件的集合。执行事件可以指任一单独执行的事件。需要指出的是，执行事件是最小的执行点。由于每个子流程中执行事件之间的逻辑关系可以为排他、并行、包容中的任一种，因此可以通过网关的不同设置来表示执行事件之间的逻辑关系(排他、并行、包容)。作业模板可以指按照执行顺序排列好的包含多个执行事件的子流程的模板。执行事件的执行类型可以指该执行事件是人工操作或自动操作。通过条件可以根据不同的事件进行不同设置，如通过阈值限制等。执行时限可以指每个事件执行的总时长限制。任务流模板可以指由一个目标任务流包含的所有子流程对应的作业模板组合构成的模板。
作为示例，目标任务流可以包括：火车到港流程→火车卸车流程→火车排空流程→火车离港流程等多个子流程。其中每个子流程内部包含有各自的执行事件。例如，火车到港流程包含火车到达事件、火车对车事件、火车信息确认事件等；火车卸车流程包含火车开始作业事件、火车结束作业事件、火车作业结束确认事件等；火车排空流程包含火车排空开始事件、火车排空结束事件等；火车离港流程包含火车信息确认事件、火车确认离港事件等。
在一些实施例中，所述执行事件对应的采集数据的格式可以为布尔型或数值型；当所述采集数据为布尔型数据时，所述采集数据发生变化时存储；当所述采集数据为数值型数据时，根据预设的时长定时存储。通过上述设定，可以大大减轻海量数据的处理压力。
需要指出的是，上述无线连接方式可以包括但不限于3G/4G/5G连接、WiFi连接、蓝牙连接、WiMAX连接、Zigbee连接、UWB(ultra wideband)连接、以及其他现在已知或将来开发的无线连接方式。
步骤202，根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集。
在一些实施例中，上述执行主体可以根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集。由于每个任务流模板在运行时可以对应到不同的需要采集数据的数据采集模块，因此进行数据采集时，需要根据任务流模板中的执行事件来进行采集。需要指出的是，每一个执行事件在执行时，可能同时有多个数据采集模块同时进行数据采集。
步骤203，若采集成功，将实时采集的数据存储至目标数据库。
在一些实施例中，若采集成功，上述执行主体可以将实时采集的数据存储至目标数据库。
目标数据库可以指预先设置的用于存储各类采集数据的数据库。
作为一个示例，该目标数据库可以针对散货港口专门设置的具备高效存储、高效查询、高并发、高可靠性特点的工业级数据库。该数据库支持标准协议，支持丰富的数据访问接口(Restful API、COM、OLEDB、ODBC、JDBC、MQTT等数据接口)，支持标准SQL检索和扩展的高级检索，支持每秒80w/s查询速度，满足各种应用的海量数据请求，满足历史断面查询，支持多种采样查询(步进、线性、趋势等)，并稳定支持500客户端并发访问，满足不同业务场景需求。支持看门狗程序以及加密传输，并带有自我防御机制，不会被恶意访问的客户端造成影响。
需要指出的是，采集成功表示当前采集的执行事件采集成功。同理，采集失败表示当前采集的执行事件采集失败。由于在进行数据采集时，难免碰到各种原因例如设备出现故障，系统崩溃等导致无法进行数据采集的情况，此时会导致当前执行事件采集失败。
在一些可选的实现方式中，若当前执行的执行事件对应的数据在预设的执行时限内采集成功，表示采集成功；若当前执行的执行事件对应的数据未在预设的执行时限内采集成功，或者检测到对应执行模块的运行状态表示异常，表示采集失败。执行模块的运行状态表示异常，表示该执行模块对应的设备或软件发生故障，此时表示采集失败。
步骤204，若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
在一些实施例中，若采集失败，上述执行主体可以记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
本公开的上述各个实施例中的其中一个实施例的有益效果至少包括：通过获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；若采集成功，将实时采集的数据存储至目标数据库；若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息，可以提高数据标准化结构化水平，自动收集数据生成事件的详细记录。
继续参考图3，示出了根据本公开的散货港口的事件数据采集方法的另一些实施例的流程300，该方法可以由图1中的计算设备101来执行。该散货港口的事件数据采集方法包括：
步骤301，获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块，其中，任一所述任务流模板的生成步骤如步骤302-304所示。
步骤302，获取目标任务流，并将所述目标任务流划分为多个子流程和多个执行事件，其中，每个所述子流程对应至少一个执行事件。
步骤303，将每个子流程对应的执行事件根据逻辑关系对应至不同类型的网关执行，生成与所述每个子流程对应的多个作业模板。
步骤304，确定每个作业模板中每个执行事件的执行类型、通过条件和执行时限，并更新至每个作业模板得到任务流模板。
步骤305，根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集。
步骤306，若采集成功，将实时采集的数据存储至目标数据库。
步骤307，若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
在一些实施例中，步骤301-307的具体实现及所带来的技术效果可以参考图2对应的那些实施例中的那些步骤，在此不再赘述。
上述所有可选技术方案，可以采用任意结合形成本申请的可选实施例，在此不再一一赘述。
下述为本公开装置实施例，可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节，请参照本公开方法实施例。
进一步参考图4，作为对上述各图上述方法的实现，本公开提供了散货港口的事件数据采集装置的一些实施例，这些装置实施例与图2上述的那些方法实施例相对应。
如图4所示，一些实施例的散货港口的事件数据采集装置400包括：
获取模块401，用于获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块。
采集模块402，用于根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集。
存储模块403，用于若采集成功，将实时采集的数据存储至目标数据库。
告警模块404，用于若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
在一些实施例的一些可选的实现方式中，所述任务流模板包括多个依序执行的作业模板，每个作业模板包括多个依序执行的执行事件，其中，
若当前执行的执行事件对应的数据在预设的执行时限内采集成功，表示采集成功；
若当前执行的执行事件对应的数据未在预设的执行时限内采集成功，或者检测到对应执行模块的运行状态表示异常，表示采集失败。
在一些实施例的一些可选的实现方式中，任一所述任务流模板的生成步骤包括：
获取目标任务流，并将所述目标任务流划分为多个子流程和多个执行事件，其中，每个所述子流程对应至少一个执行事件；
将每个子流程对应的执行事件根据逻辑关系对应至不同类型的网关执行，生成与所述每个子流程对应的多个作业模板；
确定每个作业模板中每个执行事件的执行类型、通过条件和执行时限，并更新至每个作业模板得到任务流模板。
在一些实施例的一些可选的实现方式中，所述执行事件对应的采集数据的格式可以为布尔型或数值型；
当所述采集数据为布尔型数据时，所述采集数据发生变化时存储；
当所述采集数据为数值型数据时，根据预设的时长定时存储。
可以理解的是，该装置400中记载的诸模块与参考图2描述的方法中的各个步骤相对应。由此，上文针对方法描述的操作、特征以及产生的有益效果同样适用于装置400及其中包含的模块，在此不再赘述。
如图5所示，电子设备500可以包括处理装置(例如中央处理器、图形处理器等)501，其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中，还存储有电子设备500操作所需的各种程序和数据。处理装置501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
通常，以下装置可以连接至I/O接口505：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507；包括例如磁带、硬盘等的存储装置508；以及通信装置509。通信装置509可以允许电子设备500与其他设备进行无线或有线通信以交换数据。虽然图5示出了具有各种装置的电子设备500，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图5中示出的每个方框可以代表一个装置，也可以根据需要代表多个装置。
特别地，根据本公开的一些实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的一些实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序或指令，该计算机程序或指令包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中，该计算机程序可以通过通信装置509从网络上被下载和安装，或者从存储装置508被安装，或者从ROM 502被安装。在该计算机程序被处理装置501执行时，执行本公开的一些实施例的方法中限定的上述功能。
需要说明的是，本公开的一些实施例上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述装置中所包含的；也可以是单独存在，而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；若采集成功，将实时采集的数据存储至目标数据库；若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的一些实施例中的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中，例如，可以描述为：
获取模块、采集模块、存储模块和告警模块。例如，获取模块还可以被描述为“获取至少一个任务流模板和多个数据采集模块的模块”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开的实施例中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (10)
1.一种散货港口的事件数据采集方法，其特征在于，包括：
获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；
根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；
若采集成功，将实时采集的数据存储至目标数据库；
若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
2.根据权利1所述的方法，其特征在于，所述任务流模板包括多个依序执行的作业模板，每个作业模板包括多个依序执行的执行事件，其中，
若当前执行的执行事件对应的数据在预设的执行时限内采集成功，表示采集成功；
若当前执行的执行事件对应的数据未在预设的执行时限内采集成功，或者检测到对应执行模块的运行状态表示异常，表示采集失败。
3.根据权利2所述的方法，其特征在于，任一所述任务流模板的生成步骤包括：
获取目标任务流，并将所述目标任务流划分为多个子流程和多个执行事件，其中，每个所述子流程对应至少一个执行事件；
将每个子流程对应的执行事件根据逻辑关系对应至不同类型的网关执行，生成与所述每个子流程对应的多个作业模板；
确定每个作业模板中每个执行事件的执行类型、通过条件和执行时限，并更新至每个作业模板得到任务流模板。
4.根据权利2或3所述的方法，其特征在于，所述执行事件对应的采集数据的格式可以为布尔型或数值型；
当所述采集数据为布尔型数据时，所述采集数据发生变化时存储；
当所述采集数据为数值型数据时，根据预设的时长定时存储。
5.一种散货港口的事件数据采集装置，其特征在于，包括：
获取模块，用于获取至少一个任务流模板和多个数据采集模块，其中，每个所述任务流模板对应至少一个数据采集模块；
采集模块，用于根据每个所述任务流模板，以及与其对应的至少一个数据采集模块进行实时的数据采集；
存储模块，用于若采集成功，将实时采集的数据存储至目标数据库；
告警模块，用于若采集失败，记录所述采集失败数据，并发出采集失败的数据采集模块对应的告警信息。
6.根据权利5所述的装置，其特征在于，所述任务流模板包括多个依序执行的作业模板，每个作业模板包括多个依序执行的执行事件，其中，
若当前执行的执行事件对应的数据在预设的执行时限内采集成功，表示采集成功；
若当前执行的执行事件对应的数据未在预设的执行时限内采集成功，或者检测到对应执行模块的运行状态表示异常，表示采集失败。
7.根据权利6所述的装置，其特征在于，任一所述任务流模板的生成步骤包括：
获取目标任务流，并将所述目标任务流划分为多个子流程和多个执行事件，其中，每个所述子流程对应至少一个执行事件；
将每个子流程对应的执行事件根据逻辑关系对应至不同类型的网关执行，生成与所述每个子流程对应的多个作业模板；
确定每个作业模板中每个执行事件的执行类型、通过条件和执行时限，并更新至每个作业模板得到任务流模板。
8.根据权利6或7所述的装置，其特征在于，所述执行事件对应的采集数据的格式可以为布尔型或数值型；
当所述采集数据为布尔型数据时，所述采集数据发生变化时存储；
当所述采集数据为数值型数据时，根据预设的时长定时存储。
9.一种散货港口的事件数据采集系统，包括存储器、处理器以及存储在所述存储器中并且可以在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310807109.5A CN117033474A (zh) | 2023-07-03 | 2023-07-03 | 散货港口的事件数据采集方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310807109.5A CN117033474A (zh) | 2023-07-03 | 2023-07-03 | 散货港口的事件数据采集方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117033474A true CN117033474A (zh) | 2023-11-10 |
Family
ID=88632546
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310807109.5A Pending CN117033474A (zh) | 2023-07-03 | 2023-07-03 | 散货港口的事件数据采集方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117033474A (zh) |
-
2023
- 2023-07-03 CN CN202310807109.5A patent/CN117033474A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107223243B (zh) | 用于嵌入式控制器的分布式数据管理系统 | |
| CN114396705B (zh) | 空调故障检测方法、装置、电子设备及介质 | |
| Badidi et al. | Enhancing the processing of healthcare data streams using fog computing | |
| CN111949850B (zh) | 多源数据的采集方法、装置、设备及存储介质 | |
| CN114625597A (zh) | 监控运维系统、方法、装置、电子设备及存储介质 | |
| CN112907942A (zh) | 基于边缘计算的车辆调度方法、装置、设备和介质 | |
| CN112015816A (zh) | 数据同步方法、装置、介质及电子设备 | |
| CN113344737B (zh) | 设备控制方法、装置、电子设备和计算机可读介质 | |
| CN112699111A (zh) | 报表生成方法、装置、电子设备和计算机可读介质 | |
| CN116842925A (zh) | 作业模板的生成方法及装置 | |
| CN117033474A (zh) | 散货港口的事件数据采集方法及装置 | |
| CN112507676B (zh) | 能源报表生成方法、装置、电子设备和计算机可读介质 | |
| CN115102992A (zh) | 数据发布方法、装置、电子设备和计算机可读介质 | |
| CN114035861A (zh) | 集群配置方法、装置、电子设备和计算机可读介质 | |
| CN115022328A (zh) | 服务器集群以及服务器集群的测试方法、装置和电子设备 | |
| CN110955709B (zh) | 一种数据的处理方法、装置及电子设备 | |
| CN112818139A (zh) | 应用于安防监控的边缘计算数据管理方法、装置和设备 | |
| CN112543228A (zh) | 数据传输方法、装置、电子设备和计算机可读介质 | |
| CN115277421B (zh) | 配置信息推送方法、装置、电子设备和计算机可读介质 | |
| CN110633182A (zh) | 用于监控服务器稳定性的系统、方法和装置 | |
| CN112506735B (zh) | 服务质量监控方法、系统、服务器和存储介质 | |
| CN111404824B (zh) | 用于转发请求的方法、装置、电子设备和计算机可读介质 | |
| CN110290062B (zh) | 一种网关及一种网关的数据处理方法 | |
| CN114064391A (zh) | 一种分布式报警或事件信息处理方法及装置 | |
| CN114637648A (zh) | 信息管理方法、装置、电子设备和计算机可读介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |