CN114237568A - 一种媒资信息接收系统 - Google Patents
一种媒资信息接收系统 Download PDFInfo
- Publication number
- CN114237568A CN114237568A CN202111439846.1A CN202111439846A CN114237568A CN 114237568 A CN114237568 A CN 114237568A CN 202111439846 A CN202111439846 A CN 202111439846A CN 114237568 A CN114237568 A CN 114237568A
- Authority
- CN
- China
- Prior art keywords
- module
- configurator
- media information
- acquisition
- conversion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000006243 chemical reaction Methods 0.000 claims abstract description 56
- 238000004364 calculation method Methods 0.000 claims abstract description 3
- 230000004044 response Effects 0.000 claims description 26
- 238000000034 method Methods 0.000 abstract description 5
- 230000006870 function Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000001788 irregular Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/31—Programming languages or programming paradigms
- G06F8/315—Object-oriented languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/12—Use of codes for handling textual entities
- G06F40/151—Transformation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/40—Transformation of program code
- G06F8/41—Compilation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/08—Protocols for interworking; Protocol conversion
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Security & Cryptography (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明涉及一种媒资信息接收系统，包括采集模块和转换模块，所述采集模块连接转换模块；所述采集模块包括采集协议配置器，所述采集协议配置器配置采集所支持的协议，采集内容提供商发送的媒资信息数据并传输至转换模块；所述转换模块包括格式转换器和在线编译器，所述格式转换器内置了转换函数，格式转换器接收媒资信息数据并执行转换函数进行计算，得到统一格式的媒资信息数据，所述在线编译器可预览、修改和调试所述转换函数。与现有技术相比，本发明可在线编译转换函数，具有灵活性强、操作便捷等优点。
Description
技术领域
本发明涉及数据接收领域，尤其是涉及一种媒资信息接收系统。
背景技术
随着目前的视频内容越来越丰富，内容提供商CP(Content Provider)也越来越多，我们原来的内容管理系统需要接收的CP方也越来越多。虽然此前有定义好的业界的规范存在，但是实际的情况下和规范有着各种出入的情况或者完全不按照规范来的情况依然层出不穷。这样一来，数据的采集对接上就存在很大的问题，每次遇到数据不规范的情况时，都要研发出新的信息接收系统来接收不规范的数据，耗费大量时间和人力。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种媒资信息接收系统。
本发明的目的可以通过以下技术方案来实现：
一种媒资信息接收系统，包括采集模块和转换模块，所述采集模块连接转换模块；
所述采集模块包括采集协议配置器，所述采集协议配置器配置采集所支持的协议，采集内容提供商发送的媒资信息数据并传输至转换模块；
所述转换模块包括格式转换器和在线编译器，所述格式转换器内置了转换函数，格式转换器接收媒资信息数据并执行转换函数进行计算，得到统一格式的媒资信息数据；
所述在线编译器可预览、修改和调试所述转换函数。
进一步地，所述采集模块还包括采集类型配置器、回调配置器、图片下载配置器和响应文件配置器；
所述采集类型配置器配置采集到的媒资信息的采集类型，所述回调配置器配置采集到的媒资信息是否异步回调和回调的地址，所述图片下载配置器配置是否下载媒资信息的图片信息以及下载图片的地址信息，所述响应文件配置器配置是否生成采集响应文件。
进一步地，所述在线编译器基于JavaScript对转换函数进行预览、修改和调试。
进一步地，格式转换器使用Nashorn引擎执行转换函数。
进一步地，还包括响应模板模块，所述响应模板模块连接转换模块，所述响应模板模块内置了所有内容提供商的响应模板，在接收到统一格式的媒资信息数据后作出响应。
进一步地，还包括采集列表模块，所述采集列表模块连接所述采集模块，当采集模块成功采集到一条信息后，所述采集列表模块读取采集信息的采集时间、状态和工单详情，并存储于数据库中。
进一步地，所述采集模块可读取采集列表模块的内容，重新采集某一采集时间的信息。
进一步地，还包括定时器模块，所述定时器模块连接所述采集模块，所述定时器模块可设定采集的触发时间。
进一步地，还包括线程池模块，所述线程池模块连接所述采集模块，所述线程池模块设置同时采集的媒资信息数据量。
进一步地，还包括系统日志模块，所述系统日志模块连接所述转换模块，当所述转换模块执行转换函数出现执行错误时，所述转换模块将错误信息实时传输至系统日志模块，所述系统日志模块显示错误时间及内容。
与现有技术相比，本发明具有以下优点：
1、本发明设置了采集模块和转换模块，采集模块通过配置采集所支持的协议可接收到不同内容提供商提供的数据，转换模块通过设置在线编译器的方式，根据数据信息实时修改转换函数，通过采集模块和转换模块的连接配合使用使得可以在前端进行代码调试，无需进行底层开发，提升了工作效率。
2、本发明中的在线编译器使用JavaScript作为编程语言，JavaScript有丰富的组件库，可满足各种数据格式的转换需要。
3、本发明设置了采集列表模块和系统日志模块，可记录采集情况和错误情况，便于处理问题，提高了系统的稳定性。
4、本发明设置了定时器模块和线程池模块，可分别控制采集的频率和数据量，使得系统的灵活性更强。
附图说明
图1为本发明的系统结构示意图。
图2为本发明获取数据并转化的示意图。
附图标记：1-采集模块，11-采集协议配置器，12-采集类型配置器，13-回调配置器，14-图片下载配置器，15-响应文件配置器，2-转换模块，21-格式转换器，22-在线编译器，3-响应模板模块，4-采集列表模块，5-定时器模块，6-线程池模块，7-系统日志模块。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
本实施例提出了一种媒资信息接收系统，整体系统示意图如图1所示。
本实施例提出的一种媒资信息接收系统包括采集模块1和转换模块2，采集模块1与转换模块2连接。
其中，采集模块1包括采集协议配置器11、类型配置器12、回调配置器13、图片下载配置器14和响应文件配置器15，采集协议配置器11根据实际情况配置采集所支持的协议，支持市面上的XML、JSON的大部分协议，配置完正确的采集协议后即可接收到内容供应商提供的数据信息。类型配置器12配置采集到的媒资信息的采集类型，回调配置器13配置采集到的媒资信息是否进行异步回调以及回调的目标地址，图片下载配置器14配置是否下载媒资信息中包含的图片信息以及下载图片的地址信息，响应文件配置器15配置是否生成采集响应文件。
转换模块2包括格式转换器21和在线编译器22，格式转换器21内置有转换函数，转换函数用于对具体数据字段进行解析并处理，并把这些字段所表达的意义，转化成可识别的cms格式，如图2所示。比如统一的日期格式，统一的生效、失效标识等等。考虑到需要处理的数据的复杂性和代码的可扩展性，选择JavaScript语言作为转换函数的编程语言，因为JavaScript有丰富的组件库，完全能够满足各种数据格式的转换需要，还能进行较为复杂的运算。而通过在线编译器22，能根据需要对接的内容提供商修改对应的转换函数，并在线进行预览和调试，从而进行数据格式的匹配修改。这样一来无需每次在处理新的数据类型时，都要进行底层代码的编写，大大提升了工作的效率。
除此之外，本实施例在格式转换器21中使用Nashorn JavaScript引擎来执行转换函数，Nashorn JavaScript引擎可提升基于JavaScript的转换函数的运行效率。
在本实施例提出的一种媒资信息接收系统中，还包括响应模板模块3，响应模板模块3与转换模块2连接，响应模板模块3包含了所有内容提供商的响应模板，在接收到统一格式的媒资信息数据后作出响应。既能满足各家CP的要求，也能快速进行响应。
在本实施例提出的一种媒资信息接收系统中，还包括采集列表模块4，采集列表模块4与采集模块1连接，当采集模块1成功采集到一条信息后，采集列表模块4响应，存储相关数据于数据库中。相关数据包括历史的采集记录，包含采集的时间、状态、工单详情。当采集过程中出现问题时，采集模块1可根据时间调用采集列表模块4中的历史采集记录，找到采集的信息来源，重新进行采集。
在本实施例提出的一种媒资信息接收系统中，还包括定时器模块5，定时器模块5与采集模块1连接，定时器模块5可设定采集的触发时间，在不需要实时采集的情况下，可以考虑每日定时采集，提高了系统的灵活性。
在本实施例提出的一种媒资信息接收系统中，还包括线程池模块6，线程池模块6与采集模块1连接，线程池模块6设置同一时刻采集的媒资信息数据量，当内容提供商提供的数据量不大的情况下，可以设置单线程运行，节约了程序的运行。
在本实施例提出的一种媒资信息接收系统中，还包括系统日志模块7，系统日志模块7与转换模块2连接，当转换模块2执行转换函数出现执行错误时，转换模块2将错误信息实时传输至系统日志模块7，系统日志模块7显示错误时间及内容，因此可以及时发现采集中出现的问题并及时作出应对措施。
以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案，皆应在由权利要求书所确定的保护范围内。
Claims (10)
1.一种媒资信息接收系统，其特征在于，包括采集模块(1)和转换模块(2)，所述采集模块(1)连接转换模块(2)；
所述采集模块(1)包括采集协议配置器(11)，所述采集协议配置器(11)配置采集所支持的协议，采集内容提供商发送的媒资信息数据并传输至转换模块(2)；
所述转换模块(2)包括格式转换器(21)和在线编译器(22)，所述格式转换器(21)内置了转换函数，格式转换器(21)接收媒资信息数据并执行转换函数进行计算，得到统一格式的媒资信息数据，所述在线编译器(22)可预览、修改和调试所述转换函数。
2.根据权利要求1所述的一种媒资信息接收系统，其特征在于，所述采集模块(1)还包括采集类型配置器(12)、回调配置器(13)、图片下载配置器(14)和响应文件配置器(15)；
所述采集类型配置器(12)配置采集到的媒资信息的采集类型，所述回调配置器(13)配置采集到的媒资信息是否异步回调和回调的地址，所述图片下载配置器(14)配置是否下载媒资信息的图片信息以及下载图片的地址信息，所述响应文件配置器(15)配置是否生成采集响应文件。
3.根据权利要求1所述的一种媒资信息接收系统，其特征在于，所述在线编译器(22)基于JavaScript对转换函数进行预览、修改和调试。
4.根据权利要求3所述的一种媒资信息接收系统，其特征在于，格式转换器(21)使用Nashorn引擎执行转换函数。
5.根据权利要求1所述的一种媒资信息接收系统，其特征在于，还包括响应模板模块(3)，所述响应模板模块(3)连接转换模块(2)，所述响应模板模块(3)内置了所有内容提供商的响应模板，在接收到统一格式的媒资信息数据后作出响应。
6.根据权利要求1所述的一种媒资信息接收系统，其特征在于，还包括采集列表模块(4)，所述采集列表模块(4)连接所述采集模块(1)，当采集模块(1)成功采集到一条信息后，所述采集列表模块(4)读取采集信息的采集时间、状态和工单详情，并存储于数据库中。
7.根据权利要求6所述的一种媒资信息接收系统，其特征在于，所述采集模块(1)可读取采集列表模块(4)的内容，重新采集某一采集时间的信息。
8.根据权利要求1所述的一种媒资信息接收系统，其特征在于，还包括定时器模块(5)，所述定时器模块(5)连接所述采集模块(1)，所述定时器模块(5)可设定采集的触发时间。
9.根据权利要求1所述的一种媒资信息接收系统，其特征在于，还包括线程池模块(6)，所述线程池模块(6)连接所述采集模块(1)，所述线程池模块(6)设置同时采集的媒资信息数据量。
10.根据权利要求1所述的一种媒资信息接收系统，其特征在于，还包括系统日志模块(7)，所述系统日志模块(7)连接所述转换模块(2)，当所述转换模块(2)执行转换函数出现执行错误时，所述转换模块(2)将错误信息实时传输至系统日志模块(7)，所述系统日志模块(7)显示错误时间及内容。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111439846.1A CN114237568B (zh) | 2021-11-30 | 2021-11-30 | 一种媒资信息接收系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111439846.1A CN114237568B (zh) | 2021-11-30 | 2021-11-30 | 一种媒资信息接收系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114237568A true CN114237568A (zh) | 2022-03-25 |
| CN114237568B CN114237568B (zh) | 2024-07-16 |
Family
ID=80752019
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111439846.1A Active CN114237568B (zh) | 2021-11-30 | 2021-11-30 | 一种媒资信息接收系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114237568B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114845154A (zh) * | 2022-04-28 | 2022-08-02 | 四川虹魔方网络科技有限公司 | 媒资数据的快速适配方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120066291A1 (en) * | 2010-09-15 | 2012-03-15 | Slavomir Grigorov | Remote method invocation tunneling over hypertext transfer protocol |
| CN104737121A (zh) * | 2012-09-04 | 2015-06-24 | 谷歌公司 | 在浏览器中对视频播放进行复用和解复用 |
| CN108023960A (zh) * | 2017-12-08 | 2018-05-11 | 百度在线网络技术（北京）有限公司 | 构建Feed流应用的装置和Feed流信息推送的方法 |
| CN111866553A (zh) * | 2020-07-24 | 2020-10-30 | 聚好看科技股份有限公司 | 媒资信息校准方法及服务器 |
| CN113630654A (zh) * | 2021-08-05 | 2021-11-09 | Vidaa美国公司 | 显示设备及媒资片源推送方法 |
-
2021
- 2021-11-30 CN CN202111439846.1A patent/CN114237568B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120066291A1 (en) * | 2010-09-15 | 2012-03-15 | Slavomir Grigorov | Remote method invocation tunneling over hypertext transfer protocol |
| CN104737121A (zh) * | 2012-09-04 | 2015-06-24 | 谷歌公司 | 在浏览器中对视频播放进行复用和解复用 |
| CN108023960A (zh) * | 2017-12-08 | 2018-05-11 | 百度在线网络技术（北京）有限公司 | 构建Feed流应用的装置和Feed流信息推送的方法 |
| CN111866553A (zh) * | 2020-07-24 | 2020-10-30 | 聚好看科技股份有限公司 | 媒资信息校准方法及服务器 |
| CN113630654A (zh) * | 2021-08-05 | 2021-11-09 | Vidaa美国公司 | 显示设备及媒资片源推送方法 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114845154A (zh) * | 2022-04-28 | 2022-08-02 | 四川虹魔方网络科技有限公司 | 媒资数据的快速适配方法 |
| CN114845154B (zh) * | 2022-04-28 | 2023-05-09 | 四川虹魔方网络科技有限公司 | 媒资数据的快速适配方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114237568B (zh) | 2024-07-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110955428A (zh) | 一种页面显示方法、装置、电子设备及介质 | |
| CN112130993B (zh) | 基于图形化建模的电力边缘物联代理边缘计算方法及系统 | |
| CN112769901B (zh) | 一种轨道交通信号设备通信交互方法及系统 | |
| CN111611207B (zh) | 状态数据处理方法、装置及计算机设备 | |
| CN114237568A (zh) | 一种媒资信息接收系统 | |
| CN114666407A (zh) | 一种rpa跨端通信方法及设备 | |
| CN108880877A (zh) | 一种日志的获取方法和装置 | |
| CN112685370A (zh) | 一种日志采集方法、装置、设备和介质 | |
| US8201184B2 (en) | Systems and methods for parallelizing grid computer environment tasks | |
| CN113568825A (zh) | 程序流程调试方法、装置、设备及存储介质 | |
| CN111026604B (zh) | 一种日志文件解析方法及装置 | |
| CN111488144A (zh) | 一种数据处理方法以及设备 | |
| CN115808908A (zh) | 数据采集方法、装置及电子设备和存储介质 | |
| CN114138398B (zh) | 信息反馈方法及装置 | |
| CN115454701A (zh) | 一种pc固件档案自动更新方法和系统 | |
| CN115291938A (zh) | 用于电子证据分析的组件配置方法及系统 | |
| CN115248684A (zh) | 一种智能网关数据处理和流程控制的图形化编程方法 | |
| CN114691768A (zh) | 一种数据处理方法、核算系统及相关设备 | |
| CN113190466A (zh) | 自动化测试方法、装置、设备及介质 | |
| CN1312587C (zh) | 一种嵌入式实时操作系统故障分析定位系统和方法 | |
| CN112464242A (zh) | 一种网页平台漏洞采集方法、系统、终端及存储介质 | |
| CN110096281A (zh) | 代码解析方法、解析服务器、存储介质及装置 | |
| CN116881174B (zh) | 一种ecu应用软件闭环测试方法、装置、设备及存储介质 | |
| CN117520155B (zh) | 一种rpa流程调试方法、装置、电子设备及存储介质 | |
| CN112346900B (zh) | 符号表的下载控制、堆栈解析方法、装置、设备及介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |