CN113259448A - 日志数据传输和监控的方法与系统 - Google Patents
日志数据传输和监控的方法与系统 Download PDFInfo
- Publication number
- CN113259448A CN113259448A CN202110583776.0A CN202110583776A CN113259448A CN 113259448 A CN113259448 A CN 113259448A CN 202110583776 A CN202110583776 A CN 202110583776A CN 113259448 A CN113259448 A CN 113259448A
- Authority
- CN
- China
- Prior art keywords
- log data
- terminal
- server
- data file
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000012544 monitoring process Methods 0.000 title claims abstract description 28
- 230000005540 biological transmission Effects 0.000 claims abstract description 28
- 238000013515 script Methods 0.000 claims description 21
- 238000001514 detection method Methods 0.000 claims description 10
- 238000004806 packaging method and process Methods 0.000 claims description 9
- 238000001914 filtration Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 8
- 238000007906 compression Methods 0.000 claims description 5
- 230000006835 compression Effects 0.000 claims description 5
- 238000012216 screening Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 23
- 238000007639 printing Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 241001522296 Erithacus rubecula Species 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 101000878595 Arabidopsis thaliana Squalene synthase 1 Proteins 0.000 description 1
- 101000713575 Homo sapiens Tubulin beta-3 chain Proteins 0.000 description 1
- 102100036790 Tubulin beta-3 chain Human genes 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
- H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
- G06F16/1815—Journaling file systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/0813—Configuration setting characterised by the conditions triggering a change of settings
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/2866—Architectures; Arrangements
- H04L67/30—Profiles
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供了一种日志数据传输和监控的方法，包括获取服务器发送的动态参数，所述动态参数为服务器自由设定的参数值；根据所述动态参数生成相应的操作指令；执行所述操作指令，获取到日志数据文件；将所述日志数据文件发送到所述服务器，使所述服务器根据所述日志数据文件获取到所述终端的运行数据。本发明通过在服务器端自由的设定各种参数，再将各种参数发送到终端，终端获取到动态参数后，根据参数达成不同的日志数据传输策略，解决了日志数据不能按需上传，也不能根据每个用户反馈的多种复杂情况做出自由动态的调整的技术问题。
Description
技术领域
本发明涉及数字电视技术领域，尤其涉及一种日志数据传输和监控的方法与系统。
背景技术
随着5G技术的持续发展和推广，数字电视的内容提供、数据传送以及用户体验已将随之发生质的飞跃。这种转变给数字电视带来前所未有的惠利的同时，也给设备的维护带来了新的挑战。数字电视因其固有的特性：用户基数大，地域分布范围广等特点，后期设备维护比较麻烦，特别是设备出现故障时，常常需要分析问题的日志信息和网络抓包数据，协助问题的定位与解决。此前，设备的故障信息需要售后的工程师远赴现场捕获，数据的采集十分不易。目前，已经出现了远程故障信息获取的方式。但实施过程中因视频速度快、数据海量，而且数据往往通过固定的模式上传，没有对用户情况的针对性，数据的捕获速度无法调节，有时会快于上传速度，因此，受限于数字电视终端设备有限的存储容量，经常出现丢包的情况，随着5G高速率与低时延的进一步的技术革新，现网远程获取故障信息数据的有效性与针对性将进一步受到挑战。
总的来说，现有技术的问题是日志不能按需上传，也不能根据每个用户反馈的多种复杂情况做出自由动态的调整，无用的信息上传占用了网络资源，服务器也需要花长时间在无用的信息中筛选得到有用信息。
发明内容
针对现有技术中所存在的不足，本发明提供了一种日志数据传输和监控的方法与系统，以解决相关技术中日志不能按需上传，也不能根据每个用户反馈的情况做出自由动态的调整，服务器也需要花长时间在无用的信息中筛选得到有用信息的技术问题。
根据本发明的实施例，提供了一种日志数据传输和监控的方法，应用于终端，所述方法包括：
获取服务器发送的动态参数，所述动态参数为服务器自由设定的参数值；根据所述动态参数生成相应的操作指令；执行所述操作指令，获取到日志数据文件；
将所述日志数据文件发送到所述服务器，使所述服务器根据所述日志数据文件获取到所述终端的运行数据。
根据本发明的实施例，还提供了一种日志数据传输和监控的方法的系统，所述系统包括终端和服务器，所述终端包括：
获取模块，用于获取服务器发送的动态参数；
生成模块，用于根据所述动态参数生成相应的操作指令；
执行模块，用于执行所述操作指令，获取到日志数据文件；
发送模块，用于将所述日志数据文件发送到所述服务器，使所述服务器根据所述日志数据文件获取到所述终端的运行数据。
相比于现有技术，本发明具有如下有益效果：
本发明技术中，通过在服务器端自由的设定各种参数，再将各种参数发送到终端，再由终端获取该参数后，对应生成相应的操作指令，比如可以通过直接将参数值填入脚本模板的参数设定区域，或者动态修改预设程序的对应编码中的参数值，再执行这样的脚本和 /或程序，达到根据不同情况有针对性的去获取、上传日志数据文件，通过极高自由度的参数设置，可以更加灵活的应对各种不同情况，也可以根据实时变化，随时对日志数据传输和监控的方法做出适应性调整。
附图说明
图1为本发明一个实施例中日志数据传输和监控的方法的流程示意图；
图2为本发明一个实施例中日志数据传输和监控的方法的应用环境图；
图3为本发明另一个实施例中日志数据传输和监控的方法的流程示意图；
图4为本发明一个实施例中日志数据传输监控装置的结构框图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
本发明说明书和权利要求书及上述附图中的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或模块的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或模块，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或模块，本文中所出现的模块的划分，仅仅是一种逻辑上的划分，实际应用中实现时可以有另外的划分方式，例如多个模块可以结合成或集成在另一个系统中，或一些特征可以忽略，或不执行，另外，所显示的或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，模块之间的间接耦合或通信连接可以是电性或其他类似的形式，本文中均不作限定。并且，作为分离部件说明的模块或子模块可以是也可以不是物理上的分离，可以是也可以不是物理模块，或者可以分布到多个电路模块中，可以根据实际的需要选择其中的部分或全部模块来实现本发明实施例方案的目的。本发明中的术语“程序”或“脚本”不仅限定为程序或脚本，还可以指通过编程语言可以达到相同目的编程语句表现的各种形式。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
在一个实施例中，如图1所示，提供了一种日志数据传输和监控的方法，应用于终端，包括：获取服务器发送的动态参数，所述动态参数为服务器自由设定的参数值；根据所述动态参数生成相应的操作指令；执行所述操作指令，获取到日志数据文件；
将所述日志数据文件发送到所述服务器，使所述服务器根据所述日志数据文件获取到所述终端的运行数据。
服务器根据终端用户反馈情况，或者应急检查，或者定期检查等情况，可以依据不同的情况，自由地在终端设置不同的动态参数，设置动态参数可以通过人工输入的方式，或者选择界面，也可以通过人工智能根据客户的反馈，智能地选择动态参数，再通过网络将这组动态参数发送到需要获取的终端，终端获取该组动态参数后，根据该组动态参数生成相应操作命令，这些操作命令一种实现方式是通过脚本，终端通过预存所述脚本的模板，当获取到动态参数过后，就将该参数填入所述预存的脚本中，使得脚本功能完整，可以运行，行使后续的获取日志数据文件的功能。另外一种实现方式是通过程序，程序上预留需要设置参数的部分，通过获取的终端参数填入所述程序，行使后续的获取日志数据文件的功能。
可选地，日志数据传输和监控的方法，根据所述动态参数生成相应的操作指令，包括；根据所述动态参数，生成抓包命令；根据所述动态参数设定抓包命令，筛选和/或过滤所述日志数据文件的获取类型；以及限定所述抓取日志数据文件的最大门限值。
上述抓包命令是终端生成的操作指令的一种，可以包括本地抓包命令和网络抓包命令，所谓的本地抓包，就是抓取终端本地的文件，用以判断终端本地的运行情况；所谓网络抓包，就是抓取通过网络传输到网络的文件，主要用于检测终端的网络速度，或者传输线路有没有受到影响；
例如，与抓包相关的参数Log表示仅仅获取本地日志，参数Pcap表示仅仅获取网络抓包，参数ALL表示获取本地和网络抓包数据，Cmd则表示在远程生成根据服务器传来参数编辑生成新的脚本文件执行。
在本例中，特别强调了通过筛选和/或过滤所述日志数据文件的获取类型；以及限定所述抓取日志数据文件的最大门限值的功能，可以针对性选择需要上传的抓包文件，并且可以根据上传网络的带宽来调整文件的大小，以达到文件能流畅顺利上传，不会出现丢包等等现象。关于筛选和过滤，具体的一个实施方式为：通过在生成日志时，按照预设程序，根据分类生成不同的日志文件名、后缀或者给予日志文件一定系统识别标记，再通过不同参数的设定，去筛选或者过滤掉拥有该文件名称、后缀或识别标记的日志文件，就可以起到针对性选择所需的文件的作用。而动态设置的参数，比如ALL对应上传全部文件；AD，可以对应开机广告相关的文件；ITEM，可以对应网管系统的相关文件；MEDIA，可以对应视频播放相关的文件；REMOTE，可以对应遥控器相关的文件；DETECT，可以对应软探针相关的文件。在网络抓包中，通过参数设置也可以指定端口、网口和IP地址或者是过滤掉端口、网口和IP等等。
但本发明并不仅限于上述提到的功能，实际上常见的命令都能通过修改参数能够实现的功能，本发明都可以实现，下面以本地抓包命令logcat和网络抓包命令tcpdump为例来说明可以根据获取从服务器端发送的动态参数，来设置Logcat命令和tcpdump命令中的动态参数，可以实现的多种不同效果。
比如在本地抓包logcat命令中：
-b<buffer>指定要查看的日志缓冲区，默认值是system和main。
-f<filename>指定输出日志信息的<filename>，默认是stdout。
-g输出指定的日志缓冲区，输出后退出。
-n<count>设置日志的最大数目<count>，默认值是4，需要和-r选项一起使用。
-r<kbytes>每<kbytes>时输出日志，默认值为16，需要和-f选项一起使用.
-s设置默认的过滤级别为silent，也可以通过参数设置其它过滤级别。
-v<format>设置日志输入格式，默认的是brief格式，也可以设置更多的格式。
参数<filter-spec>用于对某类的tag的日志输出进行过滤。每一个输出的Android 日志信息都有一个tag和它的优先级。
日志的TAG，即标签是系统部件原始信息的一个简要的标志。这个tag就是 Log.i,Log.d,Log.i,Log.w,Log.e,Log.wtf系列函数中的tag。
对于System.out.print系列函数所对于的tag,其实就是"System.out"
<filter-spec>以“tag:priority”的形式来对日志输出进行过滤的。
优先级priority有以下几种，按照从低到高顺序排列如下:
V—Verbose(lowest priority)对应于Log.i()系列函数
D—Debug对应于Log.d()系列函数
I—Info对应于Log.i()系列函数
W—Warning对应于Log.w()系列函数
E—Error对应于Log.e()系列函数
F—Fatal对应于Log.wtf()系列函数
S—Silent(highest priority,on which nothing s ever printed)
<filter-spec>中的优先级是指显示该优先级及其以上优先级的日志。比如对于robin:D表示显示tag为robin的所有Debug及其以上优先级的日志。<filter-spec>只是的针对某类的tag的日志进行过滤，如果有多个针对同一个tag的过滤的话，以最后一个为准。另外对于tag,可以使用通配符。对于在tag中没有使用通配符的<filter-spec>，可以视为显式的日志过滤器；而对于在tag中使用通配符的，可以视为隐式的日志过滤器。如果这两种过滤器有对着同一个tag的过滤的话，以显式的日志过滤器为准。如果是同一种的话(显式/隐式)，以后一个为准。因为<filter-spec>只是指明了对某一类tag应该进行如何过滤，它没说明的其他tag,将采用系统默认的方式(*:V),即全部输出。我们可以通过选项"-s"来设置<filter-spec>中没有说明的tag来都不输出，相当于"*.S"
又如在tcpdump命令中：
-a—将网络地址和广播地址转变成名字；
-d—将匹配信息包的代码以人们能够理解的汇编格式给出；
-dd—将匹配信息包的代码以c语言程序段的格式给出；
-ddd—将匹配信息包的代码以十进制的形式给出；
-e—在输出行打印出数据链路层的头部信息，包括源mac和目的mac，以及网络层的协议；
-f—将外部的Internet地址以数字的形式打印出来；
-l—使标准输出变为缓冲行形式；
-n—指定将每个监听到数据包中的域名转换成IP地址后显示，不把网络地址转换成名字；
-nn—指定将每个监听到的数据包中的域名转换成IP、端口从应用名称转换成端口号后显示
-t—在输出的每一行不打印时间戳；
-v—输出一个稍微详细的信息，例如在ip包中可以包括ttl和服务类型的信息；
-vv—输出详细的报文信息；
-c—在收到指定的包的数目后，tcpdump就会停止；
-F—从指定的文件中读取表达式,忽略其它的表达式；
-i—指定监听的网络接口；
-p—将网卡设置为非混杂模式，不能与host或broadcast一起使用；
-r—从指定的文件中读取包(这些包一般通过-w选项产生)；
-w—直接将包写入文件中，并不分析和打印出来；
-s—snaplen表示从一个包中截取的字节数。0表示包不截断，抓完整的数据包。默认的话tcpdump只显示部分数据包,默认68字节。
-T—将监听到的包直接解释为指定的类型的报文，常见的类型有rpc(远程过程调用)和snmp(简单网络管理协议；)
-X—告诉tcpdump命令，需要把协议头和包内容都原原本本的显示出来(tcpdump会以16进制和ASCII的形式显示)，这在进行协议分析时是绝对的利器。
综上可见，通过修改tcpdump命令，或者Logcat命令的参数，生成不同的tcpdump命令、logcat命令，或者其它相似功能，本领域技术人员可以等同替换的其它命令，可以针对不同的情况，调整终端对网络抓包和本地抓包的一些功能的改变，可以灵活的适应各种纷繁复杂的情况，做出各种调整，对每一个终端的不同情况，都可以通过不同的参数设置，从而优化其上传的方案。
可选地，本发明提供的日志数据传输和监控的方法，在获取服务器发送的动态参数时，包括：获取服务器广播的动态命令，所述动态命令包括所述动态参数和识别特征表，所述识别特征表收录对应终端的标记特征；判断所述识别特征表中是否存在当前所述终端的所述标记特征；当所述识别特征表中存在当前所述终端的所述标记特征时，获取所述动态命令中的动态参数。
本实施例的上述方法通过上述方式可以应用于如图2所示的应用环境中。其中，终端通过网络与服务器进行通信。当服务器发送动态命令时，可以是广播的形式，发送到多个终端，服务器在广播动态参数的同时，也广播识别特征表，识别特征表上包涵需要反馈的一部分特定终端的标志特征，在运用于机顶盒时，常见的标志特征有MAC地址等等，也可以是端口值，也可以是在终端预设的识别标签信息等等。运用这样的方式，终端也不一定限定为数字电视领域或者机顶盒。但广播动态参数和识别特征表的结合，在数字电视领域，特别是运用于机顶盒的情况，可以有效迅速针对性的去解决现有的一些突发情况。例如当某一个特定片区，比如接到反馈发现北京朝阳区的电视线路可能受到干扰或者中断，这时服务器端可以根据记录，将整个朝阳区的MAC地址或者区域性的标志特征加入广播的识别特征表，整个朝阳片区的电视盒子就可以相应该广播，并且开始获取相同的动态参数，从而根据片区来针对性检测故障的原因。
在本发明另一个实施例中，如图3所示，提供一种日志数据传输和监控的方法，应用于终端，包括：获取服务器发送的动态参数，所述动态参数为服务器自由设定的参数值；根据所述动态参数生成相应的操作指令；执行所述操作指令，获取到日志数据文件；并且根据操作指令启动相应控制程序和/或脚本。
本例中，如图3所示控制程序和抓包程序互相结合，使得日志数据传输能够根据更加复杂的情况做出更加精准的调整。具体来说，操作指令启动相应控制程序的功能类型包括：启动终端、重启终端，对终端回复出厂设置、启动/关闭故障信息捕获功能、预设捕获/上传日志信息的开始时间以及获取时长等等。这可以通过服务器通过发送动态参数，根据该参数选择并修改终端预设的指令集中的一条或多条指令实现。这样增加了对日志数据传输的管控和相关辅助功能的支持，可以更加灵活的应对各种情况，比如可以在用户闲置终端时，再启动自动开机并且检测上传等等功能，增加用户体验。
可选地，启动相应控制程序和/或脚本，包括；所述参数生成相应的所述操作指令与终端响应程序一一对应，所述响应程序还与用户遥控器按键发送信号一一对应；当所述操作指令启动所述终端响应程序，模拟用户对应遥控器按键操作。
在现有技术中，用户遥控器可以与终端设置的终端响应程序一一对应，在本发明中，根据获取的动态参数，生成相应的所述操作指令，与上述终端响应程序一一对应，达到从服务器端通过参数设置，来模拟用户的遥控器操纵的作用。
进一步地，当所述操作指令启动相应控制程序和/或脚本时，所述方法还包括：所述控制程序截取终端显示画面，生成实时图片文件，并以截取时间顺序记录入图片文件名，将所述实时图片文件发送到所述服务器，使所述服务器根据所述实时图片文件获取到所述终端的实时显示情况。
进一步地，当所述控制程序截取终端显示画面时，先检测终端显示界面较上一次截图时是否更新，当终端显示画面更新时，则截图；当终端显示画面未更新，则不截图。
在本例中，通过终端截图程序将显示画面将截图实时上传，与虚拟遥控器结合就可以实现可视化远程操纵，以前，机顶盒故障常常需要告知用户如何操作，来观察或者重启设定机顶盒，但是通过遥控器与实时截图的结合，可以远程操纵终端的机器，当用户不懂操作的时候，能够更方便快捷的解决用户的问题。
而且，如果在截图前先检测终端显示画面是否更新，只有在更新时，才截图，这样有效的节约了资源，减少了无用信息的截图和上传。
可选地，当所述操作指令启动相应控制程序和/或脚本时，所述方法还包括：
所述控制程序检测所述日志数据文件大小；当文件超过检测最大门限值，重复查询操作，当再次查询的结果所述日志数据文件大小没有变化后，将该所述日志数据文件压缩打包；该所述日志数据文件压缩打包完成后，再次检测该所述日志数据文件压缩包大小；当该所述日志数据文件压缩包大小不超过检测最大门限值，更新该已压缩的所述日志数据文件的状态为完成；当所述日志数据文件的状态为完成后，所述控制程序将状态为完成的所述日志数据文件发送到所述服务器。
本例中，具体的说明了一种控制程序对日志数据文件打包上传的检测方法，该种方法为预设程序可选的设置，通过参数的不同，可以选择如本例这样多次检测严格的管控方法，也可以为了寻求快捷，选择更为效率，简便的检测方法。根据本例的方法，因为严格检测过上传日志的大小，能够使上传文件大小适应带宽，又因为经过多次检测，很好的避免了上传时丢包的问题。同理，如上所述，也可以根据服务器参数，设定和实时检测同时上传的线程或上传文件的数量，能够保证上传流畅进行，避免丢包。
在本发明另一个实施例中，比如当需要终端上传日志，一种可以供选择的操作步骤为：
S1：所述日志数据分为故障信息、日志文件、抓包文件；所述故障信息根据类型不同分别保存；所述日志单文件完整保存；所述抓包文件分包保存；
S2：服务器端设置动态参数，向终端广播动态命令；动态命令包括动态参数，设备识别特征表等；表上写入需要上传机器的MAC地址等终端标记特征；
S3：终端收到所述传输信号后，判别所述设备标记特征是否在识别特征表内，如包含，则保存传输信号到本地，继续执行；否则，忽略所述传输信号；
S4：终端根据所述动态参数生成logcat和tcpdump命令并运行，开启功能模块打印开关，筛选上传文件类型；根据动态参数在终端本地预设指令集选择并编辑指令，执行压缩、流量控制等上传控制程序；定时器启动计时；文件顺序编号，并检测文件大小，当文件超过最大值门限，且查询两次大小没有变化，则传入该文件名称启动空闲脚本执行压缩打包任务；
S5：应用程序启动脚本执行压缩打包文件后，开启新的线程，等待并检测文件压缩打包完成标识的值；同时，继续定时查询后序的网络数据包；
S6：脚本执行完成网络抓包数据压缩打包指令后，更新系统属性定义的完成标志为 true，应用程序检测到完成标识为true，则根据FTP服务器的地址、用户名和密码上传打包后的数据；
S7：应用程序完成FTP数据上传后，删除对应的文件及压缩文件；
S8：定时器计时结束后，应用程序通知脚本停止logcat和tcpdump命令，并关闭功能模块(即不再压缩根据功能分类的日志文件)打印开关；
S9：压缩打包日志数据，并上传服务器。
本实施例中的步骤只是为了完整的说明一个可能的上传日志数据的流程，便于对本方案的解释和说明。当完成网络抓包数据压缩打包指令后，更新系统属性定义的完成标志为 true，应用程序检测到完成标识为true，用这样的完成标记的形式，进一步确定了上传文件的稳定性，减小了丢包的几率。
在本发明另一个实施例中，比如当需要对终端实时监控远程操纵时，一种可以供选择的操作步骤为：
SS1：服务器端设置动态参数，向终端发送操作信号；所述传输信号包括设备识别信息表；表上写入需要上传机器的MAC地址；
SS2：终端收到所述操作信号后，判比所述设备识别信息表，是否含自身的Mac地址，如包含，则保存操作信号到本地，继续执行；否则，忽略所述传输信号；
SS3：终端根据所述操作信号判断操作类型：执行立即启动、重启启动、恢复出厂设置启动、远程指令中至少一种操作指令；
或/和根据所述操作信号，预编辑操作指令，开启相应模块的打印开关，复制相应模块的对应日志数据，并打包上传；
或/和根据所述操作信号，预编辑操作指令，开启故障信息获取，复制相应故障信息的对应日志数据文件，并打包上传；
或/和根据所述操作信号，预编辑操作指令，根据参数设置模拟用户真实操作；
SS4：判断显示界面较上一次截图上传时是否更新，当终端界面更新时，截图打包上传；并在服务器端显示操作响应结果。
本实施例中的步骤只是为了完整的说明一个可能的上传日志数据的流程，便于对本方案的解释和说明。在这种方案中，可以通过实时观察选定的终端的显示屏，并且实时操控，能够更快的发现问题，也可以直接在远程为用户解决问题。
在本发明另一个实施例中，如图4所示，本发明公布一种日志数据传输和监控的方法的系统，所述系统包括终端和服务器，所述终端包括：
获取模块，用于获取服务器发送的动态参数；生成模块，用于根据所述动态参数生成相应的操作指令；执行模块，用于执行所述操作指令，获取到日志数据文件；发送模块，用于将所述日志数据文件发送到所述服务器，使所述服务器根据所述日志数据文件获取到所述终端的运行数据。
所述服务器端包括：设置模块，用于设置动态参数；广播模块，用于将设置好的动态参数发送到多个终端；获取模块，用于获取终端上传日志数据；显示模块，用于显示所述上传日志数据。
最后说明的是，以上实施例仅用以说明本发明的技术方案而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或者等同替换，而不脱离本发明技术方案的宗旨和范围，其均应涵盖在本发明的权利要求范围当中。
Claims (10)
1.一种日志数据传输和监控的方法，应用于终端，其特征在于，所述方法包括：
获取服务器发送的动态参数，所述动态参数为服务器自由设定的参数值；
根据所述动态参数生成相应的操作指令；
执行所述操作指令，获取到日志数据文件；
将所述日志数据文件发送到所述服务器，使所述服务器根据所述日志数据文件获取到所述终端的运行数据。
2.如权利要求1所述的日志数据传输和监控的方法，其特征在于，获取服务器发送的动态参数，包括：
获取服务器广播的动态命令，所述动态命令包括所述动态参数和识别特征表，所述识别特征表收录对应终端的标记特征；
判断所述识别特征表中是否存在当前所述终端的所述标记特征；
当所述识别特征表中存在当前所述终端的所述标记特征时，获取所述动态命令中的动态参数。
3.如权利要求1所述的日志数据传输和监控的方法，其特征在于，根据所述动态参数生成相应的操作指令，包括；
根据所述动态参数，生成抓包命令；
根据所述动态参数设定抓包命令，筛选和/或过滤所述日志数据文件的获取类型；以及限定所述抓取日志数据文件的最大门限值。
4.如权利要求1～3任一所述的日志数据传输和监控的方法，其特征在于，执行所述操作指令，还包括根据操作指令启动相应控制程序和/或脚本。
5.如权利要求4所述的日志数据传输和监控的方法，其特征在于，启动相应控制程序和/或脚本，包括；
所述参数生成相应的所述操作指令与终端响应程序一一对应，所述响应程序还与用户遥控器按键发送信号一一对应；当所述操作指令启动所述终端响应程序，模拟用户对应遥控器按键操作。
6.如权利要求4所述的日志数据传输和监控的方法，其特征在于，当所述操作指令启动相应控制程序和/或脚本时，所述方法还包括：
所述控制程序检测所述日志数据文件大小；
当文件超过检测最大门限值，重复查询操作，当再次查询的结果所述日志数据文件大小没有变化后，将该所述日志数据文件压缩打包；
该所述日志数据文件压缩打包完成后，再次检测该所述日志数据文件压缩包大小；当该所述日志数据文件压缩包大小不超过检测最大门限值，更新该已压缩的所述日志数据文件的状态为完成；
当所述日志数据文件的状态为完成后，所述控制程序将状态为完成的所述日志数据文件发送到所述服务器。
7.如权利要求4所述的日志数据传输和监控的方法，其特征在于，当所述操作指令启动相应控制程序和/或脚本时，所述方法还包括：
所述控制程序截取终端显示画面，生成实时图片文件，并以截取时间顺序记录入图片文件名，将所述实时图片文件发送到所述服务器，使所述服务器根据所述实时图片文件获取到所述终端的实时显示情况。
8.如权利要求7所述的日志数据传输和监控的方法，其特征在于，当所述控制程序截取终端显示画面时，先检测终端显示界面较上一次截图时是否更新，当终端显示画面更新时，则截图；当终端显示画面未更新，则不截图。
9.一种日志数据传输和监控的方法的系统，所述系统包括终端和服务器，其特征在于，所述终端包括：
获取模块，用于获取服务器发送的动态参数；
生成模块，用于根据所述动态参数生成相应的操作指令；
执行模块，用于执行所述操作指令，获取到日志数据文件；
发送模块，用于将所述日志数据文件发送到所述服务器，使所述服务器根据所述日志数据文件获取到所述终端的运行数据。
10.如权利要求9所述的日志数据传输和监控的方法的系统，其特征在于，所述服务器包括：
设置模块，用于设置动态参数；
广播模块，用于将设置好的动态参数发送到多个终端；
获取模块，用于获取终端上传日志数据；
显示模块，用于显示所述上传日志数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110583776.0A CN113259448A (zh) | 2021-05-27 | 2021-05-27 | 日志数据传输和监控的方法与系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110583776.0A CN113259448A (zh) | 2021-05-27 | 2021-05-27 | 日志数据传输和监控的方法与系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113259448A true CN113259448A (zh) | 2021-08-13 |
Family
ID=77184713
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110583776.0A Pending CN113259448A (zh) | 2021-05-27 | 2021-05-27 | 日志数据传输和监控的方法与系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113259448A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113676724A (zh) * | 2021-08-18 | 2021-11-19 | 中邮科通信技术股份有限公司 | Iptv业务中节目的自动化拨测系统及方法 |
| CN115278357A (zh) * | 2022-07-06 | 2022-11-01 | 海南乾唐视联信息技术有限公司 | 数据处理方法、装置、通信装置和存储介质 |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101291399A (zh) * | 2007-09-25 | 2008-10-22 | 深圳市同洲电子股份有限公司 | 数字电视接收机及其日志系统和日志管理方法 |
| CN103840953A (zh) * | 2012-11-21 | 2014-06-04 | 中兴通讯股份有限公司 | 远程日志实时获取方法及系统 |
| CN105704487A (zh) * | 2015-04-27 | 2016-06-22 | 深圳Tcl数字技术有限公司 | 电视稳定性测试方法及装置 |
| CN106453652A (zh) * | 2016-11-30 | 2017-02-22 | 努比亚技术有限公司 | 日志文件上传方法及系统 |
| CN107070980A (zh) * | 2017-01-22 | 2017-08-18 | 微鲸科技有限公司 | 智能终端的远程协助方法、装置及系统 |
| CN108011883A (zh) * | 2017-12-05 | 2018-05-08 | 深圳市创维软件有限公司 | 一种远程调试方法、终端设备和服务器 |
| CN110232048A (zh) * | 2019-06-12 | 2019-09-13 | 腾讯科技(成都)有限公司 | 日志文件的获取方法、装置及存储介质 |
| CN111131814A (zh) * | 2018-10-30 | 2020-05-08 | 深圳市茁壮网络股份有限公司 | 一种数据反馈方法、装置及机顶盒 |
| CN111611021A (zh) * | 2020-04-17 | 2020-09-01 | 深圳市广和通无线股份有限公司 | 日志数据传输方法、装置、计算机设备和存储介质 |
| CN111913886A (zh) * | 2020-08-07 | 2020-11-10 | 平安科技（深圳）有限公司 | 手机app自动化测试方法、装置、设备及存储介质 |
| CN112256551A (zh) * | 2020-12-18 | 2021-01-22 | 智道网联科技(北京)有限公司 | 一种远程日志抓取方法、装置、电子设备和存储介质 |
| CN112437140A (zh) * | 2020-11-13 | 2021-03-02 | 北京经纬恒润科技股份有限公司 | 一种远程导出tbox日志的方法及装置 |
| CN112527617A (zh) * | 2020-12-17 | 2021-03-19 | 四川长虹电器股份有限公司 | 一种安卓电视故障日志记录方法 |
-
2021
- 2021-05-27 CN CN202110583776.0A patent/CN113259448A/zh active Pending
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101291399A (zh) * | 2007-09-25 | 2008-10-22 | 深圳市同洲电子股份有限公司 | 数字电视接收机及其日志系统和日志管理方法 |
| CN103840953A (zh) * | 2012-11-21 | 2014-06-04 | 中兴通讯股份有限公司 | 远程日志实时获取方法及系统 |
| CN105704487A (zh) * | 2015-04-27 | 2016-06-22 | 深圳Tcl数字技术有限公司 | 电视稳定性测试方法及装置 |
| CN106453652A (zh) * | 2016-11-30 | 2017-02-22 | 努比亚技术有限公司 | 日志文件上传方法及系统 |
| CN107070980A (zh) * | 2017-01-22 | 2017-08-18 | 微鲸科技有限公司 | 智能终端的远程协助方法、装置及系统 |
| CN108011883A (zh) * | 2017-12-05 | 2018-05-08 | 深圳市创维软件有限公司 | 一种远程调试方法、终端设备和服务器 |
| CN111131814A (zh) * | 2018-10-30 | 2020-05-08 | 深圳市茁壮网络股份有限公司 | 一种数据反馈方法、装置及机顶盒 |
| CN110232048A (zh) * | 2019-06-12 | 2019-09-13 | 腾讯科技(成都)有限公司 | 日志文件的获取方法、装置及存储介质 |
| CN111611021A (zh) * | 2020-04-17 | 2020-09-01 | 深圳市广和通无线股份有限公司 | 日志数据传输方法、装置、计算机设备和存储介质 |
| CN111913886A (zh) * | 2020-08-07 | 2020-11-10 | 平安科技（深圳）有限公司 | 手机app自动化测试方法、装置、设备及存储介质 |
| CN112437140A (zh) * | 2020-11-13 | 2021-03-02 | 北京经纬恒润科技股份有限公司 | 一种远程导出tbox日志的方法及装置 |
| CN112527617A (zh) * | 2020-12-17 | 2021-03-19 | 四川长虹电器股份有限公司 | 一种安卓电视故障日志记录方法 |
| CN112256551A (zh) * | 2020-12-18 | 2021-01-22 | 智道网联科技(北京)有限公司 | 一种远程日志抓取方法、装置、电子设备和存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| 堵彬: ""机顶盒测试系统的实现与使用广播电视信息"", 《广播电视信息》 * |
| 王沛君: ""一种智能电视自动化测试系统的设计与实现"", 《中国优秀硕士学位论文全文数据库》 * |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113676724A (zh) * | 2021-08-18 | 2021-11-19 | 中邮科通信技术股份有限公司 | Iptv业务中节目的自动化拨测系统及方法 |
| CN113676724B (zh) * | 2021-08-18 | 2024-02-23 | 中邮科通信技术股份有限公司 | Iptv业务中节目的自动化拨测系统及方法 |
| CN115278357A (zh) * | 2022-07-06 | 2022-11-01 | 海南乾唐视联信息技术有限公司 | 数据处理方法、装置、通信装置和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113259448A (zh) | 日志数据传输和监控的方法与系统 | |
| HUE034498T2 (en) | Receiver, reception, transmitter and transmission | |
| CN102412999B (zh) | 一种基于抓包的远程故障定位方法、系统及设备 | |
| CN104318879A (zh) | 显示装置、显示装置故障分析系统和方法 | |
| GB2483499A (en) | Diagnostics and Analysis of a Set Top Box | |
| CN103369402B (zh) | 一种进行多种机顶盒功能一致性比对的方法及系统 | |
| TW201143379A (en) | Application server and method for controlling a video camera | |
| US10187702B2 (en) | Systems and methods to test media devices | |
| CN104185016B (zh) | Ott视频质量监控方法、装置及系统 | |
| CN111818041B (zh) | 一种基于网络层报文解析的实时报文处理系统及方法 | |
| CN106533803B (zh) | 基于tr069协议的cpe配置方法及装置 | |
| CN105117344B (zh) | 一种基于pb的接口集成测试方法和系统 | |
| CN105388861A (zh) | 物联网设备的控制方法及系统 | |
| CN105589705A (zh) | 文件更新方法、装置及设备 | |
| JP4820073B2 (ja) | 情報処理システム、電子機器、情報処理方法、コンピュータ処理可能なプログラム及び記録媒体 | |
| CN106533823B (zh) | 一种自动化测试系统、方法及其可循环发送装置 | |
| CN109842524B (zh) | 自动升级方法、装置、电子设备及计算机可读存储介质 | |
| CN108600841B (zh) | 一种机顶盒的参数操作方法 | |
| CN105915893A (zh) | 一种公路网图像互联标准符合性测试系统 | |
| CN106375979A (zh) | 快速发现局域网内智能设备状态的方法 | |
| CN115866308A (zh) | 视频氛围灯光的控制方法、装置、电子设备及存储介质 | |
| CN114374456A (zh) | 一种户外led屏幕适配方法、设备及介质 | |
| CN112671702A (zh) | 一种网络设备内部组播信息的获取方法及装置 | |
| CN109905668B (zh) | 一种摄像头画面部分的方法以及装置 | |
| CN113068158A (zh) | 一种nvr和ipc自动无线对码连接方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210813 |