CN109328375A - 数据收集服务器及缺损数据补充方法 - Google Patents
数据收集服务器及缺损数据补充方法 Download PDFInfo
- Publication number
- CN109328375A CN109328375A CN201680087138.7A CN201680087138A CN109328375A CN 109328375 A CN109328375 A CN 109328375A CN 201680087138 A CN201680087138 A CN 201680087138A CN 109328375 A CN109328375 A CN 109328375A
- Authority
- CN
- China
- Prior art keywords
- data
- defect
- information
- measuring appliance
- collection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C25/00—Arrangements for preventing or correcting errors; Monitoring arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Selective Calling Equipment (AREA)
- Arrangements For Transmission Of Measured Signals (AREA)
- Testing And Monitoring For Control Systems (AREA)
Abstract
具备:缺损状况解析部(20),其基于定期收集信息(Dp),对从多个测量器(2)各自收集到的数据的缺损状况进行解析而生成缺损信息(Dd);以及补充动作控制部(30),其基于缺损信息(Dd),对用于补充定期收集信息(Dp)中的缺损的数据的补充动作进行控制,补充动作控制部(30)在各个定期收集之后,针对多个测量器(2)每一者,设定以缺损时刻值(Vt)为起点而连续的规定次数量的重新取得组(Ga),数据取得部(70)针对设定出的每个重新取得组(Ga)重新取得由该测量器(2)保存的数据。
Description
技术领域
本发明涉及在从多个测量器收集数据的数据收集服务器中,特别是在定期收集时对缺损的数据进行补充的技术。
背景技术
数据收集服务器以固定时间为单位从经由通信手段连接的多个测量器定期地对测量器的测量信息进行收集。但是,由于通信状况的变化,并不一定从全部测量器都能得到测量信息,有时会暂时缺损某设备的测量数据。但是,在产生通信障碍的状态下,即使想要使存在数据缺损的设备重新发送数据也仅是增大通信量,难以将数据重新取得而进行补充。另一方面,各测量器通常对过去数日量的测量数据进行保存。
因此,公开了下述无线通信系统(例如,参照专利文献1。),该无线通信系统在存在测量数据的缺损时,在恢复了与对应设备的通信的情况下,通过将缺损数据分组而重新发送来进行补充。
专利文献1:日本特开2009-140184号公报(第0016~0040段、图1~图6)
发明内容
但是,有时产生缺损数据的设备基本上被放置于容易产生通信障碍的环境中,即使恢复通信后,想要仅将缺损的数据汇总而重新发送,重新取得也时常会失败。例如,在某系统的安装例中,在定期收集的间隔为30分钟的情况下,分配于定期收集和重新取得的时间的比率约为2:1。在这样的状况下,如果不断产生上述重新取得失败的设备,则重新取得对象设备不断增加,重新取得所需的时间增加而对定期收集造成障碍。
本发明就是为了解决上述的课题而提出的,其目的在于得到能够高效地重新取得数据而进行缺损数据的补充的数据收集服务器。
本发明的数据收集服务器的特征在于,具备:数据取得部,其与多个测量器各自进行通信,取得所述多个测量器各自通过定期测量而测量到的数据;定期收集信息生成部,其生成定期收集信息,该定期收集信息是对由所述数据取得部取得的数据中的、通过与所述定期测量同步的定期收集而收集到的数据进行汇总得到的;缺损状况解析部,其基于所述定期收集信息,对从所述多个测量器各自收集到的数据的缺损状况进行解析而生成缺损信息;以及补充动作控制部,其基于所述缺损信息,对用于补充所述定期收集信息中的缺损的数据的补充动作进行控制,所述补充动作控制部在各个所述定期收集之后,针对所述多个测量器每一者,设定以产生了缺损的时刻为起点而连续的规定次数量的数据组,所述数据取得部针对所述设定出的每个数据组重新取得由该测量器保存的数据。
另外,本发明的缺损数据补充方法在数据收集服务器经由通信手段对由多个测量器各自通过定期测量而测量到的数据进行收集的系统中对缺损数据进行补充,该缺损数据补充方法的特征在于,包含如下步骤:定期收集信息生成步骤,生成定期收集信息,该定期收集信息是对从所述多个测量器取得的数据中的、通过与所述定期测量同步的定期收集而收集到的数据进行汇总得到的;缺损状况解析步骤,基于所述定期收集信息,对从所述多个测量器各自收集到的数据的缺损状况进行解析而生成缺损信息;以及补充动作控制步骤,基于所述缺损信息,对用于补充所述定期收集信息中的缺损的数据的补充动作进行控制,在所述补充动作控制步骤中,在各个所述定期收集之后,针对所述多个测量器每一者,设定以产生了缺损的时刻为起点而连续的规定次数量的数据组,针对设定出的每个数据组重新取得由该测量器保存的数据。
发明的效果
根据本发明的数据收集服务器或缺损数据补充方法,由于是针对以产生了缺损的时刻为起点而设定出的连续的规定次数量的每个数据组来重新取得数据,因此能够高效地重新取得数据而进行缺损数据的补充。
附图说明
图1是用于说明本发明的实施方式1涉及的数据收集服务器的结构的功能框图。
图2是用于说明在本发明的实施方式1涉及的数据收集服务器及缺损数据补充方法中进行定期收集时的定期收集信息和缺损信息的参照关系的图。
图3是用于说明在本发明的实施方式1涉及的数据收集服务器及缺损数据补充方法中执行重新取得时的定期收集信息和缺损信息的参照关系的图。
图4是用于说明本发明的实施方式1涉及的数据收集服务器的动作及缺损数据补充方法的流程图。
图5是表示本发明的实施方式1涉及的数据收集服务器和测量器的关系的结构示意图。
具体实施方式
实施方式1.
图1~图5是用于说明本发明的实施方式1涉及的数据收集服务器的结构或缺损数据补充方法的图,图1是用于说明数据收集服务器的结构的功能框图,图2和图3是作为用于进行数据补充的具体例,示出某时间点的定期收集信息、至该时间点为止的数次量的各个缺损信息的数据格式的图,图2示出执行定期收集后的定期收集信息和缺损信息的关系,图3示出执行重新取得后的定期收集信息和缺损信息的关系。另外,图4是用于对数据收集服务器的动作及缺损数据补充方法进行说明的从定期收集至数据补充动作为止的过程的流程图,图5是表示数据收集服务器和测量器的关系的结构示意图。
如图1所示,本发明的实施方式1涉及的数据收集服务器1具备:数据取得部70,其经由网络与测量器进行通信,取得由测量器保存的测量数据;定期收集信息生成部10,其根据在每个固定期间由数据取得部70定期收集到的测量数据而生成定期收集信息Dp,输出至定期收集信息保存部100;缺损状况解析部20,其根据在定期收集信息保存部100保存的定期收集信息Dp对缺损状况进行解析而生成缺损信息Dd,向缺损信息保存部200输出;补充动作控制部30,其基于缺损信息Dd和定期收集信息Dp决定重新取得对象,使数据取得部70重新取得数据,并且基于重新取得的测量数据而进行定期收集信息Dp的数据补充;以及数据收集控制部40,其对上述各设备的动作整体进行控制。
此外,上述各设备可以由物理上独立的设备构成,但当然也可以通过将软件安装于计算机等硬件而构成。在该情况下,也可以将与各设备对应的“~部”改称为“~步骤”。
作为本发明的实施方式1涉及的数据收集服务器1或缺损数据补充方法的基本动作,在缺损状况解析部20的动作或缺损状况解析步骤中,从定期收集信息Dp提取过去取得的测量数据的缺损位置,生成用于将从缺损位置起预先确定的连续的数据作为重新取得对象定义为一个数据补充组的缺损信息Dd。在补充动作控制部30或数据补充步骤中,基于缺损信息Dd和定期收集信息Dp对数据补充组进行定义而执行数据补充(数据重新取得),进行定期收集信息Dp中的缺损的数据的补充。此时,重要的是不管有无缺损,都是将以缺损开始的时间点为起点的预先确定的数量的连续的数据设为重新取得对象,首先对其意义进行说明。
通常,在以通信数据包的方式实施数据的取得的情况下,由于存在报头部的开销(overhead),因此与报头部的长度相比而将数据部的长度设得长能够提高通信效率。例如,在某安装例中,由于报头部的长度为53byte,一个数据的长度为8byte,因此通过以使得汇总地取得的数据长度比53byte大的方式进行分组,由此能够提高通信效率(每单位通信量能够取得的数据数量)。即,针对某设备,汇总地取得大于或等于8个数据会实现高效的数据取得。
此处,在缺损不连续地产生的情况下,如果想要仅取得缺损的数据,则需要取得各时间点的时刻信息和该时间点的数值数据这两者。例如,在时刻t1、t3、t4、t6,需要的数值数据D1、D3、D4、D6产生了缺损的情况下,即使仅想要汇总地取得缺损的4个数值数据,在取得时,也如“t1、D1、t3、D3、t4、D4、t6、D6”那样,对应于时刻数据而需要8个数据。
另一方面,在上述缺损状况下,如果将取得对象定义为,从起始的时刻t1起,不管有无缺损,都取得连续的数据,则在取得与上述数据数量相同的8个数据的情况下,时刻数据可以仅是起始者。而且,由于是定期收集,因此只要知道起点,则能够判别各收集时刻,因此能够得到t1、D1、D2、D3、D4、D5、D6、D7这7个数值数据。即,与选择需要的数值数据而取得的情况相比,将存在缺损的数据作为起始,汇总地取得固定数量的数据的方式的相同单位通信量所得到的数据数量变多。
当然,在不连续的缺损的间隔宽,与需要补充的数据相比,不需要补充的数据更多的情况下,与取得连续的数据相比,仅取得选择出的数据的方式的通信效率更好。因此,至此没有过下述想法,即,对于用于补充的数据,不管有无缺损都积极地取得连续的数据。但是,本发明人发现在对来自很多测量设备的测量值进行收集的数据收集服务器中,在发生通信障碍的情况下,连续地发生的情况(设备)多,从缺损开始的时刻起,连续地取得预先确定的次数量的数值数据能够高效地取得数据。
因此,在本发明的实施方式涉及的数据收集服务器1、或缺损数据补充方法中,作为成为与上述报头对应量以上的数据量的次数,设为取得从缺损开始起连续的规定次数(大于或等于7次)量的数据。并且,为了提高重新取得的成功率,仅将最近的定期收集已成功的设备设为重新取得的对象。下面,进行详细说明。但是,如果将规定次数(称为重新取得组长度N)设为原本的“大于或等于7”而具体地说明,则数据的显示、解析等变得繁杂,因此将规定次数假定为“4”而进行具体的说明。此外,后面对数据收集服务器1和测量器2的具体的关系进行说明。
<重新取得组>
如上所述,重新取得组Ga是在来自某设备的数据收集产生了缺损时,汇总地进行重新取得的数据的组。具体而言,针对每个设备进行规定,如果在某收集时刻Ti,该设备中的缺损初次产生,则对表示缺损开始时刻(收集时刻(Ti+3))的缺损时刻值Vt进行定义。然后,无论在中途是否存在缺损,均以缺损时刻值Vt为起点,将与重新取得组长度N量的、连续的全部收集时刻(Ti~Ti+3)对应的数据,设定为与缺损时刻值Vt相关联的一个重新取得组Gai。
然后,针对某重新取得组Gai,在缺损开始时刻(缺损时刻值Vt:收集时刻(Ti))处的收集结束的时间点将缺损次数值Vc设定为1。而且,之后,无论在中途是否存在缺损,都以每次定期收集为单位而进行加计数,直至重新取得组Gai的最后的定期收集(收集时刻(Ti+3))为止。而且,如果缺损次数值Vc达到重新取得组长度N量,则视为重新取得组Gai完成,在下次的收集时刻(Ti+4)对规定出进行重新取得动作的标志值Vf进行设立。此时,在将缺损次数值Vc复位(设定为0),之后的收集中产生了缺损时,设为“初次产生缺损”,对缺损次数值Vc进行加计数直至缺损时刻值Vt和重新取得组Gaj完成为止。
而且,为了对上述重新取得组Gai、缺损时刻值Vt、缺损次数值Vc、标志值Vf进行计算,定期收集信息生成部10以每次定期收集为单位生成如下所示的定期收集信息Dp。
<定期收集信息>
在数据取得部70以固定时间(30分钟)为单位对由多个测量器2测量出的数据进行定期收集的情况下,定期收集信息生成部10基于收集到的数据,生成如图2上部分所示的定期收集信息Dp。定期收集信息Dp表示从各测量器2收集到的趋势数据,例如,图2表示的是,从时刻T1起开始定期收集,在刚刚执行了时刻T7的定期收集之后生成的定期收集信息Dp。
此外,在后述的数据补充处理的前后对在时刻Tc进行了定期收集时生成的定期收集信息进行区分的情况下,将补充处理前的定期收集信息记为“Dp(Tc)U”,将通过数据重新取得而进行了数据补充(修正)的定期收集信息记为“Dp(Tc)C”。在图2中,如果以矩阵(表)形式表现定期收集信息Dp,则第1列为各测量器2的ID(M1~M1000(千台量),下面,有时替代“2”而如测量器Mi这样赋予ID而进行标记。)。而且,第1行为时刻ID(记载为T1、T2、T3、…),第2行为时刻数据,第3行及其后为各测量器Mi的测量数据。
而且,是各测量器2为例如电量计,作为测量数据而收集了电量累计值的情况下的定期收集信息Dp,在第3行及其后的栏中写入有数值者表示的是成功收集到数据的情况下的数据。另一方面,记载为“×”的表示没能收集到数据。例如,就ID为M3的测量器2而言,示出了在收集时刻T1、T3、T6、T7,成功收集到14、23、52、61这些数据,但在T2、T4、T5,收集失败而产生了缺损数据。
此外,关于“收集时刻”,各测量器2与数据收集服务器1是同步的,能够将定期收集时的收集时刻视为由各测量器2进行了测量的时刻。另外,由各测量器2存储的多次量的测量数据也与各自所对应的收集时刻一致。因此,在之后的说明中,连同测量时刻在内作为“收集时刻”进行说明。另外,在本实施方式中,为了方便说明,与时刻相关地表示了实际时刻数据和时刻ID(Ti)这2种数据,但实际使用上仅一者即可。
<缺损信息>
下面,对缺损信息Dd进行说明。
缺损状况解析部20基于定期收集信息Dp,将从产生了缺损的时刻起连续的重新取得组长度N量(4次量)的数据定义为重新取得组Ga,以重新取得组Ga为单位对缺损时刻值Vt、缺损次数值Vc、标志值Vf进行计算,生成缺损信息Dd。
具体而言,缺损状况解析部20使用紧接于在收集时刻Tc进行的定期收集后的定期收集信息Dp(Tc)U、在紧靠于其前的定期收集(收集时刻Tc-1)时生成的缺损信息Dd(称为缺损信息Ddc-1)、以及从补充动作控制部30输出的补充动作信息,生成在下次定期收集时使用的缺损信息Ddc。例如,在收集时刻T7进行了定期收集的情况下,使用在前一次的收集中生成且在本收集中使用的缺损信息Dd6、定期收集信息Dp(T7)U和补充动作信息,生成下一次使用的缺损信息Dd7(对缺损状况进行解析)。此外,在图2下部分,不只是在收集时刻T7使用的Dd6,为了说明其之前的定期收集时的动作、以及初始设定值等,还排列记载有过去7次量的缺损信息Dd(Dd0~Dd6)。
各缺损信息Ddi各自能够以矩阵形式表现,在第1列记载各测量器2的ID(M1~M1000(千台量)),在第2列记载表示重新取得组Ga是否已完成的标志值Vf,在第3列记载表示每个重新取得组Ga的起点(产生了缺损的初始收集时刻)的缺损时刻值Vt。此处,作为定期收集开始前的值即初始值,默认地将标志值Vf设定为“0”,将缺损时刻值Vt设定为“空白栏”,将缺损次数值Vc设定为“0”。其中,在将定期收集信息Dp、缺损信息Dd例如以每日或每周为单位而作为不同文件进行保存的情况下,初始值继承前次值即可。
此外,例如,如测量器M1的Dd1~Dd3那样,记载缺损时刻值Vt,在标志值Vf为0的情况下,原本,缺损次数值Vc具有1~3中的某一值,但在图2的例子中省略了缺损次数值Vc的记载。另外,虽然可以将缺损次数值Vc保存于缺损信息Dd内,但如果有定期收集信息Dp和缺损时刻值Vt,则立刻能够进行计算,因此也可以不特意保存缺损次数值Vc。因此,在使用图4而稍后说明的流程图中,针对缺损次数值Vc的加计数动作也省略了记载。
另外,就图2所示的定期收集信息Dp(T7)U而言,如后述,在收集时刻T6后进行缺损数据的补充处理。但是,在该例子中,基于下述的设定而示出了数据,即,当时的数据的重新取得(缺损数据的补充)失败,达到了执行下一次收集时刻T7的定期收集的阶段。即,图2所示的定期收集信息Dp(T7)U的数据是一次补充也没有进行,各收集时刻的数据依然为该定期收集时所收集到的数据。
此外,就动作流程而言,无论实际上是否进行了补充动作,都在对是否需要补充动作进行了确认后,生成用于下一次定期收集的缺损信息Dd,但如果同时针对补充动作和缺损信息Dd的生成进行说明则变得繁杂。因此,首先,还参考图4的流程图,对在没有伴随补充动作的情况下,缺损状况解析部20如何设定(生成)在下一次的定期收集时所使用的缺损信息Dd进行说明。作为具体例,说明在进行了定期收集后,在多个测量器中,针对表示典型的数据测量状况的测量器M1、M3、M1000,在某收集时刻,如何对缺损状况进行解析。
首先,作为默认值,缺损状况解析部20针对测量器M1~M1000,对设定为标志值Vf=0、缺损时刻值Vt=“-”、缺损次数值Vc=0的缺损信息Dd0进行创建。其中,如上所述,在将缺损信息Dd、定期收集信息Dp以每天或每周为单位分开进行处理时,基于前一次的信息的末尾值,生成出该信息的初始值即可。
<定期收集动作>
在图4所示的流程中,基本上是按照数据收集控制部40的指示,各设备进行动作。基本上,在进行定期收集动作,生成了定期收集信息Dp后,从测量器M1至M1000为止反复实施缺损状况的解析、数据补充、缺损信息Dd的生成等一系列动作。数据取得部70通过通信网络从测量器2取得定期收集数据(S10),定期收集信息生成部10生成定期收集信息Dp,输出至定期收集信息保存部100(S20)。然后,针对各测量器2,依次执行如下述的解析、补充动作。
<测量器M1的缺损信息的生成>
在收集时刻T1,使用定期收集信息Dp(T1)U(图2所示的Dp(T7)U中的、至收集时刻T1为止的累积数据)、缺损信息Dd0、以及没有进行补充动作这一内容的补充动作信息,对缺损状态进行解析。此时,在测量器M1中产生了缺损,但由于在Dd0处不存在缺损时刻值Vt,因此判定为“是初次的缺损”。然后,在下一次使用的缺损信息Dd1的测量器M1的栏中,追加缺损时刻T1(动作A1:步骤Sk10(Y)→Sk110(No)→Sk150)。另外,将缺损次数值Vc设定为1。
在收集时刻T4,使用定期收集信息Dp(T4)U(图2所示的Dp(T7)U中的、至收集时刻T4为止的累积数据)、缺损信息Dd3、以及没有进行补充动作这一内容的补充动作信息,对缺损状态进行解析。此时,在测量器M1中,由于从缺损开始起是第4次收集,缺损次数值Vc成为4,因此在Dd4的测量器M1的栏中,将标志值Vf设定为1,将缺损次数值Vc复位(动作A2:步骤Sk10(Y)→Sk110(Y)→Sk120(=N)→Sk130→Sk140→Sk200)。
在收集时刻T5,使用定期收集信息Dp(T5)U(图2所示的Dp(T7)U中的、至收集时刻T5为止的累积数据)、缺损信息Dd4、以及没有进行补充动作这一内容的补充动作信息,对缺损状态进行解析。此时,在测量器M1中,产生缺损,在Dd4处存在缺损时刻值Vt,但由于缺损次数值Vc为0,因此判定为“视为初次的缺损”,在Dd5的测量器M1的栏中,追加缺损时刻T5(动作A3:步骤Sk10(Y)→Sk110(Y)→Sk120(=0)→Sk150→→Sk200)。另外,将缺损次数值Vc设定为1。
<测量器M3的缺损信息的生成>
在收集时刻T2,使用定期收集信息Dp(T2)U、缺损信息Dd1、以及没有进行补充动作这一内容的补充动作信息,对缺损状态进行解析。此时,在测量器M3中产生了缺损,但由于在Dd1处不存在缺损时刻值Vt,因此判定为“是初次的缺损”,在Dd2的测量器M3的栏中,追加缺损时刻T2(步骤Sk10(Y)→Sk110(No)→Sk150→→Sk200)。另外,将缺损次数值Vc设定为1。
在收集时刻T5,使用定期收集信息Dp(T5)U、缺损信息Dd4、以及没有进行补充动作这一内容的补充动作信息,对缺损状态进行解析。此时,在测量器M3中,由于从缺损开始起是第4次收集,缺损次数值Vc成为4,因此在Dd5的测量器M3的栏中,将标志值Vf设定为1,将缺损次数值Vc复位(动作B:步骤Sk10(Y)→Sk120(=N)→Sk130→→Sk200)。
<测量器M1000的缺损信息的生成>
在收集时刻T3,在测量器M1000产生了缺损,但由于在Dd2处不存在缺损时刻值Vt,因此判定为“是初次的缺损”,在Dd3的测量器M1000的栏中,追加缺损时刻T3(步骤Sk10(Y)→Sk110(No)→Sk150→→Sk200)。另外,将缺损次数值Vc设定为1。
在收集时刻T6,使用定期收集信息Dp(T6)U、缺损信息Dd5、以及没有进行补充动作这一内容的补充动作信息,对缺损状态进行解析。此时,在测量器M1000中,由于不存在缺损,从缺损开始起是第4次收集,缺损次数值Vc成为4,因此在Dd6的测量器M1000的栏中,将标志值Vf设定为1,将缺损次数值Vc复位(动作C:步骤Sk10(No)→Sk20=(0)→Sk90(=N)→Sk130→→Sk200)。
下面,说明由补充动作控制部30进行的补充动作和补充成功时的定期收集信息Dp的修正、以及与补充动作信息对应的由缺损状况解析部20进行的缺损信息Dd的生成动作。
基本上,如上所述,对当前时刻Tc有无缺损进行确认(Sk10)。在当前时刻Tc发生了缺损的情况下(Y),有可能在与对应的测量器2相关的通信路径发生了某些障碍,即使请求进行数据的重新取得也有可能不能取得数据。或者,由于也有可能仅是在通信中等待超时,因此不仅数据重新取得失败,有时还成为在该期间占据了通信的状态、成为妨碍其它通信而无法高效地进行通信的状况。为了避免这些状况,对当前时刻Tc的数据取得状态进行确认,对是否实施数据补充进行判断。而且,在没有缺损的情况下,对缺损信息Ddc-1的标志值Vf进行确认(Sk20)。
下面,使用图3所示的定期收集信息Dp和缺损信息Dd,具体进行说明。图3表示的是在时刻T7进行定期收集,然后,在进行了数据补充后得到了修正的定期收集信息Dp(T7)C、时刻T5至T7的补充动作所使用的缺损信息Dd4至Dd6、在补充后生成的缺损信息Dd7。由于各信息内的显示内容与图2中说明过的相同,因此省略重复的说明。
此处,还参考图4的流程图说明在多个测量器中,针对表示典型的数据测量状况的测量器M1、M3、M1000,在某收集时刻,如何对补充动作进行控制。
<测量器M1的补充动作和缺损信息的生成>
在收集时刻T5~T7,缺损信息Dd4~Dd6的标志值Vf分别为1(信息D1)。但是,在定期收集信息Dp中,在该定期收集时数据存在缺损(信息D2)。由此,补充动作控制部30没有进行测量器M1处的数据重新取得,而是将表示没有进行数据重新取得这一内容的补充动作信息输出至缺损状况解析部20。另一方面,缺损状况解析部20基于该定期收集中的补充动作信息和定期收集信息Dp(Ti)C、以及前一次定期收集的缺损信息Ddi-1,生成下一次使用的缺损信息Ddi(步骤Sk10(Y)→Sk110→Sk120→→Sk200)。此时,在T6和T7,由于缺损次数值Vc分别为1和2,因此继续保持前一次标志,并且对缺损次数值Vc进行加计数(Sk120(0<Vc<N)→Sk160→Sk200)。
<测量器M3的补充动作和缺损信息的生成>
在收集时刻T6,缺损信息Dd5的标志值Vf为1(信息E1),在该定期收集中的定期收集信息Dp(T6)U(图2)中没有数据的缺损(信息E2)。由此,补充动作控制部30根据缺损时刻值Vt将以测量器M3的时刻T2为起点的4次量的数据设定为重新取得组Ga2,进行重新取得(进行数据重新取得(Sk10(No)→Sk20(=1)→Sk30)。但是,由于数据重新取得失败,因此将该内容的补充动作信息输出至缺损状况解析部20(Sk40(No)→Sk70)。缺损状况解析部20对缺损状态进行解析,缺损时刻值Vt的数量由于仅有T2因此为1,缺损次数值Vc为0,因此继续保持前一次标志(1)。即,根据与缺损时刻值Vt、标志值Vf一起继承了前一次值的值,生成缺损信息Dd6的测量器M3的栏(动作E0:步骤Sk70(=1)→Sk90(<N)→Sk95→Sk200)。
在收集时刻T7,缺损信息Dd6的标志值Vf为1(信息E1),在该定期收集中的定期收集信息Dp(T6)U(图2)中没有数据的缺损(信息E3)。由此,补充动作控制部30将以测量器M3的时刻T2为起点的4次量的数据设定为重新取得组Ga2,进行重新取得(Sk10(No)→Sk20(=1)→Sk30)。
此时,从测量器M3取得的数据,如果除去报头则仅是表示起点的时刻T2、时刻T2的数据D2、时刻T3的数据D3、时刻T4的数据D4、时刻T5的数据D5合计5个数据即可,能够高效地进行通信。此外,由于知道从测量器M3得到的数据的起点为时刻T2,因此根据情况也不需要表示起点的时刻T2的数据。即,也可以将重新取得对象的数据数量减少为数据D2、数据D3、数据D4、数据D5合计4个。
由于这样的条件下的数据重新取得成功,因此将定期收集信息Dp修正为图3所示的Dp(T6)C(动作E1:Sk40(Y)→Sk50)。然后,将该内容的补充动作信息输出至缺损状况解析部20。
由于缺损状况解析部20将作为缺损时刻值Vt保存的T2删除,并且通过删除T2,从而缺损时刻值Vt的数量成为0,因此将标志值Vf设定为0而生成缺损信息Dd6的测量器M3的栏(动作E2:步骤Sk60→Sk70(0)→Sk100→Sk200)。
<测量器M1000的补充动作和缺损信息的生成>
在收集时刻T7,缺损信息Dd6的标志值Vf为1(信息F1),在该定期收集中的定期收集信息Dp(T7)U(图2)中没有数据的缺损(信息F2)。由此,补充动作控制部30根据缺损时刻值Vt将以测量器M1000的时刻T3为起点的4次量的数据设定为重新取得组Ga3,进行重新取得(Sk10(No)→Sk20(=1)→Sk30)。但是,由于数据重新取得失败,因此将该内容的补充动作信息输出至缺损状况解析部20(Sk40(No)→Sk70)。缺损状况解析部20对缺损状态进行解析,缺损时刻值Vt的数量由于仅有T3因此为1,缺损次数值Vc为0,因此继续保持前一次标志(1)。即,根据与缺损时刻值Vt、标志值Vf一起继承了前一次值的值,生成缺损信息Dd7的测量器M1000的栏(动作F0:步骤Sk70(=1)→Sk90(<N)→Sk95→Sk200)。
在对各测量器Mi依次实施了上述动作后,生成缺损信息Dd7,准备下一次的定期收集。这样,在经由通信路径从多个测量器2定期地进行数据收集的情况下,重新取得动作不会对定期收集造成影响,能够进行数据的重新取得(补充)。其结果,能够基于数据的缺损状况高效地重新取得数据而进行缺损数据的补充。
此处,使用图5再次对数据收集服务器1和测量器2的结构进行说明。如图5所示,数据收集服务器1从测量器2-1~2-1000(测量器M1~M1000)经由无线、或如PLC(Power LineComunication)那样的有线的通信手段定期地对测量数据进行收集。各测量器2-1~2-1000也将过去的定期收集的测量数据保存于内部,在图中示出保存有12小时量的定期收集(30分钟×25次)的数据。
例如,设想到作为数据收集服务器1设为仪表读取服务器,作为测量器2设为智能电表的仪表读取系统。或者,如果应用于作为数据收集服务器1使用节能数据收集服务器、作为测量器2使用测量终端的节能系统,应用于作为数据收集服务器1使用需求数据收集服务器、作为测量器2使用交易用仪表的需求监视系统等,则能够高效地进行缺损数据的收集。
此外,在本发明的实施方式涉及的数据收集服务器1或数据缺损补充方法中,以通信状态产生变化为前提。该前提并不限于无线通信,还适用于如PLC那样的有线通信手段。这是因为例如在如PLC那样的经由电力线的通信中,即使电力线得到了屏蔽,也会由于从使用的设备发出的噪声等而使通信状况产生变化。即,本发明的实施方式涉及的数据收集服务器1或数据缺损补充方法无论在通过无线通信手段进行通信的结构中、还是在通过有线通信手段进行通信的结构中,对由于环境等而使通信状况产生变化的结构都会发挥效果。
此外,在本实施方式1涉及的数据收集服务器1及缺损数据补充方法中,特别在图2~图4中,是以各测量器2具有一个标志值Vf为前提进行说明的。而且,在某测量器Mi存在多个缺损时刻值Vt的情况下,将以与最早的日期和时间对应的缺损时刻值Vt为起点的一个重新取得组Ga作为重新取得对象。由此,能够限制重新取得对象的数量,不对定期收集造成影响,执行重新取得动作。
另一方面,也可以与缺损时刻值Vt对应地对标志值Vf进行设定而生成缺损信息Dd。在该情况下,标志值为1(Sk20),即,作为重新取得组Ga完成的也可以全部都设为重新取得对象。或者,也可以针对全部测量器2预先计算出重新取得组Ga的数量,针对成为重新取得的候补者标注优先级而决定重新取得对象。例如,在图4的流程中示出针对每个测量器2提取重新取得组Ga而执行补充动作的例子。但是,在如上所述标注优先级而选择重新取得组Ga的情况下,也可以在针对全部测量器2而提取出重新取得组后,在选择了实际作为重新取得对象的重新取得组Ga后执行重新取得。
此时,作为选择基准,如果以缺损时刻值Vt从早到新的顺序选择固定数量的重新取得组Ga而进行补充,则例如能够使可汇总地进行统计的数据的日期最接近于当前时刻。或者,如果选择缺损时刻值Vt的数量多的测量器的重新取得组Ga,则能够对每个测量器的数据的缺损率的偏差进行校正而使其均衡化。另外,也可以根据通信条件的好坏、即该定期收集中的缺损的数量,对通信条件进行判断,如果缺损的数量少则通信条件良好,如果缺损多则通信条件差。在该情况下,也可以以缺损越多则越少的方式,与缺损数量对应地使选择为重新取得对象的数量产生变化。
另外,在本实施方式中,作为通信状态良好的情况,设为以在该定期收集时没有缺损的测量器2为对象重新取得数据,但并不限于此,至少取得从缺损开始起连续的数据即可。在该情况下,补充动作控制部30也可以不使用定期收集信息Dp,仅通过缺损信息Dd对补充动作进行控制。另外,关于缺损信息Dd,并不限于在前一次的定期收集中生成的缺损信息DdC-1,如果对缺损次数值Vc、标志值Vf等的赋予定时(timing)、评价基准进行调整,则也可以使用在该定期收集中生成的缺损信息DdC。
如上所述,根据本发明的实施方式1涉及的数据收集服务器1,具备:数据取得部70,其与多个测量器2(M1~M1000)各自进行通信,取得多个测量器2各自通过定期测量而测量到的数据;定期收集信息生成部10,其生成定期收集信息Dp,该定期收集信息Dp是对由数据取得部70取得的数据中的、通过与定期测量同步的定期收集而收集到的数据进行汇总得到的;缺损状况解析部20,其基于定期收集信息Dp,对从多个测量器2各自收集到的数据的缺损状况进行解析而生成缺损信息Dd;以及补充动作控制部30,其基于缺损信息Dd,对用于补充定期收集信息Dp中的缺损的数据的补充动作进行控制,补充动作控制部30构成为,在各个定期收集之后,针对多个测量器2每一者,设定以产生了缺损的时刻(缺损时刻值Vt)为起点而连续的规定次数量的数据组(重新取得组Ga),数据取得部70针对设定出的每个数据组(重新取得组Ga)重新取得由该测量器保存的数据,因此如果以定期收集为前提,则能够抑制通信所需的数据量,高效地重新取得数据而进行缺损数据的补充。
特别地,补充动作控制部30构成为基于定期收集信息Dp,将数据组(重新取得组Ga)中的、在该定期收集时数据产生了缺损的测量器2的数据组(重新取得组Ga)从重新取得的对象中除去。即,由于仅将在该时间点通信状态为良好状态的测量器2作为对象,因此重新取得的成功率高,能够更高效地进行数据的补充。
另外,由于补充动作控制部30针对多个测量器2每一者,在设定有多个数据组(重新取得组Ga)的情况下,仅将产生了缺损的时刻(缺损时刻值Vt)最早的数据组选择为重新取得的对象,因此例如,能够确保为了针对各设备作出统计等而最需要的旧的数据,并且限制重新取得对象的数量,不对定期收集造成影响,执行重新取得动作。
或者,补充动作控制部30如果在对多个测量器2设定的数据组(重新取得组Ga)的总数比规定数量多的情况下,将产生了缺损的时刻(缺损时刻值Vt)早的重新取得组Ga优先地选择为所述重新取得的对象,则能够使可汇总地统计的数据的日期最接近当前时刻。
或者,补充动作控制部30如果在对多个测量器2设定的数据组(重新取得组Ga)的总数比规定数量多的情况下,将数据组(重新取得组Ga)的数量多的测量器2的数据组(重新取得组Ga)优先地选择为重新取得的对象,则能够对通信状态差的状态持续的测量器2的数据集中地进行补充,能够将数据的齐备程度的偏差均衡化。
如上所述,根据本发明的实施方式1涉及的缺损数据补充方法,其为在数据收集服务器1经由通信手段对由多个测量器2各自通过定期测量而测量到的数据进行收集的系统中对缺损数据进行补充的方法,该缺损数据补充方法包含如下步骤:定期收集信息生成步骤(S20),生成定期收集信息Dp,该定期收集信息Dp将从多个测量器2取得的数据中的、通过与定期测量同步的定期收集而收集到的数据进行汇总得到的;缺损状况解析步骤(Sk60~Sk100、Sk130~Sk160),基于定期收集信息Dp,对从多个测量器2各自收集到的数据的缺损状况进行解析而生成缺损信息Dd;以及补充动作控制步骤(Sk10~Sk50),基于缺损信息Dd,对用于补充定期收集信息中的缺损的数据的补充动作进行控制,在补充动作控制步骤中,构成为在各个定期收集之后,针对多个测量器2每一者,设定以产生了缺损的时刻(缺损时刻值Vt)为起点而连续的规定次数量的数据组(重新取得组Ga),数据取得部70针对设定出的每个数据组(重新取得组Ga)重新取得由该测量器保存的数据,因此如果以定期收集为前提,则能够抑制通信所需的数据量,高效地重新取得数据而进行缺损数据的补充。
在补充动作控制步骤(Sk10)中,构成为基于定期收集信息Dp,将数据组(重新取得组Ga)中的、在该定期收集时数据产生了缺损的测量器2的数据组(重新取得组Ga)从重新取得的对象中除去。即,由于仅将在该时间点通信状态为良好状态的测量器2作为对象,因此重新取得的成功率高,能够更高效地进行数据的补充。
标号的说明
1:数据收集服务器,2:测量器,10:定期收集信息生成部,20:缺损状况解析部,30:补充动作控制部,40:数据收集控制部,70:数据取得部,100:定期收集信息保存部,200:缺损信息保存部,
Dd:缺损信息,Dp:定期收集信息,Ga:重新取得组,N:重新取得组长度,
Vc:缺损次数值,Vf:标志值,Vt:缺损时刻值。
Claims (7)
1.一种数据收集服务器,其特征在于,具备:
数据取得部,其与多个测量器各自进行通信,取得所述多个测量器各自通过定期测量而测量到的数据;
定期收集信息生成部,其生成定期收集信息,该定期收集信息是对由所述数据取得部取得的数据中的、通过与所述定期测量同步的定期收集而收集到的数据进行汇总得到的;
缺损状况解析部,其基于所述定期收集信息,对从所述多个测量器各自收集到的数据的缺损状况进行解析而生成缺损信息;以及
补充动作控制部,其基于所述缺损信息,对用于补充所述定期收集信息中的缺损的数据的补充动作进行控制,
所述补充动作控制部在各个所述定期收集之后,针对所述多个测量器每一者,设定以产生了缺损的时刻为起点而连续的规定次数量的数据组,所述数据取得部针对所述设定出的每个数据组重新取得由该测量器保存的数据。
2.根据权利要求1所述的数据收集服务器,其特征在于,
所述补充动作控制部基于所述定期收集信息,将所述数据组中的、在该定期收集时数据产生了缺损的测量器的数据组从所述重新取得的对象中除去。
3.根据权利要求1或2所述的数据收集服务器,其特征在于,
所述补充动作控制部针对所述多个测量器每一者,在设定了多个所述数据组的情况下,仅将产生了缺损的时刻最早的数据组选择为所述重新取得的对象。
4.根据权利要求1或2所述的数据收集服务器,其特征在于,
所述补充动作控制部在针对所述多个测量器设定出的所述数据组的总数比规定数量多的情况下,将产生了缺损的时刻早的数据组优先地选择为所述重新取得的对象。
5.根据权利要求1或2所述的数据收集服务器,其特征在于,
所述补充动作控制部在针对所述多个测量器设定出的所述数据组的总数比规定数量多的情况下,将所述数据组的数量多的测量器的数据组优先地选择为所述重新取得的对象。
6.一种缺损数据补充方法,其在数据收集服务器经由通信手段对由多个测量器各自通过定期测量而测量到的数据进行收集的系统中对缺损数据进行补充,
该缺损数据补充方法的特征在于,包含如下步骤:
定期收集信息生成步骤,生成定期收集信息,该定期收集信息是对从所述多个测量器取得的数据中的、通过与所述定期测量同步的定期收集而收集到的数据进行汇总得到的;
缺损状况解析步骤,基于所述定期收集信息,对从所述多个测量器各自收集到的数据的缺损状况进行解析而生成缺损信息;以及
补充动作控制步骤,基于所述缺损信息,对用于补充所述定期收集信息中的缺损的数据的补充动作进行控制,
在所述补充动作控制步骤中,在各个所述定期收集之后,针对所述多个测量器每一者,设定以产生了缺损的时刻为起点而连续的规定次数量的数据组,针对设定出的每个数据组重新取得由该测量器保存的数据。
7.根据权利要求6所述的缺损数据补充方法,其特征在于,
在所述补充动作控制步骤中,基于所述定期收集信息,将所述数据组中的、在该定期收集时数据产生了缺损的测量器的数据组从所述重新取得的对象中除去。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2016/069405 WO2018003053A1 (ja) | 2016-06-30 | 2016-06-30 | データ収集サーバおよび欠損データ補完方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109328375A true CN109328375A (zh) | 2019-02-12 |
CN109328375B CN109328375B (zh) | 2020-12-15 |
Family
ID=60786128
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680087138.7A Active CN109328375B (zh) | 2016-06-30 | 2016-06-30 | 数据收集服务器及缺损数据补充方法 |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP6540897B2 (zh) |
CN (1) | CN109328375B (zh) |
TW (1) | TWI601023B (zh) |
WO (1) | WO2018003053A1 (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000036987A (ja) * | 1998-07-17 | 2000-02-02 | Mitsubishi Heavy Ind Ltd | 遠隔監視装置 |
CN101114462A (zh) * | 2006-07-30 | 2008-01-30 | 国际商业机器公司 | 同步伺服通道及其操作方法 |
US20080098276A1 (en) * | 2006-10-19 | 2008-04-24 | Oki Electric Industry Co., Ltd. | Semiconductor integrated circuit |
CN101222311A (zh) * | 2008-01-29 | 2008-07-16 | 杭州华三通信技术有限公司 | 实时报文丢包恢复方法、系统及接收端单元 |
KR20120001474A (ko) * | 2010-06-29 | 2012-01-04 | 삼성전자주식회사 | 무선 통신 시스템에서 하향링크 자원 할당 정보의 송수신 방법 및 장치 |
JP2013036887A (ja) * | 2011-08-09 | 2013-02-21 | Nippon Telegr & Teleph Corp <Ntt> | 観測値信頼度評価装置、観測値信頼度評価方法及び観測値信頼度評価プログラム |
CN104518853A (zh) * | 2013-09-27 | 2015-04-15 | 北京新媒传信科技有限公司 | 一种数据重传的方法、接收端及系统 |
CN104735036A (zh) * | 2013-12-24 | 2015-06-24 | 横河电机株式会社 | 一种数据回填方法及装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004110810A (ja) * | 2002-08-29 | 2004-04-08 | Ricoh Co Ltd | 情報収集支援システム、サーバ装置、情報収集方法、プログラム及び記録媒体 |
TWI344605B (en) * | 2005-05-11 | 2011-07-01 | Via Tech Inc | Batch transmitting server and batch transmitting method |
US20070083642A1 (en) * | 2005-10-07 | 2007-04-12 | International Business Machines Corporation | Fully distributed data collection and consumption to maximize the usage of context, resource, and capacity-based client server interactions |
JP5143537B2 (ja) * | 2007-12-05 | 2013-02-13 | 関西電力株式会社 | 無線通信システム |
TWI524191B (zh) * | 2010-08-27 | 2016-03-01 | Alibaba Group Holding Ltd | Data analysis methods, systems and servers |
TWI462017B (zh) * | 2012-02-24 | 2014-11-21 | Wistron Corp | 伺服器部署系統及資料更新的方法 |
CN105468594A (zh) * | 2014-08-11 | 2016-04-06 | 中兴通讯股份有限公司 | 一种采集数据的优化方法、系统及服务器 |
TWI531910B (zh) * | 2014-11-17 | 2016-05-01 | 物聯智慧科技(深圳)有限公司 | 資料管理方法、電腦程式產品及管理伺服器端 |
CN105138484A (zh) * | 2015-08-07 | 2015-12-09 | 珠海格力电器股份有限公司 | 数据采集服务器 |
-
2016
- 2016-06-30 CN CN201680087138.7A patent/CN109328375B/zh active Active
- 2016-06-30 JP JP2018524653A patent/JP6540897B2/ja active Active
- 2016-06-30 WO PCT/JP2016/069405 patent/WO2018003053A1/ja active Application Filing
- 2016-07-18 TW TW105122591A patent/TWI601023B/zh active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000036987A (ja) * | 1998-07-17 | 2000-02-02 | Mitsubishi Heavy Ind Ltd | 遠隔監視装置 |
CN101114462A (zh) * | 2006-07-30 | 2008-01-30 | 国际商业机器公司 | 同步伺服通道及其操作方法 |
US20080098276A1 (en) * | 2006-10-19 | 2008-04-24 | Oki Electric Industry Co., Ltd. | Semiconductor integrated circuit |
CN101222311A (zh) * | 2008-01-29 | 2008-07-16 | 杭州华三通信技术有限公司 | 实时报文丢包恢复方法、系统及接收端单元 |
KR20120001474A (ko) * | 2010-06-29 | 2012-01-04 | 삼성전자주식회사 | 무선 통신 시스템에서 하향링크 자원 할당 정보의 송수신 방법 및 장치 |
JP2013036887A (ja) * | 2011-08-09 | 2013-02-21 | Nippon Telegr & Teleph Corp <Ntt> | 観測値信頼度評価装置、観測値信頼度評価方法及び観測値信頼度評価プログラム |
CN104518853A (zh) * | 2013-09-27 | 2015-04-15 | 北京新媒传信科技有限公司 | 一种数据重传的方法、接收端及系统 |
CN104735036A (zh) * | 2013-12-24 | 2015-06-24 | 横河电机株式会社 | 一种数据回填方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2018003053A1 (ja) | 2018-09-27 |
WO2018003053A1 (ja) | 2018-01-04 |
TWI601023B (zh) | 2017-10-01 |
TW201810079A (zh) | 2018-03-16 |
CN109328375B (zh) | 2020-12-15 |
JP6540897B2 (ja) | 2019-07-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11913854B2 (en) | Method and system for fault diagnosis with small samples of power equipment based on virtual and real twin spaces | |
US8972308B2 (en) | Combining multivariate time-series prediction with motif discovery | |
CN110740054B (zh) | 一种基于强化学习的数据中心虚拟化网络故障诊断方法 | |
CN105677469A (zh) | 定时任务执行方法及装置 | |
CN111181800B (zh) | 测试数据处理方法、装置、电子设备及存储介质 | |
CN109886328B (zh) | 一种电动汽车充电设施故障预测方法与系统 | |
CN108021509B (zh) | 基于程序行为网络聚合的测试用例动态排序方法 | |
CN104427402A (zh) | 一种无线网络流媒体质量获取方法及系统 | |
CN109165152A (zh) | Web系统的性能监控方法、系统和存储介质 | |
CN112730938A (zh) | 一种基于用电采集大数据的窃电用户判断方法 | |
CN108683658B (zh) | 基于多rbm网络构建基准模型的工控网络流量异常识别方法 | |
CN111738521A (zh) | 非侵入式电力负荷监测序列生成方法、系统、设备及介质 | |
CN105630725B (zh) | 一种用于分布式采集系统的数据同步方法 | |
CN102801548A (zh) | 一种智能预警的方法、装置及信息系统 | |
CN106373616A (zh) | 一种检测随机存储器故障的方法、装置和网络处理器 | |
CN109328375A (zh) | 数据收集服务器及缺损数据补充方法 | |
CN112232985A (zh) | 用于泛在电力物联网的配用电数据监测方法及装置 | |
CN103279816A (zh) | 基于活动窗口统计终端工作效率的方法和系统 | |
CN106874525B (zh) | 一种风电机组设备故障筛查、统计的方法与装置 | |
CN101419280B (zh) | 雷达数据扇号数统计监测方法 | |
CN103778039B (zh) | 用于追踪定时相关的方法 | |
CN113127237A (zh) | 风力发电机组的主故障识别方法和系统 | |
CN113537942A (zh) | 一种提高样本标记数量的方法及系统 | |
CN101827092B (zh) | 一种针对网络数据流中周期性子序列的检测方法 | |
CN111062430A (zh) | 一种基于概率密度函数的行人重识别评价方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |