CN110703984A - 数据收集系统及数据收集方法 - Google Patents

数据收集系统及数据收集方法 Download PDF

Info

Publication number
CN110703984A
CN110703984A CN201910598130.2A CN201910598130A CN110703984A CN 110703984 A CN110703984 A CN 110703984A CN 201910598130 A CN201910598130 A CN 201910598130A CN 110703984 A CN110703984 A CN 110703984A
Authority
CN
China
Prior art keywords
data
storage unit
unit
data storage
data collection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910598130.2A
Other languages
English (en)
Other versions
CN110703984B (zh
Inventor
新井崇
吉田勇作
佐藤秀一
占部宏生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yokogawa Electric Corp
Original Assignee
Yokogawa Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yokogawa Electric Corp filed Critical Yokogawa Electric Corp
Publication of CN110703984A publication Critical patent/CN110703984A/zh
Application granted granted Critical
Publication of CN110703984B publication Critical patent/CN110703984B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653—Monitoring storage devices or systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0611—Improving I/O performance in relation to response time
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G05B19/4183—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by data acquisition, e.g. workpiece identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751—Error or fault detection not based on redundancy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766—Error or fault reporting or storing
    • G06F11/0787—Storage of error reports, e.g. persistent data storage, storage using memory protection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/38—Services specially adapted for particular environments, situations or purposes for collecting sensor information
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/31—From computer integrated manufacturing till monitoring
    • G05B2219/31334—Database with devices, configuration, of plant
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/31—From computer integrated manufacturing till monitoring
    • G05B2219/31337—Failure information database

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Manufacturing & Machinery (AREA)
  • Automation & Control Theory (AREA)
  • Selective Calling Equipment (AREA)
  • Arrangements For Transmission Of Measured Signals (AREA)
  • Testing And Monitoring For Control Systems (AREA)

Abstract

本发明提供一种数据收集系统和数据收集方法，所述数据收集系统包括：具有通信功能的设备；收集从所述设备发送来的数据的数据收集装置，所述数据收集装置包括：接收部，接收从所述设备发送来的数据；数据解析部，按照每个所述设备不同的解析用的数据格式对接收到的所述数据进行解析，由此得到解析后数据；第一数据存储部，不能进行数据的重写；第二数据存储部，是与所述第一数据存储部相比能够更高速访问的存储部，且与所述第一数据存储部中存储的数据数量相比存储更少数量的数据；数据写入部，将由所述接收部接收到的所述数据写入所述第一数据存储部而进行存储，将由所述数据解析部获得的所述解析后数据写入所述第二数据存储部而进行存储。

Description

数据收集系统及数据收集方法
技术领域
本发明涉及数据收集系统及数据收集方法。
本申请对2018年7月9日申请的日本国专利申请第2018-129852号主张优先权，并将其内容援引到本申请中。
背景技术
近年来，IoT(Internet Of Things物联网)或IIoT(Industrial Internet OfThings产业物联网)受到关注。上述IoT或IIoT将一切物体(传感器、设备、装置等硬件终端全体)连接于互联网，并将传感器获得的物体数据收集到云端上的服务器，在服务器中分析收集到的数据，并将其分析结果应用(反馈)于特定的目的的技术。
日本专利公开2013-218532号公报或日本专利公开2015-154445号公报中公开了无线通信系统的技术，其将多个被称为无线现场设备的可无线通信的现场设备(测量仪或操作仪)设置在配置于工厂内的设备上，各个无线现场设备将控制信号或测量信号等通过无线网络进行通信。在日本专利公开2013-218532号公报或日本专利公开2015-154445号公报中公开的无线通信系统中，各个无线现场设备与用于进行数据中转的被称为网关的中转装置之间进行无线通信。而且，日本专利公开2013-218532号公报或日本专利公开2015-154445号公报公开的无线通信系统中，网关与上级的管理装置之间利用有线的网络进行通信。
由此，在日本专利公开2013-218532号公报或日本专利公开2015-154445号公报公开的无线通信系统的技术中，能够实现与如下构成的IIoT对应的工厂：在配置于工厂内的各个设备上设置的多个现场设备将表示由传感器检测到的物理量的测量值经由网关输出(发送)到上级的管理装置。
另外，对于现有的基于IoT的系统中使用的数据汇集型的WEB应用来说，供应商自己的应用增多。此外，云端上的服务器从具有IoT功能的各装置收集数据，因此需要保存大量的数据。在此种情况下，存在由于数据量的增加而导致处理速度降低的问题。例如，若数据量增加，则服务器的访问速度降低，其结果，用户侧的显示速度也降低。
发明内容
鉴于上述问题，本发明目的在于提供一种能够抑制由于数据量的增加而导致处理速度降低的技术。
本发明的一个方式的数据收集系统包括：具有通信功能的设备；收集从所述设备发送来的数据的数据收集装置，所述数据收集装置包括：接收部，接收从所述设备发送来的数据；数据解析部，按照每个所述设备不同的解析用的数据格式对接收到的所述数据进行解析，由此得到解析后数据；第一数据存储部，不能进行数据的重写；第二数据存储部，是与所述第一数据存储部相比能够更高速访问的存储部，且与所述第一数据存储部中存储的数据数量相比存储更少数量的数据；数据写入部，将由所述接收部接收到的所述数据写入所述第一数据存储部而进行存储，将由所述数据解析部获得的所述解析后数据写入所述第二数据存储部而进行存储。
根据上述结构，数据收集装置将访问频度高的最近规定期间量的数据以提高了可读性的状态存储在比第一数据存储部能够更高速访问的第二数据存储部，将接收到的保持原样状态的数据存储在不能进行数据重写的第一数据存储部。由此，在第二数据存储部保存比第一数据存储部更少量的数据，且保存为易用于提供信息的状态。此外，第二数据存储部比第一数据存储部的访问速度更快。因此，能够进行高速且稳定的数据访问和高速提供信息。因此，能够抑制由于数据量的增加导致的处理速度的降低。
可以构成为，在上述记载的数据收集系统中，所述第一数据存储部安装为在数据库中不可进行数据的重写的一次写表格。
根据上述结构，从现场设备接收的保持原样状态的数据能够储存在安装为一次写表格的第一数据存储部中。因此，能够原样保存过去获得的老数据。
可以构成为，在上述记载的数据收集系统中，所述第二数据存储部安装为所述数据收集装置的主存储器中存储的数据库中的内存表格。
根据上述结构，转换为可读性高的格式的分析数据存储在安装为内存表格的第二数据存储部中。因此，可读性高的已解析数据作为内存表格储存，因此能够高速访问已解析数据。
可以构成为，在上述记载的数据收集系统中，所述数据收集装置还包括标记赋予部，所述标记赋予部赋予用于确定所述设备的设置场所的标记，所述数据写入部将所述标记和所述数据对应地存储于所述第一数据存储部。
根据上述结构，数据收集装置能够基于标记从存储在第一数据存储部的数据中检索必要的数据。具体来说，第一数据存储部中存储的数据未被解析。因此，以按每个设备种类不同的格式来保存数据。在该情况下，检索必要的数据需要花费时间。但是，由于标记与每个设备对应，因此能够基于标记容易地检索必要的数据。
可以构成为，在上述记载的数据收集系统中，所述数据收集装置还包括标记赋予部，所述标记赋予部赋予用于确定所述设备的设置场所的标记，所述数据写入部将所述标记和所述已解析数据对应地存储于所述第二数据存储部。
根据上述结构，对第二数据存储部中存储的分析数据赋予标记。由此，能够利用标记检索第二数据存储部的已解析数据，能够提高已解析数据的检索性。
可以构成为，在上述记载的数据收集系统中，所述数据写入部在所述第二数据存储部的空余容量不足而无法将所述数据存储于所述第二数据存储部的情况下，删除所述第二数据存储部中最老的数据之后，将由所述数据解析部获得的所述解析后数据写入所述第二数据存储部而进行存储。
根据上述结构，仅最近的数据存储在第二数据存储部，老的数据从第二数据存储部删除。因此，能够将阅览频度高的最近数据储存在可高速访问的第二数据存储部，能够提高数据收集系统的响应性。
可以构成为，在上述记载的数据收集系统中，所述数据解析部通过对所述数据进行解析来判定所述数据中是否包含错误信息，所述数据写入部在所述数据中包含错误信息的情况下将错误信息存储于所述第二数据存储部，所述数据收集装置还包括异常确认部，所述异常确认部根据所述第二数据存储部中存储的规定时间量的错误信息来确认系统内的异常，所述异常确认部将异常的确认结果存储于所述第一数据存储部。
根据上述结构，数据收集装置将设备固有的错误信息暂时存储于第二数据存储部，并在规定的时刻基于错误信息来确认系统的异常。因此，实现依靠个别数据无法检测出的设备或网络的异常检测。
可以构成为，在上述记载的数据收集系统中，所述错误信息包括所述标记、日期时间及错误内容，所述异常确认部根据所述第二数据存储部中存储的规定时间量的错误信息和所述第二数据存储部中存储的异常判定条件来确认系统内的异常。
根据上述结构，能够根据异常判定条件来判定异常。因此，根据异常判定条件的定义，异常确认部能够灵活地进行异常判定。
可以构成为，在上述记载的数据收集系统中，所述异常判定条件包括第一异常判定条件和第二异常判定条件，所述异常的确认结果包括与所述第一异常判定条件对应的第一异常的确认结果、与所述第二异常判定条件对应的第二异常的确认结果，所述异常确认部在所述第二数据存储部中存储的规定时间量的错误信息满足所述第一异常判定条件时，将所述第一异常的确认结果存储于所述第一数据存储部，在所述第二数据存储部中存储的规定时间量的错误信息满足所述第二异常判定条件时，将所述第二异常的确认结果存储于所述第一数据存储部。
根据上述结构，异常确认部可以根据第一异常判定条件及第二异常判定条件来存储第一异常判定结果及第二异常判定结果。
可以构成为，在上述记载的数据收集系统中，所述第一异常判定条件是用于判定所述设备的故障或所述设备与所述数据收集装置之间的通信相关的故障的异常判定条件，所述第二异常判定条件是用于判定所述设备的警告或所述设备与所述数据收集装置之间的通信相关的警告的异常判定条件。
根据上述结构，异常确认部可以根据第一异常判定条件及第二异常判定条件来分别判定异常及警告。
可以构成为，上述记载的数据收集系统还包括终端装置，所述终端装置接受来自用户的输入并将请求发送到所述数据收集装置，所述数据收集装置还包括显示控制部，所述显示控制部根据来自所述终端装置的请求，获得所述第一数据存储部中存储的所述异常的确认结果，并基于所述异常的确认结果生成信息提供用的画面数据，并将生成的所述画面数据提供给请求方。
根据上述结构，用户能够在终端装置看到表示异常确认结果的画面数据。由此，对于用户的便利性提高。
可以构成为，上述记载的数据收集系统还包括终端装置，所述终端装置接受来自用户的输入并将请求发送到所述数据收集装置，所述数据收集装置还包括显示控制部，所述显示控制部根据来自所述终端装置的请求，基于所述第一数据存储部或所述第二数据存储部中存储的数据生成信息提供用的画面数据，并将生成的所述画面数据提供给所述终端装置，当从所述终端装置进行请求时，所述显示控制部与所述第一数据存储部相比更优先使用所述第二数据存储部中存储的数据来生成所述画面数据。
根据上述结构，第二数据存储部中存储的数据与第一数据存储部中存储的数据相比更优先用于生成画面数据。因此，显示控制部通过与使用第一数据存储部中存储的数据相比，使用第二数据存储部中存储的数据能够更快地生成画面数据。
可以构成为，在上述记载的数据收集系统中，所述显示控制部在无法由所述第二数据存储部中存储的数据来提供被请求的信息时，使所述数据解析部对所述第一数据存储部中存储的数据中提供被请求的信息所需的数据进行解析之后，使用解析后的解析数据生成所述画面数据。
根据上述结构，显示控制部能够使用存储比第二数据存储部中存储的数据更老的数据的第一数据存储部中存储的数据来生成画面数据。由此，即便第一数据存储部的读出速度比第二数据存储部的读出速度慢，但能够提供满足要求的信息。
可以构成为，在上述记载的数据收集系统中，所述显示控制部在无法利用所述第二数据存储部中存储的数据来提供被请求的信息时，基于所述标记从所述第一数据存储部中存储的数据中检索提供被请求的信息所需的数据。
根据上述结构，显示控制部在第二数据存储部中存储的数据无法提供被请求的信息时，为了提供被请求的信息使用标记从第一数据存储部检索必要的数据。
可以构成为，在上述记载的数据收集系统中，所述数据收集装置还包括数据复制部，所述数据复制部在所述数据收集装置的启动时或第一数据存储部中追加新的数据时，将所述第一数据存储部中存储的一部分数据复制到所述第二数据存储部。
根据上述结构，在数据收集装置的启动时，由于第一数据存储部中存储的数据的一部分复制到第二数据存储部，因此第二数据存储部中可以使用最新的数据。此外，由于被复制的数据储存在第二数据存储部，因此能够进行高速且稳定的数据访问。因此，能够抑制由于数据量的增加而导致的处理速度的降低。
可以构成为，在上述记载的数据收集系统中，所述设备进行物理量的测量，并将由测量得到的测量结果作为第一数据发送到所述数据收集装置，所述接收部接收从所述设备发送来的所述第一数据，所述数据解析部按照所述设备的所述第一数据的格式即第一数据格式对接收的所述第一数据进行解析，由此生成所述物理量作为规定单位的数值并按照第二数据格式记载的第二数据，所述数据写入部将所述第一数据写入所述第一数据存储部而进行存储，将所述第二数据写入所述第二数据存储部而进行存储。
根据上述结构，数据解析部对包含由设备测量得到的物理量的第一数据进行解析，并生成将物理量作为规定单位的数值记载的第二数据。因此，第二数据存储部中储存的第二数据表现为更易读。换言之，第二数据存储部中的第二数据的可读性提高。
可以构成为，在上述记载的数据收集系统中，包括中转装置，所述中转装置通过第一通信方式接收所述第一数据，并通过与所述第一通信方式不同的第二通信方式将所述第一数据发送到所述数据收集装置，所述设备通过所述第一通信方式将所述第一数据发送到所述中转装置，所述接收部接收从所述中转装置发送来的所述第一数据，所述数据解析部按照所述第一数据格式对接收到的所述第一数据进行解析，由此生成所述第二数据。
根据上述结构，中转装置利用第一通信与设备进行通信，利用第二通信与数据收集设备进行通信并将第一数据从设备中转至数据收集装置，数据收集装置的数据解析部解析第一数据，并生成第二数据。因此，中转装置能够使用不同的通信经由网络来中转第一数据。数据收集装置即便位于仅靠第一通信无法到达的距离，中转装置使用更少耗电即可的第一通信就能够使设备与数据收集装置通信。
可以构成为，在上述记载的数据收集系统中，所述中转装置进行物理量的测量，并将测量得到的测量结果作为第三数据通过所述第二通信方式发送到所述数据收集装置，所述接收部接收从所述中转装置发送来的所述第三数据，所述数据解析部按照所述中转装置的所述第三数据的格式即第三数据格式对接收到的所述第三数据进行解析，由此生成所述物理量作为规定单位的数值并按照第二数据格式记载的第二数据。
根据上述结构，中转装置自身具有测量物理量的功能。由此，不仅设备，中转装置也可测量物理量，并将包含物理量的第一数据发送到数据收集装置。
上述记载的数据收集装置是收集从具有通信功能的设备发送来的数据的数据收集装置，所述数据收集装置包括：接收部，接收从所述设备发送来的数据；数据解析部，按照每个所述设备不同的解析用的数据格式对接收到的所述数据进行解析，由此得到解析后数据；第一数据存储部，不能进行数据的重写；第二数据存储部，是与所述第一数据存储部相比能够更高速访问的存储部，且与所述第一数据存储部中存储的数据数量相比存储更少数量的数据；数据写入部，将由所述接收部接收到的所述数据写入所述第一数据存储部而进行存储，将由所述数据解析部获得的所述解析后数据写入所述第二数据存储部而进行存储。
上述记载的数据收集方法是数据收集系统中的数据收集方法，所述数据收集系统包括：具有通信功能的设备；收集从所述设备发送来的数据的数据收集装置，所述数据收集装置执行：接收步骤，接收从所述设备发送来的数据；数据解析步骤，按照每个所述设备不同的解析用的数据格式对接收到的所述数据进行解析，由此得到解析后数据；数据写入步骤，将在所述接收步骤中接收到的所述数据写入不能进行数据的重写的第一数据存储部而进行存储，将在所述数据解析步骤中获得的所述解析后数据写入第二数据存储部而进行存储，所述第二数据存储部是与所述第一数据存储部相比能够更高速访问的存储部且与所述第一数据存储部中存储的数据数量相比存储更少数量的数据。
根据本发明，能够抑制由于数据量增加而导致的处理速度的降低。
本发明更多的特征及方式参照附图由以下说明的实施方式来具体说明。
附图说明
图1是表示本发明的数据收集系统的整体结构的框图。
图2是表示数据收集装置的功能结构的示意框图。
图3是表示管理用数据存储部中存储的表格的具体例的图。
图4是表示数据收集装置进行的数据写入处理的流程的流程图。
图5是表示数据收集装置进行的异常确认处理的流程的流程图。
图6是表示数据收集装置进行的信息显示处理的流程的流程图。
图7是表示用户终端装置上显示的保养画面一例的图。
具体实施方式
下面，对本发明的一实施方式参照附图进行说明。
图1是表示本发明的数据收集系统100的整体结构的框图。数据收集系统100包括：无线设备1、网关2及数据收集装置3。图1中，作为无线设备1表示了无线设备1-1及无线设备1-2，但无线设备1的数量没有特别限定。无线设备1-1经由网关2及网络4连接于数据收集装置3。此外，无线设备1-2经由网络4连接于数据收集装置3。网络4例如为因特网。在以下的说明中，在对无线设备1-1及无线设备1-2未特别加以区别的情况下记载为无线设备1。
无线设备1是设置在工厂或车间等现场且进行流程控制所需的测量或操作等的现场设备。例如，无线设备1是流量计或温度传感器等传感器设备、流量控制阀或开闭阀等阀设备、风扇或马达等促动器设备、其他的设置在工厂或车间等现场的现场设备。无线设备1将电池作为电源进行省电工作(例如间歇工作)。例如，在无线设备1为传感器设备的情况下，无线设备1定期将传感器数据(例如，温度、湿度、流量等)发送到数据收集装置3。此外，无线设备1将电池的温度信息、电压值及错误信息等信息也发送到数据收集装置3。
此外，无线设备1利用LPWA(Low Power Wide Area低功率广域)方式进行通信。
LPWA无线通信方式的特征是以低耗电实现远距离(例如，数公里)的通信。另一方面，在LPWA无线通信方式中，通信速度(每单位时间通信的信息量)比较低。在LPWA无线通信方式中，使用子千兆赫兹(Sub-GigaHertz)带的无线信号进行通信。无线设备1作为实现LPWA无线通信方式的标准的一种可以使用LoRaWAN。LoRaWAN标准上的通信距离最大为20km(公里)左右。但是，根据发送时的输出电力有时通信距离被控制在数公里左右。此外，LoRaWAN的数据发送量例如为每1次通信十几字节左右。LPWA无线通信方式是第一通信方式的一例。
无线设备1也可代替上述的LoRaWAN以使用了窄带宽的LTE(Long Term Evolution长期演进)标准的无线通信方式进行通信。窄带宽的LTE标准例如是指LTE Cat.0、LTECat.M1、LTE Cat.NB1(NB-IoT)的标准。上述标准与智能手机等中使用的LTE标准相比，所使用的频率带宽狭窄，通信速度也低速。具体来说，窄带宽的LTE通信方式中所使用的频率带宽例如为200kHz以下。进而，作为一例在NB-IoT的方式中使用180kHz的频率带宽。换言之，上述标准是面向IoT的LTE标准。如此，无线设备1是具有IoT功能的无线设备。
在图1所示的例子中，无线设备1-1与网关2之间通过LoRaWAN进行通信。此外，无线设备1-2与数据收集装置3之间通过LTE进行通信。
网关2是将无线设备1和数据收集装置3经由网络4连接，进行无线设备1与数据收集装置3之间收发的各种数据的中转的设备。网关2在自身装置能够进行数据测量的情况下，测量温度、湿度、电压、电池温度、RSSI(Received Signal Strength Indication接收信号强度指示)，并将测量数据发送到数据收集装置3。网关2向数据收集装置3发送的测量数据是第三数据的一例。此外，网关2也将错误信息向数据收集装置3发送。网关2以第一通信方式与无线设备1进行通信。网关2以第二通信方式与数据收集装置3进行通信。第二通信方式例如也可以是使用终端适配器或因特网(注册商标)通信装置等的有线通信、或利用WiFi适配器或3G/LTE等进行的蜂窝通信。网关2是中转装置的一例。
数据收集装置3接收从无线设备1或网关2发送来的数据。数据收集装置3具有多个存储部，从无线设备1或网关2接收的数据(下面称为“接收数据”)分别存储在多个存储部。
多个存储部是第一数据存储部及第二数据存储部。第一数据存储部以不改变接收数据的数据格式的状态进行存储。也就是说，第一数据存储部存储将接收到的接收数据原样保持的数据(原始数据)。接收数据是第一数据的一例。
第二数据存储部以改变接收数据的数据格式的状态进行存储。也就是说，第二数据存储部存储对接收数据进行某些处理而得到的易利用状态的数据。易利用状态的数据是指对从无线设备1或网关2发送来的数据进行解析并整理了数据格式的数据。更具体来说，根据无线设备1的种类或网关2的种类等装置种类，发送的数据的数据格式不同。
数据收集装置3将此种不同的数据格式的数据按照对每个装置种类预先确定的解析用的数据格式(下面称为“解析用格式”)，对数据的内容进行解析。解析用格式包含表示对于每个装置种类在数据格式的哪个位置储存哪种信息的信息。因此，在无线设备1为流量计的情况下，数据收集装置3参照解析用格式从流量计发送来的数据中确定储存流量的值的部分，并根据确定的部分所包含的值来解析流量的值。
第二数据存储部中存储的数据是访问频度高的数据。访问频度高的数据是指收集到数据收集装置3中的最近规定期间(例如一周)的数据。收集之后经过了时间的数据不适于用来掌握无线设备1或网关2的当前的状态。相对于此，最近的数据由于是比较新的数据，因此适于用来掌握无线设备1或网关2的当前的状态。此种最近的数据的访问频度高。因此，数据收集装置3将收集的全部接收数据以保持接收时的状态存储于第一数据存储部，并将最近规定期间(例如一周)的数据变为易利用状态的数据并存储于第二数据存储部。
此外，数据收集装置3按照来自用户终端装置5及管理者终端装置6的请求向请求方提供信息。
用户终端装置5是利用数据收集系统100的顾客所操作的通信装置。用户终端装置5例如利用智能手机、便携电话、平板终端、笔记本电脑、个人计算机、游戏设备等信息处理装置来构成。用户终端装置5是终端装置的一例。
管理者终端装置6是数据收集系统100的相关人员(例如管理者)操作的通信装置。管理者终端装置6例如利用智能手机、便携电话、平板终端、笔记本电脑、个人计算机、游戏设备等信息处理装置来构成。管理者终端装置6是终端装置的一例。
图2是表示数据收集装置3的功能结构的示意框图。数据收集装置3包括：数据接收部31、控制部32、第一数据存储部33及第二数据存储部34。
数据接收部31是与无线设备1或网关2之间进行通信的接口。数据接收部31接收从无线设备1或网关2发送来的数据。数据接收部31接收到的数据为数字数据。
控制部32利用CPU(Central Processing Unit中央处理单元)等处理器来构成。控制部32通过执行程序作为数据解析部321、标记赋予部322、数据写入部323、指示输入部324、异常确认部325、数据复制部326、第一数据显示控制部327及第二数据显示控制部328起作用。控制部32执行的程序也可存储在计算机可读取的存储介质中。计算机可读取的存储介质例如是指软盘、光磁盘、ROM、CD-ROM等便携介质、计算机系统中内置的硬盘等存储装置。此外，程序也可经由电通信线路收发。另外，程序也可由JAVA(注册商标)来构成。
数据解析部321通过按照解析用格式对接收数据进行解析来获得解析后数据。解析用格式存储在第一数据存储部33及第二数据存储部34。数据解析部321按照第二数据存储部34中存储的解析用格式对接收数据进行解析，从而获得解析后数据。解析后数据是易利用状态的数据，例如温度、湿度等传感器数据的值转换为表示具有规定单位的物理量的数值，且整理了数据格式的数据。解析后数据是第二数据的一例。
标记赋予部322对接收数据及解析后数据赋予标记。标记是与硬件装置的设置场所绑定的识别信息。硬件装置例如是无线设备1、网关2及数据收集装置3等。通过对接收数据赋予标记，即便是不同数据格式的接收数据也能够使与相同设置场所的装置相关的接收数据的检索变得容易。
数据写入部323将赋予了标记的数据写入第一数据存储部33及第二数据存储部34。具体来说，数据写入部323将赋予了标记的接收数据写入第一数据存储部33并存储。此外，数据写入部323将赋予了标记的解析后数据写入第二数据存储部34并存储。
指示输入部324输入来自用户终端装置5或管理者终端装置6的指示。
具体来说，指示输入部324从用户终端装置5或管理者终端装置6输入提供信息的指示。指示输入部324将输入的指示输出到第一数据显示控制部327或第二数据显示控制部328。
异常确认部325根据第二数据存储部34中存储的规定时间量的错误信息来确认数据收集系统100内的异常。具体来说，异常确认部325确认数据收集系统100内的装置间网络线路的异常、无线设备1或网关2的异常。异常确认部325将异常的确认结果存储到第一数据存储部33。
数据复制部326在满足复制时刻条件的情况下将第一数据存储部33中存储的一部分数据复制到第二数据存储部34。复制时刻条件既可以是数据收集装置3启动的时刻，也可以是第一数据存储部33中新追加数据的时刻。
第一数据显示控制部327按照从指示输入部324输出的请求，基于第一数据存储部33或第二数据存储部34中存储的数据生成信息提供用的画面数据，并将生成的画面数据提供给请求方。信息提供用的画面数据例如是指维护用的画面数据或保养点检用的画面数据。
第二数据显示控制部328按照从指示输入部324输出的请求，基于第一数据存储部33或第二数据存储部34中存储的数据生成信息提供用的画面数据，并将生成的画面数据提供给请求方。信息提供用的画面数据例如是指维护用的画面数据或保养点检用的画面数据。
第一数据存储部33包括：接收数据存储部331、管理用数据存储部332及错误日志存储部333。第一数据存储部33例如安装为访问速度比主存储器慢但能够大容量存储的存储介质等中存储的数据库中的不能改写数据的一次写表格(Write Once Table)。第一数据存储部33例如由SSD(Solid State Drive)、硬盘等盘存储器、闪存ROM(Read Only Memory只读存储器)、或EEPROM(Electrically Erasable and Programmable ROM电可擦除可编程只读存储器)等非易失性的存储介质构成。
接收数据存储部331存储由数据接收部31接收到的接收数据。更具体地说，接收数据存储部331存储由数据接收部31接收到的数字数据。
管理用数据存储部332存储用于管理数据收集系统100的多个表格。管理用数据存储部332如图3所示存储标记管理用表格3321、NW管理用表格3322、HW管理用表格3323、参数表格3324及履历表格3325。
图3是表示管理用数据存储部332中存储的表格的具体例的图。
标记管理用表格3321是注册有用于管理标记的信息的表格。标记管理用表格3321将标记ID及标记名对应地注册。标记ID表示用于识别标记的识别信息。标记名表示标记的名称。例如，标记名是装置的设置场所或装置的名称。
NW管理用表格3322是注册有关标记和标记的连接关系的信息的表格。NW管理用表格3322将连接标记名和表示连接标记名之间的通信方向的信息对应地注册。连接标记名是指在数据收集系统100中存在连接关系的标记名。例如，在标记名“水位计”与标记名“GW”存在连接关系的情况下，在连接标记名中注册标记名“水位计”和标记名“GW”。表示连接标记名之间的通信方向的信息是表示连接标记名之间通信是单方向还是双方向的信息。例如，在标记名“水位计”与标记名“GW”之间，在从标记名“水位计”向标记名“GW”进行通信的情况下，注册表示从标记名“水位计”向标记名“GW”的单方向的信息。
HW管理用表格3323是注册与数据收集系统100所具备的各装置相关的信息的表格。HW管理用表格3323中将各装置的识别ID、名称、地址信息、标记ID、解析用格式及异常判定条件对应地注册。装置的识别ID表示硬件装置的识别信息。名称表示硬件装置的名称。地址信息表示硬件装置的地址信息，例如MAC地址或IP地址。标记ID表示用于识别标记的识别信息。
解析用格式表示按照每个装置的种类设定的、用于接收数据的解析的数据格式。解析用格式例如是定义来自某无线设备1的接收数据的最初的4字节为温度信息这样的格式。由此，数据解析部321能够进行接收数据的解析。异常判定条件是用于判定数据收集系统100中的异常的条件。异常判定条件中包括用于判定故障的第一异常判定条件和用于判定警告的第二异常判定条件的用于判定为异常的条件。异常判定条件可以适当地设定。
参数表格3324是注册有与数据收集系统100的各装置中设定的各种参数相关的信息的表格。
履历表格3325是用于保存管理用数据存储部332中存储的任意表格中注册的数据的追加等引起的变更时的信息的表格。
履历表格3325中将进行变更的日期时间、变更对象表格及变更内容对应地注册。
错误日志存储部333存储由异常确认部325进行的异常确认的结果。异常确认的结果包括：与第一异常判定条件对应的第一异常确认的结果、与第二异常判定条件对应的第二异常确认的结果。
第二数据存储部34包括：解析后数据存储部341、复制管理用数据存储部342及错误信息存储部343。第二数据存储部34例如是作为在访问速度比SSD或硬盘更快但存储容量小的RAM(Random Access Memory随机存取存储器)等主存储器中存储的内存(In-Memory)表格来安装。
解析后数据存储部341存储解析后数据。解析后数据存储部341存储数量比接收数据存储部331中存储的接收数据的数量少的解析后数据。例如，解析后数据存储部341存储规定期间(例如一周)的解析后数据。如此，解析后数据存储部341中存储的数据是被解析而可读性比接收时数据提高的数据，且数量比接收数据存储部331中存储的数据数量少的数据。
复制管理用数据存储部342存储与管理用数据存储部332相同的数据。具体来说，复制管理用数据存储部342存储标记管理用表格3321、NW管理用表格3322、HW管理用表格3323、参数表格3324及履历表格3325。复制管理用数据存储部342中存储的各表格是数据复制部326将管理用数据存储部332中存储的各表格复制后的表格。也就是说，复制管理用数据存储部342存储与管理用数据存储部332相同的数据。
错误信息存储部343存储由数据解析部321得到的错误信息。具体来说，错误信息存储部343将标记ID、日期时间及错误内容对应地存储。
图4是表示数据收集装置3进行的数据写入处理的流程的流程图。
数据接收部31直接或经由网关2接收从无线设备1发送的数据(步骤S101)。此外，在网关2计测数据的情况下，数据接收部31接收从网关2发送的数据。数据接收部31将接收数据输出到控制部32。数据解析部321根据第二数据存储部34的复制管理用数据存储部342进行接收数据的发信方装置(例如无线设备1)的认证(步骤S102)。具体来说，数据解析部321在接收数据的发信方装置注册在复制管理用数据存储部342中存储的HW管理用表格3323的情况下，判定为进行了发信方装置的认证。另一方面，数据解析部321在接收数据的发信方装置未注册在复制管理用数据存储部342中存储的HW管理用表格3323的情况下，判定为未进行发信方装置的认证。
在未进行认证的情况下(步骤S102-“否”)，数据解析部321抛弃接收数据(步骤S103)。之后，数据写入部323将抛弃接收数据这一情况作为错误日志写入错误日志存储部333(步骤S104)。
之后，结束图4的处理。
另一方面，在进行了认证的情况下(步骤S102-“是”)，数据解析部321进行接收数据的解析(步骤S105)。具体来说，首先数据解析部321获得接收数据的发信方装置(例如无线设备1)的地址信息。此外，数据解析部321参照管理用数据存储部332中存储的获得的HW管理用表格3323，获取与获得的地址信息相对应的解析用格式。而且，数据解析部321按照获得的解析用格式对接收数据进行解析，由此获得解析后数据。此外，数据解析部321判定接收数据中是否包含错误信息，在包含错误信息的情况下获得错误信息。此外，数据解析部321从复制管理用数据存储部342中存储的HW管理用表格3323之中获取与所获得的地址信息相对应的标记ID。
数据解析部321判定是否存在与地址信息相对应的标记ID(步骤S106)。在不存在与地址信息相对应的标记ID的情况下(步骤S106-“否”)，数据收集装置3执行步骤S103以后的处理。
另一方面，在存在与地址信息相对应的标记ID的情况下(步骤S106-“是”)，数据解析部321判定是否从接收数据获得了错误信息(步骤S107)。
在从接收数据获得了错误信息的情况下(步骤S107-“是”)，数据解析部321将错误信息、标记ID输出到数据写入部323。数据写入部323将从数据解析部321输出的错误信息和标记ID对应地存储于错误信息存储部343(步骤S108)。在未从接收数据获得错误信息的情况下(步骤S107-“否”)，或者步骤S108的处理后，标记赋予部322对由步骤S105的处理所获得的解析后数据及接收数据赋予标记ID(步骤S109)。
标记赋予部322将赋予标记后的解析后数据及接收数据分别输出到数据写入部323。数据写入部323将从标记赋予部322输出的赋予标记后的解析后数据写入解析后数据存储部341(步骤S110)。此时，数据写入部323在解析后数据存储部341的保存量已经存满的情况下，删除解析后数据存储部341中存储的最老的解析后数据，并写入新的解析后数据。此外，数据写入部323将从标记赋予部322输出的赋予标记后的接收数据写入接收数据存储部331(步骤S111)。
另外，数据写入部323在步骤S110的处理中或者步骤S111的处理中发生了写入错误的情况下，将标记ID、日期时间、表示发生了写入错误这一情况的内容写入错误信息存储部343。
图5是表示数据收集装置3进行的异常确认处理的流程的流程图。
异常确认部325判定是否成为规定的时刻(步骤S201)。规定的时刻既可以是指预先设定的时刻，也可以是指从外部进行了指示的时刻。在未成为规定的时刻的情况下(步骤S201-“否”)，异常确认部325待机至成为规定的时刻。
另一方面，在成为规定的时刻的情况下(步骤S201-“是”)，从错误信息存储部343读出错误信息(步骤S202)。
异常确认部325根据读出的错误信息和复制管理用数据存储部342中存储的HW管理用表格3323的异常判定条件来确认异常(步骤S203)。具体来说，异常确认部325在存在满足异常判定条件的错误信息的情况下判定是警告或故障中的某一种。异常确认部325将异常确认的结果输出到数据写入部323。数据写入部323将从异常确认部325输出的异常的确认结果存储到错误日志存储部333(步骤S204)。
图6是表示数据收集装置3进行的信息显示处理的流程的流程图。
第一数据显示控制部327或第二数据显示控制部328判定是否从外部装置(例如用户终端装置5或管理者终端装置6)进行了信息的显示请求(步骤S301)。在未进行信息的显示请求的情况下(步骤S301-“否”)，数据收集装置3结束图6的处理。
另一方面，在进行了信息的显示请求的情况下(步骤S301-“是”)，第二数据显示控制部328参照第二数据存储部34，判定是否存在被请求的信息(步骤S302)。第二数据存储部34仅存储规定期间(例如，一周)的数据。因此，在外部装置请求提供比规定期间更长期间或者之前期间的信息(例如，二周的信息或一个月前的信息等)的情况下，无法仅依靠第二数据存储部34中存储的信息来提供所请求的信息。因此，在外部装置请求提供比规定期间更长期间或者之前期间的信息的情况下，第二数据显示控制部328判定为不存在被请求的信息。
另一方面，在外部装置请求提供规定期间内的信息的情况下，第二数据显示控制部328判定存在被请求的信息。在存在被请求的信息的情况下(步骤S302-“是”)，第二数据显示控制部328从第二数据存储部34读出用于提供被请求的信息所需的信息(步骤S303)。而且，第二数据显示控制部328根据读出的信息生成提供用的画面数据，并将生成的画面数据发送到请求方的装置，由此显示信息(步骤S304)。
之后，数据收集装置3结束图6的处理。
另一方面，在不存在被请求的信息的情况下(步骤S302-“NO”)，第一数据显示控制部327从第一数据存储部33读出用于提供被请求的信息所需的信息(步骤S305)。第一数据存储部33中存储的接收数据是由数据接收部31接收到的保持原样的数据。也就是说，第一数据存储部33中存储的接收数据未整理数据格式。因此，第一数据显示控制部327根据标记ID从接收数据存储部331检索用于提供被请求的信息所需的信息。而且，第一数据显示控制部327通过使数据解析部321对获得的接收数据进行解析，由此获得解析后数据(步骤S306)。
而且，第一数据显示控制部327根据解析后数据和第一数据存储部33中存储的其他信息来生成提供用的画面数据，并将生成的画面数据发送到请求方的装置，由此显示信息(步骤S307)。之后，数据收集装置3结束图6的处理。
图7是表示用户终端装置5显示的保养画面一例的图。
如图7所示，保养画面中按照工厂或车间等建筑物内设置的装置显示表示异常的信息、从装置接收数据的最新的日期时间信息。表示异常的信息表示装置或网络的哪个部分发生了异常。图7所示的例子中，表示将数据收集装置3、WAN线路、GW、LAN线路、传感器依次从上游至下游连接的例子，其中任意个发生了异常的情况以与其他状态不同的状态显示出来。
例如，显示“〇〇楼”的“雨量槽B”中，LAN线路发生了故障。此外，例如，显示“△△楼”的“雨量槽H”中，LAN线路发生了警告。上述异常的判定由异常确认部325进行。而且，第一数据显示控制部327或第二数据显示控制部328参照错误日志存储部333获得异常判定的结果，并生成反映所获得的异常判定结果的画面数据。
根据以上构成的数据收集系统100，数据收集装置3将访问频度高的最近规定期间的数据以提高了可读性的状态存储在作为内存(In-memory)表格安装的第二数据存储部34，将接收到的保持原样状态的数据存在作为補助存储装置的第一数据存储部33。由此，第二数据存储部34与第一数据存储部33相比保存少量的数据，并以易用于提供信息的状态保存。
此外，内存(In-memory)表格并不是SSD或HDD等補助存储装置等中存储的通常的表格，而是计算机的主存储器等可高速访问的存储装置中存储的数据库表格。内存(In-memory)表格能够进行高速且稳定的数据访问和高速的信息提供。因此，内存(In-memory)表格能够抑制由于数据量的增加而导致的处理速度降低。
第一数据存储部33的接收数据存储部331中以保持接收到的原样状态保存接收数据。因此能够简便地解决由于维护时数据追踪而产生的问题。
＜变形例＞
第一数据显示控制部327及第二数据显示控制部328也可构成为一个显示控制部。
数据收集系统100中，代替无线设备1(1-1及1-2)也可具备具有有线通信功能的现场设备，也可具备无线设备1和具有有线通信功能的现场设备这两者。
以上对本发明的实施方式参照附图进行了详述，但具体的结构并不限于该实施方式，也包含不脱离本发明思想的范围内的设计等。
在本说明书中，“前、后、上、下、右、左、垂直、水平、纵、横、行及列等表示方向的词汇是指本发明的装置的上述方向。因此，本发明的说明书中的上述词汇应在本发明的装置中相对地进行解释。
词汇“构成”表示用于构成为执行本发明的功能，此外也用于表示装置的结构、组成、部分。
进而，权利要求中表现为功能性限定的词汇应包含能够用于执行本发明所包含的功能的所有构造。
“单元”这样的词汇用于表示结构组成、单元、硬件或为了执行期望的功能而编码的软件的一部分。硬件的典型例为设备或回路，但并不限定于此。
以上，对本发明的优选实施例进行了说明，但本发明并不限定于上述实施例。在不脱离本发明思想的范围内，可以进行结构的增加、省略、替换及其他变更。本发明并非由上述说明来限定，而仅由权利要求书的范围来限定。

Claims (15)

1.一种数据收集系统，其包括：具有通信功能的设备；收集从所述设备发送来的数据的数据收集装置，
所述数据收集系统的特征在于，
所述数据收集装置包括：
接收部，接收从所述设备发送来的数据；
数据解析部，按照每个所述设备不同的解析用的数据格式对接收到的所述数据进行解析，由此得到解析后数据；
第一数据存储部，不能进行数据的重写；
第二数据存储部，是与所述第一数据存储部相比能够更高速访问的存储部，且与所述第一数据存储部中存储的数据数量相比存储更少数量的数据；
数据写入部，将由所述接收部接收到的所述数据写入所述第一数据存储部而进行存储，将由所述数据解析部获得的所述解析后数据写入所述第二数据存储部而进行存储。
2.根据权利要求1所述的数据收集系统，其特征在于，所述第一数据存储部安装为在数据库中不可进行数据的重写的一次写表格。
3.根据权利要求1或2所述的数据收集系统，其特征在于，所述第二数据存储部安装为所述数据收集装置的主存储器中存储的数据库中的内存表格。
4.根据权利要求1或2所述的数据收集系统，其特征在于，
所述数据收集装置还包括标记赋予部，所述标记赋予部赋予用于确定所述设备的设置场所的标记，
所述数据写入部将所述标记和所述数据对应地存储于所述第一数据存储部。
5.根据权利要求1或2所述的数据收集系统，其特征在于，所述数据写入部在所述第二数据存储部的空余容量不足而无法将所述数据存储于所述第二数据存储部的情况下，删除所述第二数据存储部中最老的数据之后，将由所述数据解析部获得的所述解析后数据写入所述第二数据存储部而进行存储。
6.根据权利要求1或2所述的数据收集系统，其特征在于，
所述数据解析部通过对所述数据进行解析来判定所述数据中是否包含错误信息，
所述数据写入部在所述数据中包含错误信息的情况下将错误信息存储于所述第二数据存储部，
所述数据收集装置还包括异常确认部，所述异常确认部根据所述第二数据存储部中存储的规定时间量的错误信息来确认系统内的异常，
所述异常确认部将异常的确认结果存储于所述第一数据存储部。
7.根据权利要求6所述的数据收集系统，其特征在于，
所述错误信息包括所述标记、日期时间及错误内容，
所述异常确认部根据所述第二数据存储部中存储的规定时间量的错误信息和所述第二数据存储部中存储的异常判定条件来确认系统内的异常。
8.根据权利要求6所述的数据收集系统，其特征在于，
所述异常判定条件包括第一异常判定条件和第二异常判定条件，
所述异常的确认结果包括与所述第一异常判定条件对应的第一异常确认结果、与所述第二异常判定条件对应的第二异常确认结果，
所述异常确认部在所述第二数据存储部中存储的规定时间量的错误信息满足所述第一异常判定条件时，将所述第一异常的确认结果存储于所述第一数据存储部，在所述第二数据存储部中存储的规定时间量的错误信息满足所述第二异常判定条件时，将所述第二异常的确认结果存储于所述第一数据存储部。
9.根据权利要求8所述的数据收集系统，其特征在于，
所述第一异常判定条件是用于判定所述设备的故障或所述设备与所述数据收集装置之间的通信相关的故障的异常判定条件，
所述第二异常判定条件是用于判定所述设备的警告或所述设备与所述数据收集装置之间的通信相关的警告的异常判定条件。
10.根据权利要求1或2所述的数据收集系统，其特征在于，
包括终端装置，所述终端装置接受来自用户的输入并将请求发送到所述数据收集装置，
所述数据收集装置还包括显示控制部，所述显示控制部根据来自所述终端装置的请求，基于所述第一数据存储部或所述第二数据存储部中存储的数据生成信息提供用的画面数据，并将生成的所述画面数据提供给所述终端装置，
当从所述终端装置进行请求时，所述显示控制部与所述第一数据存储部相比更优先使用所述第二数据存储部中存储的数据来生成所述画面数据。
11.根据权利要求10所述的数据收集系统，其特征在于，所述显示控制部在无法由所述第二数据存储部中存储的数据来提供被请求的信息时，使所述数据解析部对所述第一数据存储部中存储的数据中提供被请求的信息所需的数据进行解析之后，使用解析后的解析数据生成所述画面数据。
12.根据权利要求1或2所述的数据收集系统，其特征在于，
所述设备进行物理量的测量，并将由测量得到的测量结果作为第一数据发送到所述数据收集装置，
所述接收部接收从所述设备发送来的所述第一数据，
所述数据解析部按照所述设备的所述第一数据的格式即第一数据格式对接收的所述第一数据进行解析，由此生成所述物理量作为规定单位的数值并按照第二数据格式记载的第二数据，
所述数据写入部将所述第一数据写入所述第一数据存储部而进行存储，将所述第二数据写入所述第二数据存储部而进行存储。
13.根据权利要求12所述的数据收集系统，其特征在于，
包括中转装置，所述中转装置通过第一通信方式接收所述第一数据，并通过与所述第一通信方式不同的第二通信方式将所述第一数据发送到所述数据收集装置，
所述设备通过所述第一通信方式将所述第一数据发送到所述中转装置，
所述接收部接收从所述中转装置发送来的所述第一数据，
所述数据解析部按照所述第一数据格式对接收到的所述第一数据进行解析，由此生成所述第二数据。
14.根据权利要求13所述的数据收集系统，其特征在于，
所述中转装置进行物理量的测量，并将测量得到的测量结果作为第三数据通过所述第二通信方式发送到所述数据收集装置，
所述接收部接收从所述中转装置发送来的所述第三数据，
所述数据解析部按照所述中转装置的所述第三数据的格式即第三数据格式对接收到的所述第三数据进行解析，由此生成所述物理量作为规定单位的数值并按照第二数据格式记载的第二数据。
15.一种数据收集方法，所述数据收集方法是数据收集系统中的数据收集方法，所述数据收集系统包括：具有通信功能的设备；收集从所述设备发送来的数据的数据收集装置，
所述数据收集方法的特征在于，所述数据收集装置执行：
接收步骤，接收从所述设备发送来的数据；
数据解析步骤，按照每个所述设备不同的解析用的数据格式对接收到的所述数据进行解析，由此得到解析后数据；
数据写入步骤，将在所述接收步骤中接收到的所述数据写入不能进行数据的重写的第一数据存储部而进行存储，将在所述数据解析步骤中获得的所述解析后数据写入第二数据存储部而进行存储，所述第二数据存储部是与所述第一数据存储部相比能够更高速访问的存储部且与所述第一数据存储部中存储的数据数量相比存储更少数量的数据。
CN201910598130.2A 2018-07-09 2019-07-04 数据收集系统及数据收集方法 Active CN110703984B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-129852 2018-07-09
JP2018129852A JP7073952B2 (ja) 2018-07-09 2018-07-09 データ収集システム及びデータ収集方法

Publications (2)

Publication Number Publication Date
CN110703984A true CN110703984A (zh) 2020-01-17
CN110703984B CN110703984B (zh) 2022-11-01

Family

ID=67253667

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910598130.2A Active CN110703984B (zh) 2018-07-09 2019-07-04 数据收集系统及数据收集方法

Country Status (4)

Country Link
US (1) US11461037B2 (zh)
EP (1) EP3594766B1 (zh)
JP (1) JP7073952B2 (zh)
CN (1) CN110703984B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113542342A (zh) * 2020-04-21 2021-10-22 株式会社东芝 服务器装置、信息处理方法以及存储介质

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111031094B (zh) * 2019-11-06 2022-07-12 远景智能国际私人投资有限公司 IoT系统中的数据传输方法、装置、设备及存储介质
CN111307182B (zh) * 2020-03-06 2022-08-23 宁波飞芯电子科技有限公司 数据处理方法及阵列型传感器
KR102645321B1 (ko) * 2021-02-08 2024-03-07 미쓰비시덴키 가부시키가이샤 단말 장치, 기기 관리 서버, 정보 처리 시스템, 정보 처리 방법 및 기억 매체
CN116149226B (zh) * 2023-02-22 2023-11-10 山东中安电力科技有限公司 一种基于数据分析的开关柜远程控制系统
CN116795066B (zh) * 2023-08-16 2023-10-27 南京德克威尔自动化有限公司 远程io模块的通信数据处理方法、系统、服务器及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS643757A (en) * 1987-06-26 1989-01-09 Toshiba Corp Magnetic disk control device
US20060041614A1 (en) * 2003-05-21 2006-02-23 Kazuichi Oe Data access responding system, storage system, client apparatus, cache apparatus, and method for accessing data access responding system
US20070162700A1 (en) * 2005-12-16 2007-07-12 Microsoft Corporation Optimizing write and wear performance for a memory
US20080183952A1 (en) * 2007-01-30 2008-07-31 Fujitsu Limited Data recording system
US20150236903A1 (en) * 2014-02-19 2015-08-20 Yokogawa Electric Corporation Information setting device, information setting method, non-transitory computer-readable storage medium, and wireless communication system
US20170222999A1 (en) * 2016-01-29 2017-08-03 General Electric Company Method, system, and program storage device for managing tenants in an industrial internet of things

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7298727B2 (en) * 2003-03-17 2007-11-20 Samsung Electronics Co., Ltd. Power control method and apparatus using control information in mobile communication system
US7228323B2 (en) * 2003-06-10 2007-06-05 Siemens Aktiengesellschaft HIS data compression
CN100542045C (zh) 2003-06-10 2009-09-16 西门子公司 用于电力生产过程数据的过程数据管理方法和系统
US7657796B1 (en) * 2005-09-30 2010-02-02 Symantec Operating Corporation System and method for distributed storage verification
EP3177046A1 (en) * 2007-03-07 2017-06-07 Wirelesswerx International, Inc. Method and system for providing area specific messaging
US7653840B1 (en) * 2007-04-27 2010-01-26 Net App, Inc. Evaluating and repairing errors during servicing of storage devices
FR2938672A1 (fr) * 2008-11-19 2010-05-21 Alcatel Lucent Procede et dispositif d'enregistrement de donnees representatives de sentiments ressentis par des personnes dans des lieux localisables, et serveur associe
US8760262B2 (en) * 2009-03-20 2014-06-24 Lutron Electronics Co., Inc. Method of automatically programming a load control device using a remote identification tag
TW201133003A (en) * 2010-03-31 2011-10-01 Wistron Corp Testing device and testing method
US8984352B2 (en) * 2010-04-14 2015-03-17 Hitachi, Ltd. Storage control apparatus and control method of storage control apparatus
JP5800569B2 (ja) * 2011-05-13 2015-10-28 任天堂株式会社 情報処理システム、情報処理方法、情報処理プログラム
US9338517B2 (en) * 2012-04-07 2016-05-10 Samsung Electronics Co., Ltd. Method and system for reproducing contents, and computer-readable recording medium thereof
JP5533924B2 (ja) * 2012-04-09 2014-06-25 横河電機株式会社 無線通信システム
US8539567B1 (en) 2012-09-22 2013-09-17 Nest Labs, Inc. Multi-tiered authentication methods for facilitating communications amongst smart home devices and cloud-based servers
JP2015052969A (ja) * 2013-09-09 2015-03-19 株式会社日立ソリューションズ データ管理システム
JP6323134B2 (ja) * 2014-04-11 2018-05-16 株式会社Ihi データ記憶装置、データ記憶方法、および、データ記憶プログラム
EP3254213A1 (en) * 2015-02-02 2017-12-13 Koninklijke Philips N.V. Pain management wearable device
US20170262508A1 (en) 2016-03-09 2017-09-14 Ca, Inc. Infrastructure management system having scalable storage architecture
US10346420B2 (en) * 2016-05-30 2019-07-09 Sap Se Database integration system
JP6809011B2 (ja) * 2016-07-12 2021-01-06 富士電機株式会社 制御システムの遠隔監視を行う装置およびシステム
CN110063065B (zh) * 2016-12-15 2022-10-14 Abb瑞士股份有限公司 用于用户授权的系统和方法
US11514083B2 (en) * 2016-12-22 2022-11-29 Nippon Telegraph And Telephone Corporation Data processing system and data processing method
JP7192290B2 (ja) * 2018-07-27 2022-12-20 横河電機株式会社 通信装置およびシステム
KR20200065761A (ko) * 2018-11-30 2020-06-09 에스케이하이닉스 주식회사 메모리 시스템
US11544063B2 (en) * 2018-11-21 2023-01-03 SK Hynix Inc. Memory system and data processing system including the same

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS643757A (en) * 1987-06-26 1989-01-09 Toshiba Corp Magnetic disk control device
US20060041614A1 (en) * 2003-05-21 2006-02-23 Kazuichi Oe Data access responding system, storage system, client apparatus, cache apparatus, and method for accessing data access responding system
US20070162700A1 (en) * 2005-12-16 2007-07-12 Microsoft Corporation Optimizing write and wear performance for a memory
US20080183952A1 (en) * 2007-01-30 2008-07-31 Fujitsu Limited Data recording system
US20150236903A1 (en) * 2014-02-19 2015-08-20 Yokogawa Electric Corporation Information setting device, information setting method, non-transitory computer-readable storage medium, and wireless communication system
US20170222999A1 (en) * 2016-01-29 2017-08-03 General Electric Company Method, system, and program storage device for managing tenants in an industrial internet of things

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113542342A (zh) * 2020-04-21 2021-10-22 株式会社东芝 服务器装置、信息处理方法以及存储介质
CN113542342B (zh) * 2020-04-21 2023-12-01 株式会社东芝 服务器装置、信息处理方法以及存储介质

Also Published As

Publication number Publication date
JP7073952B2 (ja) 2022-05-24
EP3594766B1 (en) 2022-04-20
JP2020010192A (ja) 2020-01-16
US11461037B2 (en) 2022-10-04
EP3594766A1 (en) 2020-01-15
CN110703984B (zh) 2022-11-01
US20200012448A1 (en) 2020-01-09

Similar Documents

Publication Publication Date Title
CN110703984B (zh) 数据收集系统及数据收集方法
CN110868336B (zh) 数据管理方法、装置和计算机可读存储介质
US20210359906A1 (en) Hierarchical configuration of networked communication devices
CN103117879B (zh) 一种计算机硬件运行参数网络监测系统
CN104202201B (zh) 一种日志处理方法、装置及终端
JP5479176B2 (ja) サーバ装置、周辺装置管理方法およびプログラム
WO2017075962A1 (zh) 空气质检装置、空气质量数据处理方法和服务器
CN204425399U (zh) 一种基于云计算的水文气象业务系统
JP7285544B2 (ja) ガスボンベ管理システム、ガスボンベ管理装置、及びガスボンベ管理方法
CN109670091B (zh) 一种基于数据标准的元数据智能维护方法和装置
EP3101840A1 (en) Method and apparatus for processing information in m2m communications
US20200272516A1 (en) Sensor device, sensor device management system, and sensor device management method
CN112104687B (zh) 物流路由服务的监控方法、装置、电子设备及存储介质
CN109525036A (zh) 一种通信设备的市电供应状态的监控方法、装置和系统
WO2023231837A1 (zh) 一种数据处理方法、装置、设备、存储介质及系统
CN112367395A (zh) 一种报警阈值的修改方法、设备及计算机可读存储介质
CN116521694A (zh) 一种数据维护方法、智能终端及存储介质
JP6771614B1 (ja) 通信制御システム、サーバ装置、通信制御方法、および通信制御プログラム
JP7302657B2 (ja) 品質推定装置、モデル構築方法、推定方法、及びプログラム
CN210490919U (zh) 一种终端接入单元
US10645188B1 (en) System for preparing a device for offline or low-bandwidth use
EP4163863A1 (en) Program, information processing method, and information processing device
CN117630477A (zh) 用于评估由通信对象所消耗的电能量的方法
CN117176588B (zh) 网络拓扑的构建方法、装置、电子设备及存储介质
JP6692378B2 (ja) 取得制御プログラム、取得制御装置及び取得制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant