RU2017108205A - Конструируемый поток данных для улучшенной обработки событий - Google Patents

Конструируемый поток данных для улучшенной обработки событий Download PDF

Info

Publication number
RU2017108205A
RU2017108205A RU2017108205A RU2017108205A RU2017108205A RU 2017108205 A RU2017108205 A RU 2017108205A RU 2017108205 A RU2017108205 A RU 2017108205A RU 2017108205 A RU2017108205 A RU 2017108205A RU 2017108205 A RU2017108205 A RU 2017108205A
Authority
RU
Russia
Prior art keywords
data
database
constructed
data stream
source
Prior art date
Application number
RU2017108205A
Other languages
English (en)
Other versions
RU2017108205A3 (ru
RU2691595C2 (ru
Inventor
Лев НОВИК
Оливье НАНО
САНТОС Иво Хосе Гарсиа ДОС
Лоран БУССАРД
Алекс РЭЙЗМАН
Дипанджан БАНИК
Original Assignee
МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи filed Critical МАЙКРОСОФТ ТЕКНОЛОДЖИ ЛАЙСЕНСИНГ, ЭлЭлСи
Publication of RU2017108205A publication Critical patent/RU2017108205A/ru
Publication of RU2017108205A3 publication Critical patent/RU2017108205A3/ru
Application granted granted Critical
Publication of RU2691595C2 publication Critical patent/RU2691595C2/ru

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2477Temporal data queries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Fuzzy Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Debugging And Monitoring (AREA)

Claims (43)

1. Реализуемый компьютером способ для улучшенной обработки событий, при этом способ содержит этапы, на которых:
- принимают запрос на улучшенную обработку событий, при этом запрос на улучшенную обработку событий содержит индикатор относительно входных данных из источника данных в базе данных; при этом входные данные из источника данных в базе данных не ассоциированы с временным элементом для входных данных,
- осуществляют доступ к входным данным в индикаторе относительно входных данных с использованием источника конструируемых потоков данных, при этом источник конструируемых потоков данных предоставляет доступ к совокупности моментальных снимков данных в базе данных из источника данных в базе данных во времени, при этом к входным данным осуществляется доступ с использованием конструируемого потока данных, который содержит временной элемент; и
- формируют вывод для запроса на улучшенную обработку событий на основе входных данных, доступ к которым осуществляется с использованием конструируемого потока данных.
2. Способ по п. 1, в котором временной элемент указывает время, когда событие, ассоциированное с входными данными, возникает и сохраняется в качестве части моментального снимка события в данных в базе данных.
3. Способ по п. 1, в котором конструируемый поток данных выступает в качестве прокси для данных в базе данных таким образом, что конструируемый поток данных предоставляет повторяющиеся вычисления с использованием данных в базе данных, которые изменяются во времени, при этом к конструируемому потоку данных осуществляется доступ в качестве функции от выбранного значения и выбранного времени.
4. Способ по п. 1, дополнительно содержащий этапы, на которых:
- коррелируют первый временной элемент конструируемого потока данных со вторым временным элементом потока данных; и
- формируют вывод для запроса на улучшенную обработку событий на основе входных данных конструируемого потока данных и входных данных потока данных.
5. Способ по п. 1, в котором вывод ассоциирован с временным элементом срока действия, который указывает время, когда вывод на основе конструируемого потока данных точно отражает данные в данных в базе данных.
6. Один или более компьютерных носителей хранения данных, имеющих осуществленные исполняемые компьютером инструкции, которые при выполнении посредством одного или более процессоров инструктируют одному или более процессоров осуществлять способ для улучшенной обработки событий, при этом способ содержит:
- идентификацию источника данных в базе данных;
- дискретизацию, по меньшей мере, части данных в базе данных из источника данных в базе данных для того, чтобы формировать один или более моментальных снимков данных в базе данных,
- формирование конструируемого потока данных на основе одного или более моментальных снимков данных в базе данных, при этом конструируемый поток данных ассоциирован с временным элементом; и
- предоставление доступа к конструируемому потоку данных на основе запроса на улучшенную обработку событий; при этом запрос на улучшенную обработку событий ассоциирован с индикатором относительно входных данных в базе данных источника данных в базе данных, доступного с использованием конструируемого потока данных, при этом входные данные из источника данных в базе данных не ассоциированы с временным элементом для входных данных.
7. Носители по п. 6, в которых дискретизация данных в базе данных основана, по меньшей мере, на одном из следующего:
(1) механизм периодической дискретизации, который формирует один или более моментальных снимков на основе предварительно определенного временного интервала;
(2) механизм дифференциальной дискретизации, который формирует один или более моментальных снимков, которые включают в себя только изменения данных в базе данных; и
(3) механизм уведомлений, который указывает то, когда возникает изменение данных в базе данных, так что моментальный снимок формируется при индикаторе относительно изменения данных в базе данных.
8. Носители по п. 7, в которых механизм уведомлений дополнительно содержит, по меньшей мере, одно из следующего:
(1) признак пакетной обработки, при этом признак пакетной обработки определяет предварительно определенное число изменений или определяет предварительно определенный период времени перед инициированием уведомления на то, чтобы выполнять дискретизацию; и
(2) административный временной элемент, который ассоциирован с рабочей функциональностью данных в базе данных, при этом административный временной элемент, не записывается в базе данных, при этом административный временной элемент указывает время, которое ассоциировано с моментальным снимком, который используется для того, чтобы формировать конструируемый поток данных с временным элементом.
9. Компьютерная система для выполнения улучшенной обработки событий, причем компьютерная система содержит:
- компонент управления источниками данных в базе данных, сконфигурированный с возможностью:
- предоставления доступа к данным в базе данных;
- компонент управления источниками конструируемых потоков данных, сконфигурированный с возможностью:
- идентификации источника данных в базе данных;
- дискретизации, по меньшей мере, части данных в базе данных из источника данных в базе данных для того, чтобы формировать один или более моментальных снимков данных в базе данных;
- формирования конструируемого потока данных на основе одного или более моментальных снимков данных в базе данных, при этом конструируемый поток данных ассоциирован с временным элементом; и
- предоставления доступа к конструируемому потоку данных на основе запроса на улучшенную обработку событий, при этом запрос на улучшенную обработку событий ассоциирован, по меньшей мере, с индикатором относительно входных данных в базе данных источника данных в базе данных, доступного с использованием конструируемого потока данных, при этом входные данные из источника данных в базе данных не ассоциированы с временным элементом для входных данных;
- источник потоков данных, сконфигурированный с возможностью:
- предоставления доступа к потоку данных;
- сервер улучшенной обработки событий, сконфигурированный с возможностью:
- приема запроса на улучшенную обработку событий, при этом запрос на улучшенную обработку событий содержит индикатор относительно входных данных из источника данных в базе данных и второй индикатор относительно входных данных из источника потоков данных;
- осуществления доступа к входным данным в индикаторе относительно входных данных с использованием источника конструируемых потоков данных, при этом источник конструируемых потоков данных предоставляет доступ к совокупности моментальных снимков данных в базе данных из источника данных в базе данных во времени, при этом к входным данным осуществляется доступ с использованием конструируемого потока данных, который содержит первый временной элемент;
- осуществления доступа к входным данным во втором индикаторе относительно входных данных с использованием источника потоков данных; и
- корреляции первого временного элемента конструируемого потока данных со вторым временным элементом потока данных; и
- формирования вывода для запроса на улучшенную обработку событий на основе входных данных конструируемого потока данных и входных данных потока данных.
10. Система по п. 9, в которой сервер улучшенной обработки событий содержит логический модуль, при этом логический модуль сконфигурирован с возможностью:
- идентификации логики для формирования вывода на основе запроса на улучшенную обработку событий, при этом логика выбирается, по меньшей мере, из одного из следующего:
- логика управления наиболее актуальными моментальными снимками; и
- логика интерполяции;
- предоставления логики, в которой такой вывод формируется на основе логики, при этом логика является обратно совместимой с конструируемым потоком данных.
RU2017108205A 2014-09-15 2015-09-14 Конструируемый поток данных для улучшенной обработки событий RU2691595C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/486,638 2014-09-15
US14/486,638 US9870410B2 (en) 2014-09-15 2014-09-15 Constructed data stream for enhanced event processing
PCT/US2015/049876 WO2016044114A1 (en) 2014-09-15 2015-09-14 Constructed data stream for enhanced event processing

Publications (3)

Publication Number Publication Date
RU2017108205A true RU2017108205A (ru) 2018-09-14
RU2017108205A3 RU2017108205A3 (ru) 2019-04-11
RU2691595C2 RU2691595C2 (ru) 2019-06-14

Family

ID=54150758

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2017108205A RU2691595C2 (ru) 2014-09-15 2015-09-14 Конструируемый поток данных для улучшенной обработки событий

Country Status (7)

Country Link
US (1) US9870410B2 (ru)
EP (1) EP3195150B1 (ru)
JP (1) JP6577588B2 (ru)
CN (1) CN107077477B (ru)
BR (1) BR112017003426A8 (ru)
RU (1) RU2691595C2 (ru)
WO (1) WO2016044114A1 (ru)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11144520B2 (en) * 2015-05-08 2021-10-12 Adp, Llc Information system with versioning descending node snapshot
US11580125B2 (en) * 2015-05-08 2023-02-14 Adp, Inc. Information system with temporal data
US10956985B1 (en) * 2016-09-23 2021-03-23 Amazon Technologies, Inc. Scalable, service-based architecture for efficiently processing accrual-basis, out-of-order events
US10673917B2 (en) * 2016-11-28 2020-06-02 Microsoft Technology Licensing, Llc Pluggable components for augmenting device streams
US10409813B2 (en) 2017-01-24 2019-09-10 International Business Machines Corporation Imputing data for temporal data store joins
US10685180B2 (en) 2018-05-10 2020-06-16 International Business Machines Corporation Using remote words in data streams from remote devices to autocorrect input text
US10902020B2 (en) * 2018-06-08 2021-01-26 International Business Machines Corporation Multiple cache processing of streaming data
US10956832B2 (en) * 2018-06-22 2021-03-23 Platina Systems Corporation Training a data center hardware instance network
CN111367650B (zh) * 2018-12-26 2023-11-21 浙江大学 一种输入输出流的处理方法、装置及系统
CN111814205B (zh) * 2019-04-12 2023-11-14 阿里巴巴集团控股有限公司 计算处理方法、系统、设备、存储器、处理器及计算机设备
US11055113B1 (en) 2020-02-26 2021-07-06 The Toronto-Dominion Bank Data rendering for applications
US12050564B2 (en) * 2020-10-01 2024-07-30 The Toronto-Dominion Bank Data reporting architecture for applications
CN113760979A (zh) * 2020-11-12 2021-12-07 北京沃东天骏信息技术有限公司 用于生成信息的方法和装置
US11457052B1 (en) * 2021-09-10 2022-09-27 Dunkware, Llc Adaptable internet-of-things (IoT) computing systems and methods for improved declarative control of streaming data

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001337965A (ja) * 2000-05-26 2001-12-07 Nec Software Chubu Ltd 時系列データのwww検索システム
AU2003259281A1 (en) * 2002-07-26 2004-02-16 Datatrak International Method and system of unifying data
GB0228447D0 (en) 2002-12-06 2003-01-08 Nicholls Charles M System for detecting and interpreting transactions events or changes in computer systems
WO2006078751A2 (en) 2005-01-18 2006-07-27 Everypoint, Inc. Systems and methods for processing changing data
US8296316B2 (en) * 2007-10-17 2012-10-23 Oracle International Corporation Dynamically sharing a subtree of operators in a data stream management system operating on existing queries
CN101685449B (zh) * 2008-09-26 2012-07-11 国际商业机器公司 一种用于连接多个异构分布式数据库中的表的方法和系统
WO2011009211A1 (en) * 2009-07-22 2011-01-27 Carolyn Patricia Mcgregor System, method and computer program for multi-dimensional temporal data mining
JP5423553B2 (ja) * 2010-04-09 2014-02-19 株式会社日立製作所 データベース管理方法、計算機、センサネットワークシステム及びデータベース検索プログラム
WO2013069073A1 (ja) * 2011-11-07 2013-05-16 株式会社日立製作所 時系列データ管理システム、装置および方法
US9053160B2 (en) 2012-06-26 2015-06-09 Here Global B.V. Distributed, real-time online analytical processing (OLAP)
US9563663B2 (en) 2012-09-28 2017-02-07 Oracle International Corporation Fast path evaluation of Boolean predicates
CN103036736B (zh) * 2012-11-30 2015-09-23 航天恒星科技有限公司 一种基于数据源的组态化设备监控系统及方法
US10298444B2 (en) * 2013-01-15 2019-05-21 Oracle International Corporation Variable duration windows on continuous data streams
US9244978B2 (en) * 2014-06-11 2016-01-26 Oracle International Corporation Custom partitioning of a data stream

Also Published As

Publication number Publication date
CN107077477A (zh) 2017-08-18
BR112017003426A8 (pt) 2022-11-29
RU2017108205A3 (ru) 2019-04-11
BR112017003426A2 (pt) 2017-11-28
JP6577588B2 (ja) 2019-09-18
US9870410B2 (en) 2018-01-16
US20160078103A1 (en) 2016-03-17
WO2016044114A1 (en) 2016-03-24
JP2017532702A (ja) 2017-11-02
EP3195150B1 (en) 2019-11-06
CN107077477B (zh) 2021-01-01
EP3195150A1 (en) 2017-07-26
RU2691595C2 (ru) 2019-06-14

Similar Documents

Publication Publication Date Title
RU2017108205A (ru) Конструируемый поток данных для улучшенной обработки событий
JP2017532702A5 (ru)
JP6865219B2 (ja) 連続クエリ処理におけるイベントバッチ処理、出力シーケンス化、およびログベースの状態記憶
US10025878B1 (en) Data lineage analysis
US20190361886A1 (en) System and method of data wrangling
JP2016504679A5 (ru)
TW201706881A (zh) 資訊查詢方法及裝置
JP2016514299A5 (ru)
EP3365781A1 (en) Guaranteeing the event order for multi-stage processing in distributed systems
RU2016124468A (ru) Управляющее устройство, способ управления и компьютерная программа
WO2013019869A3 (en) Data fingerpringting for copy accuracy assurance
GB201216375D0 (en) Method of optimizing the interaction between a software application and a database server or other kind of remote data source
MX2018008318A (es) Tecnicas para realizar reconciliacion de datos en sistemas de almacenamiento de datos distribuidos.
MX2014001628A (es) Operaciones de archivo basadas en señal.
CN106886535A (zh) 一种适配多种数据源的数据抽取方法和装置
US20170270026A1 (en) Generating a Directed Graph Representing Application Program Execution Flow From an Execution Trace
RU2015102084A (ru) Способ предоставления функций в промышленной системе автоматизации и промышленная система автоматизации
CN105868216B (zh) 一种实现对象过期操作的方法、装置和设备
GB2533404A (en) Processing event log data
US20160098442A1 (en) Verifying analytics results
US9507689B2 (en) Updating of troubleshooting assistants
US9875275B2 (en) Efficient state change support for hierarchical data models in a virtualized system
US20130325890A1 (en) Leveraging persisted data queries in stream-based complex event processing
US20180260447A1 (en) Advanced anomaly correlation pattern recognition system
US10713266B2 (en) Processing a query via a lambda application