JP2019537092A5 - - Google Patents

Download PDF

Info

Publication number
JP2019537092A5
JP2019537092A5 JP2019514248A JP2019514248A JP2019537092A5 JP 2019537092 A5 JP2019537092 A5 JP 2019537092A5 JP 2019514248 A JP2019514248 A JP 2019514248A JP 2019514248 A JP2019514248 A JP 2019514248A JP 2019537092 A5 JP2019537092 A5 JP 2019537092A5
Authority
JP
Japan
Prior art keywords
microbatch
event
algorithm
time stamp
instructions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019514248A
Other languages
English (en)
Other versions
JP7013450B2 (ja
JP2019537092A (ja
Filing date
Publication date
Priority claimed from US15/696,501 external-priority patent/US10514952B2/en
Application filed filed Critical
Publication of JP2019537092A publication Critical patent/JP2019537092A/ja
Publication of JP2019537092A5 publication Critical patent/JP2019537092A5/ja
Priority to JP2022006554A priority Critical patent/JP7329633B2/ja
Application granted granted Critical
Publication of JP7013450B2 publication Critical patent/JP7013450B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (10)

  1. 方法であって、
    ストリームソースからの入来イベントをマイクロバッチするようにストリームプロセッサを構成することと、
    前記入来イベントのマイクロバッチについての単一のタイムスタンプを生成することと、
    前記ストリームソースからの前記入来イベントの前記マイクロバッチを受信することと、
    前記単一のタイムスタンプを前記マイクロバッチの各イベントに割り当てることと、
    アルゴリズムに少なくとも部分的に基づいて、前記マイクロバッチのそれぞれのイベントごとに別個のタイムスタンプ値を生成することと、
    前記マイクロバッチのそれぞれのイベントごとに、前記別個のタイムスタンプ値のうちの個々のタイムスタンプ値を割り当てることとを備える、方法。
  2. 前記アルゴリズムは、ウォールクロック進行アルゴリズム、均等分散型アルゴリズム、均等分散型トップオフアルゴリズム、または単純なシーケンスアルゴリズムを備える、請求項1に記載の方法。
  3. 前記別個のタイムスタンプ値のうちの個々のタイムスタンプ値を割り当てることは、前記別個のタイムスタンプ値のうちの前記個々のタイムスタンプ値を、前記マイクロバッチの各イベントについての前記単一のタイムスタンプに付加することを備える、請求項1または2に記載の方法。
  4. 前記アルゴリズムは、前記マイクロバッチの各イベントに固有のタイムスタンプを提供する、請求項1から3のいずれか1項に記載の方法。
  5. 前記アルゴリズムは、前記マイクロバッチの各イベントが前記マイクロバッチの一部として識別可能であることを保証する、請求項4に記載の方法。
  6. 各イベントを、1つ以上の連続クエリ言語エンジンパーティションに割り当てることをさらに備える、請求項1から5のいずれか1項に記載の方法。
  7. 前記1つ以上の連続クエリ言語エンジンパーティションの第1のパーティションを識別することと、
    前記第1のパーティションが、前記第1のパーティションに割り当てられる前記マイクロバッチにおける複数のイベントのイベント数よりも大きいウィンドウサイズを有すると判断することとをさらに備える、請求項6に記載の方法。
  8. 前記第1のパーティションについてのハートビートイベントを生成することと、
    前記ハートビートイベントを前記第1のパーティションに挿入することとをさらに備える、請求項7に記載の方法。
  9. システムであって、
    コンピュータによって実行可能な命令を格納するように構成されたメモリと、
    前記メモリにアクセスして、前記コンピュータによって実行可能な命令を実行するように構成されたプロセッサとを備え、前記コンピュータによって実行可能な命令は、少なくとも、
    ストリームソースからの入来イベントをマイクロバッチするようにストリームプロセッサを構成する命令と、
    前記入来イベントのマイクロバッチについての単一のタイムスタンプを生成する命令と、
    前記ストリームソースからの前記入来イベントの前記マイクロバッチを受信する命令と、
    前記単一のタイムスタンプを前記マイクロバッチの各イベントに割り当てる命令と、
    アルゴリズムに少なくとも部分的に基づいて、前記マイクロバッチのそれぞれのイベントごとに別個のタイムスタンプ値を生成する命令と、
    前記マイクロバッチのそれぞれのイベントごとに、前記別個のタイムスタンプ値のうちの個々のタイムスタンプ値を割り当てる命令とを備える、システム。
  10. 請求項1〜8のいずれか1項に記載の方法をプロセッサに実行させるためのコンピュータ読取可能プログラム
JP2019514248A 2016-09-15 2017-09-07 自動時間進行についての処理タイムスタンプおよびハートビートイベント Active JP7013450B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022006554A JP7329633B2 (ja) 2016-09-15 2022-01-19 自動時間進行についての処理タイムスタンプおよびハートビートイベント

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662395044P 2016-09-15 2016-09-15
US62/395,044 2016-09-15
US15/696,501 2017-09-06
US15/696,501 US10514952B2 (en) 2016-09-15 2017-09-06 Processing timestamps and heartbeat events for automatic time progression
PCT/US2017/050514 WO2018052792A1 (en) 2016-09-15 2017-09-07 Processing timestamps and heartbeat events for automatic time progression

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022006554A Division JP7329633B2 (ja) 2016-09-15 2022-01-19 自動時間進行についての処理タイムスタンプおよびハートビートイベント

Publications (3)

Publication Number Publication Date
JP2019537092A JP2019537092A (ja) 2019-12-19
JP2019537092A5 true JP2019537092A5 (ja) 2020-07-30
JP7013450B2 JP7013450B2 (ja) 2022-01-31

Family

ID=61560030

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019514248A Active JP7013450B2 (ja) 2016-09-15 2017-09-07 自動時間進行についての処理タイムスタンプおよびハートビートイベント
JP2022006554A Active JP7329633B2 (ja) 2016-09-15 2022-01-19 自動時間進行についての処理タイムスタンプおよびハートビートイベント

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022006554A Active JP7329633B2 (ja) 2016-09-15 2022-01-19 自動時間進行についての処理タイムスタンプおよびハートビートイベント

Country Status (5)

Country Link
US (2) US10514952B2 (ja)
EP (1) EP3513312B1 (ja)
JP (2) JP7013450B2 (ja)
CN (1) CN109863485B (ja)
WO (1) WO2018052792A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7434560B2 (ja) 2019-12-13 2024-02-20 ライブパーソン, インコーポレイテッド 双方向通信システムのためのサービスとしての機能クラウドチャットボット

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10514952B2 (en) 2016-09-15 2019-12-24 Oracle International Corporation Processing timestamps and heartbeat events for automatic time progression
DE112021006183T5 (de) 2020-11-27 2023-09-28 Nec Corporation Management-vorrichtung, system, management-verfahren und management-programm

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8452153B2 (en) * 2003-07-11 2013-05-28 Ricoh Company, Ltd. Associating pre-generated barcodes with temporal events
US8099452B2 (en) * 2006-09-05 2012-01-17 Microsoft Corporation Event stream conditioning
US8122006B2 (en) * 2007-05-29 2012-02-21 Oracle International Corporation Event processing query language including retain clause
US8688622B2 (en) * 2008-06-02 2014-04-01 The Boeing Company Methods and systems for loading data into a temporal data warehouse
US8028194B2 (en) * 2008-07-25 2011-09-27 Inmage Systems, Inc Sequencing technique to account for a clock error in a backup system
GB0817022D0 (en) * 2008-09-17 2008-10-22 Sage Technologies Ltd Information synchronisation
JP5439014B2 (ja) * 2009-04-10 2014-03-12 株式会社日立製作所 データ処理システム、その処理方法、及び計算機
US8413169B2 (en) * 2009-10-21 2013-04-02 Microsoft Corporation Time-based event processing using punctuation events
US20120137367A1 (en) * 2009-11-06 2012-05-31 Cataphora, Inc. Continuous anomaly detection based on behavior modeling and heterogeneous information analysis
US8874526B2 (en) * 2010-03-31 2014-10-28 Cloudera, Inc. Dynamically processing an event using an extensible data model
US9954720B2 (en) * 2011-08-18 2018-04-24 Telefonaktiebolaget Lm Ericsson (Publ) Method and apparatus for determining an event instance
US20130339473A1 (en) * 2012-06-15 2013-12-19 Zynga Inc. Real time analytics via stream processing
US9563663B2 (en) * 2012-09-28 2017-02-07 Oracle International Corporation Fast path evaluation of Boolean predicates
US8943107B2 (en) * 2012-12-04 2015-01-27 At&T Intellectual Property I, L.P. Generating and using temporal metadata partitions
US10956422B2 (en) * 2012-12-05 2021-03-23 Oracle International Corporation Integrating event processing with map-reduce
US10298444B2 (en) * 2013-01-15 2019-05-21 Oracle International Corporation Variable duration windows on continuous data streams
US9992269B1 (en) * 2013-02-25 2018-06-05 EMC IP Holding Company LLC Distributed complex event processing
US9674249B1 (en) * 2013-03-11 2017-06-06 DataTorrent, Inc. Distributed streaming platform for real-time applications
US9654538B1 (en) * 2013-03-11 2017-05-16 DataTorrent, Inc. Dynamic partitioning of instances in distributed streaming platform for real-time applications
US8978034B1 (en) * 2013-03-15 2015-03-10 Natero, Inc. System for dynamic batching at varying granularities using micro-batching to achieve both near real-time and batch processing characteristics
CN105144138B (zh) * 2013-04-16 2018-04-24 慧与发展有限责任合伙企业 分布式事件关联系统
US9418113B2 (en) * 2013-05-30 2016-08-16 Oracle International Corporation Value based windows on relations in continuous data streams
JP6114473B2 (ja) * 2013-06-21 2017-04-12 株式会社日立製作所 時間調整を使用したストリームデータ処理方法
US9697262B2 (en) * 2013-12-17 2017-07-04 Microsoft Technology Licensing, Llc Analytical data processing engine
US9244978B2 (en) * 2014-06-11 2016-01-26 Oracle International Corporation Custom partitioning of a data stream
US10049171B2 (en) * 2014-09-10 2018-08-14 Ca, Inc. Batch processed data structures in a log repository referencing a template repository and an attribute repository
US10120907B2 (en) * 2014-09-24 2018-11-06 Oracle International Corporation Scaling event processing using distributed flows and map-reduce operations
US9886486B2 (en) * 2014-09-24 2018-02-06 Oracle International Corporation Enriching events with dynamically typed big data for event processing
US10747812B1 (en) * 2014-10-01 2020-08-18 EMC IP Holding Company LLC Video analytics
JP6412762B2 (ja) 2014-10-01 2018-10-24 日清製粉株式会社 揚げパン類の製造方法
JP6313864B2 (ja) * 2014-10-27 2018-04-18 株式会社日立製作所 ストリームデータの処理方法及びストリームデータ処理装置
WO2016115735A1 (en) * 2015-01-23 2016-07-28 Murthy Sharad R Processing high volume network data
EP3248340A4 (en) * 2015-01-23 2018-01-03 eBay Inc. Processing high volume network data
US20160219089A1 (en) * 2015-01-23 2016-07-28 Ebay Inc. Systems and methods for messaging and processing high volume data over networks
US10211969B1 (en) * 2015-07-21 2019-02-19 Kelly Littlepage Secure system for the synchronized collection and distribution of transactional messages among untrusted geographically distributed users
WO2017018901A1 (en) * 2015-07-24 2017-02-02 Oracle International Corporation Visually exploring and analyzing event streams
WO2017023432A1 (en) * 2015-08-05 2017-02-09 Google Inc. Data flow windowing and triggering
EP3128423A1 (en) * 2015-08-06 2017-02-08 Hewlett-Packard Enterprise Development LP Distributed event processing
US10235417B1 (en) * 2015-09-02 2019-03-19 Amazon Technologies, Inc. Partitioned search of log events
US9672082B2 (en) * 2015-10-21 2017-06-06 Oracle International Corporation Guaranteeing the event order for multi-stage processing in distributed systems
US10127120B2 (en) * 2015-10-22 2018-11-13 Oracle International Corporation Event batching, output sequencing, and log based state storage in continuous query processing
CN105871603B (zh) * 2016-03-29 2019-01-18 中国科学院软件研究所 一种基于内存数据网格的实时流式数据处理失效恢复系统及方法
US10514952B2 (en) 2016-09-15 2019-12-24 Oracle International Corporation Processing timestamps and heartbeat events for automatic time progression

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7434560B2 (ja) 2019-12-13 2024-02-20 ライブパーソン, インコーポレイテッド 双方向通信システムのためのサービスとしての機能クラウドチャットボット

Similar Documents

Publication Publication Date Title
CN106506638B (zh) 区块链中的区块存储方法及装置
MX349042B (es) Sistema y metodo para motores de consulta de base de datos distribuidos.
JP2017517775A5 (ja)
JP2019537092A5 (ja)
WO2013009503A3 (en) Query execution systems and methods
PH12019501733A1 (en) Event-driven blockchain workflow processing
SG10201906917QA (en) Processing data from multiple sources
JP2016524756A5 (ja)
JP2019530068A5 (ja)
JP2020527794A5 (ja)
JP2019533854A5 (ja)
EP4287026A3 (en) Distributed hardware tracing
JP2020535559A5 (ja)
JP2019533231A5 (ja)
WO2011133030A4 (en) Improved embedded system performance
IN2013CH05115A (ja)
BR112018076877A8 (pt) Método para processamento de recursos e aparelho para processar um recurso
JP2014096164A5 (ja)
TW201929510A (zh) 支援基於數據類型將數據流分組並儲存至雲端儲存文件中的系統和電腦可執行方法
JP2018536227A5 (ja)
JP2018133080A5 (ja) データ管理装置、情報処理装置、コンテンツデータの出力方法、コンテンツデータidの共有方法、プログラム、及びデータ構造
US9141677B2 (en) Apparatus and method for arranging query
JP2017528847A5 (ja)
GB2540070A (en) Hardware counters to track utilization in a multithreading computer system
CN108536530B (zh) 一种多线程任务调度方法及装置