JP6832347B2 - 分散型システムにおける多段階処理のためのイベント順序の保証 - Google Patents

分散型システムにおける多段階処理のためのイベント順序の保証 Download PDF

Info

Publication number
JP6832347B2
JP6832347B2 JP2018513855A JP2018513855A JP6832347B2 JP 6832347 B2 JP6832347 B2 JP 6832347B2 JP 2018513855 A JP2018513855 A JP 2018513855A JP 2018513855 A JP2018513855 A JP 2018513855A JP 6832347 B2 JP6832347 B2 JP 6832347B2
Authority
JP
Japan
Prior art keywords
event
events
stream
computer
filtered
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018513855A
Other languages
English (en)
Other versions
JP2018533130A (ja
JP2018533130A5 (ja
Inventor
ツッカラム,プラブ
ビシュノイ,サンディープ
パーク,ホヨン
デシュムク,ウンメシュ・アニル
Original Assignee
オラクル・インターナショナル・コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オラクル・インターナショナル・コーポレイション filed Critical オラクル・インターナショナル・コーポレイション
Publication of JP2018533130A publication Critical patent/JP2018533130A/ja
Publication of JP2018533130A5 publication Critical patent/JP2018533130A5/ja
Application granted granted Critical
Publication of JP6832347B2 publication Critical patent/JP6832347B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/542Event management; Broadcasting; Multicasting; Notifications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24568Data stream processing; Continuous queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Debugging And Monitoring (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

関連出願の相互参照
本願は、「分散型システムにおける多段階処理のためのイベント順序の保証(GUARANTEEING THE EVENT ORDER FOR MULTI-STAGE PROCESSING IN DISTRIBUTED SYSTEMS)」と題される2016年4月11日に出願された米国特許出願番号第15/095,766号からの優先権およびその利益を主張し、米国特許出願番号第15/095,766号は、「分散型システムにおける多段階処理のためのイベント順序の保証(GUARANTEEING THE EVENT ORDER FOR MULTI-STAGE PROCESSING IN DISTRIBUTED SYSTEMS)」と題される2015年10月21日に出願された米国仮出願番号第62/244,452号の非仮出願であり、米国特許法第119条(e)のもとでその利益および優先権を主張し、どちらも内容全体が全ての目的で引用によって本明細書に援用される。
背景
従来のデータベースシステムでは、データは、通常はテーブルの形態の1つ以上のデータベースに格納される。格納されたデータは、次いで、構造化照会言語(structured query language:SQL)などのデータ管理言語を使用して照会され操作される。たとえば、SQLクエリは、データベースに格納されたデータから関連データを識別するように定義され実行されてもよい。したがって、SQLクエリは、データベースに格納された有限のデータセットに対して実行される。さらに、SQLクエリが実行される場合、それは有限のデータセットに対して一度実行されて、有限の静的な結果を生成する。したがって、格納された有限のデータセットに対して照会を行うようにデータベースが最適に準備される。
しかし、多数の現代のアプリケーションおよびシステムは、有限のデータセットの代わりに、連続データまたはイベントストリームの形態のデータを生成する。このようなアプリケーションの例としては、センサデータアプリケーション、金融株式相場表示板、ネットワーク性能測定ツール(たとえば、ネットワーク監視およびトラフィック管理アプリケーション)、クリックストリーム解析ツール、自動車交通監視などが挙げられるが、それらに限定されるものではない。このようなアプリケーションは、データストリームを処理することができる新しいタイプのアプリケーションの必要性を生じさせてきた。たとえば、温度センサは、温度読取値を送信するように構成されてもよい。
これらのタイプのイベントストリームベースのアプリケーションのためのデータの管理および処理は、強力な時間的焦点を有するデータ管理および照会機能を構築することを必要とする。連続的な無限のデータセットに対して長期間照会を行うことを含む異なる種類の照会機構が必要である。イベントストリーム処理に適合した製品一式を提供しているベンダもいるが、これらの製品提供は、依然として、今日のイベント処理ニーズに対処するのに必要な処理柔軟性が欠如している。
概要
本開示の以下の部分は、少なくとも主題を基本的に理解できるようにする目的で、本開示に記載されている1つ以上の革新的技術、実施形態および/または実施例の簡略化された概要を提供する。この概要は、いずれかの特定の実施形態または実施例の広範囲にわたる概略を提供しようとしているわけではない。また、この概要は、ある実施形態または実施例の重要な/不可欠な要素を識別することを意図したものではなく、または本開示の主題の範囲を図示することを意図したものでもない。したがって、この概要の1つの目的は、簡略化した形で本開示に記載されているいくつかの革新的技術、実施形態および/または実施例を、以下に記載するより詳細な説明に対する前置きとして提供することであり得る。
本開示の主題の本質および等価物(ならびに、提供されるいずれの固有のまたは明確な利点および改良点も)のさらなる理解は、上記の段落に加えて、本開示の残りの部分、添付の図面および特許請求の範囲を参照することによって実現されるべきである。
いくつかの例では、方法、システム、およびコンピュータ読取可能な媒体が提供され得る。上記方法、システムおよび/またはコンピュータ読取可能な媒体は、イベントストリームの一部として受信される一連のイベントのうちの第1のイベントを判断すること、上記第1のイベントのタイムスタンプを有するイベントカウンタの値を初期化すること、および/または、上記イベントストリームのさらに他のイベントを処理することを備え得る。さらに他のイベントは、上記第1のイベント以外の、上記一連のイベントのうちのいずれかのイベントを含み得る。いくつかの例は、上記方法、システムおよび/またはコンピュータ読取可能な媒体は、上記イベントストリームのフィルタリングされたイベントを識別すること、上記フィルタリングされたイベントのためのスキップビートを生成すること、および/または、上記スキップビートを上記イベントストリームに挿入することも備え得る。さらに、いくつかの例では、上記方法、システムおよび/またはコンピュータ読取可能な媒体は、上記イベントストリームの後続のイベントを受信すること、上記イベントストリームの順序が狂ったイベントを識別すること、および/または、上記イベントストリームにおける次のイベントが実際のイベントであるかスキップビートであるかに関係なく、上記後続のイベントの各々に関連付けられた上記タイムスタンプの順序で後続のイベントを処理することも備え得る。後続のイベントは、上記スキップビートの挿入後に上記イベントストリームの一部として受信される、上記一連のイベントのうちのいずれかのイベントを含み得る。いくつかの例では、上記方法、システムおよび/またはコンピュータ読取可能な媒体は、タイマを開始すること、上記タイマが時間切れになるまで上記一連のイベントのうちの一組のイベントを受信すること、上記一組のイベントを時系列順に再配列すること、および上記第1のイベントを、最新のタイムスタンプを有する上記再配列された組のイベントとして識別すること、によって上記第1のイベントを判断することも備え得る。さらに他のイベントは、上記タイマが時間切れになる前にバッチ処理され得る。上記フィルタリングされたイベントは、上流の段階によってフィルタリングにより除去され得る。上記実際のイベントは、上記イベントストリームに対応するイベントデータを備え得る。
本開示に記載されている革新的技術、実施形態および/または実施例を合理的に説明し図示するために、1つ以上の添付の図面を参照し得る。1つ以上の添付の図面を説明するために使用されるさらなる詳細または例は、記載されている開示のいずれの範囲に対しても、ここに記載されている実施形態および/または実施例のいずれの範囲に対しても、または本開示に提示されている、現在のところ最良の形態であると理解されている革新的技術のいずれの範囲に対しても、限定として考えられるべきではない。
本開示の実施形態を組み込むことができるシステムの簡略図である。 本開示の実施形態を実現するための詳細の簡略ブロック図である。 本開示の実施形態を実現するための方法のフローチャートである。 本開示の実施形態を実現するための方法のフローチャートである。 本開示の実施形態を実現するための方法のフローチャートである。 本明細書に記載されている例のうちのいくつか実現するための、少なくとも1つの例に係る分散型システムの簡略図である。 本明細書に記載されている例のうちのいくつかに従って実施形態のシステムのコンポーネントによって提供されるサービスをクラウドサービスとして提供することができる、少なくとも1つの例に係るシステム環境のコンポーネントの簡略ブロック図である。 本明細書に記載されている例のうちのいくつかに従って本開示のさまざまな実施形態を実現することができる、少なくとも1つの例に係る例示的なコンピュータシステムを示す。
詳細な説明
複合イベント処理プラットフォームでは、正確な結果を達成するために、アプリケーションタイムスタンプの順序でイベントを処理すべきである。イベント「a」がイベント「b」の前にアプリケーションによって生成された場合、イベント「a」は、「b」の前に処理されるべきである。たとえば、現在の温度が以前の温度よりも高いデバイスを識別するために、データをデバイスIDによってパーティション化して順番に処理すべきである。いくつかの例では、現在のデータと以前のデータとの間の相違は、それらのイベントのタイムスタンプによって定義される。データが単一の時点から取り込まれるシステムでは、イベントの順序付けされた処理を確実にすることは、比較的容易である。たとえば、イベントのパーティション番号を識別してもよく、処理のためのパーティションに特有の待ち行列上にイベントを配置してもよい。しかし、分散型システムでは、特にデータがクラスタ内の任意のノードから取り込まれる場合に、イベントの順序付けされた処理は非常に複雑になる。場合によっては、順序付けされた処理を確実にするためにいくつかの出来事が起こらなければならない。(1)第一に、正しいシーケンス番号またはタイムスタンプを有する開始カウンタが初期化されるべきである。(2)第二に、順序が狂った状態でイベントが到着したか否かが検出されるべきである。(3)第三に、バッファリングされたがまだ処理されていないイベントが再配列されるべきである。(4)最後に、順序が狂った古いイベントが到着するのをいつまでも待つことがないように、いつ次に進むかが判断されるべきである。これは多段階処理に特に当てはまるであろう。なぜなら、それらはパイプライン内の前の処理段階によってフィルタリングにより除去された可能性があるからである。ウォームアップおよびスキップビートの技術によって、本開示は、イベントを順番に処理するための例、およびいくつかの例では、たとえ処理が複数の段階を伴うとしてもイベントが発生順に処理されることを保証するための例を提供する。
いくつかの例では、本開示の1つの特徴は、システム起動の冒頭におよびシステム起動時に、後続のイベントを明らかにするというものである。これは、ウォームアップ局面と呼ぶことができる。いくつかの例では、システムがまさに最初のイベントを受信するとクロックが開始され、クロックまたはタイマが時間切れになるまでイベントが収集される。タイマが時間切れになった後、イベントは再配列され、最高/最新のタイムスタンプを有するイベントを使用して、カウンタ「LAST_SEEN_TiMESTAMP」の値を初期化し、カウンタ「NEXT_EXPECTED_TIMESTAMP」は、LAST_SEEN_TiMESTAMP+1に設定される。バッチ処理されたイベントが処理され、ウォームアップ局面が完了する。ウォームアップ局面後、上記の2つのカウンタを使用して順序付けが厳密に実施される。
本開示の別の特徴は、フィルタリングされたイベントと同一のタイムスタンプを使用してスキップビートを作動させるというものである。多段階処理では、上流の段階によってイベントがフィルタリングにより除去される可能性がある。このような場合、フィルタリングされたイベントは到着することがないので、処理システム(たとえば、複合イベント処理(CEP)エンジン)は、いつまでも待つべきではなく、イベント順序付けを試みるべきである。上流の段階は、さまざまな方法でおよび/またはさまざまな理由でストリームのイベントをフィルタリングにより除去する可能性がある。いずれのイベントにおいても、イベントは、一旦フィルタリングにより除去されると、もはやストリームにおける一連のイベントの一部ではなくなってしまう。したがって、フィルタリングが行われた後は、パイプラインのどの段階にもイベントが到着することはないであろう(たとえば、イベントはCEPエンジンに到着することはできない)。このような場合に対処するために、フィルタリングされたアプリケーションと同一のタイムスタンプを有するスキップビートを生成することができ、システムは、当該スキップビートを全ての下流の段階に伝搬させることができる。次いで、実際のイベントの代わりに当該スキップビートを使用して、多段階処理を展開するアプリケーションにおける順序付けを保証する。上記のウォームアップ局面が完了すると、入来イベントは正確な順序で処理することができる(たとえば、後続のイベントは、当該後続のイベントの各々に関連付けられたタイムスタンプの順序で処理される)。このようにして、以下の論理を使用して、後続のイベントの順序付けされた処理が保証される。
「NEXT_EXPECTED_TIMESTAMP」と同一のタイムスタンプを有する実際のイベントまたは「スキップビート」が到着すると、LAST_SEEN_TIMESTAMPは、NEXT_EXPECTED_TIMESTAMPの値を割り当てられ、NEXT_EXPECTED_TIMESTAMPはインクリメントされる。
NEXT_EXPECTED_TIMESTAMPよりも高いタイムスタンプを有する「スキップビート」または「実際のイベント」が到着すると、当該イベントはバッファに追加され、予め構成された時間切れ間隔を有するタイマが開始され、以下の動作が実施される。
・タイマが実行し続けるにつれて、NEXT_EXPECTED_TIMESTAMPよりも高いタイムスタンプを有するより多くの入来イベントまたはスキップビートがバッファリングされる。
・NEXT_EXPECTED_TIMESTAMPと同一のタイムスタンプを有する入来イベントまたはスキップビートが到着すると、タイマがオフにされ、バッファ内のイベントが再配列されて処理される。スキップビートは伝搬し続けることに留意されたい。
・NEXT_EXPECTED_TIMESTAMPよりも低いタイムスタンプを有する入来イベントまたはスキップビートが到着すると、当該イベントまたはビートは帯域外であるとして廃棄される。やはり、ウォームアップ局面の長さを長くすることにより、このシナリオの可能性を減少させることができる。
・タイマが時間切れになると、スキップビートの伝搬を継続しながら、バッファリングされたイベントが再配列されて処理される。
これらの技術により、カウンタの適切な初期化が可能であり、処理パイプライン内の上流の段階によってフィルタリングされ得るイベントが明らかにされる。
いくつかの例では、クエリは、イベントが前のイベントに対して高いか低いかを判断するタスクを備え得る。たとえば、温度がこの1時間(または、その他の期間)で上昇したか否かである。しかし、この質問に正確に答えるためには、(たとえば、温度に関連する)イベントを、当該イベントが生成された順序と同一の順序で処理しなければならない。これは、単一プロセッサシステムまたはデータが単一の時点から取り込まれるシステムでは、単に入来する通りにイベントを待ち行列に入れてそれらを順番に処理することによって、比較的容易にできる。しかし、分散型システムでは、イベントは、イベントプロセッサに到着する前に複数のノードを通過するため、順序が狂う可能性がある。
記載するように、1つの解決策は、イベントプロセッサが正確な始点を有するように正確な値で開始カウンタを初期化するというものである。さもなければ、システムが起動するときに(たとえば、再始動または再起動後に)、イベントプロセッサが正確な値で始動することになることを想定できない。したがって、システムが起動したときに、ウォームアップ期間を使用して、どのイベントが適切な開始イベントであるかを判断することができる。次いで、この開始イベントを使用して、配列を開始させることができる。次いで、イベントの処理が開始すると、システムは、あるものがいつ順序が狂うかを検出できる必要がある。場合によっては、イベントが順序が狂っていると判断されると、イベントは再順序付けされなければならない。しかし、順序が狂ったイベントがいつか到着することを保証することは、必ずしも可能であるとは限らない。たとえば、場合によっては、イベントは、分散型システムにおける前のノードまたはプロセスによってフィルタリングにより除去されているかもしれない。
いくつかの例では、イベントプロセッサが特定のイベントを待たなくてもいいことを示すために「スキップビート」(たとえば、システム中に伝搬されるダミーイベント)が使用される。たとえば、スキップビートは、イベントが到着することがないことを示してもよい。場合によっては、イベントが前のノードによってフィルタリングにより除去されている場合、適切なタイムスタンプ(たとえば、フィルタリングされたイベントに対応していたタイムスタンプと同一のタイムスタンプ)を有するストリームに「スキップビート」が挿入され得る。下流のプロセッサが当該「スキップビート」を受信すると、それは見つからないイベント(たとえば、順序が狂っているように見えるイベントのうちの、プロセッサが待っているイベント)として処理され、次のイベントが検出されると、プロセッサは、次のイベントの処理に移ることになる。いくつかの例では、イベントは、前のノードにおいて処理される条件によって、フィルタリングにより除去され場合がある。たとえば、特定の閾値を上回る(たとえば、70度を超える、など)温度上昇をクエリが識別しているのみであれば、60度未満の温度に関連付けられたイベントは全てフィルタリングにより除去されてもよい。イベントがフィルタリングにより除去されると、フィルタリングされたイベントの代わりに、「スキップビート」がストリームに挿入され得る。イベントプロセッサは、当該「スキップビート」を識別すると、上記のイベントを待つことをやめる。「スキップビート」イベントは、タイムスタンプ情報のみを含む空イベントを作成することによって生成され得る。空イベントを生成する際に、タプルは、フィルタリングされたイベントのタイムスタンプを含み得る。
イベントプロセッサは、どのイベントが上流でフィルタリングにより除去されたかが分からない可能性がある。そのため、イベントプロセッサは、「スキップビート」イベントを聞き取る場合、どのイベントを順番に処理しなくてもよいか(または、この場合、どのイベントも順番に処理しなくてもよいこと)が分かる。上記のように、「スキップビート」イベントは、本質的に、実際のイベントの代わりのダミーイベントである。そのため、本質的には、イベントプロセッサが正確な順序付けされたイベント処理を保証できるようにしたければ、システムは、少なくとも上記のウォームアップ期間および「スキップビート」の使用を利用しなければならない。また、イベントがいつ順序が狂うかを検出できることが重要であろう。
いくつかの例では、分散型システムにおいて多段階処理のためのイベント順序を保証する機構が提供され得る。一般に、連続的なデータストリーム(イベントストリームとも称される)は、明確な終端を持たない、本来は連続的または無限であり得るデータまたはイベントのストリームを含み得る。論理的には、イベントまたはデータストリームは、一連のデータ要素(イベントとも称される)であり得て、各データ要素は、関連付けられたタイムスタンプを有する。連続的なイベントストリームは、論理的には、一袋または一組の要素(s,T)として表現され得て、「s」はデータ部分を表わし、「T」は時間領域内にある。「s」部分は、一般にタプルまたはイベントと称される。したがって、イベントストリームは、一連のタイムスタンプ付きタプルまたはイベントであり得る。
いくつかの局面では、ストリームにおけるイベントに関連付けられたタイムスタンプは、クロックタイムと同一であってもよい。しかし、他の例では、イベントストリームにおけるイベントに関連付けられた時間は、アプリケーションドメインによって定義されてもよく、クロックタイムに対応しているのではなくたとえば代わりにシーケンス番号によって表わされてもよい。したがって、イベントストリームにおけるイベントに関連付けられた時間情報は、番号、タイムスタンプ、または時間の概念を表わすその他の情報によって表わすことができる。入力イベントストリームを受信するシステムでは、イベントは、タイムスタンプが増加する順にシステムに到着する。同一のタイムスタンプを有する2つ以上のイベントがある場合もある。
いくつかの例では、イベントストリームにおけるイベントは、何らかの世俗的なイベントの発生(たとえば、いつ温度センサが値を新たな値に変更したか、いつ株式銘柄の価格が変化したか)を表わし得て、イベントに関連付けられた時間情報は、データストリームイベントによって表わされる世俗的なイベントがいつ発生したかを示し得る。
イベントがイベントストリームを介して受信される場合、イベントに関連付けられた時間情報を使用して、当該イベントストリームにおけるイベントが、タイムスタンプ値が増加する順に到着することを保証し得る。これにより、イベントストリームにおける受信したイベントは、それらの関連付けられた時間情報に基づいて順序付けすることが可能になり得る。この順序付けを可能にするために、後に生成されるイベントが前に生成されるイベントよりも遅いタイムスタンプを有するように、タイムスタンプは、減少しない態様でイベントストリームにおけるイベントに関連付けられ得る。別の例として、時間情報としてシーケンス番号が使用されている場合には、後に生成されるイベントに関連付けられたシーケンス番号は、前に生成されるイベントに関連付けられたシーケンス番号よりも大きくてもよい。いくつかの例では、たとえばデータストリームイベントによって表わされる世俗的なイベントが同時に発生する場合、複数のイベントが同一のタイムスタンプまたはシーケンス番号に関連付けられてもよい。同一のイベントストリームに属するイベントは、一般に、前のイベントが後のイベントよりも前に処理される状態で、関連付けられた時間情報によってイベントに対して課される順序で処理され得る。
イベントストリームにおけるイベントに関連付けられた時間情報(たとえば、タイムスタンプ)は、ストリームのソースによって設定されてもよく、または代替的に、ストリームを受信するシステムによって設定されてもよい。たとえば、特定の実施形態では、イベントストリームを受信するシステム上でハートビートが維持されてもよく、イベントに関連付けられた時間は、当該ハートビートによって測定されるシステムへのイベントの到着時間に基づいてもよい。イベントストリームにおける2つのイベントが同一の時間情報を有することが可能である。なお、タイムスタンプ順序付け要件は1つのイベントストリームに特有であるが、異なるストリームのイベントを任意にさしはさんでもよい。
イベントストリームは、関連付けられたスキーマ「S」を有し、当該スキーマは、時間情報と、一組の1つ以上の名前付き属性とを備える。特定のイベントストリームに属する全てのイベントは、当該特定のイベントストリームに関連付けられたスキーマに一致する。したがって、イベントストリーム(s,T)では、イベントストリームは、(<time_stamp>, <attribute(s)>)としてスキーマ「S」を有し得て、<attributes>は、スキーマのデータ部分を表わし、1つ以上の属性を備え得る。たとえば、株式相場表示機イベントストリームのためのスキーマは、属性<stock symbol>および<stock price>を備えていてもよい。このようなストリームを介して受信した各イベントは、タイムスタンプと、2つの属性を有することになる。たとえば、株式相場表示機イベントストリームは、以下のイベントおよび関連付けられたタイムスタンプを受信し得る。
上記のストリームにおいて、ストリーム要素(<timestamp_N+l>, <ORCL,62>)では、イベントは、属性「stock_symbol」および「stock_value」を有する<ORCL,62>である。当該ストリーム要素に関連付けられたタイムスタンプは、「timestamp_N+l」である。したがって、連続的なイベントストリームはイベントのフローであり、各イベントは同一の一連の属性を有する。
上記のように、ストリームは、CQLクエリが作用し得る原理データソースであり得る。ストリームSは、一袋の(「複数組の」とも称される)要素(s,T)であり得て、「s」はスキーマS内にあり、「T」は時間領域内にある。さらに、ストリーム要素は、一連のタイムスタンプ付きタプル挿入として表わすことができるタプル・タイムスタンプ対であり得る。言い換えれば、ストリームは、一連のタイムスタンプ付きタプルであり得る。場合によっては、同一のタイムスタンプを有する2つ以上のタプルがあってもよい。そして、入力ストリームのタプルは、タイムスタンプが増加する順にシステムに到着することを要求され得る。代替的に、関係(「時間変化関係」とも称され、リレーショナルデータベースからのデータを含み得る「リレーショナルデータ」と混同すべきではない)は、時間領域からスキーマRのタプルの無限の集合へのマッピングであってもよい。いくつかの例では、関係は、タプルの順序付けされていない、時間変化的な集合(すなわち、瞬間的な関係)であってもよい。場合によっては、時間の各インスタンスにおいて、関係は、有界集合であってもよい。また、関係は、関係の変化する状態を取り込むための挿入、削除および/または更新を含み得る一連のタイムスタンプ付きタプルとして表わすこともできる。ストリームと同様に、関係は、関係の各タプルが一致し得る固定のスキーマを有し得る。さらに、本明細書では、連続クエリは、一般に、ストリームおよび/または関係の(すなわち、ストリームおよび/または関係に対して照会される)データを処理することが可能であり得る。また、関係は、ストリームのデータを参照し得る。
いくつかの例では、ビジネスインテリジェンス(business intelligence:BI)が、特定の間隔で(たとえば、場合によっては毎日)ビジネス活動を駆動して最適化することを手助けし得る。このタイプのBIは、通常、オペレーショナルビジネスインテリジェンス、リアルタイムビジネスインテリジェンス、またはオペレーショナルインテリジェンス(OI)と呼ばれる。いくつかの例では、オペレーショナルインテリジェンスは、BI間の回線およびビジネスアクティビティ監視(business activity monitoring:BAM)を曖昧にする。たとえば、BIは、履歴データの定期的なクエリに焦点を合わせてもよい。したがって、それは、後ろ向きの焦点を有し得る。しかし、BIは、オペレーショナルアプリケーションにも配置され得て、そのため、単なる戦略分析ツールからビジネス活動の前線に拡大することができる。したがって、BIシステムは、リアルタイムでイベントストリームを分析して総計を計算するようにも構成され得る。
さらに、いくつかの例では、OIは、可視性およびビジネス活動への洞察を提供することができる一種のリアルタイムの動的ビジネス解析である。OIは、BIもリアルタイムBIも大量の情報を理解することを手助けするという意味で、しばしばBIまたはリアルタイムBIに結び付けられて比較される。しかし、いくつかの基本的な違いがある。すなわち、OIは主にアクティビティ中心であるのに対して、BIは主にデータ中心である、というものである。さらに、OIは、事後の、報告ベースのパターン識別アプローチとして従来から使用されているBIとは異なって、展開中の状況(たとえば、トレンドおよびパターン)を検出して応答することにさらに適しているであろう。
いくつかの例では、ビジネスイベント分析および監視(business event analysis and monitoring:BEAM)システムは、流れている(in-flight)データを処理および/または受信するためにCQLエンジンを含み得る。たとえば、CQLエンジンは、入来リアルタイム情報に照会するか、またはそうでなければ入来リアルタイム情報を処理するように構成されたインメモリリアルタイムイベント処理エンジン(たとえば、BIまたはOI)であってもよい。CQLエンジンは、時間意味論を利用または理解して、データのウィンドウの定義を処理することを可能にするように構成され得る。場合によっては、CQLエンジンを利用することは、入来データに対して常に照会することを含み得る。
いくつかの局面では、CQLエンジンは、本格的な照会言語を含み得る。したがって、ユーザは、クエリの観点から計算を指定し得る。さらに、CQLエンジンは、照会言語特徴、オペレータ共有、豊かなパターンマッチング、豊かな言語構造などを利用してメモリを最適化するように設計され得る。さらに、いくつかの例では、CQLエンジンは、履歴データもストリーミングデータも処理し得る。たとえば、ユーザは、カリフォルニアセールスが特定の目標値を上回ると警告を送信するようにクエリを設定してもよい。したがって、いくつかの例では、当該警告は、少なくとも一部には履歴販売データおよび入来ライブ(すなわち、リアルタイム)販売データに基づき得る。
いくつかの例では、CQLエンジンまたは以下で説明する概念の他の特徴は、リアルタイムの態様で履歴文脈(すなわち、倉庫データ)と入来データとを組み合わせるように構成され得る。したがって、場合によっては、本開示は、データベース格納情報および流れている情報の境界について説明することができる。データベース格納情報も流れている情報もBIデータを含み得る。したがって、いくつかの例では、データベースは、BIサーバであってもよく、またはいずれかのタイプのデータベースであってもよい。さらに、いくつかの例では、本開示の特徴は、どのようにしてコードをプログラムするか、またはそうでなければどのようにしてコードを書込むかをユーザが知らなくても、上記の特徴を実現することを可能にし得る。言い換えれば、当該特徴は、非開発者が履歴データとリアルタイムデータとの組み合わせを実現することを可能にする機能豊富なユーザインターフェイス(UI)または他の態様で提供され得る。
上記および下記の技術は、多くの方法でおよび多くの文脈で実現することができる。以下でさらに詳細に説明するように、以下の図面を参照していくつかの例示的な実現例および文脈を提供する。しかし、以下の実現例および文脈は、多くのもののうちのいくつかに過ぎない。
図1は、イベント順序を保証するための技術を実現することができる簡略化された例示的なシステムまたはアーキテクチャ100を示す。アーキテクチャ100では、1人以上のユーザ102(たとえば、アカウント所有者)は、ユーザコンピューティングデバイス104(1)〜(N)(まとめて「ユーザデバイス104」)を利用して、1つ以上のネットワーク108を介して1つ以上のサービスプロバイダコンピュータ106にアクセスし得る。また、いくつかの局面では、サービスプロバイダコンピュータ106は、ネットワーク108を介して1つ以上のストリーミングデータソースコンピュータ110および/または1つ以上のデータベース112と通信し得る。たとえば、ユーザ102は、サービスプロバイダコンピュータ106を利用して、ストリーミングデータソースコンピュータ110および/またはデータベース112のデータにアクセスするか、またはそうでなければ当該データを管理してもよい(たとえば、110,112のいずれかまたは両方に対して照会が行われてもよい)。データベース112は、リレーショナルデータベース、SQLサーバなどであってもよく、いくつかの例では、ユーザ102の代わりに履歴データ、イベントデータ、関係、アーカイブされた関係などを管理し得る。さらに、データベース112は、ストリーミングデータソースコンピュータ110によって提供されるデータを受信するか、またはそうでなければ格納し得る。いくつかの例では、ユーザ102は、ユーザデバイス104を利用して、データ(たとえば、履歴イベントデータ、ストリーミングイベントデータなど)に対するクエリ(「クエリステートメント」とも称される)または他の要求を提供することによってサービスプロバイダコンピュータ106と対話し得る。次いで、このようなクエリまたは要求は、サービスプロバイダコンピュータ106によって実行されて、データベース112のデータおよび/またはストリーミングデータソースコンピュータ110からの入来データを処理し得る。さらに、いくつかの例では、ストリーミングデータソースコンピュータ110および/またはデータベース112は、サービスプロバイダコンピュータ106に関連付けられた統合分散環境の一部であってもよい。
いくつかの例では、ネットワーク108は、ケーブルネットワーク、インターネット、無線ネットワーク、セルラーネットワーク、イントラネットシステム、ならびに/または、他の私的ネットワークおよび/もしくは公共ネットワークなどの複数の異なるタイプのネットワークのいずれか1つまたは組み合わせを含み得る。示されている例は、ユーザ102がネットワーク108を介してサービスプロバイダコンピュータ106にアクセスすることを示しているが、記載されている技術は、ユーザ102が固定電話を介して、キオスクを介して、またはその他の態様で1つ以上のユーザデバイス104を介して1つ以上のサービスプロバイダコンピュータ106と対話する場合に等しく適用することができる。なお、また、記載されている技術は、他のクライアント/サーバ構成(たとえば、セットトップボックスなど)および非クライアント/サーバ構成(たとえば、ローカルに格納されたアプリケーションなど)において適用することもできる。
ユーザデバイス104は、携帯電話、スマートフォン、携帯情報端末(personal digital assistant:PDA)、ラップトップコンピュータ、デスクトップコンピュータ、シンクライアントデバイス、タブレットPCなどであるがそれらに限定されないいずれかのタイプのコンピューティングデバイスであってもよい。いくつかの例では、ユーザデバイス104は、ネットワーク108を介して、または他のネットワーク接続を介して、サービスプロバイダコンピュータ106と通信し得る。さらに、ユーザデバイス104は、処理すべきデータベース112(または、他のデータストア)のデータを要求するための1つ以上のクエリまたはクエリステートメントを提供するようにも構成され得る。
また、いくつかの局面では、サービスプロバイダコンピュータ106は、サーバなどの、モバイルコンピューティングデバイス、デスクトップコンピューティングデバイス、シンクライアントコンピューティングデバイスおよび/またはクラウドコンピューティングデバイスなどであるがそれらに限定されないいずれかのタイプのコンピューティングデバイスであってもよい。いくつかの例では、サービスプロバイダコンピュータ106は、ネットワーク108を介して、または他のネットワーク接続を介して、ユーザデバイス104と通信し得る。サービスプロバイダコンピュータ106は、サーバファームとして、または互いに関連付けられない個々のサーバとして、恐らくクラスタ状態で配置された1つ以上のサーバを含み得る。これらのサーバは、本明細書に記載されている特徴を実行するか、またはそうでなければ提供するように構成され得て、本明細書に記載されている特徴は、アーカイブされた関係の管理、アーカイブされた関係に関連付けられた構成可能なデータウィンドウ、および/または、本明細書に記載されているアーカイブされた関係の管理に関連付けられた変更イベントの正確な集計を含むが、それらに限定されるものではない。さらに、いくつかの局面では、サービスプロバイダコンピュータ106は、ストリーミングデータソースコンピュータ110および/またはデータベース112を含む統合分散コンピューティング環境の一部として構成され得る。
1つの例示的な構成では、サービスプロバイダコンピュータ106は、少なくとも1つのメモリ136と、1つ以上の処理ユニット(または、プロセッサ)138とを含み得る。プロセッサ138は、ハードウェア、コンピュータによって実行可能な命令、ファームウェア、またはそれらの組み合わせで適宜実現され得る。プロセッサ138のコンピュータによって実行可能な命令またはファームウェア実現例は、記載されているさまざまな機能を実行するために、任意の好適なプログラミング言語で書かれた、コンピュータによって実行可能なまたはマシンによって実行可能な命令を含み得る。
メモリ136は、プロセッサ138上でロード可能であり実行可能であるプログラム命令、および、これらのプログラムの実行中に生成されるデータを格納し得る。サービスプロバイダコンピュータ106の構成およびタイプに応じて、メモリ136は、揮発性であってもよく(ランダムアクセスメモリ(random access memory:RAM)など)、および/または、不揮発性であってもよい(リードオンリメモリ(read-only memory:ROM)、フラッシュメモリなど)。サービスプロバイダコンピュータ106またはサーバは、リムーバブルストレージおよび/または非リムーバブルストレージを含み得るさらに他のストレージ140も含み得る。さらに他のストレージ140は、磁気ストレージ、光ディスクおよび/またはテープストレージを含み得るが、それらに限定されるものではない。ディスクドライブおよびそれらの関連付けられたコンピュータ読取可能な媒体は、コンピュータ読取可能な命令、データ構造、プログラムモジュール、およびコンピューティングデバイスのための他のデータの不揮発性ストレージを提供し得る。いくつかの実現例では、メモリ136は、スタティックランダムアクセスメモリ(static random access memory:SRAM)、ダイナミックランダムアクセスメモリ(dynamic random access memory:DRAM)またはROMなどの複数の異なるタイプのメモリを含み得る。
メモリ136、さらに他のストレージ140は、全て、リムーバブルなものも非リムーバブルなものも、コンピュータ読取可能な記憶媒体の例である。たとえば、コンピュータ読取可能な記憶媒体は、コンピュータ読取可能な命令、データ構造、プログラムモジュールまたは他のデータなどの情報の格納のためのいずれかの方法または技術で実現される揮発性または不揮発性の、リムーバブルまたは非リムーバブルな媒体を含み得る。メモリ136およびさらに他のストレージ140は全て、コンピュータ記憶媒体の例である。
サービスプロバイダコンピュータ106は、アイデンティティインターフェイスコンピュータ120が、格納されたデータベース、別のコンピューティングデバイスまたはサーバ、ユーザ端末、および/または、ネットワーク108上の他のデバイスと通信することを可能にする通信接続142も含み得る。サービスプロバイダコンピュータ106は、キーボード、マウス、ペン、音声入力デバイス、タッチ入力デバイス、ディスプレイ、1つ以上のスピーカ、プリンタなどの入力/出力(I/O)デバイス144も含み得る。
メモリ136のコンテンツをさらに詳細に見てみると、メモリ136は、オペレーティングシステム146と、本明細書に開示されている特徴を実現するための1つ以上のアプリケーションプログラムまたはサービスとを含み得て、本明細書に開示されている特徴は、少なくとも、ウォームアップモジュール148、(たとえば、レスリー・ランポートアルゴリズムなどを利用した)順序狂い検出モジュール150、および/または、スキップビートモジュール152を含む。ウォームアップモジュール148は、上記のウォームアップ期間を可能にするように構成され得る。順序狂い検出モジュール150は、イベントを受信したときに順序が狂ったイベントの検出を可能にするように構成され得る。そして、スキップビートモジュール152は、いつイベントがフィルタリングにより除去されたかを判断して、スキップビートを生成し、それらを適宜ストリームに挿入するように構成され得る。本明細書では、モジュールは、サービスの一部である、サーバまたはサーバのクラスタによって実行されるプログラミングモジュールを指し得る。この特定の文脈において、モジュールは、サービスプロバイダコンピュータ106の一部であるサーバまたはサーバのクラスタによって実行され得る。
図2は、本開示の実施形態を組み込むことができるイベント処理システム200の簡略化されたハイレベル図を示す。イベント処理システム200は、1つ以上のイベントソース(204,206,208)と、イベントストリームを処理するための環境を提供するように構成されたイベント処理サーバ(EPS)202(CQサービス202とも称される)と、1つ以上のイベントシンク(210,212)とを備え得る。イベントソースは、EPS202によって受信されるイベントストリームを生成する。EPS202は、1つ以上のイベントソースから1つ以上のイベントストリームを受信し得る。たとえば、図2に示されるように、EPS202は、イベントソース204から入力イベントストリーム214を受信し、イベントソース206から第2の入力イベントストリーム216を受信し、イベントソース208から第3のイベントストリーム218を受信する。1つ以上のイベント処理アプリケーション(220,222および224)がEPS202上にデプロイされてEPS202によって実行され得る。EPS202によって実行されるイベント処理アプリケーションは、1つ以上の入力イベントストリームを聞き取り、注目すべきイベントとして入力イベントストリームから1つ以上のイベントを選択する処理論理に基づいて、1つ以上のイベントストリームを介して受信したイベントを処理するように構成され得る。次いで、当該注目すべきイベントは、1つ以上の出力イベントストリームの形態で1つ以上のイベントシンク(210,212)に送信され得る。たとえば、図2では、EPS202は、出力イベントストリーム226をイベントシンク210に出力し、第2の出力イベントストリーム228をイベントシンク212に出力する。特定の実施形態では、イベントソース、イベント処理アプリケーションおよびイベントシンクは、他のコンポーネントに対する変更を生じさせることなくこれらのコンポーネントのうちのいずれかを追加または除去することができるように互いに分離される。
一実施形態では、EPS202は、共有サービスを有する、Equinox OSGiに基づくものなどの軽量Java(登録商標)アプリケーションコンテナを備えるJavaサーバとして実現され得る。いくつかの実施形態では、EPS202は、たとえばJRockit Real Timeを使用してイベントを処理するための超高スループットおよびマイクロ秒待ち時間をサポートし得る。また、EPS202は、イベント処理アプリケーションを開発するためのツール(たとえば、オラクルCEPビジュアライザおよびオラクルCEP IDE)を含む開発プラットフォーム(たとえば、完全なリアルタイムのエンドツーエンドJavaイベント駆動アーキテクチャ(Event-Driven Architecture:EDA)開発プラットフォーム)を提供し得る。
イベント処理アプリケーションは、1つ以上の入力イベントストリームを聞き取って、1つ以上の入力イベントストリームから1つ以上の注目すべきイベントを選択するための論理(たとえば、クエリ)を実行し、選択された注目すべきイベントを1つ以上の出力イベントストリームを介して1つ以上のイベントソースに出力するように構成される。図2は、1つのこのようなイベント処理アプリケーション220のためのドリルダウンを提供する。図2に示されるように、イベント処理アプリケーション220は、入力イベントストリーム218を聞き取って、入力イベントストリーム218から1つ以上の注目すべきイベントを選択するための論理を備えるクエリ230を実行し、選択された注目すべきイベントを出力イベントストリーム228を介してイベントシンク212に出力するように構成される。イベントソースの例としては、アダプタ(たとえば、JMS、HTTPおよびファイル)、チャネル、プロセッサ、テーブル、キャッシュなどが挙げられるが、それらに限定されるものではない。イベントシンクの例としては、アダプタ(たとえば、JMS、HTTPおよびファイル)、チャネル、プロセッサ、キャッシュなどが挙げられるが、それらに限定されるものではない。
図2におけるイベント処理アプリケーション220は、1つの入力ストリームを聞き取って、選択されたイベントを1つの出力ストリームを介して出力するものとして示されているが、これは限定的であるよう意図されるものではない。代替的な実施形態では、イベント処理アプリケーションは、1つ以上のイベントソースから受信した複数の入力ストリームを聞き取って、監視されたストリームからイベントを選択し、選択されたイベントを1つ以上の出力イベントストリームを介して1つ以上のイベントシンクに出力するように構成され得る。同一のクエリを2つ以上のイベントシンクおよび異なるタイプのイベントシンクに関連付けることができる。
無限の性質のために、イベントストリームを介して受信されるデータの量は、一般に非常に多い。その結果、照会目的で全てのデータを格納またはアーカイブすることは、一般に非現実的であり、望ましくない。イベントストリームの処理は、受信した全てのイベントデータを格納する必要なしにイベントがEPS202によって受信されるときにリアルタイムでイベントの処理を必要とする。したがって、EPS202は、受信した全てのイベントを格納する必要なしにイベントがEPS202によって受信されるときにイベントの処理を実行することを可能にする特別な照会機構を提供する。
イベント駆動アプリケーションは、ルール駆動であり、これらのルールは、入力ストリームを処理するために使用される連続クエリの形態で表現され得る。連続クエリは、クエリ処理の結果として、どのイベントを注目すべきイベントとして選択して出力すべきかを含む、受信したイベントに対して実行される処理を識別する命令(たとえば、ビジネス論理)を備え得る。連続クエリは、データストアに留まって、イベントの入力ストリームの処理およびイベントの出力ストリームの生成に使用され得る。連続クエリは、一般に、フィルタリングおよび集約機能を実行して、入力イベントストリームから注目すべきイベントを発見して抽出する。その結果、出力イベントストリームにおける送信イベントの数は、一般に、イベントが選択される入力イベントストリームにおけるイベントの数よりもはるかに少なくなる。
有限のデータセットに対して一度実行されるSQLクエリとは異なって、EPS202を有するアプリケーションによって特定のイベントストリームのために登録された連続クエリは、当該イベントストリームにおいてイベントが受信されるたびに実行され得る。連続クエリの実行の一部として、EPS202は、連続クエリによって指定された命令に基づいて、受信したイベントを評価して、連続クエリの実行の結果として、1つ以上のイベントを注目すべきイベントとして選択すべきか否かを判断して出力する。
連続クエリは、さまざまな言語を使用してプログラムされ得る。特定の実施形態では、連続クエリは、オラクル社によって提供されるCQLを使用して構成され、オラクルの複合イベント処理(CEP)製品提供によって使用され得る。オラクルのCQLは、イベントストリームに対して実行可能なクエリ(CQLクエリと称される)をプログラムするために使用できる宣言型言語である。特定の実施形態では、CQLは、ストリーミングイベントデータの処理をサポートする追加の構造を有するSQLに基づく。
一実施形態では、イベント処理アプリケーションは、以下のコンポーネントタイプで構成され得る。
(1)入力および出力ストリームならびにリレーションソースおよびシンクに直接接続する1つ以上のアダプタ。アダプタは、入力および出力ストリームプロトコルを理解するように構成され、イベントデータを、アプリケーションプロセッサによって照会可能な正規化された形態に変換する役割を担う。アダプタは、正規化されたイベントデータをチャネルまたは出力ストリームおよびリレーションシンクに転送し得る。イベントアダプタは、さまざまなデータソースおよびシンクについて定義され得る。
(2)イベント処理終点の役割を果たす1つ以上のチャネル。とりわけ、チャネルは、イベント処理エージェントがイベントデータに対して作用することができるまでイベントデータを待ち行列に入れる役割を担う。
(3)1つ以上のアプリケーションプロセッサ(または、イベント処理エージェント)は、正規化されたイベントデータをチャネルから消費し、クエリを使用してそれを処理して注目すべきイベントを選択し、選択された注目すべきイベントを出力チャネルに転送(または、コピー)するように構成される。
(4)1つ以上のビーンは、出力チャネルを聞き取るように構成され、出力チャネルへの新たなイベントの挿入によって作動される。いくつかの実施形態では、このユーザコードは、プレーンオールドJavaオブジェクト(plain-old-Java-object:POJO)である。ユーザアプリケーションは、JMS、ウェブサービスおよびファイルライタなどの外部サービス一式を活用して、生成されたイベントを外部イベントシンクに転送することができる。
(5)イベントビーンは、出力チャネルを聞き取るように登録され得て、出力チャネルへの新たなイベントの挿入によって作動される。いくつかの実施形態では、このユーザコードは、ビーンがオラクルCEPによって管理できるようにオラクルCEPイベントビーンAPIを使用し得る。
一実施形態では、イベントアダプタは、イベントデータを入力チャネルに提供する。入力チャネルは、入力チャネルによって提供されるイベント上で動作する1つ以上のCQLクエリに関連付けられたCQLプロセッサに接続される。CQLプロセッサは、クエリ結果が書込まれる出力チャネルに接続される。
いくつかの実施形態では、イベント処理アプリケーションのさまざまなコンポーネント、コンポーネントがどのように接続されるか、アプリケーションによって処理されるイベントタイプを記述するアセンブリファイルがイベント処理アプリケーションに対して提供され得る。イベントの選択のために連続クエリまたはビジネス論理を指定するために別々のファイルが提供されてもよい。
図2に示されるシステム200は、図2に示されているコンポーネント以外の他のコンポーネントを有していてもよいということが理解されるべきである。さらに、図2に示される実施形態は、本開示の実施形態を組み込むことができるシステムの一例に過ぎない。いくつかの他の実施形態では、システム200は、図2に示されるよりも多くのコンポーネントもしくは少ないコンポーネントを有していてもよく、2つ以上のコンポーネントを組み合わせてもよく、またはコンポーネントの異なる構成もしくは配置を有していてもよい。システム200は、パーソナルコンピュータ、ポータブルデバイス(たとえば、携帯電話またはデバイス)、ワークステーション、ネットワークコンピュータ、メインフレーム、キオスク、サーバ、またはその他のデータ処理システムを含むさまざまなタイプのシステムであってもよい。いくつかの他の実施形態では、システム200は、システム200の1つ以上のコンポーネントがクラウド内の1つ以上のネットワークにわたって分散される分散型システムとして構成されてもよい。
図2に示されるコンポーネントのうちの1つ以上は、ソフトウェア、ハードウェア、またはそれらの組み合わせで実現されてもよい。いくつかの実施形態では、ソフトウェアは、メモリ内に格納されてもよく(たとえば、非一時的なコンピュータ読取可能な媒体)、メモリデバイス上に格納されてもよく、または何らかの他の物理メモリ上に格納されてもよく、1つ以上の処理ユニット(たとえば、1つ以上のプロセッサ、1つ以上のプロセッサコア、1つ以上のGPUなど)によって実行されてもよい。
連続的な予定されたクエリのハイブリッド実行を実現するための例示的な方法およびシステムについて上記した。これらのシステムおよび方法のうちのいくつかまたは全ては、少なくとも部分的に、少なくとも上記の図1〜図2に示されるようなアーキテクチャおよびプロセスによって実現されてもよいが、そうでなくてもよい。
図3〜図5は、それぞれ、本開示の実施形態に係る多段階処理のイベント順序を保証するための方法300,400および500のフローチャートである。図3〜図5に示される方法300,400および500の実現例または処理は、コンピュータシステムまたは情報処理デバイスなどの論理マシンの中央処理装置(CPUまたはプロセッサ)によって実行されたときにはソフトウェア(たとえば、命令またはコードモジュール)によって実行されてもよく、電子デバイスまたは特定用途向け集積回路のハードウェアコンポーネントによって実行されてもよく、またはソフトウェアとハードウェア要素との組み合わせによって実行されてもよい。本明細書および以下に記載されているプロセスのうちのいずれかの各ステップは、所望のごとく、いかなる順序で実行されてもよく、省略(またはそうでなければスキップ)されてもよく、他のステップと置換されてもよく、および/または、繰返しもしくは再帰的に実行されてもよい。
図3に示される方法300は、302から開始し得て、302において、少なくともタイマが時間切れになるまで起こるウォームアップ期間に少なくとも部分的に基づいてイベントストリームの第1のイベントを判断(または、識別)し得る。いくつかの例では、304において、第1のイベントのタイムスタンプでイベントカウンタを初期化し得る。306において、イベントストリームのさらに他のイベントを処理し得る。さらに他のイベントは、タイマが時間切れになる前にバッチ処理されているかもしれない。いくつかの例では、308において、フィルタリングされたイベントを識別し得る。フィルタリングされたイベントは、上流の段階によってフィルタリングにより除去されているかもしれない。310において、フィルタリングされたイベントのために、スキップビートを生成し、および/または、スキップビートをストリームに挿入し得る。312において、イベントストリームの後続のイベントを受信し得る。場合によっては、314において、順序が狂ったイベントを識別し得る。いくつかの例では、方法300は、後続のイベントを順番に処理することによって、および/または、後続のイベントが順番に処理されることを保証することによって、316において終了し得る。これは、各々の入来イベントが実際のイベントであるかスキップビートであるかに関係なくなされ得る。言い換えれば、スキップビートが受信されると、各イベントは順番に処理されることになる。いくつかの例では、スキップビートは、イベントデータを含まないので実際のイベントではない(たとえば、それは、CEPエンジンが、フィルタリングされたイベントを待つことなくストリームを処理し続けることを可能にするダミーイベントである)。
図4は、本開示の実施形態に係る多段階処理のイベント順序を保証するための方法400のフローチャートである。図4に示される方法400は、402から開始し得て、402において、タイマを開始し得る。いくつかの例では、404において、タイマが時間切れになるまでストリームのイベントを受信し得る。406において、入来イベントを時系列順に再配列(または、配列)し得る(たとえば、順序が狂っている場合には並べる)。方法400のウォームアップ期間は、第1のイベントを、少なくとも部分的に最高の(最古の、最新の、最も最近の)タイムスタンプを有するイベントに基づく第1のイベントとして識別する408において終了し得る。
図5は、本開示の実施形態に係る多段階処理のイベント順序を保証するための方法500のフローチャートである。図5に示される方法500は、502から開始し得て、502において、イベントを受信し、どのタイプのイベントが受信されたかおよびイベントのタイムスタンプを判断する。いくつかの例では、502において、次の予想されるタイムスタンプよりも高いタイムスタンプを有するスキップビートまたは実際のイベントが到着すると、当該イベントがバッファに追加され、タイマが開始される。タイマは、予め構成された時間切れ間隔を有し得る。504において、より多くの実際のイベントまたはスキップビートが受信される。それらが次の予想されるタイムスタンプよりも高いタイムスタンプを有する場合には、それらもバッファに追加され、タイマが動作し続ける。506において、次の予想されるタイムスタンプと同一のタイムスタンプを有する実際のイベントまたはスキップビートが到着すると、タイマがオフにされ得て、バッファ内のイベントが再配列および/または処理され得る。なお、スキップビートは適宜伝搬され続ける。508において、次の予想されるタイムスタンプよりも低いタイムスタンプを有する実際のイベントまたはスキップビートが到着すると、当該イベントは帯域外として廃棄され得る。いくつかの例では、方法500は、タイマが時間切れになるとバッファリングされたイベントを再配列および/または処理することによって510において終了し得る。また、方法500は、この間にスキップビートを所望のごとく伝搬し続け得る。
図6は、実施形態のうちの1つを実現するための分散型システム600の簡略図を示す。示されている実施形態では、分散型システム600は、1つ以上のクライアントコンピューティングデバイス602,604,606および608を含み、それらは、1つ以上のネットワーク610を介してウェブブラウザ、所有権付きクライアント(たとえばオラクルフォームズ(Oracle Forms))などのクライアントアプリケーションを実行および動作させるように構成される。サーバ612は、リモートクライアントコンピューティングデバイス602,604,606および608とネットワーク610を介して通信可能に結合されてもよい。
さまざまな実施形態では、サーバ612は、システムのコンポーネントのうちの1つ以上によって提供される1つ以上のサービスまたはソフトウェアアプリケーションを実行するように適合されてもよい。当該サービスまたはソフトウェアアプリケーションは、非仮想および仮想環境を含み得る。仮想環境は、仮想イベント、展示会、シミュレータ、教室、ショッピングでのやりとり、企業、二次元または三次元(3D)表示、ページベースの論理環境などに使用されるものを含み得る。いくつかの実施形態では、これらのサービスは、ウェブベースのサービスもしくはクラウドサービスとして、またはソフトウェア・アズ・ア・サービス(SaaS)モデルの下で、クライアントコンピューティングデバイス602,604,606および/または608のユーザに対して提供されてもよい。クライアントコンピューティングデバイス602,604,606および/または608を動作させるユーザは、次いで、1つ以上のクライアントアプリケーションを利用してサーバ612と対話して、これらのコンポーネントによって提供されるサービスを利用してもよい。
図に示される構成では、システム600のソフトウェアコンポーネント618,620および622は、サーバ612上で実現されるものとして示されている。他の実施形態では、システム600のコンポーネントのうちの1つ以上および/またはこれらのコンポーネントによって提供されるサービスは、クライアントコンピューティングデバイス602,604,606および/または608のうちの1つ以上によって実現されてもよい。クライアントコンピューティングデバイスを動作させるユーザは、次いで、1つ以上のクライアントアプリケーションを利用して、これらのコンポーネントによって提供されるサービスを用いてもよい。これらのコンポーネントは、ハードウェア、ファームウェア、ソフトウェア、またはそれらの組み合わせで実現されてもよい。分散型システム600とは異なってもよいさまざまな異なるシステム構成が可能であることが理解されるべきである。図に示される実施形態は、したがって、実施形態のシステムを実現するための分散型システムの一例であり、限定的であるよう意図されるものではない。
クライアントコンピューティングデバイス602,604,606および/または608は、携帯可能な手持ち式のデバイス(たとえば、iPhone(登録商標)、セルラー電話、iPad(登録商標)、コンピューティングタブレット、携帯情報端末(PDA))またはウェアラブルデバイス(たとえばGoogle Glass(登録商標)頭部装着型ディスプレイ)であってもよく、Microsoft Windows Mobile(登録商標)などのソフトウェア、および/もしくは、iOS、Windows Phone、Android、BlackBerry 8、Palm OSなどのさまざまなモバイルオペレーティングシステムを実行し、インターネット、電子メール、ショートメッセージサービス(short message service:SMS)、BlackBerry(登録商標)、または他のイネーブルにされた通信プロトコルである。クライアントコンピューティングデバイスは、汎用パーソナルコンピュータであってもよく、一例として、Microsoft Windows(登録商標)、Apple Macintosh(登録商標)および/またはLinux(登録商標)オペレーティングシステムのさまざまなバージョンを実行するパーソナルコンピュータおよび/またはラップトップコンピュータを含む。クライアントコンピューティングデバイスは、たとえばGoogle Chrome OSなどのさまざまなGNU/Linuxオペレーティングシステムを限定を伴うことなく含む、さまざまな市場で入手可能なUNIX(登録商標)またはUNIXのようなオペレーティングシステムのいずれかを実行するワークステーションコンピュータであり得る。代替的に、または加えて、クライアントコンピューティングデバイス602,604,606および608は、ネットワーク610を介して通信することができる、シンクライアントコンピュータ、インターネットにより可能化されるゲームシステム(たとえば、Kinect(登録商標)ジェスチャ入力デバイスを伴うかまたは伴わないMicrosoft Xboxゲームコンソール)および/または個人メッセージ伝達デバイスなどのその他の電子デバイスであってもよい。
例示的な分散型システム600は4つのクライアントコンピューティングデバイスとともに示されているが、任意の数のクライアントコンピューティングデバイスがサポートされてもよい。センサを伴うデバイスなど、他のデバイスがサーバ612と対話してもよい。
分散型システム600におけるネットワーク610は、TCP/IP(伝送制御プロトコル/インターネットプロトコル)、SNA(システムネットワークアーキテクチャ)、IPX(インターネットパケット交換)、AppleTalkなどを限定を伴うことなく含む、さまざまな市場で入手可能なプロトコルのうちのいずれかを用いてデータ通信をサポートすることができる、当業者が精通している任意のタイプのネットワークであってもよい。単に一例として、ネットワーク610は、イーサネット(登録商標)、トークンリングなどに基づくものなどのローカルエリアネットワーク(LAN)であってもよい。ネットワーク610は、ワイドエリアネットワークおよびインターネットであってもよい。ネットワーク610は、仮想ネットワークを含み得て、当該仮想ネットワークは、仮想プライベートネットワーク(virtual private network:VPN)、イントラネット、エクストラネット、公衆交換電話網(public switched telephone network:PSTN)、赤外線ネットワーク、無線ネットワーク(たとえば、米国電気電子学会(IEEE)602.11のプロトコル一式、ブルートゥース(登録商標)、および/もしくはその他の無線プロトコルのうちのいずれかの下で動作するネットワーク)、ならびに/またはこれらのいずれかの組み合わせおよび/もしくは他のネットワークを含むが、それらに限定されるものではない。
サーバ612は、1つ以上の汎用コンピュータ、専用のサーバコンピュータ(一例としてPC(パーソナルコンピュータ)サーバ、UNIX(登録商標)サーバ、ミッドレンジサーバ、メインフレームコンピュータ、ラックマウント型サーバなどを含む)、サーバファーム、サーバクラスタ、またはその他の適切な構成および/もしくは組み合わせで構成されてもよい。サーバ612は、仮想オペレーティングシステムを実行する1つ以上の仮想マシン、または仮想化を伴う他のコンピューティングアーキテクチャを含み得る。論理ストレージデバイスの1つ以上の柔軟なプールを仮想化してサーバのために仮想ストレージデバイスを維持することができる。仮想ネットワークを、サーバ612によって、ソフトウェア定義のネットワーク接続を用いて制御することができる。さまざまな実施形態において、サーバ612は、前述の開示に記載される1つ以上のサービスまたはソフトウェアアプリケーションを実行するように適合されてもよい。たとえば、サーバ612は、本開示の実施形態に従って上記の処理を実行するためのサーバに対応してもよい。
サーバ612は、上記のもののうちのいずれかを含むオペレーティングシステム、および任意の市場で入手可能なサーバオペレーティングシステムを実行してもよい。サーバ612は、HTTP(ハイパーテキスト転送プロトコル)サーバ、FTP(ファイル転送プロトコル)サーバ、CGI(コモンゲートウェイインターフェイス)サーバ、JAVAサーバ、データベースサーバなどを含むさまざまなさらに他のサーバアプリケーションおよび/または中間層アプリケーションのうちのいずれかも実行してもよい。例示的なデータベースサーバは、オラクル、マイクロソフト、サイベース、IBM(インターナショナルビジネスマシンズ)などから市場で入手可能なものを含むが、それらに限定されるものではない。
いくつかの実現例では、サーバ612は、クライアントコンピューティングデバイス602,604,606および608のユーザから受信されるデータフィードおよび/またはイベント更新情報を解析および整理統合するための1つ以上のアプリケーションを含んでもよい。一例として、データフィードおよび/またはイベント更新情報は、センサデータアプリケーション、金融株式相場表示板、ネットワーク性能測定ツール(たとえば、ネットワーク監視およびトラフィック管理アプリケーション)、クリックストリーム解析ツール、自動車交通監視などに関連するリアルタイムのイベントを含んでもよい、1つ以上の第三者情報源および連続データストリームから受信される、Twitter(登録商標)フィード、Facebook(登録商標)更新情報またはリアルタイムの更新情報を含んでもよいが、それらに限定されるものではない。サーバ612は、データフィードおよび/またはリアルタイムのイベントをクライアントコンピューティングデバイス602,604,606および608の1つ以上の表示デバイスを介して表示するための1つ以上のアプリケーションも含んでもよい。
分散型システム600は、1つ以上のデータベース614および616も含んでもよい。データベース614および616は、さまざまな位置にあってもよい。一例として、データベース614および616のうちの1つ以上は、サーバ612に局在する(および/またはサーバ612に常駐する)非一時的な記憶媒体にあってもよい。代替的に、データベース614および616は、サーバ612から遠隔にあり、ネットワークベースまたは専用の接続を介してサーバ612と通信してもよい。一組の実施形態では、データベース614および616は、記憶域ネットワーク(storage-area network:SAN)にあってもよい。同様に、サーバ612に帰する機能を実行するための任意の必要なファイルが、適宜、サーバ612上においてローカルに、および/または遠隔で格納されてもよい。一組の実施形態では、データベース614および616は、SQLフォーマットされたコマンドに応答してデータを格納、更新および検索取得するように適合される、オラクルによって提供されるデータベースなどのリレーショナルデータベースを含んでもよい。
図7は、本開示の実施形態に従って、実施形態のシステムの1つ以上のコンポーネントによって提供されるサービスがクラウドサービスとして提供されてもよいシステム環境700の1つ以上のコンポーネントの簡略ブロック図である。示されている実施形態では、システム環境700は、1つ以上のクライアントコンピューティングデバイス704,706および708を含み、1つ以上のクライアントコンピューティングデバイス704,706および708は、クラウドサービスを提供するクラウドインフラストラクチャシステム702と対話するようにユーザによって使用されてもよい。クライアントコンピューティングデバイスは、ウェブブラウザ、所有権付きクライアントアプリケーション(たとえば、オラクルフォームズ)、または何らかの他のアプリケーションなどのクライアントアプリケーションを動作させるように構成されてもよく、当該クライアントアプリケーションは、クラウドインフラストラクチャシステム702と対話して、クラウドインフラストラクチャシステム702によって提供されるサービスを使用するようにクライアントコンピューティングデバイスのユーザによって使用されてもよい。
図に示されるクラウドインフラストラクチャシステム702は図示されるもの以外の他のコンポーネントを有してもよいことが理解されるべきである。さらに、図に示される実施形態は、本開示の実施形態を組み込むことができるクラウドインフラストラクチャシステムの一例に過ぎない。いくつかの他の実施形態では、クラウドインフラストラクチャシステム702は、図に示されるよりも多くのコンポーネントもしくは少ないコンポーネントを有していてもよく、2つ以上のコンポーネントを組み合わせてもよく、またはコンポーネントの異なる構成もしくは配置を有してもよい。
クライアントコンピューティングデバイス704,706および708は、602,604,606および608に対して上記したものと同様のデバイスであってもよい。
例示的なシステム環境700が3つのクライアントコンピューティングデバイスとともに示されているが、任意の数のクライアントコンピューティングデバイスがサポートされてもよい。センサを伴うデバイスなどの他のデバイスがクラウドインフラストラクチャシステム702と対話してもよい。
ネットワーク710は、クライアント704,706および708とクラウドインフラストラクチャシステム702との間におけるデータの通信および交換を容易にしてもよい。各ネットワークは、ネットワーク610に対して上記したものを含む、さまざまな市場で入手可能なプロトコルのうちのいずれかを用いてデータ通信をサポートすることができる、当業者が精通している任意のタイプのネットワークであってもよい。
クラウドインフラストラクチャシステム702は、1つ以上のコンピュータ、および/または、サーバ612に対して上記したものを含み得るサーバを備え得る。
特定の実施形態では、クラウドインフラストラクチャシステムによって提供されるサービスは、オンラインデータストレージおよびバックアップソリューション、ウェブベースの電子メールサービス、ホスト型オフィススイートおよび文書コラボレーションサービス、データベース処理、管理された技術サポートサービスなどの、オンデマンドでクラウドインフラストラクチャシステムのユーザに利用可能にされるサービスのホストを含んでもよい。クラウドインフラストラクチャシステムによって提供されるサービスは、動的にスケーリングしてそのユーザのニーズを満たすことができる。クラウドインフラストラクチャシステムによって提供されるサービスのある具体的なインスタンス化は、本明細書では「サービスインスタンス」と称される。一般に、クラウドサービスプロバイダのシステムからインターネットなどの通信ネットワークを介してユーザに利用可能にされる任意のサービスは、「クラウドサービス」と称される。典型的には、パブリックなクラウド環境においては、クラウドサービスプロバイダのシステムを構成するサーバおよびシステムは、顧客自身のオンプレミスのサーバおよびシステムとは異なる。たとえば、クラウドサービスプロバイダのシステムは、アプリケーションを運営管理してもよく、ユーザは、インターネットなどの通信ネットワークを介して、オンデマンドで、アプリケーションをオーダーし使用してもよい。
いくつかの例では、コンピュータネットワーククラウドインフラストラクチャにおけるサービスは、ストレージ、ホスト型データベース、ホスト型ウェブサーバ、ソフトウェアアプリケーション、またはクラウドベンダによってユーザに提供されるかもしくは他の態様で当該技術分野において公知であるような他のサービスに対する保護されたコンピュータネットワークアクセスを含んでもよい。たとえば、サービスは、クラウド上のリモートストレージに対するインターネットを介してのパスワード保護されたアクセスを含むことができる。別の例として、サービスは、ネットワーク接続された開発者による個人的な使用のために、ウェブサービスベースのホスト型リレーショナルデータベースおよびスクリプト言語ミドルウェアエンジンを含むことができる。別の例として、サービスは、クラウドベンダのウェブサイトにおいて運営管理される電子メールソフトウェアアプリケーションに対するアクセスを含むことができる。
特定の実施形態では、クラウドインフラストラクチャシステム702は、セルフサービスの、サブスクリプションベースの、弾性的にスケーラブルで、信頼性があり、高可用性の、安全な態様で顧客に対して配送される一連のアプリケーション、ミドルウェア、およびデータベースサービス提供を含んでもよい。そのようなクラウドインフラストラクチャシステムの一例は、本譲受人によって提供されるオラクルパブリッククラウド(Oracle Public Cloud)である。
「ビッグデータ」は、多数のレベルにおいて、および異なるスケールで、インフラストラクチャシステムによって運営管理および/または操作され得る。大量のデータを視覚化し、傾向を検出し、および/またはその他の態様でデータと対話するように非常に大きなデータセットがアナリストおよび研究者によって格納および操作され得る。そのようなデータを表示するため、またはデータもしくはデータが表現するものに対する外部の力をシミュレートするために、並列に連結された何十、何百または何千ものプロセッサがそのようなデータに対して作用することができる。これらのデータセットは、データベース状にもしくはさもなければ構造モデルに従って編成されたものなどの構造化データ、および/または、非構造化データ(たとえば、電子メール、画像、データブロブ(バイナリラージオブジェクト)、ウェブページ、複合イベント処理)を含み得る。より多くの(またはより少ない)計算リソースを比較的迅速に対象に集中させることができる実施形態の機能を活用することによって、クラウドインフラストラクチャシステムは、会社、政府機関、研究組織、私人、同じ考えを持った個人もしくは組織のグループ、または他のエンティティからの要求に基づいて大きなデータセットに対してタスクを実行することにさらに利用できるであろう。
さまざまな実施形態では、クラウドインフラストラクチャシステム702は、クラウドインフラストラクチャシステム702によって提供されるサービスに対する顧客のサブスクリプションを自動的にプロビジョニングし、管理し、および追跡するように適合されてもよい。クラウドインフラストラクチャシステム702は、クラウドサービスをさまざまなデプロイメントモデルを介して提供してもよい。たとえば、サービスは、クラウドインフラストラクチャシステム702が(たとえばオラクル社によって所有される)クラウドサービスを販売する組織によって所有され、サービスが一般大衆または異なる業界企業に対して利用可能にされるパブリッククラウドモデルの下で提供されてもよい。別の例として、サービスは、クラウドインフラストラクチャシステム702が単一の組織に対してのみ動作され、その組織内における1つ以上のエンティティに対してサービスを提供してもよいプライベートクラウドモデルの下で提供されてもよい。また、クラウドサービスは、クラウドインフラストラクチャシステム702およびクラウドインフラストラクチャシステム702によって提供されるサービスが、関連するコミュニティにおけるいくつかの組織によって共有されるコミュニティクラウドモデルの下で提供されてもよい。また、クラウドサービスは、2つ以上の異なるモデルの組み合わせであるハイブリッドクラウドモデルの下で提供されてもよい。
いくつかの実施形態では、クラウドインフラストラクチャシステム702によって提供されるサービスは、ソフトウェア・アズ・ア・サービス(SaaS)カテゴリ、プラットフォーム・アズ・ア・サービス(PaaS)カテゴリ、インフラストラクチャ・アズ・ア・サービス(IaaS)カテゴリ、またはハイブリッドサービスを含む他のサービスのカテゴリの下で提供される1つ以上のサービスを含んでもよい。顧客は、サブスクリプションオーダーを介して、クラウドインフラストラクチャシステム702によって提供される1つ以上のサービスをオーダーしてもよい。クラウドインフラストラクチャシステム702は、次いで、処理を実行して、顧客のサブスクリプションオーダーにおけるサービスを提供する。
いくつかの実施形態では、クラウドインフラストラクチャシステム702によって提供されるサービスは、アプリケーションサービス、プラットフォームサービスおよびインフラストラクチャサービスを含んでもよいが、それらに限定されるものではない。いくつかの例では、アプリケーションサービスは、クラウドインフラストラクチャシステムによってSaaSプラットフォームを介して提供されてもよい。SaaSプラットフォームは、SaaSカテゴリに入るクラウドサービスを提供するように構成されてもよい。たとえば、SaaSプラットフォームは、一連のオンデマンドアプリケーションを統合された開発およびデプロイメントプラットフォーム上で構築し配送する機能を提供してもよい。SaaSプラットフォームは、SaaSサービスを提供するための基本的なソフトウェアおよびインフラストラクチャを管理および制御してもよい。SaaSプラットフォームによって提供されるサービスを利用することによって、顧客は、クラウドインフラストラクチャシステムにおいて実行されるアプリケーションを利用することができる。顧客は、別個のライセンスおよびサポートを購入する必要なくアプリケーションサービスを取得することができる。さまざまな異なるSaaSサービスが提供されてもよい。その例としては、大きな組織に販売実績管理、企業統合、およびビジネスの柔軟性のためのソリューションを提供するサービスが挙げられるが、それらに限定されるものではない。
いくつかの実施形態では、プラットフォームサービスは、クラウドインフラストラクチャシステムによってPaaSプラットフォームを介して提供されてもよい。PaaSプラットフォームは、PaaSカテゴリに入るクラウドサービスを提供するように構成されてもよい。プラットフォームサービスの例としては、(オラクルなどの)組織が既存のアプリケーションを共有の共通のアーキテクチャにおいて整理統合することができるサービス、およびプラットフォームによって提供される共有のサービスを活用する新たなアプリケーションを構築する機能を挙げることができるが、それらに限定されるものではない。PaaSプラットフォームは、PaaSサービスを提供するための基本的なソフトウェアおよびインフラストラクチャを管理および制御してもよい。顧客は、クラウドインフラストラクチャシステムによって提供されるPaaSサービスを、別個のライセンスおよびサポートを購入する必要なく取得することができる。プラットフォームサービスの例としては、オラクル・Java・クラウド・サービス(Oracle Java Cloud Service:JCS)、オラクル・データベース・クラウド・サービス(Oracle Database Cloud Service:DBCS)などが挙げられるが、それらに限定されるものではない。
PaaSプラットフォームによって提供されるサービスを利用することによって、顧客は、クラウドインフラストラクチャシステムによってサポートされるプログラミング言語およびツールを使用することができ、デプロイされたサービスを制御することもできる。いくつかの実施形態では、クラウドインフラストラクチャシステムによって提供されるプラットフォームサービスは、データベースクラウドサービス、ミドルウェアクラウドサービス(たとえば、オラクル・フュージョン・ミドルウェアサービス)、およびJavaクラウドサービスを含んでもよい。一実施形態では、データベースクラウドサービスは、組織がデータベースリソースをプールし、顧客にデータベース・アズ・ア・サービスをデータベースクラウドの形式で提供することを可能にする共有のサービスデプロイメントモデルをサポートしてもよい。ミドルウェアクラウドサービスは、顧客がさまざまなビジネスアプリケーションを開発およびデプロイするためのプラットフォームをクラウドインフラストラクチャシステムにおいて提供してもよく、Javaクラウドサービスは、顧客がJavaアプリケーションをデプロイするためのプラットフォームをクラウドインフラストラクチャシステムにおいて提供してもよい。
さまざまな異なるインフラストラクチャサービスがIaaSプラットフォームによってクラウドインフラストラクチャシステムにおいて提供されてもよい。インフラストラクチャサービスは、ストレージ、ネットワーク、ならびにSaaSプラットフォームおよびPaaSプラットフォームによって提供されるサービスを利用する顧客に対する他の基礎的計算リソースなどの基本的な計算リソースの管理および制御を容易にする。
特定の実施形態では、クラウドインフラストラクチャシステム702は、クラウドインフラストラクチャシステムの顧客に対してさまざまなサービスを提供するよう用いられるリソースを提供するためのインフラストラクチャリソース730も含んでもよい。一実施形態では、インフラストラクチャリソース730は、サーバ、ストレージ、ならびにPaaSプラットフォームおよびSaaSプラットフォームによって提供されるサービスを実行するためのネットワーキングリソースなどの、ハードウェアの予め統合され最適化された組み合わせを含んでもよい。
いくつかの実施形態では、クラウドインフラストラクチャシステム702におけるリソースは、複数のユーザによって共有され、要求につき動的に再割り当てされてもよい。また、リソースは、ユーザに対してさまざまな時間ゾーンで割り当てられてもよい。たとえば、クラウドインフラストラクチャシステム730は、第1の時間ゾーンにおけるユーザの第1の組がクラウドインフラストラクチャシステムのリソースをある特定の時間の間利用することを可能にし、次いで、異なる時間ゾーンに位置するユーザの別の組に対する同じリソースの再割り当てを可能にし、それによって、リソースの利用を最大化してもよい。
特定の実施形態では、クラウドインフラストラクチャシステム702のさまざまなコンポーネントまたはモジュールによって共有されてクラウドインフラストラクチャシステム702によって提供されるサービスによって共有されるある数の内部共有サービス732が提供されてもよい。これらの内部共有サービスは、セキュリティおよびアイデンティティサービス、統合サービス、エンタープライズリポジトリサービス、エンタープライズマネージャサービス、ウイルススキャンおよびホワイトリストサービス、高可用性、バックアップおよび回復サービス、クラウドサポートを可能にするためのサービス、電子メールサービス、通知サービス、ファイル転送サービスなどを含んでもよいが、それらに限定されるものではない。
特定の実施形態では、クラウドインフラストラクチャシステム702は、クラウドインフラストラクチャシステムにおいてクラウドサービス(たとえば、SaaS、PaaS、およびIaaSサービス)の包括的な管理を提供してもよい。一実施形態では、クラウド管理機能は、クラウドインフラストラクチャシステム702によって受信される顧客のサブスクリプションをプロビジョニングし、管理し、および追跡する機能などを含んでもよい。
一実施形態では、図に示されるように、クラウド管理機能は、オーダー管理モジュール720、オーダーオーケストレーションモジュール722、オーダープロビジョニングモジュール724、オーダー管理および監視モジュール726、ならびにアイデンティティ管理モジュール728などの1つ以上のモジュールによって提供されてもよい。これらのモジュールは、1つ以上のコンピュータおよび/もしくはサーバを含んでもよく、またはそれらを用いて提供されてもよく、それらは、汎用コンピュータ、専用のサーバコンピュータ、サーバファーム、サーバクラスタ、またはその他の適切な構成および/もしくは組み合わせであってもよい。
例示的な動作734では、クライアントデバイス704、706または708などのクライアントデバイスを用いる顧客は、クラウドインフラストラクチャシステム702によって提供される1つ以上のサービスを要求し、クラウドインフラストラクチャシステム702によって提供される1つ以上のサービスに対するサブスクリプションに対するオーダーを行なうことによって、クラウドインフラストラクチャシステム702と対話してもよい。特定の実施形態では、顧客は、クラウドUI712、クラウドUI714および/またはクラウドUI716などのクラウドユーザインターフェイス(UI)にアクセスし、サブスクリプションオーダーをこれらのUIを介して行なってもよい。顧客がオーダーを行なうことに応答してクラウドインフラストラクチャシステム702によって受信されるオーダー情報は、顧客を識別する情報、およびクラウドインフラストラクチャシステム702によって提供される、その顧客が契約する予定の1つ以上のサービスを含んでもよい。
オーダーが顧客によって行われた後、オーダー情報は、クラウドUI712,714および/または716を介して受信される。
動作736において、オーダーは、オーダーデータベース718に保存される。オーダーデータベース718は、クラウドインフラストラクチャシステム702によって動作されるいくつかのデータベースのうちの1つであり得、他のシステム要素と連携して動作され得る。
動作738において、オーダー情報は、オーダー管理モジュール720に転送される。いくつかの例では、オーダー管理モジュール720は、オーダーを検証すること、および検証次第そのオーダーを予約することなど、オーダーに関連する請求および課金機能を実行するように構成されてもよい。
動作740において、オーダーに関する情報は、オーダーオーケストレーションモジュール722に通信される。オーダーオーケストレーションモジュール722は、オーダー情報を利用して、顧客によってなされたオーダーに対してサービスおよびリソースのプロビジョニングをオーケストレーションし得る。いくつかの例では、オーダーオーケストレーションモジュール722は、オーダープロビジョニングモジュール724のサービスを使用してサブスクライブされたサービスをサポートするようにリソースのプロビジョニングをオーケストレーションしてもよい。
特定の実施形態では、オーダーオーケストレーションモジュール722は、各オーダーに関連付けられたビジネスプロセスの管理を可能にし、ビジネス論理を適用して、オーダーがプロビジョニングに進むべきか否かを判断する。動作742において、新たなサブスクリプションに対するオーダーを受信すると、オーダーオーケストレーションモジュール722は、リソースを割り当てて、サブスクリプションオーダーを満たすのに必要とされるリソースを構成するよう、オーダープロビジョニングモジュール724に対して要求を送信する。オーダープロビジョニングモジュール724は、顧客によってオーダーされたサービスに対するリソースの割り当てを可能にする。オーダープロビジョニングモジュール724は、クラウドインフラストラクチャシステム702によって提供されるクラウドサービスと、要求されたサービスを提供するためのリソースをプロビジョニングするよう用いられる物理的インプリメンテーション層との間にある抽象化レベルを提供する。これにより、サービスおよびリソースが実際にオンザフライでプロビジョニングされるか、サービスおよびリソースが予めプロビジョニングされて要求時にのみ割り当てられる/あてがわれるかなどの、インプリメンテーション詳細からオーダーオーケストレーションモジュール722を分離することができる。
動作744において、サービスおよびリソースがプロビジョニングされると、提供されたサービスの通知が、クラウドインフラストラクチャシステム702のオーダープロビジョニングモジュール724によってクライアントデバイス704,706および/または708上の顧客に送信されてもよい。
動作746において、顧客のサブスクリプションオーダーは、オーダー管理および監視モジュール726によって管理および追跡されてもよい。いくつかの例では、オーダー管理および監視モジュール726は、使用されるストレージの量、転送されるデータの量、ユーザの人数、ならびにシステムアップ時間およびシステムダウン時間の量などの、サブスクリプションオーダーにおけるサービスの使用統計を収集するように構成されてもよい。
特定の実施形態では、クラウドインフラストラクチャシステム700は、アイデンティティ管理モジュール728を含んでもよい。アイデンティティ管理モジュール728は、クラウドインフラストラクチャシステム700におけるアクセス管理および承認サービスなどのアイデンティティサービスを提供するように構成されてもよい。いくつかの実施形態では、アイデンティティ管理モジュール728は、クラウドインフラストラクチャシステム702によって提供されるサービスを利用することを望む顧客についての情報を制御してもよい。そのような情報は、そのような顧客のアイデンティティを認証する情報、およびそれらの顧客がさまざまなシステムリソース(たとえばファイル、ディレクトリ、アプリケーション、通信ポート、メモリセグメントなど)に対してどのアクションを実行することが承認されるかを記述する情報を含み得る。アイデンティティ管理モジュール728は、各顧客についての記述的情報ならびにどのように誰によってその記述的情報がアクセスおよび修正され得るかについての情報の管理も含んでもよい。
図8は、本開示のさまざまな実施形態を実現することができる例示的なコンピュータシステム800を示す。システム800は、上記のコンピュータシステムのうちのいずれかを実現するよう用いられてもよい。図に示されるように、コンピュータシステム800は、多数の周辺サブシステムとバスサブシステム802を介して通信する処理ユニット804を含む。これらの周辺サブシステムは、処理加速ユニット806、I/Oサブシステム808、ストレージサブシステム818および通信サブシステム824を含んでもよい。ストレージサブシステム818は、有形のコンピュータ読取可能な記憶媒体822およびシステムメモリ810を含む。
バスサブシステム802は、コンピュータシステム800のさまざまなコンポーネントおよびサブシステムに意図されるように互いに通信させるための機構を提供する。バスサブシステム802は単一のバスとして概略的に示されているが、バスサブシステムの代替的実施例は、複数のバスを利用してもよい。バスサブシステム802は、さまざまなバスアーキテクチャのうちのいずれかを用いるメモリバスまたはメモリコントローラ、周辺バスおよびローカルバスを含むいくつかのタイプのバス構造のうちのいずれかであってもよい。たとえば、そのようなアーキテクチャは、業界標準アーキテクチャ(Industry Standard Architecture:ISA)バス、マイクロチャネルアーキテクチャ(Micro Channel Architecture:MCA)バス、エンハンストISA(Enhanced ISA:EISA)バス、ビデオ・エレクトロニクス・スタンダーズ・アソシエーション(Video Electronics Standards Association:VESA)ローカルバス、およびIEEE P1386.1規格に従って製造される中二階バスとして実現され得る周辺コンポーネントインターコネクト(Peripheral Component Interconnect:PCI)バスを含んでもよい。
1つ以上の集積回路(たとえば、従来のマイクロプロセッサまたはマイクロコントローラ)として実現可能な処理ユニット804は、コンピュータシステム800の動作を制御する。1つ以上のプロセッサが処理ユニット804に含まれてもよい。これらのプロセッサは、シングルコアプロセッサを含んでもよく、またはマルチコアプロセッサを含んでもよい。特定の実施形態では、処理ユニット804は、シングルコアまたはマルチコアプロセッサが各処理ユニットに含まれる1つ以上の独立した処理ユニット832および/または834として実現されてもよい。他の実施形態では、処理ユニット804は、2つのデュアルコアプロセッサを単一のチップに統合することによって形成されるクアッドコア処理ユニットとして実現されてもよい。
さまざまな実施形態では、処理ユニット804は、プログラムコードに応答してさまざまなプログラムを実行することができ、複数の同時に実行されるプログラムまたはプロセスを維持することができる。任意の所与の時点で、実行されるべきプログラムコードの一部または全ては、プロセッサ804、および/または、ストレージサブシステム818に常駐することができる。好適なプログラミングを介して、プロセッサ804は、上記のさまざまな機能を提供することができる。コンピュータシステム800は、デジタル信号プロセッサ(digital signal processor:DSP)、特殊目的プロセッサなどを含み得る処理加速ユニット806をさらに含んでもよい。
I/Oサブシステム808は、ユーザインターフェイス入力デバイスおよびユーザインターフェイス出力デバイスを含んでもよい。ユーザインターフェイス入力デバイスは、キーボード、マウスまたはトラックボールなどのポインティングデバイス、ディスプレイに組み込まれたタッチパッドまたはタッチスクリーン、スクロールホイール、クリックホイール、ダイアル、ボタン、スイッチ、キーパッド、音声コマンド認識システムを伴う音声入力デバイス、マイクロフォン、および他のタイプの入力デバイスを含んでもよい。ユーザインターフェイス入力デバイスは、たとえば、ジェスチャおよび話し言葉コマンドを用いて、ナチュラルユーザインターフェイスを介して、Microsoft Xbox(登録商標)360ゲームコントローラなどの入力デバイスをユーザが制御して対話することを可能にするMicrosoft Kinect(登録商標)モーションセンサなどのモーション感知および/またはジェスチャ認識デバイスを含んでもよい。ユーザインターフェイス入力デバイスは、ユーザから目の動き(たとえば、写真を撮っている間および/またはメニュー選択を行なっている間の「まばたき」)を検出し、アイジェスチャを入力デバイス(たとえばGoogle Glass(登録商標))への入力として変換するGoogle Glass(登録商標)瞬き検出器などのアイジェスチャ認識デバイスも含んでもよい。また、ユーザインターフェイス入力デバイスは、ユーザが音声コマンドを介して音声認識システム(たとえばSiri(登録商標)ナビゲータ)と対話することを可能にする音声認識感知デバイスを含んでもよい。
ユーザインターフェイス入力デバイスは、三次元(3D)マウス、ジョイスティックまたはポインティングスティック、ゲームパッドおよびグラフィックタブレット、ならびにスピーカ、デジタルカメラ、デジタルカムコーダ、ポータブルメディアプレーヤ、ウェブカム、画像スキャナ、指紋スキャナ、バーコードリーダ3Dスキャナ、3Dプリンタ、レーザレンジファインダ、および視線追跡デバイスなどの聴覚/視覚デバイスも含んでもよいが、それらに限定されるものではない。また、ユーザインターフェイス入力デバイスは、たとえば、コンピュータ断層撮影、磁気共鳴撮像、ポジションエミッショントモグラフィー、医療用超音波検査デバイスなどの医療用画像化入力デバイスを含んでもよい。ユーザインターフェイス入力デバイスは、たとえば、MIDIキーボード、デジタル楽器などの音声入力デバイスも含んでもよい。
ユーザインターフェイス出力デバイスは、ディスプレイサブシステム、インジケータライト、または音声出力デバイスなどの非ビジュアルディスプレイなどを含んでもよい。ディスプレイサブシステムは、陰極線管(cathode ray tube:CRT)、液晶ディスプレイ(liquid crystal display:LCD)またはプラズマディスプレイを使うものなどのフラットパネルデバイス、投影デバイス、タッチスクリーンなどであってもよい。一般に、「出力デバイス」という語の使用は、コンピュータシステム800からユーザまたは他のコンピュータに情報を出力するための全ての考えられ得るタイプのデバイスおよび機構を含むよう意図される。たとえば、ユーザインターフェイス出力デバイスは、モニタ、プリンタ、スピーカ、ヘッドフォン、自動車ナビゲーションシステム、プロッタ、音声出力デバイスおよびモデムなどの、テキスト、グラフィックスおよび音声/映像情報を視覚的に伝えるさまざまな表示デバイスを含んでもよいが、それらに限定されるものではない。
コンピュータシステム800は、現在のところシステムメモリ810内に位置しているものとして示されているソフトウェア要素を備えるストレージサブシステム818を備えてもよい。システムメモリ810は、処理ユニット804上でロード可能および実行可能なプログラム命令と、これらのプログラムの実行中に生成されるデータとを格納してもよい。
コンピュータシステム800の構成およびタイプによって、システムメモリ810は、揮発性であってもよく(ランダムアクセスメモリ(RAM)など)、および/または、不揮発性であってもよい(リードオンリメモリ(ROM)、フラッシュメモリなど)。RAMは、一般に、処理ユニット804にすぐにアクセス可能であり、および/または、処理ユニット804によって現在動作および実行されているデータおよび/またはプログラムモジュールを含む。いくつかの実現例では、システムメモリ810は、スタティックランダムアクセスメモリ(SRAM)またはダイナミックランダムアクセスメモリ(DRAM)などの複数の異なるタイプのメモリを含んでもよい。いくつかの実現例では、起動中などにコンピュータシステム800内の要素間における情報の転送を助ける基本的なルーティンを含むベーシックインプット/アウトプットシステム(basic input/output system:BIOS)は、一般に、ROMに格納されてもよい。一例として、限定を伴うことなく、システムメモリ810は、クライアントアプリケーション、ウェブブラウザ、中間層アプリケーション、リレーショナルデータベース管理システム(relational database management system:RDBMS)などを含んでもよいアプリケーションプログラム812、プログラムデータ814およびオペレーティングシステム816も示す。一例として、オペレーティングシステム816は、Microsoft Windows(登録商標)、Apple Macintosh(登録商標)および/もしくはLinuxオペレーティングシステム、さまざまな市場で入手可能なUNIX(登録商標)またはUNIXのようなオペレーティングシステム(さまざまなGNU/Linuxオペレーティングシステム、Google Chrome(登録商標)OSなどを含むがそれらに限定されない)、ならびに/または、iOS、Windows(登録商標) Phone、Android(登録商標) OS、BlackBerry(登録商標) 8 OS、およびPalm(登録商標) OSオペレーティングシステムなどのモバイルオペレーティングシステムのさまざまなバージョンを含んでもよい。
ストレージサブシステム818は、いくつかの実施形態の機能を提供する基本的なプログラミングおよびデータ構造を格納するための有形のコンピュータ読取可能な記憶媒体も提供してもよい。プロセッサによって実行されたときに上記の機能を提供するソフトウェア(プログラム、コードモジュール、命令)は、ストレージサブシステム818に格納されてもよい。これらのソフトウェアモジュールまたは命令は、処理ユニット804によって実行されてもよい。ストレージサブシステム818は、本開示に従って使用されるデータを格納するためのリポジトリも提供してもよい。
ストレージサブシステム818は、コンピュータ読取可能な記憶媒体822にさらに接続可能なコンピュータ読取可能記憶媒体リーダ820も含んでもよい。システムメモリ810とともに、およびオプションとしてシステムメモリ810との組み合わせで、コンピュータ読取可能な記憶媒体822は、コンピュータ読取可能な情報を一時的および/またはより永久的に収容、格納、伝送および検索取得するための、遠隔の、ローカルな、固定された、および/またはリムーバブルなストレージデバイスに記憶媒体を加えたものを包括的に表わしてもよい。
コードまたはコードの一部を含むコンピュータ読取可能な記憶媒体822は、記憶媒体および通信媒体を含む、当該技術分野において公知であるまたは使用されるいずれかの適切な媒体も含んでもよく、当該媒体は、情報の格納および/または伝送のための任意の方法または技術において実現される揮発性および不揮発性の、リムーバブルおよび非リムーバブルな媒体などであるが、それらに限定されるものではない。これは、RAM、ROM、電気的に消去可能なプログラム可能ROM(electronically erasable programmable ROM:EEPROM)、フラッシュメモリもしくは他のメモリ技術、CD−ROM、デジタル多用途ディスク(DVD)、または他の光学式ストレージ、磁気カセット、磁気テープ、磁気ディスクストレージもしくは他の磁気ストレージデバイス、または他の有形のコンピュータ読取可能な媒体などの有形の非一時的なコンピュータ読取可能な記憶媒体を含んでもよい。指定される場合には、これは、データ信号、データ伝送、または所望の情報を伝送するために使用可能でありコンピューティングシステム800によってアクセス可能であるその他の媒体などの無形の一時的なコンピュータ読取可能な媒体も含んでもよい。
一例として、コンピュータ読取可能な記憶媒体822は、非リムーバブル不揮発性磁気媒体に対して読み書きするハードディスクドライブ、リムーバブル不揮発性磁気ディスクに対して読み書きする磁気ディスクドライブ、CD ROM、DVDおよびブルーレイ(登録商標)ディスクなどの、リムーバブル不揮発性光ディスクに対して読み書きする光ディスクドライブ、または他の光学式媒体を含んでもよい。コンピュータ読取可能な記憶媒体822は、Zip(登録商標)ドライブ、フラッシュメモリカード、ユニバーサルシリアルバス(universal serial bus:USB)フラッシュドライブ、セキュアデジタル(secure digital:SD)カード、DVDディスク、デジタルビデオテープなどを含んでもよいが、それらに限定されるものではない。コンピュータ読取可能な記憶媒体822は、フラッシュメモリベースのSSD、エンタープライズフラッシュドライブ、ソリッドステートROMなどの不揮発性メモリに基づくソリッドステートドライブ(solid-state drive:SSD)、ソリッドステートRAM、ダイナミックRAM、スタティックRAMなどの揮発性メモリに基づくSSD、DRAMベースのSSD、磁気抵抗RAM(magnetoresistive RAM:MRAM)SSD、およびDRAMとフラッシュメモリベースのSSDとの組み合わせを使用するハイブリッドSSDも含んでもよい。ディスクドライブおよびそれらの関連付けられたコンピュータ読取可能な媒体は、コンピュータ読取可能な命令、データ構造、プログラムモジュールおよび他のデータの不揮発性ストレージをコンピュータシステム800に提供してもよい。
通信サブシステム824は、他のコンピュータシステムおよびネットワークに対するインターフェイスを提供する。通信サブシステム824は、他のシステムとコンピュータシステム800との間のデータの送受のためのインターフェイスとして働く。たとえば、通信サブシステム824は、コンピュータシステム800がインターネットを介して1つ以上のデバイスに接続することを可能にしてもよい。いくつかの実施形態では、通信サブシステム824は、(たとえば、セルラー電話技術、3G、4GもしくはEDGE(グローバル進化のための高速データレート)などの先進データネットワーク技術、WiFi(IEEE602.11ファミリー規格、もしくは他のモバイル通信技術、またはそれらのいずれかの組み合わせを用いて)無線音声および/またはデータネットワークにアクセスするための無線周波数(radio frequency:RF)送受信機コンポーネント、グローバルポジショニングシステム(global positioning system:GPS)受信機コンポーネント、ならびに/または他のコンポーネントを含んでもよい。いくつかの実施形態では、通信サブシステム824は、無線インターフェイスに加えて、またはその代わりに、有線ネットワーク接続(たとえば、イーサネット)を提供することができる。
また、いくつかの実施形態では、通信サブシステム824は、コンピュータシステム800を使用し得る1人以上のユーザの代わりに、構造化されたおよび/または構造化されていないデータフィード826、イベントストリーム828、イベント更新情報830などの形式で入力通信を受信してもよい。
一例として、通信サブシステム824は、ソーシャルメディアネットワークおよび/またはTwitter(登録商標)フィード、Facebook(登録商標)更新情報、Rich Site Summary(RSS)フィードなどのウェブフィード、および/もしくは1つ以上の第三者情報源からのリアルタイム更新情報などの他の通信サービスのユーザからリアルタイムでデータフィード826を受信するように構成されてもよい。
さらに、また、通信サブシステム824は、連続データストリームの形式でデータを受信するように構成されてもよく、当該連続データストリームは、明確な終端を持たない、本来は連続的または無限であり得るリアルタイムイベントのイベントストリーム828および/またはイベント更新情報830を含んでもよい。連続データを生成するアプリケーションの例としては、たとえば、センサデータアプリケーション、金融株式相場表示板、ネットワーク性能測定ツール(たとえば、ネットワーク監視およびトラフィック管理アプリケーション)、クリックストリーム解析ツール、自動車交通監視などを挙げることができる。
また、通信サブシステム824は、構造化されたおよび/または構造化されていないデータフィード826、イベントストリーム828、イベント更新情報830などを、コンピュータシステム800に結合される1つ以上のストリーミングデータソースコンピュータと通信し得る1つ以上のデータベースに出力するよう構成されてもよい。
コンピュータシステム800は、手持ち式の携帯デバイス(たとえば、iPhone(登録商標)携帯電話、iPad(登録商標)コンピューティングタブレット、PDA)、ウェアラブルデバイス(たとえば、Google Glass(登録商標)頭部装着型ディスプレイ)、PC、ワークステーション、メインフレーム、キオスク、サーバラック、またはその他のデータ処理システムを含む、さまざまなタイプのもののうちの1つであり得る。
常に変化するコンピュータおよびネットワークの性質のため、図に示されるコンピュータシステム800の記載は、単に具体的な例として意図される。図に示されるシステムよりも多くのコンポーネントまたは少ないコンポーネントを有する多くの他の構成が可能である。たとえば、カスタマイズされたハードウェアも使用されてもよく、および/または、特定の要素が、ハードウェア、ファームウェア、ソフトウェア(アプレットを含む)、または組み合わせで実現されてもよい。さらに、ネットワーク入力/出力デバイスなどの他のコンピューティングデバイスへの接続が利用されてもよい。本明細書における開示および教示に基づいて、当業者は、さまざまな実施形態を実現するための他の態様および/または方法を理解するであろう。
上記の明細書では、本開示の局面についてその具体的な実施形態を参照して説明しているが、本開示はそれに限定されるものではないということを当業者は認識するであろう。上記の開示のさまざまな特徴および局面は、個々にまたは一緒に用いられてもよい。また、さまざまな変形例、変更例、代替的な構造および等価物は、本開示の範囲内に包含される。変形例は、開示されている特徴のいずれかの関連の組み合わせを含む。さらに、実施形態は、明細書のさらに広い精神および範囲から逸脱することなく、本明細書に記載されているものを超えて、さまざまな環境およびアプリケーションで利用することができる。したがって、明細書および図面は、限定的ではなく例示的であると見なされるべきである。

Claims (11)

  1. コンピュータによって実行される方法であって、
    イベントストリームの一部として受信される一連のイベントのうちの第1のイベントを判断するステップと、
    ベントカウンタの値を前記第1のイベントのタイムスタンプで初期化するステップと、
    前記イベントストリームのさらに他のイベントを処理するステップと、
    前記イベントストリームのフィルタリングされたイベントを識別するステップと、
    前記フィルタリングされたイベントのためのスキップビートを生成するステップとを備え、前記スキップビートは前記フィルタリングされたイベントのタイムスタンプを含み
    前記スキップビートを前記イベントストリームに挿入するステップと、
    前記イベントストリームの後続のイベントを受信するステップと、
    前記イベントストリームの順序が狂ったイベントを識別するステップと、
    前記イベントストリームにおける次のイベントが実際のイベントであるかスキップビートであるかに関係なく、前記後続のイベントの各々に関連付けられた前記タイムスタンプの順序で後続のイベントを処理するステップとを備える、方法。
  2. 前記第1のイベントは、
    タイマを開始すること、
    前記タイマが時間切れになるまで前記一連のイベントのうちの一組のイベントを受信すること、
    前記一組のイベントを時系列順に再配列すること、および
    前記第1のイベントを、最新のタイムスタンプを有する前記再配列された組のイベントとして識別すること、によって判断される、請求項1に記載の方法。
  3. 前記さらに他のイベントは、前記タイマが時間切れになる前にバッチ処理される、請求項2に記載の方法。
  4. 前記フィルタリングされたイベントは、上流の段階によってフィルタリングされて除去される、請求項1〜3のいずれか1項に記載の方法。
  5. 前記実際のイベントは、前記イベントストリームに対応するイベントデータを備える、
    請求項1〜4のいずれか1項に記載の方法。
  6. プログラムコードを格納するコンピュータ読取可能プログラムであって、前記プログラムコードは、コンピューティングシステムのプロセッサによって実行されたときに、前記プロセッサに動作を実行させ、前記動作は、
    一連のイベントのうちの第1のイベントを判断することと、
    ベントカウンタの値を前記第1のイベントのタイムスタンプで初期化することと、
    さらに他のイベントを処理することと、
    フィルタリングされたイベントを識別することと、
    前記フィルタリングされたイベントのためのスキップビートを生成することとを備え、前記スキップビートは前記フィルタリングされたイベントのタイムスタンプを含み
    後続のイベントを受信することと、
    順序が狂ったイベントを識別することと、
    イベントストリームにおける次のイベントが実際のイベントであるかスキップビートであるかに関係なく、前記後続のイベントの各々に関連付けられた前記タイムスタンプの順序で後続のイベントを処理することとを備える、コンピュータ読取可能プログラム。
  7. 前記第1のイベントは、イベントストリームの一部として受信される、請求項6に記載のコンピュータ読取可能プログラム。
  8. 前記さらに他のイベントまたは前記フィルタリングされたイベントのうちの少なくとも1つは、前記イベントストリームの一部として受信される、請求項7に記載のコンピュータ読取可能プログラム。
  9. 前記動作は、前記スキップビートを前記イベントストリームに挿入することをさらに備える、請求項7または8に記載のコンピュータ読取可能プログラム。
  10. 前記順序が狂ったイベントは廃棄される、請求項6〜9のいずれか1項に記載のコンピュータ読取可能プログラム。
  11. システムであって、
    コンピュータによって実行可能な命令を格納するように構成されたメモリと、
    前記メモリにアクセスして、前記コンピュータによって実行可能な命令を実行するように構成されたプロセッサとを備え、前記コンピュータによって実行可能な命令は、少なくとも、
    一連のイベントのうちの第1のイベントを判断する命令と、
    ベントカウンタの値を前記第1のイベントのタイムスタンプで初期化する命令と、
    さらに他のイベントを処理する命令と、
    フィルタリングされたイベントを識別する命令と、
    前記フィルタリングされたイベントのためのスキップビートを生成する命令とを備え、前記スキップビートは前記フィルタリングされたイベントのタイムスタンプを含み
    後続のイベントを受信する命令と、
    順序が狂ったイベントを識別する命令と、
    イベントストリームにおける次のイベントが実際のイベントであるかスキップビートであるかに関係なく、前記後続のイベントの各々に関連付けられた前記タイムスタンプの順序で後続のイベントを処理する命令とを備える、システム。
JP2018513855A 2015-10-21 2016-10-20 分散型システムにおける多段階処理のためのイベント順序の保証 Active JP6832347B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562244452P 2015-10-21 2015-10-21
US62/244,452 2015-10-21
US15/095,766 US9672082B2 (en) 2015-10-21 2016-04-11 Guaranteeing the event order for multi-stage processing in distributed systems
US15/095,766 2016-04-11
PCT/US2016/057924 WO2017070354A1 (en) 2015-10-21 2016-10-20 Guaranteeing the event order for multi-stage processing in distributed systems

Publications (3)

Publication Number Publication Date
JP2018533130A JP2018533130A (ja) 2018-11-08
JP2018533130A5 JP2018533130A5 (ja) 2019-08-08
JP6832347B2 true JP6832347B2 (ja) 2021-02-24

Family

ID=57286804

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018513855A Active JP6832347B2 (ja) 2015-10-21 2016-10-20 分散型システムにおける多段階処理のためのイベント順序の保証

Country Status (5)

Country Link
US (1) US9672082B2 (ja)
EP (1) EP3365781B1 (ja)
JP (1) JP6832347B2 (ja)
CN (1) CN108139948B (ja)
WO (1) WO2017070354A1 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016014925A2 (en) * 2014-07-25 2016-01-28 Ab Initio Technology Llc Mutable chronologies for accommodation of randomly occurring event delays
US10514952B2 (en) * 2016-09-15 2019-12-24 Oracle International Corporation Processing timestamps and heartbeat events for automatic time progression
JP7005600B2 (ja) 2016-09-15 2022-01-21 オラクル・インターナショナル・コーポレイション マイクロバッチストリーミングのための複合イベント処理
US10628424B2 (en) 2016-09-15 2020-04-21 Oracle International Corporation Graph generation for a distributed event processing system
US10489219B2 (en) * 2016-09-21 2019-11-26 Microsoft Technology Licensing, Llc Transitioning between data stream processors in a publish-subscribe system
US9836467B1 (en) 2016-10-31 2017-12-05 International Business Machines Company Altering in-flight streamed data from a relational database
US10025826B2 (en) * 2016-10-31 2018-07-17 International Business Machines Corporation Querying in-flight streamed data from a relational database
US10127283B2 (en) 2016-10-31 2018-11-13 International Business Machines Corporation Projecting effect of in-flight streamed data on a relational database
US10579624B2 (en) 2017-01-08 2020-03-03 International Business Machines Corporation Tuple attribute expiry management
WO2018169430A1 (en) 2017-03-17 2018-09-20 Oracle International Corporation Integrating logic in micro batch based event processing systems
WO2018169429A1 (en) 2017-03-17 2018-09-20 Oracle International Corporation Framework for the deployment of event-based applications
US10484490B2 (en) * 2017-10-05 2019-11-19 Bank Of America Corporation Multicomputer processing of user data with centralized event control
WO2019089601A1 (en) * 2017-10-31 2019-05-09 Ab Initio Technology Llc Managing a computing cluster interface
US10691489B2 (en) 2018-01-29 2020-06-23 International Business Machines Corporation Managing the processing of streamed data in a data streaming application using query information from a relational database
US11204926B2 (en) 2018-10-31 2021-12-21 International Business Machines Corporation Storing partial tuples from a streaming application in a database system
US10963312B2 (en) 2018-11-16 2021-03-30 International Business Machines Corporation Generation of unique ordering of events at cloud scale
US10936659B2 (en) 2019-01-02 2021-03-02 International Business Machines Corporation Parallel graph events processing
US11593309B2 (en) 2020-11-05 2023-02-28 International Business Machines Corporation Reliable delivery of event notifications from a distributed file system

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7840550B2 (en) 2002-08-13 2010-11-23 International Business Machines Corporation System and method for monitoring database queries
US20040060054A1 (en) * 2002-09-20 2004-03-25 International Business Machines Corporation Composition service for autonomic computing
US7194451B2 (en) 2004-02-26 2007-03-20 Microsoft Corporation Database monitoring system
US8099452B2 (en) 2006-09-05 2012-01-17 Microsoft Corporation Event stream conditioning
US8484243B2 (en) 2010-05-05 2013-07-09 Cisco Technology, Inc. Order-independent stream query processing
US9563663B2 (en) 2012-09-28 2017-02-07 Oracle International Corporation Fast path evaluation of Boolean predicates
US10956422B2 (en) 2012-12-05 2021-03-23 Oracle International Corporation Integrating event processing with map-reduce
JP6011421B2 (ja) * 2013-03-29 2016-10-19 富士通株式会社 ストレージシステム、情報処理装置の制御プログラム及びストレージシステムの制御方法
EP2866144B1 (en) * 2013-10-28 2020-03-25 Software AG Self-correcting complex event processing system and corresponding method for error correction
US8918371B1 (en) * 2014-05-27 2014-12-23 Flexera Software Llc Systems and methods for event log compensation
US9244978B2 (en) 2014-06-11 2016-01-26 Oracle International Corporation Custom partitioning of a data stream
US9712645B2 (en) 2014-06-26 2017-07-18 Oracle International Corporation Embedded event processing
US10120907B2 (en) 2014-09-24 2018-11-06 Oracle International Corporation Scaling event processing using distributed flows and map-reduce operations

Also Published As

Publication number Publication date
US20170116050A1 (en) 2017-04-27
JP2018533130A (ja) 2018-11-08
WO2017070354A1 (en) 2017-04-27
US9672082B2 (en) 2017-06-06
EP3365781A1 (en) 2018-08-29
EP3365781B1 (en) 2020-09-16
CN108139948B (zh) 2020-02-07
CN108139948A (zh) 2018-06-08

Similar Documents

Publication Publication Date Title
JP6832347B2 (ja) 分散型システムにおける多段階処理のためのイベント順序の保証
US11394769B2 (en) Framework for the deployment of event-based applications
JP7009456B2 (ja) 分散イベント処理システムのためのグラフ生成
US10691299B2 (en) Display of hierarchical datasets using high-water mark scrolling
JP7005600B2 (ja) マイクロバッチストリーミングのための複合イベント処理
KR102313789B1 (ko) 이종 전자 디바이스들에 대한 애플리케이션 배포물의 구분
JP6539647B2 (ja) データストリームのカスタムパーティション
EP3077926B1 (en) Pattern matching across multiple input data streams
US9712645B2 (en) Embedded event processing
US9575744B2 (en) Live updating of a shared plugin registry with no service loss for active users
US9535726B2 (en) Reverse dependency injection in a system with dynamic code loading
US9600342B2 (en) Managing parallel processes for application-level partitions
US10614048B2 (en) Techniques for correlating data in a repository system
US10685024B2 (en) Tuple extraction using dynamically generated extractor classes
US11609804B2 (en) Flexible event ingestion framework in an event processing system
JP7013450B2 (ja) 自動時間進行についての処理タイムスタンプおよびハートビートイベント
US10015120B2 (en) Providing message delivery services between requestors and providers

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190627

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190627

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200824

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200928

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210201

R150 Certificate of patent or registration of utility model

Ref document number: 6832347

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250