JP2016539427A - 多重入力データストリームにわたるパターンマッチング - Google Patents

多重入力データストリームにわたるパターンマッチング Download PDF

Info

Publication number
JP2016539427A
JP2016539427A JP2016536781A JP2016536781A JP2016539427A JP 2016539427 A JP2016539427 A JP 2016539427A JP 2016536781 A JP2016536781 A JP 2016536781A JP 2016536781 A JP2016536781 A JP 2016536781A JP 2016539427 A JP2016539427 A JP 2016539427A
Authority
JP
Japan
Prior art keywords
data stream
input data
stream
attribute
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016536781A
Other languages
English (en)
Other versions
JP6521973B2 (ja
JP2016539427A5 (ja
Inventor
カリ,プラタブ
スリニバサン,アナンド
ビシュノイ,サンディープ
Original Assignee
オラクル・インターナショナル・コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オラクル・インターナショナル・コーポレイション filed Critical オラクル・インターナショナル・コーポレイション
Publication of JP2016539427A publication Critical patent/JP2016539427A/ja
Publication of JP2016539427A5 publication Critical patent/JP2016539427A5/ja
Application granted granted Critical
Publication of JP6521973B2 publication Critical patent/JP6521973B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24553Query execution of query operations
    • G06F16/24558Binary matching operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24568Data stream processing; Continuous queries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

1つ以上のアプリケーションに関する多重入力データストリームにわたってパターンを検出するための方法が開示される。当該方法は、多重入力データストリームを受取るステップと、入力データストリームの1つ以上の属性についての1つ以上のダイナミックデータタイプを生成するステップとを含む。いくつかの実施形態においては、当該方法は、入力データストリームを結合して、ダイナミックデータタイプに基づいて結合入力データストリームを生成するステップと、結合データストリームに関する連続クエリを処理してパターンを検出するステップとを含み得る。

Description

関連出願の相互参照
本願は、2014年12月3日に提出され、「多重入力データストリームにわたるパターンマッチング(PATTERN MATCHING ACROSS MULTIPLE INPUT DATA STREAMS)」と題された米国特許出願第14/559,550号と、2013年12月5日に提出され、「多重入力データストリームにわたるパターンマッチング(PATTERN MATCHING ACROSS MULTIPLE INPUT DATA STREAMS)」と題された米国仮特許出願第61/912,344号とに対する優先権を主張するものであって、各々の内容全体があらゆる目的のために引用により援用されている。
背景
従来のデータベースシステムにおいては、データが通常は表の形式である1つ以上のデータベースに格納される。格納されたデータは、次いで、構造化クエリ言語(structured query language:SQL)などのデータ管理言語を用いて照会および処理される。たとえば、SQLクエリは、データベースに格納されたデータから関連データを識別するように規定および実行されてもよい。このため、SQLクエリは、データベースに格納された有限集合データ上で実行される。さらに、SQLクエリが実行される場合、このSQLクエリは、有限データ集合に対して1回だけ実行され、有限の静的な結果を生成する。このため、データベースは、有限の格納データ集合に対してクエリを実行するために最適に実装される。
しかしながら、いくつかの現在のアプリケーションおよびシステムは、有限のデータ集合ではなく、連続的なデータまたはイベントストリームの形式でデータを生成する。このようなアプリケーションの例は、センサデータアプリケーション、金融ティッカ、ネットワーク性能測定ツール(たとえばネットワークモニタリングおよびトラフィック管理アプリケーション)、クリックストリーム解析ツール、自動車交通モニタリングなどを含むがこれらに限定されない。このようなアプリケーションのために、データストリームを処理することのできる新しい種類のアプリケーションが必要となってきた。たとえば、温度センサは、温度測定値を連続的に発信するように構成されてもよい。
これらのタイプのイベントストリームベースのアプリケーションのためのデータを管理および処理するには、一時的に極集中的にデータの管理および照会能力を構築する必要がある。連続的な無限のセットのデータに対する長期間の照会を含む、さまざまな種類の照会メカニズムが必要とされる。ベンダーの中には、現在、イベントストリーム処理用に意図された製品1式を提供しているものもあるが、これらの提供される製品には、依然として、現代のイベント処理のニーズに対処するのに必要な処理融通性が欠けている。
概要
いくつかの実施形態においては、1つ以上のアプリケーションに関する多重入力データストリームにわたるパターンを検出するための技術(たとえば、1つ以上のプロセッサによって実行可能なコードまたは命令を格納する方法、システム、非一時的なコンピュータ読取可能媒体)が提供される。
一実施形態に従うと、1つ以上のアプリケーションに関する多重入力データストリームにわたってパターンを検出するための方法が開示される。当該方法は、第1の入力データストリームおよび第2の入力データストリームを含む複数の入力データストリームを受取るステップを含む。当該方法はさらに、第1の入力データストリームについての第1のダイナミックデータタイプを生成するステップと、第2の入力データストリームについての第2のダイナミックデータタイプを生成するステップとを含む。いくつかの実施形態においては、第1のダイナミックデータタイプは、第1の入力データストリームの第1の属性を、第2のデータストリームには存在しないものとして識別することによって生成されてもよい。次いで、第1のダイナミックデータタイプが、第1の属性のために生成される。第2のダイナミックデータタイプは、第2の入力データストリームの第2の属性を、第1のデータストリームには存在しないものとして識別することによって生成されてもよい。次いで、第2のダイナミックデータタイプが第2の属性のために生成される。一実施形態においては、第1のダイナミックデータタイプは、第1の入力データストリームの第1の属性に対応する第1のデータ値を格納するように構成されてもよく、第2のダイナミックデータタイプは、第2の入力データストリームの第2の属性に対応する第2のデータ値を格納するように構成されてもよい。
いくつかの実施形態においては、当該方法は、第1の入力データストリームと第2の入力データストリームとを結合して、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプに基づく結合データストリーム(combined data stream)を生成するステップを含み得る。一実施形態においては、当該方法はさらに、結合データストリームに対する連続クエリを処理してパターンを検出するステップを含み得る。いくつかの実施形態においては、「パターン」は、第1のデータストリームにおける第1のイベントの発生と、これに後続する第2のデータストリームにおける別のイベントの発生とを構成し得る。
別の実施形態に従うと、1つ以上のアプリケーションに関する多重入力データストリームにわたってパターンを検出するためのシステムが開示される。当該システムは、複数の命令を格納するためのメモリと、メモリにアクセスするように構成されたプロセッサとを含む。一実施形態においては、プロセッサは、第1の入力データストリームおよび第2の入力データストリームを識別する連続クエリを受取るようにとの命令を実行するように構成される。プロセッサは、第1の入力データストリームの第1の属性についての第1のダイナミックデータタイプと、第2の入力データストリームの第2の属性についての第2のダイナミックデータタイプとを識別するようにとの命令を実行するようにさらに構成される。いくつかの実施形態においては、プロセッサは、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプに基づいて結合データストリームを生成し、結合データストリームに対して連続クエリを実行してパターンを検出するように構成される。
いくつかの実施形態に従うと、1つ以上のプロセッサによって実行可能なコンピュータ実行可能命令を格納する非一時的なコンピュータ読取可能媒体が開示される。コンピュータ実行可能命令は、1つ以上のプロセッサに、第1の入力データストリームおよび第2の入力データストリームを少なくとも含む複数の入力データストリームを受取らせるための命令を含む。コンピュータ実行可能命令はさらに、1つ以上のプロセッサに、第1の入力データストリームについての第1のダイナミックデータタイプおよび第2の入力データストリームについての第2のダイナミックデータタイプを生成させるための命令を含む。いくつかの実施形態においては、コンピュータ実行可能命令は、第1の入力データストリームと第2の入力データストリームとを結合して、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプに基づいて結合データストリームを生成し、結合データストリームに対する連続クエリを処理して、パターンを検出するための命令を含む。
いくつかの実施形態に従うと、第1の入力データストリームおよび第2の入力データストリームを少なくとも含む複数の入力データストリームを受取るステップと、第1の入力データストリームについての第1のダイナミックデータタイプを生成するステップと、第2の入力データストリームについての第2のダイナミックデータタイプを生成するステップと、第1の入力データストリームと第2の入力データストリームとを結合して、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプに少なくとも部分的に基づく結合データストリームを生成するステップと、結合データストリームに対する連続クエリを処理してパターンを検出するステップとを含む。
いくつかの実施形態においては、第1のダイナミックデータタイプを生成するステップはさらに、第1の入力データストリームの第1の属性を、第2のデータストリームには存在しないものとして識別するステップと、第1の属性についての第1のダイナミックデータタイプを生成するステップとを含む。第1のダイナミックデータタイプは、第1の入力データストリームの第1の属性に対応する第1のデータ値を格納するように構成される。
いくつかの実施形態においては、第2のダイナミックデータタイプを生成するステップはさらに、第2の入力データストリームの第2の属性を、第1のデータストリームには存在しないものとして識別するステップと、第2の属性についての第2のダイナミックデータタイプを生成するステップとを含む。第2のダイナミックデータタイプは、第2の入力データストリームの第2の属性に対応する第2のデータ値を格納するように構成される。
いくつかの実施形態においては、当該方法はさらに、共通属性を識別するステップを含む。共通属性は、第1の入力データストリームに存在し、かつ第2の入力データストリームに存在するものとして識別される。当該方法はさらに、同種スキーマを生成するステップを含む。同種スキーマは、第1の入力データストリームおよび第2の入力データストリームの1つ以上の属性の表現を含み、当該表現は、少なくとも、共通属性、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプを含む。当該方法はさらに、同種スキーマに少なくとも部分的に基づく結合データストリームを生成するステップを含む。
いくつかの実施形態においては、当該方法はさらに、結合データストリームの分析に少なくとも部分的に基づくパターンを検出するステップを含む。パターンは、第1の入力データストリームにおける第1のイベントと、後続する第2の入力データストリームにおける第2のイベントとを識別する。
いくつかの実施形態に従うと、サービスプロバイダデバイスが提供される。サービスプロバイダデバイスは、第1の入力データストリームおよび第2の入力データストリームを少なくとも含む複数の入力データストリームを受取るように構成された入力データストリーム受取ユニットと、第1の入力データストリームについての第1のダイナミックデータタイプを生成するように構成された第1のダイナミックデータタイプ生成ユニットと、第2の入力データストリームについての第2のダイナミックデータタイプを生成するように構成された第2のダイナミックデータタイプ生成ユニットと、第1の入力データストリームと第2の入力データストリームとを結合して、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプに少なくとも部分的に基づく結合データストリームを生成するように構成された結合データストリーム生成ユニットと、結合データストリームに対する連続クエリを処理してパターンを検出するように構成されたパターン検出ユニットとを備える。
いくつかの実施形態においては、第1のダイナミックデータタイプ生成ユニットはさらに、第1の入力データストリームの第1の属性を第2のデータストリームに存在しないものとして識別し、第1の属性についての第1のダイナミックデータタイプを生成するように構成される。
いくつかの実施形態においては、第1のダイナミックデータタイプは、第1の入力データストリームの第1の属性に対応する第1のデータ値を格納するように構成される。
いくつかの実施形態においては、第2のダイナミックデータタイプ生成ユニットはさらに、第2の入力データストリームの第2の属性を第1のデータストリームには存在しないものとして識別し、第2の属性についての第2のダイナミックデータタイプを生成するように構成される。第2のダイナミックデータタイプは、第2の入力データストリームの第2の属性に対応する第2のデータ値を格納するように構成される。
いくつかの実施形態においては、サービスプロバイダデバイスはさらに、共通属性識別ユニットを含み得る。共通属性識別ユニットは、共通属性を識別するように構成される。共通属性は、第1の入力データストリームに存在し、かつ第2の入力データストリームに存在するものとして識別される。サービスプロバイダデバイスはさらに、同種スキーマを生成するように構成された同種スキーマ生成ユニットを含む。同種スキーマは、第1の入力データストリームおよび第2の入力データストリームの1つ以上の属性の表現を含む。当該表現は、少なくとも共通属性、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプを含む。
いくつかの実施形態においては、同種スキーマは、ストリーム名識別子属性、第1の入力データストリームに関連付けられた第1のタイムスタンプ属性、または第2の入力データストリームに関連付けられた第2のタイムスタンプ属性のうち少なくとも1つを含む。
いくつかの実施形態においては、結合データストリーム生成ユニットはさらに、同種スキーマによって識別される第1の入力データストリームからタプルの第1のセットを選択し、同種スキーマによって識別される第2の入力データストリームからタプルの第2のセットを選択し、タプルの第1のセットおよびタプルの第2のセットに対するサブクエリを処理して結合データストリームを生成するように構成されてもよい。
いくつかの実施形態においては、パターンは、結合データストリームの分析に少なくとも部分的に基づいて検出されてもよい。パターンは、第1の入力データストリームにおける第1のイベントと、後続する第2の入力データストリームにおける第2のイベントとを識別する。
図面の簡単な説明
添付の図面に関連付けて詳細な説明を行う。図においては、参照番号の左端の数字は、その参照番号が最初に現われる図番号を示している。さまざまな図において同じ参照番号を用いる場合、類似または同一のアイテムを示している。
多重入力データストリームにわたってパターンを識別するための技術が実現され得る簡略化された例示的なシステムまたはアーキテクチャを示す図である。 多重入力データストリームにわたるパターンの検出についての特徴が記載され得る簡略化されたブロック図を示す。 本開示の一実施形態に従って、多重入力データストリームを識別するCQLクエリを用いてパターン認識を実行する具体例を示す図である。 本開示の別の実施形態に従って、多重入力データストリームを識別するCQLクエリを用いてパターン認識を実行する具体例を示す図である。 本開示の一実施形態に従って、多重入力データストリームにわたってパターンを検出するためのプロセスを示す高レベルフローチャートである。 本開示の一実施形態に従って、同種スキーマを生成するためのプロセスを示す高レベルフローチャートである。 本開示の実施形態を援用し得るイベント処理システムを示す簡略化された高レベル図である。 実施形態のうちの1つを実現するための分散型システムを示す簡略図である。 本開示の実施形態に従って、具体例としてのシステムの1つ以上の構成要素によって提供されるサービスがクラウドサービスとして提供され得るシステム環境の1つ以上の構成要素を示す簡略化されたブロック図である。 本発明のさまざまな実施形態が実現され得る例示的なコンピュータシステムを示す図である。 本発明のさまざまな実施形態が実現され得る例示的なサービスプロバイダデバイスを示す簡略化されたブロック図である。
詳細な説明
以下の説明においては、さまざまな実施形態が記載される。それら実施形態を充分に理解できるようにするために具体的な構成および詳細が説明のために記載される。しかしながら、これらの実施形態が具体的な詳細なしで実施され得ることも当業者には明らかになるだろう。さらに、周知の特徴は、記載されている実施形態が不明瞭にならないようにするために省略または簡素化される可能性がある。
いくつかのアプリケーションにおいては、データは、有限の格納されたデータ集合ではなく、連続的な無限のデータストリームの形を採る可能性がある。このようなデータストリームの例には、金融分野における株価表示機、ネットワーク監視およびトラフィック管理における性能測定、ウェブトラッキングおよびパーソナル化におけるログレコードまたはクリックストリーム、センサアプリケーションからのデータ供給、ファイアウォールベースのセキュリティにおけるネットワークパケットおよびメッセージ、電気通信における通話記録、などが含まれ得る。これらの連続的な性質があるために、これらのデータストリームは、典型的には、従来の1回限りのSQLクエリではなく、連続クエリを用いて照会され得る。
概して、連続データストリーム(イベントストリームとも称される)は、本質的に明確な終わりがない連続的または無限であり得るデータまたはイベントのストリームを含み得る。論理的には、イベントまたはデータストリームは、一連のデータエレメント(またイベントとも称される)であってもよく、各々のデータエレメントは関連付けられたタイムスタンプを有し得る。連続的なイベントストリームは、論理的には、1塊または1セットのエレメント(s,T)として表わされてもよい。この場合、「s」はデータ部分を表わし、「T」は時間ドメインにある。「s」部分は概してタプルまたはイベントと称される。このため、イベントストリームは、一連のタイムスタンプ付きタプルまたはイベントであり得る。
いくつかの局面においては、ストリームにおけるイベントに関連付けられたタイムスタンプはクロックタイムと等しい可能性がある。しかしながら、他の例においては、イベントストリームにおけるイベントに関連付けられた時間は、アプリケーションドメインによって規定される可能性があり、クロックタイムに対応しない可能性があるが、たとえば、代わりに一連の数字によって表わされる可能性もある。したがって、イベントストリームにおけるイベントに関連付けられた時間情報は、数、タイムスタンプ、または時間の概念を表わす他の情報によって表わされる可能性がある。入力イベントストリームを受取るシステムの場合、イベントは、タイムスタンプが増加する順序でシステムに到達する。同じタイムスタンプを備えた2つ以上のイベントが存在する可能性もある。
いくつかの例においては、イベントストリームにおけるイベントは、(たとえば、温度センサが値を新しい値に変更したとき、株式銘柄の価格が変化したときなどに)いくつかの世界的なイベントが発生したことを表わしてもよく、イベントに関連付けられた時間情報は、データストリームイベントによって表わされる世界的なイベントがいつ発生したかを示してもよい。
イベントストリームを介してイベントが受取られた場合、イベントに関連付けられた時間情報を用いて、タイムスタンプ値が増大する順序で、イベントストリームにおけるイベントが到達することを確実にしてもよい。これにより、イベントストリームにおいて受取られたイベントを、それらの関連付けられた時間情報に基づいて順序付けることが可能になり得る。この順序付けを可能にするために、タイムスタンプは、後に生成されるイベントが、以前に生成されたイベントよりも後のタイムスタンプを有するように非減少の態様で、イベントストリームにおけるイベントに関連付けられてもよい。別の例として、順序番号が時間情報として用いられている場合、後に生成されたイベントに関連付けられた順序番号が、以前に生成されたイベントに関連付けられた順序番号より大きくなる可能性がある。いくつかの例においては、たとえば、データストリームイベントによって表わされる世界的なイベントが同時に発生したときに、複数のイベントが同じタイムスタンプまたは順序番号に関連付けられてもよい。同じイベントストリームに属するイベントは、概して、関連付けられた時間情報によってイベントに課された順序で処理される可能性があり、先行のイベントが後のイベントよりも前に処理される。
イベントストリームにおけるイベントに関連付けられた時間情報(たとえばタイムスタンプ)は、ストリームのソースによって設定されてもよく、または、代替的には、ストリームを受取るシステムによって設定されてもよい。たとえば、いくつかの実施形態においては、イベントストリームを受取るシステム上で心臓の鼓動が維持されてもよく、イベントに関連付けられた時間は、心臓の鼓動によって測定されるようなシステムへのイベントの到着時間に基づいてもよい。イベントストリームにおける2つのイベントは同じ時間情報を有することができる。なお、タイムスタンプの順序付けが1つのイベントストリームにとって特有であるが、さまざまなストリームのイベントが任意にインターリーブされ得ることにも留意されたい。
イベントストリームは、関連付けられたスキーマ「S」を有してもよい。スキーマは、時間情報と1つ以上の名前付き属性のセットとを含み得る。特定のイベントストリームに属するすべてのイベントは、その特定のイベントストリームに関連付けられたスキーマに合致する。したがって、イベントストリーム(s,T)の場合、当該イベントストリームは、(<time_stamp>, <attribute(s)>)としてスキーマ「S」を有し得る。この場合、<attributes>はスキーマのデータ部分を表わし、1つ以上の属性を含み得る。たとえば、株価表示機のイベントストリームについてのスキーマは、属性<stock symbol>および<stock price>を含み得る。このようなストリームを介して受取られたイベントは各々、タイムスタンプおよび2つの属性を有することとなる。たとえば、株価表示機イベントストリームは以下のイベントおよび関連付けられたタイムスタンプを受取ってもよい:

(<timestamp_N>, <NVDA,4>)
(<timestamp_N+1>, <ORCL,62>)
(<timestamp_N+2>, <PCAR,38>)
(<timestamp_N+3>, <SPOT,53>)
(<timestamp_N+4>, <PDCO,44>)
(<timestamp_N+5>, <PTEN,50>)

上述のストリームにおいては、ストリームエレメント(<timestamp_N+1>,<ORCL,62>)の場合、イベントは、属性「stock_symbol」および「stock_value」を備えた<ORCL,62>である。ストリームエレメントに関連付けられたタイムスタンプは「timestamp_N+1」である。このため、連続的なイベントストリームはイベントのフローとなり、各々のイベントは同じ系列の属性を有する。
上述のように、ストリームは、CQLクエリが作用し得る主要なデータソースであってもよい。ストリームSは、(「マルチセット」とも称される)一塊のエレメント(s,T)であってもよい。この場合、「s」はSのスキーマにあり、「T」は時間ドメインにある。付加的には、ストリームエレメントはタプルのタイムスタンプ対であってもよく、これは、一連のタイムスタンプ付きタプル挿入として表わすことができる。言いかえれば、ストリームは、一連のタイムスタンプ付きタプルであってもよい。場合によっては、同じタイムスタンプを備えた2つ以上のタプルがあってもよい。さらに、入力データストリームのタプルは、タイムスタンプが増大する順序でシステムに到達するように要求されてもよい。代替的には、(「時間可変関係」とも称され、リレーショナルデータベースからのデータを含み得る「リレーショナルデータ」と混同されるべきではない)関係は、時間ドメインから、スキーマRのタプルからなる無制限の塊までのマッピングであってもよい。いくつかの例においては、関係は、無秩序な時間依存型タプルの塊(すなわち瞬間的な関係)であってもよい。場合によっては、時間の各々のインスタンスにおいては、関係は有限のセットであってもよい。これはまた、関係の変更状態を把握するために、挿入、削除および/または更新を含み得る一連のタイムスタンプ付きタプルとして表わすことができる。ストリームと同様に、関係は、関係の各タプルが準拠し得る一定のスキーマを有し得る。さらに、連続クエリは、この明細書中において用いられる場合、概して、ストリームおよび/または関係の(すなわち、ストリームおよび/または関係について照会された)データを処理することができる可能性がある。付加的には、関係は、ストリームのデータを参照してもよい。
いくつかの例においては、ビジネスインテリジェンス(business intelligence:BI)は、特定の間隔で(たとえば、場合によって毎日)ビジネス活動を促進および最適化するのに役立ち得る。このタイプのBIは、通常、オペレーショナルビジネスインテリジェンス、リアルタイムビジネスインテリジェンスまたはオペレーショナルインテリジェンス(operational intelligence:OI)と称される。オペレーショナルインテリジェンスは、いくつかの例においては、BIとビジネス活動監視(business activity monitoring:BAM)との間の境界を曖昧にする。たとえば、BIは履歴データの周期的な問合せに焦点が合わされる可能性があり、そのため、後方重視の焦点を有する可能性がある。しかしながら、BIはまた、オペレーショナルアプリケーションに分類されてもよく、したがって、単なる戦略上の分析ツールからビジネスオペレーションにおける最前線にまで拡大する可能性がある。そのため、BIシステムはまた、イベントストリームを分析して、総計をリアルタイムで計算するように構成されてもよい。
いくつかの例においては、連続的なクエリ言語サービス(CQ(continuous query)サービス)は、連続クエリを処理してリアルタイムアラートを使用可能にするためにBI解析サーバを拡張するように構成されてもよい。CQサービスによって、いくつかの局面においては、BI解析サーバおよびCQLエンジンとが統合される可能性がある。単なる一例として、BI解析サーバは、CQサービスに連続クエリを委ねてもよく、CQサービスはまた、CQLエンジンのための論理データベース(database:DB)ゲートウェイとして機能してもよい。このようにして、CQLエンジンは、その解析能力およびセマンティックモデリングのためにBI解析サーバを活用可能であり得る。
いくつかの例においては、CQサービスは、特に以下の機能を提供し得る:
−CQLエンジンゲートウェイとしての、BI解析サーバのための遠隔操作サービス;
−イベントソース/シンクアダプタ;
−CQL拡張に加えて論理SQLからデータ定義言語(data definition language:DDL)を生成;
−すべてのタイプの連続クエリおよびインプリメンテーション選択のために一体化モデルを提供;
−メタデータの維持、再開可能性のサポート;ならびに、
−高可用性およびスケーラビリティのサポート。
付加的には、いくつかの例においては、OIは、可視性および洞察力をビジネスオペレーションに与えることができるリアルタイムのダイナミックなビジネス解析の一形式である。OIは、しばしば、BIもしくはリアルタイムBIにリンクされるか、またはBIもしくはリアルタイムBIと比較される。というのも、これらBIおよびリアルタイムBIがともに両方が大量の情報を把握するのに役立つからである。但し、いくつかの基本的な違いがある。すなわち、OIは主としてアクティビティ中心であり得るのに対して、BIは主としてデータ中心であり得る。加えて、従来から、パターンを識別するために事後ベースかつレポートベースのアプローチとして用いられる可能性のあるBIとは異なり、OIは、開発状況(たとえば、トレンドおよびパターン)を検出してこれに対応するのにより適切であり得る。
いくつかの例においては、ビジネスイベント分析および監視(business event analysis and monitoring:BEAM)システムが、機内データの処理および/または受取りのためにCQLエンジンを含んでもよい。たとえば、CQLエンジンは、受信したリアルタイム情報(たとえばBIまたはOI)を照会または処理するように構成されたインメモリ・リアルタイムイベント処理エンジンであってもよい。CQLエンジンは、時間的なセマンティックを利用または理解し、データのウィンドウの定義を処理することを可能にするように構成されてもよい。CQLエンジンを利用する場合、場合によっては、受信データ上でクエリを常に実行することが必要になるかもしれない。
いくつかの局面においては、CQLエンジンは十分に発達したクエリ言語を含んでもよい。そのため、ユーザは照会の観点から演算を指定してもよい。加えて、CQLエンジンは、クエリ言語特徴、オペレータ共有、豊富なパターンマッチング、豊富な言語構築などを利用して、メモリを最適化するように設計されてもよい。加えて、いくつかの例においては、CQLエンジンは履歴データおよびストリーミングデータの両方を処理してもよい。たとえば、カリフォルニアでの売上高が一定の目標を超えた場合、ユーザはアラートを送信するようにクエリを設定することができる。このため、いくつかの例においては、アラートは、履歴上の売上データならびに受信した実際の(すなわち、リアルタイムの)売上データに少なくとも部分的に基づいている可能性がある。
いくつかの例においては、CQLエンジンまたは以下に記載される概念の他の特徴が、履歴コンテキスト(すなわち倉庫データ)を受信データとリアルタイムで結合するように構成されてもよい。これにより、場合によっては、本開示では、データベースに格納された情報および機内情報の範囲が説明され得る。データベースに格納された情報および機内情報はともにBIデータを含み得る。このため、データベースは、いくつかの例においては、BIサーバであってもよく、または、如何なるタイプのデータベースであってもよい。さらに、いくつかの例においては、本開示の特徴は、ユーザがコードをプログラムするかまたは書込む方法を知らなくても、上述の特徴の実施を可能にし得る。言いかえれば、これらの特徴は、特徴を豊富に含むユーザインターフェイス(user interface:UI)において提供されてもよく、または、非デベロッパがリアルタイムデータと履歴データとの結合を実現することを可能にする他の態様で提供されてもよい。
いくつかの実施形態においては、連続データストリームにおいて受取られたイベントは、データストリームにおける特定のパターンの発生を検出するために、実行時間中に処理されてもよい。「パターン」は、連続データストリームにおいて、各々がいくつかの条件を満たす一連の連続したイベントまたはタプルを構成してもよい。一例として、株の取引き高の変化などのイベントが発生すると、結果として、株式の価格の変化などの別のイベントが発生し、金融分野に関する「株のティック」イベントを受取る連続データストリームにおいて或る「パターン」を構成し得る。
多重連続データストリームの文脈においては、「パターン」は、第1のデータストリームにおける第1のイベントの発生、後続する第2のデータストリームにおける別のイベントの発生などを構成し得る。一例として、第1の一連のイベントによって促進される第1のビジネスプロセスについて検討する。この場合、これらイベントはレンタカーの予約アプリケーションに関するものである。同様に、第2の一連のイベントによって促進される第2のビジネスプロセスを検討する。この場合、イベントは飛行機の予約アプリケーションに関するものである。加えて、第1の一連のイベントが第1の連続入力データストリームを介して受取られ、第2の一連のイベントが第2の連続入力データストリームを介して受取られると想定する。このような状況においては、第1の連続入力データストリームにおけるイベント(たとえばユーザによる自動車の予約)が到着し、その後、第2の連続入力データストリームにおける別のイベント(たとえば、ユーザへの飛行チケットの発行)が到着したときに、パターンマッチを出力することが所望され得る。
一実施形態においては、多重連続入力データストリームにわたるパターンマッチングは、受信した入力データストリームに連続クエリ(たとえばCQLクエリ)を適用することによって実行されてもよい。ある1つのアプローチにおいては、中間ストリームに対応するビューを規定する結果とのパターンマッチングが実行されるべき関連入力データストリームのうち、すべてのUNIONまたはすべてのサブセットを最初に実行することによって、多重連続入力データストリームにわたるパターンマッチングが実行されてもよい。次いで、マッチングされるべきパターンはこの単一の中間ストリームにわたって特定することができる。一実施形態においては、CQL言語構築MATCH_RECOGNIZE文節は、多重入力データストリームを識別するCQLクエリにおいてパターン認識を実行するために用いられてもよい。次いで、パターンを、ビューに含まれるすべてのストリームにマッチングさせてもよい。
一例として、以下のCQLクエリ「Q1」を検討する。Q1は、第1の入力データストリームS1および第2の入力データストリームS2にわたってマッチングされるべきパターンを指定する連続クエリである。
Q1:
SELECT *
FROM
(SELECT cleintId, p1, -1L as p2 from S1 UNION ALL SELECT clientId, -1L as p1, p2 from S1) AS S MATCH_RECOGNIZE
(
PARTITION BY clientId
MEASURES
A.p1 as p1,
B.P2 AS P2
PATTERN (A b)
DEFINE
A as (P1 !=-Il)
b as (P2 !=-1l)
)
加えて、ストリームS1が第1のスキーマによって規定されると想定する:S1(int p1, int clientId)。さらに、ストリームS2が第2のスキーマによって規定されると想定する:S2(int p2, int clientId)。この場合、p1、p2およびclientIdは、ストリームS1およびストリームS2の1つ以上の属性に対応する。
クエリQ1は、ストリームS1およびストリームS2のUNIONを指定するFROM分節を含む。UNION ALLクエリにより、ストリームS1およびストリームS2の結果セットを結合するために、CQL UNION ALLクエリ内のCQL SELECTステートメントは各々、典型的には、類似のデータタイプをもつ結果セットにおいて同数のフィールドを有することが必要とされる。上述のクエリQ1の例においては、ストリームS1のスキーマはストリームS2のスキーマとは異なる。1つのアプローチにおいては、ストリームS1およびストリームS2は、ストリームS1およびストリームS2のスキーマ同士を正規化することによって結合され得る。
一例においては、スキーマの正規化は、ストリームS1およびストリームS2のスキーマの各々に付加的なカラムを追加することによって実行されてもよい。上述のクエリQ1の例においては、カラムは、ストリームS1およびストリームS2のスキーマの各々に追加され、「−1L」などのハードコード化された値でポピュレートされてスキーマを正規化する。しかしながら、各々のストリームにハードコード化されたデータ値を導入することは、エラーが起こり易い手動プロセスである。なぜなら、異なるスキーマで多重入力データストリームを識別するCQLクエリが処理されるたびに、ハードコード化された値を入力しなければならないからである。
本開示の一実施形態においては、1つ以上の関与する入力データストリームを表わす同種スキーマが生成される。いくつかの実施形態においては、同種スキーマは、関与する入力データストリームの1つ以上の属性についての1つ以上のダイナミックデータタイプを作成することによって生成されてもよい。ダイナミックデータタイプおよび同種スキーマを生成することにより、UNION ALLサブクエリ内の各々のSELECTステートメントが、同数のフィールドおよび類似するデータタイプを含むことが可能となり、結果として、ストリームS1およびストリームS2の結果セットがSELECTステートメントを用いて結合され得る。加えて、関与する入力データストリームの属性についてのダイナミックデータタイプの生成はリアルタイムで実行され、CQLクエリが処理されるたびに、ハードコード化された値を関与する入力データストリームに導入する必要がなくなる。一例においては、以下に詳細に説明されるように、ダイナミックデータタイプは、入力データストリームの1つ以上の属性について識別された複合データタイプを参照する可能性もある。
いくつかの実施形態においては、次いで、入力データストリームが結合されて、同種スキーマに基づいて結合データストリームが生成されてもよい。次いで、入力データストリームにわたるパターンを検出するために、連続クエリが結合データストリームにわたって処理されてもよい。一実施形態においては、多重入力データストリームを識別するCQLクエリでパターン認識を実行するために、CQL言語構築MATCH_RECOGNIZE分節が用いられてもよい。多重入力データストリームを識別するCQLクエリにおけるパターン認識を実行するために同種スキーマおよびダイナミックデータタイプが生成および利用され得る態様の付加的な詳細が、以下の図1〜図4において詳細に説明される。
MATCH_RECOGNIZE分節を用いると、ユーザは、相関変数と称される識別子を用いることによって、受信したイベントの属性に関する条件を規定し、パターンマッチングについての条件を特定することができる。上述のとおり、入力データストリームにおける一連の連続イベントまたはタプルは、各々がいくつかの条件を満たすものであって、パターンを構成している。パターン認識機能は、ユーザが、受信したイベントまたはタプルの属性についての条件を規定することと、相関変数と称される文字列名を用いることによってこれらの条件を識別することとを可能にする。
上述のクエリQ1においては、「A」および「B」は相関変数である。マッチングさせるべきパターンは、これらの相関変数に対する正規表現として指定され、有効な一致として認識されるべきさまざまな受信イベントによって条件が満たされるべき順番または順序を決定する。これらの条件を満たす入力データストリームにおける一連の連続イベントがパターンを構成する。一実施形態においては、MATCH_RECOGNIZEクエリの出力はストリームである。上述のクエリQ1においては、MATCH_RECOGNIZE分節はまた、いくつかのサブ文節を含む。
DEFINEサブ文節は、各々の相関変数についてのブール条件を指定する。これは、如何なる論理式または演算式として指定されてもよく、条件と一致するイベントの属性に対して如何なる単一行関数または集約関数を適用してもよい。入力データストリームを介して新しいイベントを受取ると、その時点で関連している相関変数の条件が評価される。イベントは、それがその規定条件を満たしている場合には相関変数と一致したものとみなされる。特定の入力は0、1またはそれ以上の相関変数と一致し得る。入力イベントを受取った際に評価されるべき関連条件は、PATTERN分節正規表現によって管理される処理ロジックと、それより前の入力を処理した後に達するパターン認識プロセスにおける状態とによって決定される。条件は、MATCH_RECOGNIZE分節が適用されているストリームを評価するストリームまたはビューのスキーマの属性のうちのいずれを指してもよい。PATTERN分節における相関変数は、DEFINE分節において指定される必要はない。このような相関変数についてのデフォルトは常に真である叙述部となる。このような相関変数はすべてのイベントと一致する。
PARTITION BYサブ文節はストリーム属性を指定するが、このストリーム属性に基づいて、MATCH_RECOGNIZE分節がその結果を分割するはずである。PARTITION BY分節がない場合、すべてのストリーム属性は同じ区画に属する。PARTITION BY分節がパターンマッチングと共に存在する場合、入力データストリームは、論理的には、区画リストにおいて記載される属性に基づいて分割され、パターンマッチングが区画内においてなされる。上述のクエリQ1においては、(ストリームS1およびストリームS2に共通の属性である)「clientId」属性が、PARTITION BY分節において指定され、これにより、MATCH_RECOGNIZE分節がその結果を分割し得る。
MEASURESサブ文節は、指定されたパターンとうまく一致するイベントの1つ以上の属性値をエクスポートし(たとえば、SELECT分節に含めることを可能にし)、さらに、それらの属性値について表現を指定することを可能にする。この分節を用いることにより、DEFINE分節における条件(相関変数)と一致するイベントストリームにおけるイベントの属性についての表現を規定し、これらの表現を別名で記載し、これにより、このMATCH_RECOGNIZE条件が一部をなす主クエリのSELECT分節においてこれらの表現を好適に用いることができるようにし得る。イベントストリームの属性は、直接的または相関変数を介して参照され得る。
PATTERNサブ文節は、1つ以上の相関変数に関する正規表現として一致させるべきパターンを指定する。受信イベントは与えられた順序で(左から右へと)これらの条件と一致するはずである。正規表現は、以下のような相関変数およびパターン修飾子から構成され得る:
:0回以上
+:1回以上
?:0回または1回など。
いくつかの実施形態においては、上述の1文字パターン修飾子は最大または「グリーディ(greedy)」であり、これらは、それらが適用される正規表現のうち可能な限り多くのインスタンスと一致するよう企図されるだろう。パターン修飾子はまた2文字であって、最小または「リラクタント(reluctant)」であり、それらが適用される正規表現のうち可能な限り少数のインスタンスと一致するよう企図されるだろう。2文字の修飾子の例は、以下を含むが、それらに限定されない。
?:0回以上
+?:1回以上
??:0回または1回。
パターンマッチングの例として、以下のパターンを検討する:
パターン(ABC)
このパターン分節は、以下の条件が連続的な受信入力イベントによって満たされたときにパターンマッチが認識されるだろうことを意味する:
状態1:1つのイベントタプルが、相関変数Aを規定する条件と一致し、その後、
状態2:ゼロ以上のタプルが相関変数Bと一致し、その後、
状態3:1つのタプルが相関可変Cと一致する。
状態1、状態2および状態3を含む状態は、パターン(ABC)についてのさまざまな状態を表わし得る。状態3はパターンについての最終状態である。パターンマッチが特定の状態であり、同じ特定の状態のままであり得るか、または、次のイベントのために特定の状態から次の状態まで移行し得る場合、これは、バインディングが大きくなる可能性があることを示唆している可能性がある。パターンは、バインディングが最終状態である場合に一致したとみなされてもよい。状態2である間、相関変数BおよびCの両方と一致するタプルまたはイベントが到達する場合(これによって、これら相関変数BおよびCの両方の規定条件が満たされるので)、Bについての修飾子がグリーディであれば、そのタプルはCではなくBと一致したとみなされる可能性がある。したがって、グリーディの特性があるために、BはCよりも優先され、より多くのBが一致する可能性がある。パターン表現がABC?である場合、Bに対してレイジーまたはリラクタントな修飾子が用いられ、さらに、BおよびCの両方と一致するタプルはCとしか一致しないものとして処理される可能性がある。このため、この例においては、CはBよりも優先される可能性があり、一致させるBの数がより少なくなる可能性がある。
上述のクエリQ1においては、パターン(AB)は以下の場合に一致する:
状態1:1つのイベントタプルが相関変数Aを規定する条件と一致し、その後、
状態2(最終状態):1つのタプルが相関変数Bと一致する。
状態1および状態2などの状態は、パターン(AB)についてのさまざまな実現可能な状態を表わし、状態2はパターンについての最終状態である。
上述および以下の技術は、いくつかの方法で、いくつかの文脈において実現され得る。いくつかの実現例および文脈が、添付の図面に関連付けて以下においてより詳細に提供される。しかしながら、以下の実現例および文脈は多数あるうちの数例に過ぎない。
図1は、多重入力データストリームにわたってパターンマッチングを実行するための技術が実現され得る簡略化された例示的なシステムまたはアーキテクチャ100を示す。アーキテクチャ100においては、1つ以上のユーザ102(たとえば口座名義人)はユーザコンピューティング装置104(1)〜140(N)(集合的に「ユーザ装置104」)を利用して、1つ以上のネットワーク108を介して1つ以上のサービスプロバイダコンピュータ106にアクセスし得る。いくつかの局面においては、サービスプロバイダコンピュータ106はまた、ネットワーク108を介して1つ以上のストリーミングデータソースコンピュータ110および/または1つ以上のデータベース112と通信し得る。たとえば、ユーザ102はサービスプロバイダコンピュータ106を利用して、ストリーミングデータソースコンピュータ110および/またはデータベース112のデータにアクセスするかまたは当該データを管理し得る(たとえば、クエリは110および112のいずれかまたは両方に対して実行され得る)。データベース112はリレーショナルデータベース、SQLサーバなどであってもよく、いくつかの例においては、ユーザ102の代わりに履歴データ、イベントデータ、リレーション、アーカイブされたリレーションなどを管理してもよい。加えて、データベース112は、ストリーミングデータソースコンピュータ110によって提供されるデータを受取るかまたは格納し得る。いくつかの例においては、ユーザ102はユーザ装置104を利用して、クエリ(「クエリステートメント」とも称される)またはデータについての他の要求(たとえば履歴イベントデータ、ストリーミングイベントデータなど)を提供することによってサービスプロバイダコンピュータ106と対話し得る。次いで、このようなクエリまたは要求がサービスプロバイダコンピュータ106によって実行されて、データベース112のデータおよび/またはストリーミングデータソースコンピュータ110からの受信データが処理され得る。さらに、いくつかの例においては、ストリーミングデータソースコンピュータ110および/またはデータベース112は、サービスプロバイダコンピュータ106に関連付けられた一体型の分散環境の一部であってもよい。
いくつかの例においては、ネットワーク108は、ケーブルネットワーク、インターネット、ワイヤレスネットワーク、セルラーネットワーク、イントラネットシステム、ならびに/または、他のプライベートネットワークおよび/もしくはパブリックネットワークなどの複数のさまざまなタイプのネットワークのうちのいずれかまたはそれらの組合せを含み得る。図示される例は、ネットワーク108を介してサービスプロバイダコンピュータ106にアクセスするユーザ102を表わしており、記載された技術は、ユーザ102が、地上通信電話によって1つ以上のユーザ装置104を介して、キオスク経由で、または他の方法で、1つ以上のサービスプロバイダコンピュータ106と対話する場合にも同様に適用され得る。なお、記載された技術が、他のクライアント/サーバ構成(たとえばセットトップボックスなど)において、ならびに非クライアント/サーバ構成(たとえば局所的に格納されたアプリケーションなど)においても同様に適用され得ることに留意されたい。
ユーザ装置104は、携帯電話、スマートフォン、携帯情報端末(personal digital assistant:PDA)、ラップトップコンピュータ、デスクトップコンピュータ、シンクライアントデバイス、タブレットPCなどの如何なるタイプのコンピューティング装置であってもよいが、これらに限定されない。いくつかの例においては、ユーザ装置104は、ネットワーク108を介して、または他のネットワーク接続を介して、サービスプロバイダコンピュータ106と通信してもよい。さらに、ユーザ装置104はまた、データベース112(または他のデータストア)のデータの処理を要求するための1つ以上のクエリまたはクエリステートメントを供給するように構成されてもよい。
いくつかの局面においては、サービスプロバイダコンピュータ106はまた、サーバなどのモバイル、デスクトップ、シンクライアントおよび/もしくはクラウドコンピューティング装置などの如何なるタイプのコンピューティング装置などであってもよいが、これらに限定されない。いくつかの例においては、サービスプロバイダコンピュータ106は、ネットワーク108を介して、または他のネットワーク接続を介してユーザ装置104と通信してもよい。サービスプロバイダコンピュータ106は、サーバファームとして、または互いに関連付けられない個々のサーバとして、場合によってはクラスタに配置される1つ以上のサーバを含み得る。これらのサーバは、この明細書中に記載されるような、CQLリレーションの管理、入力リレーションの生成、入力リレーションに関連付けられた構成可能なウィンドウオペレータ、および出力リレーションの生成を含むがこれらに限定されない、この明細書中に記載される特徴を実行またはホストするように構成されてもよい。加えて、いくつかの局面においては、サービスプロバイダコンピュータ106は、ストリーミングデータソースコンピュータ110および/もしくはデータベース112を含む一体型分散コンピューティング環境の一部として構成されてもよい。
具体的な一構成においては、サービスプロバイダコンピュータ106は、少なくとも1つのメモリ114および1つ以上の処理ユニット(またはプロセッサ)134を含み得る。プロセッサ134は、ハードウェア、コンピュータ実行可能命令、ファームウェアまたはこれらの組合せで、適宜実現され得る。プロセッサ134のコンピュータ実行可能命令またはファームウェア実現例は、記載されたさまざまな機能を実行するために好適なプログラミング言語で書込まれたコンピュータ実行可能命令またはマシン実行可能命令を含み得る。
メモリ114は、これらのプログラムの実行中に生成されるデータに加えて、プロセッサ134上でロード可能かつ実行可能なプログラム命令を格納してもよい。サービスプロバイダコンピュータ106の構成およびタイプに応じて、メモリ114は、揮発性(ランダムアクセスメモリ(random access memory:RAM)など)であってもよく、および/もしくは不揮発性(読取専用メモリ(read-only memory:ROM)、フラッシュメモリなど)であってもよい。サービスプロバイダコンピュータ106またはサーバはまた、リムーバブルストレージおよび/もしくは非リムーバブルストレージを含み得る追加の記憶装置136を含んでもよい。追加の記憶装置136は、磁気記憶装置、光ディスクおよび/もしくはテープ記憶装置を含み得るが、これらに限定されない。ディスクドライブおよびそれらの関連するコンピュータ読取可能媒体は、コンピューティング装置のためにコンピュータ読取可能命令、データ構造、プログラムモジュールおよび他のデータを不揮発的に格納し得る。いくつかの実現例においては、メモリ114は、スタティックランダムアクセスメモリ(static random access memory:SRAM)、ダイナミックランダムアクセスメモリ(dynamic random access memory:DRAM)またはROMなどの複数のさまざまなタイプのメモリを含み得る。
メモリ114および追加の記憶装置136はともに、取外し可能かつ取外し不可能であって、コンピュータ読取可能記憶媒体のあらゆる例となる。たとえば、コンピュータ読取可能記憶媒体は、コンピュータ読取可能命令、データ構造、プログラムモジュールまたは他のデータなどの情報を格納するためのいずれかの方法または技術において実現される揮発性または不揮発性の、取外し可能であるかまたは取外し不可能である媒体を含み得る。メモリ114および追加の記憶装置136はコンピュータ記憶媒体のあらゆる例となる。
サービスプロバイダコンピュータ106はまた、サービスプロバイダコンピュータ106が、ネットワーク108上で、格納されたデータベース、別のコンピューティング装置もしくはサーバ、ユーザ端末および/または他の装置と通信することを可能にする通信接続部138を含んでもよい。サービスプロバイダコンピュータ106はまた、キーボード、マウス、ペン、音声入力装置、タッチ入力装置、ディスプレイ、1つ以上のスピーカ、プリンタなどの入出力(input/output:I/O)装置140を含んでもよい。
メモリ114のコンテンツをより詳細に参照すると、メモリ114は、オペレーティングシステム124と、少なくとも入力データストリームモジュール116、ダイナミックデータタイプ生成モジュール118、結合データストリーム生成モジュール120およびパターン検知モジュール122を含む、この明細書中に開示される特徴を実現するための1つ以上のアプリケーションプログラムまたはサービスとを含み得る。この明細書中において用いられるように、モジュールは、サービスの一部でありサーバまたはサーバのクラスタによって実行されるプログラミングモジュールを指し得る。この特定のコンテキストにおいては、モジュールは、サービスプロバイダコンピュータ106の一部であるサーバまたはサーバのクラスタによって実行されてもよい。他の実施形態においては、モジュールは、サービスプロバイダコンピュータ106の一部であり得るCQLエンジンおよび/もしくは(図2に示される)CQサービス200によって実行されてもよい。さまざまな実施形態においては、以下に詳細に説明されるように、モジュール116、118、120および122は、複数の入力データストリームにわたるパターンの検出を可能にする機能を実行するように構成されてもよい。これらのモジュールは、ハードウェアで、ソフトウェアで、またはそれらの組合せで実現され得る。図1に示されるさまざまなモジュールは、説明を目的としたものであり、本発明の実施形態の範囲を限定するように意図されたものではない。代替的な実施形態に含まれ得るモジュールは、図1に示されるよりも多くてもまたは少なくてもよい。
一実施形態においては、入力データストリームモジュール116は、1つ以上の入力データストリーム126を受取るか、識別するか、生成するかまたは提供するように構成され得る。一例においては、入力データストリーム126は、1つ以上のアプリケーションに関するデータまたはイベントからなる受信連続データストリームを含み得る。いくつかの実施形態においては、入力データストリーム126は、データソースコンピュータ110および/もしくはデータベース112から受取られてもよい。
いくつかの例においては、入力データストリーム126は、1つ以上のアプリケーションに関する一連のタイムスタンプ付きタプルまたはデータ記録を含み得る。たとえば、入力データストリーム126におけるデータ記録は各々、以下のスキーマ(<time_stamp>,<attribute(s)>)によって表わされ得るイベントストリームエントリを含んでもよい。<attributes>はスキーマのデータ部分を表わし、1つ以上の属性を含み得る。
一例として、入力データストリーム126が第1のデータストリームおよび第2のデータストリームを含むものとする。この例のために、さらに、第1の入力データストリームが第1のアプリケーションに関するイベントの第1のセット(たとえばレンタカー予約アプリケーション)を含むものとし、第2の入力データストリームが第2のアプリケーションに関するイベントの第2のセット(たとえば飛行機予約アプリケーション)を含むものとする。加えて、第1の入力データストリームが第1のスキーマS1:(c1,整数,c2,整数)によって規定されるものとし、第2の入力データストリームが第2のスキーマS2:(c1,整数,c3,整数)によって規定されるものとする。
一実施形態においては、第1の入力データストリームおよび第2の入力データストリームを分析してパターンを検出してもよい。この場合、「パターン」は、第1のデータストリームにおけるイベントの発生と、後続する第2のデータストリームにおける別のイベントの発生とを構成し得る。一例においては、パターンマッチングは、受信した連続データストリームに連続クエリ(たとえばCQLクエリ)を適用することによって実行されてもよい。図2は、多重入力データストリームに対してCQLクエリを適用することによってパターンマッチングを実行するためのCQLエンジンおよび/もしくはCQサービス200のうち少なくとも1つの実現例を記載する。上述の説明は第1のデータストリームおよび第2のデータストリームにわたってパターンを検出することに関連しているが、開示された技術が、少なくともいくつかの実施形態においては、多重連続入力データストリームにわたるパターンの検出に適用され得ることが認識されるはずである。
いくつかの実施形態においては、入力データストリームの分析は、最初に、ダイナミックデータタイプ生成モジュール118によって実行されてもよい。一実施形態においては、ダイナミックデータタイプ生成モジュール118は、入力データストリームモジュール116から第1の入力データストリームおよび第2の入力データストリームを受取り、入力データストリームにおける1つ以上の属性を識別するように構成されてもよい。いくつかの例においては、ダイナミックデータタイプ生成モジュール118は、第1のデータストリームの第1の属性および第2のデータストリームの第2の属性を識別するように構成されてもよい。一例においては、第1の属性は、第2のデータストリームには存在しない属性として識別されてもよく、第2の属性は、第1のデータストリームには存在しない属性として識別されてもよい。
上に説明されたデータストリームS1およびデータストリームS2の例に従って、一実施形態においては、ダイナミックデータタイプ生成モジュール118は、第1の属性「c2」を、第2のデータストリームS2には存在しない第1のデータストリームS1における属性として識別してもよい。同様に、ダイナミックデータタイプ生成モジュール118は、第2の属性「c3」を、第1のデータストリームS1には存在しない第2のデータストリームS2における属性として識別してもよい。上述の説明は、ストリームS1およびストリームS2において識別された第1の属性および第2の属性に関するものであるが、他の実施形態においては、ダイナミックデータタイプ生成モジュール118が、ストリームS1およびストリームS2からの付加的な属性を識別するように構成され得ることが認識されるはずである。
いくつかの実施形態においては、ダイナミックデータタイプ生成モジュール118はさらに、第1の属性についての第1のダイナミックデータタイプおよび第2の属性についての第2のダイナミックデータタイプを生成するように構成されてもよい。一例においては、第1のダイナミックデータタイプは第1のデータストリームの第1の属性に対応する第1のデータ値を格納するように構成され、第2のダイナミックデータタイプは第2のデータストリームの第2の属性に対応する第2のデータ値を格納するように構成される。
いくつかの実施形態においては、ダイナミックデータタイプは、この明細書中において「フィールド」と称される1つ以上のメンバタイプを含む複合データタイプとして実現されてもよい。一例においては、メンバフィールドは名前および関連付けられたタイプを含んでもよい。フィールドタイプは、たとえばCQL拡張可能タイプなどの如何なるCQL固有のタイプであってもよい。いくつかの例においては、サービス(たとえば、図2に示されるCQLエンジンおよび/もしくはCQサービス200)は、ダイナミックデータタイプがそのパブリックフィールド(たとえばフィールド名、フィールドのデータタイプ)を指定することによって作成および規定され得る1つ以上のアプリケーションプログラミングインターフェイス(API:application programming interface)を提供することによって、ダイナミックデータタイプについてのCQL拡張可能タイプを実現するように構成されてもよい。
いくつかの実施形態においては、ダイナミックデータタイプ生成モジュール118は、第1のデータストリームおよび第2のデータストリームの両方に存在する属性として識別され得る共通属性を識別するように構成されてもよい。一実施形態においては、ダイナミックデータタイプ生成モジュール118はさらに、第1の入力データストリームおよび第2の入力データストリームを表わすために同種スキーマ128を生成するように構成されてもよい。一例においては、同種スキーマ128は、共通属性ならびに第1のダイナミックデータタイプおよび第2のダイナミックデータタイプを含む第1の入力データストリームおよび第2の入力データストリームの1つ以上の属性の表現を含み得る。
上述の第1の入力データストリームS1および第2の入力データストリームS2の例に従って、一実施形態においては、ストリームS1およびストリームS2についての同種スキーマSが以下のように生成され得る:
同種スキーマS:($streamName char, c1 int, S1 Typ1@DynamicTypeCartridge, S2 Typ2@DynamicTypeCartridge)
ここで、「$streamName」は、同種スキーマにおけるデータタイプチャーを有する属性を指す。「$streamName」属性は、入力データストリームから受信された入力タプル(イベント)の入力データストリームソースを識別する。イベント「e」について、「$streamName」属性は、「e」がイベントであるストリームエイリアスの名前を格納してもよい。これにより、「$streamName」属性は、現在の入力イベント(タプル)が属する特定の入力データストリームの識別を可能にする。「c1」は、同種スキーマにおける共通属性を指す。この場合、共通属性は、関与する入力データストリームすべてにおいて同じデータタイプおよび同じ名前を有する属性として識別される。たとえば、共通属性「c1」は、入力データストリームS1および入力データストリームS2に関する第1のアプリケーションおよび第2のアプリケーションにアクセスするユーザを識別するユーザ属性を指してもよい。いくつかの例においては、共通属性を含む同種スキーマは、PARTITION by分節の規格で、それ自体がさまざまな入力データストリームからのイベントを含み得るサブストリームを作成することを可能にし得る。
加えて、「Typ1@DynamicTypeCartridge」は、第1のデータストリームの第1の属性に対応する第1のデータ値を格納するように構成された第1のダイナミックデータタイプを指す。一例においては、「Typ1@DynamicTypeCartridge」は、第1の入力データストリームS1における第1の属性「c2」に対応するデータ値を格納するために用いられてもよい。一例として、第1の入力データストリームS1における第1の属性「c2」は、第1のアプリケーション(たとえばレンタカー予約アプリケーション)にアクセスするユーザから得られる自動車予約識別番号を格納する自動車予約属性を指し得る。
同様に、「Typ2@DynamicTypeCartridge」は、第2のデータストリームの第2の属性に対応する第2のデータ値を格納するように構成された第2のダイナミックデータタイプを指す。一例においては、「Typ2@DynamicTypeCartridge」は、第2の入力データストリームS2における第2の属性「c3」に対応するデータ値を格納するために用いられてもよい。一例として、第2の入力データストリームS2における第2の属性「c3」は、第2のアプリケーション(たとえば飛行機予約アプリケーション)にアクセスするユーザのために飛行機予約識別番号を格納する飛行予約属性を指し得る。
上述の例の場合、タイプ「Typ1@DynamicTypeCartridge」のS1についての1つの属性(たとえば「c2」)、およびタイプ「Typ2@DynamicTypeCartridge」のS2についての1つの属性(たとえば「c3」)が存在することが確認され得る。「Typ1@DynamicTypeCartridge」は、同じデータタイプのストリームS1の各属性ごとに1つのパブリックフィールドを含み得る。同様に、「Typ2@DynamicTypeCartridge」は、ストリームS2の各属性ごとに1つのパブリックフィールドを含み得る。Typ1およびTyp2が内部タイプであって、エンドユーザにとって可視可能ではないかもしれないことに留意されたい。検討された例に関して、Typ1はパブリックフィールド「c1」および「c2」を含んでもよく、Typ2はパブリックフィールド「c1」および「c3」を含んでもよい。
一実施形態においては、このように生成された同種スキーマに基づいて、結合データストリーム生成モジュール120は結合データストリームを生成するように構成され得る。一例においては、結合データストリームは、第1の入力データストリームおよび第2の入力データストリームのUNIONを実行することによって生成されてもよい。この場合、第1の入力データストリームおよび第2の入力データストリームは、同種スキーマSによって表現される。一例においては、CQL UNION ALLサブクエリは、同種スキーマに基づいてストリームS1およびストリームS2の結果セットを結合するために第1のデータストリームS1および第2のデータストリームS2に適用されてもよい。同種スキーマを生成することにより、UNION ALLサブクエリ内の各々のCQL SELECTステートメントが、結果セットにおける同数のフィールドおよび類似のデータタイプを有することが可能となる。したがって、ストリームS1およびストリームS2の結果セットは、同種スキーマに基づいてUNION ALLサブクエリにおけるSELECTステートメントを用いて結合されてもよい。UNION ALLサブクエリを用いて第1のデータストリームと第2のデータストリームとを結合して結合データストリームを生成し得る態様を、図4において説明する。
いくつかの実施形態においては、パターン検出モジュール122は、さらに、結合データストリームに基づいてパターン132を検出するように構成されてもよい。一実施形態においては、パターン検出モジュールは、結合データストリームにMATCH_RECOGNIZE分節を適用することによってパターンマッチを出力するように構成されてもよい。一例として、検出されたパターンは、第1の入力データストリームS1における第1のイベント(たとえばユーザによる自動車予約)の到着と、後続する第2の入力データストリームS2における第2のイベント(たとえばユーザへの飛行機チケット発行)の到着とを含み得る。多重入力データストリームを識別するパターン認識をCQLクエリで実行するようにパターン検出モジュールが構成され得る態様を、図3において説明する。
図2は、多重入力データストリームにわたってパターンを検出するための特徴が記載され得る簡略化されたブロック図を示す。図示のとおり、図2は、多重入力データストリームを管理するためのCQLエンジンおよび/またはCQサービス200の少なくとも1つの実現例を示す。いくつかの実施形態においては、図1に示されるモジュール116、118、120および122は、CQLエンジンおよび/もしくはCQサービス200によって実行され得る。CQLエンジンおよび/もしくはCQサービス200は、最初に、入力ソース204から情報を受取ってもよい。一例においては、入力ソース204は、1つ以上のアプリケーションに関するデータまたはイベントのストリームを含む連続入力データストリームを受取るデータソースコンピュータ110を含み得る。いくつかの実施形態においては、第1の入力データストリームS1 206および第2の入力データストリームS2 208を含むクエリ(たとえばCQLクエリ)が識別されるかまたは受取られると、CQLエンジン200は、ストリームS1およびストリームS2にわたってパターンを検出するためにクエリをパーズし得る。一実施形態においては、CQLエンジンおよび/またはCQサービス200は、第1の入力データストリームおよび第2の入力データストリームのUNIONを最初に実行することによってCQLクエリを実行してもよい。この場合、第1の入力データストリームおよび第2の入力データストリームは同種スキーマSによって表現される。一実施形態においては、同種スキーマSは、図1において説明されるようなダイナミックデータタイプ生成モジュール118によって生成されてもよい。
次いで、入力データストリームS1および入力データストリームS2が結合されて、同種スキーマに基づく結合データストリームが生成され得る。一実施形態においては、結合データストリームは結合データストリームモジュール120によって生成されてもよい。次いで、パターン検出モジュール122が、結合データストリームに対する連続クエリ(たとえばCQLクエリ)を処理して、入力データストリームにわたってパターンを検出し得る。一実施形態においては、パターン検出モジュールは、結合データストリームに対してMATCH_RECOGNIZE分節を適用することによって、パターンマッチを出力するように構成されてもよい。いくつかの例においては、CQLエンジンおよび/またはCQサービス200は、次いで、たとえば図1に示されるデータベース112におけるような出力宛先212において検出されたパターンを格納し得る。
図3は、本開示の一実施形態に従った、多重入力データストリームを識別するCQLクエリを用いてパターン認識を実行する具体例である。一例においては、クエリ300は、第1の入力データストリームS1および第2の入力データストリームS2にわたって一致させるべきパターンを指定する連続的な(たとえばCQL)クエリである。図3に示される例においては、ストリームS1およびストリームS2は括弧に囲まれてカンマで分離されたリストにおいて指定され、MATCH_RECOGNIZE分節への入力として与えられる。結果として、クエリ300のFROM分節は以下の式(S1,S2)MATCH_RECOGNIZEを用いて、好都合に表現され得る。いくつかの例においては、リストにおける各々のストリームは、ベースストリームとして、ストリームに対するビューの評価として、またはストリームに対するサブクエリの評価として識別されてもよい。
上述のようなカンマで分離されたリストを用いてストリームS1およびストリームS2が指定される場合、関与するストリームの各々は別個のエイリアスで識別される必要があるかもしれない。そのため、たとえば、MATCH_RECOGNIZE分節が{S,S}に対して適用される場合、FROM分節は(S,S AS S1)MATCH_RECOGNIZE)として指定される必要があるかもしれない。すなわち、任意のAS分節は、第2のストリームSを別名で記載して別個のエイリアス名を確実にするために導入される必要があるかもしれない。なお、明確なAS分節が指定されない場合、他の例においてストリーム名がエイリアス名とみなされる可能性があることに留意されたい。
いくつかの実施形態においては、カンマで分離されたリストとしてのストリームS1およびストリームS2の表現は、入力データストリームS1および入力データストリームS2のUNIONと評価され得る。この場合、ストリームS1およびストリームS2は同種スキーマによって規定される。一実施形態においては、図4において詳細に説明されるように、結合データストリームは、UNION ALLサブクエリの実行に基づいて生成されてもよく、結合データストリームはMATCH_RECOGNIZE分節への入力として供給されてもよい。次いで、MATCH_RECOGNIZEが結合データストリームにおけるパターンを検出するために利用されてもよい。
上述のように、MATCH_RECOGNIZE分節を用いると、ユーザは、受信したイベントの属性に関する条件を規定し、相関変数と称される識別子を用いることによってパターンマッチングについての条件を識別することができる。パターン認識機能は、ユーザが、受信したイベントまたはタプルの属性に関する条件を規定し、相関変数と称される文字列名を用いることによってこれらの条件を識別することを可能にする。
クエリ300においては、「A」は相関変数である。一致させるべきパターンは、この相関変数に関する正規表現として指定されており、条件が有効な一致と認識されるべきさまざまな受信イベントによって満たされるべきである順番または順序を決定する。一例においては、これらの条件を満たす入力データストリームS1および入力データストリームS2における連続イベントの順番がパターンを構成する。一実施形態においては、MATCH_RECOGNIZEクエリの出力はストリームである。
図4は、本開示の別の実施形態に従った、多重入力データストリームを識別するCQLクエリを用いてパターン認識を実行する具体例である。一実施形態においては、図4に示されるクエリ400は、クエリ300のFROM分節の内部表現を示す。一例においては、FROM分節は、ストリームS1およびストリームS2のUNION ALLサブクエリとして表現されてもよく、この場合、ストリームS1およびストリームS2は同種スキーマによって表現される。
図4に示される例に関して、ストリームS1およびストリームS2を表わす同種スキーマは以下のように生成されてもよい:
同種スキーマS:($streamName char, c1 int, ELEMENT_TIME int, S1 Typ1@DynamicTypeCartridge, S2 Typ2@DynamicTypeCartridgeCartridge)
ここで、「Typ1@DynamicTypeCartridge」は、ストリームS2中に存在しないストリームS1の属性のために生成された第1のダイナミックデータタイプを表わす。同様に、「Typ2@DynamicTypeCartridge」は、ストリームS1中に存在しないストリームS2の属性のために生成された第2のダイナミックデータタイプを表わす。図4に示される例に関して、「Typ1@DynamicTypeCartridge」は、ストリームS2中に存在しないストリームS1における第1の属性「c2」についての第1のダイナミックデータタイプを表わし、「Typ2@DynamicTypeCartridge」は、ストリームS1中に存在しないストリームS2における第2の属性「c3」についての第2のダイナミックデータタイプを表わす。
一実施形態においては、上述のダイナミックデータタイプおよび同種スキーマを生成することによって、ストリームS1およびストリームS2の個別ストリーム特有の属性に以下のようにアクセスすることが可能となり得る。実行時には、ストリームS1から受取られたイベントに関して、「Typ1@DynamicTypeCartridge」ダイナミックデータタイプは、表現「Typ1@DynamicTypeCartridge(c1, c2)AS S1」を用いて、S2に存在しないストリームS1からの第1の属性「c2」を表わすように構成されてもよく、「Typ2@DynamicTypeCartridge」ダイナミックデータタイプは、式「Typ2@DynamicTypeCartridge( ) AS S2」を用いて、S1に存在しないストリームS2からの第2の属性「c3」を表わすように構成されてもよい。一例においては、「Typ2@DynamicTypeCartridge」は、受取られたイベントについてのストリームS2の第2の属性「c3」のNULL値を格納してもよい。
同様に、ストリームS2から受取られたイベントに関して、「Typ1@DynamicTypeCartridge」ダイナミックデータタイプは、S2に存在しないストリームS1からの第1の属性(「c2」)を「Typ1@DynamicTypeCartridge()AS S1」として表わし、属性「c2」についてのNULL値を格納するように構成されてもよい。加えて、「Typ2@DynamicTypeCartridge」は、表現「Typ2@DynamicTypeCartridge(c1, c3) AS S2」を用いて、S1に存在しないストリームS2からの第2の属性「c3」を表わすように構成されてもよい。一実施形態においては、上述のダイナミックデータタイプ表現を用いて、属性「c2」がCQLクエリにおいてS1.c2としてアクセスされてもよく、属性「c3」はCQLクエリにおいてS2.c3としてアクセスされてもよい。
加えて、図4に示される例においては、属性「c1」および「ELEMENT_TIME」(タイムスタンプ値)は共通属性として識別されてもよい。いくつかの例においては、共通属性「c1」はA.c1またはA.S1.c1として同種スキーマを用いてアクセスされてもよい。いくつかの例においては、PARTITION BY分節も共通属性にアクセスするために用いられてもよい。
上述の同種スキーマおよびダイナミックデータタイプの生成により、UNION ALLクエリ内の各々のCQL SELECTステートメントが結果セットにおける同数のフィールドおよび類似のデータタイプを有することが可能になることが認識され得る。加えて、ダイナミックデータタイプは、特定のストリームに属さない属性に「NULL」値を割当てることを可能にする。一実施形態においては、次いで、ストリームS1およびストリームS2の結果セットは、CQL UNION ALLサブクエリを適用してストリームS1およびストリームS2の結果セットを結合することによって、同種スキーマに基づいて結合データストリームを生成するように結合されてもよい。結合データストリームが生成され得る態様が、以下の非限定的な例を用いて説明され得る。
一例として、第1の入力データストリームS1が以下のイベントおよび関連するタイムスタンプを受取るものとする。

(<timestamp 1000>, <C1 1, C2 5>)
(<timestamp 2000>, <C1 1,C2 10>)
(<timestamp 3000>, <C1 1 C2 15>)

同様に、第2の入力データストリームS2が以下のイベントおよび関連するタイムスタンプを受取るものとする。

(<timestamp 1000>, <C1 1, C3 5>)
(<timestamp 2000>, <C1 1,C3 10>)
(<timestamp 3000>, <C1 1 C3 15>)

上述のストリームS1およびストリームS2の結果セットを結合して、以下に示されるような結合データストリームを生成してもよい。一例においては、結合データストリームは、上述のような同種スキーマに基づいて、UNION ALLサブクエリにおけるSELECTステートメントを用いて結合され得るストリームS1およびストリームS2の結果セットを含む。一例においては、結合データストリームは、以下の同種スキーマ($streamName,c1,S1.c2,S2,c3)によって識別され、以下のイベントおよび関連するタイムスタンプを含んでもよい。

(<timestamp 1000>, <S1, C1 1, C2 5, NULL>)
(<timestamp 1000>, <S2, C1 1, C2 NULL, C3 5>)
(<timestamp 2000>, <S1, C1 1, C2 10, C3 NULL>)
(<timestamp 2000>, <S2, C1 1, C2 NULL, C3 10>)
(<timestamp 3000>, <S1, C1 1, C2 1, C3 NULL>)
(<timestamp 3000>, <S2, C1 1, C2 NULL, C3 15>)

図5および図6は、この明細書中に記載される、多重入力データストリームにわたるパターンの検出を実現するためのそれぞれのプロセス500および600を示す例示的なフロー図である。これらのプロセス500および600は論理的なフロー図として示され、それらの各々の動作は、ハードウェア、コンピュータ命令またはそれらの組合せで実現することができる一連の動作を表わしている。コンピュータ命令のコンテキストにおいては、動作は、1つ以上のコンピュータ読取可能記憶媒体上に格納されたコンピュータ実行可能命令を表わす。これらコンピュータ実行可能命令は、1つ以上のプロセッサによって実行されたときに列挙された動作を実行する。一般に、コンピュータ実行可能命令は、特定の機能を実行するかまたは特定のデータタイプを実現するルーチン、プログラム、オブジェクト、構成要素、データ構造などを含む。動作が記載されている順序は、限定するものとして解釈されるよう意図されるものではなく、記載される動作の番号はいずれも如何なる順序で組合せされてもよく、および/または並行してプロセスを実現してもよい。
加えて、プロセスのうちいくつか、いずれかまたはすべてが、実行可能命令を用いて構成された1つ以上のコンピュータシステムの制御下で実行されてもよく、1つ以上のプロセッサ上で、ハードウェアによって、またはそれらの組合せによって、集合的に実行されるコード(たとえば、実行可能命令、1つ以上のコンピュータプログラムまたは1つ以上のアプリケーション)として実現されてもよい。上述のように、コードは、たとえば、1つ以上のプロセッサによって実行可能な複数の命令を含むコンピュータプログラムの形式で、コンピュータ読取可能記憶媒体に格納されてもよい。コンピュータ読取可能記憶媒体は非一時的であってもよい。
図5は、本開示の一実施形態に従って、多重入力データストリームにわたってパターンを検出するためのプロセスを示す高レベルフローチャートである。いくつかの例においては、少なくとも図1(など)に示される(たとえば、少なくとも入力データストリームモジュール116、ダイナミックデータタイプ生成モジュール118、結合データストリーム生成モジュール120、またはパターン検出モジュール122を利用する)1つ以上のサービスプロバイダコンピュータ106は、図5のプロセス500を実行し得る。プロセス500は、第1の入力データストリームおよび第2の入力データストリームを識別するステップおよび/または受取るステップを含め、ステップ502から開始されてもよい。
504において、プロセス500は、第1の入力データストリームおよび第2の入力データストリームを表現するために同種スキーマを生成するステップを含み得る。同種スキーマが生成され得るプロセスが図6において詳細に説明される。
506において、プロセス500は、第1の入力データストリームと第2の入力データストリームとを結合して、同種スキーマに基づく結合データストリームを生成するステップを含み得る。一実施形態においては、結合データストリームを生成するステップは、第1の入力データストリームから(第1のCQL SELECTステートメントを介して)タプルの第1のセットを選択するステップと、第2の入力ストリームから(第1のCQL SELECTステートメントを介して)タプルの第2のセットを選択するステップと、タプルの第1のセットおよびタプルの第2のセットにわたってサブクエリ(たとえば、UNION allサブクエリ)を処理して、結合データストリームを生成するステップとを含み得る。上述のとおり、同種スキーマを生成することにより、UNION ALLサブクエリ内の各々のCQL SELECTステートメントが、結果セットにおける同数のフィールドおよび類似のデータタイプを有することが可能になる。したがって、ストリームS1およびストリームS2の結果セットは、結合データストリームを生成するために、同種スキーマに基づいてUNION ALLサブクエリにおけるSELECTステートメントを用いて結合されてもよい。
508において、プロセス500は、結合データストリームにわたって連続クエリ(たとえばCQLクエリ)を処理してパターンを識別するステップを含み得る。一実施形態においては、UNION ALLサブクエリの実行に基づいて生成された結合データストリームは、MATCH_RECOGNIZE分節への入力として供給されてもよい。図3において説明されたように、MATCH_RECOGNIZE分節を用いて、結合データストリームにわたってCQLクエリを処理して、結合データストリームにおけるパターンを検出してもよい。
図6は、本開示の一実施形態に従って、同種スキーマを生成するためのプロセスを示す高レベルのフローチャートである。一実施形態においては、プロセス600は、図5において説明されたプロセス504の実行をより詳細に説明する。
602において、プロセス600は、第1の入力データストリームの第1の属性を識別するステップを含み得る。
604において、プロセスは、第2の入力データストリームの第2の属性を識別するステップを含み得る。一実施形態においては、第1の属性は、第2の入力データストリーム中に存在しない属性として識別されてもよく、第2の属性は、第1の入力データストリーム中に存在しない属性として識別されてもよい。
606において、プロセス600は、第1の入力データストリームの第1の属性を表現するために第1のダイナミックデータタイプを生成するステップを含み得る。608において、プロセス600は、第2の入力データストリームの第2の属性を表現するために第2のダイナミックデータタイプを生成するステップを含み得る。
610において、プロセス600は共通属性を識別するステップを含み得る。一実施形態においては、共通属性は、第1の入力データストリームおよび第2の入力データストリーム中に存在する属性として識別されてもよい。
612において、プロセス600は、同種スキーマを生成するステップを含み得る。一実施形態においては、図2に詳細に示されるように、同種スキーマは、第1の入力データストリームおよび第2の入力データストリームの1つ以上の属性の表現を含み得る。この表現は、少なくとも、共通属性、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプを含む。
図7は、本開示の実施形態を援用し得るイベント処理システム700を示す簡略化された高レベル図である。イベント処理方式700は、1つ以上のイベントソース(704、706、708)、イベントストリームを処理するための環境を提供するように構成されるイベント処理サーバ(event processing server:EPS)702、ならびに1つ以上のイベントシンク(710および712)を含み得る。イベントソースは、EPS702によって受取られるイベントストリームを生成する。EPS702は、1つ以上のイベントソースから1つ以上のイベントストリームを受取ってもよい。たとえば、図7に示されるように、EPS702は、イベントソース704から入力イベントストリーム714を受取り、イベントソース706から第2の入力イベントストリーム716を受取り、イベントソース708から第3のイベント718を受取る。1つ以上のイベント処理アプリケーション(720、722および724)は、EPS702上でデプロイされ、EPS702によって実行されてもよい。EPS702によって実行されるイベント処理アプリケーションは、1つ以上の入力イベントストリームに従い、1つ以上のイベントを注目すべきイベントとして入力イベントストリームから選択する処理ロジックに基づいて1つ以上のイベントストリームを介して受取られたイベントを処理するように構成され得る。次いで、注目すべきイベントは、1つ以上の出力イベントストリームの形式で1つ以上のイベントシンク(710,712)に送信されてもよい。たとえば、図7においては、EPS702は、イベントストリーム726をイベントシンク710に出力し、第2の出力イベントストリーム728をイベントシンク712に出力する。いくつかの実施形態においては、イベントソース、イベント処理アプリケーションおよびイベントシンクは、互いの構成要素に変化をもたらすことなく、これらの構成要素のうちのいずれかを追加するかまたは削除することができるように分離される。
一実施形態において、EPS702を、サービスを共有するEquinox OSGiをベースとするもののような軽量Java(登録商標)アプリケーションコンテナを含むJavaサーバとして実現してもよい。いくつかの実施形態において、EPS702は、たとえばJRockit Real Timeを用いてイベント処理の超高スループットおよびマイクロ秒レイテンシをサポートし得る。EPS702はまた、イベント処理アプリケーションを開発するためのツール(たとえばOracle CEP VisualizerおよびOracle CEP IDE)を含む開発プラットフォーム(たとえば完全なリアルタイムエンドツーエンドJavaイベントドリブンアーキテクチャ(Event-Driven Architecture)(EDA)開発プラットフォーム)を提供し得る。
イベント処理アプリケーションは、1つ以上の入力イベントストリームに従い、この1つ以上の入力イベントストリームから注目すべき1つ以上のイベントを選択するためにロジック(たとえばクエリ)を実行し、選択した注目すべきイベントを1つ以上の出力イベントストリームを介して1つ以上のイベントソースに出力するように構成される。図7は、このようなイベント処理アプリケーション720のためのドリルダウンを提供する。図7に示されるように、イベント処理アプリケーション720は、入力イベントストリーム718に従い、入力イベントストリーム718から1つ以上の注目すべきイベントを選択するためのロジックを含むクエリを、CQLエンジン/CQサービス200を介して実行し、選択された注目すべきイベントを出力イベントストリーム728を介してイベントシンク712に出力するように構成される。イベントソースの例は、アダプタ(たとえばJMS、HTTP、およびファイル)、チャネル、プロセッサ、テーブル、キャッシュ等を含むがこれらに限定されない。イベントシンクの例は、アダプタ(たとえばJMS、HTTP、およびファイル)、チャネル、プロセッサ、キャッシュなどを含むがこれらに限定されない。
図7のイベント処理アプリケーション720は、1つの入力ストリームをリッスンし選択したイベントを1つの出力ストリームを介して出力するものとして示されているが、これは限定を意図したものでない。これに代わる実施形態においては、イベント処理アプリケーションは、1つ以上のイベントソースから受信した複数の入力ストリームをリッスンし、モニタリングされたストリームからイベントを選択し、選択したイベントを1つ以上の出力イベントストリームを介して1つ以上のイベントシンクに出力するように構成されてもよい。同一のクエリを2つ以上のイベントシンクに関連付け異なる種類のイベントシンクに関連付けてもよい。
その性質上無制限なので、1つのイベントストリームを介して受信されるデータの量は通常非常に多い。結果として、クエリを目的としてすべてのデータを格納またはアーカイブすることは、通常実用的でなく望ましくない。イベントストリームを処理するには、イベントをEPS702が受信したときに、受信したイベントデータをすべて格納することなく、イベントをリアルタイムで処理することが必要である。したがって、EPS702は、EPS702がイベントを受信したときに、受信したイベントをすべて格納することなく、イベントを処理できるようにする、特別なクエリ機構を提供する。
イベントドリブンのアプリケーションはルールドリブンであり、これらルールは、入力ストリームを処理するのに使用される連続クエリの形態で表わしてもよい。連続クエリは、クエリ処理の結果として注目すべきイベントおよび出力としてどんなイベントが選択されるべきであるかを含め、受信したイベントに対して実行すべき処理を特定する命令(たとえばビジネスロジック)を含み得る。連続クエリは、データ記憶装置まで持続させて、イベントの入力ストリームの処理およびイベントの出力ストリームの生成のために使用してもよい。連続クエリは、典型的には、発見すべきフィルタリングおよび集約関数を実行し入力イベントストリームから注目すべきイベントを抽出してもよい。結果として、出力イベントストリームにおけるアウトバウンドのイベントの数は通常、イベントを選択する元になる入力イベントストリームにおけるイベントの数よりも遥かに少ない。
有限データ集合に対して一度実行されるSQLクエリと異なり、特定のイベントストリームに対してアプリケーションによりEPS702に登録された連続クエリは、このイベントストリーム内のイベントが受信されるたびに実行されてもよい。連続クエリ実行の一部として、EPS702は、受信したイベントを、連続クエリが指定する命令に基づいて評価して、1つ以上のイベントが注目すべきイベントとして選択されるべきであるかどうかを判断し、連続クエリ実行の結果を出力する。
連続クエリは異なる言語を用いてプログラムしてもよい。ある実施形態において、連続クエリは、Oracle社が提供するCQLを用いて構成されOracle社の複合イベント処理(Complex Events Processing)(CEP)という製品によって使用されてもよい。Oracle社のCQLは、イベントストリームに対して実行することができるクエリ(CQLクエリと呼ばれる)をプログラムするのに使用できる宣言型言語である。ある実施形態において、CQLは、ストリーミングイベントデータの処理をサポートする構成が追加されたSQLに基づく。
一実施形態において、イベント処理アプリケーションは、以下の種類の構成要素で構成されてもよい。
(1)入力および出力ストリームならびにリレーションソースおよびシンクに直接インターフェイスする1つ以上のアダプタ。アダプタは、入力および出力ストリームプロトコルを解釈するように構成され、イベントデータを、アプリケーションプロセッサがクエリできる標準化された形態に変換する役割を担う。アダプタは、標準化されたイベントデータを、チャネルまたは出力ストリームおよびリレーションシンクに転送してもよい。イベントアダプタを、さまざまなデータソースおよびシンクに対して定めてもよい。
(2)イベント処理のエンドポイントとして作用する1つ以上のチャネル。特に、チャネルは、イベント処理エージェントがイベントデータに対して機能を発揮できるようになるまでイベントデータをキューに保管する役割を担う。
(3)1つ以上のアプリケーションプロセッサ(またはイベント処理エージェント)は、チャネルからの標準化されたイベントデータを消費(consume)し、これをクエリを用いて処理することにより、注目すべきイベントを選択し、選択した注目すべきイベントを出力チャネルに転送(またはコピー)するように構成される。
(4)1つ以上のビーン(bean)は、出力チャネルをリッスンするように構成され、新たなイベントが出力チャネルに挿入されたことによってトリガされる。いくつかの実施形態において、このユーザコードは、昔からある単なるJavaオブジェクト(plain-old-Java-object)(POJO)である。ユーザアプリケーションは、JMS、ウェブサービス、ファイルライター等の一組の外部サービスを利用して、生成されたイベントを外部イベントシンクに転送することができる。
(5)イベントビーンは、出力チャネルをリッスンするように登録されてもよく、出力チャネルに新しいイベントを挿入することによってトリガされる。いくつかの実施形態においては、このユーザコードはオラクルCEPイベントビーンAPIを用いて、このビーンをオラクルCEPによって管理することができるようにしてもよい。
一実施形態においては、イベントアダプタは、イベントデータを入力チャネルに与える。入力チャネルは、入力チャネルが与えるイベントに対して機能する1つ以上のCQLクエリに関連付けられたCQLプロセッサに接続される。CQLプロセッサは、クエリ結果が書込まれる出力チャネルに接続される。
いくつかの実施形態において、イベント処理アプリケーションに対し、イベント処理アプリケーションのさまざまな構成要素を説明しどのようにして構成要素同士が接続されるかを説明しアプリケーションによって処理されるイベントタイプを説明するアセンブリファイルを与えてもよい。イベントを選択するための連続クエリまたはビジネスロジックを指定するために別々のファイルを与えてもよい。
図7に示されるシステム700が図7に示される構成要素以外の構成要素を有し得ることが理解されるはずである。さらに、図7に示される実施形態は、本開示の実施形態を組込み得るシステムの一例に過ぎない。他のいくつかの実施形態においては、システム700が有する構成要素の数は図7に示されるものよりも多くても少なくてもよく、2つ以上の構成要素を組合せてもよく、または、構成要素の構成または配置が異なっていてもよい。システム700は、パーソナルコンピュータ、ポータブルデバイス(たとえば携帯電話または装置)、ワークステーション、ネットワークコンピュータ、メインフレーム、キオスク、サーバ、またはその他何等かのデータ処理システムを含むさまざまな種類のものであってもよい。他のいくつかの実施形態において、システム700を、システム700の1つ以上の構成要素がクラウド内の1つ以上のネットワークに分散している分散システムとして構成してもよい。
図7に示される構成要素のうちの1つ以上は、ソフトウェア、ハードウェア、またはその組合せにおいて実現し得る。いくつかの実施形態において、ソフトウェアは、メモリ(たとえば非一時的なコンピュータ読取可能な媒体)に、メモリ素子に、または何等かのその他の物理メモリに格納されてもよく、1つ以上の処理部(たとえば1つ以上のプロセッサ、1つ以上のプロセッサコア、2つ以上のGPUなど)によって実行されてもよい。
図のいくつかに示されるシステムは、さまざまな構成で設けられてもよい。いくつかの実施形態においては、システムは、当該システムの1つ以上の構成要素がクラウドコンピューティングシステムにおける1つ以上のネットワークを介して分散されている分散型システムとして構成されてもよい。
図8は、いくつかの実施形態のうちの1つの実施形態を実現するための分散型システム800の簡略図を示す。図示される実施形態においては、分散型システム800は、1つ以上のネットワーク810を介して、ウェブブラウザ、プロプライエタリクライアント(たとえばオラクルフォーム)などのクライアントアプリケーションを実行して動作させるように構成される1つ以上のクライアントコンピューティング装置802、804、806および808を含む。サーバ812は、ネットワーク810を介してリモートクライアントコンピューティング装置802、804、806および808と通信可能に結合されてもよい。
さまざまな実施形態においては、サーバ812は、システムの構成要素のうち1つ以上によって提供される1つ以上のサービスまたはソフトウェアアプリケーションを実行するように適合されてもよい。サービスまたはソフトウェアアプリケーションは非仮想環境および仮想環境を含み得る。仮想環境は、2次元または三次元(3D)表現、ページベースの論理的環境などであろうとなかろうと、仮想イベント、トレードショー、シミュレータ、クラスルーム、購買商品取引および企業活動のために用いられるものを含み得る。いくつかの実施形態においては、これらのサービスは、ウェブベースのサービスもしくはクラウドサービスとして、またはソフトウェア・アズ・ア・サービス(Software as a Service:SaaS)モデルのもとで、クライアントコンピューティング装置802,804,806および/または808のユーザに供給されてもよい。そして、クライアントコンピューティング装置802,804,806および/または808を動作させるユーザは、1つ以上のクライアントアプリケーションを利用して、サーバ812と相互作用して、これらの構成要素によって提供されるサービスを利用し得る。
図に示されている構成では、システム800のソフトウェアコンポーネント818,820および822は、サーバ812上に実装されるように示されている。また、他の実施形態においては、システム800の構成要素のうちの1つ以上および/またはこれらの構成要素によって提供されるサービスは、クライアントコンピューティング装置802,804,806および/または808のうちの1つ以上によって実現されてもよい。その場合、クライアントコンピューティング装置を動作させるユーザは、1つ以上のクライアントアプリケーションを利用して、これらの構成要素によって提供されるサービスを使用し得る。これらの構成要素は、ハードウェア、ファームウェア、ソフトウェア、またはそれらの組合せで実現されてもよい。分散システム800とは異なり得るさまざまな異なるシステム構成が可能であることが理解されるべきである。したがって、図に示されている実施形態は、実施形態のシステムを実現するための分散システムの一例であり、限定的であるよう意図したものではない。
クライアントコンピューティング装置802,804,806および/または808は、手持ち式携帯機器(たとえばiPhone(登録商標)、携帯電話、iPad(登録商標)、計算タブレット、パーソナルデジタルアシスタント(personal digital assistant:PDA))またはウェアラブル装置(たとえばグーグルグラス(登録商標)ヘッドマウントディスプレイ)であってもよく、当該装置は、マイクロソフト・ウィンドウズ・モバイル(登録商標)などのソフトウェアを実行し、および/または、iOS、ウィンドウズ・フォン、アンドロイド、ブラックベリー10、パームOSなどのさまざまなモバイルオペレーティングシステムを実行し、インターネット、eメール、ショート・メッセージ・サービス(short message service:SMS)、ブラックベリー(登録商標)、または使用可能な他の通信プロトコルである。クライアントコンピューティング装置は、汎用パーソナルコンピュータであってもよく、当該汎用パーソナルコンピュータは、一例として、マイクロソフトウィンドウズ(登録商標)、アップルマッキントッシュ(登録商標)および/またはリナックス(登録商標)オペレーティングシステムのさまざまなバージョンを実行するパーソナルコンピュータおよび/またはラップトップコンピュータを含む。クライアントコンピューティング装置は、ワークステーションコンピュータであってもよく、当該ワークステーションコンピュータは、たとえばGoogle Chrome OSなどのさまざまなGNU/リナックスオペレーティングシステムを含むがこれらに限定されるものではないさまざまな市販のUNIX(登録商標)またはUNIXライクオペレーティングシステムのうちのいずれかを実行する。代替的に、またはさらに、クライアントコンピューティング装置802,804,806および808は、シン・クライアントコンピュータ、インターネットにより可能なゲームシステム(たとえばキネクト(登録商標)ジェスチャ入力装置を備えるかまたは備えないマイクロソフトXボックスゲーム機)、および/または、ネットワーク810を介して通信が可能なパーソナルメッセージング装置などのその他の電子装置であってもよい。
例示的な分散システム800は、4個のクライアントコンピューティング装置を有するように示されているが、任意の数のクライアントコンピューティング装置がサポートされてもよい。センサを有する装置などの他の装置が、サーバ812と相互作用してもよい。
分散システム800におけるネットワーク810は、さまざまな市販のプロトコルのうちのいずれかを用いてデータ通信をサポートすることができる、当業者になじみのある任意のタイプのネットワークであってもよく、当該プロトコルは、TCP/IP(伝送制御プロトコル/インターネットプロトコル)、SNA(システムネットワークアーキテクチャ)、IPX(インターネットパケット交換)、アップルトークなどを含むが、これらに限定されるものではない。単に一例として、ネットワーク810は、イーサネット(登録商標)、トークンリングなどに基づくものなどのローカルエリアネットワーク(LAN)であってもよい。ネットワーク810は、広域ネットワークおよびインターネットであってもよい。ネットワーク810は、仮想ネットワークを含んでいてもよく、当該仮想ネットワークは、仮想プライベートネットワーク(virtual private network:VPN)、イントラネット、エクストラネット、公衆交換電話網(public switched telephone network:PSTN)、赤外線ネットワーク、無線ネットワーク(たとえば米国電気電子学会(Institute of Electrical and Electronics:IEEE)802.11の一連のプロトコル、ブルートゥース(登録商標)および/またはその他の無線プロトコルのうちのいずれかのもとで動作するネットワーク)、および/またはこれらの任意の組合せ、および/または他のネットワークを含むが、これらに限定されるものではない。
サーバ812は、1つ以上の汎用コンピュータ、専用サーバコンピュータ(一例として、PC(パーソナルコンピュータ)サーバ、UNIX(登録商標)サーバ、ミッドレンジサーバ、メインフレームコンピュータ、ラックマウント式サーバなどを含む)、サーバファーム、サーバクラスタ、またはその他の適切な構成および/または組合せで構成され得る。サーバ812は、仮想オペレーティングシステムを実行する1つ以上の仮想マシン、または仮想化を含む他のコンピューティングアーキテクチャを含み得る。論理記憶装置の1つ以上のフレキシブルプールは、サーバのための仮想記憶デバイスを維持するように仮想化することができる。仮想ネットワークは、ソフトウェア定義型ネットワーキングを用いて、サーバ812によって制御することができる。さまざまな実施形態においては、サーバ812は、上記の開示に記載されている1つ以上のサービスまたはソフトウェアアプリケーションを実行するように適合され得る。たとえば、サーバ812は、本開示の実施形態に係る上記の処理を実行するためのサーバに対応してもよい。
サーバ812は、上記のもののうちのいずれか、および、任意の市販のサーバオペレーティングシステムを含むオペレーティングシステムを実行し得る。また、サーバ812は、HTTP(ハイパーテキスト転送プロトコル)サーバ、FTP(ファイル転送プロトコル)サーバ、CGI(共通ゲートウェイインターフェース)サーバ、JAVA(登録商標)サーバ、データベースサーバなどを含むさまざまなさらなるサーバアプリケーションおよび/または中間層アプリケーションのうちのいずれかを実行し得る。例示的なデータベースサーバは、オラクル社、マイクロソフト社、サイベース社、IBM社(International Business Machines)などから市販されているものを含むが、これらに限定されるものではない。
いくつかの実現例では、サーバ812は、クライアントコンピューティング装置802,804,806および808のユーザから受信されたデータフィードおよび/またはイベント更新を分析および統合するための1つ以上のアプリケーションを含み得る。一例として、データフィードおよび/またはイベント更新は、1つ以上の第三者情報源および連続的なデータストリームから受信されるツイッター(登録商標)フィード、フェースブック(登録商標)更新またはリアルタイム更新を含み得るが、これらに限定されるものではなく、センサデータアプリケーション、金融ティッカ、ネットワーク性能測定ツール(たとえばネットワークモニタリングおよびトラフィック管理アプリケーション)、クリックストリーム分析ツール、自動車交通モニタリングなどに関連するリアルタイムイベントを含み得る。また、サーバ812は、クライアントコンピューティング装置802,804,806および808の1つ以上の表示装置を介してデータフィードおよび/またはリアルタイムイベントを表示するための1つ以上のアプリケーションを含み得る。
また、分散システム800は、1つ以上のデータベース814および816を含み得る。データベース814および816は、さまざまな場所に存在し得る。一例として、データベース814および816の1つ以上は、サーバ812にローカルな(および/または存在する)非一時的な記憶媒体に存在していてもよい。代替的に、データベース814および816は、サーバ812から遠く離れていて、ネットワークベースまたは専用の接続を介してサーバ812と通信してもよい。一組の実施形態においては、データベース814および816は、記憶領域ネットワーク(storage-area network:SAN)に存在していてもよい。同様に、サーバ812に起因する機能を実行するための任意の必要なファイルが、サーバ812上にローカルに、および/または、リモートで適宜格納されていてもよい。一組の実施形態においては、データベース814および816は、SQLフォーマットコマンドに応答してデータを格納、更新および検索するように適合された、オラクル社によって提供されるデータベースなどのリレーショナルデータベースを含み得る。
図9は、本開示の実施形態に係る、実施形態のシステムの1つ以上の構成要素によって提供されるサービスをクラウドサービスとして供給することができるシステム環境900の1つ以上の構成要素の簡略化されたブロック図である。示されている実施形態においては、システム環境900は、クラウドサービスを提供するクラウドインフラストラクチャシステム902と相互作用するようにユーザによって使用され得る1つ以上のクライアントコンピューティング装置904,906および908を含む。クライアントコンピューティング装置は、クラウドインフラストラクチャシステム902によって提供されるサービスを使用するためにクラウドインフラストラクチャシステム902と相互作用するようにクライアントコンピューティング装置のユーザによって使用され得る、ウェブブラウザ、専有のクライアントアプリケーション(たとえばオラクルフォームズ)または他のアプリケーションなどのクライアントアプリケーションを動作させるように構成され得る。
図に示されているクラウドインフラストラクチャシステム902は、示されている構成要素とは他の構成要素を有していてもよいということが理解されるべきである。さらに、図に示されている実施形態は、本発明の実施形態を組込むことができるクラウドインフラストラクチャシステムの一例に過ぎない。いくつかの他の実施形態においては、クラウドインフラストラクチャシステム902は、図に示されているものよりも多いまたは少ない数の構成要素を有していてもよく、2つ以上の構成要素を組合せてもよく、または構成要素の異なる構成または配置を有していてもよい。
クライアントコンピューティング装置904,906および908は、802,804,806および808について上記したものと類似の装置であってもよい。
例示的なシステム環境900は3個のクライアントコンピューティング装置を有するように示されているが、任意の数のクライアントコンピューティング装置がサポートされてもよい。センサを有する装置などの他の装置が、クラウドインフラストラクチャシステム902と相互作用してもよい。
ネットワーク910は、クライアント904,906および908とクラウドインフラストラクチャシステム902との間のデータの通信およびやりとりを容易にし得る。各々のネットワークは、ネットワーク810について上記したものを含むさまざまな市販のプロトコルのうちのいずれかを用いてデータ通信をサポートすることができる、当業者になじみのある任意のタイプのネットワークであってもよい。
クラウドインフラストラクチャシステム902は、サーバ812について上記したものを含み得る1つ以上のコンピュータおよび/またはサーバを備え得る。
特定の実施形態においては、クラウドインフラストラクチャシステムによって提供されるサービスは、オンラインデータ記憶およびバックアップソリューション、ウェブベースのeメールサービス、ホスト型オフィススイートおよびドキュメントコラボレーションサービス、データベース処理、管理技術サポートサービスなどの、クラウドインフラストラクチャシステムのユーザがオンデマンドで利用可能な多数のサービスを含み得る。クラウドインフラストラクチャシステムによって提供されるサービスは、そのユーザのニーズを満たすように動的にスケーリング可能である。クラウドインフラストラクチャシステムによって提供されるサービスの具体的なインスタンス化は、本明細書では「サービスインスタンス」と称される。一般に、インターネットなどの通信ネットワークを介してクラウドサービスプロバイダのシステムからユーザが利用可能な任意のサービスは、「クラウドサービス」と称される。通常、パブリッククラウド環境では、クラウドサービスプロバイダのシステムを構成するサーバおよびシステムは、顧客自身のオンプレミスサーバおよびシステムとは異なっている。たとえば、クラウドサービスプロバイダのシステムがアプリケーションをホストしてもよく、ユーザは、インターネットなどの通信ネットワークを介してオンデマンドで当該アプリケーションを注文および使用してもよい。
いくつかの例では、コンピュータネットワーククラウドインフラストラクチャにおけるサービスは、記憶装置、ホスト型データベース、ホスト型ウェブサーバ、ソフトウェアアプリケーションへの保護されたコンピュータネットワークアクセス、またはクラウドベンダによってユーザに提供されるかもしくはそうでなければ当該技術分野において公知の他のサービスを含み得る。たとえば、サービスは、インターネットを介したクラウド上のリモート記憶装置へのパスワードによって保護されたアクセスを含み得る。別の例として、サービスは、ネットワーク化された開発者による私的使用のためのウェブサービスベースのホスト型リレーショナルデータベースおよびスクリプト言語ミドルウェアエンジンを含み得る。別の例として、サービスは、クラウドベンダのウェブサイト上でホストされるeメールソフトウェアアプリケーションへのアクセスを含み得る。
特定の実施形態においては、クラウドインフラストラクチャシステム902は、セルフサービスの、サブスクリプションベースの、弾性的にスケーラブルな、信頼性のある、高可用性の、安全な態様で顧客に配信される一連のアプリケーション、ミドルウェアおよびデータベースサービス提供品を含み得る。このようなクラウドインフラストラクチャシステムの一例は、本譲受人によって提供されるオラクルパブリッククラウドである。
「ビッグデータ(Big data)」は、多くのレベルで、かつさまざまなスケールでインフラストラクチャシステムによってホストおよび/または処理されてもよい。大量のデータを視覚化し、トレンドを検出し、および/または、データと相互作用させるために、分析者および研究者は極めて大きいデータ集合を格納し処理することができる。平行にリンクされた何十、何百または何千ものプロセッサがこのようなデータに対して作用可能であり、これにより、このようなデータを表示し得るか、または、データに対する外力をシミュレートし得るかもしくはそれが表しているものをシミュレートし得る。これらのデータ集合は、データベースにおいて編制されたデータ、もしくは構造化モデルに従ったデータ、および/または、非体系的なデータ(たとえば電子メール、画像、データブロブ(バイナリ大型オブジェクト)、ウェブページ、複雑なイベント処理)などの構造化されたデータを必要とする可能性がある。目標物に対してより多くの(またはより少数の)コンピューティングリソースを比較的迅速に集中させるために実施形態の能力を強化することにより、ビジネス、政府関係機関、研究組織、私人、同じ目的をもった個々人もしくは組織のグループ、または他のエンティティから、要求に基づいて大量のデータ集合上でタスクを実行するために、クラウドインフラストラクチャシステムより良好に利用可能となる。
さまざまな実施形態においては、クラウドインフラストラクチャシステム902は、クラウドインフラストラクチャシステム902によって供給されるサービスへの顧客のサブスクリプションを自動的にプロビジョニング、管理および追跡するように適合され得る。クラウドインフラストラクチャシステム902は、さまざまなデプロイメントモデルを介してクラウドサービスを提供し得る。たとえば、クラウドインフラストラクチャシステム902が、(たとえばオラクル社によって所有される)クラウドサービスを販売する組織によって所有され、一般大衆またはさまざまな産業企業がサービスを利用できるパブリッククラウドモデルのもとでサービスが提供されてもよい。別の例として、クラウドインフラストラクチャシステム902が単一の組織のためだけに運営され、当該組織内の1つ以上のエンティティにサービスを提供し得るプライベートクラウドモデルのもとでサービスが提供されてもよい。また、クラウドインフラストラクチャシステム902およびクラウドインフラストラクチャシステム902によって提供されるサービスが、関連のコミュニティ内のいくつかの組織によって共有されるコミュニティクラウドモデルのもとでクラウドサービスが提供されてもよい。また、2つ以上の異なるモデルの組合せであるハイブリッドクラウドモデルのもとでクラウドサービスが提供されてもよい。
いくつかの実施形態においては、クラウドインフラストラクチャシステム902によって提供されるサービスは、ソフトウェア・アズ・ア・サービス(Software as a Service:SaaS)カテゴリ、プラットフォーム・アズ・ア・サービス(Platform as a Service:PaaS)カテゴリ、インフラストラクチャ・アズ・ア・サービス(Infrastructure as a Service:IaaS)カテゴリ、またはハイブリッドサービスを含むサービスの他のカテゴリのもとで提供される1つ以上のサービスを含み得る。顧客は、サブスクリプションオーダーによって、クラウドインフラストラクチャシステム902によって提供される1つ以上のサービスを注文し得る。次いで、クラウドインフラストラクチャシステム902は、顧客のサブスクリプションオーダーにおけるサービスを提供するために処理を実行する。
いくつかの実施形態においては、クラウドインフラストラクチャシステム902によって提供されるサービスは、アプリケーションサービス、プラットフォームサービスおよびインフラストラクチャサービスを含み得るが、これらに限定されるものではない。いくつかの例では、アプリケーションサービスは、SaaSプラットフォームを介してクラウドインフラストラクチャシステムによって提供されてもよい。SaaSプラットフォームは、SaaSカテゴリに分類されるクラウドサービスを提供するように構成され得る。たとえば、SaaSプラットフォームは、一体化された開発およびデプロイメントプラットフォーム上で一連のオンデマンドアプリケーションを構築および配信するための機能を提供し得る。SaaSプラットフォームは、SaaSサービスを提供するための基本的なソフトウェアおよびインフラストラクチャを管理および制御し得る。SaaSプラットフォームによって提供されるサービスを利用することによって、顧客は、クラウドインフラストラクチャシステムで実行されるアプリケーションを利用することができる。顧客は、顧客が別々のライセンスおよびサポートを購入する必要なく、アプリケーションサービスを取得することができる。さまざまな異なるSaaSサービスが提供されてもよい。例としては、大規模組織のための販売実績管理、企業統合およびビジネスの柔軟性のためのソリューションを提供するサービスが挙げられるが、これらに限定されるものではない。
いくつかの実施形態においては、プラットフォームサービスは、PaaSプラットフォームを介してクラウドインフラストラクチャシステムによって提供されてもよい。PaaSプラットフォームは、PaaSカテゴリに分類されるクラウドサービスを提供するように構成され得る。プラットフォームサービスの例としては、組織(オラクル社など)が既存のアプリケーションを共有の共通アーキテクチャ上で統合することを可能にするサービス、および、プラットフォームによって提供される共有のサービスを活用する新たなアプリケーションを構築する機能を挙げることができるが、これらに限定されるものではない。PaaSプラットフォームは、PaaSサービスを提供するための基本的なソフトウェアおよびインフラストラクチャを管理および制御し得る。顧客は、顧客が別々のライセンスおよびサポートを購入する必要なく、クラウドインフラストラクチャシステムによって提供されるPaaSサービスを取得することができる。プラットフォームサービスの例としては、オラクルJavaクラウドサービス(Java Cloud Service:JCS)、オラクルデータベースクラウドサービス(Database Cloud Service:DBCS)などが挙げられるが、これらに限定されるものではない。
PaaSプラットフォームによって提供されるサービスを利用することによって、顧客は、クラウドインフラストラクチャシステムによってサポートされるプログラミング言語およびツールを利用することができ、デプロイされたサービスを制御することもできる。いくつかの実施形態においては、クラウドインフラストラクチャシステムによって提供されるプラットフォームサービスは、データベースクラウドサービス、ミドルウェアクラウドサービル(たとえばオラクルフージョンミドルウェアサービス)およびJavaクラウドサービスを含み得る。一実施形態においては、データベースクラウドサービスは、組織がデータベースリソースをプールしてデータベースクラウドの形態でデータベース・アズ・ア・サービスを顧客に供給することを可能にする共有のサービスデプロイメントモデルをサポートし得る。ミドルウェアクラウドサービスは、クラウドインフラストラクチャシステムにおいてさまざまなビジネスアプリケーションを開発およびデプロイするために顧客にプラットフォームを提供し得て、Javaクラウドサービスは、クラウドインフラストラクチャシステムにおいてJavaアプリケーションをデプロイするために顧客にプラットフォームを提供し得る。
さまざまな異なるインフラストラクチャサービスは、クラウドインフラストラクチャシステムにおけるIaaSプラットフォームによって提供されてもよい。インフラストラクチャサービスは、記憶装置、ネットワークなどの基本的な計算リソース、ならびに、SaaSプラットフォームおよびPaaSプラットフォームによって提供されるサービスを利用する顧客のための他の基礎的な計算リソースの管理および制御を容易にする。
また、特定の実施形態においては、クラウドインフラストラクチャシステム902は、クラウドインフラストラクチャシステムの顧客にさまざまなサービスを提供するために使用されるリソースを提供するためのインフラストラクチャリソース930を含み得る。一実施形態においては、インフラストラクチャリソース930は、PaaSプラットフォームおよびSaaSプラットフォームによって提供されるサービスを実行するための、サーバ、記憶装置およびネットワーキングリソースなどのハードウェアの事前に一体化された最適な組合せを含み得る。
いくつかの実施形態においては、クラウドインフラストラクチャシステム902におけるリソースは、複数のユーザによって共有され、デマンドごとに動的に再割り振りされ得る。また、リソースは、異なる時間帯にユーザに割り振られ得る。たとえば、クラウドインフラストラクチャシステム930は、第1の時間帯におけるユーザの第1の組が規定の時間にわたってクラウドインフラストラクチャシステムのリソースを利用することを可能にし、次いで、異なる時間帯に位置するユーザの別の組への同一のリソースの再割り振りを可能にし、それによってリソースの利用を最大化することができる。
特定の実施形態においては、クラウドインフラストラクチャシステム902の異なる構成要素またはモジュール、および、クラウドインフラストラクチャシステム902によって提供されるサービス、によって共有されるいくつかの内部共有サービス932が提供され得る。これらの内部共有サービスは、セキュリティおよびアイデンティティサービス、インテグレーションサービス、企業リポジトリサービス、企業マネージャサービス、ウイルススキャンおよびホワイトリストサービス、高可用性・バックアップおよび回復サービス、クラウドサポートを可能にするためのサービス、eメールサービス、通知サービス、ファイル転送サービスなどを含み得るが、これらに限定されるものではない。
特定の実施形態においては、クラウドインフラストラクチャシステム902は、クラウドインフラストラクチャシステムにおけるクラウドサービス(たとえばSaaS、PaaSおよびIaaSサービス)の包括的管理を提供し得る。一実施形態においては、クラウド管理機能は、クラウドインフラストラクチャシステム902によって受信された顧客のサブスクリプションをプロビジョニング、管理および追跡などするための機能を含み得る。
一実施形態においては、図に示されているように、クラウド管理機能は、オーダー管理モジュール920、オーダーオーケストレーションモジュール922、オーダープロビジョニングモジュール924、オーダー管理および監視モジュール926、ならびにアイデンティティ管理モジュール928などの1つ以上のモジュールによって提供され得る。これらのモジュールは、汎用コンピュータ、専用サーバコンピュータ、サーバファーム、サーバクラスタ、またはその他の適切な構成および/もしくは組み合わせであり得る1つ以上のコンピュータおよび/またはサーバを含み得るか、またはそれらを用いて提供され得る。
例示的な動作934において、顧客は、クラウドインフラストラクチャシステム902によって提供される1つ以上のサービスを要求し、クラウドインフラストラクチャシステム902によって供給される1つ以上のサービスのサブスクリプションについてオーダーを行うことによって、クライアント装置904,906または908などのクライアント装置を用いてクラウドインフラストラクチャシステム902と相互作用し得る。特定の実施形態においては、顧客は、クラウドユーザインターフェース(User Interface:UI)、すなわちクラウドUI912、クラウドUI914および/またはクラウドUI916にアクセスして、これらのUIを介してサブスクリプションオーダーを行い得る。顧客がオーダーを行ったことに応答してクラウドインフラストラクチャシステム902によって受信されたオーダー情報は、顧客および顧客がサブスクライブする予定のクラウドインフラストラクチャシステム902によって供給される1つ以上のサービスを特定する情報を含み得る。
オーダーが顧客によって行われた後、オーダー情報は、クラウドUI912,914および/または916を介して受信される。
動作936において、オーダーは、オーダーデータベース918に格納される。オーダーデータベース918は、クラウドインフラストラクチャシステム918によって動作され、かつ、他のシステム要素と連携して動作されるいくつかのデータベースのうちの1つであってもよい。
動作938において、オーダー情報は、オーダー管理モジュール920に転送される。いくつかの例では、オーダー管理モジュール920は、オーダーの確認および確認時のオーダーの予約などのオーダーに関連するビリングおよびアカウンティング機能を実行するように構成され得る。
動作940において、オーダーに関する情報は、オーダーオーケストレーションモジュール922に通信される。オーダーオーケストレーションモジュール922は、顧客によって行われたオーダーのためのサービスおよびリソースのプロビジョニングをオーケストレートするためにオーダー情報を利用し得る。いくつかの例では、オーダーオーケストレーションモジュール922は、オーダープロビジョニングモジュール924のサービスを用いてサブスクライブされたサービスをサポートするためにリソースのプロビジョニングをオーケストレートし得る。
特定の実施形態においては、オーダーオーケストレーションモジュール922は、各々のオーダーに関連付けられるビジネスプロセスの管理を可能にし、ビジネス論理を適用してオーダーがプロビジョニングに進むべきか否かを判断する。動作942において、新たなサブスクリプションについてのオーダーを受信すると、オーダーオーケストレーションモジュール922は、リソースを割り振って当該サブスクリプションオーダーを満たすのに必要とされるそれらのリソースを構成するための要求をオーダープロビジョニングモジュール924に送る。オーダープロビジョニングモジュール924は、顧客によってオーダーされたサービスのためのリソースの割り振りを可能にする。オーダープロビジョニングモジュール924は、クラウドインフラストラクチャシステム900によって提供されるクラウドサービスと、要求されたサービスを提供するためのリソースをプロビジョニングするために使用される物理的実装層との間にあるレベルの抽象化を提供する。したがって、オーダーオーケストレーションモジュール922は、サービスおよびリソースが実際に実行中にプロビジョニングされるか、事前にプロビジョニングされて要求があったときに割振られる/割当てられるのみであるかなどの実装の詳細から分離させることができる。
動作944において、サービスおよびリソースがプロビジョニングされると、提供されたサービスの通知が、クラウドインフラストラクチャシステム902のオーダープロビジョニングモジュール924によってクライアント装置904,906および/または908上の顧客に送られ得る。
動作946において、顧客のサブスクリプションオーダーが、オーダー管理および監視モジュール926によって管理および追跡され得る。いくつかの例では、オーダー管理および監視モジュール926は、使用される記憶量、転送されるデータ量、ユーザの数、ならびにシステムアップ時間およびシステムダウン時間などのサブスクリプションオーダーにおけるサービスについての使用統計を収集するように構成され得る。
特定の実施形態においては、クラウドインフラストラクチャシステム900は、アイデンティティ管理モジュール928を含み得る。アイデンティティ管理モジュール928は、クラウドインフラストラクチャシステム900におけるアクセス管理および認可サービスなどのアイデンティティサービスを提供するように構成され得る。いくつかの実施形態においては、アイデンティティ管理モジュール928は、クラウドインフラストラクチャシステム902によって提供されるサービスを利用したい顧客についての情報を制御し得る。このような情報は、このような顧客のアイデンティティを認証する情報、および、それらの顧客がさまざまなシステムリソース(たとえばファイル、ディレクトリ、アプリケーション、通信ポート、メモリセグメントなど)に対してどのアクションを実行することを認可されるかを記載する情報を含み得る。また、アイデンティティ管理モジュール928は、各々の顧客についての説明的情報、ならびに、どのようにしておよび誰によって当該説明的情報がアクセスおよび変更され得るかについての情報の管理を含み得る。
図10は、本発明のさまざまな実施形態を実現することができる例示的なコンピュータシステム1000を示す。システム1000は、上記のコンピュータシステムのうちのいずれかを実現するために使用され得る。図に示されているように、コンピュータシステム1000は、バスサブシステム1002を介していくつかの周辺サブシステムと通信する処理ユニット1004を含む。これらの周辺サブシステムは、処理加速ユニット1006と、I/Oサブシステム1008と、記憶サブシステム1018と、通信サブシステム1024とを含み得る。記憶サブシステム1018は、有形のコンピュータ読取可能な記憶媒体1022と、システムメモリ1010とを含む。
バスサブシステム1002は、コンピュータシステム1000のさまざまな構成要素およびサブシステムに、意図されたように互いに通信させるための機構を提供する。バスサブシステム1002は、単一のバスとして概略的に示されているが、バスサブシステムの代替的な実施形態は、複数のバスを利用してもよい。バスサブシステム1002は、メモリバスまたはメモリコントローラ、周辺バス、およびさまざまなバスアーキテクチャのうちのいずれかを使用するローカルバスを含むいくつかのタイプのバス構造のうちのいずれかであってもよい。たとえば、このようなアーキテクチャは、IEEE P1386.1標準に合わせて製造されたメザニンバスとして実現可能な、業界標準アーキテクチャ(Industry Standard Architecture:ISA)バス、マイクロチャネルアーキテクチャ(Micro Channel Architecture:MCA)バス、拡張ISA(Enhanced ISA:EISA)バス、ビデオ・エレクトロニクス・スタンダーズ・アソシエーション(Video Electronics Standards Association:VESA)ローカルバスおよび周辺機器相互接続(Peripheral Component Interconnect:PCI)バスを含み得る。
1つ以上の集積回路(たとえば従来のマイクロプロセッサまたはマイクロコントローラ)として実現可能な処理ユニット1004は、コンピュータシステム1000の動作を制御する。処理ユニット1004には、1つ以上のプロセッサが含まれ得る。これらのプロセッサは、単一コアまたはマルチコアプロセッサを含み得る。特定の実施形態においては、処理ユニット1004は、各々の処理ユニットに含まれる単一またはマルチコアプロセッサを有する1つ以上の独立した処理ユニット1032および/または1034として実現されてもよい。また、他の実施形態においては、処理ユニット1004は、2つのデュアルコアプロセッサを単一のチップに組み入れることによって形成されるクアッドコア処理ユニットとして実現されてもよい。
さまざまな実施形態においては、処理ユニット1004は、プログラムコードに応答してさまざまなプログラムを実行し得て、同時に実行される複数のプログラムまたはプロセスを維持し得る。任意の所与の時点において、実行されるべきプログラムコードのうちのいくつかまたは全ては、プロセッサ1004および/または記憶サブシステム1018に存在し得る。好適なプログラミングを通じて、プロセッサ1004は、上記のさまざまな機能を提供し得る。また、コンピュータシステム1000は、デジタル信号プロセッサ(digital signal processor:DSP)、特殊用途プロセッサなどを含み得る処理加速ユニット1006を含み得る。
I/Oサブシステム1008は、ユーザインターフェイス入力装置と、ユーザインターフェイス出力装置とを含み得る。ユーザインターフェイス入力装置は、キーボード、マウスまたはトラックボールなどのポインティング装置、タッチパッドまたはタッチスクリーンを含み得て、これらは、音声コマンド認識システム、マイクロホンおよび他のタイプの入力装置とともに、ディスプレイ、スクロールホイール、クリックホイール、ダイアル、ボタン、スイッチ、キーパッド、オーディオ入力装置に組込まれている。ユーザインターフェイス入力装置は、たとえば、ジェスチャおよび話されたコマンドを用いてナチュラルユーザインターフェースを介してユーザがマイクロソフトXbox(登録商標)360ゲームコントローラなどの入力装置を制御して入力装置と相互作用することを可能にするマイクロソフトキネクト(登録商標)モーションセンサなどのモーション検知および/またはジェスチャ認識装置を含み得る。また、ユーザインターフェイス入力装置は、ユーザから眼球運動(たとえば撮影および/またはメニュー選択を行っている間の「まばたき」)を検出して、当該眼球ジェスチャを入力装置への入力として変換するグーグルグラス(登録商標)まばたき検出器などの眼球ジェスチャ認識装置を含み得る。また、ユーザインターフェイス入力装置は、ユーザが音声コマンドを介して音声認識システム(たとえばSiri(登録商標)ナビゲータ)と相互作用することを可能にする音声認識検知装置を含み得る。
また、ユーザインターフェイス入力装置は、三次元(3D)マウス、ジョイスティックまたはポインティングスティック、ゲームパッドおよびグラフィックタブレット、およびスピーカなどのオーディオ/ビジュアル装置、デジタルカメラ、デジタルカムコーダ、携帯型メディアプレーヤ、ウェブカム、画像スキャナ、指紋スキャナ、バーコードリーダ3Dスキャナ、3Dプリンタ、レーザレンジファインダ、および視線検出装置を含み得るが、これらに限定されるものではない。また、ユーザインターフェイス入力装置は、たとえば、コンピュータ断層撮影、磁気共鳴画像化、位置発光断層撮影、医療用超音波検査装置などの医療用画像化入力装置を含み得る。また、ユーザインターフェイス入力装置は、たとえばMIDIキーボード、デジタル楽器などのオーディオ入力装置を含み得る。
ユーザインターフェイス出力装置は、ディスプレイサブシステム、表示灯、またはオーディオ出力装置などの非視覚的ディスプレイなどを含み得る。ディスプレイサブシステムは、陰極線管(cathode ray tube:CRT)、液晶ディスプレイ(liquid crystal display:LCD)またはプラズマディスプレイを使用するものなどのフラットパネルディスプレイ、投影装置、タッチスクリーンなどであってもよい。一般に、「出力装置」という用語の使用は、コンピュータシステム1000からの情報をユーザまたは他のコンピュータに出力するための全ての可能なタイプの装置および機構を含むよう意図されている。たとえば、ユーザインターフェイス出力装置は、モニタ、プリンタ、スピーカ、ヘッドホン、自動車のナビゲーションシステム、プロッタ、音声出力装置およびモデムなどの、テキスト、グラフィックスおよびオーディオ/ビデオ情報を視覚的に伝えるさまざまな表示装置を含み得るが、これらに限定されるものではない。
コンピュータシステム1000は、現在のところシステムメモリ1010内に位置しているように示されているソフトウェア要素を備える記憶サブシステム1018を備え得る。システムメモリ1010は、処理ユニット1004上でロード可能および実行可能なプログラム命令と、これらのプログラムの実行中に生成されるデータとを格納し得る。
コンピュータシステム1000の構成およびタイプに応じて、システムメモリ1010は、揮発性(ランダムアクセスメモリ(random access memory:RAM)など)であってもよく、および/または、不揮発性(リードオンリメモリ(read-only memory:ROM)、フラッシュメモリなど)であってもよい。一般に、RAMは、処理ユニット1004がすぐにアクセス可能なデータおよび/またはプログラムモジュール、および/または、処理ユニット1004によって現在動作および実行されているデータおよび/またはプログラムモジュールを収容する。いくつかの実現例では、システムメモリ1010は、スタティックランダムアクセスメモリ(static random access memory:SRAM)またはダイナミックランダムアクセスメモリ(dynamic random access memory:DRAM)などの複数の異なるタイプのメモリを含み得る。いくつかの実現例では、始動中などにコンピュータシステム1000内の要素間で情報を転送することを助ける基本ルーチンを含む基本入力/出力システム(basic input/output system:BIOS)が、一般にROMに格納され得る。一例としておよび非限定的に、システムメモリ1010は、クライアントアプリケーション、ウェブブラウザ、中間層アプリケーション、リレーショナルデータベース管理システム(relational database management system:RDBMS)などを含み得るアプリケーションプログラム1012、プログラムデータ1014およびオペレーティングシステム1016も示す。一例として、オペレーティングシステム1016は、マイクロソフトウィンドウズ(登録商標)、アップルマッキントッシュ(登録商標)および/もしくはリナックスオペレーティングシステムのさまざまなバージョン、さまざまな市販のUNIX(登録商標)もしくはUNIXライクオペレーティングシステム(さまざまなGNU/リナックスオペレーティングシステム、Google Chrome(登録商標)OSなどを含むが、これらに限定されるものではない)、ならびに/または、iOS、ウィンドウズ(登録商標)フォン、アンドロイド(登録商標)OS、ブラックベリー(登録商標)10OSおよびパーム(登録商標)OSオペレーティングシステムなどのモバイルオペレーティングシステムを含み得る。
また、記憶サブシステム1018は、いくつかの実施形態の機能を提供する基本的なプログラミングおよびデータ構造を格納するための有形のコンピュータ読取可能な記憶媒体を提供し得る。プロセッサによって実行されたときに上記の機能を提供するソフトウェア(プログラム、コードモジュール、命令)が記憶サブシステム1018に格納され得る。これらのソフトウェアモジュールまたは命令は、処理ユニット1004によって実行され得る。また、記憶サブシステム1018は、本発明に従って使用されるデータを格納するためのリポジトリを提供し得る。
また、記憶サブシステム1000は、コンピュータ読取可能な記憶媒体1022にさらに接続可能なコンピュータ読取可能な記憶媒体リーダ1020を含み得る。ともにおよび任意には、システムメモリ1010と組合せて、コンピュータ読取可能な記憶媒体1022は、コンピュータ読取可能な情報を一時的および/または永久に収容、格納、送信および検索するための記憶媒体に加えて、リモートの、ローカルの、固定されたおよび/または取外し可能な記憶装置を包括的に表わし得る。
また、コードまたはコードの一部を含むコンピュータ読取可能な記憶媒体1022は、当該技術分野において公知のまたは使用される任意の適切な媒体を含み得て、当該媒体は、情報の格納および/または送信のための任意の方法または技術において実現される揮発性および不揮発性の、取外し可能および取外し不可能な媒体などであるが、これらに限定されるものではない記憶媒体および通信媒体を含む。これは、RAM、ROM、電子的消去・プログラム可能ROM(electronically erasable programmable ROM:EEPROM)、フラッシュメモリもしくは他のメモリ技術、CD−ROM、デジタル多用途ディスク(digital versatile disk:DVD)、または他の光学式記憶装置、磁気カセット、磁気テープ、磁気ディスク記憶装置もしくは他の磁気記憶装置、または他の有形のコンピュータ読取可能な媒体などの有形の一時的なコンピュータ読取可能な記憶媒体を含み得る。また、これは、データ信号、データ送信などの無形の一時的なコンピュータ読取可能な媒体、または、所望の情報を送信するために使用可能でありかつ計算システム1100によってアクセス可能なその他の媒体を含み得る。
一例として、コンピュータ読取可能な記憶媒体1022は、取外し不可能な不揮発性磁気媒体から読取るまたは当該媒体に書込むハードディスクドライブ、取外し可能な不揮発性磁気ディスクから読取るまたは当該ディスクに書込む磁気ディスクドライブ、ならびに、CD ROM、DVDおよびブルーレイ(登録商標)ディスクまたは他の光学式媒体などの取外し可能な不揮発性光学ディスクから読取るまたは当該ディスクに書込む光学式ディスクドライブを含み得る。コンピュータ読取可能な記憶媒体1022は、ジップ(登録商標)ドライブ、フラッシュメモリカード、ユニバーサルシリアルバス(universal serial bus:USB)フラッシュドライブ、セキュアデジタル(secure digital:SD)カード、DVDディスク、デジタルビデオテープなどを含み得るが、これらに限定されるものではない。また、コンピュータ読取可能な記憶媒体1022は、フラッシュメモリベースのSSD、企業向けフラッシュドライブ、ソリッドステートROMなどの不揮発性メモリに基づくソリッドステートドライブ(solid-state drive:SSD)、ソリッドステートRAM、ダイナミックRAM、スタティックRAMなどの揮発性メモリに基づくSSD、DRAMベースのSSD、磁気抵抗RAM(magnetoresistive RAM:MRAM)SSD、およびDRAMとフラッシュメモリベースのSSDとの組合せを使用するハイブリッドSSDを含み得る。ディスクドライブおよびそれらの関連のコンピュータ読取可能な媒体は、コンピュータ読取可能な命令、データ構造、プログラムモジュールおよび他のデータをコンピュータシステム1000に提供し得る。
通信サブシステム1024は、他のコンピュータシステムおよびネットワークとのインターフェイスを提供する。通信サブシステム1024は、他のシステムからデータを受信したり、コンピュータシステム1000から他のシステムにデータを送信するためのインターフェイスの役割を果たす。たとえば、通信サブシステム1024は、コンピュータシステム1000がインターネットを介して1つ以上の装置に接続することを可能にし得る。いくつかの実施形態においては、通信サブシステム1024は、(たとえば3G、4GまたはEDGE(enhanced data rates for global evolution)などの携帯電話技術、高度データネットワーク技術を用いて)無線音声および/またはデータネットワークにアクセスするための無線周波数(radio frequency:RF)トランシーバコンポーネント、WiFi(IEEE802.11ファミリ標準または他のモバイル通信技術またはそれらの任意の組合せ)、全地球測位システム(global positioning system:GPS)レシーバコンポーネント、および/または、他のコンポーネントを含み得る。いくつかの実施形態においては、通信サブシステム1024は、無線インターフェイスに加えて、または無線インターフェイスの代わりに、有線ネットワーク接続(例えばイーサネット)を提供し得る。
また、いくつかの実施形態においては、通信サブシステム1024は、コンピュータシステム1000を使用し得る1人以上のユーザを代表して、構造化されたおよび/または構造化されていないデータフィード1026、イベントストリーム1028、イベント更新1030などの形態で入力通信を受信し得る。
一例として、通信サブシステム1024は、ツイッター(登録商標)フィード、フェースブック(登録商標)更新、リッチ・サイト・サマリ(Rich Site Summary:RSS)フィードなどのウェブフィードなどのデータフィード1026をリアルタイムでソーシャルメディアネットワークおよび/または他の通信サービスのユーザから受信し、および/または、1つ以上の第三者情報源からリアルタイム更新を受信するように構成され得る。
また、通信サブシステム1024は、連続的なデータストリームの形態でデータを受信するように構成され得て、当該データは、連続的である場合もあれば本質的に明確な端部をもたない状態で境界がない場合もあるリアルタイムイベントのイベントストリーム1028および/またはイベント更新1030を含み得る。連続的なデータを生成するアプリケーションの例としては、たとえばセンサデータアプリケーション、金融ティッカ、ネットワーク性能測定ツール(たとえばネットワークモニタリングおよびトラフィック管理アプリケーション)、クリックストリーム分析ツール、自動車交通モニタリングなどを含み得る。
また、通信サブシステム1024は、構造化されたおよび/または構造化されていないデータフィード1026、イベントストリーム1028、イベント更新1030などを、コンピュータシステム1000に結合された1つ以上のストリーミングデータソースコンピュータと通信し得る1つ以上のデータベースに出力するように構成され得る。
コンピュータシステム1000は、手持ち式携帯機器(たとえばiPhone(登録商標)携帯電話、iPad(登録商標)計算タブレット、PDA)、ウェアラブル装置(たとえばグーグルグラス(登録商標)ヘッドマウントディスプレイ)、PC、ワークステーション、メインフレーム、キオスク、サーバラックまたはその他のデータ処理システムを含むさまざまなタイプのうちの1つであってもよい。
コンピュータおよびネットワークの絶え間なく変化し続ける性質のために、図に示されているコンピュータシステム1000の説明は、特定の例として意図されているに過ぎない。図に示されているシステムよりも多くのまたは少ない数の構成要素を有する多くの他の構成が可能である。たとえば、ハードウェア、ファームウェア、(アプレットを含む)ソフトウェア、または組合せにおいて、カスタマイズされたハードウェアも使用されてもよく、および/または、特定の要素が実装されてもよい。さらに、ネットワーク入力/出力装置などの他の計算装置への接続が利用されてもよい。本明細書で提供される開示および教示に基づいて、当業者は、さまざまな実施形態を実現するための他の手段および/または方法を理解するであろう。言いかえれば、いくつかの実施形態においては、コンピュータシステム1000の構成は、全体として、第1の入力データストリームおよび第2の入力データストリームを少なくとも含む複数の入力データストリームを受取るための手段と;第1の入力データストリームについての第1のダイナミックデータタイプを生成するための手段と;第2の入力データストリームについての第2のダイナミックデータタイプを生成するための手段と;第1の入力データストリームと第2の入力データストリームとを結合して、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプに少なくとも部分的に基づく結合データストリームを生成するための手段と;結合データストリームに関する連続クエリをコンピュータシステムによって処理してパターンを検出するための手段とを含み得る。
図11は、本発明のさまざまな実施形態が実現され得る例示的なサービスプロバイダデバイスの簡略化されたブロック図を示す。サービスプロバイダデバイス1100のブロックは、本発明の原理を実行するために、ハードウェア、ソフトウェアまたはハードウェアとソフトウェアとの組合せで実現されてもよい。図11に記載されるブロックが、上述のとおり本発明の原理を実現するために、サブブロックに組合わされ得るかまたは分割され得ることが当業者によって理解される。したがって、この明細書中における記載は、この明細書中に記載される機能ブロックのいずれかの実現可能な組合せまたは分割またはさらなる定義をサポートし得る。
図11に示されるように、サービスプロバイダデバイス1100は、入力データストリーム受取ユニット1101、第1のダイナミックデータタイプ生成ユニット1103、第2のダイナミックデータタイプ生成ユニット1105、結合データストリーム生成ユニット1107、およびパターン検出ユニット1109を含み得る。入力データストリーム受取ユニット1101は、第1の入力データストリームおよび第2の入力データストリームを少なくとも含む複数の入力データストリームを受取るように構成されてもよい。第1のダイナミックデータタイプ生成ユニット1103は、第1の入力データストリームについての第1のダイナミックデータタイプを生成するように構成されてもよい。第2のダイナミックデータタイプ生成ユニット1105は、第2の入力データストリームについての第2のダイナミックデータタイプを生成するように構成されてもよい。結合データストリーム生成ユニット1107は、第1の入力データストリームと第2の入力データストリームとを結合して、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプに少なくとも部分的に基づく結合データストリームを生成するように構成されてもよい。パターン検出ユニット1109は、結合データストリームに関する連続クエリを処理して、パターンを検出するように構成されてもよい。一実施形態においては、各々のユニットは、コンピュータプログラム命令を読出すことによって、対応するプロセスを実行するプロセッサとして実現されてもよい。
一実施形態においては、第1のダイナミックデータタイプ生成ユニット1103はさらに、第1の入力データストリームの第1の属性を、第2のデータストリーム中に存在しないものとして識別し、第1の属性についての第1のダイナミックデータタイプを生成するように構成されてもよい。
一実施形態においては、第1のダイナミックデータタイプは、第1の入力データストリームの第1の属性に対応する第1のデータ値を格納するように構成されてもよい。
一実施形態においては、第2のダイナミックデータタイプ生成ユニット1105はさらに、第2の入力データストリームの第2の属性を、第1のデータストリーム中に存在しないものとして識別し、第2の属性についての第2のダイナミックデータタイプを生成するように構成されてもよい。第2のダイナミックデータタイプは、第2の入力データストリームの第2の属性に対応する第2のデータ値を格納するように構成され得る。
一実施形態においては、サービスプロバイダデバイス1100はさらに、共通属性識別ユニット1111および同種スキーマ生成ユニット1113を含み得る。共通属性識別ユニット1111は、共通属性を識別するように構成されてもよい。共通属性は、第1の入力データストリーム中に存在するものとして、かつ、第2の入力データストリーム中に存在するものとして識別され得る。同種スキーマ生成ユニット1113は、同種スキーマを生成するように構成されてもよい。同種スキーマは、第1の入力データストリームおよび第2の入力データストリームの1つ以上の属性の表現を含む。当該表現は、少なくとも共通属性、第1のダイナミックデータタイプおよび第2のダイナミックデータタイプを含む。
一実施形態においては、同種スキーマは、ストリーム名識別子属性、第1の入力データストリームに関連付けられた第1のタイムスタンプ属性、または第2の入力データストリームに関連付けられた第2のタイムスタンプ属性のうち少なくとも1つを含み得る。
一実施形態においては、結合データストリーム生成ユニット1107はさらに、同種スキーマによって識別される第1の入力データストリームからタプルの第1のセットを選択し、同種スキーマによって識別される第2の入力データストリームからタプルの第2のセットを選択し、結合データストリームを生成するためにタプルの第1のセットおよびタプルの第2のセットに関してサブクエリを処理するように構成されてもよい。
一実施形態においては、パターンは、結合データストリームの分析に少なくとも部分的に基づいて検出されてもよい。パターンは、第1の入力データストリームにおける第1のイベントと、後続する第2の入力データストリームにおける第2のイベントとを識別する。
図11に記載されるブロックは、上述のとおり本発明の原理を実現するためにサブブロックに組合せされ得るかまたは分割され得る。たとえば、第1のダイナミックデータタイプ生成ユニット1103および第2のダイナミックデータタイプ生成ユニット1105は、ダイナミックデータタイプ生成ユニットとして一体化されてもよい。一体型ダイナミックデータタイプ生成ユニットはまた、共通属性識別ユニット1111および同種スキーマ生成ユニット1113を組込むことができる。
当業者であれば、サービスプロバイダデバイス1100が、先の例示的な実施形態において記載されたサービスプロバイダコンピュータ106の例示的な実現例であり得ることを理解することができる。当業者であれば、また、サービスプロバイダデバイス1100が、本発明の原則に従った動作またはその組合せのいずれをも実行するように必要に応じて変更され得ることを理解することができる。
上記の明細書では、本発明の局面は、その具体的な実施形態を参照して記載されているが、本発明はこれに限定されるものではないことを当業者は認識するであろう。上記の発明のさまざまな特徴および局面は、個々にまたは一緒に使用されてもよい。さらに、実施形態は、明細書のより広い精神および範囲から逸脱することなく、本明細書に記載されているものを越えたどのような環境およびアプリケーションでも利用可能である。したがって、明細書および図面は、限定的ではなく例示的であるものとみなされるべきである。

Claims (20)

  1. コンピュータによって実行される方法であって、
    コンピュータ実行可能命令を用いて構成されるコンピュータシステムによって、第1の入力データストリームおよび第2の入力データストリームを少なくとも含む複数の入力データストリームを受取るステップと、
    前記コンピュータシステムによって、前記第1の入力データストリームについての第1のダイナミックデータタイプを生成するステップと、
    前記コンピュータシステムによって、前記第2の入力データストリームについての第2のダイナミックデータタイプを生成するステップと、
    前記コンピュータシステムによって、前記第1の入力データストリームと前記第2の入力データストリームとを結合して、前記第1のダイナミックデータタイプおよび前記第2のダイナミックデータタイプに少なくとも部分的に基づく結合データストリームを生成するステップと、
    前記コンピュータシステムによって前記結合データストリームに関する連続クエリを処理して、パターンを検出するステップとを含む、コンピュータによって実行される方法。
  2. 前記第1のダイナミックデータタイプを生成するステップは、
    前記第1の入力データストリームの第1の属性を前記第2の入力データストリーム中に存在しないものとして識別するステップと、
    前記第1の属性についての前記第1のダイナミックデータタイプを生成するステップとを含む、請求項1に記載の、コンピュータによって実行される方法。
  3. 前記第1のダイナミックデータタイプは、前記第1の入力データストリームの前記第1の属性に対応する第1のデータ値を格納するように構成される、請求項2に記載のコンピュータによって実行される方法。
  4. 前記第2のダイナミックデータタイプを生成するステップは、
    前記第2の入力データストリームの第2の属性を前記第1の入力データストリーム中に存在しないものとして識別するステップと、
    前記第2の属性についての前記第2のダイナミックデータタイプを生成するステップとを含み、前記第2のダイナミックデータタイプは、前記第2の入力データストリームの前記第2の属性に対応する第2のデータ値を格納するように構成される、請求項1〜3のいずれか1項に記載のコンピュータによって実行される方法。
  5. 共通属性を識別するステップをさらに含み、前記共通属性は、前記第1の入力データストリームに存在するものとして、かつ前記第2の入力データストリームに存在するものとして識別され、さらに、
    同種スキーマを生成するステップを含み、前記同種スキーマは、前記第1の入力データストリームおよび前記第2の入力データストリームの1つ以上の属性の表現を含み、前記表現は、少なくとも、前記共通属性、前記第1のダイナミックデータタイプおよび前記第2のダイナミックデータタイプを含む、請求項1〜4のいずれか1項に記載のコンピュータによって実行される方法。
  6. 前記同種スキーマは、ストリーム名識別子属性、前記第1の入力データストリームに関連付けられた第1のタイムスタンプ属性、または前記第2の入力データストリームに関連付けられた第2のタイムスタンプ属性のうち少なくとも1つを含む、請求項5に記載のコンピュータによって実行される方法。
  7. 前記第1の入力データストリームと前記第2の入力データストリームとを結合するステップはさらに、
    前記同種スキーマによって識別される前記第1の入力データストリームからタプルの第1のセットを選択するステップと、
    前記同種スキーマによって識別される前記第2の入力データストリームからタプルの第2のセットを選択するステップと、
    前記タプルの第1のセットと前記タプルの第2のセットとに関するサブクエリを処理して、前記結合データストリームを生成するステップとを含む、請求項5または6に記載のコンピュータによって実行される方法。
  8. 前記パターンは、前記結合データストリームの分析に少なくとも部分的に基づいて検出され、前記パターンは、前記第1の入力データストリームにおける第1のイベントと、後続する前記第2の入力データストリームにおける第2のイベントとを識別する、請求項1〜7のいずれか1項に記載のコンピュータによって実行される方法。
  9. システムであって、
    複数の命令を格納するメモリと、
    前記メモリにアクセスするように構成されたプロセッサとを含み、前記プロセッサはさらに、少なくとも、
    第1の入力データストリームおよび第2の入力データストリームを識別する連続クエリを受取り、
    前記第1の入力データストリームの第1の属性についての第1のダイナミックデータタイプを識別し、
    前記第2の入力データストリームの第2の属性についての第2のダイナミックデータタイプを識別し、
    前記第1の入力データストリームにおいて識別された前記第1のダイナミックデータタイプと、前記第2の入力データストリームにおいて識別された前記第2のダイナミックデータタイプとに少なくとも部分的に基づく結合データストリームを生成し、
    前記結合データストリームに関する前記連続クエリを実行してパターンを検出するための、前記複数の命令を実行するように構成される、システム。
  10. 前記少なくとも1つのプロセッサは、前記第1の入力データストリームの前記第1の属性を、前記第2の入力データストリーム中に存在しないものとして識別するための前記コンピュータ実行可能命令を実行するように構成される、請求項9に記載のシステム。
  11. 前記少なくとも1つのプロセッサは、前記第2の入力データストリームの前記第2の属性を、前記第1の入力データストリーム中に存在しないものとして識別するための前記コンピュータ実行可能命令を実行するように構成される、請求項9または10に記載のシステム。
  12. 前記少なくとも1つのプロセッサはさらに、
    前記第1の入力データストリームおよび前記第2の入力データストリーム中に存在するものとして識別された共通属性を識別し、
    同種スキーマを生成するための、前記コンピュータ実行可能命令を実行するように構成され、前記同種スキーマは、少なくとも、前記共通属性、前記第1の属性、前記第1のダイナミックデータタイプ、前記第2の属性、および前記第2のダイナミックデータタイプの表現を含む、請求項9〜11のいずれか1項に記載のシステム。
  13. 前記同種スキーマはさらに、ストリーム名識別子属性、前記第1の入力データストリームに関連付けられた第1のタイムスタンプ属性、または前記第2の入力データストリームに関連付けられた第2のタイムスタンプ属性のうち少なくとも1つを含む、請求項12に記載のシステム。
  14. 前記少なくとも1つのプロセッサはさらに、結合データストリームを生成するための前記コンピュータ実行可能命令を実行するように構成され、前記結合データストリームは、
    前記同種スキーマによって識別される前記第1の入力データストリームからタプルの第1のセットを選択し、
    前記同種スキーマによって識別される前記第2の入力データストリームからタプルの第2のセットを選択し、
    前記タプルの第1のセットおよび前記タプルの第2のセットに関するサブクエリを処理して前記結合データストリームを生成するための、
    命令を実行することによって生成される、請求項13に記載のシステム。
  15. 前記パターンは、前記結合データストリームの分析に少なくとも部分的に基づいて検出され、前記パターンは、前記第1の入力データストリームにおける第1のイベントと、後続する前記第2の入力データストリームにおける第2のイベントとを識別する、請求項9〜14のいずれか1項に記載のシステム。
  16. 1つ以上のプロセッサによって実行可能なコンピュータ実行可能命令を格納する1つ以上の非一時的なコンピュータ読取可能媒体であって、前記コンピュータ実行可能命令は、
    前記1つ以上のプロセッサに、第1の入力データストリームおよび第2の入力データストリームを少なくとも含む複数の入力データストリームを受取らせる命令と、
    前記1つ以上のプロセッサに、前記第1の入力データストリームについての第1のダイナミックデータタイプを生成させる命令と、
    前記1つ以上のプロセッサに、前記第2の入力データストリームについての第2のダイナミックデータタイプを生成させる命令と、
    前記1つ以上のプロセッサに、前記第1の入力データストリームと前記第2の入力データストリームとを結合させて、前記第1のダイナミックデータタイプおよび前記第2のダイナミックデータタイプに少なくとも部分的に基づく結合データストリームを生成させる命令と、
    前記1つ以上のプロセッサに、前記結合データストリームに関する連続クエリを処理させてパターンを検出させる命令とを含む、コンピュータ読取可能媒体。
  17. 前記第1のダイナミックデータタイプを生成させる命令はさらに、
    前記第1の入力データストリームの第1の属性を前記第2の入力データストリームに存在しないものとして識別する命令と、
    前記第1の属性についての前記第1のダイナミックデータタイプを生成する命令とを含み、前記第1のダイナミックデータタイプは、前記第1の入力データストリームの前記第1の属性に対応する第1のデータ値を格納するように構成される、請求項16に記載のコンピュータ読取可能媒体。
  18. 前記第2のダイナミックデータタイプを生成させる命令はさらに、前記1つ以上のプロセッサに、
    前記第2の入力データストリームの第2の属性を前記第1の入力データストリーム中に存在しないものとして識別させる命令と、
    前記第2の属性についての前記第2のダイナミックデータタイプを生成させる命令とを含み、前記第2のダイナミックデータタイプは、前記第2の入力データストリームの前記第2の属性に対応する第2のデータ値を格納するように構成される、請求項16または17に記載のコンピュータ読取可能媒体。
  19. 前記コンピュータ実行可能命令はさらに、
    前記1つ以上のプロセッサに共通属性を識別させる命令を含み、前記共通属性は、前記第1の入力データストリームに存在するものとして、かつ前記第2の入力データストリームに存在するものとして識別され、前記コンピュータ実行可能命令はさらに、
    前記1つ以上のプロセッサに同種スキーマを生成させる命令を含み、前記同種スキーマは、前記第1の入力データストリームおよび前記第2の入力データストリームの1つ以上の属性の表現を含み、前記表現は、少なくとも、前記共通属性、前記第1のダイナミックデータタイプおよび前記第2のダイナミックデータタイプを含み、前記コンピュータ実行可能命令はさらに、
    前記1つ以上のプロセッサに、前記同種スキーマに少なくとも部分的に基づいて前記結合データストリームを生成させる命令を含む、請求項16〜18のいずれか1項に記載のコンピュータ読取可能媒体。
  20. 前記コンピュータ実行可能命令はさらに、前記1つ以上のプロセッサに、前記結合データストリームの分析に少なくとも部分的に基づいて前記パターンを検出させる命令を含み、前記パターンは、前記第1の入力データストリームにおける第1のイベントと、後続する前記第2の入力データストリームにおける第2のイベントとを識別する、請求項16〜19のいずれか1項に記載のコンピュータ読取可能媒体。
JP2016536781A 2013-12-05 2014-12-04 多重入力データストリームにわたるパターンマッチング Active JP6521973B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361912344P 2013-12-05 2013-12-05
US61/912,344 2013-12-05
US14/559,550 US9934279B2 (en) 2013-12-05 2014-12-03 Pattern matching across multiple input data streams
US14/559,550 2014-12-03
PCT/US2014/068641 WO2015085103A1 (en) 2013-12-05 2014-12-04 Pattern matching across multiple input data streams

Publications (3)

Publication Number Publication Date
JP2016539427A true JP2016539427A (ja) 2016-12-15
JP2016539427A5 JP2016539427A5 (ja) 2017-12-28
JP6521973B2 JP6521973B2 (ja) 2019-05-29

Family

ID=53271395

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016536781A Active JP6521973B2 (ja) 2013-12-05 2014-12-04 多重入力データストリームにわたるパターンマッチング

Country Status (5)

Country Link
US (1) US9934279B2 (ja)
EP (1) EP3077926B1 (ja)
JP (1) JP6521973B2 (ja)
CN (1) CN105993011B (ja)
WO (1) WO2015085103A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101867220B1 (ko) * 2017-02-23 2018-06-12 전자부품연구원 스트리밍 모델 동시 지원 및 스트림 데이터에 따라 자동선택 가능한 실시간 스트림 처리방법 및 장치
JP2022064982A (ja) * 2016-03-23 2022-04-26 フォグホーン システムズ,インコーポレイテッド リアルタイムデータフロープログラミングのための効率的な状態機械

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9305057B2 (en) 2009-12-28 2016-04-05 Oracle International Corporation Extensible indexing framework using data cartridges
US9430494B2 (en) 2009-12-28 2016-08-30 Oracle International Corporation Spatial data cartridge for event processing systems
US9189280B2 (en) 2010-11-18 2015-11-17 Oracle International Corporation Tracking large numbers of moving objects in an event processing system
US8990416B2 (en) 2011-05-06 2015-03-24 Oracle International Corporation Support for a new insert stream (ISTREAM) operation in complex event processing (CEP)
US9329975B2 (en) 2011-07-07 2016-05-03 Oracle International Corporation Continuous query language (CQL) debugger in complex event processing (CEP)
US9563663B2 (en) 2012-09-28 2017-02-07 Oracle International Corporation Fast path evaluation of Boolean predicates
US9953059B2 (en) 2012-09-28 2018-04-24 Oracle International Corporation Generation of archiver queries for continuous queries over archived relations
US10956422B2 (en) 2012-12-05 2021-03-23 Oracle International Corporation Integrating event processing with map-reduce
US10298444B2 (en) 2013-01-15 2019-05-21 Oracle International Corporation Variable duration windows on continuous data streams
US9047249B2 (en) 2013-02-19 2015-06-02 Oracle International Corporation Handling faults in a continuous event processing (CEP) system
US9390135B2 (en) 2013-02-19 2016-07-12 Oracle International Corporation Executing continuous event processing (CEP) queries in parallel
US9418113B2 (en) 2013-05-30 2016-08-16 Oracle International Corporation Value based windows on relations in continuous data streams
US9934279B2 (en) 2013-12-05 2018-04-03 Oracle International Corporation Pattern matching across multiple input data streams
US20150350304A1 (en) * 2014-05-29 2015-12-03 The Intellisis Corporation Systems and methods for implementing a platform for processing streams of information
US10061808B2 (en) * 2014-06-03 2018-08-28 Sap Se Cached views
US9244978B2 (en) 2014-06-11 2016-01-26 Oracle International Corporation Custom partitioning of a data stream
US9712645B2 (en) 2014-06-26 2017-07-18 Oracle International Corporation Embedded event processing
US9886486B2 (en) 2014-09-24 2018-02-06 Oracle International Corporation Enriching events with dynamically typed big data for event processing
US10120907B2 (en) 2014-09-24 2018-11-06 Oracle International Corporation Scaling event processing using distributed flows and map-reduce operations
CN105893387B (zh) * 2015-01-04 2021-03-23 伊姆西Ip控股有限责任公司 智能多媒体处理方法和系统
WO2017018901A1 (en) 2015-07-24 2017-02-02 Oracle International Corporation Visually exploring and analyzing event streams
CN108353090B (zh) 2015-08-27 2020-04-03 雾角系统公司 用于改进对分布式网络中的传感器流数据的处理的方法
US11989096B2 (en) * 2015-12-21 2024-05-21 Ab Initio Technology Llc Search and retrieval data processing system for computing near real-time data aggregations
WO2017135838A1 (en) 2016-02-01 2017-08-10 Oracle International Corporation Level of detail control for geostreaming
WO2017135837A1 (en) * 2016-02-01 2017-08-10 Oracle International Corporation Pattern based automated test data generation
WO2017189674A1 (en) * 2016-04-26 2017-11-02 Equifax, Inc. Global matching system
US10838782B2 (en) * 2016-05-24 2020-11-17 Accenture Global Solutions Limited Event abstractor
EP3361269B1 (en) * 2017-02-10 2022-03-30 Rohde & Schwarz GmbH & Co. KG Dynamic measuring system and method for probing a dynamic data signal
US11288255B2 (en) * 2017-06-08 2022-03-29 Visier Solutions, Inc. Systems and methods for generating event stream data
US9990389B1 (en) 2017-06-08 2018-06-05 Visier Solutions, Inc. Systems and methods for generating event stream data
US11182389B2 (en) 2017-09-29 2021-11-23 Oracle International Corporation Retaining fields from current event or group during stream aggregation
US11416563B1 (en) 2017-10-20 2022-08-16 Amazon Technologies, Inc. Query language for selecting and addressing resources
RO133453A2 (ro) * 2017-12-28 2019-06-28 Siemens Aktiengesellschaft Motor de procesare a semnalelor şi evenimentelor
CN110704551B (zh) * 2018-06-21 2023-02-17 中兴通讯股份有限公司 数据处理方法、装置、设备及计算机可读存储介质
US10878821B2 (en) 2018-11-13 2020-12-29 International Business Machines Corporation Distributed system for conversational agent
US10476518B1 (en) * 2018-12-06 2019-11-12 Nyquist Semiconductor Limited Hardware friendly data compression
WO2020144676A1 (en) * 2019-01-07 2020-07-16 Technion Research & Development Foundation Limited Real-time multi-pattern detection over event streams
US20200364195A1 (en) * 2019-05-17 2020-11-19 International Business Machines Corporation Identifying Duplication Multimedia Entities
US11386056B2 (en) * 2019-05-17 2022-07-12 International Business Machines Corporation Duplicate multimedia entity identification and processing
US10826801B1 (en) 2019-07-31 2020-11-03 Bank Of America Corporation Multi-level data channel and inspection architectures
US11115310B2 (en) 2019-08-06 2021-09-07 Bank Of America Corporation Multi-level data channel and inspection architectures having data pipes in parallel connections
US11470046B2 (en) 2019-08-26 2022-10-11 Bank Of America Corporation Multi-level data channel and inspection architecture including security-level-based filters for diverting network traffic
US11216155B2 (en) * 2020-01-06 2022-01-04 Fmr Llc Systems and methods for data processing
US11681721B2 (en) * 2020-05-08 2023-06-20 Jpmorgan Chase Bank, N.A. Systems and methods for spark lineage data capture
US11443376B2 (en) 2020-05-28 2022-09-13 Jpmorgan Chase Bank, N.A. End-to-end deal execution system and method
WO2023023337A2 (en) * 2021-08-20 2023-02-23 Kenny To Research LLC Method for organizing data by events, software and system for same
CN114025015A (zh) * 2021-11-29 2022-02-08 中电金信软件有限公司 一种报文传输方法及其装置
US11789948B2 (en) * 2021-12-10 2023-10-17 Sap Se Computational dependency directory

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010108044A (ja) * 2008-10-28 2010-05-13 Hitachi Ltd ストリームデータ処理プログラム及び計算機システム
JP2011039818A (ja) * 2009-08-12 2011-02-24 Hitachi Ltd ストリームデータ処理システム、ストリームデータ処理方法及びストリームデータ処理プログラム
US20120166417A1 (en) * 2010-12-23 2012-06-28 Microsoft Corporation Asynchronous transfer of state information between continuous query plans

Family Cites Families (455)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5051947A (en) 1985-12-10 1991-09-24 Trw Inc. High-speed single-pass textual search processor for locating exact and inexact matches of a search pattern in a textual stream
US4996687A (en) 1988-10-11 1991-02-26 Honeywell Inc. Fault recovery mechanism, transparent to digital system function
US5339392A (en) 1989-07-27 1994-08-16 Risberg Jeffrey S Apparatus and method for creation of a user definable video displayed document showing changes in real time data
US5761493A (en) 1990-04-30 1998-06-02 Texas Instruments Incorporated Apparatus and method for adding an associative query capability to a programming language
US5495600A (en) 1992-06-03 1996-02-27 Xerox Corporation Conversion of queries to monotonically increasing incremental form to continuously query a append only database
US5918225A (en) 1993-04-16 1999-06-29 Sybase, Inc. SQL-based database system with improved indexing methodology
EP0687089B1 (en) 1994-06-10 2003-05-28 Hewlett-Packard Company, A Delaware Corporation Event-processing system and method of constructing such a system
US5664172A (en) 1994-07-19 1997-09-02 Oracle Corporation Range-based query optimizer
EP0702294A3 (en) 1994-09-13 1997-05-02 Sun Microsystems Inc Method and device for diagnosing lexical errors
US6397262B1 (en) 1994-10-14 2002-05-28 Qnx Software Systems, Ltd. Window kernel
US5706494A (en) 1995-02-10 1998-01-06 International Business Machines Corporation System and method for constraint checking bulk data in a database
US5850544A (en) 1995-06-06 1998-12-15 International Business Machines Corporation System and method for efficient relational query generation and tuple-to-object translation in an object-relational gateway supporting class inheritance
US6158045A (en) 1995-11-13 2000-12-05 Object Technology Licensing Corporation Portable debugging services utilizing a client debugger object and a server debugger object with flexible addressing support
US5913214A (en) 1996-05-30 1999-06-15 Massachusetts Inst Technology Data extraction from world wide web pages
US5802523A (en) 1996-06-21 1998-09-01 Oracle Corporation Method and apparatus for reducing the memory required to store bind variable descriptors in a database
US5893104A (en) 1996-07-09 1999-04-06 Oracle Corporation Method and system for processing queries in a database system using index structures that are not native to the database system
US5920716A (en) 1996-11-26 1999-07-06 Hewlett-Packard Company Compiling a predicated code with direct analysis of the predicated code
US5937401A (en) 1996-11-27 1999-08-10 Sybase, Inc. Database system with improved methods for filtering duplicates from a tuple stream
US5937195A (en) 1996-11-27 1999-08-10 Hewlett-Packard Co Global control flow treatment of predicated code
US5857182A (en) 1997-01-21 1999-01-05 International Business Machines Corporation Database management system, method and program for supporting the mutation of a composite object without read/write and write/write conflicts
US6212673B1 (en) 1997-03-31 2001-04-03 International Business Machines Corporation Component-neutral builder interface
US6108666A (en) 1997-06-12 2000-08-22 International Business Machines Corporation Method and apparatus for pattern discovery in 1-dimensional event streams
US6041344A (en) 1997-06-23 2000-03-21 Oracle Corporation Apparatus and method for passing statements to foreign databases by using a virtual package
US5822750A (en) 1997-06-30 1998-10-13 International Business Machines Corporation Optimization of correlated SQL queries in a relational database management system
US6112198A (en) 1997-06-30 2000-08-29 International Business Machines Corporation Optimization of data repartitioning during parallel query optimization
US6081801A (en) 1997-06-30 2000-06-27 International Business Machines Corporation Shared nothing parallel execution of procedural constructs in SQL
US6278994B1 (en) 1997-07-10 2001-08-21 International Business Machines Corporation Fully integrated architecture for user-defined search
US6006220A (en) 1997-09-30 1999-12-21 International Business Machines Corporation Determining the optimal access path for a query at execution time using an actual value for each variable in a query for estimating a filter factor
US6006235A (en) 1997-11-26 1999-12-21 International Business Machines Corporation Method and apparatus for invoking a stored procedure or a user defined interpreted language function in a database management system
US6389436B1 (en) 1997-12-15 2002-05-14 International Business Machines Corporation Enhanced hypertext categorization using hyperlinks
US6092065A (en) 1998-02-13 2000-07-18 International Business Machines Corporation Method and apparatus for discovery, clustering and classification of patterns in 1-dimensional event streams
US6341281B1 (en) 1998-04-14 2002-01-22 Sybase, Inc. Database system with methods for optimizing performance of correlated subqueries by reusing invariant results of operator tree
US6011916A (en) 1998-05-12 2000-01-04 International Business Machines Corp. Java I/O toolkit for applications and applets
GB9812635D0 (en) 1998-06-11 1998-08-12 Olivetti Telemedia Spa Location system
US6477571B1 (en) 1998-08-11 2002-11-05 Computer Associates Think, Inc. Transaction recognition and prediction using regular expressions
US6263332B1 (en) 1998-08-14 2001-07-17 Vignette Corporation System and method for query processing of structured documents
US6367034B1 (en) 1998-09-21 2002-04-02 Microsoft Corporation Using query language for event filtering and aggregation
US6988271B2 (en) 1998-10-02 2006-01-17 Microsoft Corporation Heavyweight and lightweight instrumentation
US6546381B1 (en) 1998-11-02 2003-04-08 International Business Machines Corporation Query optimization system and method
WO2010030978A2 (en) 2008-09-15 2010-03-18 Aman James A Session automated recording together with rules based indexing, analysis and expression of content
US6763353B2 (en) 1998-12-07 2004-07-13 Vitria Technology, Inc. Real time business process analysis method and apparatus
US6108659A (en) 1998-12-22 2000-08-22 Computer Associates Think, Inc. Method and apparatus for executing stored code objects in a database
US6370537B1 (en) 1999-01-14 2002-04-09 Altoweb, Inc. System and method for the manipulation and display of structured data
US6427123B1 (en) 1999-02-18 2002-07-30 Oracle Corporation Hierarchical indexing for accessing hierarchically organized information in a relational system
US6438559B1 (en) 1999-04-02 2002-08-20 Sybase, Inc. System and method for improved serialization of Java objects
US7080062B1 (en) 1999-05-18 2006-07-18 International Business Machines Corporation Optimizing database queries using query execution plans derived from automatic summary table determining cost based queries
US6339772B1 (en) 1999-07-06 2002-01-15 Compaq Computer Corporation System and method for performing database operations on a continuous stream of tuples
US6453314B1 (en) 1999-07-30 2002-09-17 International Business Machines Corporation System and method for selective incremental deferred constraint processing after bulk loading data
JP2001060161A (ja) 1999-08-24 2001-03-06 Nec Ic Microcomput Syst Ltd デバッグ装置、方法及び記録媒体
US7457279B1 (en) 1999-09-10 2008-11-25 Vertical Communications Acquisition Corp. Method, system, and computer program product for managing routing servers and services
WO2001018712A1 (en) 1999-09-10 2001-03-15 Rodgers William C Web-based system to facilitate purchase, pick-up, and delivery of, and escrow and payment for, merchandise
US6766330B1 (en) 1999-10-19 2004-07-20 International Business Machines Corporation Universal output constructor for XML queries universal output constructor for XML queries
US6721727B2 (en) 1999-12-02 2004-04-13 International Business Machines Corporation XML documents stored as column data
US6418448B1 (en) 1999-12-06 2002-07-09 Shyam Sundar Sarkar Method and apparatus for processing markup language specifications for data and metadata used inside multiple related internet documents to navigate, query and manipulate information from a plurality of object relational databases over the web
US20020116371A1 (en) 1999-12-06 2002-08-22 David Dodds System and method for the storage, indexing and retrieval of XML documents using relation databases
JP3937380B2 (ja) 1999-12-14 2007-06-27 富士通株式会社 パスサーチ回路
US6615203B1 (en) 1999-12-17 2003-09-02 International Business Machines Corporation Method, computer program product, and system for pushdown analysis during query plan generation
US6594651B2 (en) 1999-12-22 2003-07-15 Ncr Corporation Method and apparatus for parallel execution of SQL-from within user defined functions
US6507834B1 (en) 1999-12-22 2003-01-14 Ncr Corporation Method and apparatus for parallel execution of SQL from stored procedures
US6353821B1 (en) 1999-12-23 2002-03-05 Bull Hn Information Systems Inc. Method and data processing system for detecting patterns in SQL to allow optimized use of multi-column indexes
US20020049788A1 (en) 2000-01-14 2002-04-25 Lipkin Daniel S. Method and apparatus for a web content platform
CA2399156A1 (en) 2000-02-11 2001-08-16 Sridhar Gantimahapatruni Nested relational data model
US6996557B1 (en) 2000-02-15 2006-02-07 International Business Machines Corporation Method of optimizing SQL queries where a predicate matches nullable operands
US7072896B2 (en) 2000-02-16 2006-07-04 Verizon Laboratories Inc. System and method for automatic loading of an XML document defined by a document-type definition into a relational database including the generation of a relational schema therefor
US20020029207A1 (en) 2000-02-28 2002-03-07 Hyperroll, Inc. Data aggregation server for managing a multi-dimensional database and database management system having data aggregation server integrated therein
WO2001065418A1 (en) 2000-02-28 2001-09-07 Fibercycle Networks, Inc. System and method for high speed string matching
US6449620B1 (en) 2000-03-02 2002-09-10 Nimble Technology, Inc. Method and apparatus for generating information pages using semi-structured data stored in a structured manner
US7823066B1 (en) 2000-03-03 2010-10-26 Tibco Software Inc. Intelligent console for content-based interactivity
US6751619B1 (en) 2000-03-15 2004-06-15 Microsoft Corporation Methods and apparatus for tuple management in data processing system
US6633867B1 (en) 2000-04-05 2003-10-14 International Business Machines Corporation System and method for providing a session query within the context of a dynamic search result set
US6523102B1 (en) 2000-04-14 2003-02-18 Interactive Silicon, Inc. Parallel compression/decompression system and method for implementation of in-memory compressed cache improving storage density and access speed for industry standard memory subsystems and in-line memory modules
US7020696B1 (en) 2000-05-20 2006-03-28 Ciena Corp. Distributed user management information in telecommunications networks
US7076647B2 (en) 2000-06-09 2006-07-11 Hewlett-Packard Development Company, L.P. Dynamic kernel tunables
CA2311884A1 (en) 2000-06-16 2001-12-16 Cognos Incorporated Method of managing slowly changing dimensions
US6578032B1 (en) 2000-06-28 2003-06-10 Microsoft Corporation Method and system for performing phrase/word clustering and cluster merging
US7139844B2 (en) 2000-08-04 2006-11-21 Goldman Sachs & Co. Method and system for processing financial data objects carried on broadcast data streams and delivering information to subscribing clients
US7958025B2 (en) 2000-08-04 2011-06-07 Goldman Sachs & Co. Method and system for processing raw financial data streams to produce and distribute structured and validated product offering objects
US6708186B1 (en) 2000-08-14 2004-03-16 Oracle International Corporation Aggregating and manipulating dictionary metadata in a database system
US7095744B2 (en) 2000-11-22 2006-08-22 Dune Networks Method and system for switching variable sized packets
US20020156792A1 (en) 2000-12-06 2002-10-24 Biosentients, Inc. Intelligent object handling device and method for intelligent object data in heterogeneous data environments with high data density and dynamic application needs
US6925631B2 (en) 2000-12-08 2005-08-02 Hewlett-Packard Development Company, L.P. Method, computer system and computer program product for processing extensible markup language streams
JP4219165B2 (ja) 2000-12-15 2009-02-04 ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー エンティテイにインデックス付けする方法
US7062749B2 (en) 2000-12-15 2006-06-13 Promenix, Inc. Measuring, monitoring and tracking enterprise communications and processes
US8307197B2 (en) 2001-02-14 2012-11-06 University Of North Carolina At Charlotte Short-circuit evaluation of Boolean expression by rolling up sub-expression result in registers storing default value
US7577916B2 (en) 2001-02-21 2009-08-18 Fuji Xerox Co., Ltd. Method and apparatus for management and representation of dynamic context
US7185232B1 (en) 2001-02-28 2007-02-27 Cenzic, Inc. Fault injection methods and apparatus
US6542911B2 (en) 2001-03-01 2003-04-01 Sun Microsystems, Inc. Method and apparatus for freeing memory from an extensible markup language document object model tree active in an application cache
WO2002071260A1 (en) 2001-03-01 2002-09-12 Aalborg Universitet Adaptable query optimization and evaluation in temporal middleware
GB2377038A (en) 2001-04-10 2002-12-31 I2 Ltd Method for identifying patterns in sequential event streams
US6904019B2 (en) * 2001-04-13 2005-06-07 Agilent Technologies, Inc. Identifying a pattern in a data stream
US6748386B1 (en) 2001-04-24 2004-06-08 Nec Corporation System and method for automated construction of URL, cookie, and database query mapping
US6785677B1 (en) 2001-05-02 2004-08-31 Unisys Corporation Method for execution of query to search strings of characters that match pattern with a target string utilizing bit vector
US6850925B2 (en) 2001-05-15 2005-02-01 Microsoft Corporation Query optimization by sub-plan memoization
US7540011B2 (en) 2001-06-11 2009-05-26 Arrowsight, Inc. Caching graphical interface for displaying video and ancillary data from a saved video
US7757225B2 (en) 2001-06-29 2010-07-13 Microsoft Corporation Linktime recognition of alternative implementations of programmed functionality
US8332502B1 (en) 2001-08-15 2012-12-11 Metavante Corporation Business to business network management event detection and response system and method
US6856981B2 (en) 2001-09-12 2005-02-15 Safenet, Inc. High speed data stream pattern recognition
US7203927B2 (en) 2001-09-20 2007-04-10 International Business Machines Corporation SQL debugging using XML dataflows
US20030065655A1 (en) 2001-09-28 2003-04-03 International Business Machines Corporation Method and apparatus for detecting query-driven topical events using textual phrases on foils as indication of topic
AU2002334721B2 (en) 2001-09-28 2008-10-23 Oracle International Corporation An index structure to access hierarchical data in a relational database system
US6915290B2 (en) 2001-12-11 2005-07-05 International Business Machines Corporation Database query optimization apparatus and method that represents queries as graphs
US7475058B2 (en) 2001-12-14 2009-01-06 Microsoft Corporation Method and system for providing a distributed querying and filtering system
US7117200B2 (en) 2002-01-11 2006-10-03 International Business Machines Corporation Synthesizing information-bearing content from multiple channels
US20030135304A1 (en) 2002-01-11 2003-07-17 Brian Sroub System and method for managing transportation assets
CA2473446A1 (en) 2002-01-14 2003-07-24 Jerzy Lewak Identifier vocabulary data access method and system
US7225188B1 (en) 2002-02-13 2007-05-29 Cisco Technology, Inc. System and method for performing regular expression matching with high parallelism
US6985904B1 (en) 2002-02-28 2006-01-10 Oracle International Corporation Systems and methods for sharing of execution plans for similar database statements
CA2374271A1 (en) 2002-03-01 2003-09-01 Ibm Canada Limited-Ibm Canada Limitee Redundant join elimination and sub-query elimination using subsumption
US7567953B2 (en) 2002-03-01 2009-07-28 Business Objects Americas System and method for retrieving and organizing information from disparate computer network information sources
US7107285B2 (en) 2002-03-16 2006-09-12 Questerra Corporation Method, system, and program for an improved enterprise spatial system
US20080010241A1 (en) 2002-04-02 2008-01-10 Mcgoveran David O Computer-implemented method for managing through symbolic abstraction of a membership expression multiple logical representations and storage structures
AU2003231176A1 (en) 2002-04-29 2003-11-17 Laboratory For Computational Analytics And Semiotics, Llc Sequence miner
EP1361526A1 (en) 2002-05-08 2003-11-12 Accenture Global Services GmbH Electronic data processing system and method of using an electronic processing system for automatically determining a risk indicator value
US7457810B2 (en) 2002-05-10 2008-11-25 International Business Machines Corporation Querying markup language data sources using a relational query processor
US20030236766A1 (en) 2002-05-14 2003-12-25 Zenon Fortuna Identifying occurrences of selected events in a system
US7093023B2 (en) 2002-05-21 2006-08-15 Washington University Methods, systems, and devices using reprogrammable hardware for high-speed processing of streaming data to find a redefinable pattern and respond thereto
US7590987B2 (en) 2002-06-05 2009-09-15 Sap Ag Apparatus and method for integrating variable subsidiary information with main office information in an enterprise system
AU2003263987A1 (en) 2002-08-05 2004-02-23 John Campbell System of finite state machines
US7840550B2 (en) 2002-08-13 2010-11-23 International Business Machines Corporation System and method for monitoring database queries
US7451143B2 (en) 2002-08-28 2008-11-11 Cisco Technology, Inc. Programmable rule processing apparatus for conducting high speed contextual searches and characterizations of patterns in data
US8165993B2 (en) 2002-09-06 2012-04-24 Oracle International Corporation Business intelligence system with interface that provides for immediate user action
US7120645B2 (en) 2002-09-27 2006-10-10 Oracle International Corporation Techniques for rewriting XML queries directed to relational database constructs
US7043476B2 (en) 2002-10-11 2006-05-09 International Business Machines Corporation Method and apparatus for data mining to discover associations and covariances associated with data
FR2846181B1 (fr) 2002-10-16 2005-09-02 Canon Kk Procede et dispositif de selection de donnees dans un reseau de communication
US7653645B1 (en) 2002-10-29 2010-01-26 Novell, Inc. Multi-epoch method for saving and exporting file system events
US7213040B1 (en) 2002-10-29 2007-05-01 Novell, Inc. Apparatus for policy based storage of file data and meta-data changes over time
US20040088404A1 (en) 2002-11-01 2004-05-06 Vikas Aggarwal Administering users in a fault and performance monitoring system using distributed data gathering and storage
US7134143B2 (en) 2003-02-04 2006-11-07 Stellenberg Gerald S Method and apparatus for data packet pattern matching
GB0228447D0 (en) 2002-12-06 2003-01-08 Nicholls Charles M System for detecting and interpreting transactions events or changes in computer systems
US7051034B1 (en) 2002-12-18 2006-05-23 Oracle International Corporation Dynamic optimization for processing a restartable sub-tree of a query execution plan
US20050096124A1 (en) 2003-01-21 2005-05-05 Asip Holdings, Inc. Parimutuel wagering system with opaque transactions
US7954109B1 (en) 2003-01-24 2011-05-31 Jds Uniphase Corporation Systems and methods for time based sorting and display of captured data events in a multi-protocol communications system
US7437675B2 (en) 2003-02-03 2008-10-14 Hewlett-Packard Development Company, L.P. System and method for monitoring event based systems
US7634501B2 (en) 2003-02-05 2009-12-15 Next Generation Software Method and apparatus for mediated cooperation
WO2004072797A2 (en) 2003-02-07 2004-08-26 Safenet, Inc. System and method for determining the start of a match of a regular expression
US7062507B2 (en) 2003-02-24 2006-06-13 The Boeing Company Indexing profile for efficient and scalable XML based publish and subscribe system
US7185315B2 (en) 2003-02-25 2007-02-27 Sheet Dynamics, Ltd. Graphical feedback of disparities in target designs in graphical development environment
US7693810B2 (en) 2003-03-04 2010-04-06 Mantas, Inc. Method and system for advanced scenario based alert generation and processing
US7324108B2 (en) 2003-03-12 2008-01-29 International Business Machines Corporation Monitoring events in a computer network
JP2004280283A (ja) 2003-03-13 2004-10-07 Hitachi Ltd 分散ファイルシステム、分散ファイルシステムサーバ及び分散ファイルシステムへのアクセス方法
US7392239B2 (en) 2003-04-14 2008-06-24 International Business Machines Corporation System and method for querying XML streams
US6986019B1 (en) * 2003-04-21 2006-01-10 Maxtor Corporation Method and apparatus for detection and management of data streams
CA2427209A1 (en) 2003-04-30 2004-10-30 Ibm Canada Limited - Ibm Canada Limitee Optimization of queries on views defined by conditional expressions having mutually exclusive conditions
US7386568B2 (en) 2003-05-01 2008-06-10 Oracle International Corporation Techniques for partial rewrite of XPath queries in a relational database
US7103611B2 (en) 2003-05-01 2006-09-05 Oracle International Corporation Techniques for retaining hierarchical information in mapping between XML documents and relational data
US6836778B2 (en) 2003-05-01 2004-12-28 Oracle International Corporation Techniques for changing XML content in a relational database
US7222123B2 (en) 2003-05-28 2007-05-22 Oracle International Corporation Technique for using a current lookup for performing multiple merge operations using source data that is modified in between the merge operations
US7546284B1 (en) 2003-06-11 2009-06-09 Blue Titan Software, Inc. Virtual message persistence service
US7146352B2 (en) 2003-06-23 2006-12-05 Microsoft Corporation Query optimizer system and method
US7519577B2 (en) 2003-06-23 2009-04-14 Microsoft Corporation Query intermediate language method and system
CA2433750A1 (en) 2003-06-27 2004-12-27 Ibm Canada Limited - Ibm Canada Limitee Automatic collection of trace detail and history data
EP1649390B1 (en) 2003-07-07 2014-08-20 IBM International Group BV Optimized sql code generation
US20050010896A1 (en) 2003-07-07 2005-01-13 International Business Machines Corporation Universal format transformation between relational database management systems and extensible markup language using XML relational transformation
US20060242180A1 (en) 2003-07-23 2006-10-26 Graf James A Extracting data from semi-structured text documents
JP2007500401A (ja) 2003-07-25 2007-01-11 ジンガー,アーサー,アール. ソフトウェアデバッギング用装置とその方法
US7873645B2 (en) 2003-09-05 2011-01-18 Oracle International Corporation Method and mechanism for handling arbitrarily-sized XML in SQL operator tree
US20050108368A1 (en) 2003-10-30 2005-05-19 Aditya Mohan Method and apparatus for representing data available in a peer-to-peer network using bloom-filters
US20050097128A1 (en) 2003-10-31 2005-05-05 Ryan Joseph D. Method for scalable, fast normalization of XML documents for insertion of data into a relational database
US7167848B2 (en) 2003-11-07 2007-01-23 Microsoft Corporation Generating a hierarchical plain-text execution plan from a database query
GB0327589D0 (en) 2003-11-27 2003-12-31 Ibm Searching in a computer network
US9116929B2 (en) 2003-12-08 2015-08-25 Teradata Us, Inc. Workload priority influenced data temperature
US7508985B2 (en) 2003-12-10 2009-03-24 International Business Machines Corporation Pattern-matching system
US7308561B2 (en) 2003-12-12 2007-12-11 Alcatel Lucent Fast, scalable pattern-matching engine
US7440461B2 (en) * 2003-12-23 2008-10-21 Intel Corporation Methods and apparatus for detecting patterns in a data stream
US7672964B1 (en) 2003-12-31 2010-03-02 International Business Machines Corporation Method and system for dynamically initializing a view for a streaming data base system
US8775412B2 (en) 2004-01-08 2014-07-08 International Business Machines Corporation Method and system for a self-healing query access plan
US7526804B2 (en) * 2004-02-02 2009-04-28 Microsoft Corporation Hardware assist for pattern matches
US7376656B2 (en) 2004-02-10 2008-05-20 Microsoft Corporation System and method for providing user defined aggregates in a database system
US7194451B2 (en) 2004-02-26 2007-03-20 Microsoft Corporation Database monitoring system
US20050204340A1 (en) 2004-03-10 2005-09-15 Ruminer Michael D. Attribute-based automated business rule identifier and methods of implementing same
US7218325B1 (en) 2004-03-31 2007-05-15 Trading Technologies International, Inc. Graphical display with integrated recent period zoom and historical period context data
US7398265B2 (en) 2004-04-09 2008-07-08 Oracle International Corporation Efficient query processing of XML data using XML index
US20050273352A1 (en) 2004-05-07 2005-12-08 Lombardi Software, Inc. Business method for continuous process improvement
US7249135B2 (en) * 2004-05-14 2007-07-24 Microsoft Corporation Method and system for schema matching of web databases
US20050273450A1 (en) 2004-05-21 2005-12-08 Mcmillen Robert J Regular expression acceleration engine and processing model
US7552365B1 (en) 2004-05-26 2009-06-23 Amazon Technologies, Inc. Web site system with automated processes for detecting failure events and for selecting failure events for which to request user feedback
US7516121B2 (en) 2004-06-23 2009-04-07 Oracle International Corporation Efficient evaluation of queries using translation
US7599924B2 (en) 2004-06-25 2009-10-06 International Business Machines Corporation Relationship management in a data abstraction model
US7370273B2 (en) 2004-06-30 2008-05-06 International Business Machines Corporation System and method for creating dynamic folder hierarchies
US20060007308A1 (en) 2004-07-12 2006-01-12 Ide Curtis E Environmentally aware, intelligent surveillance device
US7668806B2 (en) 2004-08-05 2010-02-23 Oracle International Corporation Processing queries against one or more markup language sources
US20060047696A1 (en) 2004-08-24 2006-03-02 Microsoft Corporation Partially materialized views
GB0420097D0 (en) 2004-09-10 2004-10-13 Cotares Ltd Apparatus for and method of providing data to an external application
US20060064438A1 (en) 2004-09-17 2006-03-23 International Business Machines Corporation Methods and apparartus for monitoring abnormalities in data stream
US7668856B2 (en) 2004-09-30 2010-02-23 Alcatel-Lucent Usa Inc. Method for distinct count estimation over joins of continuous update stream
US7310638B1 (en) 2004-10-06 2007-12-18 Metra Tech Method and apparatus for efficiently processing queries in a streaming transaction processing system
US7519962B2 (en) 2004-10-07 2009-04-14 Thomson Financial Llc Command script parsing using local and extended storage for command lookup
EP1825395A4 (en) 2004-10-25 2010-07-07 Yuanhua Tang FULL TEXT INTERROGATION AND RESEARCH SYSTEMS AND METHODS OF USE
US20080077570A1 (en) 2004-10-25 2008-03-27 Infovell, Inc. Full Text Query and Search Systems and Method of Use
US7403945B2 (en) 2004-11-01 2008-07-22 Sybase, Inc. Distributed database system providing data and space management methodology
US7533087B2 (en) 2004-11-05 2009-05-12 International Business Machines Corporation Method, system, and program for executing a query having a union all operator and data modifying operations
US20060100969A1 (en) 2004-11-08 2006-05-11 Min Wang Learning-based method for estimating cost and statistics of complex operators in continuous queries
US7493304B2 (en) 2004-11-12 2009-02-17 International Business Machines Corporation Adjusting an amount of data logged for a query based on a change to an access plan
US7526461B2 (en) 2004-11-17 2009-04-28 Gm Global Technology Operations, Inc. System and method for temporal data mining
JP2006155404A (ja) 2004-11-30 2006-06-15 Toshiba Corp 時間情報抽出装置、時間情報抽出方法、及び時間情報抽出プログラム
US7383253B1 (en) 2004-12-17 2008-06-03 Coral 8, Inc. Publish and subscribe capable continuous query processor for real-time data streams
US20060155719A1 (en) 2005-01-10 2006-07-13 International Business Machines Corporation Complex event discovery in event databases
EP1684192A1 (en) 2005-01-25 2006-07-26 Ontoprise GmbH Integration platform for heterogeneous information sources
US20060166704A1 (en) 2005-01-26 2006-07-27 Benco David S Method for alerting a subscriber of an emergency call request
WO2006081474A2 (en) 2005-01-27 2006-08-03 Intel Corp. Multi-path simultaneous xpath evaluation over data streams
US8396886B1 (en) 2005-02-03 2013-03-12 Sybase Inc. Continuous processing language for real-time data streams
WO2006089411A1 (en) 2005-02-22 2006-08-31 Connectif Solutions Inc. Distributed asset management system and method
KR100690787B1 (ko) 2005-02-25 2007-03-09 엘지전자 주식회사 무선통신 시스템에서 이벤트 통지방법
CA2599382A1 (en) 2005-03-03 2006-09-14 Washington University Method and apparatus for performing biosequence similarity searching
US8463801B2 (en) 2005-04-04 2013-06-11 Oracle International Corporation Effectively and efficiently supporting XML sequence type and XQuery sequence natively in a SQL system
US7428555B2 (en) 2005-04-07 2008-09-23 Google Inc. Real-time, computer-generated modifications to an online advertising program
US7685150B2 (en) 2005-04-19 2010-03-23 Oracle International Corporation Optimization of queries over XML views that are based on union all operators
US8145686B2 (en) 2005-05-06 2012-03-27 Microsoft Corporation Maintenance of link level consistency between database and file system
US7627544B2 (en) * 2005-05-20 2009-12-01 Microsoft Corporation Recognizing event patterns from event streams
JP4687253B2 (ja) 2005-06-03 2011-05-25 株式会社日立製作所 ストリームデータ処理システムのクエリ処理方法
US20060294095A1 (en) 2005-06-09 2006-12-28 Mantas, Inc. Runtime thresholds for behavior detection
US9792351B2 (en) 2005-06-10 2017-10-17 International Business Machines Corporation Tolerant and extensible discovery of relationships in data using structural information and data analysis
US9747560B2 (en) 2005-07-13 2017-08-29 Sap Se Method and system for combination of independent demand data streams
US7818313B1 (en) 2005-07-18 2010-10-19 Sybase, Inc. Method for distributing processing of queries over a cluster of servers in a continuous processing system
JP4723301B2 (ja) 2005-07-21 2011-07-13 株式会社日立製作所 ストリームデータ処理システムおよびストリームデータ処理方法
US7962616B2 (en) 2005-08-11 2011-06-14 Micro Focus (Us), Inc. Real-time activity monitoring and reporting
US20090172014A1 (en) 2005-08-23 2009-07-02 Raymond John Huetter Stream-Oriented Database Machine and Method
US7990646B2 (en) 2005-09-30 2011-08-02 Seagate Technology Llc Data pattern detection using adaptive search windows
US7937257B2 (en) 2005-10-10 2011-05-03 Oracle International Corporation Estimating performance of application based on automatic resizing of shared memory for messaging
KR100813000B1 (ko) 2005-12-01 2008-03-13 한국전자통신연구원 데이터 중복 처리 방지 기능을 가지는 스트림 데이터 처리시스템 및 그 방법
US7702629B2 (en) 2005-12-02 2010-04-20 Exegy Incorporated Method and device for high performance regular expression pattern matching
US20070136254A1 (en) 2005-12-08 2007-06-14 Hyun-Hwa Choi System and method for processing integrated queries against input data stream and data stored in database using trigger
US7730023B2 (en) 2005-12-22 2010-06-01 Business Objects Sotware Ltd. Apparatus and method for strategy map validation and visualization
US20070168154A1 (en) 2005-12-23 2007-07-19 Ericson Richard E User interface for statistical data analysis
US7502889B2 (en) 2005-12-30 2009-03-10 Intel Corporation Home node aware replacement policy for caches in a multiprocessor system
US7814111B2 (en) 2006-01-03 2010-10-12 Microsoft International Holdings B.V. Detection of patterns in data records
US7844829B2 (en) 2006-01-18 2010-11-30 Sybase, Inc. Secured database system with built-in antivirus protection
US20070192301A1 (en) 2006-02-15 2007-08-16 Encirq Corporation Systems and methods for indexing and searching data records based on distance metrics
US20070198479A1 (en) 2006-02-16 2007-08-23 International Business Machines Corporation Streaming XPath algorithm for XPath expressions with predicates
US7446352B2 (en) 2006-03-09 2008-11-04 Tela Innovations, Inc. Dynamic array architecture
US7689582B2 (en) 2006-03-10 2010-03-30 International Business Machines Corporation Data flow system and method for heterogeneous data integration environments
US7536396B2 (en) 2006-03-21 2009-05-19 At&T Intellectual Property Ii, L.P. Query-aware sampling of data streams
US7877381B2 (en) 2006-03-24 2011-01-25 International Business Machines Corporation Progressive refinement of a federated query plan during query execution
US20070226188A1 (en) 2006-03-27 2007-09-27 Theodore Johnson Method and apparatus for data stream sampling
WO2007113533A1 (en) 2006-03-31 2007-10-11 British Telecommunications Public Limited Company Xml-based transfer and a local storage of java objects
US7644066B2 (en) 2006-03-31 2010-01-05 Oracle International Corporation Techniques of efficient XML meta-data query using XML table index
GB0606776D0 (en) 2006-04-03 2006-05-10 Novartis Pharma Ag Predictive biomarkers for chronic allograft nephropathy
US7974984B2 (en) 2006-04-19 2011-07-05 Mobile Content Networks, Inc. Method and system for managing single and multiple taxonomies
WO2007122347A1 (fr) 2006-04-20 2007-11-01 France Telecom Procede d'optimisation de la collecte d'evenements, procede de supervision, produits programmes d'ordinateur et dispositifs correspondants
CN100449435C (zh) 2006-04-20 2009-01-07 重庆杰信模具有限公司 基于kbe及web技术的锻模设计与制造系统
US7636703B2 (en) 2006-05-02 2009-12-22 Exegy Incorporated Method and apparatus for approximate pattern matching
US7548937B2 (en) 2006-05-04 2009-06-16 International Business Machines Corporation System and method for scalable processing of multi-way data stream correlations
US8131696B2 (en) 2006-05-19 2012-03-06 Oracle International Corporation Sequence event processing using append-only tables
JP4804233B2 (ja) 2006-06-09 2011-11-02 株式会社日立製作所 ストリームデータ処理方法
US7613848B2 (en) 2006-06-13 2009-11-03 International Business Machines Corporation Dynamic stabilization for a stream processing system
US20070294217A1 (en) 2006-06-14 2007-12-20 Nec Laboratories America, Inc. Safety guarantee of continuous join queries over punctuated data streams
US20070294500A1 (en) * 2006-06-16 2007-12-20 Falco Michael A Methods and system to provide references associated with data streams
US7921046B2 (en) 2006-06-19 2011-04-05 Exegy Incorporated High speed processing of financial information using FPGA devices
US20080010093A1 (en) 2006-06-30 2008-01-10 Laplante Pierre System and Method for Processing Health Information
US7499909B2 (en) 2006-07-03 2009-03-03 Oracle International Corporation Techniques of using a relational caching framework for efficiently handling XML queries in the mid-tier data caching
US20080016095A1 (en) 2006-07-13 2008-01-17 Nec Laboratories America, Inc. Multi-Query Optimization of Window-Based Stream Queries
US7496683B2 (en) 2006-07-27 2009-02-24 International Business Machines Corporation Maximization of sustained throughput of distributed continuous queries
US8671091B2 (en) 2006-08-02 2014-03-11 Hewlett-Packard Development Company, L.P. Optimizing snowflake schema queries
US20080034427A1 (en) 2006-08-02 2008-02-07 Nec Laboratories America, Inc. Fast and scalable process for regular expression search
WO2008018080A2 (en) 2006-08-11 2008-02-14 Bizwheel Ltd. Smart integration engine and metadata-oriented architecture for automatic eii and business integration
US8099400B2 (en) 2006-08-18 2012-01-17 National Instruments Corporation Intelligent storing and retrieving in an enterprise data system
KR100778314B1 (ko) 2006-08-21 2007-11-22 한국전자통신연구원 사용자 정의 공유 트리거를 이용한 데이터 스트림과 저장데이터에 대한 통합 연속 질의 처리 시스템 및 그 방법
US8260910B2 (en) 2006-09-19 2012-09-04 Oracle America, Inc. Method and apparatus for monitoring a data stream to detect a pattern of data elements using bloom filters
US20080082484A1 (en) 2006-09-28 2008-04-03 Ramot At Tel-Aviv University Ltd. Fast processing of an XML data stream
US20080098359A1 (en) 2006-09-29 2008-04-24 Ventsislav Ivanov Manipulation of trace sessions based on address parameters
US20080082514A1 (en) 2006-09-29 2008-04-03 International Business Machines Corporation Method and apparatus for integrating relational and hierarchical data
US8645176B2 (en) 2006-10-05 2014-02-04 Trimble Navigation Limited Utilizing historical data in an asset management environment
US7921416B2 (en) 2006-10-20 2011-04-05 Yahoo! Inc. Formal language and translator for parallel processing of data
JP4933222B2 (ja) 2006-11-15 2012-05-16 株式会社日立製作所 インデックス処理方法及び計算機システム
US9436779B2 (en) 2006-11-17 2016-09-06 Oracle International Corporation Techniques of efficient XML query using combination of XML table index and path/value index
US20080120283A1 (en) 2006-11-17 2008-05-22 Oracle International Corporation Processing XML data stream(s) using continuous queries in a data stream management system
US7831606B2 (en) 2006-12-08 2010-11-09 Pandya Ashish A Signature search architecture for programmable intelligent search memory
US7716210B2 (en) 2006-12-20 2010-05-11 International Business Machines Corporation Method and apparatus for XML query evaluation using early-outs and multiple passes
US7895187B2 (en) 2006-12-21 2011-02-22 Sybase, Inc. Hybrid evaluation of expressions in DBMS
US20080195577A1 (en) 2007-02-09 2008-08-14 Wei Fan Automatically and adaptively determining execution plans for queries with parameter markers
US7630982B2 (en) 2007-02-24 2009-12-08 Trend Micro Incorporated Fast identification of complex strings in a data stream
US20090327102A1 (en) 2007-03-23 2009-12-31 Jatin Maniar System and method for providing real time asset visibility
US7827146B1 (en) 2007-03-30 2010-11-02 Symantec Operating Corporation Storage system
US8065319B2 (en) 2007-04-01 2011-11-22 Nec Laboratories America, Inc. Runtime semantic query optimization for event stream processing
US8098248B2 (en) 2007-04-02 2012-01-17 International Business Machines Corporation Method for semantic modeling of stream processing components to enable automatic application composition
US8370812B2 (en) 2007-04-02 2013-02-05 International Business Machines Corporation Method and system for automatically assembling processing graphs in information processing systems
US7818292B2 (en) 2007-04-05 2010-10-19 Anil Kumar Nori SQL change tracking layer
JP2008262046A (ja) 2007-04-12 2008-10-30 Hitachi Ltd 会議可視化システム、会議可視化方法、及び集計処理サーバ
US7899904B2 (en) * 2007-04-30 2011-03-01 Lsi Corporation Hardware processing of regular expressions
US8156247B2 (en) 2007-04-30 2012-04-10 Lsi Corportion Systems and methods for reducing network performance degradation
US7945540B2 (en) 2007-05-04 2011-05-17 Oracle International Corporation Method to create a partition-by time/tuple-based window in an event processing service
US7912853B2 (en) 2007-05-07 2011-03-22 International Business Machines Corporation Query processing client-server database system
US7953728B2 (en) 2007-05-18 2011-05-31 Oracle International Corp. Queries with soft time constraints
US20080301125A1 (en) 2007-05-29 2008-12-04 Bea Systems, Inc. Event processing query language including an output clause
US7975109B2 (en) 2007-05-30 2011-07-05 Schooner Information Technology, Inc. System including a fine-grained memory and a less-fine-grained memory
US7792784B2 (en) * 2007-05-31 2010-09-07 International Business Machines Corporation Streaming multidimensional data by bypassing multidimensional query processor
US7984040B2 (en) 2007-06-05 2011-07-19 Oracle International Corporation Methods and systems for querying event streams using multiple event processors
US7933894B2 (en) 2007-06-15 2011-04-26 Microsoft Corporation Parameter-sensitive plans for structural scenarios
US7689622B2 (en) 2007-06-28 2010-03-30 Microsoft Corporation Identification of events of search queries
US8832073B2 (en) 2007-06-29 2014-09-09 Alcatel Lucent Method and apparatus for efficient aggregate computation over data streams
US7676461B2 (en) 2007-07-18 2010-03-09 Microsoft Corporation Implementation of stream algebra over class instances
US7984043B1 (en) 2007-07-24 2011-07-19 Amazon Technologies, Inc. System and method for distributed query processing using configuration-independent query plans
US8055653B2 (en) 2007-08-09 2011-11-08 International Business Machines Corporation Processing overlapping continuous queries
US7827299B2 (en) 2007-09-11 2010-11-02 International Business Machines Corporation Transitioning between historical and real time data streams in the processing of data change messages
US20090070786A1 (en) 2007-09-11 2009-03-12 Bea Systems, Inc. Xml-based event processing networks for event server
US20090076899A1 (en) 2007-09-14 2009-03-19 Gbodimowo Gbeminiyi A Method for analyzing, searching for, and trading targeted advertisement spaces
US7979420B2 (en) 2007-10-16 2011-07-12 Oracle International Corporation Handling silent relations in a data stream management system
US7996388B2 (en) 2007-10-17 2011-08-09 Oracle International Corporation Adding new continuous queries to a data stream management system operating on existing queries
US8335767B2 (en) 2007-10-17 2012-12-18 Oracle International Corporation Maintaining and utilizing SQL execution plan histories
US8296316B2 (en) 2007-10-17 2012-10-23 Oracle International Corporation Dynamically sharing a subtree of operators in a data stream management system operating on existing queries
US7739265B2 (en) 2007-10-18 2010-06-15 Oracle International Corporation Deleting a continuous query from a data stream management system continuing to operate on other queries
US8073826B2 (en) 2007-10-18 2011-12-06 Oracle International Corporation Support for user defined functions in a data stream management system
US8307343B2 (en) 2007-10-19 2012-11-06 Microsoft Corporation Application and database context correlation for database application developers
US7991766B2 (en) 2007-10-20 2011-08-02 Oracle International Corporation Support for user defined aggregations in a data stream management system
US8521867B2 (en) 2007-10-20 2013-08-27 Oracle International Corporation Support for incrementally processing user defined aggregations in a data stream management system
US7673065B2 (en) 2007-10-20 2010-03-02 Oracle International Corporation Support for sharing computation between aggregations in a data stream management system
US7827127B2 (en) 2007-10-26 2010-11-02 Microsoft Corporation Data scoping and data flow in a continuation based runtime
JP5377897B2 (ja) 2007-10-29 2013-12-25 株式会社日立製作所 ストリームデータのランキングクエリ処理方法およびランキングクエリ処理機構を有するストリームデータ処理システム
US8335782B2 (en) 2007-10-29 2012-12-18 Hitachi, Ltd. Ranking query processing method for stream data and stream data processing system having ranking query processing mechanism
US8103655B2 (en) 2007-10-30 2012-01-24 Oracle International Corporation Specifying a family of logics defining windows in data stream management systems
US8019747B2 (en) 2007-10-30 2011-09-13 Oracle International Corporation Facilitating flexible windows in data stream management systems
US20090125550A1 (en) 2007-11-08 2009-05-14 Microsoft Corporation Temporal event stream model
US8315990B2 (en) 2007-11-08 2012-11-20 Microsoft Corporation Consistency sensitive streaming operators
US7870167B2 (en) 2007-11-09 2011-01-11 Oracle America, Inc. Implementing event processors
US9275353B2 (en) 2007-11-09 2016-03-01 Oracle America, Inc. Event-processing operators
KR100894910B1 (ko) 2007-11-09 2009-04-30 한국전자통신연구원 이기종 센서 네트워크 환경에서 다중 질의 처리 장치 및방법
WO2009114615A1 (en) 2008-03-11 2009-09-17 Virtual Agility, Inc. Techniques for integrating parameterized information request into a system for collaborative work
US8191074B2 (en) 2007-11-15 2012-05-29 Ericsson Ab Method and apparatus for automatic debugging technique
US8156134B2 (en) 2007-11-15 2012-04-10 International Business Machines Corporation Using different groups of query graph transform modules to generate execution plans for queries for different database types
US8429601B2 (en) 2007-11-29 2013-04-23 Red Hat, Inc. Code completion for object relational mapping query language (OQL) queries
US7870124B2 (en) 2007-12-13 2011-01-11 Oracle International Corporation Rewriting node reference-based XQuery using SQL/SML
CA2710346A1 (en) 2007-12-20 2009-07-02 Hsbc Technologies Inc. Automated methods and systems for developing and deploying projects in parallel
US7882087B2 (en) 2008-01-15 2011-02-01 At&T Intellectual Property I, L.P. Complex dependencies for efficient data warehouse updates
JP2009171193A (ja) 2008-01-16 2009-07-30 Kyocera Mita Corp 通信装置、通信方法及び通信制御プログラム
US20090192981A1 (en) 2008-01-29 2009-07-30 Olga Papaemmanouil Query Deployment Plan For A Distributed Shared Stream Processing System
US9489495B2 (en) 2008-02-25 2016-11-08 Georgetown University System and method for detecting, collecting, analyzing, and communicating event-related information
US8812487B2 (en) 2008-03-06 2014-08-19 Cisco Technology, Inc. Addition and processing of continuous SQL queries in a streaming relational database management system
US8055649B2 (en) 2008-03-06 2011-11-08 Microsoft Corporation Scaled management system
CN101261724A (zh) * 2008-03-28 2008-09-10 山东浪潮齐鲁软件产业股份有限公司 基于方案的流程管理方法
US8489610B2 (en) 2008-03-28 2013-07-16 Nec Corporation Method, system and program for information re-organization
US7958114B2 (en) 2008-04-04 2011-06-07 Microsoft Corporation Detecting estimation errors in dictinct page counts
US7872948B2 (en) 2008-04-14 2011-01-18 The Boeing Company Acoustic wide area air surveillance system
US8122050B2 (en) 2008-04-16 2012-02-21 International Business Machines Corporation Query processing visualization system and method of visualizing query processing
JP5198929B2 (ja) 2008-04-25 2013-05-15 株式会社日立製作所 ストリームデータ処理方法及び計算機システム
US8155880B2 (en) 2008-05-09 2012-04-10 Locomatix Inc. Location tracking optimizations
US8886637B2 (en) 2008-05-12 2014-11-11 Enpulz, L.L.C. Web browser accessible search engine which adapts based on user interaction
US8850409B2 (en) 2008-05-21 2014-09-30 Optumsoft, Inc. Notification-based constraint set translation to imperative execution
US7930322B2 (en) 2008-05-27 2011-04-19 Microsoft Corporation Text based schema discovery and information extraction
US8291006B2 (en) 2008-05-30 2012-10-16 International Business Machines Corporation Method for generating a distributed stream processing application
US8918507B2 (en) 2008-05-30 2014-12-23 Red Hat, Inc. Dynamic grouping of enterprise assets
US8112378B2 (en) 2008-06-17 2012-02-07 Hitachi, Ltd. Methods and systems for performing root cause analysis
US20090319501A1 (en) 2008-06-24 2009-12-24 Microsoft Corporation Translation of streaming queries into sql queries
US8316012B2 (en) 2008-06-27 2012-11-20 SAP France S.A. Apparatus and method for facilitating continuous querying of multi-dimensional data streams
US20110105857A1 (en) 2008-07-03 2011-05-05 Panasonic Corporation Impression degree extraction apparatus and impression degree extraction method
US8086644B2 (en) 2008-07-10 2011-12-27 International Business Machines Corporation Simplifying complex data stream problems involving feature extraction from noisy data
US9135583B2 (en) 2008-07-16 2015-09-15 Business Objects S.A. Systems and methods to create continuous queries associated with push-type and pull-type data
US8447739B2 (en) 2008-07-16 2013-05-21 SAP France S.A. Systems and methods to create continuous queries via a semantic layer
US8037040B2 (en) 2008-08-08 2011-10-11 Oracle International Corporation Generating continuous query notifications
US8185508B2 (en) 2008-08-08 2012-05-22 Oracle International Corporation Adaptive filter index for determining queries affected by a DML operation
US8335793B2 (en) 2008-08-22 2012-12-18 Disney Enterprises, Inc. System and method for optimized filtered data feeds to capture data and send to multiple destinations
US9305238B2 (en) 2008-08-29 2016-04-05 Oracle International Corporation Framework for supporting regular expression-based pattern matching in data streams
US8032544B2 (en) 2008-09-24 2011-10-04 The Boeing Company Methods and apparatus for generating dynamic program files based on input queries that facilitate use of persistent query services
US20100094838A1 (en) 2008-10-10 2010-04-15 Ants Software Inc. Compatibility Server for Database Rehosting
JP5337447B2 (ja) 2008-10-28 2013-11-06 株式会社日立製作所 ストリームデータ処理方法、及びシステム
JP5465413B2 (ja) 2008-10-29 2014-04-09 株式会社日立製作所 ストリームデータ処理方法、及びそのシステム
CN102202911B (zh) 2008-10-31 2014-04-09 都美工业株式会社 汽车用轮辐
US7945565B2 (en) 2008-11-20 2011-05-17 Yahoo! Inc. Method and system for generating a hyperlink-click graph
US8538981B2 (en) 2008-11-20 2013-09-17 Sap Ag Stream sharing for event data within an enterprise network
US8392402B2 (en) 2008-12-03 2013-03-05 International Business Machines Corporation Hybrid push/pull execution of continuous SQL queries
US8145621B2 (en) 2008-12-19 2012-03-27 Ianywhere Solutions, Inc. Graphical representation of query optimizer search space in a database management system
US8935293B2 (en) 2009-03-02 2015-01-13 Oracle International Corporation Framework for dynamically generating tuple and page classes
US8352517B2 (en) 2009-03-02 2013-01-08 Oracle International Corporation Infrastructure for spilling pages to a persistent store
US8145859B2 (en) 2009-03-02 2012-03-27 Oracle International Corporation Method and system for spilling from a queue to a persistent store
US8725707B2 (en) 2009-03-26 2014-05-13 Hewlett-Packard Development Company, L.P. Data continuous SQL process
US8713038B2 (en) 2009-04-02 2014-04-29 Pivotal Software, Inc. Integrating map-reduce into a distributed relational database
US8285709B2 (en) 2009-05-12 2012-10-09 Teradata Us, Inc. High-concurrency query operator and method
US8161035B2 (en) 2009-06-04 2012-04-17 Oracle International Corporation Query optimization by specifying path-based predicate evaluation in a path-based query operator
US8868725B2 (en) 2009-06-12 2014-10-21 Kent State University Apparatus and methods for real-time multimedia network traffic management and control in wireless networks
US8572589B2 (en) 2009-06-30 2013-10-29 Agilent Technologies, Inc. Programming language translator and enabling translation of machine-centric commands for controlling instrument
US8285681B2 (en) 2009-06-30 2012-10-09 Commvault Systems, Inc. Data object store and server for a cloud storage environment, including data deduplication and data management across multiple cloud storage sites
US8180801B2 (en) 2009-07-16 2012-05-15 Sap Ag Unified window support for event stream data management
US8880524B2 (en) 2009-07-17 2014-11-04 Apple Inc. Scalable real time event stream processing
US8321450B2 (en) 2009-07-21 2012-11-27 Oracle International Corporation Standardized database connectivity support for an event processing server in an embedded context
US8387076B2 (en) 2009-07-21 2013-02-26 Oracle International Corporation Standardized database connectivity support for an event processing server
US8572016B2 (en) * 2009-07-31 2013-10-29 International Business Machines Corporation Match engine for detection of multi-pattern rules
US8386466B2 (en) 2009-08-03 2013-02-26 Oracle International Corporation Log visualization tool for a data stream processing server
US8527458B2 (en) 2009-08-03 2013-09-03 Oracle International Corporation Logging framework for a data stream processing server
US20110035253A1 (en) 2009-08-07 2011-02-10 onFucus Healthcare Systems and Methods for Optimizing Enterprise Performance Relationships to Other Applications
CA2712576C (en) 2009-08-11 2012-04-10 Certusview Technologies, Llc Systems and methods for complex event processing of vehicle-related information
US8204873B2 (en) 2009-08-26 2012-06-19 Hewlett-Packard Development Company, L.P. System and method for query expression optimization
US20110084967A1 (en) 2009-10-09 2011-04-14 International Business Machines Corporation Visualization of Datasets
US8195648B2 (en) 2009-10-21 2012-06-05 Microsoft Corporation Partitioned query execution in event processing systems
US20110131588A1 (en) * 2009-12-01 2011-06-02 International Business Machines Corporation Software architecture that can sense and respond to contextual and state information
US8959106B2 (en) 2009-12-28 2015-02-17 Oracle International Corporation Class loading using java data cartridges
US9305057B2 (en) 2009-12-28 2016-04-05 Oracle International Corporation Extensible indexing framework using data cartridges
US9430494B2 (en) 2009-12-28 2016-08-30 Oracle International Corporation Spatial data cartridge for event processing systems
US9307038B2 (en) 2009-12-29 2016-04-05 Motorola Solutions, Inc. Method for presence notification based on a sequence of events
US8423576B2 (en) 2010-01-11 2013-04-16 International Business Machines Corporation System and method for querying data streams
EP2348416A1 (en) 2010-01-21 2011-07-27 Software AG Analysis system and method for analyzing continuous queries for data streams
US9805101B2 (en) * 2010-02-26 2017-10-31 Ebay Inc. Parallel data stream processing system
US8484243B2 (en) 2010-05-05 2013-07-09 Cisco Technology, Inc. Order-independent stream query processing
US8762297B2 (en) 2010-05-17 2014-06-24 Microsoft Corporation Dynamic pattern matching over ordered and disordered data streams
US8595234B2 (en) 2010-05-17 2013-11-26 Wal-Mart Stores, Inc. Processing data feeds
US10380186B2 (en) 2010-05-26 2019-08-13 Entit Software Llc Virtual topological queries
US8595840B1 (en) * 2010-06-01 2013-11-26 Trend Micro Incorporated Detection of computer network data streams from a malware and its variants
US20120116982A1 (en) 2010-06-02 2012-05-10 Salesforce. com. Inc. Method and system for escalating content of discussions to particular memory locations
CN101866353B (zh) 2010-06-09 2012-10-10 孟小峰 一种基于位置服务的连续查询隐私保护方法
US8442863B2 (en) 2010-06-17 2013-05-14 Microsoft Corporation Real-time-ready behavioral targeting in a large-scale advertisement system
US20110314019A1 (en) 2010-06-18 2011-12-22 Universidad Politecnica De Madrid Parallel processing of continuous queries on data streams
US8627329B2 (en) 2010-06-24 2014-01-07 International Business Machines Corporation Multithreaded physics engine with predictive load balancing
US8719207B2 (en) 2010-07-27 2014-05-06 Oracle International Corporation Method and system for providing decision making based on sense and respond
US8713049B2 (en) 2010-09-17 2014-04-29 Oracle International Corporation Support for a parameterized query/view in complex event processing
US8260803B2 (en) 2010-09-23 2012-09-04 Hewlett-Packard Development Company, L.P. System and method for data stream processing
EP2628093A1 (en) 2010-10-11 2013-08-21 Hewlett-Packard Development Company, L.P. System and method for querying a data stream
US9195708B2 (en) 2010-10-14 2015-11-24 Hewlett-Packard Development Company, L.P. Continuous querying of a data stream
US9189280B2 (en) 2010-11-18 2015-11-17 Oracle International Corporation Tracking large numbers of moving objects in an event processing system
US20120130963A1 (en) 2010-11-24 2012-05-24 Teradata Us, Inc. User defined function database processing
EP2469420B1 (en) 2010-12-22 2019-11-27 Software AG CEP engine and method for processing CEP queries
US8788484B2 (en) 2010-12-27 2014-07-22 Software Ag Systems and/or methods for user feedback driven dynamic query rewriting in complex event processing environments
US9350567B2 (en) 2011-01-25 2016-05-24 International Business Machines Corporation Network resource configurations
US8799271B2 (en) 2011-01-25 2014-08-05 Hewlett-Packard Development Company, L.P. Range predicate canonization for translating a query
US8655825B2 (en) 2011-03-10 2014-02-18 Sap Ag Efficient management of data quality for streaming event data
US8751639B2 (en) 2011-04-27 2014-06-10 Rackspace Us, Inc. Event queuing and distribution system
US8990416B2 (en) 2011-05-06 2015-03-24 Oracle International Corporation Support for a new insert stream (ISTREAM) operation in complex event processing (CEP)
US8762369B2 (en) 2011-05-10 2014-06-24 Telefonaktiebolaget L M Ericsson (Publ) Optimized data stream management system
US8738572B2 (en) * 2011-05-24 2014-05-27 Red Lambda, Inc. System and method for storing data streams in a distributed environment
US9965520B2 (en) 2011-06-17 2018-05-08 Microsoft Corporation Efficient logical merging over physically divergent streams
US9329975B2 (en) 2011-07-07 2016-05-03 Oracle International Corporation Continuous query language (CQL) debugger in complex event processing (CEP)
US20130031567A1 (en) 2011-07-25 2013-01-31 Microsoft Corporation Local event processing
US9286354B2 (en) 2011-08-15 2016-03-15 Software Ag Systems and/or methods for forecasting future behavior of event streams in complex event processing (CEP) environments
US8880493B2 (en) * 2011-09-28 2014-11-04 Hewlett-Packard Development Company, L.P. Multi-streams analytics
US8635208B2 (en) 2011-11-03 2014-01-21 Sap Ag Multi-state query migration in data stream management
US9424150B2 (en) 2011-12-06 2016-08-23 Sap Se Fault tolerance based query execution
WO2013131570A1 (en) 2012-03-08 2013-09-12 Telefonaktiebolaget L M Ericsson (Publ) Data stream management systems
US9201911B2 (en) 2012-03-29 2015-12-01 International Business Machines Corporation Managing test data in large scale performance environment
US9239864B2 (en) 2012-04-17 2016-01-19 Cisco Technology, Inc. Distributing and processing streams over one or more networks
CN102665207A (zh) 2012-05-08 2012-09-12 杭州电子科技大学 Lbs中基于移动终端的连续查询用户位置隐匿方法
US20130332240A1 (en) 2012-06-08 2013-12-12 University Of Southern California System for integrating event-driven information in the oil and gas fields
EP2868045B1 (en) * 2012-06-29 2018-08-08 Telefonaktiebolaget LM Ericsson (publ) A method of and network server for detecting data patterns in an input data stream
US20140019194A1 (en) 2012-07-12 2014-01-16 Bank Of America Predictive Key Risk Indicator Identification Process Using Quantitative Methods
US9009213B2 (en) 2012-08-27 2015-04-14 Sap Se Distributing pre-rendering processing tasks
CN102892073B (zh) 2012-09-11 2015-07-01 北京航空航天大学 一种适用于位置服务系统中面向连续查询的位置匿名方法
US20140082013A1 (en) 2012-09-20 2014-03-20 Sap Ag Query templates for queries in data stream management systems
US9563663B2 (en) 2012-09-28 2017-02-07 Oracle International Corporation Fast path evaluation of Boolean predicates
US9953059B2 (en) 2012-09-28 2018-04-24 Oracle International Corporation Generation of archiver queries for continuous queries over archived relations
US8892484B2 (en) 2012-09-28 2014-11-18 Sphere Of Influence, Inc. System and method for predicting events
US10956422B2 (en) 2012-12-05 2021-03-23 Oracle International Corporation Integrating event processing with map-reduce
US9053210B2 (en) 2012-12-14 2015-06-09 Microsoft Technology Licensing, Llc Graph query processing using plurality of engines
US20140172506A1 (en) 2012-12-17 2014-06-19 Microsoft Corporation Customer segmentation
US10298444B2 (en) 2013-01-15 2019-05-21 Oracle International Corporation Variable duration windows on continuous data streams
US9098587B2 (en) 2013-01-15 2015-08-04 Oracle International Corporation Variable duration non-event pattern matching
US20140237487A1 (en) * 2013-02-15 2014-08-21 University Of Southern California Complex event processing for dynamic data
US9047249B2 (en) 2013-02-19 2015-06-02 Oracle International Corporation Handling faults in a continuous event processing (CEP) system
US9390135B2 (en) 2013-02-19 2016-07-12 Oracle International Corporation Executing continuous event processing (CEP) queries in parallel
US20140324530A1 (en) * 2013-04-30 2014-10-30 Liveops, Inc. Method and system for detecting patters in data streams
US9418113B2 (en) 2013-05-30 2016-08-16 Oracle International Corporation Value based windows on relations in continuous data streams
CN104252469B (zh) * 2013-06-27 2017-10-20 国际商业机器公司 用于模式匹配的方法、设备和电路
CN103310011A (zh) * 2013-07-02 2013-09-18 曙光信息产业(北京)有限公司 集群数据库系统环境下的数据查询解析方法
US9934279B2 (en) 2013-12-05 2018-04-03 Oracle International Corporation Pattern matching across multiple input data streams
US9838512B2 (en) 2014-10-30 2017-12-05 Splunk Inc. Protocol-based capture of network data using remote capture agents
US9244978B2 (en) 2014-06-11 2016-01-26 Oracle International Corporation Custom partitioning of a data stream
US9712645B2 (en) 2014-06-26 2017-07-18 Oracle International Corporation Embedded event processing
US9886486B2 (en) 2014-09-24 2018-02-06 Oracle International Corporation Enriching events with dynamically typed big data for event processing
US10120907B2 (en) 2014-09-24 2018-11-06 Oracle International Corporation Scaling event processing using distributed flows and map-reduce operations
WO2017018901A1 (en) 2015-07-24 2017-02-02 Oracle International Corporation Visually exploring and analyzing event streams

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010108044A (ja) * 2008-10-28 2010-05-13 Hitachi Ltd ストリームデータ処理プログラム及び計算機システム
JP2011039818A (ja) * 2009-08-12 2011-02-24 Hitachi Ltd ストリームデータ処理システム、ストリームデータ処理方法及びストリームデータ処理プログラム
US20120166417A1 (en) * 2010-12-23 2012-06-28 Microsoft Corporation Asynchronous transfer of state information between continuous query plans

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
西澤 晋: ""大量のデータをリアルタイムで監視して処理する 複合イベント処理CEP"", ITアーキテクト, vol. Vol.23, JPN6018044044, 28 May 2009 (2009-05-28), pages 第128−141頁 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022064982A (ja) * 2016-03-23 2022-04-26 フォグホーン システムズ,インコーポレイテッド リアルタイムデータフロープログラミングのための効率的な状態機械
JP7326510B2 (ja) 2016-03-23 2023-08-15 フォグホーン システムズ,インコーポレイテッド リアルタイムデータフロープログラミングのための効率的な状態機械
US12093666B2 (en) 2016-03-23 2024-09-17 Tyco Fire & Security Gmbh Efficient state machines for real-time dataflow programming
KR101867220B1 (ko) * 2017-02-23 2018-06-12 전자부품연구원 스트리밍 모델 동시 지원 및 스트림 데이터에 따라 자동선택 가능한 실시간 스트림 처리방법 및 장치

Also Published As

Publication number Publication date
WO2015085103A1 (en) 2015-06-11
JP6521973B2 (ja) 2019-05-29
CN105993011B (zh) 2020-03-10
CN105993011A (zh) 2016-10-05
US9934279B2 (en) 2018-04-03
US20150161214A1 (en) 2015-06-11
EP3077926A1 (en) 2016-10-12
EP3077926B1 (en) 2018-08-01

Similar Documents

Publication Publication Date Title
JP6521973B2 (ja) 多重入力データストリームにわたるパターンマッチング
JP7333424B2 (ja) 分散イベント処理システムのためのグラフ生成
US11720581B2 (en) Query decomposition for scalability of continuous query processing
JP7316341B2 (ja) ストリームデータにおける空間変化検出器
US11394769B2 (en) Framework for the deployment of event-based applications
US11507583B2 (en) Tuple extraction using dynamically generated extractor classes
US11503107B2 (en) Integrating logic in micro batch based event processing systems
US10140352B2 (en) Interfacing with a relational database for multi-dimensional analysis via a spreadsheet application
JP6539647B2 (ja) データストリームのカスタムパーティション
US11609804B2 (en) Flexible event ingestion framework in an event processing system
US10614048B2 (en) Techniques for correlating data in a repository system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171117

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171117

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180921

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181113

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190402

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190423

R150 Certificate of patent or registration of utility model

Ref document number: 6521973

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250