JP7019589B2 - リアルタイムデータフロープログラミングのための効率的な状態機械 - Google Patents

リアルタイムデータフロープログラミングのための効率的な状態機械 Download PDF

Info

Publication number
JP7019589B2
JP7019589B2 JP2018549927A JP2018549927A JP7019589B2 JP 7019589 B2 JP7019589 B2 JP 7019589B2 JP 2018549927 A JP2018549927 A JP 2018549927A JP 2018549927 A JP2018549927 A JP 2018549927A JP 7019589 B2 JP7019589 B2 JP 7019589B2
Authority
JP
Japan
Prior art keywords
state
token
component
input
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018549927A
Other languages
English (en)
Other versions
JP2019512973A (ja
JP2019512973A5 (ja
Inventor
ルーカス,ジェイソン
シャーマ,アビシェーク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Foghorn Systems Inc
Original Assignee
Foghorn Systems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Foghorn Systems Inc filed Critical Foghorn Systems Inc
Publication of JP2019512973A publication Critical patent/JP2019512973A/ja
Publication of JP2019512973A5 publication Critical patent/JP2019512973A5/ja
Priority to JP2022014853A priority Critical patent/JP7326510B2/ja
Application granted granted Critical
Publication of JP7019589B2 publication Critical patent/JP7019589B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/448Execution paradigms, e.g. implementations of programming paradigms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/35Creation or generation of source code model driven
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/448Execution paradigms, e.g. implementations of programming paradigms
    • G06F9/4498Finite state machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3664Environments for testing or debugging software
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/31Programming languages or programming paradigms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/34Graphical or visual programming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/40Transformation of program code
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computer And Data Communications (AREA)
  • Debugging And Monitoring (AREA)
  • Information Transfer Between Computers (AREA)
  • Stored Programmes (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Testing Or Calibration Of Command Recording Devices (AREA)
  • User Interface Of Digital Computer (AREA)
  • Devices For Executing Special Programs (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Description

説明
関連出願との相互参照
この特許出願は、2016年3月23日に出願された米国特許出願第62/312,106号、第62/312,187号、第62/312,223号、および第62/312,255号の利益を主張し、それらは、本願で引用されたすべての他の引例とともに、引用により援用される。
発明の背景
この発明はコンピューティングの分野に関し、より具体的には、産業用機械によって生成される大量のデータを取扱うためのエッジコンピューティングにおいて用いられてもよいリアルタイムデータフロープログラミングのための効率的な状態機械に関する。
従来の企業ソフトウェアアプリケーションホスティングは、規模の経済性およびシステム効率を活用するために、データセンターまたは「クラウド」インフラストラクチャに依拠してきた。しかしながら、これらのデータセンターは、企業がそのビジネス活動のほとんどを行なう物理的活動地点(たとえば工場、倉庫、小売店など)から任意に離れている場合がある。産業用インターネット・オブ・シングス(industrial Internet of things :IIoT)とは、非常に高頻度でイベントを追跡するセンサを用いた物理的活動の計測に依拠するデバイスまたは使用事例の集合を指す。
多くのセクターにおける産業用機械が、製造、石油およびガス、採鉱、運輸、電力および水、再生可能エネルギー、ヘルスケア、小売、スマートビルディング、スマートシティ、および接続された車両を含むこのインターネット・オブ・シングス(IoT)の下に入る。クラウドコンピューティングの成功にもかかわらず、多くの欠点が存在する。そのデータのすべてをクラウドストレージへ送信することは実用的ではない。なぜなら、接続性が常にそこにあるとは限らず、帯域幅が十分ではなく、レイテンシにおける変動が高すぎ、または、帯域幅が存在していたとしても、それは法外なコストがかかるためである。接続性、帯域幅、およびコストが問題ではなかったとしても、リアルタイムの意思決定および予測保守はなく、それは機械への著しい損傷をもたらし得る。
したがって、改良されたエッジ解析を含む改良されたコンピューティングシステム、アーキテクチャ、および手法、ならびにリアルタイムデータフロープログラミングのためのより効率的な状態機械が、産業用機械によって生成される大量のデータを取扱うために必要とされる。
発明の簡単な概要
効率的な状態機械に基づくパターンマッチング技術は、入力キューにおけるトークンを処理し、バックトラッキングなしに、1つ以上の所定の入力パターンにマッチする、トークンのシーケンスにおけるパターンを識別する。トークンには、データを含むこと、またはデータを含まないこと、および時間コンポーネントを含むことが可能である。トークンは、物性をデジタル量に変換するセンサによって生成されたデータのストリームであることができる。パターンマッチング技術は、入力キューを単一の方向において処理し、以前に検査されたトークンを検査しない。ある実現例では、マッチングされるべき特定のパターンを、状態機械を使用して指定し、状態機械は状態表において指定され、状態スタックを使用して動作する。
具体的な実現例では、パターンマッチング技術は、エッジコンピューティングシステムにおいて用いられ、エッジでのインテリジェンスを可能にするための方法である。特徴は、以下を含む。ゲートウェイデバイスまたは組込まれたシステム上でホストされるソフトウェア層においてセンサデータによってトリガすること。ソフトウェア層はローカルエリアネットワークに接続される。サービス、アプリケーション、およびデータ処理エンジンのリポジトリが、ソフトウェア層によってアクセス可能にされる。ソフトウェア層によって利用可能にされた式言語を通して、センサデータを特定条件の発生の意味論的記述と整合させること。式を連続的に実行することによってパターンイベントを自動的に発見すること。アプリケーションおよび解析式をつなぐために、ソフトウェア層によって管理されるネットワーク全体のゲートウェイデバイスおよび組込まれたシステムを越えて、サービスおよびアプリケーションをインテリジェントに構成すること。リソース利用可能性に基づいてアプリケーションおよび解析のレイアウトを最適化すること。ソフトウェア層の健全性を監視すること。未加工のセンサデータまたは式の結果を、ローカル時系列データベースまたはクラウドストレージに格納すること。サービスおよびコンポーネントは、どのゲートウェイ環境でも円滑な動作を保証するために、コンテナ化され得る。
エッジインテリジェンスは、インターネット・オブ・シングス(IoT)データのソースでイネーブルにされる。システムは、リアルタイムのエッジ解析およびアプリケーションのために、IoTデバイスセンサデータへの強化(enrich)されたアクセス(ストリームモードまたはバッチモード、または双方)を提供する。システムは、低メモリフットプリント機械で動作する高性能解析エンジンを通して解析関数および解析式を実行するための高効率で表現的なコンピュータ言語を含む。システムは、さらなる機械学習のために収集データをクラウドへ発行することを可能にする。システムは、エッジアプリを開発するためのソフトウェア開発キットを含む。クラウドベースの管理コンソールが、エッジデプロイメント、構成、アプリケーション、および解析式の管理を可能にする。
エッジインフラストラクチャおよびプラットフォームの特定の一実現化例は、フォグホーン・システムズ・インコーポレイテッド(FogHorn Systems, Inc)(フォグホーン)による。フォグホーンのウェブサイト、www.foghorn-systems.com、出版物(白書、ユーザガイド、指導書、ビデオなどを含む)、ならびに、フォグホーンの技術および製品についての他の出版物が、引用により援用される。
フォグホーンは、産業用および商業用インターネット・オブ・シングス(IoT)データのためのエッジインテリジェンスを可能にするためのプラットフォームを提供する。何百億もの産業用および商業用IoTデバイスによって生成されるデータの量は、インターネット全体を圧倒するのに十分莫大になるであろう。フォグホーンのプラットフォームはIoTデータを、それがまさしく生じるところ、すなわちネットワークのエッジで処理し、解析し、それに応答する。フォグホーンの「インテリジェントエッジ」ソフトウェアプラットホームは、前例がないレベルの自動化、業務効率、コスト削減などを可能にする。
産業用インターネット・オブ・シングス(IIoT)は、センサ、機械類、およびコンピュータといった、相互接続された産業用および商業用デバイスからなる。IIoTの目標は、分散された企業全体にわたって、より優れたデバイス制御、データ管理、機械自動化、および業務効率を可能にすることである。会社は、システム全体の管理および最適化のためにクラウドコンピューティングを活用しながら、リアルタイムの解析および自動化応答を使用してグリーンフィールドIIoT機会を捕らえるためにエッジでフォグコンピューティングを適用することができる。フォグホーンのエッジコンピューティングプラットフォームはまた、追加のコンピューティングリソースを追加することが実行できない場合に、既存のプログラマブルロジックコントローラ(programmable logic controller:PLC)(たとえば、ブラウンフィールド機会)において動作するように設計される。ブラウンフィールドとは、確立されたシステムを勘案しながら情報技術(information technology:IT)問題領域を解決するための新しいシステムの実現を指す。新しいソフトウェアアーキテクチャは、既存のおよび動作中のソフトウェアを考慮する。
エッジインテリジェンスプラットフォームとは、IIoTデバイスが存在するエッジのより近くまでデータ処理および解析を拡張する、フォグコンピューティング概念に基づいたソフトウェアベースのソリューションである。遠くの集中型クラウドへすべてのデータを送信する代わりに、エッジデバイスとの近接性を維持することは、待ち時間を最小化し、最大性能、より速い応答時間、ならびにより効果的な保守および業務戦略を可能にする。それはまた、全体的な帯域幅要件と、広範に分散されたネットワークを管理するコストとを著しく減少させる。
エッジでのIIoT操作に焦点を合わせることは、全体的な帯域幅要件を減少させ、時間依存の条件への即時の自動化応答を可能にする。産業界は何十億もの新しいIIoTデバイスを追加しており、これらのデバイスは集団で、毎日多くのペタバイトのデータを生成する。このデータのすべてをクラウドに送信することは、法外なコストがかかるだけでなく、より大きいセキュリティリスクも生み出す。エッジで動作することは、はるかにより速い応答時間、リスクの減少、および全体的コストの低下を保証する。
2015年8月27日に出願された米国特許出願第62/210,981号、および2016年8月29日に出願された米国特許出願第15/250,720号は、ここに引用により援用され、エッジコンピューティング環境およびプラットフォームを記載する。2017年3月23日に出願された米国特許出願第15/467,313号は、ここに引用により援用され、リアルタイムデータフロープログラミングにおけるパターン駆動型反応の構成を記載する。2017年3月23日に出願された米国特許出願第15/467,318号は、ここに引用により援用され、リアルタイムデータフロープログラミング言語のためのツールおよび方法を記載する。
一実装形態では、方法は、データストリームをセンサ(たとえば物理量を監視し、監視された物理量をデジタル形式のデータストリームに変換するハードウェアデバイス)から受信することと、データストリームを入力キュー(たとえばFIFOメモリ)に格納することとを備え、各トークンは、データが受信されるときのタイムスタンプとともに格納されるデータストリームのデータを含み(またはデータを含まず)、前記方法はさらに、単一の方向に入力キューを通ってトークンを読出し、以前に読出されたトークンを再読出ししないことによって、1つ以上の所定のパターンにマッチする、データストリームにおけるパターンを識別することと、データストリーム内において所定のパターンを識別すると、所定のパターンが識別されたという肯定的な表示を出力キューにおいて出力することとを備える。
別の実装形態では、システムは以下を備える:入力キューは、FIFOメモリとして編成されるコンピュータメモリにおいてメモリ位置を含み、 入力キューは処理されるべきトークンを格納し、各トークンは、データを含み(またはデータを含まず)、トークンが入力キューに入ったときのタイムスタンプを含む。ドライバコンポーネントは、バックトラッキングなしで入力キューにおけるトークンを処理し、1つ以上の所定の入力パターンにマッチする、トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベント出力を生成する。出力キューは、FIFOメモリとして編成されるコンピュータメモリにおいて第2のメモリ位置を含み、出力キューは、ドライバコンポーネントによって生成された出力イベントのシーケンスを格納する。状態表コンポーネントは、所定の入力パターンを状態表フォーマットで格納する。状態スタックコンポーネントは、LIFOメモリとして編成されるコンピュータメモリにおいて第3のメモリ位置を含み、スタックフレームには、変換状態番号、記号、もしくはデッドライン、または任意の組み合わせが含まれる。
別の実装形態では、方法は以下を備える:FIFOメモリとして編成されるコンピュータメモリにおいて第1のメモリ位置を含む入力キューを提供することを備え、入力キューは処理されるべきトークンを格納し、各トークンは、データを含み(またはデータを含まず)、トークンが入力キューに入ったときのタイムスタンプを含む。ドライバコンポーネントを提供することを備え、ドライバコンポーネントは、バックトラッキングなしで入力キューにおけるトークンを処理し、1つ以上の所定の入力パターンにマッチする、トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベント出力を生成する。FIFOメモリとして編成されるコンピュータメモリにおいて第2のメモリ位置を含む出力キューを提供することを備え、出力キューは、ドライバコンポーネントによって生成された出力イベントを格納する。所定の入力パターンを状態表フォーマットで格納する状態表コンポーネントを提供することを備える。スタックフレームを格納する状態スタックコンポーネント(たとえばLIFOメモリ)を提供することを備える。
本発明の他の目的、特徴、および利点は、以下の詳細な説明および添付図面を考慮すれば明らかになるであろう。図面では、図全体を通し、同じ参照記号は同じ特徴を表わす。
クライアント-サーバシステムおよびネットワークのブロック図である。 クライアントまたはサーバのより詳細な図である。 コンピュータシステムのシステムブロック図である。 センサストリームとクラウドとの間にあるエッジコンピューティングプラットフォームのブロック図である。 エッジ解析を含むエッジコンピューティングプラットフォームのより詳細なブロック図である。 エッジインフラストラクチャとクラウドインフラストラクチャとの間の動作フローを示す図である。 決定性有限オートマトン(DFA)に変換された拡張非決定性有限オートマトン(NFA)および状態縮小機械(state-reduced machine)を示す。 トークンアルファの受信で状態AからBへの遷移を示す。 別途の状態遷移、状態Xを経た、状態Aから状態Bへの遷移を示す。 構文解析によって形成された抽象構文木の例を示す。 離接のための部分グラフを示す。 合接のための部分グラフを示す。 構造を有する閉包(closure)を示す。 時限順方向右端(timed forward right most)(1)またはTFR(1)パターンマッチングと呼ばれる技術を使用するパターンマッチャーの構成要素を示す。 「ペット」の例の状態機械図を示す。 「ペット」の例の状態機械図を示す。
発明の詳細な説明
図1は、本発明の一実施形態を取入れる分散型コンピュータネットワーク100の簡略ブロック図である。コンピュータネットワーク100は、複数の通信リンク128を介して通信ネットワーク124に結合された、複数のクライアントシステム113、116、および119と、サーバシステム122とを含む。通信ネットワーク124は、分散型ネットワーク100のさまざまなコンポーネントが互いに通信して情報を交換することを可能にするためのメカニズムを提供する。
通信ネットワーク124はそれ自体、多くの相互接続されたコンピュータシステムおよび通信リンクで構成されてもよい。通信リンク128は、配線リンク、光リンク、衛星または他の無線通信リンク、波動伝搬リンク、もしくは、情報の通信のための他のメカニズムであってもよい。通信リンク128は、DSL、ケーブル、イーサネット(登録商標)または他の配線リンク、受動または能動光リンク、3G、3.5G、4Gおよび他のモビリティ、衛星または他の無線通信リンク、波動伝搬リンク、もしくは、情報の通信のための任意の他のメカニズムであってもよい。
図1に示すさまざまなシステム間の通信を容易にするために、さまざまな通信プロトコルが使用されてもよい。これらの通信プロトコルは、VLAN、MPLS、TCP/IP、トンネリング、HTTPプロトコル、無線アプリケーションプロトコル(wireless application protocol:WAP)、ベンダー固有プロトコル、カスタマイズされたプロトコルなどを含んでいてもよい。一実施形態では、通信ネットワーク124はインターネットであり、他の実施形態では、通信ネットワーク124は、ローカルエリアネットワーク(local area network:LAN)、ワイドエリアネットワーク(wide area network:WAN)、無線ネットワーク、イントラネット、私的ネットワーク、公的ネットワーク、スイッチドネットワーク、およびこれらの組合せなどを含む、任意の好適な通信ネットワークであってもよい。
図1の分散型コンピュータネットワーク100は、本発明を取入れる実施形態の単なる例示であり、請求項に記載されるようなこの発明の範囲を限定しない。当業者であれば、他の変形、変更、および代替物を認識するであろう。たとえば、2つ以上のサーバシステム122が通信ネットワーク124に接続されてもよい。別の例として、複数のクライアントシステム113、116、および119は、アクセスプロバイダ(図示せず)を介して、または何らかの他のサーバシステムを介して、通信ネットワーク124に結合されてもよい。
クライアントシステム113、116、および119は典型的には、情報を提供するサーバシステムから情報を要求する。この理由により、サーバシステムは典型的には、クライアントシステムよりも多いコンピューティングおよびストレージ容量を有する。しかしながら、特定のコンピュータシステムは、そのコンピュータシステムが情報を要求しているか、または提供しているかに依存して、クライアントまたはサーバとして、双方として機能してもよい。加えて、この発明の局面はクライアント-サーバ環境を使用して説明されてきたが、この発明はスタンドアロンコンピュータシステムにおいても具現化され得ることが明らかであるはずである。
サーバ122は、クライアントシステム113、116、および119から情報要求を受信し、要求を満たすために必要とされる処理を行ない、要求に対応する結果を要求元クライアントシステムへ送り返す役割を担う。要求を満たすために必要とされる処理は、サーバシステム122によって行なわれてもよく、またはそれに代えて、通信ネットワーク124に接続された他のサーバに委任されてもよい。
クライアントシステム113、116、および119は、ユーザが、サーバシステム122によって格納された情報にアクセスし、情報をクエリすることを可能にする。特定の一実施形態では、クライアントシステムは、デスクトップアプリケーション、もしくはモバイルスマートフォンまたはタブレットアプリケーションなどのスタンドアロンアプリケーションとして動作可能である。別の実施形態では、クライアントシステム上で実行される「ウェブブラウザ」アプリケーションが、ユーザが、サーバシステム122によって格納された情報を選択し、情報にアクセスし、情報を検索し、またはクエリすることを可能にする。ウェブブラウザの例は、マイクロソフト社(Microsoft Corporation)によって提供されるインターネットエクスプローラ(Internet Explorer)ブラウザプログラム、モジラ(Mozilla)によって提供されるファイアーフォックス(Firefox)(登録商標)ブラウザ、グーグル(Google(登録商標))によって提供されるクローム(Chrome)ブラウザ、アップル(Apple)によって提供されるサファリ(Safari)ブラウザなどを含む。
クライアント-サーバ環境では、いくつかのリソース(たとえばファイル、音楽、ビデオ、またはデータ)はクライアントで格納され、一方、他のリソースは、サーバなどネットワークにおけるどこか他のところに格納されるかまたはそこから配信され、ネットワーク(たとえばインターネット)を介してアクセス可能である。したがって、ユーザのデータは、ネットワークまたは「クラウド」に格納され得る。たとえば、ユーザは、クラウド(たとえばサーバ)上にリモートに格納されている、クライアントデバイス上の文書に対して作業することができる。クライアントデバイス上のデータは、クラウドと同期され得る。
図2は、本発明の例示的なクライアントまたはサーバシステムを示す。一実施形態では、ユーザは、図2に示すようなコンピュータワークステーションシステムを通して、システムとインターフェイス接続する。図2は、モニタ203と、スクリーン205と、筐体207(システムユニット、キャビネット、またはケースとも呼ばれてもよい)と、キーボードまたは他の人間入力デバイス209と、マウスまたは他のポインティングデバイス211とを含む、コンピュータシステム201を示す。マウス211は、マウスボタン213などの1つ以上のボタンを有していてもよい。
本発明は、特定のフォームファクタ(たとえば、デスクトップコンピュータのフォームファクタ)のどのコンピューティングデバイスにも限定されず、さまざまなフォームファクタのあらゆるタイプのコンピューティングデバイスを含み得る、ということが理解されるべきである。ユーザは、スマートフォン、パーソナルコンピュータ、ラップトップ、電子タブレットデバイス、全地球測位システム(global positioning system:GPS)受信機、ポータブルメディアプレイヤー、携帯情報端末(personal digital assistant:PDA)、他のネットワークアクセスデバイス、および、データを送受信できる他の処理デバイスを含む、任意のコンピューティングデバイスとインターフェイス接続することができる。
たとえば、特定の一実現化例では、クライアントデバイスは、アップルiPhone(登録商標)(たとえば、アップルiPhone6)、アップルiPad(登録商標)(たとえば、アップルiPad、またはアップルiPad mini)、アップルiPod(登録商標)(たとえば、アップルiPod Touch)、サムスン(Samsung)ギャラクシー(Galaxy)製品(たとえば、ギャラクシーSシリーズ製品、またはギャラクシーノート(Galaxy Note)シリーズ製品)、グーグル(登録商標)ネクサス(Nexus)デバイス(たとえば、グーグルネクサス6、グーグルネクサス7、またはグーグルネクサス9)、およびマイクロソフトデバイス(たとえば、マイクロソフトサーフェス(Surface)タブレット)といった、スマートフォンまたはタブレットデバイスであり得る。典型的には、スマートフォンは、電話部分(および関連付けられた無線機)とコンピュータ部分とを含み、それらはタッチスクリーンディスプレイを介してアクセス可能である。
電話部分のデータ(たとえば、連絡先および電話番号)と、コンピュータ部分のデータ(たとえば、ブラウザを含むアプリケーションプログラム、画像、ゲーム、ビデオ、および音楽)とを格納するための不揮発性メモリがある。スマートフォンは典型的には、写真およびビデオを撮るためのカメラ(たとえば、前向きのカメラまたは後部カメラ、もしくは両方)を含む。たとえば、スマートフォンまたはタブレットは、1つ以上の他のデバイスにストリーミングされ得るライブビデオを撮るために使用され得る。
筐体207は、プロセッサ、メモリ、大容量ストレージデバイス217などといった、よく知られたコンピュータコンポーネント(それらのうちのいくつかは図示されず)を収容する。大容量ストレージデバイス217は、大容量ディスクドライブ、フロッピー(登録商標)ディスク、磁気ディスク、光ディスク、光磁気ディスク、固定ディスク、ハードディスク、CD-ROM、書込可能CD、DVD、書込可能DVD(たとえば、DVD-R、DVD+R、DVD-RW、DVD+RW、HD-DVD、またはブルーレイ(登録商標)ディスク)、フラッシュおよび他の不揮発性ソリッドステートストレージ(たとえば、USBフラッシュドライブまたはソリッドステートドライブ(solid state drive:SSD))、バッテリによってバックアップされた揮発性メモリ、テープストレージ、リーダ、および他の同様の媒体、ならびにこれらの組合せを含んでいてもよい。
この発明の、コンピュータにより実現される、またはコンピュータにより実行可能なバージョン、もしくはコンピュータプログラム製品が、コンピュータ読取可能媒体を使用して具現化され、コンピュータ読取可能媒体上に格納され、またはコンピュータ読取可能媒体に関連付けられてもよい。コンピュータ読取可能媒体は、命令を実行のために1つ以上のプロセッサに提供することに関与する任意の媒体を含んでいてもよい。そのような媒体は、不揮発性媒体、揮発性媒体、および伝送媒体を含むものの、それらに限定されない多くの形を取ってもよい。不揮発性媒体は、たとえば、フラッシュメモリ、もしくは、光学ディスクまたは磁気ディスクを含む。揮発性媒体は、キャッシュメモリまたはRAMなどのスタティックメモリまたはダイナミックメモリを含む。伝送媒体は、同軸ケーブル、銅線、光ファイバー線、およびバスに配置されたワイヤを含む。伝送媒体はまた、無線波および赤外線データ通信中に生成されるような電磁波、無線周波、音響波、または光波の形を取り得る。
たとえば、本発明のソフトウェアの、機械により実行可能なバイナリバージョンが、RAMまたはキャッシュメモリ内に、もしくは大容量ストレージデバイス217上に格納されてもよく、または存在してもよい。本発明のソフトウェアのソースコードも、大容量ストレージデバイス217(たとえば、ハードディスク、磁気ディスク、テープ、またはCD-ROM)上に格納されてもよく、または存在してもよい。さらに別の例として、この発明のコードは、ワイヤ、無線波を介して、または、インターネットなどのネットワークを通して伝送されてもよい。
図3は、本発明のソフトウェアを実行するために使用されるコンピュータシステム201のシステムブロック図を示す。図2と同様に、コンピュータシステム201は、モニタ203と、キーボード209と、大容量ストレージデバイス217とを含む。コンピュータシステム501はさらに、中央プロセッサ302、システムメモリ304、入力/出力(I/O)コントローラ306、ディスプレイアダプタ308、シリアルまたはユニバーサルシリアルバス(universal serial bus:USB)ポート312、ネットワークインターフェイス318、およびスピーカ320といったサブシステムを含む。この発明はまた、追加の、またはより少ないサブシステムを有するコンピュータシステムで使用されてもよい。たとえば、あるコンピュータシステムは2つ以上のプロセッサ302を含んでいてもよく(すなわち、マルチプロセッサシステム)、または、あるシステムはキャッシュメモリを含んでいてもよい。
322などの矢印は、コンピュータシステム201のシステムバスアーキテクチャを表わす。しかしながら、これらの矢印は、サブシステム同士をリンクするよう機能する任意の相互接続スキームの例示である。たとえば、スピーカ320は、ポートを通して他のサブシステムに接続されてもよく、または、中央プロセッサ302への内部直接接続を有していてもよい。プロセッサは、複数のプロセッサまたはマルチコアプロセッサを含んでいてもよく、それは、情報の並列処理を許可してもよい。図2に示すコンピュータシステム201は、本発明での使用にとって好適なコンピュータシステムの単なる一例である。本発明での使用にとって好適なサブシステムの他の構成は、当業者には容易に明らかになるであろう。
コンピュータソフトウェア製品は、C、C++、C#、パスカル(Pascal)、フォートラン(Fortran)、パール(Perl)、(マスワークス(MathWorks)、www.mathworks.comからの)マトラボ(Matlab)、SAS、SPSS、JavaScript(登録商標)、AJAX、Java(登録商標)、パイソン(Python)、アーラン(Erlang)、およびルビー・オン・レイルズ(Ruby on Rails)といった、さまざまな好適なプログラミング言語のうちのいずれで書かれてもよい。コンピュータソフトウェア製品は、データ入力モジュールおよびデータ表示モジュールを有する独立したアプリケーションであってもよい。これに代えて、コンピュータソフトウェア製品は、分散オブジェクトとしてインスタンス化され得るクラスであってもよい。コンピュータソフトウェア製品はまた、(オラクル社(Oracle Corporation)からの)Java Beans、またはエンタープライズJava Beans(オラクル社からのEJB)といったコンポーネントソフトウェアであってもよい。
システム用のオペレーティングシステムは、マイクロソフトウィンドウズ(登録商標)ファミリーのシステム(たとえば、ウィンドウズ(登録商標)95、98、Me、ウィンドウズNT、ウィンドウズ2000、ウィンドウズXP、ウィンドウズXP x64エディション、ウィンドウズビスタ(Vista)、ウィンドウズ7、ウィンドウズ8、ウィンドウズ10、ウィンドウズCE、ウィンドウズモバイル、ウィンドウズRT)、シンビアン(Symbian)OS、タイゼン(Tizen)、リナックス(登録商標)、HP-UX、UNIX(登録商標)、サン(Sun)OS、ソラリス(Solaris)、Mac OS X、アップルiOS、アンドロイド(登録商標)、アルファ(Alpha)OS、AIX、IRIX32、またはIRIX64のうちの1つであってもよい。他のオペレーティングシステムが使用されてもよい。マイクロソフトウィンドウズは、マイクロソフト社の商標である。
また、コンピュータはネットワークに接続されてもよく、このネットワークを使用して他のコンピュータにインターフェイス接続されてもよい。ネットワークは、とりわけ、イントラネット、またはインターネットであってもよい。ネットワークは、有線ネットワーク(たとえば、銅を使用)、電話網、パケットネットワーク、光学ネットワーク(たとえば、光ファイバーを使用)、または無線ネットワーク、もしくはこれらの任意の組合せであってもよい。たとえば、データおよび他の情報は、Wi-Fi(数例を挙げると、IEEE規格802.11、802.11a、802.11b、802.11e、802.11g、802.11i、802.11n、802.11ac、および802.11ad)、近距離無線通信(near field communication:NFC)、無線自動識別(radio-frequency identification:RFID)、モバイルまたはセルラー無線(たとえば、2G、3G、4G、3GPP LTE、WiMAX、LTE、LTEアドバンスト、フラッシュOFDM、HIPERMAN、アイバースト(iBurst)、EDGEエボリューション、UMTS、UMTS-TDD、1xRDD、およびEV-DO)といったプロトコルを使用した無線ネットワークを使用して、コンピュータとこの発明のシステムのコンポーネント(またはステップ)との間で渡されてもよい。たとえば、あるコンピュータからの信号が、コンポーネントまたは他のコンピュータへ、少なくとも部分的に無線で転送されてもよい。
ウェブブラウザがコンピュータワークステーションシステム上で実行される一実施形態では、ユーザは、インターネットなどのネットワークを通して、ワールド・ワイド・ウェブ(World Wide Web:WWW)上のシステムにアクセスする。ウェブブラウザは、HTML、XML、テキスト、PDF、およびポストスクリプトを含むさまざまなフォーマットのウェブページまたは他のコンテンツをダウンロードするために使用されており、システムの他の部分へ情報をアップロードするために使用されてもよい。ウェブブラウザは、ウェブ上のリソースを識別するためにユニフォーム・リソース・アイデンティファイヤ(uniform resource identifier:URL)を使用してもよく、ウェブ上のファイルを転送する際にハイパーテキスト転送プロトコル(HTTP)を使用してもよい。
他の実現化例では、ユーザは、ネイティブアプリケーションおよび非ネイティブアプリケーションのいずれかまたは双方を通して、システムにアクセスする。ネイティブアプリケーションは、特定のコンピューティングシステム上にローカルにインストールされ、そのコンピューティングシステムのオペレーティングシステムまたは1つ以上のハードウェアデバイス、もしくはこれらの組合せに固有である。これらのアプリケーション(「アプリ」と呼ばれる場合もある)は、直接インターネットアップグレードパッチングメカニズムを介して、またはアプリケーションストア(たとえば、アップルiTunesおよびApp store、グーグルプレイ(Google Play)ストア、ウィンドウズフォン(Windows Phone)ストア、およびブラックベリー(登録商標)App Worldストア)を通して、(たとえば周期的に)アップデートされ得る。
システムは、プラットフォームから独立した非ネイティブアプリケーションで動作可能である。たとえば、クライアントは、1つ以上のサーバから、当該サーバとのネットワーク接続を使用して、ウェブアプリケーションを通してシステムにアクセスし、当該ウェブアプリケーションをウェブブラウザにロードすることができる。たとえば、ウェブアプリケーションは、ウェブブラウザによって、アプリケーションサーバからインターネットを通してダウンロードされ得る。非ネイティブアプリケーションも、ディスクなどの他のソースから得られ得る。
図4は、典型的にはセンサ409とクラウド412との間にあるエッジゲートウェイまたは同等物上で動作するエッジコンピューティングプラットフォーム406のブロック図を示す。エッジコンピューティングプラットフォームは、産業用機械および他の産業用インターネット・オブ・シングスを管理し最適化するために重要であるエッジインテリジェンスを導き出すことを可能にする。エッジゲートウェイのコンポーネントは、取込み421と、強化425と、複合イベント処理(complex event processing:CEP)エンジン429と、適用432と、式言語を通した解析435と、移送438とを含む。クラウドは、エッジプロビジョニングおよびオーケストレーション443と、クラウドおよびエッジ解析ならびにアプリポータビリティ446とを含み得る。
上述のように、エッジコンピューティングプラットフォームの特定の一実現化例は、フォグホーンからのものである。フォグホーンは、「エッジインテリジェンス」という急速に台頭してきているドメインにおけるリーダーである。制御システムおよび物理センサのより近くで高性能処理、解析、および異種アプリケーションをホストすることにより、フォグホーンの画期的なソリューションは、閉ループデバイス最適化のためのエッジインテリジェンスを可能にする。これは、製造、石油およびガス、電力および水、運輸、採鉱、再生可能エネルギー、スマートシティなどにおける法人顧客のために、ビッグデータおよび現場でのリアルタイム処理をもたらす。フォグホーンの技術は、世界の有力な産業用インターネットイノベータ、ならびに、クラウドコンピューティング、高性能エッジゲートウェイ、およびIoTシステムインテグレーションにおける主要事業者によって採用されている。
フォグホーンは、ストリームモードおよびバッチモード双方でのエッジアプリのための強化されたIoTデバイスおよびセンサデータアクセス;解析関数を実行するための非常に効率的で表現的なDSL;低フットプリント機械上で動作可能である強力な小型解析エンジン;さらなる機械学習のために収集されたデータをクラウドへ送信するための発行機能;エッジアプリを開発するためのSDK(多言語);構成のエッジデプロイメント、アプリ、および解析式を管理するための管理コンソールを提供する。
フォグホーンは、産業用機械からのセンサデータのリアルタイムの現場ストリーム処理を可能にする、効率的で非常にスケーラブルなエッジ解析プラットフォームを提供する。フォグホーンのソフトウェアスタックは、エッジおよびクラウド上で動作するサービスの組合せである。
「エッジ」ソリューションは、未処理のデータをオフライン解析のためにクラウド環境へ発行するオプションを用いて、ローカルストレージリポジトリへのセンサデータの取込みをサポートしてもよい。しかしながら、多くの産業環境および産業デバイスはインターネット接続性がなく、このデータを使用できなくしている。しかし、インターネット接続性があったとしても、生成されるデータの純然たる量は、利用可能な帯域幅を容易に上回るであろう。または、あまりに法外なコストがかかるためにクラウドに送信できないであろう。加えて、データがクラウドにアップロードされ、データセンターで処理され、結果がエッジに送り返される時までに、行動を取るには遅すぎるかもしれない。
フォグホーンのソリューションは、解析エンジンとしても公知である超小型の複合イベント処理(CEP)エンジンと、多くの着信センサストリームのデータに関する規則を表現する強力で表現的なドメイン固有言語(domain specific language:DSL)とを提供することによって、この問題に対処する。これらの表現からの出力は次に、高くつく機械故障またはダウンタイムを防止するために、ならびに、リアルタイムの産業活動およびプロセスの効率および安全性を高めるために、直ちに使用され得る。
フォグホーンのプラットフォームは、低フットプリント環境および高スループットまたはゲートウェイ環境で動作する能力;着信ストリーミングセンサデータに作用できる非常にスケーラブルで高性能のCEPエンジン;強化されたデータアクセスを用いた異種アプリの開発およびエッジへのデプロイメント;クラウドおよびエッジを越えるアプリケーションモビリティ;進んだ機械学習(machine learning:ML)およびクラウドとエッジとの間のモデル転送を含む。独創的に、フォグホーンは、主な産業用データ取込みプロトコル(たとえば、OPC-UA、モドバス(Modbus)、MQTT、DDSなど)、および他のデータ転送プロトコルをサポートする。加えて、ユーザは、カスタムプロトコルアダプタを、フォグホーンのデータ取込み層へ容易にプラグインすることができる。
フォグホーンのエッジサービスは、IIoTデバイスが存在するネットワークのエッジで動作する。エッジソフトウェアスタックは、センサおよび産業用デバイスからのデータを高速データバス上へ取込み、次にユーザ定義の解析式をストリーミングデータに対して実行して、洞察を得てデバイスを最適化する役割を担う。これらの解析式は、フォグホーンの非常にスケーラブルで小フットプリントの複合イベント処理(CEP)エンジンによって実行される。
フォグホーンのエッジサービスはまた、時間ベースのセンサデータクエリについてのローカル時系列データベースと、ストリームモードおよびバッチモード双方でデータを消費できるアプリケーションを開発するための多言語SDKとを含む。オプションで、このデータはまた、顧客が選んだクラウド格納先へ発行され得る。
フォグホーンのプラットフォームはまた、エッジをリモートに構成し管理するためにクラウド環境または構内環境で動作するサービスを含む。フォグホーンのクラウドサービスは、解析式を開発およびデプロイメントし、ドッカー(Docker)(www.docker.com)として公知であるアプリケーションを使用してアプリケーションをエッジへデプロイメントし、顧客のアイデンティティアクセス管理および持続性ソリューションとのサービスの統合を管理するための管理UIを含む。プラットフォームはまた、クラウドで開発された機械学習モデルを、エッジで実行され得るセンサ式へ変換することもできるであろう。
例として、あるアプリケーションは、キャビテーションイベントによるポンプへの高くつく損傷を防止するために、リアルタイムデータ監視および解析、予測保守スケジューリング、ならびに自動化された流れの方向転換を適用する。別の例は、発電を最大化し、機器の寿命を延ばし、正確なエネルギー予測のために履歴解析を適用するためにフォグホーンエッジインテリジェンスソフトウェアを使用した、風力エネルギー管理システムである。
図5は、エッジコンピューティングプラットフォームのより詳細なブロック図を示す。このプラットフォームは、データ取込み512、データ処理515、およびデータ発行518という3つの論理層または区分を有する。データ取込みコンポーネントは、データを生成するセンサまたはデバイス523に接続されるエージェント520を含む。エージェントは、それぞれのプロトコルサーバからの1つ以上のプロトコルを介して、センサからデータを集め、または取込む。エージェントは、とりわけ、MQTT、OPC UA、モドバス、およびDDSといったプロトコル用のクライアントまたはブローカーであり得る。センサによって提供または出力されるデータは典型的には、バイナリデータストリームである。センサからエージェントへのこのデータの伝送または配信は、プッシュ法またはプル法によるものであり得る。
プッシュは、所与のトランザクションに対する要求が送信側(たとえばセンサ)によって開始される通信のスタイルを記述する。プル(またはゲット)は、情報の伝送に対する要求が受信側(たとえばエージェント)によって開始される通信のスタイルを記述する。別の通信手法は、受信側またはエージェントが、センサが送信するべきデータを持っているか周期的に問合せるかまたはチェックする、ポーリングである。
MQTT(以前はMQテレメトリトランスポート(Telemetry Transport))とは、TCP/IPプロトコルに加えて使用するための、ISO規格の発行-サブスクライブベースの「軽量」メッセージ通信プロトコルである。代替的なプロトコルは、アドバンストメッセージキューイングプロトコル、IETF制約アプリケーションプロトコル、XMPP、およびウェブアプリケーションメッセージングプロトコル(Web Application Messaging Protocol:WAMP)を含む。
OPC統一アーキテクチャ(OPC Unified Architecture:OPC UA)とは、OPC協議会(OPC Foundation)によって開発された、相互運用性のための産業用M2M通信プロトコルである。それは、オープンプラットフォーム通信(Open Platform Communications:OPC)の後継版である。
モドバスとは、元々1979年にモディコン(Modicon)(現在のシュナイダーエレクトリック(Schneider Electric))によってそのプログラマブルロジックコントローラ(PLC)とともに使用するために発行された、シリアル通信プロトコルである。単純かつ頑強であるため、それはそれ以降、すべての意図および目的のために標準通信プロトコルとなった。それは現在、産業用電子デバイスを接続する、一般に利用可能な手段である。
データ処理515はデータバス532を含み、それは、データ取込み層のエージェント520に接続される。データバスは、すべての接続されたコンポーネント間のデータおよび制御メッセージ双方のための中央バックボーンである。コンポーネントは、データバスを通って流れるデータおよび制御メッセージをサブスクライブする。解析エンジン535は、1つのそのような重要なコンポーネントである。解析エンジンは、式言語538で開発された解析式に基づいて、センサデータの解析を行なう。データバスに接続する他のコンポーネントは、構成サービス541と、メトリックサービス544と、エッジマネージャ547とを含む。データバスはまた、未加工のバイナリデータを消費可能なデータフォーマット(JSONなど)へ復号するとともに、必要で有用な追加のメタデータで装飾することによって、センサからの着信データを強化する「デコーダサービス」を含む。また、強化は、データ復号、メタデータ装飾、データ正規化などを含み得るが、それらに限定されない。
JSON(JavaScriptオブジェクト表記法とも呼ばれる)とは、属性値ペアからなるデータオブジェクトを伝送するために人間が読めるテキストを使用する、オープンスタンダードフォーマットである。JSONは、非同期ブラウザまたはサーバ通信(AJAJ)または双方のために使用される共通データフォーマットである。JSONの代替例はXMLであり、それはAJAXによって使用される。
エッジマネージャはクラウド412に、特にクラウドマネージャ552に接続する。クラウドマネージャは、同様にクラウドにある、顧客アイデンティティおよびアクセス管理(identity and access management:IAM)用プロキシ555とユーザインターフェイスコンソール558とに接続される。また、クラウドを介してアクセス可能なアプリ561もある。アイデンティティおよびアクセス管理とは、正しい個人が正しい時間に正しい理由で正しいリソースにアクセスすることを可能にする、セキュリティおよびビジネス規律である。
データ処理515内では、ソフトウェア開発キット(software development kit:SDK)564コンポーネントもデータバスに接続し、それは、エッジゲートウェイ上にデプロイメントされ得る、機能するアプリケーション567の作成を可能にする。ソフトウェア開発キットはまた、データを取出すためにローカル時系列データベースに接続する。アプリケーションは、ドッカーなどのコンテナ技術を使用することなどによってコンテナ化され得る。
ドッカーコンテナは、1つのソフトウェアを完全なファイルシステムで包み、ファイルシステムは、コード、ランタイム、システムツール、およびシステムライブラリといった、それが動作するために必要なものすべてを含み、サーバにインストールされ得るものを何でも含む。これは、ソフトウェアが、それが動作している環境にかかわらず、常に同じように動作することを保証する。
データ発行518は、クラウド内の格納位置573に接続されるデータパブリッシャ570を含む。また、ソフトウェア開発キット564のアプリケーション567は、時系列データベース576内のデータにアクセスできる。時系列データベース(time-series database:TSDB)とは、時系列データ、時間によって索引付けされた数の配列(たとえば、日付-時刻、または日付-時間範囲)を取扱うために最適化されたソフトウェアシステムである。時系列データベースは典型的には、新しい情報がデータベースに追加されると最も古い情報が除去される、回転または循環バッファまたはキューである。データパブリッシャ570もデータバスに接続し、ローカル時系列データベースに、またはクラウドストレージに格納される必要があるデータをサブスクライブする。
図6は、エッジインフラストラクチャ602とクラウドインフラストラクチャとの間の動作フローを示す。いくつかの特定のエッジインフラストラクチャは上に説明された。センサ606からデータが集められる。これらのセンサは、産業用デバイス、小売デバイス、ヘルスケアデバイス、または医療デバイス、もしくは、電力または通信用途、もしくは、これらの任意の組合せのためのものであり得る。
エッジインフラストラクチャはソフトウェアプラットホーム609を含み、それは、データ処理612と、ローカル時系列データベース615と、クラウドシンク618と、解析複合イベント処理エンジン(CEP)621と、解析リアルタイムストリーミングドメイン固有言語(DSL)624(たとえば、フォグホーンによるVel言語)と、リアルタイムアグリゲーションおよびアクセス627とを有する。プラットフォームは、以下により詳細に説明される仮想センサ630を含み得る。仮想センサは、強化されたリアルタイムデータアクセスを提供する。
プラットフォームは、ソフトウェア開発キットまたはSDKを使用して開発され得る、アプリまたはアプリケーション1、2および3などの1つ以上のアプリケーション633を介してアクセス可能である。アプリは(たとえば、複数の異なる言語で開発された)異種であってもよく、複合イベント処理エンジン621を活用するとともに、機械学習を行なうことができる。アプリは、アプリストア637を使用して配布可能であり、アプリストア637は、エッジプラットフォーム開発者またはエッジプラットフォームの顧客(パートナーと呼ばれてもよい)によって提供されてもよい。アプリストアを通して、ユーザは、アプリをダウンロードし、他人と共有することができる。アプリは、機械学習、遠隔監視、予測保守、または動作インテリジェンス、またはこれらの任意の組合せを含む、解析および適用639を行なうことができる。
アプリについては、エッジとクラウドとの間に動的アプリモビリティがある。たとえば、フォグホーンのソフトウェア開発キットを使用して開発されたアプリケーションは、エッジ上に、またはクラウド内にデプロイメント可能であり、それにより、エッジとクラウドとの間にアプリモビリティを達成する。アプリは、エッジの一部として、またはクラウドの一部として使用され得る。一実現化例では、この特徴はアプリがコンテナ化されることによって可能になり、そのため、アプリは、それらが実行されるプラットフォームから独立して動作可能である。同じことが解析式についても言える。
クラウドまたは私的データセンター644でのデータの監視または格納を含む、統合運営および管理640を可能にするデータアプリがある。
物理センサは電子変換器であり、それは、その環境のいくつかの特性をアナログまたはデジタル測定値として測定する。アナログ測定値は典型的には、アナログ/デジタル変換器を使用してデジタル量に変換される。センサデータは、必要ベースで測定(ポーリング)されるか、または、一定速度のストリームとして利用可能である。典型的なセンサ仕様は、範囲、精度、解像度、ずれ、安定性、および他の属性である。多くの測定システムおよびアプリケーションは、処理、移送、または格納のためにセンサデータを直接利用し、または通信する。
システムは、解析式言語を使用して作成されたソフトウェアベースのセンサである、仮想センサとも呼ばれる「プログラマブルソフトウェア定義センサ」を有する。一実現化例では、解析式言語は、フォグホーンの解析式言語である。この式言語はVelとして公知である。Vel言語は、実行の待ち時間が少ない制約された低フットプリント環境においてリアルタイムストリーミング解析をサポートするために効率的に実現される。たとえば、システムの待ち時間は約10ミリ秒以下であり得る。
一実現化例では、プログラマブルソフトウェア定義センサは、「センサ式言語」(sensor expression language)またはSXLと呼ばれる宣言型アプリケーションプログラムインターフェイス(API)を用いて作成される。SXL言語の特定の一実現化例は、フォグホーンからのVelである。Velセンサは、この構成を通して作成されたVelセンサであり、物理センサおよびVelセンサを含む複数のソースによって生成されたデータを処理することから導き出された測定値を提供する。本願では、VelおよびSXLは交換可能に使用される。
Velセンサは、これら3つのソースのうちのいずれか1つまたはそれらの組合せから導き出され得る。
1.単一のセンサデータ。
1.1.単一の物理センサから導き出される仮想センサまたはVelセンサは、任意の組合せの動的較正、信号処理、数式、データ圧縮またはデータ解析を使用して、着信センサデータを変換し得る。
2.複数の物理センサデータ。
2.1.複数の異種物理センサから(上述の方法を使用して)変換として導き出された仮想センサまたはVelセンサ。
3.Velセンサ装置の実現にとって利用可能にされた、物理センサデータと仮想センサデータとの組合せ。
Velセンサはドメイン固有であり、特定のアプリケーションを念頭に置いて作成される。Velプログラミングインターフェイスの特定の一実現化例は、アプリケーションが、変換(たとえば数式)およびアグリゲーションを通してデータ解析を定義することを可能にする。Velは、典型的にはプログラミング言語に基づいた1組の数学演算子を含む。Velセンサは、Vel構成またはプログラムを実行することによって、ランタイムにデータに作用する。
Velセンサの作成:Velセンサは、データをリアルタイムで利用可能にするためのソフトウェア装置として設計される。これは、アプリケーションによって必要とされるレートでVelセンサデータを生成するために、Velで開発されたアプリケーションが、組込まれたコンピュートハードウェアに対してリアルタイムで実行されることを必要とする。これを達成するために、システムは高効率の実行エンジンを含む。
Velセンサの利点は、以下を含む。
1.プログラム可能性:Velは、Velセンサをプログラマブルにして、データを合成し、データ品質、頻度および情報についての特定のアプリケーション要件に整合させる。Velセンサは、物理センサおよび他の(たとえば、前から存在する)Velセンサから供給されたデータにプラグインするための無線ソフトウェアアップグレードとして広く分散され得る。このため、アプリケーション開発者は、物理インフラストラクチャのレイアウトから独立したビジネスロジックの効率的実行の助けとなるデジタルインフラストラクチャを作成することができる。
2.保守性または透明性:Velセンサは、アプリケーションと物理センサとの間にデジタル抽象化層を作成し、それは、物理センサへのアップグレードおよびサービスによる物理インフラストラクチャの変化から開発者を隔離する。
3.効率:Velセンサは、物理センサからの未加工データをそれらに含まれる情報の正確な表現へ変換することによって、情報管理における効率を生み出す。この効率は、アプリケーションにおける下流での計算、ネットワーキング、および格納のようなITリソースの効率的な利用につながる。
4.リアルタイムデータ:Velセンサは、実在または物理センサデータストリームから計算されるリアルタイムセンサデータを提供する。これは、データを最小の時間遅延でアプリケーションにとって利用可能にする。
実現化例:システムは、Velインターフェイスに基づいて、Velセンサのスケーラブルでリアルタイムの実現化例を設計した。Velは、Java言語によってサポートされる演算子を含み、物理センサおよびそれらのプロトコルと良好に統合される。
システムは、実行される物理センサのデータに対する演算を正確に表現するための新規の方法をもたらす。この宣言型の式は、デジタル抽象化の定義を、物理センサに対する実現から隔てる。
さまざまな型のデータのストリームのセットと、それらのストリームにおけるデータの特定のパターンに反応しそれら特定のパターンを処理することを意図した関数のセットとが与えられると、本発明は、データがストリームで到着するとこれらの関数が適切かつ効率的に呼び出され得るようにこれらの関数を記述および変換する技術である。
この種の問題を解決する必要性は、すべての形式のデータフロープログラミングで共通して発生する。これは、エンタープライズデータセンター内およびエンタープライズデータセンター間のデータフローなどの非常に大規模なアーキテクチャ、ならびに埋込まれたデバイスにおけるイベントのフローなどの非常に小規模なアーキテクチャに適用可能である。
本発明は、データフロープログラミングのすべての領域に適用可能であるが、一致を検出でき、ハンドラ関数を適用できる速度が最も重要であり、実行に費やすストレージおよび計算リソースが限られている場合に最適である。
実施例。所与の整数のストリームから、1つ以上の非零値に1つ以上の零が続くものをマッチングしたい。このパターンがマッチすると、非零値の和を計算し、その結果を別のストリームに書き込みたい。
この問題のパターンマッチング部分を正規表現の表記法で書き、和の計算を別途算術式として書くことができる。それが起こると、エッジコンピューティングにおいてデータフローアプリケーションで使用するために設計されたVelプログラミング言語を使用することにより、変換全体を統一された表記法で書くことができ、したがって、
Figure 0007019589000001
この技術は、上記の関数のパラメータ化を状態機械に変換するであろう。次に、それは、一致をその状態機械に基づいて決定性有限オートマトンとして実現し、結果の一致を合計式に供給するであろう。このフローを図7に示す。これは、状態0 705、状態1 710、「リストaから」ブロック715、および「和(a)をプッシュする」ブロック720である。
この問題は、各ハンドラ関数ごとにマッチング関数を生成することで解決できる。マッチング関数は、ストリームからデータのウィンドウを入力として受け入れ、一致の場合は真を返し、不一致の場合は偽を返す。データがウィンドウを通って流れると、一致が見つかるまで、マッチング関数を繰り返し適用する必要がある。一致が見つかると、ハンドラ関数が適用される。
この解決策は、ハンドラ関数がデータベースクエリに対して使用されるのと同様の方法で指定されるため、生ずる。SQLのようなWHERE節は、一致のための条件を記述するブール式を与え、マッチング関数はこの式の直接的コンパイルである。
別々のマッチング関数は、新たなデータがストリームバッファに流入するときに個別に評価されなければならない。一致は各関数ごとに独立して判断される。
状態機械を使用して一致を実行する方が、複数の任意のブール式を繰り返し適用するよりも、効率的である。
本発明は、関数のパラメータを宣言するパターン記述言語から状態機械を導出する。導出された状態機械は、データストリーム内において、一致を、従来のブール式マッチング関数よりも、より効率的に検出する。
導出された状態機械はまた、データストリームにおいて検出された一致のためにハンドラ関数のセットを実装してもよい。複数のマッチング関数および対応するハンドラ関数を組み合わせて、どのハンドラ関数に対しても効率的に一致を認識する単一の状態機械に縮小してもよい。
導出された状態機械はまた、状態機械によって認識されるシーケンスを変更することなく、追加のノードを介する自由(イプシロン)遷移を含むように拡張されてもよい。
このような追加のノードを介して遷移することにより、データ上でさまざまなアクションをトリガしてもよい。たとえば、決定性有限オートマトン(DFA)またはスタックマシンのシフトバッファにおけるデータの、保持領域への収集をトリガすることができる。これらのデータは、後で関数適用に対する引数の基礎を形成してもよい。
この出願ではDFAという用語を使用しているが、これらのオートマトンまたはユニットはスタックマシンと称されてもよい。厳密に言えば、決定性有限オートマトンは、空間における有限の性能を意味する。しかしながら、この特許のオートマトンは、必ずしも有限であるとは限らず、非有限であり得るが、依然として単純であり得る。したがって、この特許に記載されているDFAは、非有限であってもよい。
このような追加のノードを介して遷移することにより、以前のノードで取り込まれたデータを関数適用引数として使用して、ハンドラ関数の呼び出しをトリガすることもできる。
正規表現および値式の局面を組み合わせたスクリプトからの変換により、パターンのマッチングおよび値の計算を効率的に行い得る拡張された状態機械またはDFAが生まれる。
結果として生じる組み合わされたマッチングまたは計算アルゴリズムは、パターンマッチングおよび値計算の別個の編成よりも効率的である。
語彙ソースからDFAまたは状態機械を構築する方法は、非決定性有限オートマトン(NFA)で始まり、次いでそれを最小のDFAに縮小する。DFAの目的は、一連の入力データ内でパターンを認識することである。この議論のため、状態機械を通って流れるデータをトークンと呼び、DFAによって認識される特定のパターンをトークンの言語と呼ぶ。
図8のNFAの部分を考える。この部分は偶然DFAでもあるが、この例では重要ではない。それは、トークンアルファの受信で、状態A805から状態B810に遷移する。
図9に示すように、イプシロン遷移920を有する追加のノードを追加することによって、このNFAを拡張することができる。イプシロンエッジは、入力の状態にかかわらず、いつでも‐あたかも自由に‐辿られることができる。
1つ以上のイプシロンエッジが存在すると、状態機械は非決定性になるが、しかし、イプシロンエッジはアルゴリズムによって除去されてもよく、NFAはこの手段によって同等のDFAに縮小され、表駆動法によって効率的に実施されることができる。したがって、効率的な実装の戦略を依然として維持しながら、これらの別途のイプシロン遷移を導入することができる。
図9の状態機械は、トークンアルファ925の受信で状態A905から状態X915に遷移し、それから随意に状態Xから状態B910に進むことができる。アルファの刺激は、図8におけるより単純な機械と同様に、依然として状態Aから状態Bへの遷移をもたらす結果となり、この遷移を達成するために追加の入力は必要ない。したがって、図9のNFAは、図8と同じ言語を変換することが分かる。そうするためには、単に、状態Xを通る別途の状態遷移が必要である。
別途の状態は、副作用のパフォーマンスをそれに関連付けるために役立つ。これらの副作用が状態機械の定義も状態機械を流れるデータも変更しない限り、追加のノードは言語の認識に影響を与えないが、副作用は追加作業を行い得る。
データフロー反応実現例では、追加作業には、データに対する任意の数の有用なアクション、またはそのデータを使用することを含めることができる。例示的な一実現例では、作業は以下を含む。
1.ノードを流れるデータを検査し、それのコピーを外部コレクタに発する。
2.データがノードを通過する際にデータに変換を適用し、変換されたデータを一時バッファに収集する。または、
3.収集したデータを一時バッファから追加の変換にフラッシュし、その結果を別のDFAまたはスタックマシンにプッシュする。
例として、ソースフラグメントを考える:
Figure 0007019589000002
フラグメントは、2つの項からなるパターンを記述する。(1)aと呼ばれる第1項。非零値の1回以上の繰り返しとマッチする。(2)名前が与えられていない第2項。1つ以上の零の繰り返しとマッチする。
これを反応の基礎として使用したいと考える。呼び入れられたソースから値を読み、入力の中でフラグメントのパターンを認識すると、フラグメントの右辺を評価し、呼び出された宛先に結果をプッシュすることで、反応する。
たとえば、値[101, 202, 303, 0, 0]からなる場合、最初の3つの値をaに、最後の2つの値を匿名の第2項にバインドすることで、パターンをマッチングするであろう。次に、aにバインドされた値[101, 202, 303]のリストに合計関数を適用することによって、右辺を評価し、606を返すであろう。次いで606をプッシュアウトするであろう。
本発明によるこの例のような関数パターンの変換は、コンピュータ実行の変換プログラムを介して実施することができる。プログラムは、2つの異なる形式の変換:関数指向部分“sum(a)”を、計算を実行するであろう実行可能文のブロックに変換すること、およびパターン指向部分“a:{!= 0} .. {>0}, :0 .. {>0}”を、パターンを認識し、引数を取り込み、関数を呼び出すであろうDFAまたはスタックマシンに変換すること、を実行しなくてはならないだろう。前者をタスク関数変換と呼び、後者をタスクパターン変換を呼ぼう。
関数変換は、コンパイラおよびインタプリタの書込みを専門とするコンピュータプログラマによってよく理解されている。パターン変換、関数変換とパターン変換とのフィッティング、ならびにその後のパターン認識および関数ディスパッチの自動化は、本発明の主題である。
関数変換は、ソーステキストを受け入れ、テキストをトークンに分割し、その後、文法によって導かれて、ソーステキストの構文的内容を記述する抽象構文木(AST)の葉を形成するようにトークンを配置することからなる。次に、抽象構文木は、ソースによって記述される関数を評価するために必要な命令のブロックを最終的に生成する一連のアルゴリズムによって走査される。
パターン変換は、上述の構文解析によって形成された抽象構文木から始まる。抽象構文木には、パターン宣言のルートを形成する1つ以上のノードが含まれる。たとえば、上記の我々のパターンは、図10の左下に示すように、2つの子を有する単一のルートノードで構成され、各子はパターンの1つの項を記述するかもしれない。図10において、反応ルートノード1005、パターンルートノード1010、和(a)ノード1015、ノード1020、および<no name>(名前無し)ノード10が存在する。
マッチングする例およびそれをマッチングする繰り返しを認識するように指定するパターン項ノードが、正規表現における項と同じ情報を担持することを認識する。さらに、子ノードのシーケンスは、まとめて順に、正規表現の項の線形連言(linear conjunction)と同じ情報を特定する。正規表現または正規表現の項の線形連言は、NFAへの変換項とすることができる。我々は、本発明において同じアルゴリズムが使用され得、パターン項は正規表現の項の代わりとなることを発見した。
基本的なNFAがそのように形成されたら、それに、別途の、副作用誘導状態を、アクションがパターン項によって必要とされる位置において注入し、受容状態の後、反応の関数を呼び出すことができる。
この例を続けると、項aは、それにマッチする値のリストを収集し、最終的にそれらを引数として反応の関数に渡し得ることを必要とする。したがって、図9に示す変換を項aの結果であるNFA状態に適用し、新たな状態を使用して、マッチングする項を収集する作業を行なう。次いで、変換を、再び、今度はNFAの受容状態に適用し、収集された値を使用して反応の関数を呼び出し、結果を反応のコンシューマにプッシュし、収集バッファをクリアする。この強化されたNFAがDFAに変換され、状態が縮小された後、図7に示すマシンが残る。
ステップは、状態機械エンジンを駆動するよう状態アクション表を用いるためのアルゴリズムのように、NFAをDFAに変換し、DFAを状態縮小し、DFAを状態アクション表として表現するために使用される。
本発明の技術によって生成されたNFAは、変換されて表に表現されることができる。ただし、結果の表には、各状態を通過するときに実行される副作用ラムダからなる別途の列が含まれる。このような状態アクションラムダ表を使用する自動化エンジンは、他の技術とは異なり、遷移するたびに追加のラムダを実行する。
データフローコンピューティング環境で使用するためのリアクティブ関数を記述し変換する方法であって、(i)リアクティブ関数を識別することと、(ii)関数への入力を提供するパラメータのパターンを識別することと、(iii)関数に渡された引数に基づいて評価されるべき式を識別することと、(iv)パラメータのパターンを、パターンにマッチする入力のシーケンスを認識することができる状態機械に変換することと、(v)状態機械を、入力データを収集および変換してそれを関数に対する引数として使用する準備をする作業を行なう追加の状態で拡張することと、(vi)状態機械を、単純なソフトウェアまたはハードウェアによる自動化が可能な状態アクション効果表に縮小することとを備える。
関数のセット、および引数として値のシーケンスを与えられると、本発明は、引数がマッチする関数に実行をディスパッチするか、または引数がいずれの関数ともマッチしないと判断する、方法である。この方法は、値式、型式、および正規表現を組み合わせることによって、それが、型システムで表現可能な値のシーケンスを曖昧さなしにマッチングできるという点において新規である。
この種の問題を解決する必要があるのは、トランスレータ、インタープリタ、コンパイラの開発においてであり、多相的ディスパッチの概念と密接に関係している。シーケンスの任意の接頭辞を構成する要素が単一のオブジェクト(タプル)を構成すると考えるならば、正しい関数にディスパッチするタスクは、タプルのクラスのメソッドの多相的ディスパッチと等価であると考えることができる。
本発明は、この種の多相的ディスパッチが必要とされるあらゆる状況に適用可能である。これには、プログラムの外部から発生したデータのストリームに応答する必要があるイベント駆動型またはリアクティブ型プログラムのすべての態様が含まれる。本発明は、エッジもしくはフォグコンピューティング環境またはネットワーク接続環境で頻繁に発生するような、複数のデータストリームのリアルタイム処理に関する適用例において特に有用である。
正規表現は、通常、特定のパターンに適合する文字列を検出するために使用される。最も密接に関連する多くの正規表現言語、およびそれらに基づいた効率的なマッチングエンジンを実装する多くのツールがある。これらは、一般に、文字のシーケンスのマッチングに限定される。
文字列以外のドメインで動作する他のパターンベースの表記法がある。XML文書においてパターンを記述するXPATHがその一例である。これらの表記法は、通常、正規表現よりも完全性が低く、パワフルではないことが多く、特定のドメインに合わせて調整されている。
いくつかのプログラミング言語は、型ベースのパターンマッチングシステムを用いてランタイム多相的ディスパッチを実行する。関数の複数のオーバーロードが定義され、それらの各々は異なるパターンの型および値をとり、引数の型および値を関数パラメータのパターンと照合することによって、ディスパッチが実行時に解決される。Haskellはそのようなプログラミング言語の1つである。
言語仕様言語は、文脈自由文法を一連の生成規則として記述する。これらの規則は言語の構文を構成する。コンパイラコンパイラは、これらの規則を、言語のインスタンスを認識できる表駆動型決定性有限状態機械に変換する。Bisonは、そのような言語仕様言語およびそれの関連するコンパイラコンパイラの例である。
正規表現などの文法駆動型パターンマッチングシステムは、決定性有限オートマトン(DFA)や状態機械などの単純な機械として表現できるため、効率的実行の利点があるが、それらには、完全な型システムの幅広いモデリング機能はない。Haskellで使用されているような型駆動型パターンマッチングシステムは、はるかにより豊富なモデリング機能を備えているが、合理的に効率的な実装を優先して表現できるものをしばしば犠牲にし、それでも依然として、DFAに基づく高速マッチングシステムほど効率的ではない。
本発明は、型に基づくマッチングシステムを扱い、それは、その型の中で表現可能なすべての状態と照合することができながら、依然として状態機械として効率的に実施され得る。型と状態との一般化されたパターンは、パターンのインスタンスを効率的に認識する表駆動型状態機械に変換される。
これらのパターンに基づいて関数パラメータを定義することにより、関数はまさにどのような恣意的なデータパターンともマッチングし、マッチングにおいて、マッチングするデータ要素間からその引数をバインドすることができる。メンバー関数の状態機械をマージし、その結果を最小の状態数に縮小することによって、関数の合併(union)のためのマッチングパターンを記述する状態機械が形成される。オーバーロード間の曖昧さ回避、または全体的な不一致の検出は、シーケンス内で可能な限り早く起こり、関数適用の解決をスピードアップする。また、シーケンス内でできるだけ遅くまで一致を遅らせて、可能な限り多くの入力を受け入れる関数の「貪欲」バージョンを生成することもできる。
あるメソッドは、値式、型式、および正規表現を組み合わせて、それが、型システムで表現可能な任意の値のシーケンスと曖昧さなくマッチングし得るようにする。このメソッドは関数適用を解決し、最小限の判断数で正しいオーバーロードにディスパッチする。このメソッドにより、オーバーロードされた関数適用は、文脈自由文法と同じ作業を実行し、文法的な下位構成要素を帰納的に認識して変換関数をそれに適用することによって特定の言語を認識することができる。
このメソッドは、複数の異なる型を含む型システムに関連して適用可能であり、たとえば、(1)整数、実数、および文字列などの基本的な単相型の集合(set)。(2)多相型の集合およびそれらのコンストラクタ、特に、我々が間もなく論ずるある特定のプロパティを持つ多相集合型。(3)sum型。(4)レコードの形式のproduct型。(5)パターンの形式のproduct型。タプルの、それのフィールドの繰り返しを含むことへの一般化である。(6)ラムダ型。パターン型を任意の型にマッピングする。(7)ラムダのリストからなる多ラムダ型。
集合は、1つ以上の要素の範囲からなる多相型である。集合型は、それが含む要素の型上においてパラメータ化され、たとえば、整数の集合は文字列の集合とは異なる型である。集合型は、その内容の制限によってさらに特徴づけられる。特に、集合型は、有限もしくは無限であるよう、またはその左辺もしくは右辺において閉じられているかもしくは開いているよう、またはこれらの任意の組み合わせであるように、制約されてもよい。以下の整数の集合の例を考えてみよう。
Figure 0007019589000003
[>= 1]と[> 0]との間に区別はなく、なぜならば、要素は整数型であり、整数は相異なって可算であるからである。要素が、仮に、実数や文字列のように、非可算型である場合、明示的な包含または特定の端点の包含が必要となる。たとえば、集合[>= “cat”]は、文字列“cat”、および辞書編集上“cat”の後に分類するすべての文字列で構成されている。
集合のインスタンスを型として使用してもよい。そのような型のインスタンスは、集合の要素でなければならない。たとえば、型として使用される集合[> 0]は、正の整数だけを値として許可するであろう。実際、すべての型をこのように考えることができる。たとえば、単相の整数型は、すべての整数の集合からなる集合型と考えることができる。
我々のsum型は、他の型の単純な合併(union)である。たとえば、型int(整数)または型string(文字列)は、その2つの構成要素型の和である。sum型の構成要素型のいずれかの何れのインスタンスも、sum型のインスタンスである。これにより、たとえば、各々が整数または文字列のいずれかである値のリストである型リスト(intまたはstring)を記述することができる。unionのunionは平坦(flatten)になり、型式(intもしくはstring)または(intもしくはreal(実数))はintまたはrealまたはstringに等しくなる。unionにおける型の順序は重要ではないが、正規性のため、すべてのunion型をここにおいてそれらの構成要素がアルファベット順であるように提示する。
我々のレコード型は名前付きフィールドを使用し、各フィールドを型に関連付ける。たとえば、{birthday: date; first_name: string; last_name: string}({誕生日: 日付; 名: 文字列; 姓: 文字列})レコード型は常に有限数のフィールドを有し、各フィールドは型内において一意の名前を有する。フィールドの順序は重要ではない。{x: int; y: int}は{y: int; x: int}と同じであるが、unionに対してしたように、我々はレコード型を、それらの構成要素がアルファベット順にある状態で提示する。
レコードの型はそれ自体がレコードであることに注意されたい。値{x: 3; y: 4}は型{x: int; y: int}を有する。
我々のパターン型は、型のシーケンスとして定義されている点で、タプルに似ている;しかしながら、タプルは暗示的にその要素の各々が正確に1回現れると仮定しているが、パターンはそれの各要素が繰り返しを有することを許す。この繰り返しは整数の集合として与えられる。たとえば、パターン<a: int # [1 .. 3]; b: string # [1 .. 3]>は1つから3つの整数の後に1つから3つの文字列が続くものとマッチする。
ラムダのパラメータとして使用すると、パターンのフィールドはラムダの評価内でバインドされる引数を生じさせる。たとえば、前の段落で与えられたパターンをマッチングした後、範囲に2つのローカル識別子aおよびbを有するであろう。Aの値は1つから3つの整数のリストになり、bの値は1つから3つの文字列のリストになるであろう。
パターンについて1つ以上のフィールドが名前を持たないことも有効である。名前のないフィールドはマッチングされるが、それに対するどのような値も引数としてバインドされない。たとえば、<a: int # [ 1 .. 3 ]; string # [ 1 .. 3] >をマッチングした場合、前のように1つから3つの整数の後に1つから3つの文字列が続くものをマッチングさせ、整数をaというリストとしてバインドするが、文字列はバインドしないであろう。
パターンは無限長であってもよい。たとえば、パターン<a: int # [ 1 .. ]>は1つ以上の整数と上限なしでマッチする。これは有効である。ただし、無限入力ストリームを処理するために使用する場合、無限のパターンを、値の収集をいつ停止すべきか示す時間間隔などの他のトリガとペアにする必要がある。
一般に、パターンは、それがマッチするデータを消費するが、しかしながら、そのデータの部分集合のみを消費することも、またはまったく消費しないことが可能である。パターンには、ピークポイントと呼ばれるアットマークが含まれてもよく、それを越えて、パターンはデータとマッチし、引数をバインドするが、入力ストリームからは消費しない。たとえば、パターン<a: int; b: int; peek; c: int> は3つの整数とマッチし、3つのローカル識別子をバインドするが、入力から2つの整数しか消費しない。
フィールドのないレコードまたはフィールドのないパターンを有することは有効である。これらの2つのケースは、両方ともproduct型を意味するため、互いに有意に区別できない。語彙的には、この概念をボイドというキーワードで指定する。ボイドは一意の値である。それ自身の型でもある。合併で使用される場合、ボイドはintまたはvoidなど、任意選択的な型の表記をもたらし、存在する場合にはintである値を意味するが、まったく存在しないかもしれない。
我々の目的のために、型マッチングは構造的であり、名目上のものではない。型には名前はなく、記述だけがある。同じ記述を有する2つの型は同じ型である。記述が別の型の記述の部分集合である型は、その型の一般化である。たとえば、型{x: int; y: int}および{x: int; y: int; z: int}を考える。2つのフィールド-xおよびy-を有する型は、3つのフィールド-x, yおよびz-を有する型の部分集合であるため、前者は後者の一般化と見なすことができる。これはパターンにも当てはまる。別のものの接頭辞であるパターンもその一般化である。
我々のラムダ型は、入力パターンを出力型にマッピングする。たとえば、<int # [1 .. 3]> → intは、1つから3つの整数をとり、ある整数を返す、ある関数の型である。我々の多ラムダ型は、ラムダ型のリストで構成されている。ラムダの順序はここでは重要である。多ラムダ適用を解決する際、それの構成要素ラムダのうちマッチする最初のラムダにディスパッチすることになる。
このように定義されると、多ラムダをディスパッチするのに必要なパターンマッチングは、決定性有限オートマトン(DFA)に縮小され得る。どのようにするかを示すために、比較のための基礎として状態機械の構築方法を使用し、必要に応じてそれを拡張する。ある記述は、まず、非決定性有限オートマトン(NFA)を構築すること、および次いでそれをDFAに縮小することを含むが;しかしながら、実際には、これは一般に単一のステップで行うことができる。
前述したように、この出願ではDFAという用語を使用しているが、これらのオートマトンまたはユニットはスタックマシンと称されてもよい。厳密に言えば、決定性有限オートマトンは、空間における有限の性能を暗示する。しかしながら、この特許のオートマトンは、必ずしも有限であるとは限らず、非有限であり得るが、依然として単純であり得る。したがって、この特許に記載されているDFAは、非有限であってもよい。
第1に、多ラムダの構成要素-個々のラムダパターン-は、離接の要素として考えなければならない。正規表現を変換する場合、構文a|b (a OR B)は離接であり、一致a1105または一致b1110である。我々の例では、a AND bは各々ラムダパターンである。図11に従って離接のための部分グラフを作成する。
我々は個々のパターンのフィールドをまず合接により表わす。正規表現の変換では、構文ab1210は合接であり、一致a1205の後にb1215が続く。我々の例では、a AND bはパターンの各フィールドである。図12に従って、合接のための部分グラフを作成する。
フィールドの反復係数は、従来はa+またはa*またはa{n:m}と書かれた正規表現の閉包と同じである。ここでも、図13のような構造でこれらの閉包を表現できる。この場合、反復集合の値に基づいて、部分グラフにおけるなんらかの変化が必要になる。たとえば、ノードi1305からノードj1310への順方向イプシロン1315は、集合が零を含む場合にのみ含まれる。これらの変化は大部分明白であり、ここで説明したのと同じ基本的な考え方に沿って継続する。
中間のNFAが完結した後、それをDFAに縮小し、次いでそのDFAを最小のDFAに達するまで状態縮小する。次に、DFAを、状態機械の自動化に使用される通常の種類のソフトウェアまたはハードウェアによる自動化に適した状態-アクション表として表現する。この表の受容状態は、多ラムダへのエントリポイントをマーキングし、中間状態は引数をバインドするために使用されるデータの集まりを提供する。
DFAがそのように自動化され、入力ストリームが提供されると、それは、ストリームからの入力の接頭辞にマッチし、正しいオーバーロードにディスパッチしてそれらを処理し、計算結果を生成する。このプロセスが繰り返されることが許されている場合、結果は、入力ストリームからの一致ごとに1つの、生じた結果のシーケンスである。これは、データストリーム内で検出されたさまざまな型の引数の対応するパターンによってトリガされる多相型関数によって、入力データストリームの効率的なリアルタイム処理を提供する。
値と型識別子との混合を含む複数の種類の関数引数を含むデータストリームに応答して多相型関数の実行をディスパッチする方法であって、(i)実行されるべき多相型関数を識別することを備え、当該多相型関数は、異なる種類の引数のパターンに各々が関連付けられる複数のオーバーロードを有し、前記方法はさらに、(ii)各オーバーロードについて、オーバーロードの引数パターンをマッチングすることによって、入力ストリームからバインドされる引数値の集合にわたって評価される出力式を識別することと、(iii)各オーバーロードの引数パターンを、入力ストリームにおけるパターンについて一致を効率的に認識するDFAに変換することと、(iv)個々のオーバーロードのDFAを、全体として多相型関数のための単一のDFAに結合することとを備え、結果として得られる結合されたDFAは、個々のDFAによってマッチングされるであろう任意のパターンをマッチングし、マッチングする入力を処理すべきオーバーロードを選択することができ、前記方法はさらに、(v)結合されたDFAにデータストリームを適用し、DFAは、次いで、必要に応じてストリームからデータを検査もしくは消費またはその両方を行なって、一致または無一致を判定し、一致の場合には、入力引数値を適切にバインドし、評価されるべき適切な出力式を選択することと、(vi)出力式の評価をディスパッチし、結果を返すこととを備える。
リアクティブ関数によって生成される異なる型のデータのストリームのセットが与えられると、本発明は、それらのストリームを、それらの出力が、統合された型の単一のストリームに効率的に構成され得るように、表現する技術である。
この種の問題を解決する必要性は、すべての形式のデータフロープログラミングで共通して発生する。これは、エンタープライズデータセンター内およびエンタープライズデータセンター間のデータフローなどの非常に大規模なアーキテクチャ、ならびに埋込まれたデバイスにおけるイベントのフローなどの非常に小規模なアーキテクチャに適用可能である。
本発明は、データフロープログラミングのすべての領域に適用可能であるが、一致を検出でき、ハンドラ関数を適用できる速度が最も重要であり、実行に費やすストレージおよび計算リソースが限られている場合に最適である。
実施例。n個の別個の入力ストリームのセットからなる流入Ai:0<k<nを考える。各ストリームは、型Tiの要素のキューで構成される。各ストリームは、型Ti→Uiのリアクティブ関数fiによって消費および変換されており、型Uiの要素のキューから各々がなる流出のn個のストリームBiが存在する。すべてのストリームBiを、Σ Tk→Σ Ukのマージ関数mを用いて、単一のストリームCにマージしたい。
3つのストリームの間で発生するこのようなマージの例をVel言語で書いて以下に示す。
Figure 0007019589000004
ストリームCは、B0、B1およびB2からの値から構成され、それらが生成されるときにインターリーブされる。Bストリームの内容を実現することにポイントがないことに注意されたく、なぜならばそれらはCストリームを構成するためだけに使用されるためである。それらは匿名の一時的な部分式として同じく簡単に表現できるであろう。
Figure 0007019589000005
本発明は、各変換関数fiを決定性有限オートマトン(DFA)に変換し、マージ関数mをこれらのDFAの合併として単一の最小DFAに変換することを記載する。その結果、中間流Biの内容を実現する必要なく流入Aiを流出Cにマージする最大効率的な手段が得られる。
この技術は、繰り返し適用され、後続の中間流の層を単一のリアクティブ関数に融合させることができる。これは、Velの場合のように、宣言型データフロー言語のインフィックスまたは演算子で表されるマージの概念と整合している。
この問題はブルートフォースによって解決できる。すなわち、マージ関数が中間流の唯一のコンシューマであっても、中間流を実現し、それらを消費することによって達成される。
また、マージ関数では、それの流入および流出が、すべて、同じ型のものであるか、そうでなければ、型のないシステムの場合においては未分類のものであることを必要とすることもよくある。これは、それらの型システムにunion型(sum型とも呼ばれる)がないためである。データフローシステムにおける真のマージの存在は、union型の使用を要求する。
一部のデータフローシステムでは、真のマージを欠き、代わりに複数入力単一出力リアクティブ変換を実施する。これらはそれら自体有用な構成体であるが、真のマージ関数ほど単純でも一般的でもなく、完全に最適化することはできない。
マッチング関数をDFAとして表現することは、ブール型の任意の式として表現するよりも効率的である。各自の駆動流入を伴う複数のマッチング関数のDFAは、単一の流出を伴うマージ関数を表す単一の効率的なDFAを形成するために統合される。DFAのマージは、できるだけ早くまたはできるだけ遅く結果がマッチングするように行われ、結果として2つの異なる潜在的に望ましい挙動が生じる。複数の反応を1つのDFAに構成することにより、最小の機械、つまり、最小数の判断を用いてすべての一致を実行するアルゴリズムが得られる。最小の機械は、小規模なプラットフォーム用の複数の反応の最も好適な実現例である。最小の機械は、マッチング式の複数の別々の評価よりもアルゴリズム上の利点を有するため、他のすべてが等しい場合、より効率的に実行される。
変換DFAのセットを単一のDFAにマージするには、正規表現で代替(alternation)を考えるように変換DFAを考慮する必要がある。正規表現を変換する場合、構文a|bは代替であり:一致a OR 一致bである。我々の例では、a AND bは各々変換関数からのDFAである。図11に従ってそれらの代替のための部分グラフを作成する。
中間の非決定性有限オートマトン(NFA)が完結した後、それをDFAに縮小し、次いでそのDFAを最小のDFAに達するまで状態縮小する。次に、DFAを、状態機械の自動化に使用される通常の種類のソフトウェアまたはハードウェアによる自動化に適した状態-アクション表として表現する。この表の受容状態は、マージされたデータ要素が出力ストリームに放出される点をマーキングする。
DFAがそのように自動化され、入力ストリームのセットが提供される場合、DFAは、各入力を、その入力に関連付けられた元の変換関数に従って変換し、すべての結果を1つの出力上でともにインターリーブして与える。
入力データの複数の独立したストリームを出力データを単一のストリームにマージする方法は、(i)複数の潜在的な入力データストリームを識別することと、(ii)入力ストリームごとに1つ、各入力ストリームにおけるデータ上で実行され、その結果が一緒になるようマージされる、複数の変換関数を識別することと、(iii)入力データ要素を、複数のストリームから同時に受け取り、データ要素を単一の出力ストリームにインタリーブするマージ関数を識別することと、(iv)各変換関数を、変換を効率的に実行するDFAに変換することと、(v)変換DFAを、変換を効率的に実行し、その結果を単一のストリームにインターリーブする単一の結合されたDFAにマージすることと、(vi)結合されたDFAにデータストリームを適用し、DFAは次いで変換およびマージの作業を実行することと、(vii)マージされた出力を使用のために宛先にディスパッチすることとを備える。
本発明は、Velプログラミング言語でソフトウェアを開発するためのツールおよび関連する方法である。Velは、データフロープログラムの表現に役立つプログラミング言語である。正しいデータフロープログラミングには多くの課題がある。いくつかはすべての形式のコンピュータプログラミングに共通する課題であり、他のいくつかはデータフローパラダイムに特有の課題である。このツールは、以下を含む、Velプログラミングの多くの分野に対応している:(1)構文的および意味的な正しさをチェックする。(2)論理的な正しさをチェックする。(3)デバッグ支援。(4)ソースコードを安全かつポータブルな形式(つまり、パッケージ化されたコード)に変換する。(5)さまざまなコンピューティングプラットフォーム、特に小規模なプラットフォームに適した、ネイティブで最適なバイナリ形式へのソースコードまたはパッケージ化されたコードの変換。(6)パッケージ化されたコードの記述およびその署名の確認。(7)パッケージ化されたコードのバッチモード解釈。(8)Velソースのインタラクティブな解釈。(9)パッケージ化されたコードまたはネイティブコードを実行するデータフロー環境のシミュレーション。(10)ライブデータフロー環境におけるバイナリコードの遠隔実行、監視、および制御。
これらは、Vel言語でソフトウェアを開発している誰もが達成する必要があるタスクである。本発明は、Velプログラミングに熟練した者が、正確で有用なソフトウェアを作成することを可能にするために、これらの分野すべてにおいて十分なサポートを提供する。
構文上および意味上の正しさをチェックすることは、多くの形態の自動ソフトウェア変換に共通するタスクである。論理的な正しさをチェックするためのツールは、通常、変換ツール自体には組み込まれていない。これらの種類のツールは別々に存在するのが一般的であり、それらがテストしているコードの不完全な洞察をしばしば伴う。
デバッグはソフトウェア開発の共通タスクであるが、ほとんどのデバッグツールは命令型プログラミングに重点を置いている。関数型およびリアクティブプログラミングのデバッグは、命令型デバッグとはまったく異なる課題を提示するため、それほど一般的に対応されない。特に、これらの言語では、「フライト中の」計算を検査するのは困難であり得、なぜならば、それらの値はデバッガ(およびデバッガプログラマ)が覗き得るアドレスを有さないことが多いからである。
複数のネイティブプラットフォームアーキテクチャを対象とする能力は、Cなどのシステム言語のコンパイラにはまれではないが、スクリプトレベルの言語では一般的に見られるパワーではない。スクリプト言語は、コンパイルされないか、またはそれらのホストのために部分的にコンパイルされるかまたはジャストインタイムでコンパイルされる(ジットされる(jitted))傾向があるが、クロスコンパイル(1つのアーキテクチャで実行されるが、別のアーキテクチャに対してコードを生成するコンパイラ)はまれである。小規模なプラットフォーム上で実行するためにスクリプトレベルの言語を具体的にコンパイルすることは非常に珍しいことである。
対話型シェルは、スクリプト言語の共通の機能である。たとえば、Pythonはシェルを実装している。実際の、またはシミュレートされたデータフロー環境に接続されるシェルは、あまり一般的ではない。
コンパイルされたコードの遠隔実行は、一部のオペレーティングシステムの機能であり、オープンソースおよび商用の両方のいくつかのサードパーティツールからも利用可能である。これらは、具体的に小規模なプラットフォームを対象としない傾向があるが、小規模なプラットフォーム用の遠隔実行ツールの例が存在する。これらはデータフロープログラミングに特有のものではなく、遠隔で実行されるべきプログラムを開発するのに使用されるツールに組み込まれていない。
Velコードを開発するための単一の統合されたツールは、Vel言語で作業するソフトウェア開発者にとって有用で便利である。このツールは主にVel言語を変換するコンパイラであるが、Velプログラミングに関連する他のいくつかの関数のセットも提供する。ツールで論理的な正しさのテストを構文的および意味的な正しさのテストとともに実行すると、開発者はより効率的になり、コードの正確性を高めることができる。論理テストでは、コンパイラによるコードの洞察の恩恵があり、診断メッセージはより完全なものになり得る。対話型シェルにより、開発者はコードをテストして即座の応答を得ることができる。これは開発やデバッグに便利である。シェルはまた、プログラマがデータフロー環境を視認できるようにする。
小規模なプラットフォームでの使用に適したスタンドアロンのバイナリ実行可能コードを生成することは、さまざまな小型デバイスで複雑な計算を実行することにしばしば依存する、物のインターネット使用事例を可能にする。シミュレートされたデータフロー環境を提供することで、開発者はコードにおけるバグを解消し、論理的な正しさに対するテストと連携して、パッケージが正しく動作していることを実証できる。コンパイルされたパッケージを遠隔で実行する場合、特に遠隔プラットフォームが小さい場合、プログラマは、自分のプログラム上で迅速に、プログラムをそれのターゲットハードウェア上で1つのコマンドでコンパイルしテストすることを、たとえターゲットプラットフォームが、自分がその上で開発しているものでなくても、反復できる。
言語をそれの語彙的表現からこの中間の記号的表現に変換(フェーズ1コンパイル)し、次いでこの中間表現を計算ハードウェアによって実行され得る形式に変換(フェーズ2コンパイル)するプロセス。
Velフェーズ1変換ツールは、コンパイラに共通する一般的な戦略に従い、具体的には次のとおりである。(1)入力文字列を解析してそれをトークンのシーケンスに分解する。(2)トークンのシーケンスを解析して構文木を形成する。(3)構文木内の記号宣言を識別する。(4)構文木内の記号参照の特定および解決。(5)共通の部分式の削除や定数の折り畳みなどの初期の最適化。(6)型チェック。(7)最適化および記号成熟の追加フェーズ。(8)記号の最終決定および中間表現の放出。
Velフェーズ1トランスレータの際立った特徴の1つは、それが、決定性有限オートマトンまたはDFAを用いて、関数適用に必要なパターンマッチングを実行し、反応をトリガすることである。フェーズ1変換ツールは以下を含む。(1)入力言語を構文木に変換する構文解析器。(2)解析中の言語がDSLまたはマクロ解析器の態様で解析器によって修正され得るように、変換中のプログラムが自己参照を行うことを可能にする語彙バインドコンポーネント。(3)バインドされた構文木を、データフロー、パターン、反応、関数式、タイマー、および入出力パラメータ化を表す記号に変換する意味解析アルゴリズム。(4)式木を、多かれ少なかれマイクロプロセッサALU命令への直接変換に適したスタックに変換する式トランスレータ。(5)反応のパターンおよび式を潜在的に非最小のDFAの中間収集物に変換するためのDFAジェネレータ。(6)DFAの中間収集物から統合された最小のDFAを作成するためのDFA結合および縮小アルゴリズム。
フェーズ1変換ツールの出力は以下を含む:(1)変換に関与する各ストリームの論理的アイデンティティ。各々が複数のストリームの中で一意的な参照であり得るようにする。(2)各ストリームにおけるデータにおけるフローの記述。各々、内方向(反応に向かう、すなわち外部ソースへのサブスクリプション)、外方向(反応から離れる、つまり外部の宛先へのパブリケーション)、内方向および外方向の両方(パブリケーション/サブスクリプションのペア)、または内部(他の反応における中間ステップとしてのみ使用されるため、パブリケーションまたはサブスクリプションとして表面化されない)である。(3)各ストリームにおいて流れるデータの型の記述。ストリームに注入またはストリームから抽出されるデータが型の正しさを静的にチェックされるように、都度有限項で記述される。(4)DFAの状態および遷移を記述する表のセット。(5)反応の間に実行されるべき計算を記述する式スタックのセット。(6)ストリーム入力をDFA入力にマッピングする表。(7)時限イベント(timed event)をDFA入力にマッピングする表。(8)DFA出力をアクションのペアにマッピングする表。各ペアは、式スタックへの参照およびストリーム出力から構成され、DFAの出力が所与の式で変換され、次いで所与のストリームにプッシュされることを示す。
Velインタプリタおよびデータフローシミュレータはフェーズ1変換の出力を直接使用する。インタプリタはコードの実行においてハードウェアプラットフォームをエミュレートし、データフローシミュレータはストリーミングデータ環境をエミュレートし、Velストリームに入力を提供し、Velストリームから出力を収集する。これらの2つのタスクを命令解釈およびデータフローエミュレーションと呼ぼう。
命令解釈は、コンパイラおよびインタプリタの作成を専門とするコンピュータプログラマがよく理解するタスクのカテゴリである。タスクには、実行時変数の状態を格納できる実行コンテキストを構築し、プログラムの命令を一度に1つずつ実行し、実行コンテキストからデータにアクセスし、必要に応じてそれを更新することが含まれる。
Velの場合、実行コンテキストには、変換の過程でデータのストリームを保持するキューのセット、およびDFAで記述された変換を実行する表駆動型の状態機械エンジンも含まれている必要がある。キューは、データの流通チャネルを記述する、Velソースにおける宣言のため、発生する。これらのうちのいくつかは、Velプログラムの外部入力または出力であり、他のいくつかは入力と出力との間の中間状態を記述する純粋な内部チャネルである。
データフローエミュレーションは、ファイルやソケットなどのデータのために外部ソースおよびシンクへのアクセスを提供することと、これらの外部システムと解釈されているVelプログラムとの間でデータを交換するために必要なプログラミングとからなる。これには、外部ソースからデータを読み出してそれらデータをプログラムの入力を表すキューにプッシュする注入関数と、プログラム出力を表すキューからデータをポップしてそれらデータを外部シンクに書き込む抽出関数とが含まれる。
本発明によるVelの解釈が正規とは異なるところでは、DFAが関与するようになる態様である。状態機械エンジンは、キューからデータを読み取り、それらデータを使用してそれらのDFAの状態を前進させる。DFA表には、DFAがそれらの状態を通過するときに実行される副作用の列が含まれる。これらの副作用は、命令解釈を呼び出して計算を実行し、その結果は他のキューにプッシュされ、これが他のDFAをトリガする。
このようにして、本発明による解釈中のVelプログラムは、最初に、高速かつ小規模な状態機械のセットによって表され、必要なときに一般的な命令解釈にドロップバックするだけである。これにより、命令解釈だけですべて処理される場合よりも、プログラムの実行効率が向上する。
Velフェーズ2変換ツールは、大部分、Vel言語に固有ではなく、実行対象のプラットフォームに固有である。フェーズ2トランスレータのVel言語関連コンポーネントは次のとおりである。(1)フェーズ1によって生成された中間表現の初期取入れ。(2)反応性システムを生成するフェーズ2コード生成の全体的編成。(3)データフォーマットの外部エンコードおよびデコード、またはリアルタイムクロックの内部調整を実行するもののような、ランタイムサポートコンポーネントのライブラリの提供。
マルチソース・マルチ宛先データフロー環境におけるデータストリームのリアルタイム処理のためにプログラムを作成するためのツールは、以下を含む。(1)複数の潜在的なデータストリームを識別すること。(2)ストリームにおけるデータのパターンに対応するリアクティブ関数およびパラメータのセットを識別すること。(3)宣言されたパターンにマッチするデータを変換するための処理関数およびパラメータのセットを識別すること。(4)データが収集または破棄される時間の間隔や、データが収集または破棄される前後の特定の時点など、データフローのパターンが比較される時限イベントのセットを識別すること。(5)識別されたストリーム、反応、関数、および時限イベントを記述するデータフロープログラムを作成すること。(6)このプログラムを、Velプログラム文を対応するDFAに変換するためのDFAジェネレータを組み込んだフェーズ1変換ツールと、プラットフォーム上での実行のために変換されたVel文に対応するプラットフォーム固有のハードウェア命令を生成するためのフェーズ2変換ツールとを備える2フェーズ変換ツールに、入力として与えること。(7)変換ツールの各フェーズの出力を受け取ること。
フェーズ1変換ツールの出力は、以下を含むインタプリタコンポーネントによって使用されてもよい:(1)コードの実行においてハードウェアプラットフォームをエミュレートする命令インタプリタ。(2)ストリーミングデータ環境をエミュレートし、Velストリームに入力を提供し、Velストリームから出力を収集するデータフローシミュレータ。
フェーズ1変換ツールの出力は、以下を含むフェーズ2変換ツールへの入力として使用することができる:(1)中間表現からの命令をターゲットハードウェアプラットフォームによる実行に適した形式に変換するハードウェア命令ジェネレータ。(2)データフロー環境におけるリアクティブプログラムとしての使用に適した形式に出力の生成を向けるプログラム編成モジュール。(3)実行に必要なランタイムサポートコンポーネントのライブラリ。フェーズ2変換ツールの出力は、対象とされるハードウェアプラットフォーム上での使用に適した実行可能なプログラムである。
さまざまな型のデータのストリームのセットと、それらのストリームにおけるデータの特定のパターンに反応しそれら特定のパターンを処理することを意図した関数のセットが与えられると、本発明は、データがストリームで到着するとこれらの関数が適切かつ効率的に呼び出され得るようにこれらの関数を記述および変換する技術である。
この種の問題を解決する必要性は、すべての形式のデータフロープログラミングで共通して発生する。これは、エンタープライズデータセンター内およびエンタープライズデータセンター間のデータフローなどの非常に大規模なアーキテクチャ、ならびに埋込まれたデバイスにおけるイベントのフローなどの非常に小規模なアーキテクチャに適用可能である。
本発明は、データフロープログラミングのすべての領域に適用可能であるが、一致を検出でき、ハンドラ関数を適用できる速度が最も重要であり、実行に費やすストレージおよび計算リソースが限られている場合に最適である。
実施例。たとえば、所与の整数のストリームから、1つ以上の非零値に1つ以上の零が続くものをマッチングしたい、とする。このパターンがマッチすると、非零値の和を計算し、その結果を別のストリームに書き込みたい。
この問題のパターンマッチング部分を正規表現のような表記法で記述し、その和の計算を別途算術表現として書くことができる。それが起こると、エッジコンピューティングにおいてデータフローアプリケーションで使用するために設計されたVelプログラミング言語を使用することにより、変換全体を統一された表記法で書くことができ、したがって、
Figure 0007019589000006
1行目では、fooが整数のストリームであると宣言する。2行目では、pを非零値に1つ以上の零が続くものにマッチするパターンとして定義し、非零値の和を計算する。3行目では、pをfooに適用して新たなストリームバーを定義し、それに適用の結果がプッシュされる。
この技術は、上記のパターンを状態機械に変換するであろう。次に、それは、その一致をその状態機械に基づいて決定性プッシュダウンオートマトンとして実現し、結果の一致を合計式に供給するであろう。
上記の例で示した種類の問題は、2つの関数、つまりマッチングのための関数および一致の発見後に結果を計算するための関数を生成することで解決できる。マッチング関数は、ストリームからデータのウィンドウを入力として受け入れ、一致の場合は真を返し、不一致の場合は偽を返す。一致が見つかると、データウィンドウは結果計算関数に渡され、出力が生成される。
データがウィンドウを通って流れると、一致が見つかるまで、マッチング関数を繰り返し適用する必要がある。従って、効率は、マッチング関数を実行できる速度に制限される。特定の呼び出しにおいてマッチング関数によって計算されたどのような値も、一般的に、後の呼び出しでは再利用されもしなければ、一致が検出されたときに結果計算関数による使用について利用可能でもない。おそらく有用である中間計算の結果の保持の欠如は、非効率性の潜在的原因である。
ストリーム処理がストリーミングSQLのような言語で指定されている場合は、この2関数構成が単純になる。ストリーミングSELECTステートメントのwhere文節は、一致条件を記述するブール式を提供し、マッチング関数はこの式の直接コンパイルである。SELECTのproduct文節で名前を付けられた値のタプルは、次いで、出力生成関数を定義するための基礎を提供する。
状態機械を使用して一致を実行する方が、複数の任意のブール式を繰り返し適用するよりも、効率的である。
本発明は、関数のパラメータを宣言するパターン記述言語から状態機械を導出する。導出された状態機械は、データストリーム内において、一致を、従来のブール式マッチング関数よりも、より効率的に検出する。
導出された状態機械はまた、データストリームにおいて検出された一致に基づいて出力を生成するよう、ハンドラ関数のセットを実装してもよい。複数のマッチング関数および対応するハンドラ関数を組み合わせて、単一の状態機械に縮小し、それによって、多数のパターンについて同時に一致を効率的に認識し、多くの種類の出力を同時に生成してもよい。
正規表現および値式の局面を組み合わせるスクリプトは、重要な中間計算の結果を保持することによってパターンを効率的にマッチングして出力を計算できる決定性状態機械に自動的に変換できる。結果として生じる組み合わされたマッチングまたは計算アルゴリズムは、パターンマッチングおよび出力生成の別個の編成よりも効率的である。
したがって、全体のアプローチは次のようになる。(1)正規表現のような表記法を使用して一致を特定し、関数式のような表記法を使用してこれらの一致に基づいて出力計算を特定するソーススクリプトから開始する。(2)スクリプトの正規表現のような部分を文法規則のセットに変換し、スクリプトの関数式のような部分をそれら文法規則の属性のセットに変換する。(3)文法および属性から状態機械を生成する。(4)状態機械を、マッチングされるべき入力が流入し、その結果が流出するプッシュダウンオートマトンとして実装する。
ある技術は、時限順方向右端(timed forward right-most)(1)パターンマッチングまたはTFR(1)と呼ばれる。以下の議論では、TFR(1)パターンマッチング状態機械を規定し、それを適用してステップ4を達成する方法を詳述する。以下のセクションは、ステップ3の目標に従って文法をTFR(1)状態機械に変換する(すなわち、文法および属性から状態機械を生成する)方法を説明する。
ソーススクリプトから文法規則および属性のセットに変換する具体的な方法は、必然的にソーススクリプト言語自体に依存し、したがって、本文書の範囲外である。しかし、文法規則および属性の使用は、コンピュータ言語実装の中では一般的な手法であり、したがって、ステップ2は、実装者にとって大きなハードルを呈しはしないと仮定することは妥当である。
TFR(l)パターンマッチング
このセクションでは、文脈自由文法の大きなクラスに基づいてストリーミング入力のパターンを効率的に認識するために使用できる技術であるTFR(1)パターンマッチングを提示する。この省略形は、「時限順方向右端(Timed Forward Right-most)(1)」技術を表し、この技術の持つ時間を認識する性質、一度に1つの入力トークンだけを見ながら、(時間に関して)順方向の順序で入力を走査し、最も右の構文的派生を生成するという事実を指す。
概要。パターンマッチャー(以下、単に「マッチャー」)の目的は、出力のストリームを生成することによって入力のストリームに反応することである。予想される入力のパターンが事前に記述され、そのパターンにマッチするようにマッチャーが予め構築される。入力パターンにマッチした後、マッチャーは、マッチした入力に基づいて1つ以上の出力を生成する。
TFR(1)マッチャーには、いくつかの特筆すべき特徴がある。(1)マッチャーは、マッチングされるべきパターンおよび適用されるべき変換を記述する文法のような規則のセットからアルゴリズムを介して構築できる。(2)マッチャーは、マッチング中にタイムアウトという概念を組み込むことができ、時間の経過により一致を進ませる。(3)マッチャーは、任意の明確な文脈自由文法からアルゴリズムを介して構築することができる。(4)マッチャーは、コンパクトで効率的であり、限られた記憶域もしくはローエンドプロセッサーまたはその両方を伴うコンピュータでの実装に適している。入力をマッチングするには最小限のステップ数が必要である。(5)マッチャーはバックトラッキングなしで動作し、入力内で厳密に前方に移動し、それを、流れるストリームの処理に適するものにする。(6)マッチャーは、不一致(誤った)入力の検出が可能になるとすぐにそのようにし、それらを通過して早送りし、入力ストリームと再同期し、マッチングを再開することができる。(7)マッチャーは、入力シーケンスをマッチングした後、マッチングするデータを任意の関数への引数として使用することができ、その結果は出力として生成される。
時間および無限を伴う構文。ストリームで流れるデータは、構文的に解析することができる。このアプローチは、コンピュータソースコードの構文解析に使用される種類の構文解析に似ている。実際、TFR(1)は正規のLR(1)構文解析アルゴリズムに似ており、正規のLR(1)および構文解析に概して精通していることは、TFR(1)に興味のある読者にとって役に立つ。
ストリームは、ファイルとは2つの点で異なる。(1)ストリームにおける各データ要素は、それに対して(暗示的または明示的に)それがストリームに入った特定の時刻が関連付けられ、一方ファイルにおけるデータ要素は、どのような特定の時間もそれとは関連付けられない。(2)ストリームは明示的な終端を有する必要はなく、無限に流れ続けることができるが、ファイルは固定されたサイズを有するので、その終端は常に期待され得る。
LR(1)は、他の大抵の構文解析アルゴリズムと同様に、ファイルに対して動作することを意図される。それは時間を考慮せず、正しい動作のためにファイル終端マーカーに依存する。しかしながら、TFR(1)はストリーミング入力との使用を意図される。それは時間を意識しており、ファイル終端マーカーを必要としない。
入力
入力キューは、一度に1つずつ処理されるべき離散的な入来イベントの、先入れ先出しの、非終端シーケンスである。これは、ネットワークソケット、シリアルポート、インメモリ構造、またはエンドレスキューもしくはストリームの概念の任意の他の有形もしくは抽象的実現例であってもよい。マッチャーの目的は、このストリームにおいてパターンを認識することである。
各々は、トークンがキューに入った時刻をマーキングするスタンプ、および場合によってはその他の何らかの情報を担持する。イベントには以下の3つの種類:トークン、経過、およびブレークがある。
トークンは、解析されるべきデータを担持するイベントである。これは最も一般的な種類のイベントであり、「イベント」および「トークン」という用語は往々にして相互交換可能に使用される。トークンによって担持されるデータ要素は、任意の強力なデータ型のインスタンスであることができ、特定の入力キューにおけるすべてのトークンは、同じ型のデータを担持する。トークンは、通常、(マッチャーがワイヤフォーマットをデコードしているかまたは語を認識しているときは)シングルバイトまたはシングル文字を、または(マッチャーがセンサから多次元データを解析しているときは)多値のデータレコードを、担持する。
場合によっては、トークン型の可能な状態の数は非常に多い。これは、可能な状態が256しかない8ビットのバイトには当てはまらないが、32ビットの整数または多くのフィールドで構成されたレコードなど、より大きな型の場合には当てはまる。これらの場合、しばしばトークン分類関数を提供する必要がある。トークンが与えられると、分類関数はトークンが属するクラスを返す。たとえば、あるパターンには32ビット整数の2つのクラス(零および非零)が含まれる。ドライバは、実行するアクションを決定するときに、トークン自体の代わりにトークンのクラスを使用する。
経過は、それのスタンプの他はデータを担持しないイベントである。それは、本質的には、時間の経過以外は何も示さない、「非イベント」である。この種のイベントを入力キューに含めることは有用であり、なぜならば、それは、たとえ報告すべきデータがなくてもイベントを積極的に受信している入力キューと、何も受信していない入力キューとを区別するからである。
ブレークは、入力キューの瞬間的な中断を示すイベントである。マッチャーは、作業中の部分一致をどのようなものであろうとも済ませ、すぐにその出力を報告することによって、ブレークに応答する。ブレークは、入力の終わりのマーカーではなく、追加のイベントはブレークに続くことができ(および一般的にはそうす)る。それは、単に、入力ストリームに任意で注入できるイベントであり、マッチャーのアクションを加速する。
規則。我々は文法を一連の規則として書く。各規則では、左にリダクションが現れ、右に記号のシーケンスが現れる。各記号はトークンまたはリダクションのいずれかである。たとえば、
Figure 0007019589000007
これらの2つの規則は、トークンnumおよび“+”ならびにリダクションEからなる言語を記述する。r1によって、入力にnumが現れるたびに、それはEとみなされてもよい。r2によって、入力にE + Eのシーケンスを見るたびに、それら3つの記号をまとめて新たなEを構成してもよい。したがって、シーケンスnum、num + num、およびnum + num + numは、すべて、当該言語の有効なセンテンスである。
規則が空である可能性もあり、それは、規則の右辺に記号がないことを意味する。これは、特定の構文片をオプションと見なす場合に便利である。たとえば、
Figure 0007019589000008
我々は空を表すために小文字のラムダを右辺に書く。この場合、リダクションLは、それ自体に“x”が続くもの(r3による)からなり、そうでなければ、それは無である(r4による)。したがって、シーケンスx、x x、およびx x xは、すべて、当該言語の有効なセンテンスである。空のシーケンスも、当該言語の有効なセンテンスである。Lがそれにマッチするであろうからである。空の規則でタイムアウトを指定することもできる。たとえば、
Figure 0007019589000009
この言語のCリダクションは、上記の言語のLリダクションと非常によく似ているが、Lはxを無限に収集するが、Cは限られた時間量だけxを収集する。ここでの時間量は5単位として与えられる。この単位は、任意の都合のよい時間の尺度とすることができる。実際には、タイムアウトはミリ秒単位で与えられる可能性がある。ここでその違いを理解するために、タイムスタンプ付きの入力のシーケンスを考えてみる。
Figure 0007019589000010
ここでは、3つのxが速やかに連続して到着し、次に切れ間があり、次に「y」が到着する。r3およびr4を使用してこの入力と照合すると、「y」の出現はxの文字列の終わりを示すであろうから、マッチャーはLを時間1010で報告するであろう。しかしながら、r5およびr6を使用すると、時間の経過だけでリダクションを呼び出すのに十分であろうから、マッチャーはCを時刻1005で報告するであろう。
直感的に、ラムダルール(タイムアウトのない空の規則)は、何をすべきかを決定する前に次のトークンを見ることができるまで待つことになり、それは、ラムダルールが無限に待つことを意味する。タウルール(タイムアウト付きの空の規則)も次のトークンを待つが、そのトークンが充分にすぐに来ない場合、タウルールはそのトークンが存在しないなかで行動することを決定する。
属性。属性は、文法規則のセットにわたって定義された関数である。マッチャーがある規則を適用してリダクションを実行すると、それはその規則に対する属性関数も適用する。結果は、さらなる属性を計算するため、もしくはマッチャーの出力になるため、またはその両方に使用できる値である。このプロセスを属性合成と呼ぶ。上記のサンプル言語の1つをもう一度見てみよう。
Figure 0007019589000011
ここで認識されている言語は先の例から変わっていないが、ただし、明示的な名前が記号に追加されている。我々の属性の定義において、これらの名前を使用できる。
Figure 0007019589000012
ここでは、我々は、型intの値を生成する属性valを定義している。r1が適用されると、valの値は単純に数aであるよう定義され、これは入力ストリームから取られたリテラル番号である。r2が適用されると、valの値は帰納的に定義され、aおよびbのvalを評価し、結果を合計する。記号aおよびbはEのインスタンスである。
直感的には、属性合成は、個々のトークン(またはトークン自体だけ)から導出され得る値で始まる。マッチャーが規則を適用してリダクションを生成するにつれて、合成はより大きな範囲の操作に向かって進行する。ハイレベルのリダクションの属性は、それがまたがるトークンのいずれかまたはすべてに直接的または間接的に依存する。
拡張された文法および再起動。拡張された文法は、厳密に1つのオメガルールを含む文法である。オメガルールは通常の文法規則と似ているが、ただし、右に厳密に1つの記号があり、左に特殊なオメガ記号があることを除く。たとえば、
ここで、オメガルールであるr0を追加して、先の例からの文法を拡張した。
Figure 0007019589000013
ある文法のオメガルールは、マッチャーに対して、どこから始まり、どこで終わるかを教える。最初に起動されると、マッチャーはオメガルールの右側にある記号をマッチングしようとする。この場合、r0は、マッチャーは最初にリダクションEをマッチングしようとすることになる、と言う。
オメガルールの右側の記号をマッチングした後(またはそれをマッチングすることに失敗したことから回復した後)、マッチャーは自動的に再起動し、その記号を再びマッチングしようと試みる。したがって、マッチャーはオメガルールを無期限にマッチングし続ける。
入力キューにおけるブレークイベントは、マッチャーに、現在待ち状態かもしれないラムダルールまたはタウルールを受け入れさせ、すぐにオメガルールに縮小するよう進ませる。その後、マッチャーは再起動してブレーク後のイベントを受け入れる。
オメガルールは、厳密に1つの属性の定義において現れなければならない。この属性は、次のセクションで説明するように、マッチャーの出力を計算するために使用される。
出力。出力キューは、離散的な出力イベントの、先入れ先出しの非終端シーケンスである。出力キューは概念的には入力キューと似ているが、マッチャーに向かう代わりに、マッチャーから離れる方向に流れる。入力キューと同様に、出力キューは、ネットワークソケット、シリアルポート、インメモリ構造、またはエンドレスキューもしくはストリームの概念の任意の他の有形もしくは抽象的実現例であってもよい。マッチャーの目的は、このキューにイベントを送信することである。マッチャーは出力キューからの読出を決して試みない。
出力キューの各イベントには、マッチャーがイベントを生成した瞬間をマーキングするスタンプが含まれている。各イベントはデータ要素も担持し、それは、任意の強力なデータ型のインスタンスであることができ、特定の出力キューにおけるすべてのイベントは、同じ型のデータを担持する。これは、入力キューにおけるイベントと同じ型でも、異なる型でもよい。
マッチャーがオメガルールによって縮小すると、マッチャーはオメガルールの(唯一の)属性を評価し、結果をイベントとして出力キューにプッシュする。このように生成された出力イベントは、最新の入力イベントのスタンプと等しいスタンプを有することになる。
アーキテクチャ。図14は、TFR(1)パターンマッチャーのコンポーネントを示す。各TFR(1)マッチャーは、入力キュー1405、出力キュー1412、ドライバプログラム1419、状態スタック1426、および状態表1433からなる。
マッチャーは、入力キューの先頭に読出位置を保持する。それは、キューの前から一度に1つずつイベントをポップする。マッチャーは入力キュー内を先読みすることも、読出位置をキューにおける前のポイントに巻き戻そうとすることも、入力キューにイベントをプッシュしようとすることもしない。この1度に1つの、順方向のみの、読出のみの、入力の処理は、TFR(1)を、リアルタイムストリームの効率的な処理に適したものにする。
ドライバプログラムはすべてのマッチャーに対して同じである。それは、別の表で定義されている状態によって駆動されるプッシュダウンオートマトンである。ドライバプログラムに対するあるアルゴリズムを以下に示す。ドライバプログラムの各実装は、それのホストハードウェア、オペレーティングシステムプラットフォーム、およびその環境の他の詳細に特有のものである。しかしながら、ドライバはマッチングされるべきパターンに固有ではない。ドライバプログラムは常に同じであり、マッチングされるべきパターンに固有の状態表である。
ドライバは、状態スタックを用いて、状態表によって定義された状態を介してそれの進行状況を追跡する。スタック上の最初のエントリは、常に、表における最初の状態への参照で構成される。スタック上の各後続のエントリは、表におけるある状態への参照、その状態を解決しなければならないデッドライン、および入力キューから取ったトークンまたは文法規則の左辺から取ったリダクションからなる。
状態スタック上のリダクションは、それらに対して、それらの規則から計算され得る属性が関連付けられる。新たなリダクションを適用する準備が整うと、スタックの一番上の状態は、その新たなリダクションに関連付けられた属性定義関数を適用するために使用される呼び出しフレームを提供する。このように、状態スタックは関数呼出スタックでもある。これはまた、中間計算の結果が後で使用するために自動的に保持されるが、(スタックがポップされたときに)それらがもはや潜在的な関心がなくなったときには破棄されることも意味する。
状態表は、マッチングされるべきパターンおよび生成されるべき出力を記述する文法規則ならびに属性からアルゴリズムを介して生成される。次に、表の生成方法について説明する。一旦生成されると、状態表は変更されない。ドライバプログラムは表によって導かれるが、それは表を変更しない。実際、ドライバプログラムのいくつかのインスタンスの場合、同じ状態表を共有することが可能である。これは、複数の入力ストリームで同じパターンをマッチングし、複数の出力ストリームを生成したい場合に便利な構成であろう。
状態表は有限数の行で構成され、各行は構文解析状態を定義する。構文解析状態は、文法駆動型パターンマッチングの意思決定プロセスにおいて明確なポイントを定義する抽象的な概念である。各構文解析状態は、アクション、遷移、タイムアウト値の3つの部分から構成される。
構文解析状態のアクションは、各トークン値を、ドライバがとるべきアクションにマッピングする。ドライバは、表のこの部分をそれのメインループで使用する。表のこのセクションは、文法のトークンまたはトークンがグループ化されるクラスによってキーイングされる(keyed)。ブレークイベントも、表のこのセクションにおけるキーである。
構文解析状態の遷移は、各種類の記号を構文解析状態にマッピングする。ドライバは、縮小アクションを実行するときに表の一部を使用する。表のこのセクションは、文法のリダクションによってキーイングされる(keyed)。
構文解析状態のタイムアウトは、ドライバがその状態に留まれる最大時間量を示す。これは、明示的に無限であり得(一般的には明示的に無限である)、ドライバがその状態で任意の時間量を費やし得ることを意味する。
ドライバアルゴリズム。ドライバは、単一のエントリを含むスタックで開始する。このエントリは開始状態(常にs0と示される)を指し、開始時間にs0のタイムアウトを加えたものに等しいデッドラインを有する。この最初のスタックエントリには関連付けられる記号はないが、後のエントリは各々トークンまたはリダクションのいずれかを担持する。
ドライバは次いでそれのメインループに入り、それは無期限に反復する。各反復の開始時に、ドライバはスタックの一番上のエントリおよび入力キューの前部分のイベントを見る。
ドライバは、現在のイベントのスタンプと現在のスタックエントリのデッドラインを比較する。スタンプがデッドライン以上の場合、状態は期限が切れ、ドライバはすぐにその状態を離れるように試みなければならない。期限切れ状態の間、ドライバは実際のイベントの種類にかかわらず、現在の入力をブレークとして処理することになる。
現在のイベントが経過であり(現在の状態が期限切れでない)場合、ドライバは単にそれを破棄して(下記参照)、メインループの先頭に戻る。経過は、状態を期限切れとすること以外の目的を果たさない。
現在のイベントがトークンまたはブレークの場合(または現在の状態が期限切れで、現在のイベントをブレークとして処理している場合)、ドライバは現在の状態のアクション部分においてとるべきアクションを参照する。アクションは、入力キューを次のトークンに進めるか、スタックをプッシュもしくはポップするか、出力キューにプッシュするか、またはこれらを組み合わせる。アクションを実行した後、ドライバはメインループの先頭に戻る。
ドライバが実行できるアクションには5種類:シフト、破棄、縮小、再起動、またはパニックがある。各反復において、ドライバはこれらのうちの厳密に1つを実行することになる。
シフトアクションは状態への参照からなる。このアクションは、ドライバに、入力キューから現在のイベントをポップさせ、入力キューを次のイベントに進めさせる。イベントはトークンでなければならず、ドライバは経過またはブレークをシフトしない。ドライバは、次いで、アクションによって示された状態、新たなデッドライン、およびポップされたトークンからなる新たなエントリをスタックにプッシュする。新たなデッドラインは、現在のデッドライン、またはイベントのスタンプ+状態のタイムアウトのうち、より小さいものと等しい。
破棄アクションは、ドライバに、入力キューから現在のイベントをポップさせ、入力キューを次のイベントに進めさせる。ドライバは同じ状態のままである。これは経過および本当のブレークに起こることである。
縮小アクションは、文法規則への参照で構成される。縮小アクションは、合成、スタックからのポップ、スタックへのプッシュという3つのフェーズで行われる。
合成する。ドライバは、適用されている規則の属性を評価する。
スタックからポップする。ドライバはスタックから1つ以上のエントリをポップする。ポップするエントリの数は、適用される規則の右辺の長さによって与えられる。ポップ後のスタックの一番上における状態をPと呼び、適用された規則の左辺側の記号をLと呼ぶ。
スタックにプッシュする。ドライバは状態Pの遷移において記号Lを参照し、新たな状態Nを与える。次に、ドライバは、状態N、新たなデッドライン、および記号Lからなる新たなエントリをスタックにプッシュする。
再起動アクションは、合成、スタックリセット、ブレーク破棄の3つのフェーズで実行される。
合成。ドライバは、オメガルールの属性を評価し、結果を出力キューにプッシュする。
スタックリセット。ドライバはスタックからすべてのエントリをクリアし、次いで、新たな開始エントリをプッシュする。新たなエントリは、s0への参照と、入力イベントのスタンプ+s0のタイムアウトに等しいデッドラインとから構成される。エントリには記号は含まれない。
ブレーク破棄。現在の入力が本当のブレークであり(そして現在の状態が期限切れになったために単にそれとして処理されているのではない)場合、ドライバはそれをそこで破棄する。
パニックアクションは、ドライバに、再同期化できるまで入力を破棄させ、ついで、スタックを再起動させる。
構文解析
直感的には、マッチャーは、パターンマッチングのタスクを、パターンのピースを各1つがマッチングする一連のサブタスクに分割する。これらのタスクの各々は、次いで分解され、このプロセスは、マッチングされるべきピースが単純に、自明にマッチされ得る入力トークンそれら自体になるまで繰り返される。
マッチング可能なピースにパターンを分解するタスクはマッチャージェネレータによって行われ、結果は状態表の状態においてエンコードされる。ドライバはこれらの状態に従って、マッチングサブタスクを実行する。
ドライバがシフトアクションをとるとき、それは、入力トークンがドライバの現在のマッチングサブタスクの一部であるからである。ドライバは、一致の現在のピースを、トークンを含むように拡張している。
ドライバが縮小アクションを実行するとき、それは、入力トークンがドライバの現在のマッチングサブタスクの一部ではないからである。ドライバは一致の現在のピースの終わりをマーキングし、入力トークンが最初の部分になる次のピースに移動している。
ドライバがパニックアクションをとるとき、それは、入力トークンがマッチングサブタスクの一部ではなく、そのポイントまでの全マッチング状態が誤っているからである。ドライバは、それの累積された状態を問題のトークンとならんで破棄し、新たに開始する。
ドライバの挙動は完全に決定論的なので、ダイアグラムで簡単にモデル化できる。この文書にはいくつかのそのような図があり、それらは一貫した表記を採用している。
円。表におけるある状態。これは、状態のタイムアウトも示し、それは無限であり得る。
実線矢印。シフトアクション。エッジ上のラベルは、マッチングされるトークンを示す。矢印は次の状態に至る。
後ろ向き矢印。縮小アクション、ポップフェーズ。エッジ上のラベルは、マッチングされるトークンを示す。矢印は適用されている文法規則から至る。
菱形。文法規則。括弧内のテキストは、スタックからポップするエントリの数およびマッチングされるべき記号を示す。
破線矢印。縮小アクション、プッシュフェーズ。エッジ上のラベルは、マッチングされるべき記号を示す。
ダイアグラムを使用して、ドライバのアルゴリズムを実行することができる。
1.別の紙片を使用して、スタックを追跡する。最初のデッドラインとともに、状態s0をスタックにプッシュすることから始める。
2.スタックの一番上の状態および現在の入力トークンを見る。その状態から抜け出し、現在のトークンでラベル付けされているエッジに従う。
3.エッジが別の状態につながる実線の矢印の場合は、それが指す状態を新たなデッドラインおよび現在のトークンとともにスタックにプッシュし、入力を次のトークンに進めて、ステップ2に戻る。
4.エッジが、規則に接続する後ろ向き矢印の場合は、それが接続する規則を見る。この規則は、ポップするエントリ数およびリダクションを一覧表示する。示された数のエントリをスタックからポップし、新たな一番上の状態を見る。その状態から通じ、リダクションでラベル付けされた破線のエッジを見つける。破線のエッジが指し示す状態を新たなデッドラインおよびリダクションとともに、スタック上にプッシュする。リダクションがオメガではない場合は、ステップ2に戻り、それ以外の場合は、ステップ1に戻る。
実施例。このセクションでは、アクション中のTFR(1)のいくつかの例を示す。実行可能な場合は、それを、ストリーミングSQLのように式の評価に基づくストリームベースのパターンマッチングの他の一般的な形式の挙動と比較する。
実施例1:ペット
この例では、ペットのリストを探すマッチャーを考える。各リストは任意の数のペット(またはペットがいない)を含むことができ、各ペットはcat(猫)、dog(犬)またはcanary(カナリア)のいずれかである。リストは、入力ストリームから50の時間単位の間隔で収集される。
表Bは、文法を示している。オメガルール(r0)はペットのリストをマッチングする。各リストは、ペットのリストにペットが続くもの(r5)、または無(r4)から構成されている。リストを収集するためのこの文法的構造は、入力の右端導出を求めるパーサの共通の特徴である。規則r1, r2,およびr3は、ペットが何であり得るかを定義する。
表Cは、この文法から導出した状態を示している。「s4」などのアクションは「シフトして状態4に進む」を意味し、「r2」などのアクションは「規則2で縮小して遷移を辿る」ことを意味する。カールする矢印は再起動を意味する。空白のアクションはパニックを意味する。
図15A~図15Bは、表Cと同じ情報をより視覚的に理解できる方法で示す。この図では、たとえば、「dog」と他の2種類のペットとの区別が、一致において非常に早い時期に起こるのに対し、「cat」と「canary」との区別は、さらに2つのステップを要することが容易にわかる。
Figure 0007019589000014
Figure 0007019589000015
図15A~図15Bは、“pets”の状態機械図を示す。図は規則および状態を示している。図15Aには、状態s0 1510、s1 1515、s2 1520、s3 1525、およびs4 1530がある。規則r0 1533、r5 1535、およびr4 1536がある。矢印1540および1542は、図15Bの対応する矢印に接続する。図15Bには、状態s6 1550、s5 1555、s7 1560、s8 1565、s9 1568、s10 1570、s11 1575、およびs12 1580がある。規則r2 1583、r1 1585、r3 1588がある。
表Dは、ドライバが入力「catcanarydog」を時間で1単位分分離された各イベントとマッチングするトレースを示している。入力は次いで時間単位50まで経過で終了する。
注意すべき点がいくつかある:(1)ドライバは入力トークン(スタック上の)を、それらがマッチするパターンの部分を認識するのに十分な時間だけバッファリングする。それらがマッチすると、入力は縮小される。(2)各入力は、ドライバによって一度だけ検査される。(3)ドライバは、入力があることとならんで、入力がないことに、反応する。最終的なリダクションは単に経過トリガされる。(3)ドライバは、起動した状態で終了し、マッチングを続ける準備ができている。
Figure 0007019589000016
Figure 0007019589000017
ストリームプロセッサは、一致を探すために式の評価を使用することができる。たとえば、ストリーミングSQLのSELECT文では、where節が検出される。この節は、評価する式を特定し、結果が真の場合に選択はマッチする。たとえば、現在の入力が識別子語で表された場合、ペットを探すwhere節は、語=“cat”または語=“dog”または語=“canary”かもしれない。
選択が一致を達成するまで、語の内容をバッファリングする必要がある。新たな入力が到着するたびに、語を1文字分拡張し、その後、式全体を再評価する必要がある。
以前の反復から学習したことは、次のものに持ち込まれない。たとえば、語が現在“do”を含むとした場合、式はそれを“cat”および“canary”と比較する必要が依然としてあるであろうが、それらはマッチする可能性はない。判定に達する前に、語の各文字が任意の回数調べられるかもしれない。
これは、入力を2回以上調べることはないTFR(1)よりはるかに効率が悪い。各構文解析状態には、それに先行する状態に関する情報が暗示的に担持される。たとえば、犬対非犬の判断はs1で行われる。s3およびs4のような後続の状態は、“dog”が依然として一致の可能性があるかどうかをすでに知っている。
TFR(1)状態表を構築する。このセクションでは、文法規則のセットから状態表を構築するために使用されるアルゴリズムについて記載する。3つの全体的なステップがある:
1.すべての記号の最初の集合および後続の集合を計算する。
2.開始アイテムから開始状態を生成し、開始状態から直接的または間接的に到達可能なすべての状態を生成する。
3.生成された各状態について表エントリを生成する。
しかしながら、これらのステップを説明し得る前に、まず、関連する概念のいくつかを定義する必要がある。
概念。最初および後続。記号の最初の集合は、その記号から導出されたイベントのシーケンスを開始できるトークンのセットである。記号が空の規則を伴うリダクションである場合、記号の最初の集合には特別なマーカーεも含まれる。
First(X)を計算するために:
1.Xがトークンである場合、First(X)は単に{X}である。
2.Xが空の規則を伴うリダクションである場合は、First(X)にεを加える。
3.Xをその左辺とする各空でない規則に対して、First(X)に最初の記号の各々の最初の集合を右辺に加える。この右辺の記号がそれ自体が空の規則を伴うリダクションである場合、First(X)に次の記号の最初の集合を右辺に加える。空の規則のない右辺の記号に遭遇するまで、または右辺の記号がなくなるまで、この方法で続行する。
最初の集合は、2つ以上の記号からなるシーケンスαに対しても定義される。First(α)を計算するために:
1.αにおける最初の記号の最初の集合から始める。これにεが含まれていない場合は、この集合をFirst(α)として返す。
2.それにεが含まれている場合は、集合からεを除去し、αにおける次の記号の最初の集合を加える。このようにして、εを含まない最初の集合を有する記号に遭遇するまで、またはαの終わりに達するまで、継続する。
記号の後続集合は、認識可能なシーケンスにおいてその記号に続き得るイベントのセットである。Follow(X)を計算するには:
1.XがΩの場合、そのFollow(X)にはFirst(Ω)におけるすべてのイベントとならんでブレークイベントが含まれる。
2.Xが右辺に現れる各規則を調べる。Aをこの規則の左辺とし、βをこの規則においてXの右に現れる記号のシーケンスとする。βが空でない場合、Follow(X)にはFirst(β)が含まれ;そうでなければ、Follow(X)にはFollow(A)が含まれる。
アイテムおよび状態。文法のアイテムは、一致中に到達した特定のポイントを表す。アイテムは、文法の規則の1つへの参照、規則内のドット位置、および先読みイベントから構成される。たとえば、[pet → ≪c≫ ・ ≪a≫ ≪t≫, ≪c≫]はペットの文法のアイテムである。
アイテムにおけるドット位置は、次に一致が生ずる厳密な位置を示す。ドットは、規則の右辺にある任意の記号の前に来ることもあれば、最後の記号の後に来ることもある。後者の場合、アイテムは完全であると言われる。アイテムが完全でない場合は、ドットの直後の記号はアイテムのコーナーと呼ばれる。完全なアイテムにはコーナー記号はない。ドットの前の記号のシーケンスはアルファシーケンスと呼ばれ、コーナーの後の記号のシーケンスはベータシーケンスと呼ばれる。アルファシーケンスおよびベータシーケンスのいずれかまたは両方を空にすることができる。
空の規則を参照するアイテムは、単一の可能なドット位置しか有さない。そのようなアイテムは完全と考えられる。それは、コーナー記号はなく、それのアルファシーケンスおよびベータシーケンスは空である。
アイテムの先読みイベントは、トークンまたはブレークのいずれかである。完全なアイテムでは、先読みは、パーサジェネレータがアイテムをそのまま縮小するか別のイベントにシフトするかを決定するのを助ける。
文法の開始アイテムは、マッチングが始まり得るアイテムの1つである。各開始アイテムは、オメガルールを参照し、そのドットを左端に有する。文法の開始アイテムのセットを生成するには、Follow(Ω)を計算する。Follow(Ω)の各記号Fに対して、開始アイテムを先読みFとともに加える。
状態はアイテムのセットである。たとえば、{[pets → pets pet ・, ≪c≫], [pets → pets pet ・, ≪d≫], [pets → pets pet ・, ―]}は、ペットの文法における状態s2である。
各アイテムはタイムアウトを有する。アイテムが完全である場合、そのタイムアウトはその規則のタイムアウトと同じになる。空でない規則またはラムダルールは無限のタイムアウトを有する。)アイテムが完全でない場合、そのタイムアウトは無限である。
各状態もタイムアウトを有し、それはそのアイテムの中で最も小さいタイムアウトに等しい。
クロージャ。状態はアイテムのセットであるが、アイテムのすべてのセットが状態であるのではない。状態になるには、セットは完全なクロージャでなければならない。クロージャ関数は、アイテムの初期セットから、状態を完成させるのに必要なアイテムを加えることによって、完全な状態を生成する。
Jがアイテムのセットである場合、Closure(J)を次のように計算する。
1.最初にJにおけるすべてのアイテムを含むアイテムのリストtodo、および最初は空であるアイテムのセットdoneで開始する。
2.todoが空の場合、doneを文法の状態として返す。
3.todoから1つのアイテムをポップする。アイテムがすでにdoneにある場合、またはアイテムが完成している場合(つまり、その右端にドットがある場合)、アイテムを破棄してステップ2に戻る。
4.Bをアイテムのコーナー記号とし、βをアイテムのベータシーケンスとし、Xをアイテムの先読みとし、nextをイベントFirst(βX)のセットとする。
5.ブレークイベントをnextに加える。
6.Bが左辺に現れる各規則について、およびnextにおける各イベントYについて、アイテム[rule, 0, Y]をtodoに加える。
7.ステップ2に戻る。
Goto。状態は、あるシーケンスγに対して実行可能なアイテムのセットを含み、各シーケンスは、それをこのように表す状態を有する。したがって、γと同一であるが、1イベント分だけより長いシーケンスγXも、ある状態によって表されなければならない。γの状態がJの場合、γXの状態はXを伴うJのgotoと呼ばれる。
Goto(J, X)を計算するには:
1.最初にJにおけるすべてのアイテムを含むアイテムのリストtodo、および最初は空であるアイテムのセットnextで開始する。
2.todoが空の場合、Closure(next)をgoto状態として返す。
3.todoから1つのアイテムをポップする。アイテムが完成している場合、またはアイテムのコーナー記号がXでない場合は、アイテムを破棄してステップ2に戻る。
4.アイテムとドットとの規則による規則をアイテムのドット位置とし、Yをアイテムの先読みとする。アイテム[rule, dot + 1, Y]をnextに加える。
5.ステップ2に戻る。
構築アルゴリズム。ここで、この章の冒頭で述べた構築アルゴリズムの3つのステップについて説明する。最初の集合および後続の集合を計算する最初のステップは、単純に、すべての記号を通って反復し、前のセクションの定義を適用することである。ここで、第2のステップおよび第3のステップについて説明する。
状態生成。文法のすべての状態を生成するには:
1.最初に開始アイテムのクロージャを含む状態のリストtodo、および最初は空である状態のセットdoneで、開始する。
2.todoが空の場合は、doneを文法の状態のセットとして返す。
3.todoから1つの状態Jをポップする。Jがすでにdoneにある場合は、それを破棄してステップ2に戻る。
4.(Ωおよびブレークを含む)文法における各記号Xについて、KをGoto(J, X)とする。Kが空でない場合は、Kをtodoに加える。
5.ステップ2に戻る。
表Eは、このアルゴリズムを表Bの文法に適用した結果を示す。
Figure 0007019589000018
Figure 0007019589000019
表生成。状態が生成された後、各状態はパーサ表の行に変換される。各行は、アクションおよび遷移の2つの部分で構成されている。
状態Jのアクションを計算するには:
Jの各アイテムについて、規則をアイテムの規則とし、Bをアイテムのコーナー記号(もしあれば)とし、Xをアイテムの先読みとする。
a.アイテムが完成しており、その左辺がΩの場合、action(J, X)はrestart(再起動)である。
b.アイテムが完成しており、その左辺がΩでない場合、action(J, X)はreduce(rule)である。
c.アイテムが完成しておらず、Bがトークンであり、Goto(J, B)が空でない場合、action(J, X)はshift(Goto(J, B))である。
d.他のすべての場合において、action(J, X)はパニックである。
状態Jの遷移を計算するには:
文法における各リダクションAについて、KをGoto(J, A)とする。
a.Kが空でない場合、transition(J, A)はKである。
b.Kが空である場合、transition(J, A)は未定義である。
これらのアルゴリズムを表Eに適用すると、表Bが生成される。
その他の最適化。先に述べたように、TFR(1)パーサ表を構築するためのこのアルゴリズムは、標準LR(1)パーサ表を構築するためのアルゴリズムと同様であり、それの拡張である。LR(1)パーサに適用されるさまざまな一般化、最適化、および状態リダクション戦略は、TFR(1)パーサ表にも準用される。そのような戦略には、LR(1)からLALR(1)への最適化およびLR(1)のGLR(1)への一般化が含まれるが、これらに限定されない。
データフローコンピューティング環境で使用するためのリアクティブ関数を記述し変換する方法は、(1)リアクティブ関数を識別することと、(2)関数への入力を提供するパラメータのパターンを識別することと、(3)関数に渡された引数に基づいて評価されるべき式を識別することと、(4)パラメータのパターンを、パターンにマッチする入力のシーケンスを認識することができる状態機械に変換することと、(5)入力データを出力データに変換するよう関数を呼び出す機能で状態機械を拡張することと、(6)単純なソフトウェアまたはハードウェアによる自動化が可能な決定性プッシュダウンオートマトンとして状態機械を実現することとを備える。
一実装形態では、方法は、物理量を監視し、監視された物理量をデジタル形式のデータストリームに変換するハードウェアセンサからデータストリームを受信することと、前記データストリームを入力キューに格納することとを備え、データストリームにおける各トークンは、トークンが受信されたときのタイムスタンプと共に格納され、前記方法はさらに、単一の方向に入力キューを通ってトークンを読出し、以前に読出されたトークンを再読出ししないことによって、1つ以上の所定のパターンにマッチするデータストリームにおけるパターンを識別することと、データストリーム内において所定のパターンを識別すると、所定のパターンが識別されたという肯定的な表示を前記出力キューにおいて出力することとを備える。
この方法は、所定のパターンがデータストリームにおいて識別されていない間に、出力キューにおいて、所定のパターンが識別されたという否定的な表示を出力することをさらに備えることができ、所定のパターンは状態表および状態スタックに格納される。
別の実装形態では、システムは以下を備える:入力キューは、コンピュータメモリにおいて第1のメモリ位置を含み、入力キューは、処理されるべきトークンの先入れ先出しシーケンスを第1のメモリ位置に格納し、キューにおける各トークンに関連付けられるタイムスタンプは、関連付けられるトークンが入力キューに入った時間を示し、トークンはネットワークを介して入力キューによって受信される。ドライバコンポーネントは入力キューに接続され、ドライバコンポーネントは、バックトラッキングなしで入力キューにおけるトークンを処理し、1つ以上の所定の入力パターンにマッチする、トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベント出力を生成する。出力キューは、ドライバコンポーネントに接続され、コンピュータメモリにおいて第2のメモリ位置を含み、出力キューは、第2のメモリ位置に、ドライバコンポーネントによって生成された出力イベントの先入れ先出しシーケンスを格納する。状態表コンポーネントはドライバコンポーネントに接続され、状態表コンポーネントは所定の入力パターンを状態表フォーマットで格納する。状態スタックコンポーネントは、ドライバコンポーネントに接続され、コンピュータメモリにおいて第3のメモリ位置を含み、状態スタックコンポーネントは第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納する。フレームには、変換状態番号、記号、およびデッドラインが含まれる。
入力キューで受信されるトークンは、物性をデジタル量に変換するハードウェアセンサによって生成することができる。ドライバコンポーネントの動作は、状態スタックの一番上のフレーム上で参照される状態を検査することと、入力キューにおける次の入力トークンを検査し、状態スタックに基づいてそれのカテゴリを判断することと、状態表によって示されるカテゴリのトークンのために状態表によって示されるアクションを実行することとを含み得る。
入力キューは、入力キューによって受信された時間に基づく順序付けられたリストにトークンを格納する。キューにおける第1の方向は、最も早く受信されたトークンから最後に受信されたトークンまでの時間順序である。ドライバコンポーネントは、入力キューを第1の方向において検査することによってトークンを処理し、以前に検査されたトークンを検査しない。
入力キューは、入力キューによって受信された時間順序でトークンをリストに格納する。キューにおける第1の方向は、最も早く受信されたトークンから最後に受信されたトークンまでの時間順序である。キューにおける第2の方向は、最後に受信されたトークンから最も早く受信されたトークンまでの時間順序である。第2の方向は、第1の方向とは反対である。ドライバコンポーネントは、入力キューを第1の方向または第2の方向のいずれかのみで検査し、第1および第2の方向の両方では検査しないことによって、トークンを処理する。
ドライバは入力キューの各トークンを1回だけ読出し、読出されたトークンをあとで再び読出すためにバッファに保持しない。マッチングされる所定の入力パターンは、無限長のある数のトークンを有することができる。状態表コンポーネントは状態機械を指定し、ある数の行を含み、各行は状態機械の変換状態を提供する。
各行は、入力トークンカテゴリ値または入力ブレークカテゴリ値を、その値の入力トークンが受信されるととられるアクションにマッピングするアクションのセットと、派生記号型を、その型の派生記号を合成するとドライバが変更すべき状態にマッピングする遷移のセットと、状態機械が特定の状態にとどまることが許される時間の間隔を示すタイムアウトとを含む。
変換状態番号は、状態表の行への参照である。記号は、入力トークンもしくは他の記号から導出されたトークンもしくは中間記号、または組み合わせである。デッドラインは、ドライバがフレームをスタックからポップして外す未来の瞬間である。
一実装形態では、ドライバコンポーネントおよび状態表コンポーネントは、プログラマブルゲートアレイにおいて実施される。別の実装形態では、ドライバコンポーネントおよび状態表コンポーネントは、コンピュータを使用して実施される。状態表コンポーネントは状態機械を指定し、ドライバコンポーネントは、ストリームデータを有するトークンが入力キューにおいて受信されない時間の経過に基づいて、状態機械における第1の状態から状態機械の第2の状態に変化する。
状態表コンポーネントは、状態機械を指定する。ドライバコンポーネントは、ストリームデータを有するトークンのシーケンスが第1の期間中に入力キューにおいて受信されることに基づいて、状態機械における第1の状態から状態機械の第2の状態に変化する。ドライバコンポーネントは、ストリームデータを有するトークンのシーケンスが第2の期間中に入力キューにおいて受信されないことに基づいて、状態機械における第3の状態から状態機械の第4の状態に変化する。
別の実装形態では、方法は以下を備える:コンピュータメモリにおいて第1のメモリ位置を含む入力キューを提供することを備え、入力キューは、処理されるべきトークンの先入れ先出しシーケンスを第1のメモリ位置に格納し、キューにおける各トークンに関連付けられるタイムスタンプは、関連付けられるトークンが入力キューに入った時間を示し、トークンはネットワークを介して入力キューによって受信される。入力キューに接続されるドライバコンポーネントを提供することを備え、ドライバコンポーネントは、バックトラッキングなしで入力キューにおけるトークンを処理し、1つ以上の所定の入力パターンにマッチする、トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベント出力を生成する。ドライバコンポーネントに接続され、コンピュータメモリにおいて第2のメモリ位置を含む出力キューを提供することを備え、出力キューは、第2のメモリ位置に、ドライバコンポーネントによって生成された出力イベントの先入れ先出しシーケンスを格納する。ドライバコンポーネントに接続される状態表コンポーネントを提供することを備え、状態表コンポーネントは所定の入力パターンを状態表フォーマットで格納する。ドライバコンポーネントに接続され、コンピュータメモリにおいて第3のメモリ位置を含む状態スタックコンポーネントを提供することを備え、状態スタックコンポーネントは第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納し、フレームには、変換状態番号、記号、およびデッドラインが含まれる。
状態表コンポーネントのために状態表を生成することは、終端記号の集合を識別することを含み、各記号は入力データのカテゴリを表し、さらに、非終端記号の集合を識別することを含み、各非終端記号は、終端記号または非終端記号の少なくとも1つのパターンを表し、さらに、文法規則のセットを識別することと、トップレベルの規則を識別することと、属性のセットを識別することと、各識別された終端記号および非終端記号に対して最初の集合を計算することと、各識別された終端記号および非終端記号について後続集合を計算することと、対応する後続集合の要素の各々を有する、トップレベルの規則のクロージャから開始状態を生成することとを含む。
状態表を生成することは、開始状態から状態変化遷移が存在する各状態のクロージャを帰納的に生成することによって開始状態から到達可能なすべての状態を生成することと、組み合わせおよびリダクションによって状態のセットを最適化することと、各状態についてのアクション、遷移、およびタイムアウト値を生成することとを含む。
文法規則のセットは、以下を含み得る:各空でない規則はA → B0 . . . Bnの形を取り、ここでAは非終端記号であり、B0からBnは各々終端記号または非終端記号のいずれかであり;各空の規則はA → τの形を取り、ここで、τはある有益な時間単位で特徴づけられる有限時間量であるか、または無制限な時間量を示す無限大である。
属性のセットは、以下のものを含むことができる:各属性は、α:T = {A0 → λ0, . . . An → λn}の形式をとり、αは属性の名前であり、Tは属性の型であり、Aは非終端記号であり、λはその記号の属性の値を計算するために使用される関数である。トップレベルの規則は、Ω→Bの形を取ることができ、Bは終端記号または非終端記号のいずれかである。
本発明のこの記載は、例示および説明のために提示されたものである。それは、網羅的であることを意図するものでもなく、本発明を記載された正確な形態に限定することも意図されておらず、上記教示に照らして多くの修正および変形が可能である。実施形態は、本発明の原理およびその実際の適用を最もよく説明するために選択され、記載された。この記載により、当業者は、本発明を、さまざまな実施形態において、および特定の用途に適したさまざまな修正を加えて、最も有効に活用し実施することが可能になる。本発明の範囲は、特許請求の範囲によって規定される。

Claims (23)

  1. システムであって、
    コンピュータメモリにおいて第1のメモリ位置を含む入力キューを備え、前記入力キューは、処理されるべきトークンの先入れ先出しシーケンスを前記第1のメモリ位置に格納し、前記入力キューにおける各トークンはデータを含むかまたはデータを含まず、前記トークンが前記入力キューに入った時間を示すタイムスタンプを含み、データを含む各トークンは、解析されるべきデータおよびタイムスタンプを担持し、データを含まない各トークンは、経過イベントを表し、解析されるべきデータを担持せず、タイムスタンプを担持し、前記トークンはネットワークを介して前記入力キューによって受信され、前記システムはさらに、
    前記入力キューに結合されるドライバコンポーネントを備え、前記ドライバコンポーネントは、バックトラッキングなしで前記入力キューにおける前記トークンを処理し、1つ以上の所定の入力パターンにマッチする、前記トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベントを生成し、前記システムはさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第2のメモリ位置を含む出力キューを備え、前記出力キューは、前記第2のメモリ位置に、前記ドライバコンポーネントによって生成された前記出力イベントの先入れ先出しシーケンスを格納し、前記システムはさらに、
    前記ドライバコンポーネントに結合される状態表コンポーネントを備え、前記状態表コンポーネントは、前記所定の入力パターンを、行を含む状態表フォーマットで格納し、各行は前記状態表コンポーネントによって記述される複数の状態のうちのある状態を表し、前記システムはさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第3のメモリ位置を含む状態スタックコンポーネントを備え、前記状態スタックコンポーネントは前記第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納し、フレームは、変換状態番号、記号、およびデッドラインを含み、前記変換状態番号は前記状態表コンポーネントによって記述されるある状態に対応する行への参照を示す、システム。
  2. 前記入力キューで受信される前記トークンは、物性をデジタル量に変換するハードウェアセンサによって生成される、請求項1に記載のシステム。
  3. 前記ドライバコンポーネントの動作は、
    前記状態スタックコンポーネントの一番上のフレーム上で参照される状態を検査することと、
    前記入力キューにおける次の入力トークンを検査し、前記状態スタックコンポーネントに基づいて入力データのカテゴリを判断することと、
    前記状態表コンポーネントによって示されるカテゴリのトークンのために前記状態表コンポーネントによって示されるアクションを実行することとを含む、請求項1または2に記載のシステム。
  4. 前記入力キューは、前記入力キューによって受信された時間に基づく順序付けられたリストに前記トークンを格納し、前記入力キューにおける第1の方向は、最も早く受信されたトークンから最後に受信されたトークンまでの時間順序であり、
    前記ドライバコンポーネントは、前記入力キューを前記第1の方向において検査することによって前記トークンを処理し、以前に検査されたトークンを検査しない、請求項1~3のいずれか1項に記載のシステム。
  5. 前記入力キューは、前記入力キューによって受信された時間順序で前記トークンをリストに格納し、前記入力キューにおける第1の方向は、最も早く受信されたトークンから最後に受信されたトークンまでの時間順序であり、前記入力キューにおける第2の方向は、前記最後に受信されたトークンから前記最も早く受信されたトークンまでの時間順序であり、前記第2の方向は、前記第1の方向とは反対であり、
    前記ドライバコンポーネントは、前記入力キューを前記第1の方向または前記第2の方向のいずれかで検査し、前記第1の方向および前記第2の方向の両方では検査しないことによって、前記トークンを処理する、請求項1~3のいずれか1項に記載のシステム。
  6. 前記ドライバコンポーネントは前記入力キューの各トークンを1回だけ読出し、読出されたトークンをあとで再び読出すためにバッファに保持しない、請求項1~5のいずれか1項に記載のシステム。
  7. マッチングされる所定の入力パターンは、無限長のある数のトークンを有し得る、請求項1~6のいずれか1項に記載のシステム。
  8. 前記状態表コンポーネントは状態機械を指定し、複数の行を含み、前記状態機械の変換状態を提供する各行は、
    入力トークンカテゴリ値または入力ブレークカテゴリ値を、その値の入力トークンが受信されるととられるアクションにマッピングするアクションのセットと、
    各種の記号を前記ドライバコンポーネントが変更すべき状態にマッピングする遷移のセットと、
    前記状態機械が特定の状態にとどまることが許される時間の間隔を示すタイムアウトとを含む、請求項1~7のいずれか1項に記載のシステム。
  9. 前記変換状態番号は、前記状態表コンポーネントの行への参照であり、前記記号は、入力トークンもしくは他の記号から導出されたトークンもしくは中間記号、または組み合わせであり、前記デッドラインは、前記ドライバコンポーネントが次のフレームを前記状態スタックコンポーネントからポップするタイミングである、請求項1~8のいずれか1項に記載のシステム。
  10. 前記ドライバコンポーネントおよび状態表コンポーネントは、プログラマブルゲートアレイにおいて実施される、請求項1~9のいずれか1項に記載のシステム。
  11. 前記ドライバコンポーネントおよび状態表コンポーネントは、コンピュータを使用して実施される、請求項1~10のいずれか1項に記載のシステム。
  12. 前記状態表コンポーネントは状態機械を指定し、前記ドライバコンポーネントは、ストリームデータを有するトークンが前記入力キューにおいて受信されない時間の経過に基づいて、第1の前記状態機械から第2の前記状態機械に変化する、請求項1~11のいずれか1項に記載のシステム。
  13. 前記状態表コンポーネントは状態機械を指定し、前記ドライバコンポーネントは、ストリームデータを有するトークンのシーケンスが第1の期間中に前記入力キューにおいて受信されることに基づいて、第1の前記状態機械から第2の前記状態機械に変化し、
    前記ドライバコンポーネントは、ストリームデータを有するトークンのシーケンスが第2の期間中に前記入力キューにおいて受信されないことに基づいて、第3の前記状態機械から第4の前記状態機械に変化する、請求項1~12のいずれか1項に記載のシステム。
  14. 経過イベントが生じると、前記ドライバコンポーネントは現在の状態を期限切れとする、請求項1~13のいずれか1項に記載のシステム。
  15. 方法であって、
    コンピュータメモリにおいて第1のメモリ位置を含む入力キューを提供することを備え、前記入力キューは、処理されるべきトークンの先入れ先出しシーケンスを前記第1のメモリ位置に格納し、前記入力キューにおける各トークンに関連付けられるタイムスタンプは、関連付けられるトークンが前記入力キューに入った時間を示し、前記トークンはネットワークを介して前記入力キューによって受信され、前記方法はさらに、
    前記入力キューに結合されるドライバコンポーネントを提供することを備え、前記ドライバコンポーネントは、バックトラッキングなしで前記入力キューにおける前記トークンを処理し、1つ以上の所定の入力パターンにマッチする、前記トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベントを生成し、前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第2のメモリ位置を含む出力キューを提供することを備え、前記出力キューは、前記第2のメモリ位置に、前記ドライバコンポーネントによって生成された前記出力イベントの先入れ先出しシーケンスを格納し、前記方法はさらに、
    前記ドライバコンポーネントに結合される状態表コンポーネントを提供することを備え、前記状態表コンポーネントは前記所定の入力パターンを状態表フォーマットで格納し、前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第3のメモリ位置を含む状態スタックコンポーネントを提供することを備え、前記状態スタックコンポーネントは前記第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納し、フレームは、変換状態番号、記号、およびデッドラインを含み、前記変換状態番号は前記状態表コンポーネントによって記述されるある状態に対応し、前記方法はさらに、
    前記状態表コンポーネントのために状態表を生成することを備え、前記状態表コンポーネントのために状態表を生成することは、
    入力データのカテゴリを各々が表わす終端記号の集合を識別することと、
    終端記号または非終端記号の少なくとも1つのパターンを各々が表わす非終端記号の集合を識別することと、
    文法規則のセットを識別することと、
    トップレベルの規則を識別することと、
    属性のセットを識別することと、
    各識別された終端記号および非終端記号について最初の集合を計算することと、
    各識別された終端記号および非終端記号について後続集合を計算することと、
    対応する後続集合の各要素を有する、前記トップレベルの規則のクロージャから開始状態を生成することとを含み、
    前記状態表を生成することは、
    前記開始状態から状態変化遷移が存在する各状態のクロージャを帰納的に生成することによって前記開始状態から到達可能なすべての状態を生成することと、
    組み合わせおよびリダクションによって状態のセットを最適化することと、
    各状態についてのアクション、遷移、およびタイムアウト値を生成することとを含み、
    前記属性のセットは、
    各属性が、α:T = {A0 → λ0,…An → λn}の形式をとり、αが属性の名前であり、Tが属性の型であり、Aが非終端記号であり、λがその記号の属性の値を計算するために使用される関数であることを含む、方法。
  16. 方法であって、
    コンピュータメモリにおいて第1のメモリ位置を含む入力キューを提供することを備え、前記入力キューは、処理されるべきトークンの先入れ先出しシーケンスを前記第1のメモリ位置に格納し、前記入力キューにおける各トークンに関連付けられるタイムスタンプは、関連付けられるトークンが前記入力キューに入った時間を示し、前記トークンはネットワークを介して前記入力キューによって受信され、前記方法はさらに、
    前記入力キューに結合されるドライバコンポーネントを提供することを備え、前記ドライバコンポーネントは、バックトラッキングなしで前記入力キューにおける前記トークンを処理し、1つ以上の所定の入力パターンにマッチする、前記トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベントを生成し、前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第2のメモリ位置を含む出力キューを提供することを備え、前記出力キューは、前記第2のメモリ位置に、前記ドライバコンポーネントによって生成された前記出力イベントの先入れ先出しシーケンスを格納し、前記方法はさらに、
    前記ドライバコンポーネントに結合される状態表コンポーネントを提供することを備え、前記状態表コンポーネントは前記所定の入力パターンを状態表フォーマットで格納し、
    前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第3のメモリ位置を含む状態スタックコンポーネントを提供することを備え、前記状態スタックコンポーネントは前記第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納し、フレームは、変換状態番号、記号、およびデッドラインを含み、前記変換状態番号は前記状態表コンポーネントによって記述されるある状態に対応し、前記方法はさらに、
    前記状態表コンポーネントのために状態表を生成することを備え、前記状態表コンポーネントのために状態表を生成することは、
    入力データのカテゴリを各々が表わす終端記号の集合を識別することと、
    終端記号または非終端記号の少なくとも1つのパターンを各々が表わす非終端記号の集合を識別することと、
    文法規則のセットを識別することと、
    トップレベルの規則を識別することと、
    属性のセットを識別することと、
    各識別された終端記号および非終端記号について最初の集合を計算することと、
    各識別された終端記号および非終端記号について後続集合を計算することと、
    対応する後続集合の各要素を有する、前記トップレベルの規則のクロージャから開始状態を生成することとを含み、
    前記状態表を生成することは、
    前記開始状態から状態変化遷移が存在する各状態のクロージャを帰納的に生成することによって前記開始状態から到達可能なすべての状態を生成することと、
    組み合わせおよびリダクションによって状態のセットを最適化することと、
    各状態についてのアクション、遷移、およびタイムアウト値を生成することとを含み、
    前記文法規則のセットは、
    各空でない規則がA → B0…Bnの形を取り、Aが非終端記号であり、B0からBnが各々終端記号または非終端記号のいずれかであることと、
    各空の規則がタイムアウトτの形を取り、τがある有益な時間単位で特徴づけられる有限時間量であるか、または無制限な時間量を示す無限大であることとを含む、方法。
  17. 方法であって、
    コンピュータメモリにおいて第1のメモリ位置を含む入力キューを提供することを備え、前記入力キューは、処理されるべきトークンの先入れ先出しシーケンスを前記第1のメモリ位置に格納し、前記入力キューにおける各トークンに関連付けられるタイムスタンプは、関連付けられるトークンが前記入力キューに入った時間を示し、前記トークンはネットワークを介して前記入力キューによって受信され、前記方法はさらに、
    前記入力キューに結合されるドライバコンポーネントを提供することを備え、前記ドライバコンポーネントは、バックトラッキングなしで前記入力キューにおける前記トークンを処理し、1つ以上の所定の入力パターンにマッチする、前記トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベントを生成し、前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第2のメモリ位置を含む出力キューを提供することを備え、前記出力キューは、前記第2のメモリ位置に、前記ドライバコンポーネントによって生成された前記出力イベントの先入れ先出しシーケンスを格納し、前記方法はさらに、
    前記ドライバコンポーネントに結合される状態表コンポーネントを提供することを備え、前記状態表コンポーネントは前記所定の入力パターンを状態表フォーマットで格納し、前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第3のメモリ位置を含む状態スタックコンポーネントを提供することを備え、前記状態スタックコンポーネントは前記第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納し、フレームは、変換状態番号、記号、およびデッドラインを含み、前記変換状態番号は前記状態表コンポーネントによって記述されるある状態に対応し、前記方法はさらに、
    前記状態表コンポーネントのために状態表を生成することを備え、前記状態表コンポーネントのために状態表を生成することは、
    入力データのカテゴリを各々が表わす終端記号の集合を識別することと、
    終端記号または非終端記号の少なくとも1つのパターンを各々が表わす非終端記号の集合を識別することと、
    文法規則のセットを識別することと、
    トップレベルの規則を識別することと、
    属性のセットを識別することと、
    各識別された終端記号および非終端記号について最初の集合を計算することと、
    各識別された終端記号および非終端記号について後続集合を計算することと、
    対応する後続集合の各要素を有する、前記トップレベルの規則のクロージャから開始状態を生成することとを含み、
    前記文法規則のセットは、
    各空でない規則がA → B0…Bnの形を取り、Aが非終端記号であり、B0からBnが各々終端記号または非終端記号のいずれかであることと、
    各空の規則がA → τの形を取り、τがある有益な時間単位で特徴づけられる有限時間量であるか、または無制限な時間量を示す無限大であることとを含む、方法。
  18. 方法であって、
    コンピュータメモリにおいて第1のメモリ位置を含む入力キューを提供することを備え、前記入力キューは、処理されるべきトークンの先入れ先出しシーケンスを前記第1のメモリ位置に格納し、前記入力キューにおける各トークンに関連付けられるタイムスタンプは、関連付けられるトークンが前記入力キューに入った時間を示し、前記トークンはネットワークを介して前記入力キューによって受信され、前記方法はさらに、
    前記入力キューに結合されるドライバコンポーネントを提供することを備え、前記ドライバコンポーネントは、バックトラッキングなしで前記入力キューにおける前記トークンを処理し、1つ以上の所定の入力パターンにマッチする、前記トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベントを生成し、前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第2のメモリ位置を含む出力キューを提供することを備え、前記出力キューは、前記第2のメモリ位置に、前記ドライバコンポーネントによって生成された前記出力イベントの先入れ先出しシーケンスを格納し、前記方法はさらに、
    前記ドライバコンポーネントに結合される状態表コンポーネントを提供することを備え、前記状態表コンポーネントは前記所定の入力パターンを状態表フォーマットで格納し、前記方法はさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第3のメモリ位置を含む状態スタックコンポーネントを提供することを備え、前記状態スタックコンポーネントは前記第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納し、フレームは、変換状態番号、記号、およびデッドラインを含み、前記変換状態番号は前記状態表コンポーネントによって記述されるある状態に対応し、前記方法はさらに、
    前記状態表コンポーネントのために状態表を生成することを備え、前記状態表コンポーネントのために状態表を生成することは、
    入力データのカテゴリを各々が表わす終端記号の集合を識別することと、
    終端記号または非終端記号の少なくとも1つのパターンを各々が表わす非終端記号の集合を識別することと、
    文法規則のセットを識別することと、
    トップレベルの規則を識別することと、
    属性のセットを識別することと、
    各識別された終端記号および非終端記号について最初の集合を計算することと、
    各識別された終端記号および非終端記号について後続集合を計算することと、
    対応する後続集合の各要素を有する、前記トップレベルの規則のクロージャから開始状態を生成することとを含み、
    前記属性のセットは、
    各属性が、α:T = {A0 → λ0,…An → λn}の形式をとり、αが属性の名前であり、Tが属性の型であり、Aが非終端記号であり、λがその記号の属性の値を計算するために使用される関数であることを含む、方法。
  19. 前記トップレベルの規則は、Ω→Bの形を有し、Bは終端記号または非終端記号のいずれかである、請求項15に記載の方法。
  20. 前記属性のセットは、
    各属性が、α:T = {A0 → λ0,…An → λn}の形式をとり、αが属性の名前であり、Tが属性の型であり、Aが非終端記号であり、λがその記号の属性の値を計算するために使用される関数であることを含む、請求項16または17に記載の方法。
  21. システムであって、
    コンピュータメモリにおいて第1のメモリ位置を含む入力キューを備え、前記入力キューは、処理されるべきトークンの先入れ先出しシーケンスを前記第1のメモリ位置に格納し、前記入力キューにおける各トークンはデータを含むかまたはデータを含まず、前記トークンが前記入力キューに入った時間を示すタイムスタンプを含み、データを含む各トークンは、解析されるべきデータおよびタイムスタンプを担持し、データを含まない各トークンは、経過イベントを表し、解析されるべきデータを担持せず、タイムスタンプを担持し、前記トークンはネットワークを介して前記入力キューによって受信され、前記システムはさらに、
    前記入力キューに結合されるドライバコンポーネントを備え、前記ドライバコンポーネントは、前記入力キューにおける前記トークンを処理し、1つ以上の所定の入力パターンにマッチする、前記トークンのシーケンスにおけるパターンを識別し、マッチした所定の入力パターンを識別すると、出力イベントを生成し、前記システムはさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第2のメモリ位置を含む出力キューを備え、前記出力キューは、前記第2のメモリ位置に、前記ドライバコンポーネントによって生成された前記出力イベントの先入れ先出しシーケンスを格納し、前記システムはさらに、
    前記ドライバコンポーネントに結合される状態表コンポーネントを備え、前記状態表コンポーネントは、前記所定の入力パターンを、行を含む状態表フォーマットで格納し、各行は前記状態表コンポーネントによって記述される複数の状態のうちのある状態を表し、前記システムはさらに、
    前記ドライバコンポーネントに結合され、前記コンピュータメモリにおいて第3のメモリ位置を含む状態スタックコンポーネントを備え、前記状態スタックコンポーネントは前記第3のメモリ位置にフレームの後入れ先出しのシーケンシャルストレージを格納し、フレームは、変換状態番号、記号、およびデッドラインを含み、前記変換状態番号は前記状態表コンポーネントによって記述されるある状態に対応する、システム。
  22. 前記状態表コンポーネントは状態機械を指定し、前記ドライバコンポーネントは、ストリームデータを有するトークンのシーケンスが第1の期間中に前記入力キューにおいて受信されることに基づいて、前記状態機械における第1の状態から前記状態機械の第2の状に変化する、請求項21に記載のシステム。
  23. 前記状態表コンポーネントは状態機械を指定し、前記ドライバコンポーネントは、ストリームデータを有するトークンのシーケンスが第1の期間中に前記入力キューにおいて受信されないことに基づいて、前記状態機械における第1の状態から前記状態機械の第2の状態に変化する、請求項21に記載のシステム。
JP2018549927A 2016-03-23 2017-03-23 リアルタイムデータフロープログラミングのための効率的な状態機械 Active JP7019589B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022014853A JP7326510B2 (ja) 2016-03-23 2022-02-02 リアルタイムデータフロープログラミングのための効率的な状態機械

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201662312223P 2016-03-23 2016-03-23
US201662312187P 2016-03-23 2016-03-23
US201662312255P 2016-03-23 2016-03-23
US201662312106P 2016-03-23 2016-03-23
US62/312,255 2016-03-23
US62/312,187 2016-03-23
US62/312,106 2016-03-23
US62/312,223 2016-03-23
PCT/US2017/023906 WO2017165708A1 (en) 2016-03-23 2017-03-23 Efficient state machines for real-time dataflow programming

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022014853A Division JP7326510B2 (ja) 2016-03-23 2022-02-02 リアルタイムデータフロープログラミングのための効率的な状態機械

Publications (3)

Publication Number Publication Date
JP2019512973A JP2019512973A (ja) 2019-05-16
JP2019512973A5 JP2019512973A5 (ja) 2020-04-30
JP7019589B2 true JP7019589B2 (ja) 2022-02-15

Family

ID=59897282

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2018549906A Pending JP2019516167A (ja) 2016-03-23 2017-03-23 リアルタイムデータフロープログラミング言語のためのツールおよび方法
JP2018549799A Active JP6896759B2 (ja) 2016-03-23 2017-03-23 リアルタイムデータフロープログラミングにおけるパターン駆動型反応の合成
JP2018549927A Active JP7019589B2 (ja) 2016-03-23 2017-03-23 リアルタイムデータフロープログラミングのための効率的な状態機械
JP2022004285A Active JP7371141B2 (ja) 2016-03-23 2022-01-14 リアルタイムデータフロープログラミング言語のためのツールおよび方法
JP2022014853A Active JP7326510B2 (ja) 2016-03-23 2022-02-02 リアルタイムデータフロープログラミングのための効率的な状態機械

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2018549906A Pending JP2019516167A (ja) 2016-03-23 2017-03-23 リアルタイムデータフロープログラミング言語のためのツールおよび方法
JP2018549799A Active JP6896759B2 (ja) 2016-03-23 2017-03-23 リアルタイムデータフロープログラミングにおけるパターン駆動型反応の合成

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2022004285A Active JP7371141B2 (ja) 2016-03-23 2022-01-14 リアルタイムデータフロープログラミング言語のためのツールおよび方法
JP2022014853A Active JP7326510B2 (ja) 2016-03-23 2022-02-02 リアルタイムデータフロープログラミングのための効率的な状態機械

Country Status (8)

Country Link
US (11) US10564941B2 (ja)
EP (3) EP3433768A4 (ja)
JP (5) JP2019516167A (ja)
KR (3) KR102092721B1 (ja)
CN (5) CN115373977A (ja)
AU (4) AU2017238633B2 (ja)
SA (2) SA518400086B1 (ja)
WO (3) WO2017165713A1 (ja)

Families Citing this family (125)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10140191B2 (en) * 2015-07-24 2018-11-27 Accenture Global Services Limited System for development of IoT system architecture
US10324773B2 (en) * 2015-09-17 2019-06-18 Salesforce.Com, Inc. Processing events generated by internet of things (IoT)
KR102092721B1 (ko) * 2016-03-23 2020-04-23 포그혼 시스템스 인코포레이티드 실시간 데이터플로우 프로그래밍에서 패턴 구동형 반응의 구성
US10110563B1 (en) * 2016-04-28 2018-10-23 Palo Alto Networks, Inc. Reduction and acceleration of a deterministic finite automaton
US10908886B2 (en) * 2016-07-12 2021-02-02 Oracle International Corporation Accessing a migrated member in an updated type
CN108713205B (zh) 2016-08-22 2022-11-11 甲骨文国际公司 用于自动映射与数据流环境一起使用的数据类型的系统和方法
US20180069925A1 (en) * 2016-09-08 2018-03-08 BigStream Solutions, Inc. Systems and methods for automatic transferring of big data computations from centralized systems to at least one of messaging systems and data collection systems
US10055339B2 (en) * 2016-09-28 2018-08-21 Wipro Limited Methods and systems for testing mobile applications
US10025566B1 (en) * 2016-10-07 2018-07-17 The Mathworks, Inc. Scheduling technique to transform dataflow graph into efficient schedule
US11323519B2 (en) * 2017-04-19 2022-05-03 Microsoft Technology Licensing, Llc Internet of things pub-sub data publisher
GB201706300D0 (en) * 2017-04-20 2017-06-07 Microsoft Technology Licensing Llc Debugging tool
US11537368B2 (en) * 2017-06-03 2022-12-27 Apple Inc. Integrating machine learning models into an interpreted software development environment
US10387129B2 (en) * 2017-06-29 2019-08-20 General Electric Company Deployment of environment-agnostic services
US10872149B1 (en) 2017-07-25 2020-12-22 Perspecta Labs Inc. Anomaly detection based on side-channel emanations
US10452624B2 (en) * 2017-08-02 2019-10-22 Vmware, Inc. Storage and analysis of data records associated with managed devices in a device management platform
US10545742B2 (en) * 2017-09-06 2020-01-28 Nicira, Inc. Annotation-driven framework for generating state machine updates
CN111279319A (zh) 2017-09-30 2020-06-12 甲骨文国际公司 容器组的动态迁移
US11113608B2 (en) 2017-10-30 2021-09-07 Accenture Global Solutions Limited Hybrid bot framework for enterprises
US11397663B2 (en) * 2017-11-02 2022-07-26 Silicon Mobility Sas Software environment for control engine debug, test, calibration and tuning
US10310959B2 (en) 2017-11-07 2019-06-04 Bank Of America Corporation Pre-deployment validation system using intelligent databases
RO133453A2 (ro) * 2017-12-28 2019-06-28 Siemens Aktiengesellschaft Motor de procesare a semnalelor şi evenimentelor
US11012416B2 (en) * 2018-01-15 2021-05-18 Akamai Technologies, Inc. Symbolic execution for web application firewall performance
CN108400917B (zh) * 2018-01-22 2021-05-18 深圳市新科聚合网络技术有限公司 一种面向智能制造的边缘计算网关及系统
CN110347396B (zh) * 2018-04-03 2023-05-26 阿里巴巴集团控股有限公司 系统构建方法、控制方法、装置、控制系统及计算设备
US20210041859A1 (en) * 2018-04-13 2021-02-11 Mitsubishi Electric Corporation Data processing device, data processing method and program
US10986183B2 (en) * 2018-05-02 2021-04-20 Hewlett Packard Enterprise Development Lp Data management in a network environment
US11388222B2 (en) * 2018-05-04 2022-07-12 Verizon Patent And Licensing Inc. Mobile edge computing
US11226797B2 (en) * 2018-05-24 2022-01-18 Chaldal, Inc. Representation and analysis of workflows using abstract syntax trees
EP3579174A1 (en) 2018-06-08 2019-12-11 Hexagon Technology Center GmbH Mobile vehicles in manufacturing
US11275485B2 (en) * 2018-06-15 2022-03-15 Sap Se Data processing pipeline engine
US10666557B2 (en) * 2018-08-03 2020-05-26 Hitachi, Ltd. Method to manage data flow for edge-core distributed analytics systems
CN109150703B (zh) * 2018-08-23 2019-07-02 北方工业大学 一种工业物联网智能云网关及其通信方法
WO2020043538A1 (en) * 2018-08-28 2020-03-05 Koninklijke Philips N.V. A distributed edge-environment computing platform for context-enabled ambient intelligence, environmental monitoring and control, and large-scale near real-time informatics
US11228481B2 (en) * 2018-08-29 2022-01-18 Fathym, Inc. Method for communicating and debugging across IoT systems
WO2020041872A1 (en) * 2018-08-30 2020-03-05 Streamworx.Ai Inc. Systems, methods and computer program products for scalable, low-latency processing of streaming data
US11252258B2 (en) * 2018-09-27 2022-02-15 Hewlett Packard Enterprise Development Lp Device-aware dynamic protocol adaptation in a software-defined network
DE102019124215A1 (de) * 2018-09-28 2020-04-02 Dspace Digital Signal Processing And Control Engineering Gmbh Verfahren zum Ändern von Modellen für die Erzeugung von Quellcode
US20200117576A1 (en) * 2018-10-12 2020-04-16 Ca, Inc. Assessing the container-readiness of software applications
US11960261B2 (en) 2019-07-12 2024-04-16 Johnson Controls Tyco IP Holdings LLP HVAC system with sustainability and emissions controls
CN109299380B (zh) * 2018-10-30 2021-07-02 浙江工商大学 在线教育平台中基于多维特征的习题个性化推荐方法
CN109471401B (zh) * 2018-11-08 2021-02-26 金蝶软件(中国)有限公司 数据处理方法以及边缘计算数据盒
US11727021B2 (en) * 2018-12-14 2023-08-15 Tibco Software Inc. Process control tool for processing big and wide data
WO2020145892A1 (en) * 2019-01-10 2020-07-16 Fractal Cognitives Pte. Ltd. Natural solution language
US11761660B2 (en) 2019-01-30 2023-09-19 Johnson Controls Tyco IP Holdings LLP Building control system with feedback and feedforward total energy flow compensation
US11150926B2 (en) * 2019-02-22 2021-10-19 International Business Machines Corporation Native code generation for cloud services
US11790263B2 (en) 2019-02-25 2023-10-17 International Business Machines Corporation Program synthesis using annotations based on enumeration patterns
KR102188562B1 (ko) * 2019-02-28 2020-12-09 숙명여자대학교산학협력단 시각 블록 언어 기반 IoT 응용 프로그램 개발 도구 및 그 동작 방법
ES2784865A1 (es) * 2019-03-26 2020-10-01 Ind Internet Of Robots S L U Sistema de monitorizacion de maquinaria industrial y metodo para llevar a cabo dicha monitorizacion
US11616839B2 (en) 2019-04-09 2023-03-28 Johnson Controls Tyco IP Holdings LLP Intelligent edge computing platform with machine learning capability
US10951387B2 (en) * 2019-04-22 2021-03-16 Pinnacle Peak Holding Corporation Systems and methods for self-formation and self-management of full-duplex communication networks
US11714393B2 (en) 2019-07-12 2023-08-01 Johnson Controls Tyco IP Holdings LLP Building control system with load curtailment optimization
US11274842B2 (en) 2019-07-12 2022-03-15 Johnson Controls Tyco IP Holdings LLP Systems and methods for optimizing ventilation, filtration, and conditioning schemes for buildings
US11074081B2 (en) * 2019-08-02 2021-07-27 GM Global Technology Operations LLC Architecture and method supporting multiple vision stream using shared server on embedded platform
US20210034031A1 (en) * 2019-08-02 2021-02-04 Hitachi, Ltd. Using ai for ensuring data integrity of industrial controllers
US10691728B1 (en) * 2019-08-13 2020-06-23 Datadog, Inc. Transforming a data stream into structured data
TWI720580B (zh) * 2019-08-14 2021-03-01 樂澄資訊顧問有限公司 視覺模組化程式系統
US11121905B2 (en) 2019-08-15 2021-09-14 Forcepoint Llc Managing data schema differences by path deterministic finite automata
US20230059793A1 (en) * 2019-08-29 2023-02-23 Unilog Content Solutions, Llc System and method for non-programmatically constructing software solutions on configurable computing platform
WO2021050816A1 (en) * 2019-09-12 2021-03-18 Jabil Inc. Method and system for managing secure iot device applications
CN110647324B (zh) * 2019-09-18 2023-05-16 编缘(杭州)教育科技有限公司 Python与Scratch交互式编程方法及电子设备
US11048483B2 (en) 2019-09-24 2021-06-29 Rockwell Automation Technologies, Inc. Industrial programming development with an extensible integrated development environment (IDE) platform
US10942710B1 (en) 2019-09-24 2021-03-09 Rockwell Automation Technologies, Inc. Industrial automation domain-specific language programming paradigm
US11733687B2 (en) 2019-09-26 2023-08-22 Rockwell Automation Technologies, Inc. Collaboration tools
US11042362B2 (en) 2019-09-26 2021-06-22 Rockwell Automation Technologies, Inc. Industrial programming development with a trained analytic model
US11163536B2 (en) 2019-09-26 2021-11-02 Rockwell Automation Technologies, Inc. Maintenance and commissioning
US11392112B2 (en) 2019-09-26 2022-07-19 Rockwell Automation Technologies, Inc. Virtual design environment
US11080176B2 (en) 2019-09-26 2021-08-03 Rockwell Automation Technologies, Inc. Testing framework for automation objects
WO2021061397A1 (en) * 2019-09-27 2021-04-01 Hypernet Labs, Inc. Containerizing source code for execution in different language using drag-drop operation
US11422547B2 (en) 2019-10-21 2022-08-23 Johnson Controls Tyco IP Holdings LLP Building management system with machine learning for detecting anomalies in vibration data sets
US11150877B2 (en) * 2019-11-06 2021-10-19 Google Llc Automatically generating machine learning models for software tools that operate on source code
US11632333B2 (en) 2019-11-14 2023-04-18 Sayantek, Inc System and method for implementation of a distributed data flow-based framework
CN112817573B (zh) * 2019-11-18 2024-03-01 北京沃东天骏信息技术有限公司 用于构建流式计算应用的方法、装置、计算机系统和介质
US10929181B1 (en) * 2019-11-22 2021-02-23 Iterate Studio, Inc. Developer independent resource based multithreading module
CN110908916B (zh) * 2019-11-27 2022-02-22 威创集团股份有限公司 一种调试工具及调试方法
JP7434560B2 (ja) 2019-12-13 2024-02-20 ライブパーソン, インコーポレイテッド 双方向通信システムのためのサービスとしての機能クラウドチャットボット
US11763217B2 (en) 2019-12-20 2023-09-19 Iterate Studio, Inc. Dynamic feature loading
CN111459965B (zh) * 2019-12-24 2023-05-05 中国科学院沈阳自动化研究所 一种面向边缘计算的信息监控系统
WO2021137669A1 (ko) * 2019-12-30 2021-07-08 매니코어소프트주식회사 딥러닝을 위한 가속기용 프로그램 생성 방법
JP2023511631A (ja) * 2020-01-28 2023-03-20 アビニシオ テクノロジー エルエルシー 計算グラフを生成するためのエディタ
EP3869228B1 (en) 2020-02-21 2022-07-06 Tata Consultancy Services Limited Edge based sensor actuation and control in iot network for event monitoring
US11061652B1 (en) * 2020-03-26 2021-07-13 Cognizant Technology Solutions India Pvt. Ltd. System and a method for moving legacy applications to cloud
US11308447B2 (en) 2020-04-02 2022-04-19 Rockwell Automation Technologies, Inc. Cloud-based collaborative industrial automation design environment
WO2021211911A1 (en) * 2020-04-16 2021-10-21 Blackswan Technologies Inc. Artificial intelligence cloud operating system
CN111782194B (zh) * 2020-06-26 2022-09-13 西北工业大学 一种基于航空嵌入式开放体系架构的可移植单元代码自动生成方法
US20220004369A1 (en) * 2020-07-01 2022-01-06 Johnson Controls Tyco IP Holdings LLP Rule builder and simulator tool for creating complex event processing rules
EP3940586A1 (en) * 2020-07-17 2022-01-19 Sony Group Corporation An electronic device and a related method for detecting and counting an action
CN116711288A (zh) * 2020-08-27 2023-09-05 西门子股份公司 用于分布式边缘节点部署的数据流图的集中式管理
SE545771C2 (en) * 2020-08-28 2024-01-09 Stream Analyze Sweden Ab Method and system for data processing
CN112052053B (zh) * 2020-10-10 2023-12-19 国科晋云技术有限公司 一种清理高性能计算集群中挖矿程序的方法及系统
CN112394914B (zh) * 2020-10-28 2022-05-24 浙江大学 一种面向物联网应用的以边缘为中心的编程方法
US11700178B2 (en) 2020-10-30 2023-07-11 Nutanix, Inc. System and method for managing clusters in an edge network
US11290330B1 (en) 2020-10-30 2022-03-29 Nutanix, Inc. Reconciliation of the edge state in a telemetry platform
US11223516B1 (en) 2020-10-30 2022-01-11 Nutanix, Inc. Smart collection and processing in telemetry system
CN116391172A (zh) * 2020-11-09 2023-07-04 “工艺系统”有限责任公司 用于创建和执行高度扩展的云应用的系统和方法
US11550583B2 (en) * 2020-11-13 2023-01-10 Google Llc Systems and methods for handling macro compatibility for documents at a storage system
CN112363856A (zh) * 2020-11-19 2021-02-12 北京计算机技术及应用研究所 一种基于dds实现深度学习框架与应用程序互操作的方法
CN112416197B (zh) * 2020-11-23 2021-12-03 山东师范大学 基于Excel和VBA的程序单步演示装置及方法
CN112506489A (zh) * 2020-11-30 2021-03-16 广州市智能软件产业研究院 一种安全协议建模端与验证端的跨平台方法、计算机及存储介质
CN112327815A (zh) * 2020-11-30 2021-02-05 北京一雄信息科技有限公司 一种批量测试汽车诊断仪数据流准确性的方法及装置
US11403090B2 (en) 2020-12-08 2022-08-02 Alibaba Group Holding Limited Method and system for compiler optimization based on artificial intelligence
KR102305845B1 (ko) 2020-12-21 2021-09-29 쿠팡 주식회사 코드의 검증을 위한 전자 장치 및 그 방법
US20210117418A1 (en) * 2020-12-23 2021-04-22 Vikram Dadwal Time-aware general-purpose input output for industrial control systems
EP4036752A1 (en) * 2021-01-29 2022-08-03 ABB Schweiz AG Method for analysing process data related to a segment of a production process
US20220300850A1 (en) * 2021-03-16 2022-09-22 Data Gran, Inc. End-to-end machine learning pipelines for data integration and analytics
KR102500395B1 (ko) * 2021-03-30 2023-02-16 서울시립대학교 산학협력단 프로그램 소스코드의 버그를 정정하는 장치 및 방법
EP4348359A1 (en) 2021-05-28 2024-04-10 Johnson Controls Tyco IP Holdings LLP Building control system with predictive control of carbon emissions using marginal operating emissions rate
CN113312652B (zh) * 2021-06-25 2024-05-03 国网辽宁省电力有限公司电力科学研究院 基于改进cat的云边协同电力终端采集数据完整性验证系统
US20230090918A1 (en) * 2021-09-21 2023-03-23 Blackberry Limited Method and system for vehicle data file playback
US11902664B2 (en) 2021-09-22 2024-02-13 Adam A. Locke Cellular telephone with protracting monitor screen and camera
CN113944601A (zh) * 2021-10-15 2022-01-18 上海大学 一种用于风机高频海量数据实时采集传输及处理的方法
WO2023066777A1 (en) * 2021-10-19 2023-04-27 Koninklijke Philips N.V. Efficient log file transfer and processing using grouping of regular expressions and service level dependence
WO2023081634A1 (en) * 2021-11-05 2023-05-11 Swarm Engineering, Inc. Method of creating self-assembling, transient analytic and learning agents in a message-driven architecture
CN114385178A (zh) * 2021-12-14 2022-04-22 厦门大学 基于抽象语法树结构信息增强的代码生成方法
KR102455142B1 (ko) * 2022-01-18 2022-10-17 한국과학기술원 컨테이너 환경을 위한 eBPF(extended Berkeley Packet Filter)/XDP(Express Data Path)에 기반한 고속 네트워크 패킷 페이로드 검사 시스템
CN114115834B (zh) * 2022-01-25 2022-04-26 之江实验室 一种软硬件协同编译处理方法及系统
US11907142B2 (en) 2022-02-04 2024-02-20 Red Hat, Inc. Configuring polling times for software applications
US20230280059A1 (en) * 2022-03-01 2023-09-07 Johnson Controls Tyco IP Holdings LLP Building automation system with edge device local configuration
WO2023167862A1 (en) 2022-03-01 2023-09-07 Johnson Controls Tyco IP Holdings LLP Building automation system with flexible architecture
US11765065B1 (en) 2022-03-23 2023-09-19 Nutanix, Inc. System and method for scalable telemetry
TWI823408B (zh) * 2022-05-27 2023-11-21 國立成功大學 機械設備雲端控制系統
US20230401043A1 (en) * 2022-06-09 2023-12-14 Xilinx, Inc. Dataflow-based computer program visualization and refactoring
US11972257B2 (en) * 2022-07-12 2024-04-30 Rockwell Automation Technologies, Inc. Industrial automation system topology with point to point business rule integration
WO2024068483A1 (en) 2022-09-30 2024-04-04 Sun Chemical B.V. Led-curable offset inks containing aluminum additives
EP4357915A1 (en) * 2022-10-18 2024-04-24 Nokia Solutions and Networks Oy A computer program generating apparatus and method
KR102651797B1 (ko) * 2023-09-18 2024-03-28 (주) 웨다 Ai 비전문가를 위한 소프트웨어 정의 제조 기반의 머신러닝 플랫폼 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030035582A1 (en) 2001-08-14 2003-02-20 Christian Linhart Dynamic scanner
JP2008524965A (ja) 2004-12-21 2008-07-10 ミスルトウ テクノロジーズ, インコーポレイテッド ネットワークインターフェイスおよびファイヤーウォールデバイス
US20080270342A1 (en) 2007-04-30 2008-10-30 Tarari, Inc. Hardware processing of regular expressions
WO2015071978A1 (ja) 2013-11-13 2015-05-21 富士通株式会社 イベント管理プログラム、イベント管理方法および分散システム
US20150161214A1 (en) 2013-12-05 2015-06-11 Oracle International Corporation Pattern matching across multiple input data streams

Family Cites Families (95)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3979733A (en) * 1975-05-09 1976-09-07 Bell Telephone Laboratories, Incorporated Digital data communications system packet switch
US4975865A (en) * 1989-05-31 1990-12-04 Mitech Corporation Method and apparatus for real-time control
US5181025A (en) * 1991-05-24 1993-01-19 The United States Of America As Represented By The Secretary Of The Air Force Conformal telemetry system
JPH06168222A (ja) * 1992-11-30 1994-06-14 Toshiba Corp プラントのシミュレーション装置
EP0687089B1 (en) * 1994-06-10 2003-05-28 Hewlett-Packard Company, A Delaware Corporation Event-processing system and method of constructing such a system
JP2965058B2 (ja) * 1995-12-18 1999-10-18 日本電気株式会社 Cpu命令エミュレートシステム
US5916305A (en) * 1996-11-05 1999-06-29 Shomiti Systems, Inc. Pattern recognition in data communications using predictive parsers
US5896522A (en) * 1996-12-31 1999-04-20 Unisys Corporation Selective emulation interpretation using transformed instructions
JP3033713B2 (ja) * 1997-06-12 2000-04-17 北海道日本電気ソフトウェア株式会社 仮想計算機エミュレート装置
US7743362B2 (en) * 1998-02-17 2010-06-22 National Instruments Corporation Automatic generation of application domain specific graphical programs
US6826756B1 (en) * 1998-06-30 2004-11-30 Symbol Technologies, Inc. Automatic transfer of data from an input device to a software application
US6522875B1 (en) 1998-11-17 2003-02-18 Eric Morgan Dowling Geographical web browser, methods, apparatus and systems
JP3788111B2 (ja) * 1999-06-30 2006-06-21 株式会社デンソー 情報サービスシステム
US7937665B1 (en) * 2000-06-13 2011-05-03 National Instruments Corporation System and method for automatically generating a graphical program to implement a prototype
US7590644B2 (en) * 1999-12-21 2009-09-15 International Business Machine Corporation Method and apparatus of streaming data transformation using code generator and translator
US6725287B1 (en) 2000-11-09 2004-04-20 Elity Systems, Inc. Method and system for capturing streaming data by an actionable information engine
US9141708B2 (en) * 2001-02-23 2015-09-22 Metaframe Technologies Gmbh Methods for generating selection structures, for making selections according to selection structures and for creating selection descriptions
US7627860B2 (en) * 2001-08-14 2009-12-01 National Instruments Corporation Graphically deployment of a program with automatic conversion of program type
US7203635B2 (en) 2002-06-27 2007-04-10 Microsoft Corporation Layered models for context awareness
US7293112B2 (en) * 2002-11-12 2007-11-06 National Instruments Corporation Graphical program node for displaying acquired images
JP2004303114A (ja) * 2003-04-01 2004-10-28 Hitachi Ltd インタープリタおよびネイティブコード実行方法
US20070011334A1 (en) * 2003-11-03 2007-01-11 Steven Higgins Methods and apparatuses to provide composite applications
US7318075B2 (en) * 2004-02-06 2008-01-08 Microsoft Corporation Enhanced tabular data stream protocol
US7836426B2 (en) * 2004-05-06 2010-11-16 National Instruments Corporation Automatic generation of application domain specific graphical programs
US7650574B2 (en) * 2004-05-11 2010-01-19 National Instruments Corporation Visually indicating problems found during programmatic analysis of a graphical program
US7650594B2 (en) * 2004-05-27 2010-01-19 National Instruments Corporation Graphical program analyzer with framework for adding user-defined tests
JP2006095440A (ja) * 2004-09-29 2006-04-13 Toshiba Corp 下水処理場の運転管理システム
US7627544B2 (en) 2005-05-20 2009-12-01 Microsoft Corporation Recognizing event patterns from event streams
US7907610B2 (en) * 2005-05-23 2011-03-15 Nxp B.V. Integrated circuit with internal communication network
US20070044072A1 (en) * 2005-08-16 2007-02-22 Hayles Timothy J Automatically Generating a Graphical Data Flow Program Based on a Circuit Diagram
US7864178B2 (en) * 2005-11-09 2011-01-04 National Instruments Corporation Creating machine vision inspections using a state diagram representation
US8543337B2 (en) 2006-04-21 2013-09-24 The Mathworks, Inc. Block diagram explorer in a method and apparatus for integrated modeling, simulation and analysis of chemical and biological systems
US8046739B2 (en) * 2006-08-04 2011-10-25 National Instruments Corporation System and method for enabling a graphical program to propagate attributes of inputs and outputs of blocks
US9038041B2 (en) * 2006-12-04 2015-05-19 Tibco Software, Inc. Stream processor with compiled programs
US8370812B2 (en) * 2007-04-02 2013-02-05 International Business Machines Corporation Method and system for automatically assembling processing graphs in information processing systems
US8812261B2 (en) 2007-08-23 2014-08-19 Applied Materials, Inc. Method and apparatus to automatically create virtual sensors with templates
US20090106011A1 (en) * 2007-10-22 2009-04-23 International Business Machines Corporation System and method for developing and deploying sensor and actuator applications over distributed computing infrastructure
US8364456B2 (en) * 2008-01-10 2013-01-29 The Mathworks, Inc. Conditionally executed states
KR101468546B1 (ko) 2008-02-11 2014-12-03 삼성전자 주식회사 이미지 센서의 구동 방법
US20090228407A1 (en) 2008-03-05 2009-09-10 The Boeing Company Distributed cognitive architecture
US9305238B2 (en) * 2008-08-29 2016-04-05 Oracle International Corporation Framework for supporting regular expression-based pattern matching in data streams
CN101442540B (zh) * 2008-12-30 2012-09-05 合肥昊特信息科技有限公司 基于现场可编程门阵列的高速模式匹配算法
US8250016B2 (en) * 2009-04-17 2012-08-21 Alcatel Lucent Variable-stride stream segmentation and multi-pattern matching
US8286191B2 (en) * 2009-05-14 2012-10-09 International Business Machines Corporation Dynamically composing data stream processing applications
US8880524B2 (en) * 2009-07-17 2014-11-04 Apple Inc. Scalable real time event stream processing
US8584120B2 (en) * 2009-11-23 2013-11-12 Julian Michael Urbach Stream-based software application delivery and launching system
WO2011072140A1 (en) * 2009-12-09 2011-06-16 The Mathworks, Inc. Canonicalized versions of reuse candidates in graphical state diagrams
CN101860978B (zh) 2010-05-14 2012-05-09 南京邮电大学 一种物联网体系结构
US8719774B2 (en) * 2010-07-30 2014-05-06 National Instruments Corporation Developing programs for hardware implementation in a graphical specification and constraint language Via iterative estimation of performance or resource utilization
JP5902185B2 (ja) * 2010-10-25 2016-04-13 アビニシオ テクノロジー エルエルシー コンピュータプログラムを表すデータフローグラフ内のデータセットオブジェクトの管理
CN103547999B (zh) * 2011-01-25 2017-05-17 美光科技公司 利用专用元件实施有限状态机
US9858051B2 (en) * 2011-06-24 2018-01-02 Cavium, Inc. Regex compiler
JP5640910B2 (ja) * 2011-06-27 2014-12-17 富士通株式会社 照合装置および照合プログラム
US8948643B2 (en) * 2011-06-30 2015-02-03 Xerox Corporation Method and system for controlling multiple printers in a TISP or TIPP system for increased stability
BR112014006446B1 (pt) 2011-09-19 2021-09-21 Tata Consultancy Service Limited Plataforma de computação para desenvolvimento e implantação de aplicações e serviços de dados baseados em sensor
US8756189B2 (en) * 2011-10-31 2014-06-17 International Business Machines Corporation Rule generation for event processing system
US20130144814A1 (en) * 2011-12-05 2013-06-06 International Business Machines Corporation Conditional probability operator for event processing systems
US20130191809A1 (en) * 2012-01-25 2013-07-25 Microsoft Corporation Graphical representation of an order of operations
JP6033891B2 (ja) * 2012-02-15 2016-11-30 ザ マスワークス, インクThe Mathworks, Inc. 状態図の生成
US9141631B2 (en) * 2012-04-16 2015-09-22 International Business Machines Corporation Table boundary detection in data blocks for compression
JP6154894B2 (ja) 2012-06-08 2017-06-28 エアビクティ インコーポレイテッド 電子センサデータを評価して、自動車を遠隔的に識別し運転者の挙動を監視する方法
US20140013313A1 (en) * 2012-07-03 2014-01-09 Johan Eker Editor/Development Tool for Dataflow Programs
US9253054B2 (en) 2012-08-09 2016-02-02 Rockwell Automation Technologies, Inc. Remote industrial monitoring and analytics using a cloud infrastructure
US8893080B2 (en) * 2012-08-15 2014-11-18 Telefonaktiebolaget L M Ericsson (Publ) Parallelization of dataflow actors with local state
IN2015DN01932A (ja) 2012-09-28 2015-08-07 Ericsson Telefon Ab L M
US8914875B2 (en) 2012-10-26 2014-12-16 Facebook, Inc. Contextual device locking/unlocking
US9043264B2 (en) * 2012-12-14 2015-05-26 International Business Machines Corporation Scanning data streams in real-time against large pattern collections
CN103024059B (zh) 2012-12-19 2015-08-26 北京时代凌宇科技有限公司 一种物联网中间件系统
DE112014001381T5 (de) * 2013-03-15 2016-03-03 Fisher-Rosemount Systems, Inc. Emerson Process Management Datenmodellierungsstudio
CN103200249A (zh) 2013-03-26 2013-07-10 大连理工大学 物联网智能数据网关系统的实现方法
US9235395B2 (en) * 2013-05-30 2016-01-12 National Instruments Corporation Graphical development and deployment of parallel floating-point math functionality on a system with heterogeneous hardware components
KR20150049763A (ko) 2013-10-31 2015-05-08 대우조선해양 주식회사 부유식 복합 화력발전 플랜트용 폐수 처리시스템의 용존 고형물 처리 시스템
WO2015097427A1 (en) * 2013-12-23 2015-07-02 British Telecommunications Public Limited Company Improved pattern matching machine
US9843647B2 (en) 2014-02-25 2017-12-12 Here Global B.V. Method and apparatus for providing selection and prioritization of sensor data
US9806974B2 (en) 2014-04-23 2017-10-31 Cisco Technology, Inc. Efficient acquisition of sensor data in an automated manner
US9712645B2 (en) * 2014-06-26 2017-07-18 Oracle International Corporation Embedded event processing
US20160065306A1 (en) 2014-09-02 2016-03-03 Chin Sheng Henry Chong System and method for green communication for intelligent mobile internet of things
CN104361058A (zh) * 2014-10-31 2015-02-18 广东工业大学 一种面向海量数据流的哈希结构复杂事件检测方法
US10054450B2 (en) 2014-11-21 2018-08-21 Here Global B.V. Method and apparatus for determining trajectory paths on a transportation structure
US10599982B2 (en) 2015-02-23 2020-03-24 Machinesense, Llc Internet of things based determination of machine reliability and automated maintainenace, repair and operation (MRO) logs
US9495647B2 (en) 2015-02-24 2016-11-15 Sas Institute Inc. Acceleration of sparse support vector machine training through safe feature screening
US20170052767A1 (en) * 2015-08-20 2017-02-23 CITIUS SOFTWARE CORPORATION dba KBMax Visual rule language systems and methods for enterprise business software
US10318404B2 (en) * 2015-08-28 2019-06-11 Turck Holding, GmbH Web-based programming environment for embedded devices
US10756991B2 (en) * 2015-09-17 2020-08-25 Salesforce.Com, Inc. Simplified entity engagement automation
US10331495B2 (en) * 2016-02-05 2019-06-25 Sas Institute Inc. Generation of directed acyclic graphs from task routines
KR102092721B1 (ko) * 2016-03-23 2020-04-23 포그혼 시스템스 인코포레이티드 실시간 데이터플로우 프로그래밍에서 패턴 구동형 반응의 구성
US11204815B2 (en) 2017-05-09 2021-12-21 Microsoft Technology Licensing, Llc Creation of modular applications with corresponding twins in the cloud
US10310896B1 (en) * 2018-03-15 2019-06-04 Sas Institute Inc. Techniques for job flow processing
US11782410B2 (en) 2020-06-06 2023-10-10 Honeywell International Inc. Building management system with control logic distributed between a virtual controller and a smart edge controller
US11720074B2 (en) 2020-06-06 2023-08-08 Honeywell International Inc. Method and system for managing virtual controllers in a building management system
US11940786B2 (en) 2020-06-06 2024-03-26 Honeywell International Inc. Building management system and method with virtual controller and failsafe mode
EP3919991A3 (en) 2020-06-06 2022-02-16 Honeywell International Inc. Method and system for configuring a building management system
US20210389968A1 (en) 2020-06-15 2021-12-16 Honeywell International Inc. Edge controller for a facility
US11526449B2 (en) * 2020-08-31 2022-12-13 Advanced Micro Devices, Inc. Limited propagation of unnecessary memory updates
US11252209B1 (en) * 2021-07-13 2022-02-15 Audacious Inquiry, LLC Network architecture for parallel data stream analysis and modification

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030035582A1 (en) 2001-08-14 2003-02-20 Christian Linhart Dynamic scanner
JP2008524965A (ja) 2004-12-21 2008-07-10 ミスルトウ テクノロジーズ, インコーポレイテッド ネットワークインターフェイスおよびファイヤーウォールデバイス
US20080270342A1 (en) 2007-04-30 2008-10-30 Tarari, Inc. Hardware processing of regular expressions
WO2015071978A1 (ja) 2013-11-13 2015-05-21 富士通株式会社 イベント管理プログラム、イベント管理方法および分散システム
US20150161214A1 (en) 2013-12-05 2015-06-11 Oracle International Corporation Pattern matching across multiple input data streams

Also Published As

Publication number Publication date
US11422778B2 (en) 2022-08-23
AU2022202972B2 (en) 2024-01-04
JP2019512973A (ja) 2019-05-16
JP6896759B2 (ja) 2021-06-30
CN108885632B (zh) 2022-10-28
CN108885545A (zh) 2018-11-23
US20200249920A1 (en) 2020-08-06
KR102128571B1 (ko) 2020-06-30
AU2017238637A1 (en) 2018-10-04
US20210232369A1 (en) 2021-07-29
AU2017238638A2 (en) 2019-01-03
KR102092721B1 (ko) 2020-04-23
SA518400085B1 (ar) 2022-08-25
JP2019518264A (ja) 2019-06-27
US10977010B2 (en) 2021-04-13
CN108885580A (zh) 2018-11-23
CN115629829A (zh) 2023-01-20
US11561774B2 (en) 2023-01-24
CN108885580B (zh) 2022-05-13
CN108885545B (zh) 2022-02-01
AU2017238638A1 (en) 2018-10-04
US20230367559A1 (en) 2023-11-16
US20170277800A1 (en) 2017-09-28
KR20180122019A (ko) 2018-11-09
KR20180122017A (ko) 2018-11-09
CN115373977A (zh) 2022-11-22
US10628135B2 (en) 2020-04-21
KR20180122018A (ko) 2018-11-09
EP3433769A4 (en) 2019-12-18
AU2017238638B2 (en) 2022-02-03
CN108885632A (zh) 2018-11-23
US10572230B2 (en) 2020-02-25
JP2022064982A (ja) 2022-04-26
US10564941B2 (en) 2020-02-18
US20220137936A1 (en) 2022-05-05
US20190079740A1 (en) 2019-03-14
AU2022202972A1 (en) 2022-05-26
AU2017238633A1 (en) 2018-10-04
EP3433711A1 (en) 2019-01-30
US20200183660A1 (en) 2020-06-11
WO2017165708A1 (en) 2017-09-28
AU2017238637B2 (en) 2021-10-14
JP2019516167A (ja) 2019-06-13
US11226795B2 (en) 2022-01-18
US20230147358A1 (en) 2023-05-11
SA518400086B1 (ar) 2022-05-22
EP3433768A4 (en) 2019-12-04
WO2017165713A1 (en) 2017-09-28
EP3433711A4 (en) 2019-11-20
EP3433769A1 (en) 2019-01-30
AU2017238633B2 (en) 2022-04-21
WO2017165712A1 (en) 2017-09-28
US20170277560A1 (en) 2017-09-28
US20170277521A1 (en) 2017-09-28
EP3433768A1 (en) 2019-01-30
JP7326510B2 (ja) 2023-08-15
EP3433769B1 (en) 2024-05-08
JP7371141B2 (ja) 2023-10-30
KR102092722B1 (ko) 2020-04-23
US20200192640A1 (en) 2020-06-18
US10127022B2 (en) 2018-11-13
JP2022062060A (ja) 2022-04-19

Similar Documents

Publication Publication Date Title
JP7019589B2 (ja) リアルタイムデータフロープログラミングのための効率的な状態機械

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200319

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200319

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210310

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210730

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220202

R150 Certificate of patent or registration of utility model

Ref document number: 7019589

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350