JP2024516473A - ロボティックプロセスオートメーションのオペレーティングおよびソフトウェアシステムへの統合 - Google Patents

Abstract

本明細書で開示されるのは、メモリと、メモリに結合されたプロセッサとを含むコンピューティングシステムである。ロボティックプロセスをコンピューティングシステムのグラフィックユーザーインターフェースに統合するインターフェースエンジンのためのプロセッサ遂行可能命令を格納するメモリである。プロセッサは、インターフェースエンジンを遂行して、コンピューティングシステムにグラフィックユーザーインターフェースのメニューを介した入力を受信させ、入力に応答して表示するためのロボティックプロセスを自動的に決定させる。インターフェースエンジンはさらに、ロボティックプロセスに対応する選択可能なリンクを含むリストを生成し、メニューと関連付けてリストを表示する。

Description

（関連出願への相互参照）
本出願は、２０２１年３月２６日に出願された米国出願第１７／２１４，３４４号の利益を主張し、その内容は参照により本明細書に組み込まれる。

本明細書の開示は、ロボティックプロセスオートメーション（ＲＰＡ）の分野に関し、特に、ＲＰＡをオペレーティングおよびソフトウェアシステムに統合することに関する。

従来のオペレーティングおよびソフトウェアシステムは、アプリケーション、ファイル、ドキュメント、および最近のアクティビティを検索および選択するためのスタートメニューおよび検索バーを含み得る。しかし、現在のところ、このスタートメニューおよび検索バーには、オートメーションエクスペリエンスを提供する方法がなく、また、オートメーションエクスペリエンスに簡単かつ迅速にアクセスするためのオートメーションプロセスピニングを実装する方法もない。したがって、ユーザーにオートメーションエクスペリエンスを提供するために、スタートメニューおよび検索バーとオートメーションを統合する必要がある。

１または複数の実施形態によれば、コンピューティングシステムが提供される。コンピューティングシステムは、メモリ、およびメモリに結合されるプロセッサを含む。ロボティックプロセスをコンピューティングシステムのグラフィックユーザーインターフェースに統合するインターフェースエンジンのためのプロセッサ遂行可能命令を格納するメモリである。プロセッサは、インターフェースエンジンを遂行して、コンピューティングシステムにグラフィックユーザーインターフェースのメニューを介した入力を受信させ、入力に応答して表示するためのロボティックプロセスを自動的に決定させる。インターフェースエンジンはさらに、ロボティックプロセスに対応する選択可能なリンクを含むリストを生成し、メニューと関連付けてリストを表示する。

１または複数の実施形態によれば、上記のコンピューティングシステムの実施形態は、方法、装置、デバイス、システム、および／またはコンピュータプログラム製品として実装され得る。

より詳細な理解は、図中の類似の参照数字が類似の要素を示す、添付の図面との関連で例示的に与えられた以下の説明から得られ得る。

１または複数の実施形態によるロボティックプロセスオートメーション（ＲＰＡ）の開発、設計、動作、および／または遂行を示す環境を示す図である。

１または複数の実施形態によるコンピューティングシステムの説明図である。

１または複数の実施形態による、インターフェースエンジン内の１または複数のプロセッサによって遂行されるプロセスフローを例示するブロック図である。

１または複数の実施形態による、インターフェースエンジン内の１または複数のプロセッサによって遂行されるプロセスフローを例示するブロック図である。

１または複数の実施形態によるユーザーインターフェースを示す。

１または複数の実施形態によるユーザーインターフェースを示す。

（詳細な説明）
本明細書で開示されるのは、１または複数の実施形態によるインターフェースエンジンである。インターフェースエンジンは、ＲＰＡをオペレーティングおよびソフトウェアシステムに統合するソフトウェアおよび／またはハードウェアを含む。より詳細には、インターフェースエンジンは、ＲＰＡおよびネイティブＲＰＡ検索機能をスタートメニューおよび検索バーに統合し、任意のオペレーティングまたはソフトウェアシステムのグラフィックユーザーインターフェース（ＧＵＩ）レベルでのオートメーションエクスペリエンスを実現する。インターフェースエンジンは、ハードウェアおよびソフトウェア（例えば、ハードウェアに必然的に根付いたプロセッサ遂行可能コード）の組み合わせによって、コンピューティングシステムに実装され得る。インターフェースエンジンは、実装されると、コンピューティングシステムのＧＵＩに関して、それぞれのプログラミングとともに、入力データ、入力フィールド、メニュー、ロボティックプロセス、リスト、リンクなどを操作する、改善されたＲＰＡアクセス技術のための特定の構成およびツーリングロボティックプロセスオートメーション方法を提供し得る。

例示的な実施態様において、インターフェースエンジンによる構成およびツーリングロボティックプロセスオートメーション方法の実施形態は、グラフィックユーザーインターフェースのメニューを介して入力を受信することと、入力に応答して表示のためのロボティックプロセスを自動的に決定することとを含む。インターフェースエンジンはさらに、ロボティックプロセスに対応する選択可能なリンクを含むリストを生成し、メニューと関連付けてリストを表示する。このように、インターフェースエンジンの構成およびツーリングロボティックプロセスオートメーション方法は、コンピューティングシステムに関連するロボティックプロセス、インターフェースコンポーネント、データ、および構成の多段階のデータ操作を含む。

１または複数の実施形態による動作例として、インターフェースエンジンは、ＲＰＡアイコン、ショートカット、および／またはリストがスタートメニューまたはその検索バーに表示されるように、ＲＰＡをオペレーティングシステムのネイティブ検索機能と統合する。ＲＰＡアイコン、ショートカット、および／またはリストは、自動化への容易なアクセスのためのオートメーションエクスペリエンスまたはプロセスのピンと考えられ得る。ユーザーがスタートメニューを選択するときはいつでも、ユーザーはさらにピンを選択して、ＲＰＡに関するすべてのアプリケーション、ファイル、ドキュメント、および／または最近のアクティビティを見つけることができる。場合によっては、ピンは、スタートメニューから自動化されたプロセスを直接開始するオプションを提供する。同様に、ユーザーが検索バーで単語／用語／フレーズの検索を行うたびに、ポップアップフレームは、検索された単語に関連するＲＰＡに対応するフォルダ、ドキュメント、およびベストマッチを表示する。場合によっては、ポップアップフレームは１または複数のセクションを含み、そのうちの１つは、単語／用語／フレーズに関連する自動化されたプロセスのリストを提供する。

１または複数の技術的効果、利点、および利益によると、インターフェースエンジンは、本明細書で詳述する統合を介して、オートメーションエクスペリエンスに簡単かつ迅速にアクセスするためのオートメーションプロセスピニングを実装するとともに、ユーザーにオートメーションエクスペリエンスを提供する。

図１は、１または複数の実施形態によるロボティックプロセスオートメーション（ＲＰＡ）の開発、設計、動作、および／または遂行を示す環境１００を示す図である。環境１００は、１または複数のコンポーネントを含む設計およびデプロイメントコンピューティングプラットフォームであり得る。環境１００の１または複数のコンポーネントのそれぞれについて単一のブロックが示されているが、その単一のブロックは、そのコンポーネントの１または複数を代表するものであることに留意されたい。

示されるように、環境１００はインターフェースエンジン１１１をさらに含むデザイナ１１０を含み得る。インターフェースエンジン１１１は、１もしくは複数のドライバコンポーネント１２８および／または内部エンジン１２９を使用して、１もしくは複数のアクティビティ１２４を実行し、および／または１もしくは複数のユーザーインターフェース（ＵＩ）オートメーション１２６を提供する１または複数のロボット（例えば、ロボット１２２）を生成するスタジオコンポーネントまたはモジュール１２０を含み得る。また、ロボット１２２は、デザイナ１１０内の他のドライバコンポーネント１３１およびモジュール１３２と同様に係合し得る。さらに、環境１００は、コンダクタ１４０およびエグゼキュータ１７０を含み得、これらは、ロボット１２２がエグゼキュータ１７０のアンアテンディッドロボット１７４およびアテンディッドロボット１７８として環境１００に提供され得るように、ロボット１２２をダウンロード／取得／送信し得る。

デザイナ１１０、コンダクタ１４０、およびエグゼキュータ１７０は、ハードウェア、ソフトウェア、またはそれらの組み合わせを含む、コンピューティングデバイス、コンピューティング装置、および／またはコンピューティングシステムを代表する。デザイナ１１０、コンダクタ１４０、およびエグゼキュータ１７０、ならびにその上の任意のソフトウェア（例えば、インターフェースエンジン１１１）は、ユーザーまたはオペレータとインタラクションして、入力を受信し、出力を提供するように構成される。一例では、エグゼキュータ１７０は、モバイルコンピューティングおよび／もしくはモバイルデバイス環境であるか、またはそれらを実装し得る。

１または複数の実施形態によると、デザイナ１１０は、スタジオプラットフォーム、開発プラットフォーム、および／またはオンラインプラットフォームと呼ばれ得る。デザイナ１１０は、１または複数のエンジン（例えば、インターフェースエンジン１１１）、開発環境（例えば、スタジオ１２０）などを含み得、ロボット（例えば、１または複数のロボット１２２、アテンディッドロボット１７４、およびアテンディッドロボット１７８）が１または複数のワークフローを実行または自動化する（例えば、１もしくは複数のアクティビティ１２４および／または１もしくは複数のＵＩ自動化１２６を提供する）ためのコード、命令、コマンドなどを生成するように構成され得る。

インターフェースエンジン１１１は概して、ロボティックプロセスオートメーションを実装するソフトウェアおよび／またはハードウェアである。これに関連して、インターフェースエンジン１１１は、環境１００内でのインターフェースエンジン１１１のスケーラビリティおよびポータビリティを説明するために、点線のボックスとして詳述される。例えば、インターフェースエンジン１１１は、インターフェースエンジン１８１および１９１によって示されるように、環境１００全体で別々のインスタンスとして実装され得る。

さらに、１または複数の実施形態によると、インターフェースエンジン１１１は、スタジオ１２０内でコードを自動的に実装し、ロボット１２２を設計するフレームワーク／メカニズム（例えば、環境１００）の一部であり得る。また、インターフェースエンジン１１１は、開発者および／またはオーケストレータ（例えば、ユーザーまたはオペレータ）が、スタジオ１２０を介してなど、ロボット１２２をコード化、プログラム化、および／または設計することを可能にし得る。実施形態では、スタジオ１２０は、サードパーティアプリケーション、管理情報技術（ＩＴ）タスク、および／またはビジネスＩＴプロセスの自動化とともに、アプリケーション統合を提供し得る。

ロボット１２２（ならびにアンアテンディッドロボット１７４およびアテンディッドロボット１７８）は、１または複数のワークフロー（例えば、１もしくは複数のアクティビティ１２４によって部分的に表され、および／または１もしくは複数のＵＩオートメーション１２６を提供する）を実行および／または自動化し得るアプリケーション、アプレット、スクリプトなどであり得る。ワークフローには、タスクシーケンス、フローチャート、有限状態マシン（ＦＳＭ）、グローバル例外ハンドラ、透過的なＵＩなどが含まれ得るが、これらに限定されない。タスクシーケンスは、１または複数のアプリケーションまたはウィンドウ間の線形タスクを処理するための線形プロセスであり得る。フローチャートは、複雑なビジネスロジックを扱うように構成され得、複数の分岐ロジックオペレータを介して、より多様な方法で意思決定の統合およびアクティビティの接続を可能にする。ＦＳＭは、大規模なワークフロー用に構成され得る。ＦＳＭは、条件、遷移、アクティビティなどによってトリガされ得る有限数の状態をそれらの遂行中に使用し得る。グローバル例外ハンドラは、プロセスのデバッグプロセスなどのために、遂行エラーが発生したときのワークフローの挙動を判断するように構成され得る。透過的なＵＩは、基礎となるオペレーティングシステム（ＯＳ）またはハードウェアに対するソフトウェア動作であり得る。１または複数ワークフローによって達成され得る動作の非限定的な例としては、ログインの実行、フォームへの入力、情報技術（ＩＴ）管理などのうちの１または複数であり得る。ＵＩオートメーションのためのワークフローを実行するために、ロボット１２２は、アプリケーションのアクセスまたはアプリケーションの開発に関係なく、ボタン、チェックボックス、テキストフィールド、ラベルなどの特定の画面要素を一意に特定する必要があり得る。アプリケーションアクセスの例としては、ローカル、仮想、リモート、クラウド、Ｃｉｔｒｉｘ（登録商標）、ＶＭＷａｒｅ（登録商標）、ＶＮＣ（登録商標）、Ｗｉｎｄｏｗｓ（登録商標）リモートデスクトップ、仮想デスクトップインフラストラクチャ（ＶＤＩ）などがあり得る。アプリケーション開発の例としては、ｗｉｎ３２、Ｊａｖａ、Ｆｌａｓｈ、ハイパーテキストマークアップ言語（ＨＴＭＬ）、ＨＴＭＬ５、拡張可能なマークアップ言語（ＸＭＬ）、ＪａｖａＳｃｒｉｐｔ、Ｃ＃、Ｃ＋＋、Ｓｉｌｖｅｒｌｉｇｈｔなどであり得る。

１または複数の実施形態によると、開発時に、ロボット１２２は、デザイナ１１０（例えば、スタジオ１２０）で／により作製され、そこに格納され得る。さらに、展開時には、ロボット１２２は、コンダクタ１４０（例えばインターフェースエンジン１８１内）で／により、管理、制御、構成などされ得る。また、展開時に、ロボット１２２は、エグゼキュータ１７０内で遂行され得る。一例では、ユーザーまたはオペレータによって、ユーザー入力（例えば、ディスプレイ上の選択）がデザイナ１１０に提出され得る。デザイナ１１０がロボット１２２に提供し得る選択から、ロボット１２２は、（例えば、ユーザーまたはオペレータによって選択された）ビジュアルディスプレイの領域（複数可）の代表データを決定し得る。ＲＰＡの一環として、コンピュータビジョン（ＣＶ）動作および／または機械学習（ＭＬ）モデルに関連して、（例えば、四角、長方形、円、多角形、自由形などの）多次元の形状はＵＩロボットの開発およびランタイムに利用され得る。

１または複数の実施形態によると、ＵＩオートメーション１２６は、その中のドライバ１２８を使用してロボット１２２によって実行され得、インターフェースエンジン１１１は、モジュール１３０（例えば、ＣＶアクティビティモジュールまたはエンジン）を使用してアクティビティを実行し得る。ドライバコンポーネント１３２は、ＵＩの要素を取得するために、ロボット１２２によるＵＩオートメーションのために利用され得る。ドライバコンポーネント１３２は、限定されないが、ＯＳドライバ、ブラウザドライバ、仮想マシンドライバ、エンタープライズドライバなどを含み得る。特定の構成では、モジュール１３０は、ＵＩオートメーションのために使用されるドライバであり得る。さらに、ロボット１２２によるこれらのアクションのいずれも、クライアント上で（例えば、エグゼキュータ１７０のアンアテンディッドロボット１７４およびアテンディッドロボット１７８として）実装され得る。複数のロボット１２２は、デザイナ１１０、コンダクタ１４０、およびエグゼキュータ１７０上に格納されかつその中で検索可能であることができることにさらに留意されたい。

コンダクタ１４０は、メインフレーム、ウェブ、仮想マシン、リモートマシン、仮想デスクトップ、エンタープライズプラットフォーム、オンラインプラットフォーム、デスクトップアプリ（複数可）、ブラウザ、またはそのようなクライアント、アプリケーション、もしくはプログラムにおいてワークフローを遂行または監視するようにロボット１２２、１７４、および１７８またはエグゼキュータ１７０に指示または命令し得る。コンダクタ１４０は、コンピューティングプラットフォーム（例えば、環境１００）を自動化するために１または複数のロボット（例えば、ロボット１２２、１７４および１７８）を指示または命令するための中央または半中央点として機能し得る。

１または複数の実施形態によると、コンダクタ１４０は、プロビジョニング、展開、構成、キューイング、監視、ロギング、および／または相互接続性を提供するように構成され得る。プロビジョニングは、１または複数のロボット、エグゼキュータ１７０、およびコンダクタ１４０との間の接続または通信の作製および維持を含み得る。展開は、遂行のために割り当てられたロボットへのパッケージバージョンの配信を保証することを含み得る。構成は、ロボット環境およびプロセス構成の維持および配信を含み得る。キューイングは、キューおよびキュー項目の管理を提供することを含み得る。監視は、ロボットの特定データを追跡し、ユーザーの権限を維持することを含み得る。ロギングは、データベース（例えば、ＳＱＬデータベース）および／または別のストレージメカニズム（例えば、大規模なデータセットを格納し、迅速にクエリを実行する能力を提供するＥｌａｓｔｉｃＳｅａｒｃｈ（登録商標））へのログの保存およびインデックス作成を含み得る。コンダクタ１４０は、サードパーティのソリューションおよび／またはアプリケーションのための通信の集中点として操作することにより、相互接続性を提供し得る。

１または複数の実施形態によると、１または複数のロボットおよびエグゼキュータ１７０は、アンアテンディッドロボット１７４および／またはアテンディッドロボット１７８として構成され得る。アンアテンディッド動作の場合、アンアテンディッドロボット１７４による自動化は、サードパーティの入力または制御なしで実行され得る。アテンディッド動作の場合、アテンディッドロボット１７８による自動化は、第三者のコンポーネントから入力、コマンド、命令、ガイダンスなどを受信することによって実行され得る。アンアテンディッドロボット１７４および／またはアテンディッドロボット１７８は、モバイルコンピューティングまたはモバイルデバイス環境上で実行または遂行し得る。

１または複数の実施形態によると、１または複数のロボットおよびエグゼキュータ１７０は、デザイナ１１０で構築されたワークフローを実行する遂行エージェントとして構成され得る。ＵＩまたはソフトウェアの自動化のためのロボット（複数可）の商業的な例としては、ＵｉＰａｔｈ Ｒｏｂｏｔｓ（商標）がある。いくつかの実施形態では、１または複数のロボットおよびエグゼキュータ１７０は、Ｍｉｃｒｏｓｏｆｔ Ｗｉｎｄｏｗｓ（登録商標） Ｓｅｒｖｉｃｅ Ｃｏｎｔｒｏｌ Ｍａｎａｇｅｒ（ＳＣＭ）管理サービスをデフォルトでインストールし得る。その結果、そのようなロボットは、ローカルシステムアカウントの下でインタラクティブなＷｉｎｄｏｗｓ（登録商標）セッションを開くことができ、Ｗｉｎｄｏｗｓ（登録商標）サービスの権利を持ち得る。

１または複数の実施形態によると、１または複数のロボットおよびエグゼキュータ１７０は、ユーザーモードでインストールされ得る。例えば、１または複数のロボットは、所定のロボットが設置されているユーザーと同じ権利を持ち得る。この機能は、高密度（ＨＤ）環境などで最大のパフォーマンスで各マシンを完全に利用できるようにする高密度（ＨＤ）ロボットでも使用可能であり得る。

１または複数の実施形態によると、１または複数のロボットおよびエグゼキュータ１７０は、それぞれが特定の自動化タスクまたはアクティビティに特化したいくつかのコンポーネントに分割、分散などされ得る。ロボットコンポーネントには、ＳＣＭ管理ロボットサービス、ユーザーモードロボットサービス、エグゼキュータ、エージェント、コマンドラインなどが含まれ得る。ＳＣＭ管理ロボットサービスは、Ｗｉｎｄｏｗｓ（登録商標）セッションを管理または監視し得、コンダクタ１４０と遂行ホスト（すなわち、１または複数のロボットが遂行されるコンピューティングシステム）との間のプロキシとして動作し得る。これらのサービスは、１または複数のロボットおよびエグゼキュータ１７０のための資格情報を信頼し、管理し得る。ユーザーモードロボットサービスは、Ｗｉｎｄｏｗｓ（登録商標）セッションを管理および監視し、コンダクタ１４０と遂行ホストとの間のプロキシとして機能し得る。ユーザーモードロボットサービスは、ロボットの資格情報を任されて管理し得る。ＳＣＭ管理ロボットサービスがインストールされていない場合、Ｗｉｎｄｏｗｓ（登録商標）アプリケーションが自動的に起動され得る。一例では、エグゼキュータ１７０は、Ｗｉｎｄｏｗｓ（登録商標）セッションの下で与えられたジョブを遂行し得（例えば、それらが本明細書に記載されるワークフローを遂行し得る）、モニタ毎のドットパーインチ（ＤＰＩ）設定を認識し得る。エージェントは、システムトレイウィンドウに利用可能なジョブを表示するＷｉｎｄｏｗｓ（登録商標） Ｐｒｅｓｅｎｔａｔｉｏｎ Ｆｏｕｎｄａｔｉｏｎ（ＷＰＦ）アプリケーションであり得る。エージェントはサービスのクライアントであり得る。エージェントは、ジョブの開始または停止、設定の変更を依頼し得る。コマンドラインはサービスのクライアントとなり得る。コマンドラインは、ジョブの開始を要求し、その出力を待つことができるコンソールアプリケーションである。

１または複数の実施形態によると、１もしくは複数のロボットおよび／またはエグゼキュータ１７０のコンポーネントが分割される構成は、開発者、サポートユーザー、およびコンピューティングシステムが、各コンポーネントによる実行、特定、および追跡遂行をより容易に行うのに役立つ。この方法では、エグゼキュータ１７０とサービスに異なるファイアウォールルールを設定するなど、コンポーネントごとに特別な挙動を構成し得る。エグゼキュータ１７０は、いくつかの実施形態では、モニタごとのＤＰＩ設定を認識し得る。その結果、ワークフローは、ワークフローが作成されたコンピューティングシステムの構成に関係なく、いずれかのＤＰＩで遂行し得る。また、デザイナ１１０からのプロジェクトは、ブラウザのズームレベルに依存しないようにし得る。ＤＰＩを認識していないまたは意図的に認識していないとマークされているアプリケーションの場合、いくつかの実施形態ではＤＰＩを無効にし得る。

次に図２に目を向けると、１または複数の実施形態によるコンピューティングシステム２００が示される。コンピューティングシステム２００は、ハードウェア、ソフトウェア、またはそれらの組み合わせ（例えば、図１のインターフェースエンジン１１１をサポートするハードウェア）を含む、任意のコンピューティングデバイス、コンピューティング装置、および／またはコンピューティング環境の代表であり得る。さらに、開示されたコンピューティングシステム２００の実施形態は、任意の可能な技術的詳細レベルの統合の装置、システム、方法、および／またはコンピュータプログラム製品を含み得る。

コンピューティングシステム２００は、１または複数の中央処理装置（ＣＰＵ（複数可））を有するデバイス２０５（例えば、図１のデザイナ１１０、コンダクタ１４０、およびエグゼキュータ１７０）を有し、これらは、集合的または一般的にプロセッサ２１０と呼ばれる。プロセッサ２１０は、処理回路とも呼ばれ、システムバス２１５を介して、システムメモリ２２０および様々な他のコンポーネントに結合される。コンピューティングシステム２００および／またはデバイス２０５は、オンラインプラットフォーム、サーバー、組み込みコンピューティングシステム、パーソナルコンピュータ、コンソール、パーソナルデジタルアシスタント（ＰＤＡ）、携帯電話、タブレットコンピューティングデバイス、量子コンピューティングデバイス、クラウドコンピューティングデバイス、モバイルデバイス、スマートフォン、固定型モバイルデバイス、スマートディスプレイ、ウェアラブルコンピュータなどとして実行するように適合または構成され得る。

プロセッサ２１０は、中央処理ユニット（ＣＰＵ）、特定用途集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、グラフィックス処理ユニット（ＧＰＵ）、コントローラ、マルチコア処理ユニット、３次元プロセッサ、量子コンピューティングデバイス、またはそれらの任意の組み合わせを含む、任意のタイプの一般的または特定用途プロセッサであり得る。プロセッサ２１０はまた、複数の処理コアを有してもよく、コアの少なくとも一部は、特定の機能を実行するように構成され得る。また、マルチパラレル処理が構成され得る。さらに、少なくともプロセッサ２１０は、生物学的ニューロンを模倣する処理要素を含むニューロモーフィック回路であり得る。

バス２１５（他の通信メカニズム）は、プロセッサ２１０、システムメモリ２２０、ならびにアダプタ２２５、２２６、および２２７などの様々な他のコンポーネントに情報またはデータを通信するために構成される。

システムメモリ２２０は、（非一時的な）コンピュータ読み取り可能なストレージ媒体の一例であり、ソフトウェア２３０は、図３および図４を参照して本明細書で説明したような、デバイス２０５を動作させるためにプロセッサ２１０が遂行するためのソフトウェアコンポーネント、モジュール、エンジン、命令などとして格納され得る。システムメモリ２２０は、読み出し専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、内部または外部フラッシュメモリ、エンベッディッドスタティック－ＲＡＭ（ＳＲＡＭ：Ｅｍｂｅｄｄｅｄ Ｓｔａｔｉｃ－ＲＡＭ）、ソリッドステートメモリ、キャッシュ、磁気ディスクもしくは光ディスクなどの静的ストレージ、または任意の他のタイプの揮発性または不揮発性メモリの任意の組み合わせを含み得る。非一時的な読み取り可能なストレージ媒体は、プロセッサ２１０によってアクセス可能な任意の媒体であってもよく、揮発性媒体、不揮発性媒体などを含み得る。例えば、ＲＯＭは、システムバス２１５に結合され、デバイス２０５の特定の基本機能を制御するＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ／Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）を含み得、ＲＡＭは、プロセッサ２１０が使用するためにシステムバス２１５に結合された読み書き可能なメモリである。非一時的なコンピュータ読み取り可能なストレージ媒体は、着脱可能、着脱不可能などの任意の媒体を含み得る。

図１に関連して、図２のソフトウェア２３０は、メモリ２２０およびプロセッサ２１０がロボット１２２を論理的に設計／構成／提供することができるように、インターフェースエンジン１１１およびその中のコンポーネントの代表であり得、ロボット１２２は、さらに１もしくは複数のアクティビティ１２４を実行し、および／または１もしくは複数のドライバコンポーネント１２８および／または内部エンジン１２９を使用して１または複数のＵＩオートメーション１２６を提供する。図２のソフトウェア２３０はまた、コンピューティングシステム２００のためのデバイス２０５用のＯＳの代表であり得る。

１または複数の実施形態によると、ソフトウェア２３０は、ハードウェア、ソフトウェア、またはハイブリッド実装に構成され得る。ソフトウェア２３０は、互いに動作可能な通信を行い、情報または指示を渡すためのモジュールで構成され得る。ソフトウェア２３０は、コンピューティングシステム２００が追加の機能を含むことができるように、アプリケーション固有の処理またはその派生物を実行するためのカスタムモジュールをさらに含み得る。例えば、１または複数の実施形態によると、ソフトウェア２３０は、動作２３１、２３２、２３３、および２３４を可能にするためにプロセッサ２１０によって遂行または処理される情報、命令、コマンド、またはデータを格納するように構成され得る。

例えば、図２のソフトウェア２３０として実装された図１のインターフェースエンジン１１１は、コンピューティングシステム２００が、メニューの入力フィールドを介して１または複数の入力を受信し（２３１）、１または複数の入力に関連する１または複数のロボティックプロセスを決定し（２３２）、そして１または複数のロボティックプロセスに対応する１または複数の選択可能なリンクを含むリスト（例えば、メニューに関連して表示されるリスト）を表示する（２３３）ように、コンピューティングシステム２００に特定の構成およびツーリングロボティックプロセスオートメーション方法を提供し得る。１または複数の選択可能なリンクのいずれかの選択は、１または複数のロボティックプロセスの対応する自動化されたプロセスを開始する（２３４）ことができることに留意されたい。

さらに、ソフトウェア２３０のモジュールは、カスタムの超大規模集積（ＶＬＳＩ）回路またはゲートアレイ、ロジックチップ、トランジスタなどの既製の半導体、またはその他のディスクリートコンポーネントを含むハードウェア回路として、プログラム可能なハードウェアデバイス（例えば、フィールドプログラマブルゲートアレイ、プログラマブルアレイロジック、プログラマブルロジックデバイス）、グラフィックスプロセッシングユニットなどに実装され得る。ソフトウェア２０３のモジュールは、様々なタイプのプロセッサにより遂行されるためのソフトウェアに少なくとも部分的に実装され得る。１または複数の実施形態によると、特定された遂行可能コードのユニットは、例えば、オブジェクト、プロシージャ、ルーチン、サブルーチン、または関数として編成されていてもよいコンピュータ命令の１または複数の物理的または論理的なブロックを含み得る。特定されたモジュールの遂行可能は、論理的に結合されるとモジュールを構成するように、異なる位置に共に配置されたり、格納されたりする。遂行可能なコードのモジュールは、単一の命令、１または複数のデータ構造、１または複数のデータセット、複数の命令などであり、複数の異なるコードセグメント、異なるプログラム間、複数のメモリデバイス間などに分散され得る。動作データまたは機能データは、ソフトウェア２３０のモジュール内で特定され、ここで示されてもよく、適切な形態で具現化され、任意の適切なタイプのデータ構造内で組織化され得る。

図２のアダプタ２２５、２２６、および２２７に関して、デバイス２０５は特に、入力／出力（Ｉ／Ｏ）アダプタ２２５、デバイスアダプタ２２６、および通信アダプタ２２７を含み得る。１または複数の実施形態によると、Ｉ／Ｏアダプタ２２５は、周波数分割多元接続（ＦＤＭＡ）、シングルキャリアＦＤＭＡ（ＳＣ－ＦＤＭＡ）、時分割多元接続（ＴＤＭＡ）、符号分割多元接続（ＣＤＭＡ）、直交周波数分割多重方式（ＯＦＤＭ）、直交周波数分割多元接続（ＯＦＤＭＡ）、移動体用グローバルシステム（ＧＳＭ：Ｇｌｏｂａｌ Ｓｙｓｔｅｍ ｆｏｒ Ｍｏｂｉｌｅ）通信、汎用パケット無線サービス（ＧＰＲＳ：Ｇｅｎｅｒａｌ Ｐａｃｋｅｔ Ｒａｄｉｏ Ｓｅｒｖｉｃｅ）、ユニバーサル移動体通信システム（ＵＭＴＳ：Ｕｎｉｖｅｒｓａｌ Ｍｏｂｉｌｅ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｓｙｓｔｅｍ）、ｃｄｍａ２０００、広帯域ＣＤＭＡ（Ｗ－ＣＤＭＡ：Ｗｉｄｅｂａｎｄ ＣＤＭＡ）、高速ダウンリンクパケットアクセス（ＨＳＤＰＡ：Ｈｉｇｈ－Ｓｐｅｅｄ Ｄｏｗｎｌｉｎｋ Ｐａｃｋｅｔ Ａｃｃｅｓｓ）、高速アップリンクパケットアクセス（ＨＳＵＰＡ：Ｈｉｇｈ－Ｓｐｅｅｄ Ｕｐｌｉｎｋ Ｐａｃｋｅｔ Ａｃｃｅｓｓ）、高速パケットアクセス（ＨＳＰＡ：Ｈｉｇｈ－Ｓｐｅｅｄ Ｐａｃｋｅｔ Ａｃｃｅｓｓ）、ロングタームエボリューション（ＬＴＥ：Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、ＬＴＥアドバンスト（ＬＴＥ－Ａ：ＬＴＥ Ａｄｖａｎｃｅｄ）、８０２．１１ｘ、Ｗｉ－Ｆｉ、Ｚｉｇｂｅｅ、超広帯域無線（ＵＷＢ：Ｕｌｔｒａ－ＷｉｄｅＢａｎｄ）、８０２．１６ｘ、８０２．１５、Ｈｏｍｅ Ｎｏｄｅ－Ｂ（ＨｎＢ）、Ｂｌｕｅｔｏｏｔｈ、無線ＩＤタグ（ＲＦＩＤ：Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）、近距離無線通信（ＮＦＣ：Ｎｅａｒ－Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、第５世代（５Ｇ）、Ｎｅｗ Ｒａｄｉｏ（ＮＲ）、または、通信用のいずれかの他の無線もしくは有線のデバイス／トランシーバに照らして、スモールコンピュータシステムインターフェース（ＳＣＳＩ：ｓｍａｌｌ ｃｏｍｐｕｔｅｒ ｓｙｓｔｅｍ ｉｎｔｅｒｆａｃｅ）として構成され得る。デバイスアダプタ２２６は、ディスプレイ２４１、キーボード２４２、制御デバイス２４３など（例えば、カメラ、スピーカなど）の入／出力デバイスをシステムバス２１５に相互接続する。通信アダプタ２２６は、システムバス２１５を、外部ネットワークであり得るネットワーク２５０と相互接続し、デバイス２０５が他のそのようなデバイス（例えば、ローカルコンピューティングデバイス２５５、さらにはネットワーク２６０を介したリモートコンピューティングシステム２５６など）とデータを通信できるようにする。一実施形態では、アダプタ２２５、２２６、および２２７は、中間バスブリッジを介してシステムバス２１５に接続される１または複数のＩ／Ｏバスに接続され得る。ハードディスクコントローラ、ネットワークアダプタ、およびグラフィックアダプタなどの周辺機器を接続するのに適したＩ／Ｏバスは、典型的には、ペリフェラルコンポーネントインターコネクト（ＰＣＩ：Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ）などの共通プロトコルを含む。

ディスプレイ２４１の例は、限定されないが、プラズマ、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）、電界放出ディスプレイ（ＦＥＤ）、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、フレキシブルＯＬＥＤディスプレイ、フレキシブル基板ディスプレイ、投影ディスプレイ、４Ｋディスプレイ、高解像度（ＨＤ）ディスプレイ、Ｒｅｔｉｎａ（著作権）ディスプレイ、面内スイッチング（ＩＰＳ）ディスプレイなどを含み得る。ディスプレイ２４１は、入力／出力（Ｉ／Ｏ）のために、当業者に理解されるように、抵抗性、静電容量性、表面音響波（ＳＡＷ）静電容量性、赤外線、光学イメージング、分散信号技術、音響パルス認識、フラストレート全内部反射などを使用して、タッチ、３次元（３Ｄ）タッチ、マルチ入力タッチ、またはマルチタッチディスプレイとして構成され得る。

キーボード２４２と、コンピュータマウス、タッチパッド、タッチスクリーン、キーパッドなどの制御デバイス２４３とは、デバイス２０５への入力のために、システムバス２１５にさらに結合され得る。さらに、１または複数の入力は、それと通信している別のコンピューティングシステム（例えば、ローカルコンピューティングデバイス２５５および／またはリモートコンピューティングシステム２５６）を介して、リモートでコンピューティングシステム２００に提供されてもよく、またはデバイス２０５が自律的に動作し得る。

１または複数の実施形態によると、ソフトウェア２３０に関するデバイス２０５の機能はまた、インターフェースエンジン２９０の別個のインスタンスによって表されるように、ローカルコンピューティングデバイス２５５および／またはリモートコンピューティングシステム２５６に実装され得る。

次に、図３に目を向けると、１または複数の実施形態によるプロセスフロー３００を例示するブロック図である。より詳細には、プロセスフロー３００は、ＧＵＩに関して、それぞれのプログラミングとともに、入力データ、入力フィールド、メニュー、ロボティックプロセス、リスト、リンクなどを操作する、ＲＰＡアクセス技術を改善するための特定の構成およびツーリングロボティックプロセスオートメーション方法の実装例である。プロセスフロー３００は、１または複数のプロセッサ（例えば、プロセッサ２１０）によって遂行される、図１のインターフェースエンジン１１１および／または図２のソフトウェア２３０の実装例とみなされ得る。説明を容易にするために、プロセスフロー３００は、図１のインターフェースエンジン１１１に関して説明される。

プロセスフロー３００は、ブロック３２０で始まり、ここで、インターフェースエンジン１１１が１または複数の入力を受信する。１または複数の実施形態によると、１または複数の入力は、メニューのスタートメニューボタンをホバーもしくはクリックすることによって、またはメニューの検索バーに検索用語を入力することによってなど、グラフィックユーザーインターフェースのメニューを介して受信され得る。１または複数の入力は、任意の値（初期化された変数またはリテラルなど）、任意の関数、任意のユーザーインタラクション（例えば、マウスクリック、カーソルアクション、ホバーアクション）、任意の単語、任意の用語、任意のフレーズ、および／または選択を識別するもしくは条件／パラメータ／設定を定義する任意の命令を含み得る。

例では、インターフェースエンジン１１１は、ＯＳと連携してＧＵＩを提供する。ＧＵＩは、１または複数の入力フィールドを有するメニューを含む。メニューは、キーボード２４２または他の制御デバイス２４３によってナビゲートされ得る、ＧＵＩを通じてユーザーに提示されるオプションまたはコマンドのリストであり得る。実施形態では、メニューはＯＳのスタートメニューを含み、１または複数の入力フィールドはスタートメニューの検索バーを含む。さらに、１または複数の入力は、ＧＵＩ内のメニューの１または複数の入力フィールドを介してインターフェースエンジン１１１に提供される。

１または複数の入力フィールドは、ユーザーがＧＵＩのメニューとインタラクションすることを可能にするメカニズムまたはＵＩ要素である。１または複数の入力フィールドの例は、キーボード２４２を使用して１または複数の入力を提供するためのテキストフィールドを含む。他の例は、オプションボタン、ラジオボタン、スイッチボタン、または同様のグラフィカルコントロール要素を含む。

ブロック３４０において、インターフェースエンジン１１１は、１または複数の入力に応答して、表示のための１または複数のロボティックプロセスを自動的に決定する。１または複数のロボティックプロセスは、本明細書で説明するように、ロボット１２２の例である。１または複数のロボティックプロセスを決定するために、インターフェースエンジン１１１は、１または複数の入力に基づいて（例えば、環境１００内で）検索動作を遂行する。検索動作は、ＯＳのネイティブ検索機能であり得る。例えば、デバイス２０５を操作するユーザーがソフトウェア２３０に入力（例えば、１または複数の入力）を提出すると、ソフトウェア２３０は、それに関連する値および／またはインデックスに基づいて、システムメモリ２２０内の１または複数のロボティックプロセスの検索を実行する。一致が発見されると、バッファは、１または複数のロボティックプロセスへのポインタのポピュレーション（ｐｏｐｕｌａｔｅｄ）が行われ得る。

ブロック３６０において、インターフェースエンジン１１１は、１または複数のロボティックプロセスに対応する１または複数の選択可能なリンクを含むリストを生成する。リストは、１または複数のロボティックプロセスへの迅速なアクセスを提供する。ブロック３８０において、インターフェースエンジン１１１は、メニューと関連してリストを表示する。リストは、メニューに関連してポップアップフレームによって表示され得る。１または複数の実施形態によると、ポップアップフレームは、特定の選択なしに、自動化によって新しいウィンドウが開いてＧＵＩをオーバーレイするポップアップウィンドウタイプであり得る。ポップアップウィンドウタイプは、メニューとは別個のものであり得る。１または複数の実施形態によると、ポップアップフレームは、１もしくは複数のセクションまたはサブセクションを含み得、そのうちの１つはリストを提供する。

１または複数の実施形態によると、リストは、セクションまたはサブセクションのようなメニューに表示され得る。メニューのサブセクションは、メニュー自体の中のポップアップフレームの反復とし得る。さらに、１または複数の実施形態によると、ポップアップフレームはまた、リストがメニュー内またはメニューの上に自動的に現れるポップアップメニュー（例えば、スタートメニュー、検索バーなどから伸びる）タイプであり得る。

１または複数の実施形態によると、リストは、（例えば、ポインタと関連付けられることを介して）１または複数のロボティックプロセスに対応する１または複数の選択可能なリンクを含み得る。すなわち、各選択可能なリンクは、特定のロボティックプロセスへの参照であり、それは、クリック、タップなどによってたどることができる。１または複数の選択可能なリンクの例は、ＲＰＡアイコン、ショートカット、および／またはハイパーリンクされたテキストを含むが、これらに限定されない。１または複数の選択可能なリンクのいずれかの選択は、１または複数のロボティックプロセスの対応する自動化されたプロセスを開始することに留意されたい。場合によっては、リストの表示は、自動化への容易なアクセスのためのオートメーションエクスペリエンスまたはプロセスのピンと考えられ得る。

次に図４～図６に目を向けると、インターフェースエンジン１１１の動作が、１または複数の実施形態に従って説明される。図４は、１または複数の実施形態によるプロセスフロー４００を例示するブロック図を示す。より詳細には、プロセスフロー４００は、インターフェースエンジン１１１による特定構成およびツーリングロボティックプロセスオートメーション方法の実装例である。

プロセスフロー４００は、オペレーティングシステムのＧＵＩ（例えば、検索バーおよび／またはスタートメニュー）への統合ＲＰＡに関連する。プロセスフロー４００は、ブロック４０５で始まり、ここで、インターフェースエンジン１１１は、オペレーティングシステムとの初期バックグラウンド統合を遂行する。この点に関して、インターフェースエンジン１１１は、検索バーおよび／またはスタートメニューを１または複数のロボット１２２に自動的に結合させる。次に、インターフェースエンジン１１１は、オペレーティングシステム内のユーザーアクティビティを積極的に監視し得る（ブロック４１０）。ユーザーアクティビティに関して、インターフェースエンジンは、少なくとも１つのＲＰＡアイコンまたはショートカットがユーザーによるアクセスを容易にするためにＧＵＩに自動的にピン留めされる、オートメーションプロセスピニングを遂行し得る。

したがって、ブロック４１５において、インターフェースエンジン１１１は、検索バーへのマウスによるクリックを検出する。ブロック４２５において、インターフェースエンジン１１１は、検索バーを通して入力を受信する。入力は、自動化されたプロセス（例えば、１または複数のロボット１２２）を検索するための単語の入力であり得る。

ブロック４５０で、インターフェースエンジン１１１は、その単語に関する自動判定（例えば、検索動作）を遂行する。例えば、オペレーティングシステムの検索バーで単語検索が受信されるたびに、検索された単語に関連するフォルダ、ドキュメント、およびベストＲＰＡマッチを表示するポップアップフレームを表示し得る。ポップアップウィンドウ上の他のセクションに加えて、サブセクションを構成して、単語に関連する自動化されたプロセス（例えば、１または複数のロボット１２２）のリストを表示することができる。ブロック４７０では、インターフェースエンジン１１１は、ブロック４５０の決定に関してポップアップフレームを提示する。ポップアップフレームは、少なくとも、１または複数のロボティックプロセスへの迅速なアクセスを提供するためにリストを表示する。

図５に目を向けると、１または複数の実施形態によるユーザーインターフェース５００が示される。ユーザーインターフェース５００は、その中に検索用語５１１を有する検索バー５１０を含むスタートメニュー５０１を含む。ユーザーインターフェース５００は、リスト５２５、カテゴリメニュー５３０、およびその中にオプションメニュー５４０を有するプロセスパネル５３５を含むポップアップウィンドウ５２０を含む。図示のように、１または複数の実施形態によると、リスト５２５は、スタートメニュー５０１とは別のポップアップウィンドウ５２０によって表示され得る。

動作において、インターフェース５００は、ユーザーが、検索用語５１１（例えば、プロセス（ｐｒｏｃｅｓｓＡ））によって、特定の自動化されたプロセス（例えば、ロボティックプロセスＡ）にアクセスするために検索することを示す。検索用語５１１が検索バー５１０に入力されると、ポップアップウィンドウ５２０が提供されて、リスト５２５およびプロセスパネル５３５（リスト５２５からのベストマッチを提示する）を、ベストマッチの何回の実行が発生したかに関する情報、ベストマッチの最後の実行、およびプロセスの特定の属性を示す他のメタデータ（例えば、ベストマッチを誰が実行したか）とともに表示する。カテゴリメニュー５３０は、その中のカテゴリの１つを選択することによって、関連するフォルダ、ドキュメント、および自動化されたプロセスを視覚化するメカニズムを提供する（例えば、図示のように「すべて（Ａｌｌ）」カテゴリが選択される）。１または複数の実施形態によると、ポップアップウィンドウ５２０は、インターフェースエンジン１１１が他のシステム、環境、および／またはデータベース（例えば、ロボットトレイ、オーケストレータソフトウェア、オートメーションハブ、ＲＰＡマーケットプレイス、これらはウェブと並行して別の他のパートナーシステムと共に）とインタラクションした結果を示す「ウェブ検索（ｓｅａｒｃｈ ｔｈｅ ｗｅｂ）」オプションも含み得る。オプションメニュー５４０は、実行ピン、ショートカットの作成、プロパティの編集、および共有など、提示された自動化されたプロセスとインタラクションする少なくとも１つのメカニズムを提供する（例えば、「実行（ｒｕｎ）」オプションは、ユーザーがスタートメニュー５０１からロボティックプロセスＡを直接開始することを可能にする）。１または複数の技術的効果、利点、および利益によると、インターフェース５００は、ＲＰＡをスタートメニュー５０１に統合（例えば、より具体的には、リスト５２５のプロセスをミラーリング）し、ユーザーに自動化への容易なアクセスを提供する。

ブロック４７５で、インターフェースエンジン１１１は、リストから自動化されたプロセスの選択を示すポップアップフレーム内の入力を受信する。例えば、ユーザーは、オプションパネル５４０内のロボティックプロセスＡのアイコンをクリックするか、またはポップアップウィンドウ５２０内のサブセクションの１つでリスト５２５からクリックできる。

ブロック４８０において、インターフェースエンジン１１１は、ブロック４７５の入力に基づいて自動化されたプロセス（例えば、ロボティックプロセスＡ）を開始する。一例では、ロボティックプロセスＡは、アプリケーションを自動的に開き、アプリケーションのＧＵＩ上でユーザーアクション（例えば、ユーザーアクションを模倣する）を実行するために自動的に遂行する。

ブロック４９０において、インターフェースエンジン１１１は、オートメーションプロセスピニングを遂行する。オートメーションプロセスピニングは、一般に、自動化されたプロセスを開始／実行することに応答して、自動化されたプロセス（例えば、ロボティックプロセスＡ）に対応するアイコンを固定する。１または複数の実施形態によると、インターフェースエンジン１１１は、自動化されたプロセスが開始された回数をしきい値回数に対して追跡し得る。これに関して、インターフェースエンジンは使用頻度を決定し、そして自動化されたプロセスが十分な頻度で（例えば、しきい値に基づいて）遂行されると、自動化しているピンニング（ｐｉｎｎｉｎｇ）が発生する。一例では、しきい値は、１～５０の範囲から選択される任意の整数、例えば、５とすることができる。

ブロック４９５では、インターフェースエンジン１１１は、ＧＵＩ内のオートメーションプロセスピニングに基づくピンを提供する。図６に目を向けると、１または複数の実施形態によるユーザーインターフェース６００が示される。ユーザーインターフェース６００は、リストがポップアップメニュータイプ内に自動的に表示されるポップアップメニュータイプを含み得る（例えば、第１のリスト６３０）。したがって、示されるように、インターフェース６００は、スタートボタン６１０を有するスタートメニュー６０１と、第１のリスト６３０およびサブリスト６５０を含むサブセクションを有するポップアップメニュータイプとを含む。第１のリスト６３０は、自動化されたプロセスおよびアプリケーションを可視化する。

動作中、インターフェース６００は、ロボティックプロセスＡ（ｒｏｂｏｔｉｃｐｒｏｃｅｓｓＡ）が自動的に（使用クリックに応答して）開始ボタン６１０を選択することを示す。この選択により、ポップアップメニュータイプが表示される。次いで、ロボティックプロセスＡは、「ＡｐｐＳｕｉｔｅ１」を自動的に選択して、サブリスト６５０を表示させる。次に、ロボティックプロセスＡは、サブリスト６５０のＲＰＡタイルを自動的に選択し、「ＡｐｐＳｕｉｔｅ１」内の自動化されたプロセスを開始および遂行する。

１または複数の実施形態によると、アプリケーションのメニューおよび検索バーがＲＰＡピン（例えば、図３のブロック３９０および３９５によって生成される）を示すように、インターフェースエンジン１１１による自動化統合は、任意のアプリケーションに拡張され得る。さらに、１または複数の実施形態によると、インターフェースエンジン１１１は、自動化可能なタスク（例えば、オペレーティングシステムまたはアプリケーション内のユーザーによるアクション）を特定／記録するタスクマイナー（ｔａｓｋ ｍｉｎｅｒ）を含み得る。一例として、タスクマイナーは、オペレーティングシステムまたはアプリケーションのＧＵＩとのすべてのユーザーインタラクションを記録し、反復タスクを特定することができる。タスクマイナーは、次に、特定された反復タスクを自動化することを、ポップアップフレームを介してユーザーに推奨し得る。別の例では、タスクマイナーは、ユーザーがいつ、どこで記録を開始／終了する（例えば、月末締め）かを定義できるカスタマイズされたタスク記録とすることができる。

１または複数の技術的効果、利点、およびメリットによれば、インターフェースエンジン１１１は、ＲＰＡのための容易なアクセス、スタートメニューおよび／または検索バーからのユーザーへのオートメーションショートカット、ならびにカスタマイズ可能なタスク記録を提供する。

図中のフローチャートおよびブロック図は、本発明の様々な実施形態による、装置、システム、方法、およびコンピュータプログラム製品の可能な実装のアーキテクチャ、機能性、および動作を示す。これに関連して、フローチャートまたはブロック図の各ブロックは、指定された論理機能（複数可）を実装するための１または複数の遂行可能な命令を含むモジュール、セグメント、または命令の一部を表し得る。いくつかの代替実装では、ブロックに記載されている機能は、図面のフローチャートおよびブロック図に記載されている順序とは異なる場合がある。例えば、連続して表示されている２つのブロックは、関係する機能に応じて、実際には実質的に同時に遂行され得、またはブロックが逆の順序で遂行され得る。また、ブロック図および／またはフローチャート図の各ブロック、ならびにブロック図および／またはフローチャート図のブロックの組み合わせは、指定された機能もしくは活動を実行するか、または特別な目的のハードウェアおよびコンピュータ命令の組み合わせを実行する特別な目的のハードウェアに基づくシステムによって実装され得ることに留意されたい。

特徴および要素は、特定の組み合わせで上に記載されているが、各特徴または要素は、単独で、または他の特徴および要素と任意の組み合わせで使用することができることが、当業者には理解されるであろう。例えば、本明細書に記載されている方法およびプロセスのいずれかでは、記載されているステップは任意の順序で順不同で実行され得、明示的に記載または表示されていないサブステップが実行され得る。「ＡまたはＢ」を参照して使用する場合は、Ａ、Ｂ、またはＡおよびＢを含む場合があり、これはより長い羅列にも同様に及び得る。Ｘ／Ｙという表記を使用する場合、当該表記は、ＸまたはＹを含み得る。あるいは、Ｘ／Ｙという表記を使用する場合、当該表記は、ＸおよびＹを含み得る。Ｘ／Ｙの表記は、上記と同じ論理により、より長い羅列にも同様に当てはまり得る。また、「結合されている」または「動作的に結合されている」とは、オブジェクトが連結されていることを意味してもよいが、連結されているオブジェクトの間にゼロまたはそれ以上の中間オブジェクトを有してもよい。また、開示された特徴／要素の任意の組み合わせが、１または複数の実施形態で使用されてもよい。

さらに、本明細書に記載された方法およびプロセスは、コンピュータまたはプロセッサによる遂行のためにコンピュータ読み取り可能な媒体に組み込まれたコンピュータプログラム、ソフトウェア、および／またはファームウェア（例えば、コンピュータプログラム製品）で実装され得る。すなわち、コンピュータプログラム製品は、コントローラ、プロセッサなどに本発明の態様を実行させるためのコンピュータ読み取り可能プログラム命令をその上に有するコンピュータ読み取り可能なストレージ媒体（または複数の媒体）を含み得る。

コンピュータ読み取り可能なストレージ媒体は、コンピュータ読み取り可能プログラム命令を保持および格納し得る有形のデバイスであり得る。コンピュータ読み取り可能なストレージ媒体は、例えば、限定されないが、電子ストレージデバイス、磁気ストレージデバイス、光ストレージデバイス、電磁ストレージデバイス、半導体ストレージデバイス、または前述の任意の適切な組み合わせであり得る。本明細書で使用されるコンピュータ読み取り可能なストレージ媒体は、それ自体が一時的な信号であると解釈されるものではなく、例えば、電波またはその他の自由に伝播する電磁波、導波管またはその他の伝送媒体を伝播する電磁波（例えば、光ファイバケーブルを通過する光パルス）、または電線を介して伝送される電気信号である。コンピュータ読み取り可能なストレージ媒体の例は、限定されないが、レジスタ、キャッシュメモリ、半導体メモリデバイス、内蔵ハードディスクおよびリムーバブルディスクなどの磁気媒体、光磁気媒体、コンパクトディスク（ＣＤ）およびデジタルバーサタイルディスク（ＤＶＤ）などの光媒体、ランダムアクセスメモリ（ＲＡＭ）、リードオンリーメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリーメモリ（ＥＰＲＯＭまたはフラッシュメモリ）、スタティックランダムアクセスメモリ（ＳＲＡＭ）、ならびにメモリースティックを含む。

本明細書に記載されたコンピュータ読み取り可能なプログラム命令は、例えばネットワーク通信などの接続を介して、装置、デバイス、コンピュータ、または外部ストレージからそれぞれのコントローラ、プロセッサなどに通信および／またはダウンロードされ得る。本発明の動作を実行するためのコンピュータ読み取り可能なプログラム命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ：ｉｎｓｔｒｕｃｔｉｏｎ－ｓｅｔ－ａｒｃｈｉｔｅｃｔｕｒｅ）命令、機械命令、機械依存命令、マイクロコード、ファームウェア命令、状態設定データ、集積回路のための構成データ、または、Ｓｍａｌｌｔａｌｋ、Ｃ＋＋などのオブジェクト指向プログラミング言語、および「Ｃ」プログラミング言語もしくは類似のプログラミング言語などの手続き型プログラミング言語を含む１もしくは複数のプログラミング言語の任意の組み合わせで書かれたソースコードもしくはオブジェクトコードのいずれかであり得る。いくつかの実施形態では、例えば、プログラマブルロジック回路、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、またはプログラマブルロジックアレイ（ＰＬＡ）を含む電子回路は、本発明の態様を実行するために、電子回路をパーソナライズするコンピュータ読み取り可能なプログラム命令の状態情報を利用して、コンピュータ読み取り可能なプログラム命令を遂行し得る。

本明細書で使用される用語は、特定の実施形態を説明するためだけのものであり、限定することを意図しない。本明細書では、単数形の「ａ」、「ａｎ」、および「ｔｈｅ」は、文脈が明確に示す場合を除き、複数形も含むことを意図する。本明細書で使用される「含む（ｃｏｍｐｒｉｓｅｓ）」および／または「含む（ｃｏｍｐｒｉｓｉｎｇ，）」という用語は、記載された特徴、整数、ステップ、動作、要素、および／またはコンポーネントの存在を特定するが、１または複数の他の特徴、整数、ステップ、動作、要素コンポーネント、および／またはそれらのグループの存在または追加を排除するものではないことがさらに理解されるであろう。

本明細書の様々な実施形態の説明は、説明のために提示されたものであるが、開示された実施形態を網羅的に、またはそれに限定することを意図したものではない。当業者であれば、記載された実施形態の範囲および精神から逸脱することなく、多くの修正および変形が明らかであろう。本明細書で使用される用語は、実施形態の原理、市場で見られる技術に対する実用化もしくは技術的改善を最もよく説明するため、または当業者が本明細書で開示されている実施形態を理解できるように選択されたものである。

Claims (20)

1. コンピューティングシステムであって、
   前記コンピューティングシステムのグラフィックユーザーインターフェースに１または複数のロボティックプロセスを統合するように構成されたインターフェースエンジンのためのプロセッサ遂行可能命令を格納するように構成されたメモリと、
   前記メモリに結合された少なくとも１つのプロセッサと、を含み、
   前記少なくとも１つのプロセッサは、前記インターフェースエンジンを遂行して、前記コンピューティングシステムが、
   前記グラフィックユーザーインターフェースのメニューを介して、１または複数の入力を受信し、
   前記１または複数の入力に応答して、表示するための前記１または複数のロボティックプロセスを自動的に決定し、
   前記１または複数のロボティックプロセスに対応する１または複数の選択可能なリンクを含むリストを生成し、
   前記メニューと関連付けて前記リストを表示するように、構成される、コンピューティングシステム。
2. 前記メニューはオペレーティングシステムのスタートメニューを含み、前記スタートメニューは検索バーを含む、請求項１に記載のコンピューティングシステム。
3. 前記１または複数の選択可能なリンクのいずれかの選択は、前記１または複数のロボティックプロセスの対応する自動化されたプロセスを開始する、請求項１に記載のコンピューティングシステム。
4. 前記インターフェースエンジンは、前記自動化されたプロセスをしきい値回数超実行することに応答して、前記１または複数のロボティックプロセスの自動化されたプロセスに対応するアイコンを固定するオートメーションプロセスピニングを実行する、請求項１に記載のコンピューティングシステム。
5. 前記リストは、前記メニューに表示される、請求項１に記載のコンピューティングシステム。
6. 前記リストは、前記メニューとは別のポップアップフレームに表示される、請求項１に記載のコンピューティングシステム。
7. 前記１または複数の入力は、値、関数、ユーザーインタラクション、単語、用語、フレーズ、および命令のうちの１または複数を含む、請求項１に記載のコンピューティングシステム。
8. インターフェースエンジンのためのプロセッサ遂行可能命令を記憶するメモリと、前記メモリに結合された少なくとも１つのプロセッサとを含むコンピューティングシステムのグラフィックユーザーインターフェースに１または複数のロボティックプロセスを統合するように構成された前記インターフェースエンジンによって実装される方法であって、前記方法は、
   前記グラフィックユーザーインターフェースのメニューを介して、１または複数の入力を受信し、
   前記１または複数の入力に応答して、表示するための前記１または複数のロボティックプロセスを自動的に決定し、
   前記１または複数のロボティックプロセスに対応する１または複数の選択可能なリンクを含むリストを生成し、
   前記メニューと関連付けて前記リストを表示することを含む、方法。
9. 前記メニューはオペレーティングシステムのスタートメニューを含み、前記スタートメニューは検索バーを含む、請求項８に記載の方法。
10. 前記１または複数の選択可能なリンクのいずれかの選択は、前記１または複数のロボティックプロセスの対応する自動化されたプロセスを開始する、請求項８に記載の方法。
11. 前記インターフェースエンジンは、前記自動化されたプロセスをしきい値回数超実行することに応答して、前記１または複数のロボティックプロセスの自動化されたプロセスに対応するアイコンを固定するオートメーションプロセスピニングを実行する、請求項８に記載の方法。
12. 前記リストは、前記メニューに表示される、請求項８に記載の方法。
13. 前記リストは、前記メニューとは別のポップアップフレームに表示される、請求項８に記載の方法。
14. 前記１または複数の入力は、値、関数、ユーザーインタラクション、単語、用語、フレーズ、および命令のうちの１または複数を含む、請求項８に記載の方法。
15. コンピューティングシステムのグラフィックユーザーインターフェースに１または複数のロボティックプロセスを統合するように構成されたインターフェースエンジンのためのコンピュータプログラム製品であって、前記コンピューティングシステムが、
    前記グラフィックユーザーインターフェースのメニューを介して、１または複数の入力を受信し、
    前記１または複数の入力に応答して、表示するための前記１または複数のロボティックプロセスを自動的に決定し、
    前記１または複数のロボティックプロセスに対応する１または複数の選択可能なリンクを含むリストを生成し、
    前記メニューと関連付けて前記リストを表示することを実行するように、コンピュータ読み取り可能な媒体に格納され、前記コンピューティングシステムの少なくとも１つのプロセッサによって遂行可能である、前記コンピュータプログラム製品。
16. 前記メニューはオペレーティングシステムのスタートメニューを含み、前記スタートメニューは検索バーを含む、請求項１５に記載のコンピュータプログラム製品。
17. 前記１または複数の選択可能なリンクのいずれかの選択は、前記１または複数のロボティックプロセスの対応する自動化されたプロセスを開始する、請求項１５に記載のコンピュータプログラム製品。
18. 前記インターフェースエンジンは、前記自動化されたプロセスをしきい値回数超実行することに応答して、前記１または複数のロボティックプロセスの自動化されたプロセスに対応するアイコンを固定するオートメーションプロセスピニングを実行する、請求項１５に記載のコンピュータプログラム製品。
19. 前記リストは、前記メニューに表示される、請求項１５に記載のコンピュータプログラム製品。
20. 前記リストは、前記メニューとは別のポップアップフレームに表示される、請求項１５に記載のコンピュータプログラム製品。