JP7190834B2 - 装置およびコンピュータプログラム - Google Patents

装置およびコンピュータプログラム Download PDF

Info

Publication number
JP7190834B2
JP7190834B2 JP2018136063A JP2018136063A JP7190834B2 JP 7190834 B2 JP7190834 B2 JP 7190834B2 JP 2018136063 A JP2018136063 A JP 2018136063A JP 2018136063 A JP2018136063 A JP 2018136063A JP 7190834 B2 JP7190834 B2 JP 7190834B2
Authority
JP
Japan
Prior art keywords
change
web page
changed
rpa
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018136063A
Other languages
English (en)
Other versions
JP2020013400A (ja
Inventor
達雄 田中
正士 須崎
克典 新井
祐一郎 豊崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nomura Research Institute Ltd
Original Assignee
Nomura Research Institute Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nomura Research Institute Ltd filed Critical Nomura Research Institute Ltd
Priority to JP2018136063A priority Critical patent/JP7190834B2/ja
Publication of JP2020013400A publication Critical patent/JP2020013400A/ja
Priority to JP2022194420A priority patent/JP7518143B2/ja
Application granted granted Critical
Publication of JP7190834B2 publication Critical patent/JP7190834B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Debugging And Monitoring (AREA)
  • Stored Programmes (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、ロボティック・プロセス・オートメーションに係る装置およびコンピュータプログラムに関する。
近年、人間が行う操作を記録して再現する、いわば業務をロボット化(自動化)するソフトウエアであるRPA(Robotic Process Automation、ロボティック・プロセス・オートメーション)が注目されている(例えば、非特許文献1、2、3参照)。一般に、RPAでは、予めオペレータが対象のリソースと操作内容とを規定し、ソフトウエアが規定された内容にしたがって自動的に操作を実行する。
https://www.nri.com/jp/journal/2017/11/20171101/、2018年6月14日検索 http://www.nttdata.com/jp/ja/lineup/winactor/index.html、2018年6月14日検索 https://www.uipath.com/automate/robotic-process-automation、2018年6月14日検索
RPAではソフトウエア(機械)が操作を実行するので、操作対象のオブジェクトを正確に指定する必要がある。したがって、例えばウェブページのレイアウトが変更になっただけでも操作を実行できずエラーとなることがある。
デスクトップのアプリケーションはソフトウエア提供側がソフトウエアのアップデートを行ったとしても、ユーザが意図してインストールしなければアップデートされない。したがって、基本的にはユーザはアップデートによりUI(User Interface)等に変更が生じうることを把握することができる。ただし、アップデートの内容を気にしないユーザも一定数はいる。
一方、ウェブアプリケーションについては、ASP(Application Service Provider)側がアプリケーションをアップデートすると、ユーザのブラウザはそのアップデートされたアプリケーションを実行する他なく、アップデート前のアプリケーションを使用することはできない。また、ウェブアプリケーションのアップデートはユーザ側の更新無しに可能であるため、UI及び挙動の変化が少ない場合、ユーザは気付くことなく、使用することになる。
したがって、RPAでウェブアプリケーションを操作対象としていて、主にUIのオブジェクトの変更がある場合には、対象の操作実行が適切に動作しないことがある。ユーザはRPAの操作実行が適切に実行されないことで、その更新に気づき、それに応じた操作設定を余儀なくされている。RPAの操作対象となっているデスクトップのアプリケーションをアップデートしたがその内容を確認していない場合も同様の不都合が生じうる。
本発明はこうした課題に鑑みてなされたものであり、その目的は、RPAの運用において、リソースの変更に伴うユーザの負担を軽減できる技術の提供にある。
本発明のある態様は、装置に関する。この装置は、ウェブページを取得する取得手段と、取得されたウェブページに対して、該ウェブページに対応する所定の操作を自動的に行う操作手段と、を備える装置であるか、またはその装置とネットワークを介して接続された装置であって、所定の操作に対応するウェブページに含まれる操作可能なオブジェクトが、以前の該ウェブページに含まれる対応するオブジェクトから変更されているか否かを判定する判定手段と、判定手段において変更されていると判定されたオブジェクトをユーザに通知する通知手段とを備え、通知手段は、変更されていると判定されたオブジェクトについて変更前のオブジェクトと変更後のオブジェクトとを対比可能な態様で含む画面であって、所定の操作を示すスクリプトまたはフローチャートを更に含む画面をディスプレイに表示させ、通知手段は、スクリプトまたはフローチャートにおいて、変更されていると判定されたオブジェクトが関連する要素を強調して表示する。
本発明の別の態様は、コンピュータプログラムである。このコンピュータプログラムは、ロボティック・プロセス・オートメーションにおいて操作対象となっているウェブページが、以前のものから変更されているか否かを判定する機能と、変更箇所をユーザに通知する機能と、をコンピュータに実現させ、通知する機能は、判定された変更箇所について変更前の箇所と変更後の箇所とを対比可能な態様で含む画面であって、ロボティック・プロセス・オートメーションにおける操作を示すスクリプトまたはフローチャートを更に含む画面をディスプレイに表示させ、通知する機能は、スクリプトまたはフローチャートにおいて、判定された変更箇所が関連する要素を強調して表示する。
なお、以上の構成要素の任意の組み合わせや、本発明の構成要素や表現を装置、方法、システム、コンピュータプログラム、コンピュータプログラムを格納した記録媒体などの間で相互に置換したものもまた、本発明の態様として有効である。
本発明によれば、RPAの運用において、リソースの変更に伴うユーザの負担を軽減できる。
実施の形態に係るRPAシステムの構成を示す模式図である。 図1のRPAサーバのハードウエア構成図である。 図1のRPAサーバの機能および構成を示すブロック図である。 図3の操作内容保持部の一例を示すデータ構造図である。 図3の操作結果保持部の一例を示すデータ構造図である。 図3の変更ログ保持部の一例を示すデータ構造図である。 図1のRPAサーバにおけるエラー発生時の変更判定処理の流れを示すフローチャートである。 オブジェクトの変更によりエラーが発生した変更後ウェブページの代表画面図である。 変更が行われる前の変更前ウェブページの代表画面図である。 変更詳細画面の代表画面図である。 図1のRPAサーバにおける定期的な変更判定処理の流れを示すフローチャートである。 RPA実行管理画面の代表画面図である。
以下、各図面に示される同一または同等の構成要素、部材、処理には、同一の符号を付するものとし、適宜重複した説明は省略する。また、各図面において説明上重要ではない部材の一部は省略して表示する。
図1は、実施の形態に係るRPAシステム2の構成を示す模式図である。RPAシステム2は、RPAサーバ4と、ユーザ端末8と、操作実行サーバ10と、を備える。RPAサーバ4とユーザ端末8と操作実行サーバ10とはインターネットなどのネットワーク6を介して通信可能に接続されている。RPAサーバ4は、ユーザが予め設定した操作の内容を保持する操作内容保持部42を備え、操作内容保持部42に規定される操作を操作実行サーバ10またはユーザ端末8に自動的に実行させる。あるいはまた、RPAサーバ4は自ら操作を自動的に実行してもよい。どのサーバが操作を実行するかは、操作内容保持部42に保持される設定による。ユーザ端末8は、ユーザが用いる端末であり、例えばデスクトップPC、ラップトップPC、携帯端末などであってもよい。
RPAサーバ4は、操作内容保持部42に規定される操作を実行してまたは実行させてエラーが発生した場合、エラーが生じた操作の対象となっているウェブページなどのリソースを取得して解析することで、リソースに対する変更の有無を判定する。変更の有無の判定は、ユーザが操作を設定したときのリソースなどの以前のリソースと、現在取得されたリソースと、を比較することで行われる。あるいはまた、変更の有無の判定は、エラーが生じた箇所やオブジェクトを、変更された箇所やオブジェクトとして認識することで行われてもよい。RPAサーバ4は、リソースに対する変更の有無または変更された箇所もしくはその両方を、ネットワーク6およびディスプレイ100を介してユーザに通知する。なお、エラーの発生を待たずに、変更の有無について操作内容保持部42に登録されているリソースを周期的に検査してもよい。
本実施の形態では、ユーザがユーザ端末8に情報を入力し、ユーザ端末8が該情報をネットワーク6を介してRPAサーバ4に送信し、RPAサーバ4が該情報を処理し、処理結果をネットワーク6を介してユーザ端末8に返し、ユーザ端末8が処理結果を表示する、いわゆるASPを想定する。しかしながら、本実施の形態の技術的思想は、ユーザ端末8や操作実行サーバ10などのスタンドアローンの端末にRPA機能、エラー対応機能および変更判定機能のうちの少なくとも一部を実装し、ユーザがその端末に情報を入力し、処理結果を得る場合など、ASP以外のシステムにも適用可能である。
図2は、図1のRPAサーバ4のハードウエア構成図である。ユーザ端末8および操作実行サーバ10は図2に記載のハードウエア構成と同様のハードウエア構成を有してもよい。RPAサーバ4は、メモリ130と、プロセッサ132と、通信インタフェース134と、ディスプレイ136と、入力インタフェース138と、を含む。これらの要素はそれぞれバス140に接続され、バス140を介して互いに通信する。
メモリ130は、データやプログラムを記憶するための記憶領域である。データやプログラムは、メモリ130に恒久的に記憶されてもよいし、一時的に記憶されてもよい。特にメモリ130は操作内容保持部42として割り当てられた領域を有する。プロセッサ132は、メモリ130に記憶されているプログラムを実行することにより、RPAサーバ4における各種機能を実現する。通信インタフェース134は、RPAサーバ4の外部との間でデータの送受信を行うためのインタフェースである。例えば、通信インタフェース134はネットワーク6にアクセスするためのインタフェースを含む。ディスプレイ136は、各種情報を表示するためのデバイスであり、例えば、液晶ディスプレイや有機EL(Electroluminescence)ディスプレイなどである。入力インタフェース138は、ユーザからの入力を受け付けるためのデバイスである。入力インタフェース138は、例えば、マウスやキーボードやディスプレイ138上に設けられたタッチパネルを含む。
図3は、図1のRPAサーバ4の機能および構成を示すブロック図である。ここに示す各ブロックは、ハードウエア的には、コンピュータのCPUをはじめとする素子や機械装置で実現でき、ソフトウエア的にはコンピュータプログラム等によって実現されるが、ここでは、それらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックはハードウエア、ソフトウエアの組合せによっていろいろなかたちで実現できることは、本明細書に触れた当業者には理解されるところである。
RPAサーバ4は、操作内容保持部102と、操作結果保持部104と、変更ログ保持部106と、RPA部108と、エラー検出部116と、変更判定部118と、表示制御部122と、操作内容変更部124と、ソート/フィルタリング部126と、を備える。
図4は、図3の操作内容保持部102の一例を示すデータ構造図である。操作内容保持部102は、RPAで実行される操作の内容を保持する。操作内容保持部102は、操作を特定する操作IDと、操作を実行する端末である実行端末(例えば、操作実行サーバ10やRPAサーバ4やユーザ端末8)と、操作対象となるリソースを特定する情報(ウェブページであればURL(Uniform Resource Locator)、端末のアプリケーションであればパス)と、操作内容と、繰り返し設定と、を対応付けて保持する。ここで、図4において、操作ID、実行端末、操作対象、操作内容、並びに、繰り返し設定に加え、タイトル又は使用者、作成者若しくは変更者のデータ属性を加えることもできる。使用者、作成者若しくは変更者を加える場合には実行端末のデータ属性を削除してもよい。使用者は対象のRPA操作を使用するもので、作成者は対象のRPA操作を作成したもので、変更者は対象のRPA操作を変更したものである。
操作内容は、操作対象のリソースに対してどのような操作を行うかを指定する情報である。例えば、操作対象がウェブページであれば、操作内容はウェブページのどのオブジェクトにどのような操作を行うかを指定するコードを含む。したがって操作内容は、操作対象のオブジェクトを特定する情報、例えばIDや位置や属性、を含む。
繰り返し設定は、対応する操作をいつ実行するかを指定する情報である。繰り返し設定は、日、週、月、年等の内の決まったタイミングなど、規則的または周期的に操作が実行される状態の指定を可能とすると共に、操作が実行されない状態すなわち非活性化状態の指定(例えば、「障害対応待ち」)をも可能とする。
ユーザは操作内容を操作内容保持部102に予め登録する。この登録のための処理やUIは例えば非特許文献1、2、3に記載の技術を用いて実現されてもよい。
図5は、図3の操作結果保持部104の一例を示すデータ構造図である。操作結果保持部104は、RPAで実行された操作の結果を保持する。操作結果保持部104は、操作IDと、実行端末と、操作対象と、直近に実行された操作の実行時刻である前回実行時刻と、直近に実行された操作の結果である前回実行結果と、直近に実行された操作の結果の出力と、操作対象に変更があったか否かを示す情報である変更有無と、変更があった場合にその変更を検出した日にちである変更検出日と、を対応付けて保持する。操作の結果は、操作が正常に実行されエラーが生じなかった場合は「正常」、エラーが生じ操作が実行できなかった場合は「エラー」、となる。
図6は、図3の変更ログ保持部106の一例を示すデータ構造図である。変更ログ保持部106は、操作IDと、操作対象と、ユーザが操作を操作内容保持部102に登録したときの操作対象のコードおよび画面キャプチャデータと、1回目の変更が検出された日にちと、1回目の変更後の操作対象のコードおよび画面キャプチャデータと、2回目の変更が検出された日にちと、2回目の変更後の操作対象のコードおよび画面キャプチャデータと、を対応付けて保持する。3回以上変更が検出された場合はその分エントリに変更検出日、変更後コード、変更後キャプチャが追加される。図6の例では複数の変更が次々と蓄積される構成となっているが、ユーザが複数変更のうち選択した変更についてその変更を非表示にする構成であってもよい。このように複数変更のうち、問題のない変更を非表示とすることでユーザは問題のある変更のみに集中して変更対応を行うことができる。または、ある変更に対してRPA操作に変更を加える場合には、その変更履歴を保存してもよく、場合によっては変更履歴を用いて一部の変更をキャンセルすることもできる。さらに、その変更履歴を保存する場合に、どの変更に対するRPA操作の変更かを紐づけて保存することもできる。
図3に戻り、RPA部108は、操作内容保持部42に規定される操作を操作実行サーバ10またはユーザ端末8に自動的に実行させるか、またはRPAサーバ4自身に実行させるための処理を行う。RPA部108は、ウェブページ取得部110と、操作実行部112と、結果格納部114と、を含む。RPAの処理自体は例えば非特許文献1、2、3に詳述されているので、本明細書では簡単に説明するに留める。
ウェブページ取得部110は、操作内容保持部102を参照し、繰り返し設定が現在時刻と合致する操作を特定し、特定された操作の実行端末および対象URLを取得する。ウェブページ取得部110は、取得した対象URLを実行端末に提供することで、実行端末に対象URLで特定されるウェブページを取得させる。実行端末がRPAサーバ4自身であれば、ウェブページ取得部110は対象URLで特定されるウェブページを取得する。
操作実行部112は、ウェブページ取得部110により特定された操作の操作内容を操作内容保持部102から取得する。操作実行部112は、取得された操作内容を実行端末に提供することで、実行端末に、操作内容で規定される操作を取得されたウェブページに対して自動的に実行させる。実行端末がRPAサーバ4自身であれば、操作実行部112は、取得された操作内容で規定される操作を取得されたウェブページに対して自動的に実行する。「自動的に」は、ユーザからの指示や入力を必要としない態様であってもよい。取得されたウェブページの変更等が原因で、実行端末または操作実行部112が規定された操作を実行できなかった場合、操作実行部112はエラー信号を生成する。
結果格納部114は、ウェブページ取得部110により特定された操作が正常に実行された場合、その結果を操作結果保持部104に格納する。例えば、結果格納部114は、操作結果保持部104において、特定された操作に対応する前回実行時刻、前回実行結果および結果出力を今回の実行の結果で更新する。
以下、図7、図11のフローチャートを参照して、エラー検出部116、変更判定部118、表示制御部122、操作内容変更部124の機能を説明する。
図7は、RPAサーバ4におけるエラー発生時の変更判定処理の流れを示すフローチャートである。RPA部108は、操作内容保持部102に規定される操作を自動的に実行するか実行させ(S702)、操作結果保持部104に実行結果および実行時刻を登録する(S704)。エラー検出部116は操作の実行時にエラーが発生したか否かを判定する(S706)。エラー検出部116は、操作実行部112によってエラー信号が生成された場合、ウェブページ取得部110により特定された操作の自動的な実行が失敗したと判定する。
エラーの発生が検出された場合(S706のY)、変更判定部118は、エラーが発生したウェブページが、以前のものから変更されているか否かを判定し、エラーの発生が検出されない場合(S706のN)、変更判定部118はそのような判定を行わず、処理はステップS702に戻り、新たな操作が自動的に実行される。
エラーの発生が検出された場合(S706のY)、操作内容変更部124は、操作内容保持部102において、エラーが発生したウェブページのURLに対応する繰り返し設定を「障害対応待ち」に変更することで、操作を非活性化する(S722)。変更判定部118は、ウェブページ取得部110が取得したか取得させた、エラーが発生したウェブページのコードと、エラーが発生したウェブページのURLに対応して変更ログ保持部106に保持されている最新のコードと、を取得する。例えば、エラーが発生したウェブページに対してこれまで変更が検出されていない場合、変更判定部118はエラーが発生したウェブページの登録時のコードを取得する。エラーが発生したウェブページに対してこれまで二回変更が検出されている場合、変更判定部118はその二回のうち検出日が新しいほうの変更後コードを取得する。
変更判定部118は、取得した二つのコードを比較することで(S708)、変更の有無を判定し(S710)、変更がある場合(S710のY)、変更箇所を特定する(S714)。変更判定部118におけるウェブページの変更検出の対象を、操作可能なオブジェクトとしていもよい。この場合、変更判定部118は、エラーが発生したウェブページに含まれる操作可能なオブジェクトが、以前の該ウェブページに含まれる対応するオブジェクトから変更されているか否かを判定する。あるいはまた、変更判定部118におけるウェブページの変更検出の対象を、RPAで操作対象として指定されているオブジェクトとしてもよい。この場合、変更判定部118は、エラーが発生したウェブページに含まれるオブジェクトのうち該ウェブページに対応する所定の操作の対象として指定されているオブジェクトが、以前の該ウェブページに含まれる対応するオブジェクトから変更されているか否かを判定する。
図8は、オブジェクトの変更によりエラーが発生した変更後ウェブページ200の代表画面図である。図9は、変更が行われる前の変更前ウェブページ202の代表画面図である。変更後ウェブページ200、変更前ウェブページ202はいずれも同一のURLで指定され、操作対象として操作内容保持部102に登録されている。図8、図9の例では、変更前ウェブページ202のテキストオブジェクト「Tel:」が変更後ウェブページ200ではテキストオブジェクト「連絡先:」に変わっている。また、変更前ウェブページ202のボタンオブジェクト「更新」、「新規登録」が変更後ウェブページ200では削除され、代わりに変更後ウェブページ200ではボタンオブジェクト「登録」が追加されている。また、変更前ウェブページ202と変更後ウェブページ200とでボタンオブジェクト「削除」の位置が変更となっている。
操作可能なオブジェクトを変更検出の対象とする場合、変更判定部118は、変更前ウェブページ202の操作可能なオブジェクトとして、四つの入力ボックスオブジェクトと三つのボタンオブジェクト「更新」、「新規登録」、「削除」とを特定する。変更判定部118は、変更後ウェブページ200の操作可能なオブジェクトとして、四つの入力ボックスオブジェクトと二つのボタンオブジェクト「登録」、「削除」とを特定する。
変更判定部118は、変更前と変更後とで特定された操作可能なオブジェクト同士を比較し、変更後ウェブページ200の二つのボタンオブジェクト「登録」、「削除」が、変更前ウェブページ202に含まれる対応するオブジェクトから変更されていると判定する。具体的には、変更判定部118は、ボタンオブジェクト「登録」は変更前ウェブページ202に存在せず、したがって新規に追加されたと判定する。変更判定部118は、ボタンオブジェクト「削除」の位置が変更されたと判定する。併せて変更判定部118は、変更前ウェブページ202の三つのボタンオブジェクト「更新」、「新規登録」、「削除」のうち「更新」および「新規登録」が削除されていると判定する。
RPAで操作対象として指定されているオブジェクトを変更検出の対象とする場合、変更判定部118は、操作内容保持部102を参照し、エラーが発生した変更後ウェブページ200のURLに対応する操作内容を取得する。変更判定部118は、取得した操作内容を解析し、操作対象として指定されているオブジェクトを特定する。例えば、操作内容が、四つの入力ボックスオブジェクトに情報を入力し、ボタンオブジェクト「削除」をクリックするというものであれば、変更判定部118は、変更後ウェブページ200および変更前ウェブページ202において、四つの入力ボックスオブジェクトおよびボタンオブジェクト「削除」を特定する。
変更判定部118は、変更前と変更後とで特定されたオブジェクト同士を比較し、変更後ウェブページ200のボタンオブジェクト「削除」が、変更前ウェブページ202に含まれる対応するオブジェクトから変更されていると判定する。具体的には、変更判定部118は、ボタンオブジェクト「削除」の位置が変更されたと判定する。
図7に戻り、ステップS710で変更がないと判定された場合、表示制御部122は、エラーが生じたが変更は検出されなかった旨をユーザに通知する(S712)。例えば表示制御部122は、後述の変更詳細画面204のフローチャート部分のみをディスプレイ100に表示させてもよい。その後、処理はステップS702に戻り、新たな操作が自動的に実行される。
ステップS714で変更されたオブジェクトが特定されると、変更判定部118は、操作結果保持部104において、変更が検出されたウェブページに対応する変更有無に「変更有」を登録し、変更検出日を登録する(S718)。変更判定部118は、変更ログ保持部106において、変更が検出されたウェブページに対応するエントリに、変更検出日と変更後コードと変更後キャプチャとを追加する(S720)。表示制御部122は、操作の実行中にエラーが生じ、かつ、対象のウェブページの変更が検出された旨をユーザに通知する(S712)。表示制御部122は、検出された変更の詳細を示す変更詳細画面204を生成し、ネットワーク6を介してユーザ端末8に送信する。ユーザ端末8は、受信した変更詳細画面204をディスプレイ100に表示させる。図4の別例として、使用者、作成者若しくは変更者を加える例を追加で説明したが、ユーザ端末8で対象RPAの使用者が変更を知覚したものの、その変更に応じて対象RPAの変更を行うことができない場合に、作成者若しくは変更者に対して対象のRPAでその変更を明示した上で変更依頼を本実施形態に係るシステム上で依頼可能としてもよい。
図10は、変更詳細画面204の代表画面図である。変更詳細画面204は、変更後のウェブページのイメージを表示する変更後表示領域206と、変更前のウェブページのイメージを表示する変更前表示領域208と、ウェブページに対応する操作のどこでエラーが生じたかを表示するエラー箇所表示領域210と、を有する。変更詳細画面204は、変更前のオブジェクトと変更後のオブジェクトとを対比可能な態様で表示する。特に変更詳細画面204は、変更前のウェブページのイメージと変更後のウェブページのイメージとを並べて一画面内に表示することで、対比を可能としている。
図10は図8、図9に対応し、特に変更後表示領域206には図8の変更後ウェブページ200の画面キャプチャが表示され、変更前表示領域208には図9の変更前ウェブページ202の画面キャプチャが表示される。変更前ウェブページ202の画面キャプチャは、変更ログ保持部106に保持されているキャプチャに基づき生成される。変更前表示領域208において、ステップS714で特定されたオブジェクトが枠212で強調表示される。
なお、変更後表示領域206にブラウザを組み込むことで、変更後ウェブページ200の画面キャプチャに代えて、変更後ウェブページ200のURLを指定することで取得される実際の変更後ウェブページ200を表示してもよい。
また、図10の例では変更前表示領域208において変更に係る部分を強調表示したが、これに代えて、変更後表示領域206において変更に係る部分を強調表示してもよい。あるいはまた、変更後表示領域206、変更前表示領域208の両方において変更に係る部分を強調表示してもよい。その場合、変更後表示領域206と変更前表示領域208とで強調表示の態様を異ならせてもよい。
エラー箇所表示領域210は、エラーが発生した操作の操作内容を示すフローチャートを表示する。エラー箇所表示領域210はさらに、ステップS714で特定されたオブジェクトが関係する要素214を強調して表示する。RPAで操作対象として指定されているオブジェクトが変更検出の対象とされる場合、ステップS714で特定されたオブジェクト(=変更されたオブジェクト)が関係する要素214においてエラーが生じている蓋然性が高い。図10の例では、ボタンオブジェクト「削除」の位置が変更になったことにより、ボタンオブジェクト「削除」のクリックを定義する要素214においてボタンオブジェクト「削除」が見つからず、エラーが発生する。図10で要素214を強調表示することにより、ユーザはエラーの発生の原因をより素早く容易に特定することができる。なお、フローチャートに代えてまたは加えて、エラーが発生した操作のスクリプトを表示してもよい。
図10に示される変更詳細画面204は、変更後表示領域206に表示される変更後ウェブページの画面キャプチャにおいて変更後の適切なオブジェクトを画像上で指定すると、画像認識により適切にそのオブジェクトを認識するよう構成される。
一例では、ユーザは、変更後表示領域206と変更前表示領域208とを見比べることで、エラーの原因がボタンオブジェクト「削除」の移動にあると理解する。ユーザは、変更後表示領域206においてボタンオブジェクト「削除」をクリック、範囲指定等により指定する。操作内容変更部124は、ユーザにより指定されたボタンオブジェクト「削除」の位置を取得する。操作内容変更部124は、操作内容保持部102において、エラーが発生した操作の操作内容のうち、ボタンオブジェクト「削除」の位置を取得した新たな位置で更新し、繰り返し設定を「障害対応待ち」から元の値に戻す。
別の例では、ユーザは、変更後表示領域206と変更前表示領域208とを見比べることで、エラーの原因がボタンオブジェクト「新規登録」の削除にあると理解する。ユーザは、変更後表示領域206においてボタンオブジェクト「登録」をクリック、範囲指定等により指定する。操作内容変更部124は、ユーザにより指定されたボタンオブジェクト「登録」のIDおよび属性を取得する。操作内容変更部124は、操作内容保持部102において、エラーが発生した操作の操作内容のうち、ボタンオブジェクト「新規登録」のIDおよび属性を、新たに取得したボタンオブジェクト「登録」のIDおよび属性に置き換え、繰り返し設定を「障害対応待ち」から元の値に戻す。
このように、ユーザは、変更箇所の確認と共に、変更に関連する障害への対応も変更詳細画面204を介して済ませることができる。また、ウェブページ内のオブジェクトを指定することで操作内容を変更するので、コードを直接変更する場合と比較して、より直感的な作業が可能となる。
図11は、RPAサーバ4における定期的な変更判定処理の流れを示すフローチャートである。変更判定部118は、操作内容保持部102に保持されるURLのなかから判定対象とするひとつを選択する(S740)。変更判定部118は、選択されたURLにアクセスし、判定対象のウェブページのコードを取得する(S742)。変更判定部118は、判定対象のウェブページのURLに対応して変更ログ保持部106に保持されている最新のコードを取得する。変更判定部118は、取得した二つのコードを比較することで(S744)、変更の有無を判定し(S710)、変更がある場合(S710のY)、変更箇所を特定する(S714)。
ステップS710で変更がないと判定された場合、変更判定部118は、操作結果保持部104において、判定対象のウェブページに対応する変更有無に「変更無」を登録する(S748)。その後、処理はステップS740に戻り、新たなURLが判定対象として選択される。
ステップS714で変更されたオブジェクトが特定されると、変更判定部118は、判定対象のウェブページに対する次回の操作時にエラーが発生するか否かを判定する(S752)。例えば、変更判定部118は、判定対象のウェブページのURLに対応する操作内容を操作内容保持部102から取得する。変更判定部118は、取得した操作内容に変更されたオブジェクトが含まれる場合、次回の操作時にエラーが発生すると判定する。また、変更判定部118は、変更されたオブジェクトが操作可能なオブジェクトでない場合、次回の操作時にエラーが発生しないと判定する。
図8、図9の例で、変更前ウェブページ202のテキストオブジェクト「Tel:」が変更後ウェブページ200ではテキストオブジェクト「連絡先:」に変わっているだけで、他のオブジェクトに変更がない場合、ステップS714で特定されるオブジェクトはテキストオブジェクト「Tel:」のみである。この場合、変更判定部118は、変更後ウェブページ200に対する次回の操作時にエラーが発生しないと判定する。
対して、変更前ウェブページ202のボタンオブジェクト「更新」、「新規登録」が変更後ウェブページ200では削除され、代わりに変更後ウェブページ200ではボタンオブジェクト「登録」が追加されている場合、ステップS714で特定されるオブジェクトはボタンオブジェクト「更新」、「新規登録」、「登録」である。この場合、変更判定部118は、変更後ウェブページ200に対する次回の操作時にエラーが発生すると判定する。
ステップS752でエラーが発生すると判定された場合(S752のY)、操作内容変更部124は、操作内容保持部102において、判定対象のウェブページのURLに対応する繰り返し設定を「障害対応待ち」に変更することで、操作を非活性化する(S754)。ステップS752でエラーが発生すると判定されなかった場合(S752のN)またはステップS754の後、表示制御部122は、判定対象のウェブページの変更が検出された旨をユーザに通知する(S756)。表示制御部122は、図10に示される変更詳細画面204と同様の画面を介して通知を行ってもよい。その後、ステップS718の操作結果保持部104の更新およびステップS720の変更ログ保持部106の更新を経て、処理はステップS740に戻り、新たなURLが判定対象として選択される。
表示制御部122は、RPAシステム2の管理者からユーザ端末8を介して要求を受けると、操作内容保持部102および操作結果保持部104に保持されている操作の実行状態を一覧表示するRPA実行管理画面220を生成し、ネットワーク6を介してユーザ端末8に送信する。ユーザ端末8は、受信したRPA実行管理画面220をディスプレイ100に表示させる。
図12は、RPA実行管理画面220の代表画面図である。RPA実行管理画面220は、操作内容保持部102に保持される操作ID、実行端末、操作対象、繰り返し設定、および、操作結果保持部104に保持される前回実行時刻、前回実行結果、変更有無および日にち、を対応付けて表形式で表示する。RPA実行管理画面220は、操作IDごとに、その操作IDで特定される操作を実行する端末と、その操作IDで特定される操作の対象となるウェブページのURLと、操作の繰り返し設定と、その操作の最新の実行結果と、そのウェブページについての変更判定部118における変更有無の判定の結果および日にちと、を対応付けて表示する。
表示制御部122は、変更有無のセルのいずれかに対する押下を検出すると、対応する操作対象について、図10に示される変更詳細画面204と同様の画面を生成し、ディスプレイ100に表示させる。表示制御部122は、操作対象のセルのいずれかに対する押下を検出すると、対応する操作対象がウェブページであれば当該ウェブページを取得してディスプレイ100に表示させ、対応する操作対象がソフトウエアであれば当該ソフトウエアを起動する。表示制御部122は、繰り返し設定のセルのいずれかに対する押下を検出すると、対応する操作の繰り返し設定を行う画面(不図示)をディスプレイ100に表示させる。表示制御部122は、前回実行時刻のセルのいずれかまたは前回実行結果のセルのいずれかに対する押下を検出すると、対応する操作のログを操作結果保持部104から取得し、ディスプレイ100に表示させる。
ソート/フィルタリング部126は、一番上の行の「変更有無」の見出しセル222に対する押下を検出すると、RPA実行管理画面220に表示される情報を「変更有」、「変更無」の別でソートする。ソート/フィルタリング部126は、一番上の行の「前回実行結果」の見出しセル224に対する押下を検出すると、RPA実行管理画面220に表示される情報を「正常」、「エラー」の別でソートする。ユーザが「変更有無」の見出しセル222、「前回実行結果」の見出しセル224の順に押下すると、まず「変更有」、「変更無」で分けられ、さらに「変更有」のものが「正常」、「エラー」で分けられる。その結果、上から、「変更有」かつ「エラー」の操作、「変更有」かつ「正常」の操作、「変更無」かつ「エラー」の操作、「変更無」かつ「正常」の操作が、この順に並ぶこととなる。
ソート/フィルタリング部126は、操作対象のサイト(WWWサーバレベル、ページレベル)別に、RPA実行管理画面220に表示される情報をソートする。ソート/フィルタリング部126は、一番上の行の「操作対象」の見出しセル226に対する押下を検出すると、RPA実行管理画面220に表示される情報を操作対象別にソートする。例えば、ソート/フィルタリング部126は、同じURLを操作対象とする操作を連続した行に表示するようRPA実行管理画面220を再構成する。
あるサイトで更新が行われると、それを操作対象とする操作では同様に変更やエラーが生じる。したがって、上記のソートを行うことにより、まとめて障害への対応を行うことができる。これはユーザ利便性の向上に寄与する。
なお、ソート/フィルタリング部126は、RPA実行管理画面220に表示される情報をソートする代わりにまたはそれに加えて、フィルタリングを行ってもよい。この場合、ユーザに指定されたキーに合致するエントリ以外は非表示とされる。例えば、ユーザが所望のURLを操作対象のキーとして指定した場合、ソート/フィルタリング部126は当該URLを操作対象とする操作以外の操作のエントリを、RPA実行管理画面220において非表示とする。
上述の実施の形態において、保持部の例は、ハードディスクや半導体メモリである。また、本明細書の記載に基づき、各部を、図示しないCPUや、インストールされたアプリケーションプログラムのモジュールや、システムプログラムのモジュールや、ハードディスクから読み出したデータの内容を一時的に記憶する半導体メモリなどにより実現できることは本明細書に触れた当業者には理解される。
本実施の形態に係るRPAサーバ4によると、RPAにおいて自動的な操作の対象となっているウェブページが変更されたか否かが判定され、判定結果がユーザに通知される。したがって、ユーザは、操作対象のウェブページの変更に応じて操作内容を書き換えるなど、そのような変更に適切に対処することができる。
また、本実施の形態に係るRPAサーバ4では、変更に起因するエラーが生じる前の変更の捕捉が可能となっている。したがって、エラーが生じてからエラーの原因を探して対処する場合と比較して、ユーザはRPAをよりスムーズに運用することができる。
また、本実施の形態に係るRPAサーバ4では、変更に起因するエラーが生じた場合でも、エラーの原因となっている変更を特定し、変更詳細画面204を介してユーザに知らせることができる。したがって、より素早く効率的な障害対応が可能となる。
以上、実施の形態に係るRPAサーバ4の構成と動作について説明した。この実施の形態は例示であり、各構成要素や各処理の組み合わせにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解される。
実施の形態では、リソースとして主にウェブページなどのネットワークリソースを採用したが、これに限られず、例えば、ユーザ端末8にインストールされるアプリケーションプログラム(ソフトウエア)などの非ネットワークリソースであってもよい。図4の操作内容保持部102、図5の操作結果保持部104、図6の変更ログ保持部106、図12のRPA実行管理画面220には、操作対象として指定される非ネットワークリソースの例としてexeファイルが記載されている。
例えばRPAの対象となっているアプリケーションプログラムを更新することによりUI等が変更されたがユーザがそれに気付かなかった場合、そのままでは次回の自動的操作の実行時にエラーが発生する。ユーザは原因も分からないまま障害への対応を余儀なくされる。これに対して、RPAサーバ4を用いると、RPAサーバ4が当該変更をユーザに知らせることで、ユーザにエラーの原因となった変更箇所を知らせることができ、またはエラーが発生する前に当該変更への対処を促すことができる。
2 RPAシステム、 4 RPAサーバ、 6 ネットワーク、 8 ユーザ端末、 10 操作実行サーバ。

Claims (6)

  1. ウェブページを取得する取得手段と、
    取得されたウェブページに対して、該ウェブページに対応する所定の操作を自動的に行う操作手段と、を備える装置であるか、またはその装置とネットワークを介して接続された装置であって、
    所定の操作に対応するウェブページに含まれる操作可能なオブジェクトが、以前の該ウェブページに含まれる対応するオブジェクトから変更されているか否かを判定する判定手段と、
    前記判定手段において変更されていると判定されたオブジェクトをユーザに通知する通知手段とを備え
    前記通知手段は、変更されていると判定されたオブジェクトについて変更前のオブジェクトと変更後のオブジェクトとを対比可能な態様で含む画面であって、前記所定の操作を示すスクリプトまたはフローチャートを更に含む前記画面をディスプレイに表示させ、
    前記通知手段は、前記スクリプトまたはフローチャートにおいて、前記変更されていると判定されたオブジェクトが関連する要素を強調して表示する装置。
  2. 前記判定手段は、所定の操作に対応するウェブページに含まれるオブジェクトのうち該所定の操作の対象として指定されているオブジェクトが、以前の該ウェブページに含まれる対応するオブジェクトから変更されているか否かを判定する請求項1に記載の装置。
  3. 前記判定手段は、前記操作手段における所定の操作の自動的な実行が失敗した場合に判定を行い、自動的な実行が失敗しなかった場合には判定を行わない請求項1または2に記載の装置。
  4. 所定の操作ごとに、該所定の操作の対象となるウェブページを特定可能な情報と、そのウェブページについての前記判定手段における判定の結果と、を対応付けて表示する画面をディスプレイに表示させる表示制御手段をさらに備える請求項1からのいずれか一項に記載の装置。
  5. 前記画面に表示される情報を、ウェブページまたはウェブページのグループでソートまたはフィルタリングする手段をさらに備える請求項に記載の装置。
  6. ロボティック・プロセス・オートメーションにおいて操作対象となっているウェブページが、以前のものから変更されているか否かを判定する機能と、
    更箇所をユーザに通知する機能と、をコンピュータに実現させるためのコンピュータプログラムであって、
    前記通知する機能は、判定された変更箇所について変更前の箇所と変更後の箇所とを対比可能な態様で含む画面であって、前記ロボティック・プロセス・オートメーションにおける操作を示すスクリプトまたはフローチャートを更に含む前記画面をディスプレイに表示させ、
    前記通知する機能は、前記スクリプトまたはフローチャートにおいて、前記判定された変更箇所が関連する要素を強調して表示する、コンピュータプログラム
JP2018136063A 2018-07-19 2018-07-19 装置およびコンピュータプログラム Active JP7190834B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018136063A JP7190834B2 (ja) 2018-07-19 2018-07-19 装置およびコンピュータプログラム
JP2022194420A JP7518143B2 (ja) 2018-07-19 2022-12-05 装置およびコンピュータプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018136063A JP7190834B2 (ja) 2018-07-19 2018-07-19 装置およびコンピュータプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022194420A Division JP7518143B2 (ja) 2018-07-19 2022-12-05 装置およびコンピュータプログラム

Publications (2)

Publication Number Publication Date
JP2020013400A JP2020013400A (ja) 2020-01-23
JP7190834B2 true JP7190834B2 (ja) 2022-12-16

Family

ID=69170202

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018136063A Active JP7190834B2 (ja) 2018-07-19 2018-07-19 装置およびコンピュータプログラム
JP2022194420A Active JP7518143B2 (ja) 2018-07-19 2022-12-05 装置およびコンピュータプログラム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022194420A Active JP7518143B2 (ja) 2018-07-19 2022-12-05 装置およびコンピュータプログラム

Country Status (1)

Country Link
JP (2) JP7190834B2 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8512371B2 (en) 2009-10-06 2013-08-20 Covidien Lp Jaw, blade and gap manufacturing for surgical instruments with small jaws
US8968310B2 (en) 2011-11-30 2015-03-03 Covidien Lp Electrosurgical instrument with a knife blade lockout mechanism
US9526564B2 (en) 2012-10-08 2016-12-27 Covidien Lp Electric stapler device
US9655673B2 (en) 2013-03-11 2017-05-23 Covidien Lp Surgical instrument
WO2022070353A1 (ja) * 2020-09-30 2022-04-07 オーティファイ株式会社 情報処理システム、情報処理方法、およびプログラム
CN112181854B (zh) * 2020-10-30 2023-12-22 重庆农村商业银行股份有限公司 一种生成流程自动化脚本的方法、装置、设备及存储介质
WO2023238262A1 (ja) * 2022-06-07 2023-12-14 日本電信電話株式会社 情報処理装置、試験方法、及び試験プログラム
WO2024127583A1 (ja) * 2022-12-15 2024-06-20 日本電信電話株式会社 操作支援装置、操作支援方法及び操作支援プログラム
WO2024127582A1 (ja) * 2022-12-15 2024-06-20 日本電信電話株式会社 操作支援装置、操作支援方法及び操作支援プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001249874A (ja) 2000-03-08 2001-09-14 Sky Com:Kk 情報収集装置
JP2012018583A (ja) 2010-07-08 2012-01-26 Canon Inc ソフトウェア開発支援装置及びその処理方法
JP2015109059A (ja) 2013-12-06 2015-06-11 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation 文書オブジェクトモデルツリーとカスケーディング・スタイル・シートとが取り出されることが可能なアプリケーションのソースコードを変更することによって生じる影響を検知するための方法、並びに、当該影響を検知するためのコンピュータ及びそのコンピュータ・プログラム
JP2015125472A5 (ja) 2013-12-25 2017-02-09

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6265732B2 (ja) 2013-12-25 2018-01-24 キヤノン株式会社 管理装置、管理装置の制御方法及びプログラム
CN106557484A (zh) * 2015-09-25 2017-04-05 北京国双科技有限公司 网页热力图背景图的更新方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001249874A (ja) 2000-03-08 2001-09-14 Sky Com:Kk 情報収集装置
JP2012018583A (ja) 2010-07-08 2012-01-26 Canon Inc ソフトウェア開発支援装置及びその処理方法
JP2015109059A (ja) 2013-12-06 2015-06-11 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation 文書オブジェクトモデルツリーとカスケーディング・スタイル・シートとが取り出されることが可能なアプリケーションのソースコードを変更することによって生じる影響を検知するための方法、並びに、当該影響を検知するためのコンピュータ及びそのコンピュータ・プログラム
JP2015125472A5 (ja) 2013-12-25 2017-02-09

Also Published As

Publication number Publication date
JP2020013400A (ja) 2020-01-23
JP7518143B2 (ja) 2024-07-17
JP2023027785A (ja) 2023-03-02

Similar Documents

Publication Publication Date Title
JP7190834B2 (ja) 装置およびコンピュータプログラム
US12088574B2 (en) Information processing device, information management method, and information processing system
US12003591B2 (en) Automatic discovery and registration of service applications for files introduced to a user interface
US11249832B2 (en) Session triage and remediation systems and methods
US9672252B2 (en) Identifying and ranking solutions from multiple data sources
US8640224B2 (en) Embedded device and state display control
US8898178B2 (en) Solution monitoring system
US20040088142A1 (en) System and method for managing configuration information for dispersed computing systems
US20120198279A1 (en) Automated Testing on Mobile Devices
US20160004629A1 (en) User workflow replication for execution error analysis
US20130066869A1 (en) Computer system, method of managing a client computer, and storage medium
CN112817817B (zh) 埋点信息查询方法、装置、计算机设备和存储介质
CN109375921B (zh) 页面文件快速编译方法、装置及存储设备、计算机设备
US7529771B2 (en) Method of and apparatus for gathering information, system for gathering information, and computer program
US11755293B2 (en) Code execution and data processing pipeline
EP3848824A1 (en) Landing page processing method, apparatus, device and medium
EP3497586A1 (en) Discovery of calling application for control of file hydration behavior
US20190340281A1 (en) System and method for dynamic search
US20230131682A1 (en) Facilitated live analysis of screen content
JP4064621B2 (ja) ソフトウェアのサポートシステム及びサポートプログラムを記録したコンピュータ読み取り可能な記録媒体
US20220075492A1 (en) Detecting paste and other types of user activities in computer environment
US11354081B2 (en) Information processing apparatus with concealed information
JP2023026053A (ja) 情報処理プログラム、情報処理方法および情報処理装置
JP2007157003A (ja) ホームページ閲覧経路解析方法
US11704014B1 (en) Supporting micro swipes for generating custom user interface responses

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210610

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220425

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220506

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220704

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221007

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20221104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221206

R150 Certificate of patent or registration of utility model

Ref document number: 7190834

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150