JP7216767B2 - アクセス方法、通信システム、及びプログラム - Google Patents

アクセス方法、通信システム、及びプログラム Download PDF

Info

Publication number
JP7216767B2
JP7216767B2 JP2021078554A JP2021078554A JP7216767B2 JP 7216767 B2 JP7216767 B2 JP 7216767B2 JP 2021078554 A JP2021078554 A JP 2021078554A JP 2021078554 A JP2021078554 A JP 2021078554A JP 7216767 B2 JP7216767 B2 JP 7216767B2
Authority
JP
Japan
Prior art keywords
error
server
specific type
access
occurred
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021078554A
Other languages
English (en)
Other versions
JP2022172604A (ja
Inventor
禎昭 江村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rakuten Group Inc
Original Assignee
Rakuten Group Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rakuten Group Inc filed Critical Rakuten Group Inc
Priority to JP2021078554A priority Critical patent/JP7216767B2/ja
Priority to US17/733,524 priority patent/US11977435B2/en
Publication of JP2022172604A publication Critical patent/JP2022172604A/ja
Application granted granted Critical
Publication of JP7216767B2 publication Critical patent/JP7216767B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1415Saving, restoring, recovering or retrying at system level
    • G06F11/1443Transmit or communication errors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • G06F11/0772Means for error signaling, e.g. using interrupts, exception flags, dedicated error registers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0709Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in a distributed system consisting of a plurality of standalone computer nodes, e.g. clusters, client-server systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • G06F11/0769Readable error formats, e.g. cross-platform generic formats, human understandable formats
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • G06F11/0775Content or structure details of the error report, e.g. specific table structure, specific error fields
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766Error or fault reporting or storing
    • G06F11/0787Storage of error reports, e.g. persistent data storage, storage using memory protection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324Display of status information
    • G06F11/327Alarm or error message display

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Debugging And Monitoring (AREA)

Description

特許法第30条第2項適用 令和2年6月26日 楽天株式会社がウェブサイトにて公開 https://www.slideshare.net/rakutentech/improve-test-automation-operation https://qiita.com/emurin/items/6cc999a1c6d79e7bdf3c
本発明は、サーバへのアクセスにおいて発生したエラーの対処方法等に関する。
従来、サーバが出力するエラーを検出することでサーバの動作状態を自動的に検出する技術が知られている。例えば、特許文献1には、動作リクエストをWEBアプリケーションが配置されたWEBサーバに送信してWEBサーバからのレスポンスデータを取得し、当該レスポンスデータに、対象エラーコード一覧記憶部に記憶されているエラーコードが含まれているかどうかを確認することによってWEBアプリケーションプログラムの動作状態を検出する方法が開示されている。この方法によれば、本番環境サーバに配布されたWEBアプリケーションプログラムのすべての機能について簡易的に動作テストを行うことができる。
特開2015-052882号公報
ところで、サーバにアクセスして動作テストを実行するものにおいて、当該アクセスの際にエラーが発生することで当該動作テストを実行することができない場合がある。この場合、例えば、ネットワーク不安定等に起因する一時的なエラーの場合には、迅速にリトライを実行すべきであるが、早期に解消しないエラーの場合にはリトライを実行すべきではない。このような課題は、サーバにアクセスして動作テストを実行するものに限られず、サーバへのアクセスにおける一般的な課題である。
そこで、本発明では、サーバへのアクセスにおいてエラーが発生した場合に再度のアクセスを適切に制御することが可能なアクセス方法、通信システム、及びプログラムを提供することを目的とする。
上記課題を解決するために、請求項1に記載の発明は、コンピュータにより実行されるアクセス方法であって、所定のサーバにアクセスする第1アクセスステップと、前記サーバへのアクセスにおいて発生したエラーに関するエラー情報を取得する取得ステップと、前記エラー情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する判定ステップと、前記特定種別のエラーであると判定されたことに応じて、前記サーバに再アクセスする第2アクセスステップと、前記エラー情報に基づいて、前記第2アクセスステップにおいて前記サーバに再アクセスする時期を設定する設定ステップと、を含み、前記エラー情報は、前記コンピュータに表示されるエラー画面から抽出されるエラー文字情報と前記サーバに所定の命令を与えるためのソフトウェアのコンソールから得られるエラー文字情報との少なくとも何れか一方と、前記コンピュータに表示されるエラー画面の画像とを含み、前記判定ステップは、前記エラー文字情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第1判定ステップと、前記エラー画面の画像に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第2判定ステップと、を含み、前記第1判定ステップにおいて前記特定種別のエラーであるか否かを判定できない場合に、前記第2判定ステップにおいて前記発生したエラーが特定種別のエラーであるか否かを判定し、前記設定ステップにおいて、前記特定種別のエラーがメンテナンス中であることを示すエラーである場合、前記エラー文字情報又は前記エラー画面の画像から特定されたメンテナンスの終了時期を前記サーバに再アクセスする時期として設定し、前記第2アクセスステップにおいて、前記設定された時期に基づいて、前記サーバに再アクセスすることを特徴とする。これにより、サーバへのアクセスにおいてエラーが発生した場合に再度のアクセスを適切に制御することができる。
請求項2に記載の発明は、請求項1に記載のアクセス方法において、前記特定種別のエラーは、時間が経過することで解消しうる一時的なエラーであることを特徴とする。
請求項に記載の発明は、請求項1または2に記載のアクセス方法において、前記判定ステップにおいて、前記サーバと他のサーバとの少なくとも何れか一方へのアクセスにおいて発生したエラーまたは発生しうるエラーに関するエラー情報を入力とし、当該エラーが特定種別のエラーであるかについての値を出力とした学習データにより学習された学習済みモデルを用いて、前記判定を行うことを特徴とする。これにより、前記判定の精度を高めることができる。
請求項に記載の発明は、請求項1乃至の何れか一項に記載のアクセス方法において、それぞれの前記ステップは前記サーバの動作テストを行う際に実行されることを特徴とする。これにより、より効率良くサーバの動作テストを実施することができる。
請求項5に記載の発明は、コンピュータと所定のサーバを含む通信システムであって、前記コンピュータは、前記サーバにアクセスする第1アクセス手段と、前記サーバへのアクセスにおいて発生したエラーに関するエラー情報を取得する取得手段と、前記エラー情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する判定手段と、前記特定種別のエラーであると判定されたことに応じて、前記サーバに再アクセスする第2アクセス手段と、前記エラー情報に基づいて、前記第2アクセス手段により前記サーバに再アクセスする時期を設定する設定手段と、を備え、前記エラー情報は、前記コンピュータに表示されるエラー画面から抽出されるエラー文字情報と前記サーバに所定の命令を与えるためのソフトウェアのコンソールから得られるエラー文字情報との少なくとも何れか一方と、前記コンピュータに表示されるエラー画面の画像とを含み、前記判定手段は、前記エラー文字情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第1判定手段と、前記エラー画面の画像に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第2判定手段と、を備え、前記第1判定手段により前記特定種別のエラーであるか否かを判定できない場合に、前記第2判定手段により前記発生したエラーが特定種別のエラーであるか否かを判定し、前記設定手段は、前記特定種別のエラーがメンテナンス中であることを示すエラーである場合、前記エラー文字情報又は前記エラー画面の画像から特定されたメンテナンスの終了時期を前記サーバに再アクセスする時期として設定し、前記第2アクセス手段は、前記設定された時期に基づいて、前記サーバに再アクセスすることを特徴とする。
請求項に記載の発明は、所定のサーバにアクセスする第1アクセスステップと、前記サーバへのアクセスにおいて発生したエラーに関するエラー情報を取得する取得ステップと、前記エラー情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する判定ステップと、前記特定種別のエラーであると判定されたことに応じて、前記サーバに再アクセスする第2アクセスステップと、前記エラー情報に基づいて、前記第2アクセスステップにおいて前記サーバに再アクセスする時期を設定する設定ステップと、をコンピュータに実行させるプログラムであって、前記エラー情報は、前記コンピュータに表示されるエラー画面から抽出されるエラー文字情報と前記サーバに所定の命令を与えるためのソフトウェアのコンソールから得られるエラー文字情報との少なくとも何れか一方と、前記コンピュータに表示されるエラー画面の画像とを含み、前記判定ステップは、前記エラー文字情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第1判定ステップと、前記エラー画面の画像に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第2判定ステップと、を含み、前記第1判定ステップにおいて前記特定種別のエラーであるか否かを判定できない場合に、前記第2判定ステップにおいて前記発生したエラーが特定種別のエラーであるか否かを判定し、前記設定ステップにおいて、前記特定種別のエラーがメンテナンス中であることを示すエラーである場合、前記エラー文字情報又は前記エラー画面の画像から特定されたメンテナンスの終了時期を前記サーバに再アクセスする時期として設定し、前記第2アクセスステップにおいて、前記設定された時期に基づいて、前記サーバに再アクセスすることを特徴とする。
本発明によれば、サーバへのアクセスにおいてエラーが発生した場合に再度のアクセスを適切に制御することができる。
通信システムSの概要構成例を示す図である。 (A)は、オペレータ端末2の概要構成例を示すブロック図であり、(B)は、制御部25における機能ブロック例を示す図である。 (A)~(C)は、エラー画面の例1~3を示す図である。 オペレータ端末2における制御部25の処理の一例を示すフローチャートである。 図4に示すステップS4におけるエラー予測処理の具体例1を示すフローチャートである。 図4に示すステップS4におけるエラー予測処理の具体例2を示すフローチャートである。
以下、図面を参照して本発明の実施形態について説明する。以下の実施の形態は、ウェブサーバ(所定のサーバの一例)を含む通信システムに対して本発明を適用した場合の実施形態であり、ウェブサーバの動作テストを実施する場合を例にとるものとする。
1.通信システムSの構成及び機能概要
先ず、図1等を参照して、本実施形態に係る通信システムSの構成及び機能概要について説明する。図1は、通信システムSの概要構成例を示す図である。図1に示すように、通信システムSは、ウェブサーバ1、及びオペレータ端末2等を含んで構成される。ウェブサーバ1は、ネットワークNW上でウェブサイトを提供するサーバである。ウェブサイトの例として、情報提供サイト、電子商取引サイト、予約サイト、SNS(Social networking service)サイトなどが挙げられるが特に限定されるものではない。オペレータ端末2は、ネットワークNWを介してウェブサーバ1にアクセス可能になっている。ネットワークNWは、例えば、インターネット、移動体通信ネットワーク及びその無線基地局等から構成される。なお、図1の例には、1つのウェブサーバ1を示しているが、本実施形態において動作テストの対象となるウェブサーバは多数存在してもよい。
オペレータ端末2は、ウェブサーバ1の動作テストに用いられる端末であり、オペレータ(例えば、動作テストの実施者)により使用される。オペレータ端末2は、例えば、パーソナルコンピュータ(PC)、スマートフォン、タブレット等が適用可能である。図2(A)は、オペレータ端末2の概要構成例を示すブロック図であり、図2(B)は、制御部25における機能ブロック例を示す図である。図2(A)に示すように、オペレータ端末2は、通信部21、表示部22、操作部23、記憶部24、及び制御部25等を備える。通信部21は、ネットワークNWに接続する機能を有する。通信部21を通じて制御部25はウェブサーバ1にアクセス可能になっている。ウェブサーバ1から送信されたウェブページは通信部21により受信される。かかるウェブページは、例えば、HTML(Hyper Text Markup Language)やXHTML等の構造化文書データにより構成される。
表示部22は、各種画面をディスプレイに表示する機能を有する。例えば予め用意された画面やウェブページの画面が表示部22により表示される。操作部23は、オペレータの操作を受け付ける機能を有する。オペレータの操作には、例えばウェブページに設けられたボタンの指定や、入力欄への文字入力などが含まれ、かかる操作は例えばマウスや指等により行うことができる。ウェブページに設けられたボタンの例として、情報(商品情報含む)を閲覧するためのボタン、情報を検索するためのボタン、商品を購入するためのボタンなどが挙げられる。
記憶部24は、例えば、HDD(Hard Disk Drive)や不揮発性半導体メモリ等からなり、OS(オペレーティングシステム)、ウェブブラウザ、自動テストツール、及びエラー解析プログラム(本発明のプログラムの一例)等のプログラムを記憶する。制御部25(コンピュータの一例)は、CPU(Central Processing Unit),ROM(Read Only Memory),及びRAM(Random Access Memory)等を備える。ここで、自動テストツールは、ウェブサーバ1に所定の命令を与えるためのソフトウェアの一例であり、例えば、ウェブページに設けられたボタンの指定などの操作のシナリオ(一連の手順)を予め記録し、当該シナリオを再生することで当該シナリオに応じた命令を出力(つまり、当該命令をウェブサーバ1に送信)するスクリプトである。かかる命令により、ウェブサーバ1の動作テストを実施することができる。ウェブサーバ1の動作テストには、GUI(Graphical User Interface)テストが含まれる。
エラー解析プログラムは、例えば、制御部25を、第1アクセス部251(第1アクセス手段の一例)、エラー情報取得部252(取得手段の一例)、エラー種別判定部253(判定手段の一例)、及び第2アクセス部254(設定手段及び第2アクセス手段の一例)として機能させるアプリケーションである。第1アクセス部251は、通信部21及びネットワークNWを介してウェブサーバ1にアクセスする。例えば、第1アクセス部251は、ウェブブラウザにウェブサーバ1のURL(Uniform Resource Locator)を設定することでウェブサーバ1にアクセスする。かかるアクセスにおいて、オペレータ端末2とウェブサーバ1との間で接続を確立するための接続確立処理(例えば、ハンドシェイクなど)が行われ、接続確立後に自動テストツールにしたがってテスト処理が実行される。なお、本明細書において「アクセス」とは、接続確立処理の開始からテスト処理が終了するまで(或いは、これらの処理の途中でエラーにより進行不能になるまで)であることを想定している。ただし、「アクセス」とは、接続確立処理の開始から終了まで(或いは、かかる処理の途中で進行不能になるまで)と、テスト処理の開始から終了まで(或いは、かかる処理の途中でエラーにより進行不能になるまで)との何れか一方であってもよい。
エラー情報取得部252は、ウェブサーバ1へのアクセスにおいて発生したエラーを検知すると、当該発生したエラーに関するエラー情報を取得する。ここで、エラーとは、例えば接続確立処理またはテスト処理における何等かの失敗ということができる。エラー情報は、エラー発生時にディスプレイに表示されたエラー画面から抽出されるエラー文字情報(Text data)であってもよいし、当該エラー画面の画像(Image data)であってもよい。エラー文字情報は、エラー画面から文字自体がコピーされたものであってもよいし、エラー画面からOCR(Optical Character Recognition)により文字として認識されたものであってもよい。また、エラー画面の画像とは、エラー画面がキャプチャされたスクリーンショット(以下、「エラー画像」という)である。図3(A)~(C)は、エラー画面の例1~3を示す図である。また、エラー情報は、自動テストツールのコンソールから得られるエラー文字情報(例えば、コンソールエラーメッセージ)であってもよい。自動テストツールのコンソールとは、コンソールユーザインターフェース(換言すると、キャラクタユーザインタフェース)であり、文字情報によりオペレータとの対話を実現するための機能である。
エラー種別判定部253は、エラー情報取得部252により取得されたエラー情報に基づいて、上記発生したエラーが特定種別のエラーであるか否かを判定する。ここで、特定種別のエラーとは、複数種別のエラーのうち、時間が経過することで解消しうる一時的なエラーである。かかる一時的なエラーは、例えば、通信システムS中のどこかが一時的に不安定(例えば、ネットワーク不安定)な状態になることで生じるエラーである。特定種別のエラーの例として、例えば図3(A)に示すようにネットワークNWに接続できないことを示すエラー、ウェブサーバ1で何等かの問題が発生していることを示すエラー(例えば、500 error)、ウェブサーバ1への同時アクセス数の制限を超えていることを示すエラー(例えば、503 error)、図3(B)に示すようにウェブサーバ1がメンテナンス中であることを示すエラー、図3(C)に示すように画像から予測可能な一時的なエラーなどが挙げられる。一方、複数種別のエラーのうち、特定種別のエラー以外のエラーの例として、ウェブサーバ1内のウェブアプリケーションプログラムのバグに起因するエラー、自動テストツールのスクリプトのバグに起因するエラー、自動テストツールで用いられるテストデータ(例えば、無効なテストデータ)やシナリオ(例えば、不適切なシナリオ)に起因するエラーが挙げられる。
また、エラー種別判定部253は、エラー情報取得部252により取得されたエラー情報中にエラー文字情報(つまり、エラー画面から抽出されたエラー文字情報とコンソールから得られたエラー文字情報との少なくとも何れか一方)が含まれる場合、当該エラー文字情報に基づいて、上記発生したエラーが特定種別のエラーであるか否かを判定(第1判定ステップ)するとよい。このとき、例えば予め用意されたエラーリストが参照され、当該エラーリストに登録された文字情報(特定種別のエラーを示すエラー文字情報)と、エラー情報取得部252により取得されたエラー文字情報とが比較されることで、当該判定が行われるとよい。また、エラー種別判定部253は、エラー情報取得部252により取得されたエラー情報中にエラー画像が含まれる場合、当該エラー画像に基づいて、上記発生したエラーが特定種別のエラーであるか否かを判定(第2判定ステップ)してもよい。このとき、予め用意された特定種別のエラー画像が参照され、当該特定種別のエラー画像と、エラー情報取得部252により取得されたエラー画像とが比較されることで、当該判定が行われるとよい。
また、エラー種別判定部253は、エラー文字情報に基づいて特定種別のエラーでないと判定されたことに応じて、エラー画像に基づいて、上記発生したエラーが特定種別のエラーであるか否かを判定するとよい。これにより、エラー文字情報に基づいて特定種別のエラーであると判定されれば、エラー画像に基づくエラー判定を省略することができるので、特定種別のエラーであるか否かの判定の迅速化及び効率化を図ることができる。或いは、エラー種別判定部253は、ウェブサーバ1とウェブサーバ1以外の他のサーバとの少なくとも何れか一方へのアクセスにおいて発生したエラーまたは発生しうるエラーに関するエラー情報として、エラー文字情報とエラー画像とを入力とし、当該エラーが特定種別のエラーであるかについての値を出力とした学習データにより学習(学習データに対して正解ラベルを付けて学習)された学習済みモデルを用いて、特定種別のエラーであるか否かを判定してもよい。これにより、エラーの判定精度を高めることができる。なお、学習済みモデルを生成するための教師ありの機械学習のアルゴリズムは、特に限定されるものではないが、例えば、ディープラーニングのアルゴリズムであるとよい。また、学習済みモデルは、特定種別のエラーであるかについての値が得られることに応じて更新(最適化)される。
第2アクセス部254は、エラー種別判定部253により特定種別のエラーであると判定されたことに応じて、通信部21及びネットワークNWを介してウェブサーバ1に再アクセスする。再アクセスのタイミング(時期)は、特定種別のエラーであると判定された時であってもよいし、特定種別のエラーであると判定された時から所定時間(例えば、10分)経過時であってもよい。或いは、第2アクセス部254は、エラー情報取得部252により取得されたエラー情報に基づいて、ウェブサーバ1に再アクセスする時期を設定(換言すると、特定種別のエラー内容に応じて設定)し、当該設定された時期に基づいて、ウェブサーバ1に再アクセスしてもよい。これにより、再度のアクセスにおいてエラーが発生することを極力回避することができる。
2.通信システムSの動作
次に、図4~図6を参照して、通信システムSにおいて実施される動作の一例について説明する。図4は、オペレータ端末2における制御部25の処理の一例を示すフローチャートである。図5は、図4に示すステップS4におけるエラー予測処理の具体例1を示すフローチャートである。図6は、図4に示すステップS4におけるエラー予測処理の具体例2を示すフローチャートである。
図4に示す処理は、例えば1日1回以上行われるものであり、タイマーにより設定された時刻が到来したときに開始される。図4に示す処理が開始されると、制御部25(第1アクセス部251)は、通信部21及びネットワークNWを介してウェブサーバ1にアクセスする(ステップS1)。かかるアクセスにおいて、上述したように、接続確立処理及びテスト処理が実行され、これらの処理中に何らかのエラーが発生した場合、ウェブサーバ1からエラー情報が送信されるか、或いは、OSや自動テストツールのコンソールからエラー情報が出力される。
次いで、制御部25(第1アクセス部251)は、ウェブサーバ1へのアクセスにおいてエラーが発生したか否かを判定する(ステップS2)。例えば制御部25においてエラー情報が受け付けられた場合にエラーが発生したと判定される。なお、自動テストツールの自動テストが終了したときに得られる実行結果にエラーが示されている場合に、エラーが発生したと判定されてもよい。ウェブサーバ1へのアクセスにおいてエラーが発生したと判定された場合(ステップS2:YES)、処理はステップS3へ進む。一方、ウェブサーバ1へのアクセスにおいてエラーが発生していないと判定された場合(ステップS2:NO)、図4に示す処理が終了するか、または動作テストの対象となる他のウェブサーバについて図4に示す処理が開始される。
ステップS3では、制御部25(エラー情報取得部252)は、上記発生したエラーに関するエラー情報を取得する。つまり、ウェブサーバ1から送信されたエラー情報、或いは、OSや自動テストツールのコンソールから出力されたエラー情報が取得される。なお、自動テストツールの自動テストの実行結果からエラー情報が取得されてもよい。次いで、制御部25(エラー種別判定部253)は、ステップS3で取得されたエラー情報に基づいて、エラー予測処理を実行する(ステップS4)。ここで、図5及び図6のそれぞれに示すエラー予測処理の具体例について説明する。
図5に示すエラー予測処理では、制御部25(エラー種別判定部253)は、ステップS3で取得されたエラー情報中にエラー文字情報が含まれるか否かを判定する(ステップS41)。エラー情報中にエラー文字情報が含まれると判定された場合(ステップS41:YES)、処理はステップS42へ進む。一方、エラー情報中にエラー文字情報が含まれないと判定された場合(ステップS41:NO)、処理はステップS44へ進む。
ステップS42では、制御部25(エラー種別判定部253)は、文字ベースのエラー予測処理を行う。文字ベースのエラー予測処理は、エラー文字情報に基づいて、発生したエラーが何であるかを予測する処理である。この場合、制御部25(エラー種別判定部253)は、例えば、複数種別のエラーのそれぞれを示す文字情報(エラーコードでもよい)を予め登録(例えば、エラーリストに登録)しておき、ステップS3で取得されたエラー情報中のエラー文字情報が登録されているか(例えば、エラー文字情報と一致する文字情報がエラーリストに登録されているか)否かを判定する。
次いで、制御部25(エラー種別判定部253)は、上記発生したエラーを文字ベースで予測できたか否かを判定する(ステップS43)。例えば、ステップS3で取得されたエラー文字情報が登録されている場合、上記発生したエラーが何であるかが予測され、当該エラーが文字ベースで予測できたと判定されて(ステップS43:YES)、図4に示す処理へ戻る。一方、ステップS3で取得されたエラー文字情報が登録されていない場合、上記発生したエラーが何であるかが予測されず、文字ベースでエラーが予測できないと判定されて(ステップS43:NO)、処理はステップS44へ進む。
ステップS44では、制御部25(エラー種別判定部253)は、ステップS3で取得されたエラー情報中にエラー画像が含まれるか否かを判定する。エラー情報中にエラー画像が含まれると判定された場合(ステップS44:YES)、処理はステップS45へ進む。一方、エラー情報中にエラー画像が含まれないと判定された場合(ステップS44:NO)、発生したエラーが何であるかを予測できない旨がオペレータに通知される。その後、図4に示す処理が終了し他の処理へ進むか、または動作テストの対象となる他のウェブサーバについて図4に示す処理が開始される。
ステップS45では、制御部25(エラー種別判定部253)は、画像ベースのエラー予測処理を行う。画像ベースのエラー予測処理は、エラー画像に基づいて、発生したエラーが何であるかを予測する処理である。この場合、制御部25(エラー種別判定部253)は、例えば、複数種別のエラーのそれぞれを示すエラー画像を予め登録しておき、パターン認識アルゴリズムを用いて、当該登録されたエラー画像に現れる特徴パターン(例えば、特徴量)と、ステップS3で取得されたエラー情報中のエラー画像に現れる特徴パターンとを照合することでそれらの類似度が閾値以上であるか否かを判定する。かかるパターン認識アルゴリズムには、教師ありの機械学習(例えば、ディープラーニング)が用いられてもよい。
次いで、制御部25(エラー種別判定部253)は、上記発生したエラーが何であるかを画像ベースで予測できたか否かを判定する(ステップS46)。例えば、ステップS3で取得されたエラー画像との類似度が閾値以上のエラー画像が登録されている場合、上記発生したエラーが何であるかが予測され、当該エラーが画像ベースで予測できたと判定されて(ステップS46:YES)、図4に示す処理へ戻る。一方、ステップS3で取得されたエラー画像との類似度が閾値以上のエラー画像が登録されていない場合、上記発生したエラーが何であるかが予測されず、画像ベースでエラーが予測できないと判定されて(ステップS46:NO)、発生したエラーが何であるかを予測できない旨がオペレータに通知される。その後、図4に示す処理が終了し他の処理へ進むか、または動作テストの対象となる他のウェブサーバについて図4に示す処理が開始される。
一方、図6に示すエラー予測処理では、制御部25(エラー種別判定部253)は、上述した学習データにより学習された最新の学習済みモデルを記憶部24から取得する(ステップS47)。次いで、制御部25(エラー種別判定部253)は、ステップS3で取得されたエラー情報(エラー文字情報とエラー画像との少なくとも何れか一方)を、ステップS47で取得された学習済みモデルに説明変数として入力する(ステップS48)。次いで、制御部25(エラー種別判定部253)は、当該学習済みモデルから目的変数として出力された予測値(上記発生したエラーが特定種別のエラーであるかについての予測値)を取得し(ステップS49)、図4に示す処理へ戻る。つまり、制御部25(エラー種別判定部253)は、ステップS3で取得されたエラー情報と学習済みモデルとから、上記発生したエラーが特定種別のエラーであるかを予測する。なお、上記予測値は、特定種別のエラーであるか否かを示す2値(つまり、0または1)で表されてもよいし、特定種別のエラーであることを示す確率(例えば、80%)で表されてもよい。
図4に示す処理に戻り、制御部25(エラー種別判定部253)は、ステップS4で実行されたエラー予測処理の結果を参照して、上記発生したエラーが特定種別のエラーであるか否かを判定する(ステップS5)。例えば、図5に示すエラー予測処理において予測されたエラーが特定種別のエラーである場合、上記発生したエラーが特定種別のエラーであると判定され(ステップS5:YES)、処理はステップS6へ進む。或いは、図6に示すエラー予測処理において取得された予測値が特定種別のエラーを示す場合、または当該予測値が特定種別のエラーである確率が閾値より高い場合、上記発生したエラーが特定種別のエラーであると判定され(ステップS5:YES)、処理はステップS6へ進む。
ステップS6では、制御部25(第2アクセス部254)は、ステップS3で取得されたエラー情報に基づいて、ウェブサーバ1に再アクセスする時期を設定する。例えば、上記発生した特定種別のエラーがウェブサーバ1で何等かの問題が発生していることを示すエラーであれば、ウェブサーバ1にアクセスする時期が現時点から30分後に設定される。或いは、上記発生した特定種別のエラーがウェブサーバ1への同時アクセス数の制限を超えていることを示すエラーであれば、ウェブサーバ1にアクセスする時期が現時点から60分後に設定される。一方、上記発生した特定種別のエラーがメンテナンス中であることを示すエラーであり、上記取得されたエラー情報からメンテナンスの終了時期を特定できれば、当該終了時期がウェブサーバ1にアクセスする時期として設定される。
次いで、制御部25(第2アクセス部254)は、ステップS6で設定された時期が到来したか否かを判定する(ステップS7)。ステップS6で設定された時期が到来していないと判定された場合(ステップS7:NO)、当該判定は繰り返される。一方、制御部25(第2アクセス部254)は、ステップS6で設定された時期が到来したと判定した場合(ステップS7:YES)、通信部21及びネットワークNWを介してウェブサーバ1に再アクセスする(ステップS8)。かかる再アクセスでは、接続確立処理、または接続確立処理及びテスト処理が実行され、例えばエラーが発生しなくなるまで所定回数リトライされ、エラーが発生しなくなれば、図4に示す処理が終了し他の処理へ進むか、または動作テストの対象となる他のウェブサーバについて図4に示す処理が開始される。
以上説明したように、上記実施形態によれば、ネットワークNWを介してウェブサーバ1へのアクセスにおいて発生したエラーが検知されると、当該発生したエラーに関するエラー情報に基づいて、上記発生したエラーが特定種別のエラーであるか否かが判定され、特定種別のエラーであると判定されたことに応じて、ウェブサーバ1に再アクセスされるように構成したので、ウェブサーバ1へのアクセスにおいてエラーが発生した場合に再度のアクセスを適切に制御することができる。例えば、ウェブサーバ1へのアクセスにおいて発生したエラーが一時的なエラーであれば迅速に再アクセス(リトライ)を実行する一方、早期に解消しないエラーであれば再アクセスを実行しないというように、ウェブサーバ1への再アクセスを適切に制御することができる。過去の統計結果によれば、複数種別のエラーの中で、時間が経過することで解消しうる一時的なエラーの割合は全体の70%程度を占めており最も多い。そのため、上記実施形態のように、発生したエラーの種別が自動的に判定され再度のアクセスが適切に制御されることで、当該発生したエラーの種別をオペレータ(例えば、テスト実施者)側で判断して対応を図る負担を大幅に低減することができる。
なお、以上のように本発明の一実施形態を説明したが、本発明は上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲で上記実施形態から種々構成等に変更を加えてもよく、その場合も本発明の技術的範囲に含まれる。例えば、上記実施形態では、オペレータ端末2からウェブサーバ1に直接アクセスする場合の例を示したが、オペレータ端末2から発信された実施コマンドを受信したテスト実施用サーバが、当該実施コマンドに応じてウェブサーバ1にアクセスする場合にも本発明を適用することができる。この場合、テスト実施用サーバは、ウェブサーバ1へのアクセスにおいて発生したエラーを検知すると、上記実施形態と同様に、当該発生したエラーに関するエラー情報を取得し、当該取得されたエラー情報に基づいて、上記発生したエラーが特定種別のエラーであるか否かを判定し、特定種別のエラーであると判定されたことに応じて、ウェブサーバ1に再アクセスすることになる。
また、上記実施形態においては、ウェブサーバ1の動作テストを実施する場合を例にとって説明したが、本発明はウェブサーバ1の動作テスト以外に対しても適用することができる。例えば、検索サーバがネットワークNW上のクローリングにおいて複数のサーバにアクセスする場合にも本発明を適用することができる。この場合、検索サーバは、クローリング対象のサーバへのアクセスにおいて発生したエラーを検知すると、上記実施形態と同様に、当該発生したエラーに関するエラー情報を取得し、当該取得されたエラー情報に基づいて、上記発生したエラーが特定種別のエラーであるか否かを判定し、特定種別のエラーであると判定されたことに応じて、当該サーバに再アクセスする。そして、再アクセスにおいてエラーが解消されている場合、検索サーバは、次のクローリング対象のサーバにアクセスし、上記と同様の処理を行う。また、上記実施形態においては、特定種別のエラーは、時間が経過することで解消しうる一時的なエラーとしたが、かかるエラー以外のエラーであってもよい。そのようなエラーとして、アクセスされたウェブサーバへの外部(エラーを検知した機器)からの指令(例えば、再起動指令)により解消しうるエラーであってもよい。
1 ウェブサーバ
2 オペレータ端末
21 通信部
22 表示部
23 操作部
24 記憶部
25制御部
251 第1アクセス部
252 エラー情報取得部
253 エラー種別判定部
254 第2アクセス部
NW ネットワーク
S 通信システム

Claims (6)

  1. コンピュータにより実行されるアクセス方法であって、
    所定のサーバにアクセスする第1アクセスステップと、
    前記サーバへのアクセスにおいて発生したエラーに関するエラー情報を取得する取得ステップと、
    前記エラー情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する判定ステップと、
    前記特定種別のエラーであると判定されたことに応じて、前記サーバに再アクセスする第2アクセスステップと、
    前記エラー情報に基づいて、前記第2アクセスステップにおいて前記サーバに再アクセスする時期を設定する設定ステップと、
    を含み、
    前記エラー情報は、前記コンピュータに表示されるエラー画面から抽出されるエラー文字情報と前記サーバに所定の命令を与えるためのソフトウェアのコンソールから得られるエラー文字情報との少なくとも何れか一方と、前記コンピュータに表示されるエラー画面の画像とを含み、
    前記判定ステップは、
    前記エラー文字情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第1判定ステップと、
    前記エラー画面の画像に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第2判定ステップと、
    を含み、
    前記第1判定ステップにおいて前記特定種別のエラーであるか否かを判定できない場合に、前記第2判定ステップにおいて前記発生したエラーが特定種別のエラーであるか否かを判定し、
    前記設定ステップにおいて、前記特定種別のエラーがメンテナンス中であることを示すエラーである場合、前記エラー文字情報又は前記エラー画面の画像から特定されたメンテナンスの終了時期を前記サーバに再アクセスする時期として設定し、
    前記第2アクセスステップにおいて、前記設定された時期に基づいて、前記サーバに再
    アクセスすることを特徴とするアクセス方法。
  2. 前記特定種別のエラーは、時間が経過することで解消しうる一時的なエラーであることを特徴とする請求項1に記載のアクセス方法。
  3. 前記判定ステップにおいて、前記サーバと他のサーバとの少なくとも何れか一方へのアクセスにおいて発生したエラーまたは発生しうるエラーに関するエラー情報を入力とし、当該エラーが特定種別のエラーであるかについての値を出力とした学習データにより学習された学習済みモデルを用いて、前記判定を行うことを特徴とする請求項1または2に記載のアクセス方法。
  4. それぞれの前記ステップは前記サーバの動作テストを行う際に実行されることを特徴とする請求項1乃至3の何れか一項に記載のアクセス方法。
  5. コンピュータと所定のサーバを含む通信システムであって、
    前記コンピュータは、
    前記サーバにアクセスする第1アクセス手段と、
    前記サーバへのアクセスにおいて発生したエラーに関するエラー情報を取得する取得手段と、
    前記エラー情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する判定手段と、
    前記特定種別のエラーであると判定されたことに応じて、前記サーバに再アクセスする第2アクセス手段と、
    前記エラー情報に基づいて、前記第2アクセス手段により前記サーバに再アクセスする時期を設定する設定手段と、
    を備え、
    前記エラー情報は、前記コンピュータに表示されるエラー画面から抽出されるエラー文字情報と前記サーバに所定の命令を与えるためのソフトウェアのコンソールから得られるエラー文字情報との少なくとも何れか一方と、前記コンピュータに表示されるエラー画面の画像とを含み、
    前記判定手段は、
    前記エラー文字情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第1判定手段と、
    前記エラー画面の画像に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第2判定手段と、
    を備え、
    前記第1判定手段により前記特定種別のエラーであるか否かを判定できない場合に、前記第2判定手段により前記発生したエラーが特定種別のエラーであるか否かを判定し、
    前記設定手段は、前記特定種別のエラーがメンテナンス中であることを示すエラーである場合、前記エラー文字情報又は前記エラー画面の画像から特定されたメンテナンスの終了時期を前記サーバに再アクセスする時期として設定し、
    前記第2アクセス手段は、前記設定された時期に基づいて、前記サーバに再アクセスすることを特徴とする通信システム。
  6. 所定のサーバにアクセスする第1アクセスステップと、
    前記サーバへのアクセスにおいて発生したエラーに関するエラー情報を取得する取得ステップと、
    前記エラー情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する判定ステップと、
    前記特定種別のエラーであると判定されたことに応じて、前記サーバに再アクセスする第2アクセスステップと、
    前記エラー情報に基づいて、前記第2アクセスステップにおいて前記サーバに再アクセスする時期を設定する設定ステップと、
    をコンピュータに実行させるプログラムであって、
    前記エラー情報は、前記コンピュータに表示されるエラー画面から抽出されるエラー文字情報と前記サーバに所定の命令を与えるためのソフトウェアのコンソールから得られるエラー文字情報との少なくとも何れか一方と、前記コンピュータに表示されるエラー画面の画像とを含み、
    前記判定ステップは、
    前記エラー文字情報に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第1判定ステップと、
    前記エラー画面の画像に基づいて、前記発生したエラーが特定種別のエラーであるか否かを判定する第2判定ステップと、
    を含み、
    前記第1判定ステップにおいて前記特定種別のエラーであるか否かを判定できない場合に、前記第2判定ステップにおいて前記発生したエラーが特定種別のエラーであるか否かを判定し、
    前記設定ステップにおいて、前記特定種別のエラーがメンテナンス中であることを示すエラーである場合、前記エラー文字情報又は前記エラー画面の画像から特定されたメンテナンスの終了時期を前記サーバに再アクセスする時期として設定し、
    前記第2アクセスステップにおいて、前記設定された時期に基づいて、前記サーバに再アクセスすることを特徴とするプログラム。
JP2021078554A 2021-05-06 2021-05-06 アクセス方法、通信システム、及びプログラム Active JP7216767B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021078554A JP7216767B2 (ja) 2021-05-06 2021-05-06 アクセス方法、通信システム、及びプログラム
US17/733,524 US11977435B2 (en) 2021-05-06 2022-04-29 Access method, communication system, and non-transitory computer readable memory

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021078554A JP7216767B2 (ja) 2021-05-06 2021-05-06 アクセス方法、通信システム、及びプログラム

Publications (2)

Publication Number Publication Date
JP2022172604A JP2022172604A (ja) 2022-11-17
JP7216767B2 true JP7216767B2 (ja) 2023-02-01

Family

ID=83900377

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021078554A Active JP7216767B2 (ja) 2021-05-06 2021-05-06 アクセス方法、通信システム、及びプログラム

Country Status (2)

Country Link
US (1) US11977435B2 (ja)
JP (1) JP7216767B2 (ja)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010273297A (ja) 2009-05-25 2010-12-02 Ntt Docomo Inc 中間サーバ装置、送信サーバ装置、通信システム、及び通信方法
JP2011039807A (ja) 2009-08-12 2011-02-24 Nec Corp 障害要因通知装置、障害要因通知システム、障害要因通知方法および障害要因通知プログラム
JP2012212243A (ja) 2011-03-30 2012-11-01 Ntt Data Corp 監視装置、及び監視方法
JP2017091037A (ja) 2015-11-05 2017-05-25 キヤノン株式会社 システム、管理装置、システムの制御方法、管理装置の制御方法、及びプログラム
US20190149583A1 (en) 2017-11-13 2019-05-16 Mediatek Singapore Pte. Ltd Initial IMS Registration
JP2020135425A (ja) 2019-02-20 2020-08-31 キヤノン株式会社 印刷システム、書誌サーバー、情報処理方法及びプログラム
CN112035341A (zh) 2020-08-11 2020-12-04 北京三快在线科技有限公司 一种自动化测试方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5140633B2 (ja) * 2008-09-04 2013-02-06 株式会社日立製作所 仮想化環境において生じる障害の解析方法、管理サーバ、及びプログラム
US20100157964A1 (en) * 2008-12-18 2010-06-24 Pantech & Curitel Communications, Inc. Server to guide reconnection in mobile internet, method for guiding server reconnection, and server reconnection method
JP6261244B2 (ja) 2013-09-06 2018-01-17 株式会社富士通マーケティング Webアプリケーションテスト装置およびそのプログラム
US10229013B2 (en) * 2016-10-13 2019-03-12 International Business Machines Corporation Generating a health condition message on a health condition detected at a server to send to a host system accessing the server
US10922163B2 (en) * 2018-11-13 2021-02-16 Verizon Patent And Licensing Inc. Determining server error types
WO2022071615A1 (ko) * 2020-09-29 2022-04-07 제이엠사이트 주식회사 장애 예측 방법, 그리고 이를 구현하기 위한 장치

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010273297A (ja) 2009-05-25 2010-12-02 Ntt Docomo Inc 中間サーバ装置、送信サーバ装置、通信システム、及び通信方法
JP2011039807A (ja) 2009-08-12 2011-02-24 Nec Corp 障害要因通知装置、障害要因通知システム、障害要因通知方法および障害要因通知プログラム
JP2012212243A (ja) 2011-03-30 2012-11-01 Ntt Data Corp 監視装置、及び監視方法
JP2017091037A (ja) 2015-11-05 2017-05-25 キヤノン株式会社 システム、管理装置、システムの制御方法、管理装置の制御方法、及びプログラム
US20190149583A1 (en) 2017-11-13 2019-05-16 Mediatek Singapore Pte. Ltd Initial IMS Registration
JP2020135425A (ja) 2019-02-20 2020-08-31 キヤノン株式会社 印刷システム、書誌サーバー、情報処理方法及びプログラム
CN112035341A (zh) 2020-08-11 2020-12-04 北京三快在线科技有限公司 一种自动化测试方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
江村 禎昭,JaSST'21 Tokyo presentation 「Test Automation Improvement by Machine Learning」,Qiita [online],2021年03月15日,https://qiita.com/emurin/items/a98bf86385855878f0ec,[2022年6月28日検索]

Also Published As

Publication number Publication date
JP2022172604A (ja) 2022-11-17
US20220358007A1 (en) 2022-11-10
US11977435B2 (en) 2024-05-07

Similar Documents

Publication Publication Date Title
US9003423B1 (en) Dynamic browser compatibility checker
US20210081309A1 (en) Mapping interactive elements in an application user interface
US11720379B2 (en) Acquisition process of GUI elements using user input
WO2019019628A1 (zh) 移动应用的测试方法、装置、测试设备及介质
CN110955590A (zh) 界面检测方法、图像处理方法、装置、电子设备及存储介质
JP7171811B2 (ja) 監視装置、ショッピングサーバ、監視方法、及びプログラム
JP7216767B2 (ja) アクセス方法、通信システム、及びプログラム
US11403209B2 (en) Rendering GUI test object of application under test to reflect test information
CN111400575B (zh) 用户标识生成方法、用户识别方法及其装置
US9875316B2 (en) Identifying user selection using coordinates and snapshots of webpages
CN111679976A (zh) 一种页面对象的查找方法及装置
JP2021163504A (ja) 情報処理プログラム、情報処理装置及び情報処理方法
JP2018506783A (ja) 要素識別子の生成
JP2016071398A (ja) テスト実行装置、テスト実行方法およびコンピュータプログラム
JP6603178B2 (ja) 表示制御システム、表示制御方法、および表示制御プログラム
CN112839100B (zh) 一种批量中止http请求的方法、设备及存储介质
US20210248206A1 (en) Systems and methods for generating data retrieval steps
JP6353759B2 (ja) テスト実行装置、テスト実行方法およびコンピュータプログラム
CN113505015A (zh) 应用异常信息采集方法、装置、计算机设备和存储介质
CN114764462A (zh) 一种数据抓取方法及装置
CN116264626A (zh) 基于浏览器的视频显示方法、电子设备和可读存储介质
WO2020205363A1 (en) A multi-locator system for tracking data elements in resources
CN116089681A (zh) 数据采集方法、装置、存储介质及计算机设备
CN116974785A (zh) 数据采集方法、装置、设备及存储介质
WO2022266129A1 (en) Machine learning assisted automation of workflows based on observation of user interaction with operating system platform features

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210506

A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20210507

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220902

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221209

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230120

R150 Certificate of patent or registration of utility model

Ref document number: 7216767

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150