JP7282133B2 - ブラウザの表示検証方法、装置、コンピュータ機器及び記憶媒体 - Google Patents

ブラウザの表示検証方法、装置、コンピュータ機器及び記憶媒体 Download PDF

Info

Publication number
JP7282133B2
JP7282133B2 JP2021133660A JP2021133660A JP7282133B2 JP 7282133 B2 JP7282133 B2 JP 7282133B2 JP 2021133660 A JP2021133660 A JP 2021133660A JP 2021133660 A JP2021133660 A JP 2021133660A JP 7282133 B2 JP7282133 B2 JP 7282133B2
Authority
JP
Japan
Prior art keywords
browser
image
rendered
display
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021133660A
Other languages
English (en)
Other versions
JP2021184302A (ja
Inventor
ジュン ジャ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Publication of JP2021184302A publication Critical patent/JP2021184302A/ja
Application granted granted Critical
Publication of JP7282133B2 publication Critical patent/JP7282133B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9577Optimising the visualization of content, e.g. distillation of HTML documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05Geographic models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/41Analysis of document content
    • G06V30/418Document matching, e.g. of document images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Computer Graphics (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Information Transfer Between Computers (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

本願は、画像処理の分野に関し、具体的にはクラウドコンピューティングの分野に関するが、これに限定されなく、特にブラウザの表示検証方法、装置、コンピュータ機器及び記憶媒体に関する。
Web地図は、地理情報のインタラクティブな表示であり、Web地図は通常、Web地図エンジンによりWebGL(Web Graphics Library、ウェブグラフィックスライブラリ)3次元レンダリング技術で描画され得るが、描画が完了してブラウザに表示されるWeb地図は、その正確さが検証できない。
従来技術では、通常、正確さWeb地図エンジンに対してインタフェースレベルの自動化テストを採用してインタフェースパラメータの正確さを検証する。しかしながら、ユーザがアクセスするブラウザ、システム、グラフィックカード及びグラフィックカードドライバが異なるため、インタフェーステストだけでは、描画が完了してブラウザに表示されるWeb地図の正確さを検証することができない。
本願の実施例は、ブラウザの表示検証方法、装置、機器及び記憶媒体を提供する。
第1の態様において、本願の実施例は、ブラウザの表示検証方法を開示し、当該方法は、
ブラウザ要求ページにマッチングする画像描画データをブラウザに提供するステップであって、前記画像描画データがブラウザに提供された後、前記ブラウザにより、前記ブラウザ要求ページに含まれる表示画像に対してローカル描画を行うステップと、
前記画像描画データに対応するブラウザ描画画像を取得するステップと、
前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うステップと、を含む。
第2の態様において、本願の実施例は、ブラウザの表示検証方法を開示し、当該方法は、
ブラウザがサーバによって提供された画像描画データのローカル描画を完了したか否かをリアルタイムで検出するステップと、
はいの場合、前記画像描画データに対応するブラウザ描画画像を取得し、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するステップと、を含む。
第3の態様において、本願の実施例は、ブラウザの表示検証装置を開示し、当該装置は、
ブラウザ要求ページにマッチングする画像描画データをブラウザに提供するための画像描画データ送信モジュールであって、
前記画像描画データがブラウザに提供された後、前記ブラウザにより、前記ブラウザ要求ページに含まれる表示画像に対してローカル描画を行う画像描画データ送信モジュールと、
前記画像描画データに対応するブラウザ描画画像を取得するためのブラウザ描画画像取得モジュールと、
前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うための表示検証モジュールと、を含む。
第4の態様において、本願の実施例は、ブラウザの表示検証装置を開示し、当該装置は、
ブラウザがサーバによって提供された画像描画データのローカル描画を完了したか否かをリアルタイムで検出するための描画完了検出モジュールと、
はいの場合、前記画像描画データに対応するブラウザ描画画像を取得し、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するためのブラウザ描画画像送信モジュールと、を含む。
第5の態様において、本願の実施例は、電子機器を開示し、少なくとも1つのプロセッサと、少なくとも1つのプロセッサと通信可能に接続されるメモリと、を含み、メモリには、少なくとも1つのプロセッサによって実行可能な命令が記憶され、命令は、少なくとも1つのプロセッサが本願の実施例のいずれかに記載のブラウザの表示検証方法を実行できるように、少なくとも1つのプロセッサによって実行される。
第6の態様において、本願の実施例は、コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体を開示し、コンピュータ命令は、コンピュータに本願の実施例のいずれかに記載のブラウザの表示検証方法を実行させる。
第7の態様において、本願の実施例は、コンピュータプログラムを開示し、前記コンピュータプログラムは、コンピュータに本願の実施例のいずれかに記載のブラウザの表示検証方法を実行させる。
本願の実施例に係る技術的解決手段は、ブラウザによって表示された地図の正確さの検証を実現し、地図レンダリング結果の正確さを確保する。
なお、この部分に記載された内容は、本開示の実施例の肝心又は重要な特徴を識別することを意図したものではなく、本開示の範囲を限定することを意図したものでもないことを理解されたい。本開示の他の特徴は、以下の明細書によって容易に理解される。
図面は、本技術案をより良く理解するために使用され、本願を制限するものではない。
本願の実施例1にて提供されるブラウザの表示検証方法のフローチャートである。 本願の実施例2にて提供される別のブラウザの表示検証方法のフローチャートである。 本願の実施例3にて提供される別のブラウザの表示検証方法のフローチャートである。 本願の実施例4にて提供される別のブラウザの表示検証方法のフローチャートである。 本願の実施例5にて提供されるブラウザの表示検証装置の概略構造図である。 本願の実施例6にて提供される別のブラウザの表示検証装置の概略構造図である。 本願の実施例7にて提供されるコンピュータ機器の概略構造図である。
以下、図面をと組み合わせて本願の例示的な実施例を説明し、理解を容易にするために、その中には本願の実施例の様々な詳細が含まれており、それらは単に例示的なものとみなされるべきである。したがって、当業者は、本願の範囲及び精神から逸脱することなく、本明細書に説明される実施例に対して様々な変更及び修正を行うことができることを認識すべきである。同様に、わかりやすくかつ簡潔にするために、以下の説明では、周知の機能及び構成についての説明を省略する。
実施例1
図1は、本願の実施例1にて提供されるブラウザの表示検証方法のフローチャートであり、本願の実施例の技術的解決手段は、ブラウザによってローカル描画された地図画像の正確さを検証する場合に適用することができる。当該方法は、ブラウザの表示検証装置によって実現されてもよく、当該装置は、ソフトウェア及び/又はハードウェアによって実現されてもよく、ブラウザとともに使用するためにサーバに一般に統合される。
図1に示すように、本願の実施例に係る技術的解決手段は、具体的には、以下のステップS110~S130を含む。
S110において、ブラウザ要求ページにマッチングする画像描画データをブラウザに提供する。
ここで、前記画像描画データがブラウザに提供された後、前記ブラウザにより、前記ブラウザ要求ページに含まれる表示画像に対してローカル描画を行う。
ブラウザ要求ページは、ユーザがウェブサイトを入力した後にユーザに表示されるページであり、選択可能に、ブラウザ要求ページは、地図表示ページ、すなわち含まれる表示画像が地図画像であるページであってもよい。それに応じて、画像描画データは、地図画像描画データであってもよい。
ブラウザが画像描画データを受信した後、ローカルな画像レンダリングサービスを呼び出して、画像描画データに基づいて表示画像を描画する。ブラウザが画像描画データに基づいて表示画像に対してローカル描画を行った後、表示画像の正確さ、すなわちブラウザが正常に表示するか否かが確保されていないため、本願の実施例は、ブラウザに対して表示検証を行う。
S120において、前記画像描画データに対応するブラウザ描画画像を取得する。
ここで、ブラウザ描画画像は、サーバによって描画された、画像描画データにマッチングする標準描画画像と照合することにより、ブラウザのローカルな画像レンダリングサービスが正常であるか否か、すなわちブラウザに表示異常があるか否かを判断するために用いられる。ブラウザ描画画像は、画像描画データに基づいてブラウザによってローカル描画された完全な表示画像であってもよいし、表示画像に基づいてランダムな位置をキャプチャして得られた画像であってもよいし、表示画像に基づいて固定位置をキャプチャして得られた画像であってもよい。
ここで、当該ブラウザ描画画像は、ブラウザが表示画像の描画を完了した後、ブラウザによって積極的にサーバに報知されるものであってもよいし、サーバがブラウザから送信された描画完了コマンドを受信した後、サーバによってブラウザに要求して取得されるものであってもよいし、ブラウザ要求ページに内蔵されたコードが、ブラウザが表示画像の描画を完了したことを検出した後、システムに付属のキャンバス画像インタフェースを呼び出すことにより、コードによって直接描画キャンバスから取得されてサーバに提供されるものであってもよいし、ブラウザを介してサーバに提供されるものであってもよいなど、本実施例は、これを限定しない。
S130において、前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行う。
本願の実施例では、ブラウザ描画画像と基準描画画像は、それぞれブラウザによってローカル描画された及びサーバによって描画された、同じ表示内容に対応する画像であるため、ブラウザ描画画像が基準描画画像と大きく異なる場合に、ブラウザに表示異常があると判定することができる。
本願の実施例に係る技術的解決手段は、ブラウザに画像描画データを提供することで、ブラウザが画像描画データに基づいてローカル描画を行ってブラウザ要求ページ内の表示画像を取得し、ブラウザによって描画して取得されたブラウザ描画画像を取得し、ブラウザ描画画像を標準描画画像と照合することにより、ブラウザに対して表示検証を行う。従来技術においてブラウザによって描画して表示される地図画像の正確さを検証できないという問題を解決し、ブラウザによって描画して表示される地図の正確さの検証を実現して、地図レンダリング結果の正確さを確保する。
選択可能に、前記画像描画データに対応するブラウザ描画画像を取得するステップは、前記ブラウザが前記ブラウザ要求ページを実行している時に、前記ブラウザによってトリガーして送信された前記ブラウザ描画画像を受信するステップを含み得て、
ここで、ブラウザ要求ページが、ブラウザが前記画像描画データのローカル描画を完了したことを検出した後、ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出して、前記ブラウザ描画画像を取得して送信するようにブラウザを制御する。
ブラウザ要求ページには、ブラウザがブラウザ要求ページをロードする場合に実行される実行可能なプログラムコードの一部が含まれる。プログラムコードは、実行中にブラウザが画像描画データのローカル描画を完了したか否かを検出し、表示画像の描画が完了した場合に、表示画像に基づいてブラウザ描画画像を取得し、ブラウザ描画画像をサーバに送信するようにブラウザを制御する。
キャンバス画像インタフェースは、画像のクロッピングを行い、スクリーンショット領域の位置情報に基づいて対応するスクリーンショットを取得するために使用され、キャンバス画像インタフェースを使用して表示画像をキャプチャして、ブラウザ描画画像を取得することができる。
さらに、前記画像描画データに対応するブラウザ描画画像を取得するステップは、前記地図画像描画データにマッチングするブラウザ描画画像、前記ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルを取得するステップを含み得て、前記ブラウザ描画画像及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うステップの前に、ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルに基づいて、地図描画データを取得するステップと、前記地図描画データに基づいてサーバ描画を行って、標準描画画像を取得するステップと、をさらに含み得る。
ここで、地図座標範囲は、ブラウザ描画画像に対応する地理情報であり、地図レベルは、ブラウザ描画画像の階層であり、ブラウザ描画画像の縮尺、すなわち、図上距離が実際の距離より縮小する度合いを反映する。地図描画データは、ブラウザ描画画像のサイズ、ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルなどを含み得て、地図描画データは、サーバがブラウザ描画画像に対応する地理的位置、サイズ、階層が同じの標準描画画像を描画するようにする。標準描画画像は、サーバによって基本的なレンダリングサービスを呼び出して、地図描画データに基づいて描画して得られた画像である。
本願の実施例では、ブラウザは、ブラウザ描画画像をサーバにフィードバックするとともに、ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルを一緒にサーバにフィードバックする。サーバは、ブラウザ描画画像、地図座標範囲及び地図レベルに基づいて、地図描画データを構成することで、地図描画データに基づいてサーバ描画を行って、標準描画画像を取得し、ブラウザ描画画像と照合して、ブラウザに表示異常があるか否かを判断する。
実施例2
図2は、本願の実施例2における別のブラウザの表示検証方法のフローチャートであり、本実施例は、上記実施例に基づいて、ブラウザ描画画像を取得するプロセス、及びブラウザ描画画像と標準描画画像とに基づいてブラウザの表示検証を行うプロセスをさらに具体化し、ブラウザ要求ページをブラウザにフィードバックするステップ、及びブラウザに表示異常がある場合の処理プロセスを追加する。
それに応じて、図2に示すように、本願の実施例に係る技術的解決手段は、具体的には、以下のステップS210~S2130を含む。
S210において、ブラウザのページ取得要求を受信したか否かを判断し、はいの場合、S220を実行し、いいえの場合、S210を実行する。ブラウザは、ユーザによって入力されたウェブサイトを取得してからブラウザ要求ページを表示するまでのプロセスで、まず、ページ取得要求をサーバに送信する必要がある。サーバは、ブラウザのページ取得要求を受信した後、ブラウザがブラウザ要求ページをロードするように、ブラウザ要求ページをブラウザにフィードバックする。
選択可能に、ブラウザ要求ページに実行可能なプログラムコードの一部を追加でき、この実行可能なプログラムコードは、ブラウザがブラウザ要求ページをロードした時に実行を開始し、ブラウザ内で画像描画データ取得要求を送信し、ブラウザが画像描画データに基づいてローカル描画を行うプロセスで、ブラウザの画像のローカル描画状態を検出し、表示画像のローカル描画が完了したことを検出した時に、表示画像に基づいてブラウザ描画画像をキャプチャし、ブラウザ描画画像をサーバに送信するようにブラウザを制御するという機能を発揮する。
S220において、前記ページ取得要求にマッチングするブラウザ要求ページを前記ブラウザにフィードバックする。
S230において、ブラウザ要求ページにマッチングする画像描画データをブラウザに提供する。
ブラウザがブラウザ要求ページを取得した後、ブラウザ要求ページの実行中に画像描画データ取得要求をサーバに送信し、サーバがブラウザ要求ページにマッチングする画像描画データをブラウザにフィードバックする。
前記ブラウザ要求ページは地図表示ページであり、前記画像描画データは地図画像描画データである。
S240において、前記地図画像描画データにマッチングするブラウザ描画画像、前記ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルを取得する。
S250において、ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルに基づいて、地図描画データを取得する。
S260において、前記地図描画データに基づいてサーバ描画を行って、標準描画画像を取得する。
S270において、前記ブラウザ描画画像と、前記画像描画データにマッチングする標準描画画像との間の画像類似度を計算する。
本願の実施例では、画像類似度を計算することにより、ブラウザ描画画像と標準描画画像との照合を行い、画像類似度が閾値よりも大きい場合は、ブラウザ描画画像と標準描画画像とが大差がなく、ブラウザのローカルレンダリングサービスが正常に動作し、ブラウザの表示が正常であることを示す。しかしながら、画像類似度が閾値以下である場合は、ブラウザ描画画像と標準描画画像とが大きく異なり、ブラウザに表示異常があることを示す。
S280において、前記画像類似度が予め設定された閾値以下であるか否かを判断し、はいの場合、S290を実行し、いいえの場合、S210を実行する。
S290において、前記ブラウザに表示異常があると決定する。
S2100において、前記ブラウザから送信された新規ページ取得要求を受信したか否かを判断し、はいの場合、S2110を実行し、いいえの場合、S2100に戻る。
新規ページ取得要求は、ブラウザに表示異常があることが確認された後に、ブラウザによってサーバに送信された新規のページ取得要求である。
本願の実施例では、ブラウザに表示異常があることが確認された場合、ブラウザによりローカル画像レンダリングサービスを呼び出してローカル描画を継続することは適合せず、新規のブラウザ要求ページにおける表示画像に対してサーバ描画を行うことができる。このため、新規ページ取得要求をリアルタイムで検出する必要がある。
S2110において、前記新規ページ取得要求にマッチングするターゲット要求ページを取得する。
ターゲット要求ページは、新規ページ取得要求にマッチングするページであり、ブラウザがターゲット要求ページをロードする時に、ブラウザに表示異常があると決定したため、画像描画データに基づいてローカル描画を継続すると、誤った描画結果が得られるため、サーバによりターゲット要求ページに含まれる表示画像を描画して得る必要がある。
S2120において、前記ターゲット要求ページにマッチングする画像描画データを使用して、前記ターゲット要求ページに含まれる表示画像に対してサーバ描画を行った後、ターゲット描画画像を取得する。
S2130において、前記ターゲット描画画像を前記新規ページ取得要求のフィードバック結果として前記ブラウザに提供する。S2100を実行する。
本願の実施例では、ブラウザに表示異常があることが確認されたため、ブラウザによりローカル画像レンダリングサービスを呼び出して、新規ページ取得要求に対応するターゲット要求ページに含まれる表示画像に対してローカル描画を継続することは適合せず、サーバにより基本的なレンダリングサービスを呼び出してサーバ描画を行って、正しいターゲット描画画像を取得し、ターゲット描画画像をブラウザにフィードバックして、ターゲット要求ページに表示することにより、地図レンダリング結果の正確さを確保することができる。
なお、S2100~S2130は、ブラウザに表示異常があることが確認された後の処理方式の1つに過ぎず、ブラウザにプロンプトウィンドウをポップアップ表示するなどの方式で、ユーザにブラウザのバージョンアップやグラフィックカードドライバのバージョンアップなどのプロンプトを行うことで、ユーザがブラウザの表示異常を早急に解決し、それにより、他の次元から、ブラウザの地図レンダリング結果の正確さを確保することができる。
本願の実施例に係る技術的解決手段は、ブラウザ要求ページ及び画像描画データをブラウザに提供することにより、ブラウザがブラウザ要求ページを実行している時に、画像描画データに基づいて生成されて送信されたブラウザ描画画像を受信し、ブラウザ描画画像にマッチングする地図描画データに基づいてサーバ描画を行って標準描画画像を生成し、ブラウザ描画画像と標準描画画像との類似度が閾値以下である場合、その後に受信された新規ページ取得要求のいずれに対しても、サーバにより新規要求ページに対応する画像描画データに基づいてサーバ描画を行い、サーバにより描画して得られたターゲット描画画像を直接ブラウザにフィードバックして表示する。従来技術においてブラウザによって描画して表示される地図画像の正確さを検証できないという問題を解決し、ブラウザによって描画して表示される地図の正確さの検証を実現し、ブラウザに表示異常がある場合に、直接サーバにより地図レンダリングを行うことで、地図レンダリング結果の正確さを確保する。
実施例3
図3は、本願の実施例3にて提供される別のブラウザの表示検証方法のフローチャートであり、本願の実施例に係る技術的解決手段は、ブラウザによってローカル描画されたブラウザ描画画像をサーバに提供して正確さの検証を行う場合に適用することができる。当該方法は、ブラウザの表示検証装置によって実現されてもよく、当該装置は、ソフトウェア及び/又はハードウェアによって実現されてもよく、ブラウザとともに使用するためにサーバに一般に統合される。
S310において、ブラウザがサーバにより提供された画像描画データのローカル描画を完了したか否かを判断し、はいの場合、S320を実行し、いいえの場合、S310に戻る。
ここで、前記画像描画データは、地図画像描画データであってもよい。
本願の実施例では、当該方法は、サーバからブラウザに送信されたブラウザ要求ページに含まれる実行可能なプログラムコードの一部によって実行できる。プログラムコードの実行中に、ブラウザが画像描画データのローカル描画を完了したことを検出すると、ローカル描画された表示画像をキャプチャしてブラウザ描画画像を取得し、ブラウザ描画画像をサーバに送信するようにブラウザを制御する。
S320において、前記画像描画データに対応するブラウザ描画画像を取得し、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御する。
選択可能に、前記画像描画データに対応するブラウザ描画画像を取得し、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するステップは、ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出し、前記画像描画データに対応するブラウザ描画画像を取得するように前記ブラウザを制御するステップと、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するステップと、を含み得る。
本願の実施例では、キャンバス画像インタフェースを介して、表示画像をキャプチャして、ブラウザ描画画像を取得することができる。
本願の実施例に係る技術的解決手段は、ブラウザがサーバから送信された画像描画データに基づいて画像に対してローカル描画を行う状態をリアルタイムで検出することにより、ローカル描画が完了した後、ブラウザ描画画像をサーバに提供して、ブラウザ描画画像の正確さの検証を行う。従来技術においてブラウザによって描画して表示される地図画像の正確さを検証できないという問題を解決し、ブラウザ描画画像をサーバに提供することにより、サーバがブラウザによって描画して表示される地図画像の正確さを検証する効果を実現し、地図レンダリング結果の正確さを確保する。
実施例4
図4は、本願の実施例4にて提供される別のブラウザの表示検証方法のフローチャートであり、本実施例は、上記実施例に基づいて、画像描画データに基づいてブラウザ描画画像を取得するプロセス、及びブラウザ描画画像をサーバに送信するプロセスをさらに具体化する。
それに応じて、図4に示すように、本願の実施例に係る技術的解決手段は、具体的には、以下のステップS410~S430を含む。
S410において、ブラウザがサーバによって提供された画像描画データのローカル描画を完了したか否かをリアルタイムで検出し、はいの場合、S420を実行し、いいえの場合、S410に戻る。
S420において、ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出し、前記画像描画データに対応するブラウザ描画画像を取得するように前記ブラウザを制御する。
それに応じて、S420は、S421~S423を含み得る。
S421において、前記ブラウザによってローカル描画された表示画像において、局所的なスクリーンショット領域を選択する。
局所的なスクリーンショット領域をランダムに選択してもよいし、局所的なスクリーンショット領域のキャンバス位置情報を予め設定してもよく、本実施例は、これを限定しない。
S422において、前記ブラウザ内で前記局所的なスクリーンショット領域のキャンバス位置情報を前記キャンバス画像インタフェースに提供する。
キャンバス位置情報は、表示画像における局所的なスクリーンショット領域の位置座標範囲であり、キャンバス画像インタフェースは、局所的なスクリーンショット領域のキャンバス位置情報に基づいて、表示画像に対して画像キャプチャし、取得された局所的なスクリーンショット結果がブラウザ描画画像である。
S423において、前記キャンバス画像インタフェースからフィードバックされた局所的なスクリーンショット結果を、ブラウザ描画画像として取得するように前記ブラウザを制御する。
S430において、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御する。
それに応じて、S430は、S431~S433を含み得る。
S431において、前記表示画像にマッチングする地図座標範囲、及び前記表示画像における前記ブラウザ描画画像の位置に基づいて、前記ブラウザ描画画像にマッチングする地図座標範囲を決定する。
ブラウザ描画画像は、表示画像に基づいてキャプチャされたものであるので、表示画像の地図座標範囲、及び表示画像におけるブラウザ描画画像の位置に基づいて、ブラウザ描画画像の地図座標範囲を決定することができる。
S432において、前記ブラウザの表示構成情報に基づいて地図レベルを取得する。
地図レベルは、表示画像の基本構成情報であり、画面の画素点と実際の距離との間のサイズ対応関係と理解されてもよく、ブラウザの表示構成情報から取得できる。
S433において、前記ブラウザ描画画像、前記ブラウザ描画画像にマッチングする地図座標範囲及び前記地図レベルを前記サーバに送信するように前記ブラウザを制御する。
ブラウザがブラウザ描画画像、地図座標範囲及び地図レベルをサーバに送信して、サーバが上記のデータに基づいてサーバ描画を行って標準描画画像を取得することにより、標準描画画像とブラウザ描画画像との照合に基づいて、ブラウザに対して表示検証を行う。
本願の実施例では、ブラウザが表示画像を含むブラウザ要求ページをサーバに要求した後、サーバは、まずブラウザ要求ページをブラウザに返信し、ブラウザ要求ページには実行可能なプログラムコードの一部が含まれ、ブラウザがブラウザ要求ページをロードする場合、実行可能なプログラムコードが実行される。実行可能なプログラムコードが実行されるプロセスで、ブラウザが画像描画データ取得要求をサーバに送信し、サーバがブラウザ要求ページにマッチングする画像描画データをブラウザに提供する。ブラウザは、画像描画データを受信する時に、画像描画データに基づいてローカル描画を行って、表示画像を生成する。実行可能なプログラムコードがブラウザによる表示画像の生成を検出した場合、キャンバス画像インタフェースを介してブラウザ描画画像をスクリーンショットして取得し、ブラウザ描画画像及び地図描画データをサーバにフィードバックするようにブラウザを制御し、サーバが地図描画データに基づいてサーバ描画を行って標準描画画像を生成し、ブラウザ描画画像と標準描画画像とを照合してブラウザに表示異常があるか否かを判断する。
本願の実施例に係る技術的解決手段は、ブラウザがサーバから送信された画像描画データに基づいて画像に対してローカル描画を行う状態をリアルタイムで検出し、ローカル描画が完了した後、ブラウザ内でキャンバス画像インタフェースを呼び出してブラウザ描画画像をスクリーンショットして取得し、ブラウザ描画画像の地図座標範囲及び地図レベルを取得し、ブラウザ描画画像、地図座標範囲及び地図レベルをサーバに提供することにより、ブラウザ描画画像の正確さの検証を行う。従来技術においてブラウザによって描画して表示される地図画像の正確さを検証できないという問題を解決し、ブラウザ描画画像をサーバに提供することにより、サーバがブラウザによって描画して表示される地図画像の正確さを検証する効果を実現し、地図レンダリング結果の正確さを確保する。
実施例5
図5は、本願の実施例5におけるブラウザの表示検証装置の概略構造図であり、当該装置は、ソフトウェア及び/又はハードウェアによって実現されてもよく、ブラウザとともに使用するためにサーバに一般に統合される。当該装置500は、画像描画データ送信モジュール510と、ブラウザ描画画像取得モジュール520と、表示検証モジュール530と、を含み、ここで、
画像描画データ送信モジュール510は、ブラウザ要求ページにマッチングする画像描画データをブラウザに提供するために用いられ、
ここで、前記画像描画データがブラウザに提供された後、前記ブラウザにより、前記ブラウザ要求ページに含まれる表示画像に対してローカル描画を行い、
ブラウザ描画画像取得モジュール520は、前記画像描画データに対応するブラウザ描画画像を取得するために用いられ、
表示検証モジュール530は、前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うために用いられる。
本願の実施例に係る技術的解決手段は、ブラウザに画像描画データを提供することで、ブラウザが画像描画データに基づいてローカル描画を行ってブラウザ要求ページにおける表示画像を取得し、ブラウザによって描画して得られたブラウザ描画画像を取得し、ブラウザ描画画像を標準描画画像と照合することにより、ブラウザに対して表示検証を行う。従来技術においてブラウザによって描画して表示される地図画像の正確さを検証できないという問題を解決し、ブラウザによって描画して表示される地図の正確さの検証を実現して、地図レンダリング結果の正確さを確保する。
上記実施例に基づいて、前記装置500は、
ブラウザのページ取得要求に応答して、前記ページ取得要求にマッチングするブラウザ要求ページを前記ブラウザにフィードバックするためのブラウザ要求ページフィードバックモジュールをさらに含み、
前記ブラウザ描画画像取得モジュール520は、
前記ブラウザが前記ブラウザ要求ページを実行している時に、前記ブラウザによってトリガーして送信された前記ブラウザ描画画像を受信するためのブラウザ描画画像受信ユニットを含み、
ここで、ブラウザ要求ページが、ブラウザが前記画像描画データのローカル描画を完了したことを検出した後、ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出して、前記ブラウザ描画画像を取得して送信するようにブラウザを制御する。
上記実施例に基づいて、前記表示検証モジュール530は、
前記ブラウザ描画画像と前記画像描画データにマッチングする標準描画画像との間の画像類似度を計算するための画像類似度計算ユニットと、
前記画像類似度が予め設定された閾値以下である場合、前記ブラウザに表示異常があると決定するための表示異常決定ユニットと、を含む。
上記実施例に基づいて、前記装置500は、
前記ブラウザに表示異常があると決定された場合、前記ブラウザから送信された新規ページ取得要求を受信する時に、前記新規ページ取得要求にマッチングするターゲット要求ページを取得するためのターゲット要求ページ取得モジュールと、
前記ターゲット要求ページにマッチングする画像描画データを使用して、前記ターゲット要求ページに含まれる表示画像に対してサーバ描画を行った後、ターゲット描画画像を取得するためのターゲット描画画像取得モジュールと、
前記ターゲット描画画像を、前記新規ページ取得要求のフィードバック結果として前記ブラウザに提供するためのフィードバック結果送信モジュールと、をさらに含む。
上記実施例に基づいて、前記ブラウザ要求ページは、地図表示ページであり、前記画像描画データは、地図画像描画データである。
上記実施例に基づいて、前記ブラウザ描画画像取得モジュール520は、
前記地図画像描画データにマッチングするブラウザ描画画像、前記ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルを取得するためのデータ取得ユニットを含み、
前記装置は、
ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルに基づいて、地図描画データを取得するための地図描画データ取得モジュールと、
前記地図描画データに基づいてサーバ描画を行って、標準描画画像を取得するための標準描画画像取得モジュールと、をさらに含む。
本願の実施例にて提供されるブラウザの表示検証装置は、本願の任意の実施例にて提供されるブラウザの表示検証方法を実行することができ、方法を実行することに対応する機能モジュールと有益な効果を備える。
実施例6
図6は、本願の実施例6にて提供される別のブラウザの表示検証装置の概略構造図であり、当該装置は、ソフトウェア及び/又はハードウェアによって実現されてもよく、ブラウザとともに使用するためにサーバに一般に統合される。当該装置600は、描画完了検出モジュール610と、ブラウザ描画画像送信モジュール620とを含み、ここで、
描画完了検出モジュール610は、ブラウザがサーバによって提供された画像描画データのローカル描画を完了したか否かをリアルタイムで検出するために用いられ、
ブラウザ描画画像送信モジュール620は、はいの場合、前記画像描画データに対応するブラウザ描画画像を取得して前記サーバに送信するように前記ブラウザを制御するために用いられる。
本願の実施例に係る技術的解決手段は、ブラウザがサーバから送信された画像描画データに基づいて画像に対してローカル描画を行う状態をリアルタイムで検出し、ローカル描画が完了した後、ブラウザ描画画像をサーバに提供することで、ブラウザ描画画像の正確さの検証を行う。従来技術においてブラウザによって描画して表示される地図画像の正確さを検証できなかったいという問題を解決し、ブラウザ描画画像をサーバに提供することにより、サーバがブラウザによって描画して表示される地図画像の正確さを検証する効果を実現し、地図レンダリング結果の正確さを確保する。
上記実施例に基づいて、前記ブラウザ描画画像送信モジュール620は、
ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出し、前記画像描画データに対応するブラウザ描画画像を取得するように前記ブラウザを制御するためのキャンバス画像インタフェース呼び出しユニットと、
前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するためのブラウザ描画画像送信ユニットと、を含む。
上記実施例に基づいて、前記画像描画データは、地図画像描画データである。
上記実施例に基づいて、前記キャンバス画像インタフェース呼び出しユニットは、
前記ブラウザによってローカル描画された表示画像において、局所的なスクリーンショット領域を選択し、
前記ブラウザ内で前記局所的なスクリーンショット領域のキャンバス位置情報を前記キャンバス画像インタフェースに提供し、
前記キャンバス画像インタフェースからフィードバックされた局所的なスクリーンショット結果を、ブラウザ描画画像として取得するように前記ブラウザを制御するために用いられる。
上記実施例に基づいて、前記ブラウザ描画画像送信ユニットは、
前記表示画像にマッチングする地図座標範囲、及び前記表示画像における前記ブラウザ描画画像の位置に基づいて、前記ブラウザ描画画像にマッチングする地図座標範囲を決定し、
前記ブラウザの表示構成情報に基づいて地図レベルを取得し、
前記ブラウザ描画画像、前記ブラウザ描画画像にマッチングする地図座標範囲及び前記地図レベルを前記サーバに送信するように前記ブラウザを制御するために用いられる。
本願の実施例にて提供されるブラウザの表示検証装置は、本願の任意の実施例にて提供されるブラウザの表示検証方法を実行することができ、方法を実行することに対応する機能モジュールと有益な効果を備える。
実施例7
本願の実施例によれば、本願の実施例は、電子機器及び読み取り可能な記憶媒体をさらに提供する。
本願の実施例によれば、本願は、コンピュータプログラムを提供し、コンピュータプログラムは、コンピュータに本願によって提供されるブラウザの表示検証方法を実行させる。
図7に示すように、それは本願の実施例に係るブラウザの表示検証方法の電子機器のブロック図である。電子機器は、例えば、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレームコンピュータ、及び他の適切なコンピュータなどの様々な形態のデジタルコンピュータを表すことが意図される。電子機器は、パーソナルデジタルプロセッシング、携帯電話、スマートフォン、ウェアラブル機器、及び他の同様のコンピューティング装置などの様々な形態のモバイル装置を表すこともできる。本明細書に示されるコンポーネント、それらの接続及び関係、並びにそれらの機能は、単なる例であり、本明細書に記述及び/又は要求される本願の実現を限定することを意図しない。
図7に示すように、当該電子機器は、1つ又は複数のプロセッサ401と、メモリ402と、高速インタフェースと低速インタフェースとを含むインタフェースであって、各コンポーネントを接続するためのインタフェースとを含む。各コンポーネントは、異なるバスで接続され、共通のマザーボードに実装されてもよいし、又は必要に応じて他の方式で実装されてもよい。プロセッサは、外部入力/出力装置(例えば、インタフェースに結合されたディスプレイ機器)にGUIのグラフィック情報を表示するためにメモリ中又はメモリ上に記憶されている命令を含む命令であって、電子機器内で実行される命令を処理することができる。他の実施形態では、必要に応じて、複数のプロセッサ及び/又は複数のバスを複数のメモリと共に使用することができる。同様に、それぞれが一部の必要な動作(例えば、サーバアレイ、ブレードサーバ群、又はマルチプロセッサシステムとする)を提供する複数の電子機器を接続することができる。図7では、1つのプロセッサ401を例にする。
メモリ402は、本願にて提供される非一時的なコンピュータ読み取り可能な記憶媒体である。ここで、前記メモリには、少なくとも1つのプロセッサが本願にて提供されるブラウザの表示検証方法を実行するように、少なくとも1つのプロセッサによって実行可能な命令が記憶されている。本願の非一時的なコンピュータ読み取り可能な記憶媒体には、コンピュータに本願にて提供されるブラウザの表示検証方法を実行させるためのコンピュータ命令が記憶されている。
メモリ402は、非一時的なコンピュータ読み取り可能な記憶媒体として、本願の実施例におけるブラウザの表示検証方法に対応するプログラム命令/モジュール(例えば、図5に示される画像描画データ送信モジュール510、ブラウザ描画画像取得モジュール520及び表示検証モジュール530、又は図6に示される描画完了検出モジュール610及びブラウザ描画画像送信モジュール620)のような、非一時的なソフトウェアプログラム、非一時的なコンピュータ実行可能なプログラム及びモジュールを記憶する。プロセッサ401は、メモリ402に記憶されている非一時的なソフトウェアプログラム、命令及びモジュールを実行することで、サーバの様々な機能アプリケーション及びデータ処理を実行し、すなわち、上記の方法の実施例におけるブラウザの表示検証方法を実現する。
メモリ402は、プログラム記憶領域とデータ記憶領域とを含み得て、ここで、プログラム記憶領域は、オペレーティングシステム、少なくとも1つの機能に必要なアプリケーションプログラムを記憶することができ、データ記憶領域は、電子機器の使用によって作成されたデータなどを記憶することができる。また、メモリ402は、高速ランダムアクセスメモリを含み得て、非一時的なメモリをさらに含み得て、例えば、少なくとも1つの磁気ディスクストレージデバイス、フラッシュメモリデバイス、又は他の非一時的なソリッドステートストレージデバイスである。いくつかの実施例では、メモリ402は、プロセッサ401に対して遠隔に配置されたメモリを選択的に含むことができ、これらの遠隔メモリは、ネットワークを介して電子機器に接続されることができる。上記のネットワークの例としては、インターネット、イントラネット、ローカルエリアネットワーク、移動通信ネットワーク、及びそれらの組み合わせを含むが、これらに限定されない。
電子機器は、入力装置403と出力装置404とをさらに含み得る。プロセッサ401、メモリ402、入力装置403、及び出力装置404は、バス又は他の方式で接続することができ、図7では、バスによる接続を例にする。
入力装置403は、入力された数字又は文字情報を受信し、電子機器のユーザ設定及び機能制御に関連するキー信号入力を生成することができ、例えば、タッチパネル、キーパッド、マウス、トラックパッド、タッチパッド、ポインティングスティック、1つ又は複数のマウスボタン、トラックボール、ジョイスティックなどの入力装置である。出力装置404は、表示機器、補助照明装置(例えば、LED)、及び触覚フィードバック装置(例えば、振動モータ)などを含み得る。当該表示機器は、液晶ディスプレイ(LCD)、発光ダイオード(LED)ディスプレイ、及びプラズマディスプレイを含み得るが、これらに限定されない。いくつかの実施形態では、表示機器はタッチパネルであってもよい。
本明細書で説明されるシステム及び技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、決定用途向けASIC(決定用途向け集積回路)、コンピュータハードウェア、ファームウェア、ソフトウェア、及び/又はそれらの組み合わせで実現することができる。これらの様々な実施形態は、1つ又は複数のコンピュータプログラムで実施され、当該1つ又は複数のコンピュータプログラムは、少なくとも1つのプログラマブルプロセッサを含むプログラム可能なシステムで実行及び/又は解釈されることができ、当該プログラマブルプロセッサは、専用又は汎用のプログラマブルプロセッサであってもよく、記憶システム、少なくとも1つの入力装置、及び少なくとも1つの出力装置からデータ及び命令を受信し、データ及び命令を当該記憶システム、当該少なくとも1つの入力装置、及び当該少なくとも1つの出力装置に伝送することができる。
これらのコンピューティングプログラム(プログラム、ソフトウェア、ソフトウェアアプリケーション、又はコードとも呼ばれる)は、プログラマブルプロセッサの機械命令を含み、高度プロセス及び/又はオブジェクト指向プログラミング言語、及び/又はアセンブリ/機械言語で実施される。本明細書で使用されるような、「機械読み取り可能な媒体」及び「コンピュータ読み取り可能な媒体」という用語は、機械命令及び/又はデータをプログラマブルプロセッサに提供するための任意のコンピュータプログラム製品、機器、及び/又は装置(例えば、磁気ディスク、光ディスク、メモリ、プログラマブルロジックデバイス(PLD))を指し、機械読み取り可能な信号である機械命令を受信する機械読み取り可能な媒体を含む。「機械読み取り可能な信号」という用語は、機械命令及び/又はデータをプログラマブルプロセッサに提供するための任意の信号を指す。
ユーザとのインタラクションを提供するために、ここで説明されるシステム及び技術をコンピュータ上で実施することができ、当該コンピュータは、ユーザに情報を表示するための表示装置(例えば、CRT(陰極線管)又はLCD(液晶ディスプレイ)モニタ)と、キーボード及びポインティングデバイス(例えば、マウス又はトラックボール)とを有し、ユーザは、当該キーボード及び当該ポインティングデバイスによって入力をコンピュータに提供することができる。他の種類の装置も、ユーザとのインタラクションを提供することができ、例えば、ユーザに提供されるフィードバックは、任意の形態のセンシングフィードバック(例えば、視覚フィードバック、聴覚フィードバック、又は触覚フィードバック)であってもよく、任意の形態(音響入力、音声入力、又は触覚入力を含む)でユーザからの入力を受信することができる。
ここで説明されるシステム及び技術は、バックエンドコンポーネントを含むコンピューティングシステム(例えば、データサーバとする)、又はミドルウェアコンポーネントを含むコンピューティングシステム(例えば、アプリケーションサーバ)、又はフロントエンドコンポーネントを含むコンピューティングシステム(例えば、グラフィカルユーザインタフェース又はウェブブラウザを有するユーザコンピュータであり、ユーザは、当該グラフィカルユーザインタフェース又は当該ウェブブラウザによってここで説明されるシステム及び技術の実施形態とインタラクションする)、又はこのようなバックエンドコンポーネント、ミドルウェアコンポーネント、又はフロントエンドコンポーネントの任意の組み合わせを含むコンピューティングシステムで実施することができる。任意の形態又は媒体のデジタルデータ通信(例えば、通信ネットワーク)によってシステムのコンポーネントを相互に接続することができる。通信ネットワークの例は、ローカルエリアネットワーク(LAN)と、ワイドエリアネットワーク(WAN)と、インターネットとを含む。
コンピュータシステムは、クライアント及びサーバを含み得る。クライアントとサーバは、一般に、互いに離れており、通常、通信ネットワークを介してインタラクションする。対応するコンピュータ上で実行され、互いにクライアント-サーバの関係を有するコンピュータプログラムによって、クライアントとサーバとの関係が生成される。サーバは、クラウドコンピューティングサーバ又はクラウドホストとも呼ばれるクラウドサーバであってもよく、従来の物理ホスト及びVPSサービスの困難な管理と弱いビジネススケーラビリティを解決するためのクラウドコンピューティングサービスシステムのホスト製品である。
なお、上記に示される様々な形態のフローを使用して、ステップを並べ替え、追加、又は削除することができることが理解されたい。例えば、本願に記載されている各ステップは、並列に実行されてもよいし、順次的に実行されてもよいし、異なる順序で実行されてもよいが、本願で開示されている技術的解決手段が所望の結果を実現することができれば、本明細書では限定しない。
上記の具体的な実施形態は、本願の保護範囲を限定するものではない。当業者であれば、設計要件と他の要因に基づいて、様々な修正、組み合わせ、サブコンビネーション、及び代替を行うことができる。本願の精神と原則内で行われる任意の修正、同等の置換、及び改善などは、いずれも本願の保護範囲内に含まれるべきである。

Claims (15)

  1. ブラウザの表示検証装置によって実行されるブラウザの表示検証方法であって、
    ブラウザ要求ページにマッチングする画像描画データをブラウザに提供するステップであって、前記画像描画データがブラウザに提供された後、前記ブラウザにより、前記ブラウザ要求ページに含まれる表示画像に対してローカル描画を行うステップと、
    前記画像描画データに対応するブラウザ描画画像を取得するステップと、
    前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うステップと、を含
    前記ブラウザに対して表示検証を行うステップの後に、
    前記ブラウザに表示異常があると決定された場合、前記ブラウザから送信された新規ページ取得要求を受信した時に、前記新規ページ取得要求にマッチングするターゲット要求ページを取得するステップと、
    前記ターゲット要求ページにマッチングする画像描画データを使用して、前記ターゲット要求ページに含まれる表示画像に対してサーバ描画を行った後、ターゲット描画画像を取得するステップと、
    前記ターゲット描画画像を、前記新規ページ取得要求のフィードバック結果として前記ブラウザに提供するステップと、をさらに含む、
    ことを特徴とするブラウザの表示検証方法。
  2. 前記ブラウザ要求ページにマッチングする画像描画データをブラウザに提供するステップの前に、前記方法は、
    ブラウザのページ取得要求に応答して、前記ページ取得要求にマッチングするブラウザ要求ページを前記ブラウザにフィードバックするステップをさらに含み、
    前記画像描画データに対応するブラウザ描画画像を取得するステップは、
    前記ブラウザが前記ブラウザ要求ページを実行している時に、前記ブラウザによってトリガーして送信された前記ブラウザ描画画像を受信するステップを含み、
    ブラウザ要求ページが、ブラウザが前記画像描画データのローカル描画を完了したことを検出した後、ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出して、前記ブラウザ描画画像を取得して送信するようにブラウザを制御する、
    ことを特徴とする請求項1に記載の方法。
  3. 前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うステップは、
    前記ブラウザ描画画像と前記画像描画データにマッチングする標準描画画像との間の画像類似度を計算するステップと、
    前記画像類似度が予め設定された閾値以下である場合、前記ブラウザに表示異常があると決定するステップと、を含む、
    ことを特徴とする請求項2に記載の方法。
  4. 前記ブラウザ要求ページは、地図表示ページであり、前記画像描画データは、地図画像描画データである、
    ことを特徴とする請求項1~のいずれかに記載の方法。
  5. 前記画像描画データに対応するブラウザ描画画像を取得するステップは、
    前記地図画像描画データにマッチングするブラウザ描画画像、前記ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルを取得するステップを含み、
    前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うステップの前に、
    ブラウザ描画画像にマッチングする地図座標範囲及び地図レベルに基づいて、地図描画データを取得するステップと、
    前記地図描画データに基づいてサーバ描画を行って、標準描画画像を取得するステップと、をさらに含む、
    ことを特徴とする請求項に記載の方法。
  6. ブラウザの表示検証装置によって実行されるブラウザの表示検証方法であって、
    ブラウザがサーバによって提供された画像描画データのローカル描画を完了したか否かをリアルタイムで検出するステップと、
    はいの場合、前記画像描画データに対応するブラウザ描画画像を取得し、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するステップと、を含
    ブラウザの表示検証方法は、
    前記ブラウザに表示異常があると決定された場合、前記ブラウザからされた新規ページ取得要求を受信した時に、前送信記新規ページ取得要求にマッチングするターゲット要求ページを取得するステップと、
    前記ターゲット要求ページにマッチングする画像描画データを使用して、前記ターゲット要求ページに含まれる表示画像に対してサーバ描画を行った後、ターゲット描画画像を取得するステップと、
    前記ターゲット描画画像を、前記新規ページ取得要求のフィードバック結果として前記ブラウザに提供するステップと、をさらに含む、
    ことを特徴とするブラウザの表示検証方法。
  7. 前記画像描画データに対応するブラウザ描画画像を取得し、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するステップは、
    ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出し、前記画像描画データに対応するブラウザ描画画像を取得するように前記ブラウザを制御するステップと、
    前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するステップと、を含む、
    ことを特徴とする請求項に記載の方法。
  8. 前記画像描画データは、地図画像描画データである、
    ことを特徴とする請求項に記載の方法。
  9. 前記ブラウザ内でキャンバス画像インタフェースをトリガーして呼び出し、前記ブラウザ描画画像を取得するように前記ブラウザを制御するステップは、
    前記ブラウザによってローカル描画された表示画像において、局所的なスクリーンショット領域を選択するステップと、
    前記ブラウザ内で前記局所的なスクリーンショット領域のキャンバス位置情報を前記キャンバス画像インタフェースに提供するステップと、
    前記キャンバス画像インタフェースからフィードバックされた局所的なスクリーンショット結果を、ブラウザ描画画像として取得するように前記ブラウザを制御するステップと、を含む、
    ことを特徴とする請求項に記載の方法。
  10. 前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するステップは、
    前記表示画像にマッチングする地図座標範囲、及び前記表示画像における前記ブラウザ描画画像の位置に基づいて、前記ブラウザ描画画像にマッチングする地図座標範囲を決定するステップと、
    前記ブラウザの表示構成情報に基づいて、地図レベルを取得するステップと、
    前記ブラウザ描画画像、前記ブラウザ描画画像にマッチングする地図座標範囲及び前記地図レベルを前記サーバに送信するように前記ブラウザを制御するステップと、を含む、
    ことを特徴とする請求項に記載の方法。
  11. ブラウザの表示検証装置であって、
    ブラウザ要求ページにマッチングする画像描画データをブラウザに提供するための画像描画データ送信モジュールであって、前記画像描画データがブラウザに提供された後、前記ブラウザにより、前記ブラウザ要求ページに含まれる表示画像に対してローカル描画を行う画像描画データ送信モジュールと、
    前記画像描画データに対応するブラウザ描画画像を取得するためのブラウザ描画画像取得モジュールと、
    前記ブラウザ描画画像、及び前記画像描画データにマッチングする標準描画画像に基づいて、前記ブラウザに対して表示検証を行うための表示検証モジュールと、を含
    前記ブラウザの表示検証装置は、
    前記ブラウザに表示異常があると決定された場合、前記ブラウザから送信された新規ページ取得要求を受信する時に、前記新規ページ取得要求にマッチングするターゲット要求ページを取得するためのターゲット要求ページ取得モジュールと、
    前記ターゲット要求ページにマッチングする画像描画データを使用して、前記ターゲット要求ページに含まれる表示画像に対してサーバ描画を行った後、ターゲット描画画像を取得するためのターゲット描画画像取得モジュールと、
    前記ターゲット描画画像を、前記新規ページ取得要求のフィードバック結果として前記ブラウザに提供するためのフィードバック結果送信モジュールと、をさらに含む、
    ことを特徴とするブラウザの表示検証装置。
  12. ブラウザの表示検証装置であって、
    ブラウザがサーバによって提供された画像描画データのローカル描画を完了したか否かをリアルタイムで検出するための描画完了検出モジュールと、
    はいの場合、前記画像描画データに対応するブラウザ描画画像を取得し、前記ブラウザ描画画像を前記サーバに送信するように前記ブラウザを制御するためのブラウザ描画画像送信モジュールと、を含
    前記ブラウザの表示検証装置は、
    前記ブラウザに表示異常があると決定された場合、前記ブラウザから送信された新規ページ取得要求を受信する時に、前記新規ページ取得要求にマッチングするターゲット要求ページを取得するためのターゲット要求ページ取得モジュールと、
    前記ターゲット要求ページにマッチングする画像描画データを使用して、前記ターゲット要求ページに含まれる表示画像に対してサーバ描画を行った後、ターゲット描画画像を取得するためのターゲット描画画像取得モジュールと、
    前記ターゲット描画画像を、前記新規ページ取得要求のフィードバック結果として前記ブラウザに提供するためのフィードバック結果送信モジュールと、をさらに含む、
    ことを特徴とするブラウザの表示検証装置。
  13. 少なくとも1つのプロセッサと、
    前記少なくとも1つのプロセッサと通信可能に接続されるメモリと、を含み、
    前記メモリには、前記少なくとも1つのプロセッサによって実行可能な命令が記憶され、前記命令は、前記少なくとも1つのプロセッサが請求項1~のいずれかに記載のブラウザの表示検証方法、又は請求項10のいずれかに記載のブラウザの表示検証方法を実行できるように、前記少なくとも1つのプロセッサによって実行される、
    ことを特徴とする電子機器。
  14. コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体であって、
    前記コンピュータ命令は、コンピュータに請求項1~のいずれかに記載のブラウザの表示検証方法、又は請求項10のいずれかに記載のブラウザの表示検証方法を実行させる、
    ことを特徴とする非一時的なコンピュータ読み取り可能な記憶媒体。
  15. コンピュータプログラムであって、
    前記コンピュータプログラムは、コンピュータに請求項1~のいずれかに記載のブラウザの表示検証方法、又は請求項10のいずれかに記載のブラウザの表示検証方法を実行させる、
    ことを特徴とするコンピュータプログラム。
JP2021133660A 2020-09-28 2021-08-18 ブラウザの表示検証方法、装置、コンピュータ機器及び記憶媒体 Active JP7282133B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202011045400.6 2020-09-28
CN202011045400.6A CN112037332B (zh) 2020-09-28 2020-09-28 浏览器的显示校验方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
JP2021184302A JP2021184302A (ja) 2021-12-02
JP7282133B2 true JP7282133B2 (ja) 2023-05-26

Family

ID=73574965

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021133660A Active JP7282133B2 (ja) 2020-09-28 2021-08-18 ブラウザの表示検証方法、装置、コンピュータ機器及び記憶媒体

Country Status (5)

Country Link
US (1) US11568667B2 (ja)
EP (1) EP3842964A3 (ja)
JP (1) JP7282133B2 (ja)
KR (1) KR20210108341A (ja)
CN (1) CN112037332B (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112037332B (zh) * 2020-09-28 2023-09-05 北京百度网讯科技有限公司 浏览器的显示校验方法、装置、计算机设备和存储介质
CN114090157A (zh) * 2021-11-18 2022-02-25 中国平安财产保险股份有限公司 树形控件的数据处理方法、装置、设备和存储介质
CN114880611A (zh) * 2022-04-12 2022-08-09 上海哔哩哔哩科技有限公司 截图处理方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000082039A (ja) 1998-06-30 2000-03-21 Internatl Business Mach Corp <Ibm> 表示制御情報生成方法及びコンピュ―タ
JP2005190443A (ja) 2003-12-26 2005-07-14 Hitachi Software Eng Co Ltd Webブラウザ表示画面検証方法及び検証装置
US20130287305A1 (en) 2012-04-26 2013-10-31 Google Inc. Testing the rendering of visual content
US20150188977A1 (en) 2013-11-04 2015-07-02 Google Inc. Verifying Content Rendering on a Client Device
WO2016065216A2 (en) 2014-10-22 2016-04-28 Springbox Labs, Inc. Method and apparatus for rendering websites on physical devices

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2001235765A1 (en) * 2000-02-23 2001-09-03 Tradesafely.Com Limited Method and apparatus for internet web site accreditation
US7210099B2 (en) * 2000-06-12 2007-04-24 Softview Llc Resolution independent vector display of internet content
US7797628B2 (en) * 2005-05-16 2010-09-14 Planview, Inc. Method of using a directed graph and a system for use with the method
US7627818B2 (en) * 2006-05-31 2009-12-01 International Business Machines Corporation Displaying HTML text on a non-graphical console
JP4085123B1 (ja) * 2007-03-29 2008-05-14 株式会社サピエンス 画像表示更新方法およびサーバ・クライアントシステム並びに描画操作エコーバックスクリプト
TWI457822B (zh) * 2008-04-18 2014-10-21 Htc Corp 資訊顯示方法及其系統與儲存媒體
US8706801B2 (en) * 2009-07-20 2014-04-22 Facebook, Inc. Rendering a web page using content communicated to a browser application from a process running on a client
JPWO2012042561A1 (ja) * 2010-09-28 2014-02-03 株式会社野村総合研究所 画像取得装置、画像取得方法およびコンピュータプログラム
US8732571B2 (en) * 2011-03-31 2014-05-20 Google Inc. Methods and systems for generating and displaying a preview image of a content area
US8941673B2 (en) * 2011-11-08 2015-01-27 Red Hat, Inc. Rendering images in a remote web browser
WO2013177769A1 (en) * 2012-05-30 2013-12-05 Google Inc. Browser-driven retrieval of content for webpages
US9076072B2 (en) * 2012-10-11 2015-07-07 Salesforce.Com, Inc. System and method for web page rendering test automation suite
AU2013393876B2 (en) * 2013-07-12 2017-12-14 Volvo Truck Corporation Heat exchanger system for a vehicle
US9634667B2 (en) * 2014-08-29 2017-04-25 Cypress Semiconductor Corporation Integrated circuit device with programmable analog subsystem
KR101590522B1 (ko) * 2015-04-22 2016-02-01 하영식 웹 페이지 출력방식 변경 장치 및 방법
KR102395023B1 (ko) * 2015-06-30 2022-05-06 현대오토에버 주식회사 그래픽 기반의 웹 벡터 지도 표시 시스템 및 방법
CN106997348A (zh) * 2016-01-22 2017-08-01 腾讯科技(深圳)有限公司 一种数据绘制方法和装置
JP6776805B2 (ja) * 2016-10-24 2020-10-28 富士通株式会社 文字認識装置、文字認識方法、文字認識プログラム
CN110347319B (zh) * 2019-06-28 2021-04-27 浙江口碑网络技术有限公司 一种应用内屏幕截图方法及装置
CN111314298B (zh) * 2020-01-16 2020-12-29 北京金堤科技有限公司 验证识别方法和装置、电子设备和存储介质
CN112037332B (zh) * 2020-09-28 2023-09-05 北京百度网讯科技有限公司 浏览器的显示校验方法、装置、计算机设备和存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000082039A (ja) 1998-06-30 2000-03-21 Internatl Business Mach Corp <Ibm> 表示制御情報生成方法及びコンピュ―タ
JP2005190443A (ja) 2003-12-26 2005-07-14 Hitachi Software Eng Co Ltd Webブラウザ表示画面検証方法及び検証装置
US20130287305A1 (en) 2012-04-26 2013-10-31 Google Inc. Testing the rendering of visual content
US20150188977A1 (en) 2013-11-04 2015-07-02 Google Inc. Verifying Content Rendering on a Client Device
WO2016065216A2 (en) 2014-10-22 2016-04-28 Springbox Labs, Inc. Method and apparatus for rendering websites on physical devices

Also Published As

Publication number Publication date
EP3842964A2 (en) 2021-06-30
US11568667B2 (en) 2023-01-31
CN112037332B (zh) 2023-09-05
US20210256199A1 (en) 2021-08-19
CN112037332A (zh) 2020-12-04
KR20210108341A (ko) 2021-09-02
JP2021184302A (ja) 2021-12-02
EP3842964A3 (en) 2021-11-24

Similar Documents

Publication Publication Date Title
JP7282133B2 (ja) ブラウザの表示検証方法、装置、コンピュータ機器及び記憶媒体
US11321925B2 (en) Mixed-reality system, program, method, and portable terminal device
AU2014235484B2 (en) Contextual local image recognition dataset
JP7167222B2 (ja) アプレットデータの取得方法、装置、機器及び記憶媒体
EP2973355B1 (en) Campaign optimization for experience content dataset
AU2014235416B2 (en) Real world analytics visualization
US9495748B2 (en) Segmentation of content delivery
JP2023504956A (ja) 性能検出方法、装置、電子機器及びコンピュータ可読媒体
CN105677678B (zh) 网页的首屏位置确定、网页信息显示方法和系统
CN111274520B (zh) 网页资源审核方法、装置、设备和介质
CN112581589A (zh) 一种视图列表布局方法、装置、设备及存储介质
CN111953647A (zh) 安全校验方法、装置、电子设备和存储介质
US20120054313A1 (en) Interpreting web application content
CN112565472A (zh) 静态资源的处理方法和装置
US20230315829A1 (en) Programming verification templates visually
CN114398131B (zh) 信息展示方法、装置、设备、介质及程序产品
US20220374331A1 (en) Method of debugging applet, electronic device, and storage medium
CN108268178B (zh) 移动终端触摸屏坐标输出控制、移动终端及存储介质
CN116149792A (zh) 一种虚拟机处理方法、装置、电子设备及存储介质
CN115687817A (zh) 路由器页面快速加载方法、装置、电子设备、存储介质
CN116248630A (zh) 一种应用加速方法、装置、电子设备和存储介质
CN112036136A (zh) 质检数据的处理方法及装置、电子设备、可读存储介质
CN116954910A (zh) 一种遥感数据处理方法、装置、系统及介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210818

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221018

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230118

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230418

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230516

R150 Certificate of patent or registration of utility model

Ref document number: 7282133

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150