JP5942750B2 - ビジュアル比較方法 - Google Patents
ビジュアル比較方法 Download PDFInfo
- Publication number
- JP5942750B2 JP5942750B2 JP2012214352A JP2012214352A JP5942750B2 JP 5942750 B2 JP5942750 B2 JP 5942750B2 JP 2012214352 A JP2012214352 A JP 2012214352A JP 2012214352 A JP2012214352 A JP 2012214352A JP 5942750 B2 JP5942750 B2 JP 5942750B2
- Authority
- JP
- Japan
- Prior art keywords
- difference
- image
- visual
- image pair
- evaluating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/217—Validation; Performance evaluation; Active pattern learning techniques
- G06F18/2178—Validation; Performance evaluation; Active pattern learning techniques based on feedback of a supervisor
Landscapes
- Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Image Analysis (AREA)
- Debugging And Monitoring (AREA)
- User Interface Of Digital Computer (AREA)
Description
230、240 構造化表現
250 ノード対
270 比較処理
310 訓練用ウェブアプリケーション
320 機械学習訓練モジュール
330 予測エンジン
340 ウェブアプリケーション
350 エラーレポート
360 ユーザフィードバック
600 ネットワーク環境
610 ネットワーク
620 サーバ
630 クライアント
632 ウェブブラウザ
640 データストレージ
650 リンク
700 コンピュータシステム
702 プロセッサ
704 メモリ
706 ストレージ
708 I/Oインタフェース
710 通信インタフェース
712 バス
Claims (7)
- 1つ以上のコンピュータシステムによって実行される方法であって、
第1の複数の画像対に関する情報を受信するステップと、
前記第1の複数の画像対の中の各画像対を評価して、エラーと見なすのに適格な視覚的な対的相違を検出するステップであり、視覚的な対的相違は、位置、大きさ、色又はスタイルのうちの少なくとも1つに関する違いを有する、ステップと、
評価された前記視覚的な対的相違に基づいて予測エンジンを訓練するステップと、
第2の複数の画像対に関する情報を受信するステップであり、該第2の複数の画像対の中の各画像対は、クライアントティア環境において実行されたイベント・ドリブン・アプリケーションの視覚的なエンドユーザ体験画面の少なくとも一部を有する、ステップと、
前記予測エンジンを用いて、前記第2の複数の画像対の中の各画像対を評価して、エラーと見なすのに適格な視覚的な対的相違を検出するステップと、
エラーと見なすのに適格な少なくとも1つの対的相違を有すると評価された前記第2の複数の画像対のうちの少なくとも1つの画像対に関して、評価された該対的相違はエラーと見なされるべきでなかったとのユーザフィードバックを受信するステップと、
前記ユーザフィードバックに基づいて前記予測エンジンを再訓練するステップと、
を有する方法。 - 前記視覚的な対的相違は、位置に関する違いを有し、画像対を評価して該視覚的な対的相違を検出するステップは、該画像対の各画像について、変位比、大きさ、色差比、色濃度、又はアースムーバーズ距離(EMD)のうちの少なくとも1つに関する情報を評価することを有する、請求項1に記載の方法。
- 前記視覚的な対的相違は、大きさに関する違いを有し、画像対を評価して該視覚的な対的相違を検出するステップは、該画像対の各画像について、サイズ差比、大きさ、色濃度、又はアースムーバーズ距離(EMD)のうちの少なくとも1つに関する情報を評価することを有する、請求項1に記載の方法。
- 前記視覚的な対的相違は、スタイルに関する違いを有し、画像対を評価して該視覚的な対的相違を検出するステップは、該画像対の各画像について、HTMLタグ、前記クライアントティア環境のブラウザ、大きさ、色濃度、又はアースムーバーズ距離(EMD)のうちの少なくとも1つに関する情報を評価することを有する、請求項1に記載の方法。
- 検出された対的相違が許容可能であると決定することは、該検出された対的相違が、重大なものでなく且つ前記イベント・ドリブン・アプリケーションのブラウザ固有レンダリングに関するものであると決定することを有する、請求項1に記載の方法。
- 前記イベント・ドリブン・アプリケーションはウェブアプリケーションである、請求項1に記載の方法。
- 各クライアントティア環境は、
特定のウェブブラウザと、
前記特定のウェブブラウザのバージョンと、
前記特定のウェブブラウザの設定と、
前記特定のウェブブラウザが動作するコンピュータシステムの特定のオペレーティングシステム(OS)と、
前記コンピュータシステムのディスプレイの画面解像度と
を有する、請求項1に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/248,030 | 2011-09-29 | ||
US13/248,030 US8805094B2 (en) | 2011-09-29 | 2011-09-29 | Using machine learning to improve detection of visual pairwise differences between browsers |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013077301A JP2013077301A (ja) | 2013-04-25 |
JP5942750B2 true JP5942750B2 (ja) | 2016-06-29 |
Family
ID=47992647
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012214352A Active JP5942750B2 (ja) | 2011-09-29 | 2012-09-27 | ビジュアル比較方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8805094B2 (ja) |
JP (1) | JP5942750B2 (ja) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100716870B1 (ko) * | 2001-04-20 | 2007-05-09 | 앰코 테크놀로지 코리아 주식회사 | 반도체패키지 및 그 제조 방법 |
US9411782B2 (en) * | 2012-11-09 | 2016-08-09 | Adobe Systems Incorporated | Real time web development testing and reporting system |
US9524277B2 (en) * | 2013-06-27 | 2016-12-20 | Paypal, Inc. | Execution and display of events in a plurality of web browsers and devices systems and method |
US9563819B2 (en) | 2015-06-10 | 2017-02-07 | International Business Machines Corporation | Visual comparisons using personal objects |
US11379776B2 (en) * | 2015-07-27 | 2022-07-05 | Innovian Corporation | System and method for validating data |
JP6786967B2 (ja) * | 2016-09-02 | 2020-11-18 | コニカミノルタ株式会社 | 情報処理装置およびプログラム |
CN107861860A (zh) | 2016-09-21 | 2018-03-30 | Fmr有限责任公司 | 同步移动设备的移动应用程序的自动验证 |
US11164119B2 (en) | 2016-12-28 | 2021-11-02 | Motorola Solutions, Inc. | Systems and methods for assigning roles to user profiles for an incident |
US9934129B1 (en) * | 2017-03-17 | 2018-04-03 | Google Llc | Determining application test results using screenshot metadata |
US20180285775A1 (en) * | 2017-04-03 | 2018-10-04 | Salesforce.Com, Inc. | Systems and methods for machine learning classifiers for support-based group |
JP6965620B2 (ja) | 2017-08-01 | 2021-11-10 | 富士通株式会社 | コンテンツ検証用コンピュータプログラム、コンテンツ検証装置及びコンテンツ検証方法 |
US20190279084A1 (en) * | 2017-08-15 | 2019-09-12 | Toonimo, Inc. | System and method for element detection and identification of changing elements on a web page |
CN107729931A (zh) * | 2017-10-09 | 2018-02-23 | 北京京东尚科信息技术有限公司 | 图片评分方法和装置 |
US10043255B1 (en) | 2018-02-20 | 2018-08-07 | Capital One Services, Llc | Utilizing a machine learning model to automatically visually validate a user interface for multiple platforms |
US20200034279A1 (en) * | 2018-07-24 | 2020-01-30 | Sap Se | Deep machine learning in software test automation |
KR102145821B1 (ko) * | 2020-02-28 | 2020-08-19 | 주식회사 에이치비스미스 | 서비스 플랫폼을 테스트하기 위한 장치, 시스템 및 방법 |
US11361198B2 (en) | 2020-06-18 | 2022-06-14 | Proofpoint, Inc. | Neural network host platform for detecting anomalies in cybersecurity modules |
Family Cites Families (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999004329A2 (en) * | 1997-07-21 | 1999-01-28 | Kristin Ann Farry | Method of evolving classifier programs for signal processing and control |
US6918066B2 (en) * | 2001-09-26 | 2005-07-12 | International Business Machines Corporation | Method and system for evaluating applications on different user agents |
US7240050B2 (en) * | 2004-01-14 | 2007-07-03 | International Business Machines Corporation | Methods and apparatus for generating automated graphics using stored graphics examples |
US20060259462A1 (en) * | 2005-05-12 | 2006-11-16 | Sybase, Inc. | System and Methodology for Real-time Content Aggregation and Syndication |
CA2507174C (en) * | 2005-05-13 | 2013-07-16 | Semiconductor Insights Inc. | Method of registering and aligning multiple images |
US20070031063A1 (en) * | 2005-08-05 | 2007-02-08 | Hui Zhou | Method and apparatus for generating a composite image from a set of images |
US20070086659A1 (en) * | 2005-10-18 | 2007-04-19 | Chefd Hotel Christophe | Method for groupwise point set matching |
US7773813B2 (en) * | 2005-10-31 | 2010-08-10 | Microsoft Corporation | Capture-intention detection for video content analysis |
US8660319B2 (en) * | 2006-05-05 | 2014-02-25 | Parham Aarabi | Method, system and computer program product for automatic and semi-automatic modification of digital images of faces |
US8620038B2 (en) * | 2006-05-05 | 2013-12-31 | Parham Aarabi | Method, system and computer program product for automatic and semi-automatic modification of digital images of faces |
GB2451050B (en) * | 2006-05-05 | 2011-08-31 | Parham Aarabi | Method, system and computer program product for automatic and semiautomatic modification of digital images of faces |
US20080077855A1 (en) * | 2006-09-21 | 2008-03-27 | Shirel Lev | Generic website |
US8064697B2 (en) * | 2007-10-12 | 2011-11-22 | Microsoft Corporation | Laplacian principal components analysis (LPCA) |
US8180112B2 (en) * | 2008-01-21 | 2012-05-15 | Eastman Kodak Company | Enabling persistent recognition of individuals in images |
US20090249216A1 (en) * | 2008-03-28 | 2009-10-01 | International Business Machines Corporation | Interacting with multiple browsers simultaneously using linked browsers controlled from a primary browser interface |
US20090265290A1 (en) * | 2008-04-18 | 2009-10-22 | Yahoo! Inc. | Optimizing ranking functions using click data |
US9286197B2 (en) * | 2008-05-29 | 2016-03-15 | Hewlett Packard Enterprise Development Lp | Method and system of testing software using real time replication |
US20100211893A1 (en) * | 2009-02-19 | 2010-08-19 | Microsoft Corporation | Cross-browser page visualization presentation |
US8334902B2 (en) * | 2009-03-31 | 2012-12-18 | Fuji Xerox Co., Ltd. | System and method for facilitating the use of whiteboards |
US20100257167A1 (en) * | 2009-04-01 | 2010-10-07 | Microsoft Corporation | Learning to rank using query-dependent loss functions |
US8165997B1 (en) * | 2009-07-27 | 2012-04-24 | Intuit Inc. | Method and system for classifying postings in a forum |
US20110029517A1 (en) * | 2009-07-31 | 2011-02-03 | Shihao Ji | Global and topical ranking of search results using user clicks |
CN102033803B (zh) * | 2009-09-29 | 2014-07-09 | 国际商业机器公司 | 跨浏览器测试web应用的方法和装置 |
KR101509172B1 (ko) * | 2009-10-01 | 2015-04-06 | 삼성전자주식회사 | 화상형성장치, 그 ui 컨텐츠 제공방법, 및 호스트 장치의 ui 컨텐츠 수신방법 |
US8886641B2 (en) * | 2009-10-15 | 2014-11-11 | Yahoo! Inc. | Incorporating recency in network search using machine learning |
US8996988B2 (en) * | 2009-10-19 | 2015-03-31 | Browsera, LLC | Automated application compatibility testing |
US9032067B2 (en) * | 2010-03-12 | 2015-05-12 | Fujitsu Limited | Determining differences in an event-driven application accessed in different client-tier environments |
JP2011197840A (ja) * | 2010-03-18 | 2011-10-06 | Jin Zhu | Webページ処理装置、webページ処理方法、およびプログラム |
US20110289489A1 (en) * | 2010-05-20 | 2011-11-24 | Verizon Patent And Licensing Inc. | Concurrent cross browser testing |
US8693788B2 (en) * | 2010-08-06 | 2014-04-08 | Mela Sciences, Inc. | Assessing features for classification |
-
2011
- 2011-09-29 US US13/248,030 patent/US8805094B2/en active Active
-
2012
- 2012-09-27 JP JP2012214352A patent/JP5942750B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2013077301A (ja) | 2013-04-25 |
US20130083996A1 (en) | 2013-04-04 |
US8805094B2 (en) | 2014-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5942750B2 (ja) | ビジュアル比較方法 | |
JP6036100B2 (ja) | ウェブ・ブラウザー画面の段階的な視覚的比較 | |
US9032067B2 (en) | Determining differences in an event-driven application accessed in different client-tier environments | |
US9135151B2 (en) | Automatic verification by comparing user interface images | |
US9208054B2 (en) | Web service for automated cross-browser compatibility checking of web applications | |
US10055507B2 (en) | Infinite scrolling | |
US10303526B2 (en) | Device specific handling of user interface components | |
US8543986B2 (en) | Methods and systems for test automation of forms in web applications | |
US9479519B1 (en) | Web content fingerprint analysis to detect web page issues | |
US8631394B2 (en) | Static resource processing | |
US20160259773A1 (en) | System and method for identifying web elements present on a web-page | |
US9400848B2 (en) | Techniques for context-based grouping of messages for translation | |
AU2013308886A1 (en) | API version testing based on query schema | |
JP2012022683A (ja) | ウェブ・アプリケーションの広範囲にわたるクローリングのための方法及びシステム | |
JP2013218686A (ja) | 製品及びサービスの講評からアスペクトベースの評価点を抽出するためのシステム及び方法 | |
US8880951B2 (en) | Detection of dead widgets in software applications | |
US20160034378A1 (en) | Method and system for testing page link addresses | |
JP5691840B2 (ja) | コンピュータ装置により使用される方法、システム、記憶媒体及びコンピュータプログラム | |
US10831991B1 (en) | Systems and methods for testing content developed for access via a network | |
US20150052018A1 (en) | System and method for retaining the value of a vehicle | |
CN111553375B (zh) | 使用变换以验证计算机视觉质量 | |
Hraška | Browser fingerprinting | |
US12019975B1 (en) | Automatic webpage layout checker: 5D deep learning based on unique rules for coloring web component borders and non-space |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150604 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160421 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160426 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160509 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5942750 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |