WO2021166252A1 - 品質評価装置、品質評価方法及びプログラム - Google Patents

品質評価装置、品質評価方法及びプログラム Download PDF

Info

Publication number
WO2021166252A1
WO2021166252A1 PCT/JP2020/007228 JP2020007228W WO2021166252A1 WO 2021166252 A1 WO2021166252 A1 WO 2021166252A1 JP 2020007228 W JP2020007228 W JP 2020007228W WO 2021166252 A1 WO2021166252 A1 WO 2021166252A1
Authority
WO
WIPO (PCT)
Prior art keywords
quality
counting
storage unit
state
unit
Prior art date
Application number
PCT/JP2020/007228
Other languages
English (en)
French (fr)
Inventor
川口　銀河
秀貴 小川
Original Assignee
日本電信電話株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電信電話株式会社 filed Critical 日本電信電話株式会社
Priority to PCT/JP2020/007228 priority Critical patent/WO2021166252A1/ja
Priority to JP2022501581A priority patent/JPWO2021166252A1/ja
Priority to US17/801,105 priority patent/US12026217B2/en
Publication of WO2021166252A1 publication Critical patent/WO2021166252A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574—Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3419—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment by assessing time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3438—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/86—Event-based monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/88—Monitoring involving counting

Definitions

  • the present invention relates to a quality evaluation device, a quality evaluation method and a program.
  • the present invention has been made in view of the above points, and an object of the present invention is to improve the validity of the evaluation of the perceived quality of web browsing.
  • the quality evaluation device determines the number of times the reload operation is performed with reference to the recording unit that records the information indicating the state of the web browser in the storage unit at a plurality of timings and the storage unit. It has a counting unit that counts as an evaluation value of the quality experienced by the user.
  • Web browser users can perform reloading processing when the quality of the network deteriorates and the web page display becomes slow, return to re-access, use multiple tabs, etc. "Operations according to the situation where the web page display is slow" "Law / Countermeasures" may be taken.
  • the operating state of the web browser is monitored via the API (Application Program Interface) of the web browser, the operation by the user is recorded, and based on the record, "the display of the web page is slow". Analyze the presence or absence of "operation methods and countermeasures according to the situation” and measure the value (evaluation value) of the index of the user's experience quality.
  • API Application Program Interface
  • FIG. 1 is a diagram showing a hardware configuration example of the quality evaluation device 10 according to the embodiment of the present invention.
  • the quality evaluation device 10 of FIG. 1 includes a drive device 100, an auxiliary storage device 102, a memory device 103, a CPU 104, an interface device 105, a display device 106, an input device 107, and the like, which are connected to each other by a bus B, respectively.
  • the program that realizes the processing in the quality evaluation device 10 is provided by a recording medium 101 such as a CD-ROM.
  • a recording medium 101 such as a CD-ROM.
  • the program is installed in the auxiliary storage device 102 from the recording medium 101 via the drive device 100.
  • the program does not necessarily have to be installed from the recording medium 101, and may be downloaded from another computer via the network.
  • the auxiliary storage device 102 stores the installed program and also stores necessary files, data, and the like.
  • the memory device 103 reads and stores the program from the auxiliary storage device 102 when the program is instructed to start.
  • the CPU 104 realizes the function related to the quality evaluation device 10 according to the program stored in the memory device 103.
  • the interface device 105 is used as an interface for connecting to a network.
  • the display device 106 displays a programmatic GUI (Graphical User Interface) or the like.
  • the input device 107 is composed of a keyboard, a mouse, or the like, or a touch panel, and is used for inputting various operation instructions.
  • An example of the quality evaluation device 10 is a smartphone, a tablet terminal, a PC (Personal Computer), or the like.
  • FIG. 2 is a diagram showing a functional configuration example of the quality evaluation device 10 according to the embodiment of the present invention.
  • the quality evaluation device 10 includes a state acquisition unit 11, a reload counting unit 12, a returning operation counting unit 13, a tab transition counting unit 14, and the like. Each of these parts is realized by a process of causing the CPU 104 to execute one or more programs installed in the quality evaluation device 10.
  • the quality evaluation device 10 also utilizes the state history storage unit 15.
  • the state history storage unit 15 can be realized by using, for example, an auxiliary storage device 102, a storage device that can be connected to the quality evaluation device 10 via a network, or the like.
  • the state acquisition unit 11 acquires data (hereinafter, referred to as "state data") including information on the state of the web browser at a plurality of timings when a predetermined trigger (event) occurs. Strictly speaking, the state data is acquired in tab units. Therefore, when a plurality of tabs are opened in the web browser, the state data is acquired in parallel.
  • the state acquisition unit 11 records the acquired state data in the state history storage unit 15.
  • the state acquisition unit 11 may be implemented by a script such as a Java (registered trademark) script. In this case, by setting the web browser to execute the script when the web page is displayed, the script can make the CPU 104 function as the state acquisition unit 11.
  • the predetermined triggers are the following four.
  • (1) can be detected as an injection process of a start event that occurs when a new page is loaded. That is, when a new page is read, the web browser calls the state acquisition unit 11, so that the state acquisition unit 11 can detect the reading.
  • the start event is Regarding (2), it can be detected by registering a click (click) or dbcllick (double-click) event in the addedEventListener (), capturing these events, and capturing a navigette event based on these events. ..
  • the reload counting unit 12 uses the number of reload operations as an example of the value (evaluation value) of the evaluation index of the user's experience quality based on the time-series history of the status data recorded in the status history storage unit 15. It counts and outputs the count result as an evaluation value.
  • the reload operation is an operation of reloading the same web page.
  • the return operation counting unit 13 counts (counts) the number of return operations as an example of the evaluation value of the user's perceived quality based on the time-series history of the state data recorded in the state history storage unit 15. Is output as an evaluation value.
  • the tab transition counting unit 14 counts (counts) the number of tab transitions (tab switching operations) as an example of the evaluation value of the user's experience quality based on the time-series history of the state data recorded in the state history storage unit 15. ), And output the count result as an evaluation value.
  • FIG. 3 is a flowchart for explaining an example of the processing procedure of the state data recording process.
  • the state data refers to data indicating the state of the web browser.
  • the processing procedure of FIG. 3 is performed in parallel for each tab.
  • the state acquisition unit 11 is waiting for the occurrence of the target trigger (S101).
  • the state acquisition unit 11 detects the occurrence of the target trigger according to any one of (1) to (4) above (Yes in S101)
  • the state acquisition unit 11 acquires the state data from the web browser (S102).
  • the state acquisition unit 11 records the state data in the state history storage unit 15 (S103), and waits for the occurrence of the target trigger (S101).
  • FIG. 4 is a diagram showing a configuration example of the state history storage unit 15. As is clear from the processing procedure of FIG. 3, the state history storage unit 15 stores the state data at the timing when any of the target events occurs in chronological order.
  • Each state data includes "time” and page information such as "tab ID”, "URL”, “display waiting time”, “trigger type”, "operation record”, and "visible flag”. That is, the information after the "tab ID" is information for each web page.
  • the “Time” is the time when the status data was acquired (the time when any of the target triggers occurred).
  • the “tab ID” is the ID of the tab from which the state data is acquired, and can be acquired by inquiring the value of "tabID” using the API of the web browser.
  • the "URL” is the URL of the web page to be displayed, and can be obtained by inquiring the value of "location.ref” using the API of the web browser.
  • the “display waiting time” is the display waiting time of the web page displayed in the tab, and for example, the “trigger type” that can be calculated from the parameter obtained by using the API called navigationTiming is the state data.
  • This is the type of target trigger that triggered the acquisition.
  • the above (1) to (4) are the target triggers, but the trigger types of the target triggers (1) to (4) are recorded in the state data with the following character strings.
  • the "operation record” is a type of operation by the user, and can be obtained by inquiring the value of type using an API called navigation Timing.
  • the "visible flag” is information indicating whether or not the tab is in the visible state, and can be obtained by inquiring the value of "document.hidden” using the API of the web browser.
  • one web page contains a plurality of frames, and parameters of page information can be acquired for each frame, but the highest frame (window.top attribute). The page information of the frame in which is true) should be acquired.
  • the timing it may not be possible to acquire the values of some parameters that make up the page information. For example, it is unlikely that the display waiting time can be acquired at the timings (1) to (3), and the display waiting time of the web page displayed at that time can be acquired at the timing (4). Highly sex.
  • the URL may not be acquired at the timing of (1). Therefore, there is a possibility that the state data in which the URL is empty (hereinafter, referred to as “URL empty data”) is recorded in the state history storage unit 15. Therefore, the value of the URL of the state data acquired at the timing of (4) may be recorded in the "URL" of the URL empty data before the state data, which has the same tab ID as the state data.
  • FIG. 5 is a flowchart for explaining an example of the processing procedure of the measurement processing of the quality evaluation value based on the history of the state data.
  • the reload counting unit 12 counts (counts) the number of reload operations with reference to the history of state data (FIG. 4).
  • step S201 the number of operations (presses) (that is, direct operations of reloading) of the "reload button” in the history of state data (FIG. 4) is counted.
  • the operation can be specified by counting the number of state data whose "trigger type” is "page transition” and whose "operation record” is “read” in the history of state data. can.
  • step S202 the number of operations of "pressing the back button once and clicking the same link again” is counted. This is because such an operation is considered to correspond to a reload operation from the user's operation feeling.
  • the operation is "the same URL as the web page when the back button is operated (pressed) from a certain web page (while displaying a certain web page) and the page transition is performed immediately after that (within the threshold value X seconds). It can be specified by counting the number of times "if it was”.
  • the state data in which the "operation record” is "back_forward” (hereinafter referred to as "back_forward state data”) is specified, and the state data having the same tab ID as the back_forward state data is described.
  • the state data including the same URL as the URL of the state data immediately before the back_forward state data is within a certain period of time (for example, threshold X seconds) after the time of the back_forward state data, "press the back button once and then again. It is counted as one operation of "clicking the same link”.
  • the reload counting unit 12 outputs the total number of times counted in steps S201 and S202 as the number of reload operations.
  • the return operation counting unit 13 counts (counts) the number of return operations with reference to the history of the state data (S203). Specifically, the return operation counting unit 13 counts the number of state data whose "operation record" is "back_forward” and outputs the number as the number of return operations.
  • the tab transition counting unit 14 counts (counts) the number of tab transitions with reference to the history of the state data (S204). Specifically, the tab transition counting unit 14 first identifies each state data in which the "visible flag" is “True”. Subsequently, the tab transition counting unit 14 determines whether or not the "tab ID" of the state data and the “tab ID” of the state data immediately before the state data are different for each specified state data. The tab transition counting unit 14 outputs the number of determination results indicating that the compared tab IDs are different as the number of tab transitions.
  • the numerical value indicating the number of times counted in the above is considered to be specified to increase as the user's experience quality and comfort deteriorate. Therefore, the numerical value itself or a numerical value normalized to the value per number of web pages viewed may be used as the value of the evaluation index of the user's experience quality.
  • the number of browsed web pages may be measured, for example, by the number of state data whose trigger type is "start” or the number of types of "URL" in the state data group targeted for processing in FIG. good.
  • the state acquisition unit 11 is an example of a recording unit.
  • the reload counting unit 12, the returning operation counting unit 13, and the tab transition counting unit 14 are examples of the counting unit.
  • the state history storage unit is an example of a storage unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computer Hardware Design (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

品質評価装置は、ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録部と、前記記憶部を参照して、再読込操作を行った回数をユーザが体感した品質の評価値として計数する計数部と、を有することで、ｗｅｂ閲覧の体感品質の評価の妥当性を向上させる。

Description

品質評価装置、品質評価方法及びプログラム
　本発明は、品質評価装置、品質評価方法及びプログラムに関する。
　ｗｅｂページの閲覧は幅広く用いられるものの、その利用法が多岐にわたることから、
共通及び確実な品質の判断が困難である。
　従来手法として、ユーザのｗｅｂブラウザ利用時の品質・快適性は主としてページ表示の待ち時間に依存する、という解釈から、ページ表示待ち時間を制御し、ページ表示待ち時間を観測対象とする手法があった。すなわち、ユーザのｗｅｂブラウザ利用時の品質・快適性を実験によって評価するために、ユーザにｗｅｂブラウザを利用してページを閲覧してもらい、その際にネットワーク帯域を制限したり、コンテンツを加工したりするなどして、ｗｅｂページの表示を遅くさせて、その表示待ち時間を記録し、ユーザに品質の体感を直接問うた結果と照合・評価するような手法が用いられていた（非特許文献１）。
佐藤他, "Webブラウジングにおけるタスク別QoE評価法の検討," 電子情報通信学会総合大会講演論文集 2015年_通信(2) B-11-35, 452, 2015-02-24.
　しかしながら、ｗｅｂ閲覧は、複数のページ遷移を一連の操作として実施するひとまとまりの体験として見るのが自然であることから、品質の体感を問うのを一ページごとにするのは適切ではないと考えられる。
　一方、複数ページの遷移の後にｗｅｂ閲覧の品質をユーザに問うても、ユーザは、どの範囲がどのように評価されるべきかの判断が難しく、評価を行うことが難しい。
　また、ページ表示待ち時間は、ｗｅｂページのコンテンツに大きく依存することからそれ自体を共通の指標としては使いにくい。
　本発明は、上記の点に鑑みてなされたものであって、ｗｅｂ閲覧の体感品質の評価の妥当性を向上させることを目的とする。
　そこで上記課題を解決するため、品質評価装置は、ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録部と、前記記憶部を参照して、再読込操作を行った回数をユーザが体感した品質の評価値として計数する計数部と、を有する。
　ｗｅｂ閲覧の体感品質の評価の妥当性を向上させることができる。
本発明の実施の形態における品質評価装置１０のハードウェア構成例を示す図である。 本発明の実施の形態における品質評価装置１０の機能構成例を示す図である。 状態データの記録処理の処理手順の一例を説明するためのフローチャートである。 状態履歴記憶部１５の構成例を示す図である。 状態データの履歴に基づく品質の評価値の計測処理の処理手順の一例を説明するためのフローチャートである。
　以下、図面に基づいて本発明の実施の形態を説明する。
　ｗｅｂブラウザユーザは、ネットワークの品質が低下し、ｗｅｂページ表示が遅くなると再読み込み処理をしたり、戻って再アクセス、複数のタブを使う、などの「ｗｅｂページの表示が遅い場面に応じた操作法・対策」を行うことがある。
　したがって、これらの操作状態を観測・記録することできれば、ユーザの体感品質（ＱｏＥ（Quality of Experience））を把握・分析することが可能となる。しかし、実験目的であっても、外部から目視で監視することなどで、これらの情報を記録することは難しい。
　そこで、本実施の形態では、ｗｅｂブラウザのＡＰＩ（Application Program Interface）を介してｗｅｂブラウザの動作状態を監視して、ユーザによる操作を記録し、その記録に基づいて、「ｗｅｂページの表示が遅い場面に応じた操作法・対策」の有無を分析し、ユーザの体感品質の指標の値（評価値）を計測する。
　「ｗｅｂページの表示が遅い場面に応じた操作法・対策」として、本実施の形態では、再読み込み操作、戻る操作、表示タブ切り替え操作を対象とする。
　以下、上記を実現する品質評価装置１０について具体的に説明する。図１は、本発明の実施の形態における品質評価装置１０のハードウェア構成例を示す図である。図１の品質評価装置１０は、それぞれバスＢで相互に接続されているドライブ装置１００、補助記憶装置１０２、メモリ装置１０３、ＣＰＵ１０４、インタフェース装置１０５、表示装置１０６、及び入力装置１０７等を有する。
　品質評価装置１０での処理を実現するプログラムは、ＣＤ－ＲＯＭ等の記録媒体１０１によって提供される。プログラムを記憶した記録媒体１０１がドライブ装置１００にセットされると、プログラムが記録媒体１０１からドライブ装置１００を介して補助記憶装置１０２にインストールされる。但し、プログラムのインストールは必ずしも記録媒体１０１より行う必要はなく、ネットワークを介して他のコンピュータよりダウンロードするようにしてもよい。補助記憶装置１０２は、インストールされたプログラムを格納すると共に、必要なファイルやデータ等を格納する。
　メモリ装置１０３は、プログラムの起動指示があった場合に、補助記憶装置１０２からプログラムを読み出して格納する。ＣＰＵ１０４は、メモリ装置１０３に格納されたプログラムに従って品質評価装置１０に係る機能を実現する。インタフェース装置１０５は、ネットワークに接続するためのインタフェースとして用いられる。表示装置１０６はプログラムによるＧＵＩ（Graphical User Interface）等を表示する。入力装置１０７はキーボード及びマウス等、又はタッチパネルで構成され、様々な操作指示を入力させるために用いられる。なお、品質評価装置１０の一例として、スマートフォン、タブレット端末、ＰＣ（Personal Computer）等が挙げられる。
　図２は、本発明の実施の形態における品質評価装置１０の機能構成例を示す図である。図２において、品質評価装置１０は、状態取得部１１、再読込計数部１２、戻る操作計数部１３及びタブ遷移計数部１４等を有する。これら各部は、品質評価装置１０にインストールされた１以上のプログラムが、ＣＰＵ１０４に実行させる処理により実現される。品質評価装置１０は、また、状態履歴記憶部１５を利用する。状態履歴記憶部１５は、例えば、補助記憶装置１０２、又は品質評価装置１０にネットワークを介して接続可能な記憶装置等を用いて実現可能である。
　状態取得部１１は、例えば、予め決められたトリガ（イベント）が発生した複数のタイミングにおいて、その時のｗｅｂブラウザの状態に関する情報を含むデータ（以下、「状態データ」という。）を取得する。厳密には、タブ単位で状態データが取得される。したがって、ｗｅｂブラウザにおいて複数のタブが開かれている場合、並行して状態データの取得が行われる。状態取得部１１は、取得した状態データを状態履歴記憶部１５に記録する。なお、状態取得部１１は、例えば、Ｊａｖａ（登録商標）スクリプト等のスクリプトによって実装されてもよい。この場合、ｗｅｂブラウザに対して、ｗｅｂページの表示時に当該スクリプトが実行されるように設定しておくことで、当該スクリプトがＣＰＵ１０４を状態取得部１１として機能させることができる。
　なお、本実施の形態において、予め決められたトリガ（以下、「対象トリガ」という。）とは、以下の４つである。
（１）新しいｗｅｂページの読み込み時（ページ遷移等によりｗｅｂブラウザ内に新しいページを表示するための場所が用意された際）
（２）ページ遷移の発生
（３）表示状態の変化時（ｗｅｂブラウザが操作対象のアプリケーションとなった際や、ｗｅｂブラウザ内におけるタブの切り替えにより、タブが表示されるようになった際又はタブが非表示になった際）
（４）一定時間ごと
　なお、（１）については、新しいページの読み込み時に発生するｓｔａｒｔイベントのインジェクション処理として検知可能である。すなわち、新しいページの読み込みが発生すると、ｗｅｂブラウザが状態取得部１１を呼び出すため、状態取得部１１は、当該読み込みを検知可能である。なお、ｓｔａｒｔイベントは、
　（２）については、ａｄｄＥｖｅｎｔＬｉｓｔｅｎｅｒ（）でｃｌｉｃｋ（クリック）又はｄｂｌｃｌｉｃｋ（ダブルクリック）イベントを登録しておき、これらのイベントを捕捉し、これらのイベントに基づくｎａｖｉｇｅｔｅイベントを捕捉することで検知可能である。
　（３）については、ａｄｄＥｖｅｎｔＬｉｓｔｅｎｅｒ（）でｖｉｓｉｂｉｌｉｔｙＣｈａｎｇｅイベントを登録しておき、これらのイベントを捕捉することで検知可能である。
　（４）については、タイマーをセットしておくことで検知可能である。
　再読込計数部１２は、状態履歴記憶部１５に記録された状態データの時系列の履歴に基づいて、再読込操作の回数を、ユーザの体感品質の評価指標の値（評価値）の一例としてカウント（計数）し、カウント結果を評価値として出力する。再読込操作とは、同一のｗｅｂページを再読込する操作をいう。
　戻る操作計数部１３は、状態履歴記憶部１５に記録された状態データの時系列の履歴に基づいて、戻る操作の回数をユーザの体感品質の評価値の一例としてカウント（計数）し、カウント結果を評価値として出力する。
　タブ遷移計数部１４は、状態履歴記憶部１５に記録された状態データの時系列の履歴に基づいて、タブ遷移（タブ切り替え操作）の回数をユーザの体感品質の評価値の一例としてカウント（計数）し、カウント結果を評価値として出力する。
　以下、品質評価装置１０が実行する処理手順について説明する。図３は、状態データの記録処理の処理手順の一例を説明するためのフローチャートである。状態データとは、ｗｅｂブラウザの状態を示すデータをいう。なお、図３の処理手順は、タブごとに並行して行われている。
　状態取得部１１は、対象トリガの発生を待機している（Ｓ１０１）。状態取得部１１は、上記の（１）～（４）のいずれかの対象トリガの発生を検知すると（Ｓ１０１でＹｅｓ）、ｗｅｂブラウザから状態データを取得する（Ｓ１０２）。続いて、状態取得部１１は、当該状態データを状態履歴記憶部１５に記録し（Ｓ１０３）、対象トリガの発生を待機する（Ｓ１０１）。
　図４は、状態履歴記憶部１５の構成例を示す図である。図３の処理手順から明らかなように、状態履歴記憶部１５には、いずれかの対象イベントが発生したタイミングにおける状態データが時系列順に記憶される。
　各状態データは、「時刻」と、「タブＩＤ」、「ＵＲＬ」、「表示待ち時間」、「トリガ種別」、「操作記録」及び「可視フラグ」等のページ情報とを含む。すなわち、「タブＩＤ」以降は、ｗｅｂページごとの情報である。
　「時刻」は、状態データが取得された時刻（いずれかの対象トリガの発生時刻）である。「タブＩＤ」は、状態データの取得元のタブのＩＤであり、ｗｅｂブラウザのＡＰＩを用いて「ｔａｂＩＤ」の値を問い合わせることで取得可能である。
　「ＵＲＬ」は、表示対象のｗｅｂページのＵＲＬであり、ｗｅｂブラウザのＡＰＩを用いて「ｌｏｃａｔｉｏｎ．ｈｒｅｆ」の値を問い合わせることで取得可能である。
　「表示待ち時間」は、当該タブにおいて表示対象とされたｗｅｂページの表示待ち時間であり、例えば、ｎａｖｉｇａｔｉｏｎＴｉｍｉｎｇというＡＰＩを用いて得られるパラメータから算出可能である
　「トリガ種別」は、当該状態データの取得の契機となった対象トリガの種別である。本実施の形態では、上記の（１）～（４）が対象トリガであるが、（１）～（４）のそれぞれ対象トリガのトリガ種別は、以下の文字列で状態データに記録されることとする。
（１）"ｓｔａｒｔ"
（２）"ｎａｖｉｇａｔｅ"
（３）"ｖｉｓｉｂｉｌｉｔｙＣｈａｎｇｅ"
（４）"ｔｉｍｅｒ"
　「操作記録」は、ユーザによる操作の種別であり、ｎａｖｉｇａｔｉｏｎＴｉｍｉｎｇというＡＰＩを用いてｔｙｐｅの値を問い合わせることで取得可能である。
　「可視フラグ」は、タブが可視状態か否かを示す情報であり、ｗｅｂブラウザのＡＰＩを用いて「ｄｏｃｕｍｅｎｔ．ｈｉｄｄｅｎ」の値を問い合わせることで取得可能である。
　なお、１つのｗｅｂページの中には、複数のフレームが含まれているのが一般的であり、フレームごとに、ページ情報のパラメータを取得可能であるが、最上位のフレーム（ｗｉｎｄｏｗ．ｔｏｐ属性が真であるフレーム）のページ情報が取得さればよい。
　また、タイミングによっては、ページ情報を構成する一部のパラメータの値を取得できない場合も有る。例えば、表示待ち時間は、（１）～（３）のタイミングにおいて取得可能である可能性は低く、（４）のタイミングにおいて、その時点で表示されているｗｅｂページの表示待ち時間を取得できる可能性が高い。一方、ＵＲＬについては、（１）のタイミングでは取得できない可能性が有る。したがって、ＵＲＬが空である状態データ（以下、「ＵＲＬ空データ」という。）が状態履歴記憶部１５に記録される可能性が有る。そこで、（４）のタイミングで取得した状態データのＵＲＬの値を、当該状態データとタブＩＤが共通し、当該状態データより前のＵＲＬ空データの「ＵＲＬ」に記録すればよい。
　続いて、状態データの履歴を用いた品質の評価値の計測処理について説明する。図５は、状態データの履歴に基づく品質の評価値の計測処理の処理手順の一例を説明するためのフローチャートである。
　ステップＳ２０１及びＳ２０２において、再読込計数部１２は、状態データの履歴（図４）を参照して、再読込操作の回数をカウント（計数）する。
　ステップＳ２０１では、状態データの履歴（図４）における、「再読込ボタン」の操作（押下）（すなわち、再読込の直接的な操作）の回数がカウントされる。当該操作については、状態データの履歴のうち、「トリガ種別」が「ページ遷移」であり、かつ、「操作記録」が、「ｒｅｌｏａｄ」である状態データの数をカウントすることで特定することができる。
　一方、ステップＳ２０２では、「いったん戻るボタンを押して、再度同じリンクをクリックする」という操作の回数がカウントされる。斯かる操作もユーザの操作感覚から再読込操作に該当すると考えられるからである。当該操作は、「或るｗｅｂページから（或るｗｅｂページの表示中に）戻るボタンが操作（押下）され、その直後（閾値Ｘ秒以内）にページ遷移をした際に当該ｗｅｂページと同じＵＲＬであった場合」の回数をカウントすることで特定することができる。具体的には、「操作記録」が「ｂａｃｋ＿ｆｏｒｗａｒｄ」である状態データ（以下、「ｂａｃｋ＿ｆｏｒｗａｒｄ状態データ」という。）を特定し、当該ｂａｃｋ＿ｆｏｒｗａｒｄ状態データとタブＩＤが同じである状態データの中で、当該ｂａｃｋ＿ｆｏｒｗａｒｄ状態データの直前の状態データのＵＲＬと同じＵＲＬを含む状態データが、当該ｂａｃｋ＿ｆｏｒｗａｒｄ状態データの時刻から後の一定時間（例えば、閾値Ｘ秒）以内にあれば、「いったん戻るボタンを押して、再度同じリンクをクリックする」操作の１回分としてカウントされる。
　なお、再読込計数部１２は、ステップＳ２０１及びＳ２０２においてカウントされた回数の合計を再読込操作の回数として出力する。
　続いて、戻る操作計数部１３は、状態データの履歴を参照して、戻る操作の回数をカウント（計数）する（Ｓ２０３）。具体的には、戻る操作計数部１３は、「操作記録」が「ｂａｃｋ＿ｆｏｒｗａｒｄ」である状態データの数をカウントし、その数を戻る操作の回数として出力する。
　続いて、タブ遷移計数部１４は、状態データの履歴を参照して、タブ遷移の回数をカウント（計数）する（Ｓ２０４）。具体的には、タブ遷移計数部１４は、まず、「可視フラグ」が「Ｔｒｕｅ」である各状態データを特定する。続いて、タブ遷移計数部１４は、特定された状態データごとに、当該状態データの「タブＩＤ」と当該状態データの直前の状態データの「タブＩＤ」とが異なるか否かを判定する。タブ遷移計数部１４は、比較されたタブＩＤが異なったことを示す判定結果の回数をタブ遷移の回数として出力する。
　なお、上記においてカウントされる回数を示す数値は、ユーザの体感品質や快適性の低下と共に増加する特定が有ると考えられる。したがって、当該数値自体、又は当該数値を閲覧されたｗｅｂページ数当たりの値に正規化した数値を、ユーザの体感品質の評価指標の値としてもよい。閲覧されたｗｅｂページ数は、例えば、図５の処理の対象とされて状態データ群のうち、トリガ種別が「ｓｔａｒｔ」である状態データの個数、又は「ＵＲＬ」の種別数によって計測されてもよい。
　上述したように、本実施の形態によれば、ｗｅｂ閲覧の体感品質の評価の妥当性を向上させることができる。
　なお、本実施の形態において、状態取得部１１は、記録部の一例である。再読込計数部１２、戻る操作計数部１３、タブ遷移計数部１４は、計数部の一例である。状態履歴記憶部は、記憶部の一例である。
　以上、本発明の実施の形態について詳述したが、本発明は斯かる特定の実施形態に限定されるものではなく、請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
１０　　　　　品質評価装置
１１　　　　　状態取得部
１２　　　　　再読込計数部
１３　　　　　戻る操作計数部
１４　　　　　タブ遷移計数部
１５　　　　　状態履歴記憶部
１００　　　　ドライブ装置
１０１　　　　記録媒体
１０２　　　　補助記憶装置
１０３　　　　メモリ装置
１０４　　　　ＣＰＵ
１０５　　　　インタフェース装置
１０６　　　　表示装置
１０７　　　　入力装置
Ｂ　　　　　　バス

Claims (8)

  1. 　ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録部と、
    　前記記憶部を参照して、再読込操作を行った回数をユーザが体感した品質の評価値として計数する計数部と、
    を有することを特徴とする品質評価装置。
  2. 　前記計数部は、前記ｗｅｂブラウザの再読込ボタンの押下の回数と、第１のｗｅｂページの表示中に戻る操作が行われた後に前記第１のｗｅｂページへの遷移が行われた回数とを前記評価値として計数する、
    ことを特徴とする請求項１記載の品質評価装置。
  3. 　ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録部と、
    　前記記憶部を参照して、戻る操作を行った回数をユーザが体感した品質の評価値として計数する計数部と、
    を有する、ことを特徴とする品質評価装置。
  4. 　ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録部と、
    　前記記憶部を参照して、タブの遷移の回数をユーザが体感した品質の評価値として計数する計数部と、
    を有することを特徴とする品質評価装置。
  5. 　ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録手順と、
    　前記記憶部を参照して、再読込操作を行った回数をユーザが体感した品質の評価値として計数する計数手順と、
    をコンピュータが実行することを特徴とする品質評価方法。
  6. 　ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録手順と、
    　前記記憶部を参照して、戻る操作を行った回数をユーザが体感した品質の評価値として計数する計数手順と、
    を有する、ことを特徴とする品質評価方法。
  7. 　ｗｅｂブラウザの状態を示す情報を複数のタイミングで記憶部に記録する記録手順と、
    　前記記憶部を参照して、タブの遷移の回数をユーザが体感した品質の評価値として計数する計数手順と、
    をコンピュータが実行することを特徴とする品質評価方法。
  8. 　請求項１乃至４いずれか一項記載の品質評価装置としてコンピュータを機能させることを特徴とするプログラム。
PCT/JP2020/007228 2020-02-21 2020-02-21 品質評価装置、品質評価方法及びプログラム WO2021166252A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/JP2020/007228 WO2021166252A1 (ja) 2020-02-21 2020-02-21 品質評価装置、品質評価方法及びプログラム
JP2022501581A JPWO2021166252A1 (ja) 2020-02-21 2020-02-21
US17/801,105 US12026217B2 (en) 2020-02-21 Quality evaluation apparatus, quality evaluation method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/007228 WO2021166252A1 (ja) 2020-02-21 2020-02-21 品質評価装置、品質評価方法及びプログラム

Publications (1)

Publication Number Publication Date
WO2021166252A1 true WO2021166252A1 (ja) 2021-08-26

Family

ID=77390543

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/007228 WO2021166252A1 (ja) 2020-02-21 2020-02-21 品質評価装置、品質評価方法及びプログラム

Country Status (2)

Country Link
JP (1) JPWO2021166252A1 (ja)
WO (1) WO2021166252A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010273045A (ja) * 2009-05-20 2010-12-02 Hitachi Software Eng Co Ltd サーバ装置
JP2016134881A (ja) * 2015-01-22 2016-07-25 株式会社日立製作所 ネットワークシステム
JP6349466B2 (ja) * 2015-10-16 2018-06-27 楽天株式会社 情報処理装置、情報処理方法、プログラム及び記憶媒体

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120203592A1 (en) * 2011-02-08 2012-08-09 Balaji Ravindran Methods, apparatus, and articles of manufacture to determine search engine market share
US9239878B2 (en) * 2012-12-19 2016-01-19 Amazon Technologies, Inc. Interactivity analyses of web resources based on reload events

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010273045A (ja) * 2009-05-20 2010-12-02 Hitachi Software Eng Co Ltd サーバ装置
JP2016134881A (ja) * 2015-01-22 2016-07-25 株式会社日立製作所 ネットワークシステム
JP6349466B2 (ja) * 2015-10-16 2018-06-27 楽天株式会社 情報処理装置、情報処理方法、プログラム及び記憶媒体

Also Published As

Publication number Publication date
JPWO2021166252A1 (ja) 2021-08-26
US20230107604A1 (en) 2023-04-06

Similar Documents

Publication Publication Date Title
US11755387B1 (en) Updating code of an app feature based on a value of a query feature
US9195372B2 (en) Methods, systems, and computer program products for grouping tabbed portion of a display object based on content relationships and user interaction levels
US7827486B2 (en) Evaluation of visual content usage
US9799037B2 (en) Service management using user experience metrics
US8332765B2 (en) Problem reporting system based on user interface interactions
US8589876B1 (en) Detection of central-registry events influencing dynamic pointers and app feature dependencies
US20090064000A1 (en) SYSTEMS, METHODS AND COMPUTER PRODUCTS TO AUTOMATICALLY COMPLETE a GUI TASK
CN107450900B (zh) 一种截图方法及装置
EP2932393B1 (en) Automated correlation and analysis of callstack and context data
CN111338901A (zh) 一种Redis监控方法、Redis监控装置及终端
US20230251878A1 (en) Capturing and processing interactions with a user interface of a native application
JP6823265B2 (ja) 分析装置、分析システム、分析方法および分析プログラム
US20120079599A1 (en) Non-transitory computer readable storage medium, access filtering device, and access filtering method
WO2015114753A1 (ja) 分析装置および分析方法
WO2021129335A1 (zh) 操作监控方法及装置、操作分析方法及装置
WO2017206476A1 (zh) 一种cpu占用的检测方法、装置及设备
CN110401580A (zh) 基于心跳机制的网页状态监听方法及相关设备
CN106921518A (zh) 监控视图展示方法及装置
CN114996103A (zh) 页面异常检测方法、装置、电子设备和存储介质
US9104573B1 (en) Providing relevant diagnostic information using ontology rules
WO2021166252A1 (ja) 品質評価装置、品質評価方法及びプログラム
EP3262504A1 (en) Application event tracing
CN112306870A (zh) 一种基于直播app的数据处理方法和装置
US20230065492A1 (en) Method for obtaining browser running data, electronic device, and storage medium
JP2015001795A (ja) 性格分析装置および性格分析用プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20920632

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022501581

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20920632

Country of ref document: EP

Kind code of ref document: A1