JPH0836510A

JPH0836510A - ユーザインタフェース評価装置

Info

Publication number: JPH0836510A
Application number: JP6170601A
Authority: JP
Inventors: Hidehiko Okada; 英彦岡田; Toshiyuki Asahi; 敏之旭
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 1994-07-22
Filing date: 1994-07-22
Publication date: 1996-02-06
Anticipated expiration: 2012-06-04
Also published as: JP2616563B2

Abstract

(57)【要約】【目的】複数の操作者の対話履歴から、操作の正誤にか
かわらず操作時間に関する共通的傾向を自動的に抽出
し、操作者の個人差の影響を最小限に抑え客観的な評価
を可能にすること。【構成】ユーザインタフェース評価装置１は、操作者が
被評価装置１０を操作したときに収集した対話履歴を保
存する対話履歴保存装置１２と接続している。内部に
は、対話履歴を受け、この中から任意に定めた条件を満
足するすべてのパタンのデータを抽出するパタン抽出装
置２と、パタン抽出条件を保存する条件保存装置３と、
抽出したパタンのデータを保存するパタン保存装置４
と、保存したパタンのデータに含まれる操作時間データ
を集計する集計装置５と、集計値の集合を保存する集計
値保存装置６と、操作時間データの集計値の集合から集
計結果を表す図表を作成し、外部の出力装置１４を制御
して表示する表示制御装置７とがある。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明はユーザインタフェース評
価装置に関し、特にユーザインタフェース部を有する対
話システムの操作性（使いやすさ）を評価するユーザイ
ンタフェース評価装置に関する。

【０００２】

【従来の技術】従来から、使いやすい対話システムを開
発するため、設計された対話システムに内在する使いに
くさの問題点を抽出しこれを改善することが試みられて
いる。例えば、被験者に被評価システムを実際に操作し
てもらい、このときの対話の状況を、ユーザインタフェ
ース評価装置で分析することによって、使いやすさを評
価することが行われているが、この場合、ユーザインタ
フェース評価装置によっては、被験者の個人差が評価結
果に大きな影響を与えることも考えられる。この個人差
の影響を低減させることが可能なユーザインタフェース
評価装置の一例として、情報処理学会研究報告、Ｖｏ
ｌ．９３、Ｎｏ．８０、２５頁〜３２頁（１９９３年９
月１７日発行）には、複数の被験者から得られた対話履
歴の間に共通する誤操作パタンを自動的に抽出し、誰も
が同じように行ってしまう誤操作を見つけることが可能
な、ユーザインタフェース評価装置が提案されている。
このユーザインタフェース評価装置の使用により、誤操
作の観点から、操作者の個人差の影響を最小限に抑えた
客観的な評価を行うことができるようになっている。

【０００３】

【発明が解決しようとする課題】上述した従来のユーザ
インタフェース評価装置は、複数の被験者から得られた
対話履歴の間に共通する誤操作パタンを自動的に抽出
し、誰もが同じように行ってしまう誤操作を見つけるこ
とでは、個人差の影響を低減させている。しかし、誰も
が同じところで正しい操作を見つけるまでに長い時間が
かかってしまい使いにくいといった、操作時間の観点か
ら見た場合の問題個所については、このとき行われた操
作自体は正しいものであるため、誤操作パタンには該当
せず、共通的な誤操作を抽出するという従来のユーザイ
ンタフェース評価装置では、このような操作時間がかか
り過ぎて使いにくいといった、操作時間の観点から見た
問題個所を見つけることはできないという問題点があ
る。

【０００４】本発明の目的は、複数の操作者の対話履歴
から、操作の正誤にかかわらず操作時間に関する共通的
傾向を自動的に抽出し、操作者の個人差の影響を最小限
に抑え客観的な評価を可能にするユーザインタフェース
評価装置を提供することにある。

【０００５】

【課題を解決するための手段】本発明のユーザインタフ
ェース評価装置は、操作者がユーザインタフェース部を
有する対話システムを操作したときに得られる一つない
し複数の対話履歴の中から任意に定めた条件を満足する
すべてのパタンのデータを抽出するパタン抽出装置と、
前記パタン抽出装置で用いる任意に定めた条件の集合を
保存する条件保存装置と、前記パタン抽出装置が抽出し
たパタンのデータを保存するパタン保存装置と、前記パ
タン保存装置の保存するパタンのデータに含まれる操作
時間データを集計する集計装置と、前記集計装置が求め
た集計値の集合を保存する集計値保存装置と、前記集計
値保存装置が保存する操作時間データの集計値の集合か
ら集計結果を表す図表を作成し出力装置に表示する表示
制御装置とを有する構成である。

【０００６】本発明のユーザインタフェース評価装置
は、前記条件保存装置の保存する任意に定めた条件が、
操作の分類および操作回数を含んでもよい。

【０００７】

【作用】本発明のユーザインタフェース評価装置におい
ては、操作者の行った対話が特定の状況にあるときに要
した操作時間のデータを、複数の操作者の対話履歴のデ
ータの中から抽出し、集計する。このデータ抽出のため
に、注目すべき対話の状況を規定する条件を設定し、対
話履歴のデータの個々の要素（対話システムの各時点で
の状態と、そのときに操作者が行った操作）が条件を満
足するかどうかを判定する。この条件は、使いやすさ評
価の目的上ノイズとなるデータを計算から除外するため
のものであり、例えば「任意の状態Ｓのときに行った正
解操作の時間だけに注目する」、「任意の状態Ｓのとき
に行った１回目の操作の時間だけに注目する」などであ
る。条件を満足した操作時間データの集合を保存し、こ
のデータを用いて操作時間の統計量を計算する。さら
に、計算された統計量の値を図表の形式で出力装置に表
示する。

【０００８】以上述べたように本発明のユーザインタ
フェース評価装置は、複数の操作者の対話履歴のデータ
から、操作時間に関する共通的傾向を自動的に抽出し、
図表を用いて評価者に表示できるため、操作時間の側面
から、操作者の個人差の影響を最小限に抑えた客観的な
評価が可能となる。

【０００９】

【実施例】次に、本発明の実施例について図面を参照し
て説明する。

【００１０】図１は本発明の一実施例のブロック図であ
る。

【００１１】本発明のユーザインタフェース評価装置１
は、操作者がユーザインタフェース部を有する被評価装
置１０を操作したときに得られる一つないし複数の対話
履歴を対話履歴収集装置１１が収集し、この対話履歴収
集装置１１が収集した対話履歴を保存する対話履歴保存
装置１２と接続している。ユーザインタフェース評価装
置１の内部には、対話履歴保存装置１２の保存する対話
履歴を受け、この中から任意に定めた条件を満足するす
べてのパタンのデータを抽出するパタン抽出装置２と、
パタン抽出装置２で用いる任意に定めた条件の集合を保
存する条件保存装置３と、パタン抽出装置２が抽出した
パタンのデータを保存するパタン保存装置４と、パタン
保存装置４の保存するパタンのデータに含まれる操作時
間データを集計する集計装置５と、集計装置５が求めた
集計値の集合を保存する集計値保存装置６と、集計値保
存装置６が保存する操作時間データの集計値の集合から
集計結果を表す図表を作成し、外部の出力装置１４を制
御して表示する表示制御装置７とが備えられている。

【００１２】図２は本実施例における操作者の対話履歴
と正解の対話履歴の構成対応図である。図２分図(a) は
操作者i(ただしi=1,2,…,I) の対話履歴U_iを表し、図２
分図(b) は正解の対話履歴U'を表す。

【００１３】図３はパタン抽出装置のデータ処理のアル
ゴリズムを示す流れ図である。

【００１４】図４は操作者の対話履歴からパタンを抽出
する条件の集合を説明するための説明図である。

【００１５】図５は図４で示される条件の集合を形成す
る要素を説明するための説明図である。

【００１６】図６は集計装置のデータ処理のアルゴリズ
ムを示す流れ図である。

【００１７】図７は操作時間の平均と標準偏差とを表す
図表の一例を説明するための説明図である。

【００１８】図８は操作時間の平均のみを表す図表の一
例を説明するための説明図である。

【００１９】図９は実際の操作時間データの分布を表す
図表の一例を説明するための説明図である。

【００２０】次に動作について説明する。説明には主に
図１を使用し、適宜他の図面を引用する。

【００２１】対話履歴収集装置１１は、操作者が被評価
装置１０を用いて任意の作業を行うとき、操作者が被評
価装置１０に対して行う入力操作と、操作者がこの入力
操作を選択するまでに要した時間と、該当の入力に対す
る応答を行った後の被評価装置１０の内部状態とをモニ
タして収集する。対話履歴の内容は、入力操作と内部状
態と操作時間の３つを基本単位としたものである。

【００２２】即ち、操作者i(ただしi=1,2,…,I) の対話
履歴U_iは、図２分図(a) に示すように、U_i={S_i(0),T
_i(1),t_i(1),S_i(1),…,T_i(j),t_i(j), S_i(j),…,T_i(J_i),t
_i(J_i),S_i(J_i)} となる。ここで、S_i(j)(ただしj=0,1,
…,J_i)は、対話の各時点j における被評価装置１０の内
部状態（特にS_i(0) は初期状態、S_i(J_i)は最終状態）で
あり、T_i(j)(ただしj=1,2,…,J_i)は、対話の各時点j に
おける被評価装置１０に対する操作者の入力操作（特に
T_i(J_i)は最終操作）であり、t_i(j)(ただしj=1,2,…,J_i)
は、被評価装置１０が状態S_i(j-1) に遷移して入力待ち
状態になってから、操作者が入力操作T_i(j) を選択する
までにかかった時間である。

【００２３】又、操作者が行った作業に関する被評価装
置の正解の操作手順（設計者の意図する操作手順であ
り、通常は、任意の作業を達成するために必要かつ最小
な手順のこと）に従って、一つ一つの操作に標準的な時
間をかけて作業を行った場合を想定し（この標準時間
は、例えば理論的な式を用いて計算する）、図２分図
(b)に示すように、正解の対話履歴U'={S'(0),T'(1),t'
(1),S'(1),…,T'(k),t'(k),S'(k),…,T'(K),t'(K),S'
(K)} を対話履歴U_iと同形式で記録する。

【００２４】これらの対話履歴{U₁,U₂,…,U_I,U'} を対
話履歴保存装置１２に保存する。

【００２５】次に、ユーザインタフェース評価装置１で
は、パタン抽出装置２が、対話履歴{U₁,U₂, …,U_I}のな
かから、任意の条件R_p（ただしp=1,2,…,P）を満足する
パタンをすべて抽出する。対象とする操作が、正解操作
か誤操作かを判定するため、正解の対話履歴U'も条件判
定に用いる。このパタン抽出に用いる条件{R₁,R₂, …,R
_P}は、条件保存装置３に保存してある。パタン抽出装置
２は、抽出したパタンのデータをパタン保存装置４に保
存する。

【００２６】集計装置５では、パタン保存装置４に保存
されたパタンのデータに含まれる操作時間データを読み
込み、このデータを用いて、例えば操作時間の平均や標
準偏差の値を計算することにより、複数の操作者に関す
る操作時間の集計を行う。

【００２７】次に、パタン抽出装置２におけるデータ処
理のアルゴリズムを図３を用いて説明する。

【００２８】動作を開始すると、ステップ（以下Ｓｔと
記す）１〜３では、条件番号ｐと、正解対話の時点ｋ
と、操作者番号ｉとのそれぞれについて、順次初期設定
する。次に、Ｓｔ４では、抽出パタンを示す添字集合C
_pkiを空集合｛φ｝として初期化し、Ｓｔ５で操作者ｉ
の対話の時点ｊを初期設定する。続いてＳｔ６〜１１で
は、操作者i(=1,2,…,I)の対話履歴U_iのなかから、条件
R_pを満足するパタンを抽出し、その部分を表す添字jを
集合C_pkiの要素として追加していく。例えば、「任意の
状態Ｓにおける操作Ｔが正解操作（又は誤操作）」とい
う条件や、「任意の状態Ｓにおける操作Ｔが１回目の操
作（又は２回目以降の操作）」という条件を用いる場
合、条件R_pは図４のように表される。ただし、図４の例
ではP=9 である。又、図４の中のq₁〜q₇は、具体的には
図５に示す内容である。例えば条件R₄を用いる場合で
は、S_i(j-1)=S'(k-1) でかつS_i(j)=S'(k) であり、かつ
T_i(j)=T'(k) である場合に、添字j で示される対話履歴
U_i中のパタンのデータ{T_i(j),t_i(j),S_i(j)} が条件を満
足すると判定され、j が集合C_pkiの要素として追加され
る。条件R₁〜R₃は、正解の操作と誤操作の両方を対象と
する場合の条件であり、条件R₄〜R₆は、正解の操作だけ
を対象とする場合の条件であり、条件R₇〜R₉は、誤操作
だけを対象とする場合の条件である。又、条件要素q₆を
含む条件（即ちR₂、R₅、R₈）は、操作者がある状態で１
回目に行った操作だけを対象とする場合の条件であり、
条件要素q₇を含む条件（即ちR₃、R₆、R₉）は、操作者が
ある状態で行った操作のなかで２回目以降のものだけを
対象とする場合の条件であり、条件要素q₆とq₇のどちら
も含まない条件（即ちR₁、R₄、R₇）は、操作者がある状
態で行った操作を、何回目であっても構わずに対象とす
る場合の条件である。このパタン抽出処理が、Ｓｔ１２
〜１５ですべての k( ＝1,2,…,K) およびすべての p
(＝1,2,…,P) についての設定を順次行うことで、すべ
ての組合せで実行可能となる。

【００２９】集合C_pki（ただしp ＝1,2,…,Pおよびk=1,
2,…,Kおよびi ＝1,2,…,I）と、この集合C_pkiの要素ｊ
によって指し示されるすべてのパタンのデータ{T_i(j),t
_i(j),S_i(j)} が、パタン保存_装置４に保存される。

【００３０】次に集計装置５におけるデータ処理のアル
ゴリズムを図６を用いて説明する。

【００３１】Ｓｔ２１〜２２では、条件番号ｐと、正解
対話の時点ｋとのそれぞれについて、順次初期設定す
る。次に、Ｓｔ２３では、条件R_pを満足したパタンが対
話履歴｛U₁,U₂, …，U_I｝のなかにいくつあったかを
カウントし、すなわち集合C_pkiの要素の数を表している
｜C_pki｜を積算し、その値をZ に格納する。次に、Ｓｔ
２４で Z＝0 であることは、条件を満足するパタンが一
つもなかったことを表しているので、Ｓｔ２９，３０で
状態S'(k) において操作者が要した操作時間の平均μ_pk
と、標準偏差σ_pkとを、それぞれμ_pk=0、σ_pk=0とす
る。

【００３２】次に、Ｓｔ２４で Z≠0 のときは、Ｓｔ２
５〜２８で条件を満足したパタンのデータに含まれる操
作時間データT_i(j) を用いて、μ_pkとσ_pkを計算する。
以下、この計算が、Ｓｔ３１〜３４ですべての k( ＝1,
2,…,K) およびすべての p(＝1,2,…,P) についての設
定を順次行うことで、すべての組合せで実行可能とな
る。

【００３３】計算されたμ_pkとσ_pk（ただしp=1,2,…,P
およびk=1,2,…,K）の値は集計値保存装置６に保存され
る。

【００３４】表示制御装置７では、対話履歴保存装置１
２に保存された正解の対話履歴U'、パタン保存装置４に
保存されたパタンのデータに含まれる操作時間データt_i
(j)（ただしi=1,2,…,Iおよび j∈C_pki）、および集計
値保存装置６に保存されたμ_pk、σ_pk（ただしp=1,2,
…,Pおよびk=1,2,…,K）の値を用いて、出力装置１４に
図表を表示させる。図７〜図９はこの図表の例である。
図７に示すノード７０１およびアーク７０２は、それぞ
れ正解の対話履歴U'における状態S'(k) および操作T'
(k) を表しており（図中の他のノードとアークも同様で
ある）、グラフ記号７０３、７０４はそれぞれ、任意の
pに関する平均μ_pkと標準偏差σ_pkの大きさを表してい
る（k=1,2,…,K）。このグラフにより、正解の対話履歴
U'の各状態S'(k) ごとの、複数の操作者が要した操作時
間の平均や標準偏差の値の大きさを、グラフ記号７０３
や７０４の大きさによって視覚的に把握することができ
る。又、図８では、ノード８０１とアーク８０２とは、
図７と同様、それぞれ正解の対話履歴U'における状態S'
(k) および操作T'(k) を表しており、ノードの大きさ
（面積）が平均μ_pkの値に比例するよう表示している。
このグラフにより、基準対話の状態遷移の流れを、操作
時間の情報と関連させて直感的に把握することができ
る。又、図９では、ノード９０１とアーク９０２とは、
図７と同様、それぞれ正解の対話履歴U'における状態S'
(k) および操作T'(k) を表しており、プロット点９０３
は、任意の pに関するt_i(j) の値を表す（ただしi=1,2,
…,Iおよび j∈C_pki）。このグラフにより、平均μ_pkと
標準偏差σ_pkとの値だけからでは把握できない実際のデ
ータ分布を、プロット点によって視覚的に把握すること
ができるようになる。

【００３５】

【発明の効果】以上説明したように、本発明は、操作者
が対話システムを操作したことで得られる対話履歴から
任意に定めた条件を満足するすべてのパタンのデータを
抽出し、このパタンのデータに含まれる操作時間データ
を集計し、この集計値の集合から操作時間に関する共通
的傾向を自動的に抽出し、図表を用いて評価者に表示す
るようにしたので、操作時間の観点から、操作者の個人
差の影響を最小限に抑えた客観的な評価が可能になると
いう効果が有る。

【図面の簡単な説明】

【図１】本発明の一実施例のブロック図である。

【図２】本実施例における操作者の対話履歴と正解の対
話履歴の構成対応図である。

【図３】パタン抽出装置および集計装置のデータ処理の
アルゴリズムを示す流れ図である。

【図４】操作者の対話履歴からパタンを抽出する条件の
集合を説明するための説明図である。

【図５】図４で示される条件の集合を形成する要素を説
明するための説明図である。

【図６】集計装置のデータ処理のアルゴリズムを示す流
れ図である。

【図７】操作時間の平均と標準偏差とを表す図表の一例
を説明するための説明図である。

【図８】操作時間の平均のみを表す図表の一例を説明す
るための説明図である。

【図９】実際の操作時間データの分布を表す図表の一例
を説明するための説明図である。

【符号の説明】

１ユーザインタフェース評価装置２パタン抽出装置３条件保存装置４パタン保存装置５集計装置６集計値保存装置７表示制御装置１０被評価装置１１対話履歴収集装置１２対話履歴保存装置１４出力装置

─────────────────────────────────────────────────────

【手続補正書】

【提出日】平成６年１１月１７日

【手続補正１】

【補正対象書類名】明細書

【補正対象項目名】００２８

【補正方法】変更

【補正内容】

【００２８】動作を開始すると、ステップ（以下Ｓｔ
と記す）１〜３では、条件番号ｐと、正解対話の時点ｋ
と、操作者番号ｉとのそれぞれについて、順次初期設定
する。次に、Ｓｔ４では、抽出パタンを示す添字集合C
_pkiを空集合｛φ｝として初期化し、Ｓｔ５で操作者ｉ
の対話の時点ｊを初期設定する。続いてＳｔ６〜１１で
は、操作者 i(=1,2,…,I) の対話履歴U_iのなかから、条
件R_pを満足するパタンを抽出し、その部分を表す添字ｊ
を集合C_pkiの要素として追加していく。例えば、「任意
の状態Ｓにおける操作Ｔが正解操作（又は誤操作）」と
いう条件や、「任意の状態Ｓにおける操作Ｔが１回目の
操作（又は２回目以降の操作）」という条件を用いる場
合、条件R_pは図４のように表される。ただし、図４の例
ではP=9 である。又、図４の中のq₁〜q₇は、具体的には
図５に示す内容である。例えば条件R₄を用いる場合で
は、S_i(j-1)=S'(k-1) でかつS_i(j)=S'(k) であり、かつ
T_i(j)=T'(k) である場合に、添字ｊで示される対話履歴
U_i中のパタンのデータ{T_i(j),t_i(j),S_i(j)} が条件を満
足すると判定され、ｊが集合C_pkiの要素として追加され
る。条件R₁〜R₃は、正解の操作と誤操作の両方を対象と
する場合の条件であり、条件R₄〜R₆は、正解の操作だけ
を対象とする場合の条件であり、条件R₇〜R₉は、誤操作
だけを対象とする場合の条件である。又、条件要素q₆を
含む条件（即ちR₂、R₅、R₈）は、操作者がある状態で１
回目に行った操作だけを対象とする場合の条件であり、
条件要素q₇を含む条件（即ちR₃、R₆、R₉）は、操作者が
ある状態で行った操作のなかで２回目以降のものだけを
対象とする場合の条件であり、条件要素q₆とq₇のどちら
も含まない条件（即ちR₁、R₄、R₇）は、操作者がある状
態で行った操作を、何回目であっても構わずに対象とす
る場合の条件である。このパタン抽出処理が、Ｓｔ１２
〜１５ですべての k(=1,2,…,K) およびすべての p(=1,
2,…,P) についての設定を順次行うことで、すべての組
合せで実行可能となる。

【手続補正２】

【補正対象書類名】明細書

【補正対象項目名】００２９

【補正方法】変更

【補正内容】

【００２９】集合C_pki（ただしp=1,2,…,Pおよびk=1,
2,…,Kおよびi=1,2,…,I）と、この集合C_pkiの要素ｊに
よって指し示されるすべてのパタンのデータ{T_i(j),t
_i(j),S_i(j)} が、パタン保存_装置４に保存される。

【手続補正３】

【補正対象書類名】明細書

【補正対象項目名】００３１

【補正方法】変更

【補正内容】

【００３１】Ｓｔ２１〜２２では、条件番号ｐと、正
解対話の時点ｋとのそれぞれについて、順次初期設定す
る。次に、Ｓｔ２３では、条件R_pを満足したパタンが対
話履歴{U₁,U₂, …,U_I}のなかにいくつあったかをカウン
トし、すなわち集合C_pkiの要素の数を表している｜C_pki
｜を積算し、その値をＺに格納する。次に、Ｓｔ２４で
Z＝0 であることは、条件を満足するパタンが一つもな
かったことを表しているので、Ｓｔ２９，３０で状態S'
(k) において操作者が要した操作時間の平均μ_pkと、標
準偏差σ_pkとを、それぞれμ_pk=0、σ_pk=0とする。

【手続補正４】

【補正対象書類名】明細書

【補正対象項目名】００３２

【補正方法】変更

【補正内容】

【００３２】次に、Ｓｔ２４で Z≠0 のときは、Ｓｔ
２５〜２８で条件を満足したパタンのデータに含まれる
操作時間データt_i (j) を用いて、μ_pkとσ_pkを計算す
る。以下、この計算が、Ｓｔ３１〜３４ですべての k(=
1,2,…,K) およびすべての p(=1,2,…,P) についての設
定を順次行うことで、すべての組合せで実行可能とな
る。

【手続補正５】

【補正対象書類名】明細書

【補正対象項目名】００３４

【補正方法】変更

【補正内容】

【００３４】表示制御装置７では、対話履歴保存装置
１２に保存された正解の対話履歴U'、パタン保存装置４
に保存されたパタンのデータに含まれる操作時間データ
t_i(j) （ただしi=1,2,…,Iおよび j∈C_pki）、および集
計値保存装置６に保存されたμ_pk、σ_pk（ただしp=1,2,
…,Pおよびk=1,2,…,K）の値を用いて、出力装置１４に
図表を表示させる。図７〜図９はこの図表の例である。
図７に示すノード７０１およびアーク７０２は、それぞ
れ正解の対話履歴U'における状態S'(k) および操作T'
(k) を表しており（図中の他のノードとアークも同様で
ある）、グラフ記号７０３、７０４はそれぞれ、任意の
ｐに関する平均μ_pkと標準偏差σ_pkの大きさを表してい
る（k=1,2,…,K）。このグラフにより、正解の対話履歴
U'の各状態S'(k) ごとの、複数の操作者が要した操作時
間の平均や標準偏差の値の大きさを、グラフ記号７０３
や７０４の大きさによって視覚的に把握することができ
る。又、図８では、ノード８０１とアーク８０２とは、
図７と同様、それぞれ正解の対話履歴U'における状態S'
(k) および操作T'(k) を表しており、ノードの大きさ
（面積）が平均μ_pkの値に比例するよう表示している。
このグラフにより、基準対話の状態遷移の流れを、操作
時間の情報と関連させて直感的に把握することができ
る。又、図９では、ノード９０１とアーク９０２とは、
図７と同様、それぞれ正解の対話履歴U'における状態S'
(k) および操作T'(k) を表しており、プロット点９０３
は、任意のｐに関するt_i(j) の値を表す（ただしi=1,2,
…,Iおよび j∈C_pki）。このグラフにより、平均μ_pkと
標準偏差σ_pkとの値だけからでは把握できない実際のデ
ータ分布を、プロット点によって視覚的に把握すること
ができるようになる。

【手続補正６】

【補正対象書類名】明細書

【補正対象項目名】図３

【補正方法】変更

【補正内容】

【図３】パタン抽出装置のデータ処理のアルゴリズム
を示す流れ図である。

Claims

【特許請求の範囲】

【請求項１】操作者がユーザインタフェース部を有す
る対話システムを操作したときに得られる一つないし複
数の対話履歴の中から任意に定めた条件を満足するすべ
てのパタンのデータを抽出するパタン抽出装置と、前記
パタン抽出装置で用いる任意に定めた条件の集合を保存
する条件保存装置と、前記パタン抽出装置が抽出したパ
タンのデータを保存するパタン保存装置と、前記パタン
保存装置の保存するパタンのデータに含まれる操作時間
データを集計する集計装置と、前記集計装置が求めた集
計値の集合を保存する集計値保存装置と、前記集計値保
存装置が保存する操作時間データの集計値の集合から集
計結果を表す図表を作成し出力装置に表示する表示制御
装置とを有することを特徴とするユーザインタフェース
評価装置。
【請求項２】前記条件保存装置の保存する任意に定め
た条件が、操作の分類および操作回数を含むことを特徴
とする請求項１記載のユーザインタフェース評価装置。