JP6421669B2

JP6421669B2 - 評価方法、評価プログラム、及び評価装置

Info

Publication number: JP6421669B2
Application number: JP2015063803A
Authority: JP
Inventors: 剛陽寺田; 津田　宏; 宏津田; 片山　佳則; 佳則片山
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 2015-03-26
Filing date: 2015-03-26
Publication date: 2018-11-14
Anticipated expiration: 2035-03-26
Also published as: US20160283719A1; JP2016184264A

Description

本願は、評価方法、評価プログラム、及び評価装置に関する。

機密情報詐取やシステム破壊等を目的として、例えば、特定の企業に標的を定めて攻撃を行う「標的型サイバー攻撃」が問題となっている。標的とする組織のＩｎｆｏｒｍａｔｉｏｎＴｅｃｈｎｏｌｏｇｙ（ＩＴ）システムへの主たる侵入経路は、メールである。侵入に使われるメールは、不特定多数を対象とする従来のスパムメールとは区別して「標的型メール」と呼ばれている。

標的型メールは、既存のアンチウイルスプログラムやスパムフィルタで対策できないため、ユーザサイド（例えば、各従業員等）での対策が重要となる。そこで、例えば各ユーザに対して標的型メールを模した、本文や件名等に不自然な箇所を含んでいるダミーメールであって、添付ファイルを添付したものを送付し、ユーザが添付ファイルを開封した場合に記録する技術がある。

特開２０１３−１４９０６３号公報

しかしながら、上記技術では、ユーザがダミーメールのどの項目（例えばヘッダ情報、本文、添付ファイル）の不自然な箇所を怪しいと思い添付ファイルを開封しなかったのか、もしくはユーザがダミーメールのどの項目の不自然な箇所を見落として添付ファイルを開封してしまったのかを判定することは難しい。
一つの側面では、本発明は、編集処理された項目を、ユーザが正しく選択できるかを評価することを可能にすることを目的とする。

評価方法の一観点では、件名及び／又は本文の項目と、差出人の項目とを含む複数の項目のうち特定の一又は複数の項目について特定の編集処理がなされた情報を表示し、前記複数の項目に含まれる一又は複数の項目についての選択を受け付け、選択された前記一又は複数の項目と、前記特定の編集がなされた項目との一致状況に応じた評価結果の出力を行う。

編集処理された項目を、ユーザが正しく選択できるかを評価することを可能にする。

図１は、評価装置のハードウェア構成例を示す図である。図２は、訓練画面の一例を示す図である。図３は、第１実施形態に係る評価装置による選択の評価の処理の流れを示す図である。図４は、第２実施形態に係る評価装置による訓練画面作成の処理の流れを示す図である。図５は、評価結果情報の表示画面の一例を示す図である。図６は、第２実施形態に係る評価装置による選択の評価の処理の流れを示す図である。図７は、評価装置と通信ネットワークとの接続形態の一例を示す図である。図８（ａ）は、受信メールの一例を示す図である。図８（ｂ）は、図８（ａ）の受信メールを基に作成された訓練画面の一例を示す図である。図９は、作成基準テーブルの一例を示す図である。図１０は、第３実施形態に係る評価装置による選択の評価の処理の流れを示す図である。図１１は、評価結果の表示画面の一例を示す図である。

以下、添付図面を参照しながら各実施形態について詳細に説明する。各実施形態における各処理は適宜組み合わせることが可能である。なお、各実施形態を説明するための全図において、同一部には原則として同一の符号を付し、その繰り返しの説明は省略する。
（第１実施形態）
評価装置１００のハードウェア構成例について、図１を用いて説明する。図１は、評価装置１００のハードウェア構成例を示す図である。評価装置１００は、例えばＰＣ（ＰｅｒｓｏｎａｌＣｏｍｐｕｔｅｒ）やタブレット端末、スマートフォン等の情報処理装置である。評価装置１００は、第１実施形態における評価プログラム（例えば、アプリケーション、ソフトウェア等）がインストールされている。評価装置１００は、インストールされた評価プログラムを用いて、以下に説明する評価方法を実施する。

評価装置１００は、制御部１０と、記憶部１１と、表示部１２と、入力部１３と、ネットワーク接続部１４とを有し、これらはシステムバス１５で相互に接続されている。
制御部１０は、評価装置１００を制御するデバイスである。制御部１０としては、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）、ＭＰＵ（ＭｉｃｒｏＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）等の電子回路を用いても良い。制御部１０は、ＯＳ（ＯｐｅｒａｔｉｎｇＳｙｓｔｅｍ）等の制御プログラム、及び記憶部１１に格納されている実行プログラムに基づいて、各種演算や各ハードウェア構成部とのデータの入出力等、評価装置の処理を制御して各種処理を実行する。プログラムの実行中に必要な各種情報等は、例えば記憶部１１から取得することができる。制御部１０は、記憶部１１に記憶されている各種の処理が規定された評価プログラムを読み出し、読み出した評価プログラムを実行することで、各種の処理を実行する。なお、各種の処理を専用のハードウェアを用いて実現しても良い。

記憶部１１は、主記憶装置及び補助記憶装置を含んでも良い。主記憶装置は、例えば、制御部１０に実行させるＯＳプログラムやアプリケーションプログラムの少なくとも一部を一時的に記憶する。また、主記憶装置は、制御部１０による処理に必要な各種データを記憶する。なお、主記憶装置は、例えば、ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）やＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）等である。

補助記憶装置は、例えば、各実施形態に係る実行プログラムや、コンピュータに設けられた制御プログラム等を記憶する。補助記憶装置は、制御部１０からの制御信号に基づいて、記憶された各種情報の読み出しや、書き込みを行うことができる。補助記憶装置は、例えば、ＨＤＤ（ＨａｒｄＤｉｓｋＤｒｉｖｅ）、ＳＳＤ（ＳｏｌｉｄＳｔａｔｅＤｒｉｖｅ）等のストレージ等である。補助記憶装置は、各実施形態の処理において使用される情報を記憶しても良い。また、主記憶装置と補助記憶装置は、互いの機能を担い合っても良い。

表示部１２は、各実施形態に係る評価装置を編集処理するのに必要な情報やデータ等を表示するディスプレイを有し、制御部１０からの制御信号に基づき、評価プログラムの実行経過や評価結果等を画面に表示することができる。
入力部１３は、評価装置１００を使用するユーザ等からのプログラムの実行指示、各種編集処理情報、ソフトウェア等を起動するための情報等の入力を受け付ける。入力部１３は、評価装置１００のユーザ等が編集処理するキーボード及びマウス等のポインティングデバイスを有する。なお、表示部１２と入力部１３は、タッチパネルディスプレイを採用するなどして一体のものであっても良い。

ネットワーク接続部１４は、制御部１０からの制御信号に基づき、通信ネットワークと接続することにより、サーバ等との通信を行う。また、ネットワーク接続部１４は、実行プログラムやアプリケーション、ソフトウェア、設定情報等を、通信ネットワークに接続されている外部装置等から取得することができる。また、ネットワーク接続部１４は、評価プログラムを実行することで得られた評価結果又は各実施形態における評価プログラム自体を外部装置等に提供することができる。

上述したようなハードウェア構成により、各実施形態における評価を実行することができる。各実施形態は、各機能をコンピュータに実行させることができる評価プログラムを、例えば汎用のＰＣ等にインストールすることで、ハードウェア資源とソフトウェアとが協働して各実施形態における評価を実行することができる。
以下、第１実施形態に係る評価方法及び評価プログラムにおいて、評価プログラム実行時の評価装置１００の制御部１０の各種処理について詳述する。

制御部１０は、表示部１１に、複数の項目を含むメッセージを表示する。項目の例としては、メッセージの件名及び／又は本文と、メッセージの差出人に対応する項目が挙げられる。項目はこれに限られるものではなく、その他の項目を含むことができる。表示するメッセージについては、少なくとも１又は複数の項目について特定の編集処理が施されたものである。特定の編集処理を行う主体は、他のユーザを含む第三者、他のコンピュータ等であっても良いし、制御部１０（又は外部装置）であっても良い。

なお、メッセージはメール形式のものであっても、単なるメッセージ表示であっても良い。以下では、メッセージは、一例として、メールの態様のものとして説明する。また編集処理は、一例として、標的型メールを模すための処理として説明するが、これに限られない。
図２は、制御部１０が、記憶部１１に記憶された標的型メールを模したメッセージを読み出して表示する場合における、そのメッセージの内容（以下、訓練画面２１）の例を示す。

訓練画面２１は、例えば、差出人２２、件名２３及び／又は本文２４を含むが、更に他の項目を含んでも良い。なお、差出人２２によって示される差出元は、ユーザ名、差出元コンピュータ名等でもよく、必ずしも人を示す情報でなくても良く、仮想の人やコンピュータ名等でも良い。
なお、訓練画面２１に含まれる項目のうち特定の項目の内容には、標的型メールを模すための示唆を含める編集処理が行われている。ここで、示唆とは、ユーザが一見して違和感を抱くものであり、例えば、誤った漢字表記、必要な文字・記号の不足、不要な文字・記号の追加（例えば、図２の件名２３の項目参照）等が挙げられるが、これらに限られるものではない。

更に、訓練画面２１は、項目毎に選択を受け付けられるように、例えば、項目毎に選択オブジェクト（例えば、チェックボックス２５）を有する。チェックボックス２５の配置位置は、項目の先頭としても良いし、各項目名と対応するチェックボックス２５一覧を所定の箇所（訓練画面２１の上部や下部等）にまとめて表示しても良い。また、更に、例えば、本文２４の項目については、各行毎に選択を受け付けるチェックボックス２５があっても良い。

また、訓練画面２１は、選択を受け付けられる機能を有すれば良く、チェックボックス２５の代わりに、項目毎にラジオボタンや、各項目をボタンとする選択ボタンを有しても良く、選択した項目番号、項目名を入力する入力欄を設けることとしても良い。
制御部１０は、ユーザにより画面上で選択操作が行われると、入力部１３により、項目毎に選択を受け付ける。例えば、制御部１０は、ユーザが件名２３を選択した（例えば、件名２３の項目に設けられたチェックボックス２５にチェックを入力する）場合に、件名２３についての選択を受け付ける。

更に、制御部１０は、表示部１２により、選択を受け付けた項目と上述した示唆を含める編集処理が行われた項目との一致状況に応じた評価結果の出力を行う。例えば、制御部１０は、示唆を含める編集処理が行われていない項目のうち選択を受け付けた項目については、選択が不適切である旨の評価結果の出力を行う。また、制御部１０は、示唆を含める編集処理が行われた項目のうち選択を受け付けた項目については、選択が適切である旨の評価結果の出力を行なっても良い。更に、制御部１０は、示唆を含める編集処理が行われた項目のうち選択を受け付けなかった項目については、選択漏れがある旨の評価結果の出力を行なっても良い。また、制御部１０は、例えば、一致率１０％などといった選択を受け付けた項目と示唆を含める編集処理が行われた項目との一致の程度を示す評価結果の出力を行なっても良い。

次に、第１実施形態に係る評価装置１００による評価方法の処理の流れについて、図３を参照しながら説明する。図３は、第１実施形態に係る評価装置１００による選択の評価の処理の流れを示す。
まず、制御部１０は、表示部１２に訓練画面２１を表示する（Ｓ１０１）。そこで、ユーザにより画面上で選択操作が行われると、入力部１３から制御部１０に操作内容が通知され、制御部１０は、選択された項目を検出する（Ｓ１０２）。次に、制御部１０は、選択を受け付けた項目と示唆を含める編集処理が行われた項目との一致状況に応じた評価結果の出力を行う（Ｓ１０３）。

第１実施形態によれば、ユーザは、表示された訓練画面２１内で示唆が含まれていると思う項目について選択を行い、選択した項目毎の評価結果に基づいて、自らがした選択の適否を認識できる。更に、ユーザは、評価結果から自らがどの項目で適正な判断が出来なかったのかの確認し、標的型メールに対する耐性を向上させることができる。このようなことから、第１実施形態に係る評価装置１００は、ユーザに対して標的型メールに関する訓練を提供することができる。

なお、評価装置１００は、事前に設定されたスケジュールに基づき、評価プログラムの起動を管理し、定期的に訓練画面２１を表示し、標的型メールに関する訓練を提供しても良い。この場合、評価装置１００は、所定の確率（例えば、５回に１回）で全ての項目に示唆が含まれない訓練画面２１を表示しても良い。なお、この確率は、入力部１３を用いてユーザによって入力設定されても良い。これにより、ユーザは、訓練画面２１をより注視し、選択操作を行わなければならず、訓練として更に効果を奏する。

（第２実施形態）
以下、第２実施形態について説明する。第２実施形態に係る評価方法及び評価プログラムにおいて、評価装置１００の制御部１０は、第１実施形態に係る評価方法及び評価プログラムにおける処理に加えて、更に、後に詳述する訓練画面２１を作成する処理及びユーザの選択を評価する処理を行う。

制御部１０は、記憶部１１に記憶されたテンプレートに基づき、標的型メールを模した訓練画面２１を作成する。テンプレートは、複数の項目を備えたメッセージの表示内容を規定したデータである。なお、記憶部１１は、複数のテンプレートを記憶しても良い。
訓練画面２１を作成する際に、制御部１０は、訓練画面２１の複数の項目のうち特定の一又は複数の項目（例えば、件名のみ、本文のみ、差出人のみ、またはこれらの任意の組み合わせ）について、示唆を含める編集処理を行う。制御部１０は、編集処理が施された項目の識別情報と対応付けて編集処理の内容を記憶部１１に記憶させる。

図４は、第２実施形態に係る評価装置による訓練画面作成の処理の流れを示す。制御部１０による訓練画面２１作成の処理の流れを、図４を参照しながら説明する。まず、制御部１０は、記憶部１１に記憶されているテンプレートが１つの場合はそのテンプレートを、複数記憶されている場合にはいずれかのテンプレートを、選択し読み出し、示唆を含める編集処理を行う項目を、所定のアルゴリズムに従って選択する（Ｓ５０１）。

所定のアルゴリズムとしては、例えば、乱数に応じて定まる項目とすることや、訓練画面の作成毎に選択する項目を所定の順に切り替えるようすることにしても良い。
次に、制御部１０は、選択した項目に対して、示唆として、テンプレートに文字・記号などを追加する（Ｓ５０２）。文字・記号を追加する場合（Ｓ５０２Ｙｅｓ）は、制御部１０は、文字・記号リストの中から一又は複数の文字・記号を選択し（Ｓ５０３）、選択した項目内のいずれかの位置に、選択した一又は複数の文字・記号を追加する（Ｓ５０４）。

文字・記号を追加しない場合（Ｓ５０２Ｎｏ）、制御部１０は、選択した項目内から、一又は複数の文字・記号を選択し（Ｓ５０５）、選択した文字・記号を、項目内から削除又は変換する（Ｓ５０６）。なお、制御部１０は、Ｓ５０６の処理において、文字・記号などを削除又は変換せず、何の処理もしないとすることもできる。
更に、制御部１０は、入力部１３により選択が受け付けられた項目と、示唆を含める編集処理が行われた項目との一致状況を判定する。例えば、ユーザからの指示を契機とし、制御部１０は、示唆を含める編集処理が行われた項目の識別情報が記憶された記憶部１１を参照し、訓練画面２１の項目毎に示唆を含める編集処理が行われた項目と、入力部１３により選択が受け付けられた項目との一致不一致を判定する。判定方法ついてはこれに限られるものではなく、制御部１０は、示唆を含める編集処理が行われた項目のみについて、選択の一致不一致を判定しても良い。

更に、制御部１０は、判定結果に基づいて、選択の評価結果情報を作成する。図５は、制御部１０が作成した評価結果情報の表示画面５１の一例を示した図である。制御部１０は、ユーザが選択を終えた訓練画面２１の表示態様に、選択の適切不適切の情報５２や訓練画面２１に含まれる示唆を明示する情報５３を付加した評価結果情報を作成しても良い。なお、評価結果情報は記憶部１１に記憶されても良い。

続いて、第２実施形態に係る評価装置１００による評価方法の処理の流れについて、図６を参照しながら説明する。図６は、第２実施形態に係る評価装置１００による選択の評価の処理の流れを示す。
ユーザの指示や、スケジュール管理された日時をトリガとして、制御部１０は処理を開始する。まず、制御部１０は、記憶部１１に記憶されたテンプレートに基づき訓練画面２１を作成する（Ｓ１０４）。制御部１０は、表示部１２に訓練画面２１を表示する（Ｓ１０１）。そこで、ユーザにより画面上で選択操作が行われると、入力部１３から制御部１０に操作内容が通知され、制御部１０は、選択された項目を検出する（Ｓ１０２）。制御部１０は、選択を受け付けた項目と示唆を含める編集処理が施された項目との一致性を判定し、一致状況を基に選択の評価結果情報を作成する（Ｓ１０５）。続いて、制御部１０は、表示部１２に評価結果の出力を行う（Ｓ１０３）。

以上の流れにより、第２実施形態に係る評価装置１００はユーザに対して標的型メールに関する訓練を実施する。第２実施形態によれば、ユーザに対して、情報を付加して評価結果を表示することができるため、標的型メールの訓練のフィードバックとして更に効果を奏する。
ところで、制御部１０は、編集処理する対象を受信メールとすることもできる。即ち、制御部１０は、受信メールを取得し、そのメールに含まれている複数の項目のうち一又は複数の項目について編集処理を施して訓練画面を作成し、表示させても良い。また、制御部１０は、編集処理後、直ぐに訓練画面を表示させるのではなく、受信メールとして追加保存させ、メールが開かれる操作がなされた際に、表示させることとしても良い。

図７は、評価装置１００と通信ネットワークとの接続形態の一例を示す。図７に示すように、評価装置１００は、例えばインターネットやＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）などの通信ネットワーク７０によりデータの送受信が可能な状態でサーバ７１と接続される。評価装置１００とサーバ７１との関係は、１対１に限られるものではなく、例えば、評価装置１００が複数あっても良い。

サーバ７１がメールサーバの機能を有する場合、評価装置１００は、サーバ７１から受信したメールを記憶部１１に保存し、受信メールの情報に基づいて訓練画面２１を作成しても良い。つまり、制御部１０は、記憶部１１に記憶された受信メールの各項目から記載内容を抽出し、抽出した記載内容を利用して訓練画面２１を作成する。この際、制御部１０は、特定の一又は複数の項目について示唆を含める編集処理を行う。

なお、制御部１０は、複数の受信メールの情報に基づいて訓練画面２１を作成しても良い。この場合、制御部１０は、例えば、一の受信メールから一の項目の記載内容を抽出し、他の一の受信メールからその他の項目の記載内容を抽出するようにしても良い。
また、制御部１０は、訓練画面２１のテンプレートの各項目に抽出した記載内容を埋め込んでも良いし、編集処理後の訓練画面２１をメールとしてメーラの受信ボックスに格納させても良い。この際、ユーザが、受信ボックス内の訓練画面２１を開けると、項目毎に選択オブジェクトを有する訓練画面２１が表示されることとなる。

図８（ａ）は、受信メール８１の一例を示す。受信メール８１は、例えば、差出人８２、件名８３、添付ファイル８４、本文８５の項目を含む。図８（ｂ）は、図８（ａ）に示す受信メール８１を基に作成された訓練画面２１の一例を示す図である。より具体的に説明すると、図８（ａ）及び（ｂ）に示すように、制御部１０は、例えば、受信メール８１の本文８５の項目に、示唆として受信メール８１には記載されていなかったＵＲＬ８０（ＵｎｉｆｏｒｍＲｅｓｏｕｒｃｅＬｏｃａｔｏｒ）を加え、各項目にチェックボタン２５を設け、訓練画面２１を作成する。これ以降の処理は、第２実施形態と同様の流れである。

また、制御部１０は、編集処理、編集処理された項目を含む訓練画面の表示、又は、編集処理した後の訓練画面をメールとして受信フォルダ内に格納する処理は、受信メールの受信時から所定時間内又は所定期間経過以後、又は、設定された所定の時間になったことをトリガとして行なっても良い。これにより、メールの受信から所定期間内であれば、受信したメールの内容をユーザが覚えている可能性が高く、編集処理された箇所をより見つけ易くなるため、初級者に最適である。また、メールの受信から所定期間経過後であれば、受信したメールの内容をユーザが覚えている可能性が低く、編集処理された箇所をより見つけ難くなるため、選択が簡単過ぎて上級者の評価が上手くできないといった問題を抑えることができる。設定された所定時間であれば、定期的な訓練等に利用できる。

この例によれば、訓練画面２１がユーザの受信メールに基づいて作成されるため、評価装置１００は、ユーザのメール履歴に応じた訓練画面２１を用いて訓練を提供することができる。これにより、ユーザは、実際の標的型メールに近い内容の訓練画面２１により訓練を行うこととなるため、訓練の効果は更に高まる。
ところで、評価装置１００の訓練画像２１の作成処理及び選択の評価処理の機能をサーバ７１が果たしても良い。この場合、サーバ７１は訓練画面２１を作成し、作成した訓練画面２１の画面情報を評価装置１００に送信する。評価装置１００は、受信した画像情報に基づき、訓練画面２１を表示し、選択を受け付ける。評価装置１００は、選択を受け付けた項目の情報をサーバ７１に送信する。サーバ７１は受信した項目の情報を基に、示唆を含める編集処理が行われた項目との一致状況を判定し、選択の評価結果情報を作成し、評価結果情報を評価装置１００に送信する。評価装置１００は受信した評価結果情報に基づき、評価結果の出力を行う。以上のように、評価装置１００は、サーバ７１において訓練画面２１の作成及び選択の評価が行われる形態によっても、選択の評価を行うことができる。これにより、評価装置１００における処理負担が軽減される。

更に、サーバ７１は、評価装置１００が訓練を実施するスケジュール管理を行なっても良い。つまり、サーバ７１からの通知情報に基づいて、評価装置１００は評価方法の処理を行い、選択の評価を実施しても良い。これにより、例えば、管理者などの第三者は、サーバ７１から複数の評価装置１００に対して一斉に訓練の実施を指示することができる。
また、サーバ７１は、評価装置１００から評価結果を収集し、各種解析を行うためのデータベースを構築しても良い。サーバ７１は、訓練が行われる度に評価装置１００から選択の評価結果を受け取り、評価結果を蓄積し、集計しても良い。ここで、選択の評価結果とは、例えば、ユーザの習熟度や選択の適切数及び不適切数を含むが、これらに限られるものではない。サーバ７１に蓄積された集計結果は、管理者などの第三者が、例えば自社の従業員別や部門別に標的型メールに対する耐性を把握することに利用可能である。

（第３実施形態）
以下、第３実施形態について説明する。第３実施形態に係る評価方法及び評価プログラムにおいて、評価装置１００の制御部１０は、第２実施形態に係る評価方法及び評価プログラムにおける処理に加えて、更に、後に詳述する習熟度に応じた訓練画面２１を作成する処理及び習熟度を算出する処理を行う。

ここで、ユーザの習熟度とは、ユーザの本実施形態に係る訓練の学習の程度を数値化したものである。制御部１０は、ユーザの評価の結果に基づいて、ユーザの習熟度を算出する。例えば、制御部１０は、評価毎に選択の適切数及び不適切数に応じた数値（習熟度）を算出する。制御部１０は、例えば、適切数が多く及び不適切数が少ない場合、より高い習熟度を算出し、適切数が少なく及び不適切数が多い場合、より低い習熟度を算出する。

なお、作成基準とは、作成する訓練画面２１について、示唆を含める項目や示唆の程度を定義したものである。作成基準及びユーザの習熟度は記憶部１１に記憶されており、制御部１０は、記憶部１１を参照することにより、ユーザの習熟度を取得し、取得した習熟度に応じて、訓練画面２１を作成する。
図９は作成基準テーブルの一例を示す図である。図９に示すように、習熟度別に作成基準を定義しておくことにより、評価装置１００は、ユーザの習熟度に応じた訓練画面２１を提供することができる。

具体的には、制御部１０は、例えば、ユーザの習熟度が４であって、複数の項目の中から件名について編集処理を施す項目として選択した場合、記憶部１１に記憶された作成基準テーブルを参照し、文字を消すという編集内容を取得する。制御部１０は、取得した編集内容に基づき、件名の項目の記載内容に編集処理を施し、訓練画面２１を作成する。
更に、制御部１０は、選択の評価結果に基づいて、ユーザ毎の習熟度を算出する。算出された習熟度は、新しい習熟度として記憶部１１に記憶される。例えば、習熟度は、習熟度＝前回習熟度＋１−ａ（見落とした項目数）−ｂ（誤って選択した項目数）の式により計算される。なお、ａ、ｂは係数であり、任意の数値を設定可能である。例えば、ａ＝０．５、ｂ＝１としても良いが、これに限られるものではない。また、訓練未実施のユーザには、予め習熟度の最低値（例えば１）が設定される。

続いて、第３実施形態に係る評価装置１００による評価方法の処理の流れについて、図１０を参照しながら説明する。図１０は、第３実施形態に係る評価装置１００による選択の評価の処理の流れを示す。
ユーザの指示や、スケジュール管理された日時をトリガとして、制御部１０は処理を開始する。まず、制御部１０は、記憶部１１からユーザの習熟度を取得する（Ｓ１０６）。次に、制御部１０は、作成基準テーブルを参照して、取得した習熟度に応じた作成基準を特定し、特定した作成基準に基づき、訓練画面２１を作成する（Ｓ１０４）。制御部１０は、表示部１２に作成された訓練画面２１を表示する（Ｓ１０１）。そこで、ユーザにより画面上で選択操作が行われると、入力部１３から制御部１０に操作内容が通知され、制御部１０は、選択された項目を検出する（Ｓ１０２）。制御部１０は、選択を受け付けた項目と示唆を含める編集処理が施された項目との一致性を判定し、一致状況を基に選択の評価結果情報を作成する（Ｓ１０５）。続いて、制御部１０は、表示部１２に評価結果の出力を行う（Ｓ１０３）。更に、制御部１０は、評価結果に基づいて、習熟度を算出する（Ｓ１０７）。算出された習熟度は、新たな習熟度として記憶部１１に記憶される。

第３実施形態によれば、評価装置１００は、訓練結果に応じてユーザの習熟度を更新し、更新された習熟度に応じた訓練画面を生成するため、ユーザの習熟度に合った難易度の訓練を実施することができる。
また、第３実施形態に係る評価装置１００の制御部１０は、更に過去の評価結果を参照して訓練画面２１を作成しても良い。例えば、制御部１０は、記憶部１１に記憶された評価結果履歴データを参照して、過去に誤って選択された項目、または、過去に誤って選択された項目の編集処理内容を特定し、同じ項目について同じ又は異なる編集処理を施す、または、同じ又は他の項目について同じ編集処理内容を施す。

具体的には、制御部１０は、前回の評価結果が件名の項目において選択を誤ったものであった場合、示唆を含める編集処理を行う項目に件名を選択し、件名に不要な文字列を追加して訓練画面２１を作成しても良い。これにより、評価装置１００は、ユーザが間違えやすい項目に、優先的に示唆を含めた訓練画面２１を作成することができる。
図１１は、評価結果の表示画面１１１の一例を示す。制御部１０は、図１１に示すように、算出された習熟度や過去の評価結果の情報やアドバイス等を表記するコメント欄１１２を含む評価結果情報を作成しても良い。これにより、ユーザは、客観的な数値として標的型メールに対する耐性を認識することができ、更に、項目毎における選択の適切不適切の傾向を知ることができる。

なお、本発明は、上述した各実施形態に記載した構成に限定されるものではなく、本発明の趣旨を逸脱しない範囲で種々変更することや実施形態同士の組み換えが可能である。

１００：評価装置
１０：制御部
１１：記憶部
１２：表示部
１３：入力部
１４：ネットワーク接続部
２１：訓練画面
２２：差出人
２３：件名
２４：本文
２５：チェックボックス
５１：表示画面
５２：選択の適切不適切の情報
５３：示唆を明示する情報
７０：通信ネットワーク
７１：サーバ
８１：受信メール
８２：差出人
８３：件名
８４：添付ファイル
８５：本文
８０：ＵＲＬ
１１１：表示画面
１１２：コメント欄

Claims

件名及び／又は本文の項目と、差出人の項目とを含む複数の項目のうち特定の一又は複数の項目について特定の編集処理がなされた情報を表示し、
前記複数の項目に含まれる一又は複数の項目についての選択を受け付け、
選択された前記一又は複数の項目と、前記特定の編集処理がなされた項目との一致状況に応じた評価結果の出力を行う、
ことを特徴とする被編集処理項目の選択の評価方法。
前記複数の項目は、記憶部に記憶されたメールに含まれる項目であることを特徴とする請求項１に記載の被編集処理項目の選択の評価方法。
前記特定の編集処理は、文字を加える及び／又は文字を削除する編集処理であることを特徴とする請求項１又は２に記載の被編集処理項目の選択の評価方法。
前記特定の編集処理は、前記メールとは異なるメールに含まれる一又は複数の項目の情報を利用して行われることを特徴とする請求項２に記載の被編集処理項目の選択の評価方法。
前記評価結果の出力内容は、前記一致状況が完全一致の場合と部分一致の場合とで異なることを特徴とする請求項１乃至４のいずれか１項に記載の被編集処理項目の選択の評価方法。
前記評価結果の出力内容は、一致していない項目を特定する情報を含むことを特徴とする請求項１乃至４のいずれか１項に記載の被編集処理項目の選択の評価方法。
前記評価結果の出力内容は、選択された前記一又は複数の項目と、前記特定の編集処理がなされた項目との一致度を含むことを特徴とする請求項１乃至４のいずれか１項に記載の被編集処理項目の選択の評価方法。
パラメータに基づいて前記特定の編集処理がなされたことを特徴とする請求項１乃至７のいずれか１項に記載の被編集処理項目の選択の評価方法。
前記パラメータは、前記評価結果に応じて変更されることを特徴とする請求項８に記載の被編集処理項目の選択の評価方法。
前記選択は、前記複数の項目のそれぞれに対応付けられたオブジェクトの選択によりなされることを特徴とする請求項１乃至９のいずれか１項に記載の被編集処理項目の選択の評価方法。
コンピュータに、
件名及び／又は本文の項目と、差出人の項目とを含む複数の項目のうち特定の一又は複数の項目について特定の編集処理がなされた情報を表示し、
前記複数の項目に含まれる一又は複数の項目についての選択を受け付け、
選択された前記一又は複数の項目と、前記特定の編集処理がなされた項目との一致状況に応じた評価結果の出力を行う、
処理を実行させることを特徴とする被編集処理項目の選択の評価プログラム。
件名及び／又は本文の項目と、差出人の項目とを含む複数の項目のうち特定の一又は複数の項目について特定の編集処理がなされた情報を表示する表示部と、
前記複数の項目に含まれる一又は複数の項目についての選択を受け付ける受付部と、
選択された前記一又は複数の項目と、前記特定の編集処理がなされた項目との一致状況に応じた評価結果の出力を行う出力部と、
を備えることを特徴とする被編集処理項目の選択の評価装置。