JPH09101935A - Method and system for response control adaptive to operating action of user - Google Patents
Method and system for response control adaptive to operating action of userInfo
- Publication number
- JPH09101935A JPH09101935A JP7259915A JP25991595A JPH09101935A JP H09101935 A JPH09101935 A JP H09101935A JP 7259915 A JP7259915 A JP 7259915A JP 25991595 A JP25991595 A JP 25991595A JP H09101935 A JPH09101935 A JP H09101935A
- Authority
- JP
- Japan
- Prior art keywords
- user
- response
- level
- command
- behavior
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Digital Computer Display Output (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】現在の産業機械や計算機など
のシステムでは、システム単独での効率性や高性能化が
追求されている。しかし、最終的にシステムを動かすの
は人間であり、人間不在のシステムはありえない。真の
効率化や高性能化を図るためには、個々の人間の特性を
考慮したシステムにする必要がある。BACKGROUND OF THE INVENTION In current systems such as industrial machines and computers, the efficiency and performance of the system alone is being pursued. However, it is the human who ultimately operates the system, and there can be no system without humans. In order to achieve true efficiency and high performance, it is necessary to create a system that considers the characteristics of each individual person.
【０００２】本発明は、利用者のレベルにシステム側が
自動的に適応することによって、システムとの間にある
利用者の身体的および認知的負荷を軽減させ、またシス
テム側にとっても利用者に応じた資源を有効に利用する
ことにより、人間を含めたマン・マシン全体としての効
率化を行うための利用者の操作行動に適応する応答制御
方法およびシステムに関する。The present invention reduces the physical and cognitive load on the user between the system and the system by automatically adapting to the user's level, and the system also responds to the user. The present invention relates to a response control method and system adapted to the operation behavior of a user in order to improve the efficiency of the entire man-machine including human by effectively utilizing the resources.
【０００３】[0003]
【従来の技術】従来、産業機械や計算機などのシステム
を操作するには、利用者側が機械の操作方法を覚えるこ
とにより、システム側に適応する必要があった。しか
し、この形態はシステム側が主導であり、利用者は常に
身体的および精神的負荷をかけられてきた。このような
システム利用者の疲労を軽減させる方法として、対話メ
タファの使用やモデル世界メタファによるダイレクト・
マニピュレーションなどのメタファ環境を利用して利用
者ーシステム間のインターフェースをより利用者側に近
づける手法がある。2. Description of the Related Art Conventionally, in order to operate a system such as an industrial machine or a computer, it has been necessary for the user to learn how to operate the machine and adapt it to the system. However, this form is led by the system side, and the user has always been physically and mentally stressed. As a method of reducing the fatigue of such a system user, the use of a dialogue metaphor or a direct
There is a method to make the interface between the user and the system closer to the user side by using a metaphor environment such as manipulation.
【０００４】これらは利用者がコマンド言語によってシ
ステムと対話したり、空間メタファ上のアイコンにマウ
スを使って直接的にシステムを操作することによって、
システムとより自然に対話することができるため、利用
者の負荷を或る程度軽減させることができる。[0004] These are provided by the user interacting with the system by a command language, or by operating the system directly by using an icon on the space metaphor with a mouse.
Since the system can interact with the system more naturally, the load on the user can be reduced to some extent.
【０００５】[0005]
【発明が解決しようとする課題】しかし、これらの手法
は、利用者の個々の技術的、思考的能力レベルを考慮し
ていないため、画一的なインターフェースしか提供でき
ず、利用者にとって必ずしも適切な操作性や情報を提供
しているとは限らない。そこで、操作者の操作正誤履歴
や操作者が入力したコマンドから操作者のレベルあるい
は特徴を抽出し、操作者に対する操作指示手順を変更し
たり、あるいはメッセージ等を出力する等のシステムも
提案されている（例えば、特開平７−１２９３４８号公
報、特開平１−３１０４６５号公報参照）。しかしなが
ら、操作者の操作正誤履歴や入力したコマンドだけでは
操作者のレベル、特徴を適切に抽出することは困難であ
り、利用者の個々の技術的、思考的能力レベルに応じた
適切な操作性や情報を提供することはできなかった。However, since these methods do not consider the individual technical and thinking ability levels of the user, they can only provide a uniform interface and are not always suitable for the user. It does not necessarily provide various operability and information. Therefore, a system has been proposed which extracts the operator's level or characteristics from the operator's operation correctness history or the command input by the operator, changes the operation instruction procedure for the operator, or outputs a message or the like. (See, for example, JP-A-7-129348 and JP-A-1-310465). However, it is difficult to properly extract the operator's level and characteristics only with the operator's correctness error history and the entered commands, and the appropriate operability according to the user's individual technical and thinking ability level. And could not provide information.
【０００６】すなわち、利用者のレベルによって操作す
るコマンドのレベル等が相違するため、レベルの比較的
高い利用者とレベルの低い操作者の間で、操作正誤率に
あまり差が生じない場合があり、また、同じ利用者で
も、操作内容、使用するアプリケーション・プログラム
によって習熟しているコマンドを頻繁に使用する場合
と、習熟していないコマンドを頻繁に使用する場合があ
り、そのときに入力されるコマンドの種類のみを見てい
ても操作者のレベルを適切に判定することはできない。That is, since the level of the command to be operated differs depending on the level of the user, there is a case where there is not much difference in the correctness rate between the user having a relatively high level and the operator having a low level. Also, even the same user may frequently use a command that he or she is familiar with depending on the operation content and the application program to be used, and may frequently use a command that is not familiar, and is input at that time. The operator's level cannot be properly determined by looking only at the command type.
【０００７】本発明は上記した従来技術の問題点を考慮
してなされたものであり、本発明の目的は、レベルの異
なる個々の利用者に対して、適切なシステム応答やシス
テム資源利用方法を提供することができる利用者の操作
行動に適応する応答制御方法およびシステムを提供する
ことである。The present invention has been made in consideration of the above-mentioned problems of the prior art, and an object of the present invention is to provide an appropriate system response and system resource utilization method for individual users of different levels. An object of the present invention is to provide a response control method and system adapted to the operation behavior of the user that can be provided.
【０００８】[0008]
【課題を解決するための手段】図１は本発明の原理図で
ある。同図において、入力装置１１は利用者がシステム
に入力できる、キーボードやマウス、タブレットデジタ
イザなどの入力装置一般を指すものである。システムと
利用者との対話過程での利用者による操作行動は、入力
装置１１を通して計測される。FIG. 1 is a diagram illustrating the principle of the present invention. In the figure, an input device 11 is a general input device such as a keyboard, a mouse, a tablet digitizer, etc., which a user can input to the system. The operation behavior by the user during the dialogue between the system and the user is measured through the input device 11.
【０００９】計測された信号は、入力制御部１２でシス
テムで使用可能な形式に変換され、操作行動記録部１３
により操作履歴データベース１４に記録、蓄積される。
蓄えられたデータは特徴抽出部１５に取り込まれ、打鍵
特徴、コマンド特徴、グラフィカル・ユーザインタフェ
ース（ＧＵＩ）操作特徴等の各特徴量毎に利用者の行動
特徴の抽出が行われる。The measured signal is converted by the input control unit 12 into a format usable by the system, and the operation behavior recording unit 13
Is recorded and stored in the operation history database 14.
The stored data is taken into the feature extraction unit 15, and the action feature of the user is extracted for each feature amount such as keystroke feature, command feature, and graphical user interface (GUI) operation feature.
【００１０】抽出された特徴データを基に、各特徴量と
利用者の技能や知識のレベルとの関係を表す知識の集ま
りである熟練度知識ベース１７の知識を利用して、レベ
ル推定部１６において利用者の各ドメイン・レベルを判
定する。ついで、推定レベルの利用者にとって有効なシ
ステム応答を呈示するために、応答ドメイン知識ベース
１９にあるドメイン知識を利用して、応答推論部１８で
適切な応答方法を決定する。Based on the extracted feature data, the level estimation unit 16 is used by utilizing the knowledge of the skill level knowledge base 17 which is a collection of knowledge representing the relationship between each feature amount and the skill or knowledge level of the user. At, each domain level of the user is determined. Then, in order to present an effective system response for the user at the estimated level, the response inference unit 18 determines an appropriate response method using the domain knowledge in the response domain knowledge base 19.
【００１１】決定された応答方法にしたがって、応答内
容生成部１ａで実際の応答を生成し、出力制御部１ｂを
通し表示装置１ｃ上に呈示したり、アプリケーション・
プログラムに適切なシステム応答を実現させる。また、
決定された応答方法にしたがって、機能制御部１ｄで利
用者のレベルに合ったシステム機能を提供する。本発明
の請求項１〜６の発明は、上記のように、利用者との対
話過程における利用者のコマンド操作および／またはグ
ラフィカル・ユーザインタフェース操作を記録、蓄積
し、上記蓄積情報から利用者の操作行動の特徴を抽出
し、利用者の操作行動の特徴から、適切な応答を生成し
ているので、レベルの異なる個々の利用者に対して、適
切なシステム応答やシステム資源利用方法を提供するこ
とができる。According to the determined response method, an actual response is generated by the response content generation section 1a, and is presented on the display device 1c through the output control section 1b, or by an application.
Allow the program to achieve the appropriate system response. Also,
According to the determined response method, the function control unit 1d provides a system function suitable for the level of the user. According to the first to sixth aspects of the present invention, as described above, the command operation and / or the graphical user interface operation of the user in the process of dialogue with the user is recorded and accumulated, and the user's command operation is performed based on the accumulated information. Since the characteristics of the operation behavior are extracted and an appropriate response is generated from the characteristics of the user's operation behavior, an appropriate system response and system resource utilization method are provided to individual users of different levels. be able to.
【００１２】[0012]
【発明の実施形態】図２、図３は本発明の実施例のシス
テム構成を示す図である。図２、図３において、２０は
計算機本体、２１はキーボード、２２はマウス、２３は
ディスプレイであり、利用者はキーボード２１、マウス
２２、ディスプレイ２３を介して計算機本体２０と対話
する。2 and 3 are diagrams showing the system configuration of an embodiment of the present invention. 2 and 3, reference numeral 20 is a computer main body, 21 is a keyboard, 22 is a mouse, and 23 is a display. A user interacts with the computer main body 20 via the keyboard 21, the mouse 22, and the display 23.
【００１３】計算機本体２０において、２４はキーボー
ド２１やマウス２２の操作命令をコード化するデバイス
ドライバ、２５は利用者の操作入力を受信するグラフィ
カル・ユーザインタフェース（ＧＵＩ）、２６はキーボ
ード２１やマウス２２から入力された操作命令が送信さ
れる送信対象クライアントである。また、２７はキーボ
ード２１やマウス２２による操作イベントを記録する操
作イベント記録部、２８は操作履歴を記録する操作履歴
データベース、２９はグラフィカル・ユーザインタフェ
ース２５を介して入力されるマウスイベントをコマンド
に変換するコマンド解析クライアントである。In the computer main body 20, reference numeral 24 is a device driver for encoding operation commands of the keyboard 21 and mouse 22, 25 is a graphical user interface (GUI) for receiving user's operation input, and 26 is the keyboard 21 and mouse 22. It is a transmission target client to which the operation command input from is transmitted. Further, 27 is an operation event recording unit for recording an operation event by the keyboard 21 or mouse 22, 28 is an operation history database for recording an operation history, and 29 is a mouse event input via the graphical user interface 25 converted into a command. It is a command parsing client.
【００１４】３０は特徴抽出部であり、操作履歴データ
ベース２８に記録された操作イベントから、打鍵特徴抽
出部２ａにおいて利用者の打鍵特徴を抽出するととも
に、コマンド特徴抽出部２ｂにおいて利用者が使用する
コマンドの特徴を抽出し、さらに、ＧＵＩ特徴抽出部２
ｃにおいてウインドウ画面の操作等、利用者が行う画面
操作の特徴を抽出する。Reference numeral 30 denotes a feature extraction unit, which extracts a user's keystroke feature from the operation event recorded in the operation history database 28 in the keystroke feature extraction unit 2a and uses it in the command feature extraction unit 2b. The feature of the command is extracted, and further, the GUI feature extraction unit 2
In c, the features of screen operations performed by the user, such as window screen operations, are extracted.
【００１５】２ｄはレベル判定部、２ｅは熟練度知識ベ
ースであり、レベル判定部２ｄは特徴抽出部３０により
抽出された利用者固有の特徴量と熟練度知識ベースに格
納された知識ベースに基づき利用者のレベルを推定す
る。２ｆは応答推定部、２ｇは応答ドメイン知識ベース
であり、応答推定部２ｆは応答ドメイン知識ベース２ｇ
の格納情報を基に、利用者が利用するコマンドの特徴、
ＧＵＩ操作の特徴、利用者の熟練度レベルから応答を推
論する。Reference numeral 2d is a level determination unit, 2e is a skill level knowledge base, and the level determination unit 2d is based on the user-specific feature amount extracted by the feature extraction unit 30 and the knowledge base stored in the skill level knowledge base. Estimate the level of users. 2f is a response estimator, 2g is a response domain knowledge base, and 2f is a response domain knowledge base.
Based on the stored information of, the characteristics of the command used by the user,
The response is inferred from the characteristics of the GUI operation and the skill level of the user.
【００１６】２ｈは応答推論部２ｆによる推論結果から
応答内容を生成しアプリケーション・プログラム２ｊへ
与えるとともに、出力制御部２ｍを介して表示装置２３
に表示させる応答内容生成部、２ｉは応答推論部２ｆに
よる推論結果からシステム制御部２ｋの機能を制御する
機能制御部である。次に本実施例の動作を説明する。2h generates response contents from the inference result by the response inference unit 2f and gives them to the application program 2j, and the display device 23 via the output control unit 2m.
The response content generation unit 2i to be displayed on is a function control unit that controls the function of the system control unit 2k based on the inference result by the response inference unit 2f. Next, the operation of this embodiment will be described.
【００１７】利用者から計算機本体２０への操作命令は
キーボード２１とマウスを使って行われ、デバイスドラ
イバ２４によってコード化されグラフィカル・ユーザ・
インタフェース（ＧＵＩ）２５を介して送信対象クライ
アント２６に送信される。キーボード操作の場合には、
グラフィカル・ユーザ・インタフェース２５から出力さ
れるキーボード・イベントは、ＯＳ内部の通信機構を経
由して本来の送信対象クライアントへ送られると同時
に、操作イベント記録部２７にも送信され操作記録デー
タベース２８に記録される。Operation commands from the user to the computer main body 20 are performed by using the keyboard 21 and the mouse, and coded by the device driver 24 to be displayed by the graphical user.
It is transmitted to the transmission target client 26 via the interface (GUI) 25. In case of keyboard operation,
The keyboard event output from the graphical user interface 25 is sent to the original transmission target client via the communication mechanism inside the OS, and at the same time, sent to the operation event recording unit 27 and recorded in the operation recording database 28. To be done.
【００１８】マウス操作の場合には、マウス２２を使っ
て選択されたグラフィカル・ユーザ・インタフェース２
５からのマウス・イベントがコマンド解析クライアント
２９によってコマンドに変換されたのち、キーボードと
同様に、操作イベント記録部２７を介して操作履歴デー
タベース２８に記録される。さらに、利用者が行うウイ
ンドウ画面の操作等のＧＵＩ操作の内容も同様に操作イ
ベント記録部２７を介して操作履歴データベース２８に
記録される。上記操作履歴はシステム操作、利用者が使
用するアプリケーション・プログラムに対する操作毎に
それぞれ記録される。In the case of mouse operation, the graphical user interface 2 selected using the mouse 22
After the mouse event from 5 is converted into a command by the command analysis client 29, it is recorded in the operation history database 28 via the operation event recording unit 27, similarly to the keyboard. Further, the contents of GUI operations such as window screen operations performed by the user are also recorded in the operation history database 28 via the operation event recording unit 27. The operation history is recorded for each system operation and each operation for the application program used by the user.
【００１９】特徴抽出部３０の打鍵特徴抽出部２ａは上
記操作履歴データベース２８に記録された利用者のキー
ボード操作情報から、打鍵の速さ、打鍵の正誤率等の利
用者の打鍵特徴を抽出する。また、コマンド特徴抽出部
２ｂは、上記操作履歴データベース２８に記録されたコ
マンド情報から使用するコマンドの種類、コマンド間の
関係（どのようなコマンドがどの様な順序で実行される
か）等のコマンド特徴を、システム操作、利用者が使用
するアプリケーション・プログラムに対する操作毎に抽
出する。The keystroke feature extraction section 2a of the feature extraction section 30 extracts the keystroke characteristics of the user such as the keystroke speed and the correctness rate of the keystroke from the user's keyboard operation information recorded in the operation history database 28. . In addition, the command feature extraction unit 2b uses the command information recorded in the operation history database 28 to determine the type of command to be used, the relationship between commands (what commands are executed in what order), and other commands. Features are extracted for each system operation and each operation for the application program used by the user.
【００２０】さらに、ＧＵＩ特徴抽出部２ｃは、上記操
作履歴データベース２８に記録された、画面上の操作
（例えば、ウィンドウ、アイコンの配置等）等のＧＵＩ
操作内容から、ＧＵＩ操作特徴を、システム操作、利用
者が使用するアプリケーション・プログラムに対する操
作毎に抽出する。コマンド特徴抽出部２ｂにおいて抽出
された打鍵特徴、コマンド特徴、ＧＵＩ操作特徴はレベ
ル推定部２ｄに送られ、利用者の熟練度がシステム操
作、アプリケーション・プログラムに対する操作毎に推
定される。Further, the GUI feature extraction unit 2c is a GUI for operations on the screen (for example, arrangement of windows, icons, etc.) recorded in the operation history database 28.
From the operation content, GUI operation characteristics are extracted for each system operation and each operation for the application program used by the user. The keystroke characteristics, the command characteristics, and the GUI operation characteristics extracted by the command characteristic extraction unit 2b are sent to the level estimation unit 2d, and the skill level of the user is estimated for each system operation or operation for an application program.
【００２１】すなわち、熟練度知識ベース２ｅには打鍵
特徴、コマンド特徴、ＧＵＩ操作特徴等の特徴量と利用
者の技能や知識レベルとの関係を表すルール知識が格納
されており、レベル推定部２ｄは、このルール知識を参
照して、利用者の打鍵速さ、正誤率等から計算機操作に
対する熟練度を判定するとともに、打鍵特徴、コマンド
特徴、ＧＵＩ操作特徴から、システム、各アプリケーシ
ョン・プログラムに対するコマンド知識のレベル等の利
用者の知識レベルを推定する。That is, the skill level knowledge base 2e stores rule knowledge representing the relationship between keystroke characteristics, command characteristics, GUI operation characteristics, etc., and the user's skill and knowledge level. Refers to this rule knowledge to determine the skill level for computer operation from the user's keystroke speed, correctness rate, etc., and from the keystroke feature, command feature, GUI operation feature, commands for the system and each application program. Estimate the user's knowledge level such as the level of knowledge.
【００２２】上記レベル推定部２ｄにおいて推定された
推定結果および特徴抽出部３０で抽出されたコマンド特
徴、ＧＵＩ操作特徴は応答推論部２ｆに送られる。応答
推論部２ｆは応答ドメイン知識ベース２ｇを参照して利
用者に対してどのような応答が適切であるかを推論す
る。応答ドメイン知識ベース２ｇには、各ドメインレベ
ルにおける打鍵特徴、コマンド特徴、ＧＵＩ操作特徴に
対する応答内容がシステム操作、アプリケーション・プ
ログラムに対する操作毎に記録されており、応答推論部
２ｆはこの応答内容を参照して応答を推論する。The estimation result estimated by the level estimation unit 2d and the command feature and GUI operation feature extracted by the feature extraction unit 30 are sent to the response inference unit 2f. The response inference unit 2f infers what kind of response is appropriate for the user by referring to the response domain knowledge base 2g. In the response domain knowledge base 2g, response contents for keystroke characteristics, command characteristics, and GUI operation characteristics at each domain level are recorded for each system operation and application program operation, and the response inference unit 2f refers to these response contents. And infer the response.
【００２３】この推論結果は、機能制御部２ｉ、応答内
容生成部２ｈを介してアプリケーション・プログラム２
ｊ、システム制御部２ｋに送られ、適切なシステム応答
を実行させる。また、応答内容生成部２ｈ、出力制御部
２ｍを介してディスプレイ２３上に表示される。上記応
答としては例えば次のようなものがあげられる。 (1) 利用者の打鍵特徴に基づき、打鍵の正誤率、頻繁に
間違える打鍵操作等をディスプレイ上に表示し利用者に
通知する。 (2) 操作誤りが頻繁に発生する場合には、利用者の了解
の基に、操作誤りを自動的に訂正する。 (3) 利用者のコマンド特徴に基づき、システム、各アプ
リケーション・プログラムに対して、コマンドの操作性
を向上させるシステム応答を実現させる。This inference result is passed to the application program 2 via the function control section 2i and the response content generation section 2h.
j, sent to the system control unit 2k to execute an appropriate system response. Further, it is displayed on the display 23 via the response content generation unit 2h and the output control unit 2m. Examples of the response include the following. (1) Based on the user's keystroke characteristics, the correctness rate of keystrokes, frequent mistaken keystroke operations, etc. are displayed on the display to notify the user. (2) If an operation error frequently occurs, the operation error is automatically corrected based on the user's understanding. (3) A system response that improves the operability of commands is realized for the system and each application program based on the user's command characteristics.
【００２４】例えば、コマンドの利用頻度、コマンド間
の関係から、利用者のレベルに応じてマクロ化する一連
のコマンド群を生成してマクロ候補をディスプレイ２３
上に表示し、利用者の了解を基にマクロを生成する。あ
るいは、利用頻度の多いコマンドについては、画面上に
スイッチボタンを表示し、該スイッチボタンをマウスで
クリックすることにより上記コマンドを実行可能とす
る。 (4) ＧＵＩ操作特徴から、例えば利用者のウィンドウの
配置等の特徴を把握し、システム、各アプリケーション
・プログラムに対して、利用者が頻繁に利用するウィン
ドウ配置等を自動的に実現させる。 (5) 利用頻度の多いアプリケーション・プログラム等が
ある場合には、システムに対してスケジューリングを変
更させ、利用頻度の多いアプリケーション・プログラム
の処理上のウエイトを高める。For example, based on the frequency of use of commands and the relationship between commands, a series of command groups to be made into macros according to the level of the user are generated and macro candidates are displayed 23.
Display above and generate macro based on user's consent. Alternatively, for a command that is frequently used, a switch button is displayed on the screen, and the command can be executed by clicking the switch button with a mouse. (4) From the GUI operation features, for example, the features such as the user's window layout are grasped, and the system and each application program are automatically made to implement the window layout frequently used by the user. (5) When there are frequently used application programs, etc., the scheduling is changed in the system to increase the processing weight of the frequently used application programs.
【００２５】[0025]
【発明の効果】以上説明したように、本発明において
は、利用者との対話過程における利用者のコマンド操作
および／またはグラフィカル・ユーザインタフェース操
作を記録、蓄積し、上記蓄積情報から利用者の操作行動
の特徴を抽出し、利用者の操作行動の特徴から、適切な
応答を生成しているので、操作技能や知識レベルの異な
る利用者に対して、適切なシステム応答や制御応答を実
現することができる。As described above, according to the present invention, the command operation and / or the graphical user interface operation of the user during the dialogue process with the user is recorded and stored, and the user operation is performed from the stored information. Realizing appropriate system response and control response to users with different operation skills and knowledge levels, because behavior characteristics are extracted and appropriate responses are generated from the characteristics of user operation behavior. You can
【００２６】このため、システム利用者の身体的、精神
的負荷を軽減することができ、かつ、システム資源を有
効に利用することが可能となる。Therefore, the physical and mental load of the system user can be reduced, and the system resources can be effectively used.
【図１】本発明の原理図である。FIG. 1 is a principle diagram of the present invention.
【図２】本発明の実施例のシステム構成を示す図であ
る。FIG. 2 is a diagram illustrating a system configuration according to an embodiment of the present invention.
【図３】本発明の実施例のシステム構成を示す図（続
き）である。FIG. 3 is a diagram (continuation) showing the system configuration of the embodiment of the present invention.
１１ 入力装置 １２ 入力制御部 １３ 操作行動記録部 １４ 操作履歴データベース １５ 特徴抽出部 １６ レベル推定部 １７ 熟練度知識ベース １８ レベル推定部 １９ 応答ドメイン知識ベース １ａ 応答内容生成部 １ｂ 出力制御部 １ｃ 表示装置 １ｄ 機能制御部 ２０ 計算機本体 ２１ キーボード ２２ マウス ２３ 表示装置 ２４ デバイスドライバ ２５ グラフィカル・ユーザインタフェース ２６ 送信対象クライアント ２７ 操作イベント記録部 ２８ 操作履歴データベース ２９ コマンド解析クライアント ３０ 特徴抽出部 ２ａ 打鍵特徴抽出部 ２ｂ コマンド特徴抽出部 ２ｃ ＧＵＩ特徴抽出部 ２ｄ レベル推定部 ２ｅ 熟練度知識ベース ２ｆ 応答推論部 ２ｇ 応答ドメイン知識ベース ２ｈ 応答内容生成部 ２ｉ 機能制御部 ２ｊ アプリケーション・プログラム ２ｋ システム制御部 ２ｍ 出力制御部 11 input device 12 input control unit 13 operation action recording unit 14 operation history database 15 feature extraction unit 16 level estimation unit 17 skill level knowledge base 18 level estimation unit 19 response domain knowledge base 1a response content generation unit 1b output control unit 1c display device 1d Function control unit 20 Computer main body 21 Keyboard 22 Mouse 23 Display device 24 Device driver 25 Graphical user interface 26 Client for transmission 27 Operation event recording unit 28 Operation history database 29 Command analysis client 30 Feature extraction unit 2a Keystroke feature extraction unit 2b command Feature extraction unit 2c GUI feature extraction unit 2d Level estimation unit 2e Skill level knowledge base 2f Response inference unit 2g Response domain knowledge base 2h Response content generation unit 2i Function control unit 2j Application Program 2k system controller 2m output controller
Claims (6)
行動に応答して対話形式で処理を行うシステムにおける
応答制御方法において、 利用者との対話過程における利用者のコマンド操作およ
び／またはグラフィカル・ユーザインタフェース操作を
記録、蓄積し、 上記蓄積情報から利用者の操作行動の特徴を抽出し、 利用者の操作行動の特徴から対応する応答を生成し、応
答内容を利用者に通知、もしくは、システムおよび／ま
たはアプリケーション・プログラムに適切な応答を実現
させることを特徴とする利用者の操作行動に適応する応
答制御方法。1. A response control method in a system for interactively processing in response to an operation action input by a user via an input device, comprising a command operation and / or a graphical operation of the user in a dialogue process with the user. -Record and store the user interface operation, extract the characteristics of the user's operation behavior from the accumulated information, generate a corresponding response from the characteristics of the user's operation behavior, and notify the user of the content of the response, or A response control method adapted to a user's operation behavior, characterized in that a system and / or an application program realize an appropriate response.
行動に応答して対話形式で処理を行うシステムにおい
て、 利用者との対話過程における利用者の打鍵特徴と、コマ
ンド操作および／またはグラフィカル・ユーザインタフ
ェース操作を記録し蓄積する手段と、 上記蓄積情報から利用者の操作行動の特徴を抽出する手
段とを設け、 利用者の操作行動の特徴から対応する応答を生成し、シ
ステムおよび／またはアプリケーション・プログラムに
適切な応答を実現させ、応答内容を利用者に通知するこ
とを特徴とする利用者の操作行動に適応する応答制御シ
ステム。2. In a system for interactively processing in response to an operation action input by a user via an input device, a user's keystroke characteristics, a command operation and / or a graphical expression in the dialog process with the user. -Providing means for recording and accumulating the user interface operation and means for extracting the characteristic of the user's operating behavior from the accumulated information, generating a corresponding response from the characteristic of the user's operating behavior, and / or the system and / or A response control system adapted to an operation behavior of a user, characterized by realizing an appropriate response in an application program and notifying the user of the response content.
ベルを推定するレベル推定手段を設け、レベル推定手段
により推定されたレベルに応じた応答を生成することを
特徴とする請求項２の利用者の操作行動に適応する応答
制御システム。3. The level estimating means for estimating the level of the user from the characteristic of the operation behavior of the user is provided, and the response according to the level estimated by the level estimating means is generated. A response control system that adapts to user operation behavior.
適切な応答を推論する推論手段を設けたことを特徴とす
る請求項３の利用者の操作行動に適応する応答制御シス
テム。4. The response control system adapted to the operation behavior of the user according to claim 3, further comprising inference means for inferring an appropriate response from the system according to the level of the user.
を生成する手段を設けたことを特徴とする請求項４の利
用者の操作行動に適応する応答制御システム。5. The response control system adapted to the operation behavior of the user according to claim 4, further comprising means for generating a response content based on the inference result of the inference means.
ムの機能を制御する手段を設けたことを特徴とする請求
項５の利用者の操作行動に適応する応答制御システム。6. The response control system adapted to the operation behavior of the user according to claim 5, further comprising means for controlling the function of the system according to the inference result of the inference means.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7259915A JPH09101935A (en) | 1995-10-06 | 1995-10-06 | Method and system for response control adaptive to operating action of user |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7259915A JPH09101935A (en) | 1995-10-06 | 1995-10-06 | Method and system for response control adaptive to operating action of user |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH09101935A true JPH09101935A (en) | 1997-04-15 |
Family
ID=17340703
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP7259915A Withdrawn JPH09101935A (en) | 1995-10-06 | 1995-10-06 | Method and system for response control adaptive to operating action of user |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH09101935A (en) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000172390A (en) * | 1998-12-04 | 2000-06-23 | Fujitsu Ltd | Automation level adjusting device, automation level adjusting method and program recording medium for automation level adjustment |
| JP2003177847A (en) * | 2002-12-05 | 2003-06-27 | Hideki Nishimoto | Data processing system, data processor, and its program |
| WO2010061520A1 (en) * | 2008-11-25 | 2010-06-03 | パナソニック株式会社 | Operation support device and method thereof |
| JP2012185756A (en) * | 2011-03-08 | 2012-09-27 | Hitachi Ltd | Knowledge management support system |
| JP2013206171A (en) * | 2012-03-28 | 2013-10-07 | Sony Corp | Information processor, information processing method and program |
| JP2016066976A (en) * | 2014-09-26 | 2016-04-28 | アンリツ株式会社 | Mobile terminal test device |
| JP2019159878A (en) * | 2018-03-14 | 2019-09-19 | Kddi株式会社 | Answering device, answering method, answering program and answering system |
-
1995
- 1995-10-06 JP JP7259915A patent/JPH09101935A/en not_active Withdrawn
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000172390A (en) * | 1998-12-04 | 2000-06-23 | Fujitsu Ltd | Automation level adjusting device, automation level adjusting method and program recording medium for automation level adjustment |
| JP2003177847A (en) * | 2002-12-05 | 2003-06-27 | Hideki Nishimoto | Data processing system, data processor, and its program |
| JPWO2010061520A1 (en) * | 2008-11-25 | 2012-04-19 | パナソニック株式会社 | Operation support apparatus and method |
| JP2010192004A (en) * | 2008-11-25 | 2010-09-02 | Panasonic Corp | Operation state determination device |
| JP4571234B2 (en) * | 2008-11-25 | 2010-10-27 | パナソニック株式会社 | Operation support apparatus and method |
| JP4653251B2 (en) * | 2008-11-25 | 2011-03-16 | パナソニック株式会社 | Operation status judgment device |
| WO2010061520A1 (en) * | 2008-11-25 | 2010-06-03 | パナソニック株式会社 | Operation support device and method thereof |
| US8438479B2 (en) | 2008-11-25 | 2013-05-07 | Panasonic Corporation | Operation support apparatus and method of the same |
| JP2012185756A (en) * | 2011-03-08 | 2012-09-27 | Hitachi Ltd | Knowledge management support system |
| JP2013206171A (en) * | 2012-03-28 | 2013-10-07 | Sony Corp | Information processor, information processing method and program |
| CN103366613A (en) * | 2012-03-28 | 2013-10-23 | 索尼公司 | Information processing apparatus, information processing method, and program |
| JP2016066976A (en) * | 2014-09-26 | 2016-04-28 | アンリツ株式会社 | Mobile terminal test device |
| JP2019159878A (en) * | 2018-03-14 | 2019-09-19 | Kddi株式会社 | Answering device, answering method, answering program and answering system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8384566B2 (en) | Pressure-sensitive keyboard and associated method of operation | |
| US6948136B2 (en) | System and method for automatic control device personalization | |
| Steriadis et al. | Designing human-computer interfaces for quadriplegic people | |
| KR100798963B1 (en) | A System And Method For Providing Immediate visual Response to user Input At A Client System | |
| US9201714B2 (en) | Application module for managing interactions of distributed modality components | |
| JP3688738B2 (en) | Data processing device with dialog box | |
| CN109426408A (en) | A kind of multi-screen terminal and its apply display control method, device | |
| JPH0320812A (en) | Extension user-interface mechanism, computer-system, interface-profile-set holder, computer-system operating method and command formation method | |
| Innocent | Towards self-adaptive interface systems | |
| WO2009117632A1 (en) | Feedback-providing keypad for touchscreen devices | |
| CN109491562A (en) | Interface display method of voice assistant application program and terminal equipment | |
| CN106775728A (en) | A kind of control method and device of mobile terminal | |
| Kumar et al. | Chromium based framework to include gaze interaction in web browser | |
| CN107273009A (en) | A kind of method and system of the quick screenshotss of mobile terminal | |
| CN101673194B (en) | Device and method for processing user notification message by using same | |
| JPH09101935A (en) | Method and system for response control adaptive to operating action of user | |
| CN115359793A (en) | Vehicle-mounted voice interaction method and device and vehicle | |
| CN109871133A (en) | A kind of control method of keyboard, device, keyboard, computer readable storage medium | |
| US8327294B2 (en) | Method and system to reduce workload and skills required in usage of mouse or other pointing devices | |
| EP1148415A2 (en) | User selectable application grammar and semantics | |
| Poláček et al. | Predictive scanning keyboard operated by hissing | |
| Rodrigues et al. | Swat: Mobile system-wide assistive technologies | |
| Mourouzis et al. | A novel design approach for multi-device adaptable user interfaces: Concepts, methods and examples | |
| TW470909B (en) | Touch panel device driver and its processing method | |
| JPH0535432A (en) | Menu output processing system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20030107 |