WO2010067618A1 - 操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラム - Google Patents

操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラム Download PDF

Info

Publication number
WO2010067618A1
WO2010067618A1 PCT/JP2009/006790 JP2009006790W WO2010067618A1 WO 2010067618 A1 WO2010067618 A1 WO 2010067618A1 JP 2009006790 W JP2009006790 W JP 2009006790W WO 2010067618 A1 WO2010067618 A1 WO 2010067618A1
Authority
WO
WIPO (PCT)
Prior art keywords
relevance
operations
display
screen
procedure
Prior art date
Application number
PCT/JP2009/006790
Other languages
English (en)
French (fr)
Inventor
安藤友人
西沢俊広
船田純一
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2010542035A priority Critical patent/JP5472118B2/ja
Publication of WO2010067618A1 publication Critical patent/WO2010067618A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance

Definitions

  • the present invention relates to an operation support method, an operation support system, an operation support apparatus, and an operation support program that support an operation on an operation screen.
  • Patent Document 1 describes an example of an operation support system as a related technique.
  • FIG. 11 is a block diagram illustrating a configuration example of the device operation support system described in Patent Document 1.
  • the device operation support system described in Patent Literature 1 includes an operation history storage unit 902, a next operation prediction unit 903, and a next operation display unit 905 as main components.
  • the operation history storage unit 902 holds an operation performed by the operator in the application 911 or the OS as an operation history.
  • the next operation predicting unit 903 predicts an operation that the operator is likely to perform next (referred to as the next operation) based on the operation history stored in the operation history storage unit 902.
  • the next operation display unit 905 displays the next operation predicted by the next operation prediction unit 903.
  • the device operation support system described in Patent Document 1 aims to predict the next operation and release the operator from complicated menu operations by the above configuration.
  • Patent Document 2 describes that a transition probability table for the next command is generated by statistics of input commands, and the next preceding command is output with reference to the generated transition probability table.
  • Patent Document 3 describes another example of the operation support system.
  • the device operation support system described in Patent Document 3 predicts an input operation of one next operation command, whereas a plurality of next operations are performed. Predict commands collectively.
  • the device operation support system described in Patent Document 3 includes components as shown in FIG. 11 as the main components, similar to the device operation support system described in Patent Document 1. Then, the next operation prediction unit predicts a plurality of operations, and the next operation display unit displays the plurality of predicted operations in order of frequency, which is different from the device operation support system described in Patent Document 1.
  • Patent Document 4 describes an operation guide device configured to perform an operation guide based on an operation procedure stored in advance. Further, as a related technique, for example, Patent Document 5 describes that the target device is controlled based on the date and time included in the accumulated history information. Further, as a related technique, for example, Patent Document 6 describes that a guidance screen such as a copy operation is displayed according to a user's selection operation, or a display color of an operation target button is changed. ing.
  • Patent Document 1 and Patent Document 2 When the related techniques described in Patent Document 1 and Patent Document 2 are used, it is possible to help the user to some extent by predicting and presenting the next operation. However, since only the next operation can be predicted and presented, it is difficult for the operator to grasp the operation procedure on the entire screen at a glance in an application or service including many steps on one screen.
  • Patent Document 3 when the related technique described in Patent Document 3 is used, it is possible to support input of user operations by simultaneously predicting and presenting a plurality of operations. However, it is only possible to display a plurality of predicted operations arranged in order of frequency, and no consideration is given to the relevance and context between the operations. For this reason, even though it is possible to browse frequently performed operations on the screen, it is not possible to know what procedure should be performed.
  • An object of the present invention is to provide an operation support method, an operation support system, an operation support apparatus, and an operation support program that can grasp an operation procedure and can receive a service simply by following a guide without learning a complicated operation procedure.
  • An operation support method is an operation support method for supporting an operation on an operation screen, and includes an operation relevance calculation step for obtaining an operation relevance between operations that may be performed on the operation screen, and an operation relevance calculation.
  • An operation support system is an operation support system that supports an operation on an operation screen, and includes an operator terminal and an operation support server that performs a process of supporting an operation on the operation screen.
  • Operation relevance calculating means for obtaining operation relevance between operations that may be performed on the screen, and information indicating the operation relevance obtained by the operation relevance calculating means are transmitted to the operator terminal via the communication network.
  • the operation relevance transmission means, and the operator terminal adds information indicating the operation relevance received from the operation support server to the operation screen or an operation target displayed on the operation screen, thereby controlling display.
  • An operation procedure display means for controlling display of the operation procedure is included.
  • An operation support apparatus is an operation support apparatus that supports an operation on an operation screen, and includes an operation relevance calculation unit that calculates operation relevance between operations that may be performed on the operation screen, and an operation relevance calculation. It is provided with operation procedure display means for controlling display of an operation procedure by adding information indicating the operation relevance obtained by the means to the operation screen or an operation target displayed on the operation screen and controlling the display.
  • An operation support program is an operation support program for supporting an operation on an operation screen, and an operation relevance calculation process for obtaining an operation relevance between operations that may be performed on the operation screen in a computer.
  • the operation procedure display processing for controlling the display of the operation procedure by adding and controlling the information indicating the operation relevance obtained in the operation relevance calculation processing to the operation screen or the operation target displayed on the operation screen. Is to execute.
  • the operator can grasp an appropriate operation procedure according to the operation state on the entire screen at a glance, and do not remember the complicated operation procedure. You can also get service just by following the guide.
  • FIG. 1 It is a flowchart which shows the process example for assisting the operation of the operator by an operation assistance system. It is a block diagram which shows an example of a structure of the display spectacles which can utilize the operation assistance method by this invention. It is a block diagram which shows the minimum structural example of an operation assistance apparatus. It is a block diagram which shows the structural example of the apparatus operation assistance system described in patent document 1. FIG.
  • Embodiment 1 A first embodiment of the present invention will be described below with reference to the drawings.
  • the operation procedure information such as the context of whether the operator is likely to perform an operation or input in the procedure and the transition probability thereof is presented at a time.
  • the transition probability between the screen components in the user operation is obtained based on the operation history information, and the one with the high transition probability is judged to be highly relevant and presented (displayed) with an arrow or the like. .
  • the magnitude of the transition probability is expressed by, for example, displaying an item with a large transition probability with a dark arrow line and displaying a small item with a thin line.
  • the button A is darker than the button B on the operation screen in the service.
  • FIG. 1 is a block diagram showing an example of the configuration of an operation support apparatus according to the present invention.
  • the operation support apparatus 101 includes an operation history storage unit 102, an operation relevance discovery unit 103, a display operation procedure selection unit 104, and an operation procedure display unit 105.
  • the operation support apparatus 101 is used for applications that support operations in services such as an application 111, an OS, a digital home appliance, and an ATM.
  • the operation support apparatus 101 is specifically realized by an information processing apparatus such as a personal computer that operates according to a program.
  • the operation history storage means 102 is specifically realized by a storage device such as a magnetic disk device or an optical disk device.
  • the operation history storage unit 102 holds (stores) information indicating operation details performed by one or more operators as operation history information.
  • the operation relevance finding means 103 is specifically realized by a CPU of an information processing apparatus that operates according to a program.
  • the operation relevance discovery means 103 has a function for obtaining a procedure and relevance between a plurality of operations such as text box editing, check box selection, and button press on various operation screens (hereinafter, relevance having an order relationship is referred to as a procedure).
  • the operation relevance discovery unit 103 uses the operation history information stored in the operation history storage unit 102 to calculate an operation transition probability between operations stored as an operation history, and thus between operations.
  • Discover (require) relevance hereinafter also referred to as operation relevance).
  • the display operation procedure selection means 104 is specifically realized by a CPU of an information processing apparatus that operates according to a program.
  • the display operation procedure selection means 104 selects an operation procedure or relevance (hereinafter referred to as a display operation procedure) suitable for display based on the current situation among the operation relevance obtained by the operation relevance discovery means 103. It has a function.
  • the operation procedure display means 105 is specifically realized by a CPU of an information processing apparatus that operates according to a program.
  • the operation procedure display means 105 has a function of presenting the display operation procedure information selected by the display operation procedure selection means 104 by adding it to the original operation screen of the service or the operation target in the screen.
  • the operation procedure display unit 105 presents a display operation procedure by causing the display device 121 to display an arrow indicating a front-rear relationship regarding a plurality of operations, a number indicating an operation order, or the like on a displayed operation screen.
  • Application 111 is software such as a browser installed in an information processing apparatus that operates according to a program.
  • the display device 121 is realized by, for example, a display device included in an information processing device that operates according to a program.
  • a storage device (not shown) of the information processing apparatus that implements the operation support apparatus stores various programs for supporting operation on various operation screens.
  • the storage device of the information processing device indicates to the computer the operation relevance calculation processing for obtaining operation relevance between operations that may be performed on the operation screen, and the operation relevance obtained by the operation relevance calculation processing.
  • An operation support program for executing an operation procedure display process for controlling display of an operation procedure by adding information to the operation screen or an operation target displayed on the operation screen and controlling the display is stored.
  • FIG. 2 is an explanatory diagram illustrating a specific display example of the operation screen when performing operation support.
  • the search service is used using a browser as the application 111.
  • the operator user
  • the operator performs an operation of inputting a search formula into the search formula text box 301 and pressing a search button 302 (for example, clicking the mouse) in the search service.
  • the result list is output (displayed) to the result list list 303 in the subwindow adjacent to the search expression text box 301.
  • an item of interest is selected from the result list using a check box and an operation of pressing the list display button 304 (for example, clicking the mouse) is performed, an overview of the information of interest is displayed.
  • an arrow 311 from the search expression text box 301 to the search button 302 is displayed by performing an operation support process using the operation support apparatus.
  • An arrow 312 from the search button 302 to the check box of the result list list 303 is displayed, and an arrow 313 from the check box of the result list list 303 to the list display button 304 is displayed.
  • a number 321 indicating that the operation of the search formula text box 301 is the first operation is displayed, and a number 322 indicating that the operation of the search button 302 is the second operation is displayed.
  • a number 323 indicating that the operation of the check box of the result list 303 is the third operation is displayed, and a number 324 indicating that the operation of the list display button 304 is the fourth operation is displayed. Is displayed.
  • the operation procedure information is displayed on the operation screen.
  • operation procedures such as the arrow 311, the arrow 312, and the arrow 313 that are very relevant are indicated by thick solid arrows.
  • the operation procedure having the next highest relevance such as the arrow 314, the arrow 315, and the arrow 316 is indicated by a dashed arrow.
  • displaying a group of check boxes as a rectangular display 331 the number of arrows is increased so that a complicated screen is not displayed.
  • the operation history storage unit 102 stores (stores) information indicating operation details performed by one or more operators in one or more services as operation history information.
  • FIG. 3 is an explanatory diagram illustrating an example of operation history information stored in the operation history storage unit 102.
  • FIG. 3 shows operation history information accumulated when a browser is used as the application 111 as shown in FIG.
  • the operation history storage unit 102 stores the operation date and time, the user (operator) who performed the operation, and the operation content in association with each other as operation history information.
  • the operation history storage unit 102 does not necessarily store the date and time information as long as the information is stored in a manner in which the order in which the operations are performed can be specified (for example, information is stored in the order in which the operations are performed). It does not have to be.
  • the operation history information illustrated in FIG. 3 is accumulated in the operation history storage unit 102 whenever necessary, for example, every time an operation using the application 111 is performed by the operator.
  • the operation support apparatus receives the operation history information from each operator terminal via a communication network such as the Internet as needed. Received and stored in the operation history storage means 102.
  • the operation relevance discovery unit 103 uses the operation history information stored in the operation history storage unit 102 to store procedures and relevance between a plurality of operations such as text box editing, check box selection, and button press on various operation screens. Discover (determine) by calculating probability.
  • the operation relevance discovery means 103 obtains the relevance between each operation based on the calculation of the operation transition probability as a first method for discovering the procedure and relevance between a plurality of operations.
  • the procedure for calculating the operation transition probability will be described below.
  • the operation relevance finding unit 103 identifies an operation that is determined to be performed first in a series of operations among the operations indicated in the operation history information stored in the operation history storage unit 102. For example, the operation relevance finding unit 103 performs an operation performed after a predetermined time has elapsed since the previous operation was performed based on the date / time information stored in the operation history storage unit 102 as the operation performed first. Can be specified.
  • the operation relevance finding unit 103 can identify an operation indicating activation of an application or the like as an operation performed first based on information on operation contents stored in the operation history storage unit 102.
  • the operation relevance discovery unit 103 first performs the operation performed after the operation indicating the termination or shutdown of the application or the like based on the operation content information stored in the operation history storage unit 102. Can be identified as an operation.
  • the operation relevance finding unit 103 can identify an operation indicating screen switching or the like as the first performed operation based on the operation content information stored in the operation history storage unit 102.
  • the operation relevance finding unit 103 identifies each operation performed first, thereby changing each operation indicated in the operation history information stored in the operation history storage unit 102 into a series of a number of operation groups (hereinafter referred to as operation groups).
  • operation groups a number of operation groups
  • the operation relevance finding unit 103 obtains the probability of executing the operation performed first. For example, when the operation relevance finding unit 103 specifies X operations A as the first performed operation and specifies the number of operation blocks as Y, the probability of executing the operation A first is X / Y. Can be obtained by calculating.
  • the operation relevance finding unit 103 specifies the context of each operation based on the operation history information stored in the operation history storage unit 102. In this case, for example, the operation relevance finding unit 103 specifies the number S of times that the operation B is executed after a certain operation A is executed for each operation indicated in the operation history information stored in the operation history storage unit 102. At the same time, the total number T of operations A is specified. Then, the operation relevance finding unit 103 obtains the probability of executing the operation B after executing the operation A by obtaining S / T.
  • the operation relevance discovery unit 103 identifies the operation performed before each operation block and the context of each operation.
  • operation A, operation B, operation C, and operation D exist as the types of operations indicated in the operation history information stored in the operation history storage unit 102.
  • operation transition probability from the operation a1 to the operation a2 in a certain situation S is expressed as P (S
  • 103 indicates an operation transition probability as shown in the following expression (1) as an operation history. Calculation can be performed based on operation history information stored in the storage unit 102.
  • the operation relevance discovery unit 103 uses P (user 1
  • the operation relevance discovery unit 103 can determine that the relevance between operations is high if the obtained operation transition probability is equal to or higher than a certain value.
  • the threshold value for determining that the relationship is very large is 0.5.
  • the operation relevance discovery unit 103 is configured to change from operation A to operation B, from operation B to operation C, and from operation C to operation D. Since the value of the operation transition probability in the three cases is 0.5 or more, it can be determined that the relationship is very large.
  • the threshold value 0.5 is an example, and the operation relevance finding unit 103 uses another value (for example, 0.6 or 0.4) as a threshold value for determining that the relevance between operations is very large. It may be set and used in advance.
  • the operation relevance finding means 103 can also determine the relevance between operations by classifying them into a plurality of levels. For example, the operation relevance discovery unit 103 determines whether or not the relationship between operations is level A, and determines whether or not the next level is level B that is somewhat related between operations. It can also be determined. In this case, for example, a threshold value for determining that there is some relation is set to 0.1. Then, in the example shown in Expression (1), the operation relevance finding unit 103 sets the operation transition probability value to be 0. 0 even when the operation A transitions to the operation C and when the operation D transitions to the operation A. Since it is 1 or more, it can be judged that there is some relation. Note that the threshold value 0.1 is an example, and the operation relevance finding unit 103 preliminarily sets another value (for example, 0.2 or 0.05) as a threshold value for determining that there is some relevance between operations. It may be set and used.
  • the operation relevance finding means 103 may obtain the operation relevance by using another method instead of defining the threshold value as an absolute value as described above. For example, the operation relevance discovery unit 103 determines that the relevance of operations corresponding to the operation transition probabilities that fall into the top 10% from the largest value is high when the obtained operation transition probabilities are rearranged in descending order. Such a method may be used.
  • the operation relevance finding unit 103 calculates the operation transition probability for all operations indicated in the operation history information stored in the operation history storage unit 102 and does not obtain the relevance between operations, The relevance may be obtained by calculating the operation transition probability only for the operation that matches S. That is, the operation relevance finding unit 103 narrows down only operations that match the preset condition S among the operations indicated in the operation history information stored in the operation history storage unit 102, and sets the operation transition probability for the narrowed operations. Ask.
  • the status S for example, the status such as the time zone, day of the week, and place where the operation was performed can be preset and used. Further, as the situation S, personal attributes such as the operator's age, sex, affiliation group, usage tendency pattern, etc. can be set and used in advance. In addition, as the status S, information such as whether the operation is a recent operation or the operation procedure up to now can be set and used in advance.
  • the operation relevance discovery unit 103 allows the operation such as the time zone, day of the week, place, etc. to be similar to the current situation. It can be calculated so as to be more relevant. For example, it is assumed that there is an operation a ⁇ operation b, which is an operation procedure often performed at the current location. In this case, the operation relevance finding unit 103 obtains the relevance (specifically, operation transition probability) between the operation a and the operation b as 0.01 in a normal situation, while the current situation S is present. When a place is set, the relevance between the operation a and the operation b is calculated to be a high value such as 0.50.
  • the operation history storage unit 102 associates the operation history information with, for example, information on the operation content, for example, the time zone or day of the week when the operation was performed. Information indicating a location or the like may also be stored. Then, the operation relevance finding unit 103 extracts only operation history information that matches a situation such as a preset time zone, day of the week, and place from the information accumulated in the operation history storage unit 102, and extracts the extracted operation history information Based on the above, the operation transition probability may be obtained.
  • the method for calculating the operation transition probability using the preset situation S is not limited to the method shown in the present embodiment.
  • the operation relevance discovery unit 103 sets the operation transition probability between operations indicated by the operation history information that matches the situation such as a preset time zone, day of the week, and place among the information accumulated in the operation history storage unit 102.
  • weighting calculation for example, multiplication of a predetermined amount of weighting coefficient may be performed.
  • the operation relevance discovery means 103 indicates that the usage trend and personal attribute of the operator are related to the operator. It is possible to calculate so that the relevance of the operation by a similar operator becomes higher. For example, it is assumed that there is an operation a ⁇ operation b which is an operation procedure often performed by a person belonging to a certain circle C. In this case, the operation relevance finding unit 103 obtains 0.01 as the relevance (specifically, operation transition probability) between the operation a and the operation b for a normal person (a person other than the circle C). When the circle C is set as the situation S, the relevance between the operation a and the operation b is calculated to be a high value such as 0.50.
  • the operation history storage unit 102 associates, for example, the age or Information indicating personal attributes such as gender, affiliation group, and usage tendency pattern may also be stored. Then, the operation relevance finding unit 103 extracts only operation history information that matches the status of personal attributes such as age, gender, affiliation group, usage tendency pattern, etc. set in advance from the information accumulated in the operation history storage unit 102. Then, the operation transition probability may be obtained based on the extracted operation history information.
  • the method for calculating the operation transition probability using the preset situation S is not limited to the method shown in the present embodiment.
  • the operation relevance finding unit 103 is indicated by operation history information that matches a situation of a person attribute such as age, sex, affiliation group, and usage tendency pattern set in advance among information stored in the operation history storage unit 102.
  • Weighting calculation (for example, multiplying a predetermined amount of weighting coefficient) may be performed on the operation transition probability between operations.
  • the operation relevance finding unit 103 can calculate so that the relevance of the recent operation becomes higher. For example, it is assumed that there is an operation a ⁇ operation b, which is an operation procedure frequently performed recently. In this case, the operation relevance finding unit 103 obtains the relevance (specifically, operation transition probability) between the operation a and the operation b as 0.01 in the entire operation history accumulated in the operation history storage unit 102. On the other hand, when the situation S is set to be a recent operation, the relevance between the operation a and the operation b is calculated to be a high value such as 0.50.
  • the operation history storage unit 102 determines whether the operation history information is a recent operation in association with, for example, operation content information. Information indicating this may also be stored. Then, the operation relevance finding unit 103 extracts only operation history information that matches a situation indicating whether the operation is a recent operation set in advance from the information accumulated in the operation history storage unit 102, and extracts the extracted operation The operation transition probability may be obtained based on the history information.
  • the method for calculating the operation transition probability using the preset situation S is not limited to the method shown in the present embodiment.
  • the operation relevance finding unit 103 is an operation transition between operations indicated by operation history information that matches a situation indicating whether the operation is a recent operation set in advance among information stored in the operation history storage unit 102.
  • the probability may be weighted (for example, multiplied by a predetermined amount of weighting factor).
  • the operation relevance finding means 103 can calculate so that the relevance of the operation related to the current operation becomes higher. For example, it is assumed that there is an operation a ⁇ operation b, which is an operation procedure often performed after performing the operation f. In this case, the operation relevance finding unit 103 obtains the relevance (specifically, operation transition probability) between the operation a and the operation b as 0.01 in the entire operation history accumulated in the operation history storage unit 102. On the other hand, if it is set as the situation S that the previous operation is the operation f, the relevance between the operation a and the operation b is calculated to be a high value such as 0.50.
  • the operation history storage unit 102 When information indicating the operation procedure up to the present is used as the situation S, the operation history storage unit 102 also stores information indicating the operation procedure up to the present as operation history information in association with, for example, information on the operation content. You may make it do. Then, the operation relevance discovery unit 103 extracts only operation history information that matches a situation indicating a preset operation procedure from the information stored in the operation history storage unit 102, and extracts the operation history information as the extracted operation history information. Based on this, an operation transition probability may be obtained.
  • the method for calculating the operation transition probability using the preset situation S is not limited to the method shown in the present embodiment.
  • the operation relevance finding unit 103 determines the operation transition probability between operations indicated by the operation history information that matches the situation indicating the operation procedure up to the preset time among the information accumulated in the operation history storage unit 102.
  • Weight calculation (for example, multiplication by a predetermined amount of weight coefficient) may be performed.
  • the operation relevance finding means 103 does not set the status S, but based on all the operation history information accumulated in the operation history storage means 102. You may make it calculate the operation transition probability between operations, and obtain
  • the operation relevance finding means 103 can also obtain the relevance between each operation based on the similarity determination of keywords as a second method for discovering a procedure or relevance between a plurality of operations. For example, it is assumed that the following labels are respectively added to operations indicated in a plurality of operation history information accumulated in the operation history storage unit 102.
  • the operation relevance finding unit 103 performs text analysis on the labels corresponding to the respective operations, so that the operation A, the operation B, and the operation C all include the keyword “search”. Identify that. Then, the operation relevance finding unit 103 can estimate that the operation A, the operation B, and the operation C are related operations. Further, the operation relevance finding means 103 can estimate that the operation C and the operation D are related operations because the operation C and the operation D include the keyword “result”.
  • similarity can be judged relatively easily when a common keyword is included, but it is easy when a keyword with the same meaning but different expression is included.
  • the similarity cannot be judged.
  • the operation relevance finding means 103 can determine the similarity between operations even if keyword matching is performed. Cannot be judged.
  • the operation relevance finding unit 103 may be able to determine the similarity between operations, for example, by providing a dictionary for searching for similar words in advance.
  • the operation relevance finding unit 103 converts a derived expression such as “search” or “search” into a representative expression such as “search” among the expression of the label corresponding to each operation using the similar word dictionary. To do. Then, the operation relevance finding unit 103 can determine the similarity between operations by performing keyword matching based on the converted expression.
  • the display operation procedure selection means 104 selects an operation procedure and relevance (display operation procedure) suitable for display based on the situation of the place among the operation relevance obtained by the operation relevance discovery means 103.
  • the display operation procedure selection means 104 preferentially selects an operation whose status such as the time zone, day of the week, and place where the operation is performed is close to the current status as the first method of selecting the display operation procedure. For example, when the current operation time corresponds to a weekday, the display operation procedure selection unit 104 determines that the operation procedure related to the operation is not displayed when it is determined that the probability of executing an operation on a weekday is extremely low. it can.
  • the operation history storage means 102 When determining based on the situation such as the time zone, day of the week, place, etc., the operation history storage means 102, as the operation history information, for example, the time zone or day of the week when the operation was performed in association with the operation content information. Information indicating a location or the like may also be stored. Then, the display operation procedure selection unit 104 determines the time zone, day of the week, place, and the like based on the information accumulated in the operation history storage unit 102 among the operations for which the operation relevance finding unit 103 has obtained the operation relevance. Only matching operation relevance may be selected.
  • the display operation procedure selecting means 104 preferentially selects an operation of an operator whose usage tendency and personal attribute are similar to the operator as a second method of selecting the display operation procedure. For example, if the display operation procedure selection unit 104 determines that a certain operation is likely to be performed by a person who performs another operation often performed by the operator, the display operation procedure selection unit 104 gives priority to the operation procedure related to the operation. It can be judged that it is selected. Further, for example, when the display operation procedure selection unit 104 determines that a certain operation is likely to be performed by the same operator as the group to which the operator belongs, the display operation procedure selection unit 104 preferentially selects an operation procedure related to the operation. It can be judged.
  • the operation history storage unit 102 associates the operation history information with the information of the operation content, for example, as the operation history information. Information indicating attributes and the like may also be stored. Then, the display operation procedure selection unit 104 determines the usage tendency of the operator, personal attributes, etc. based on the information accumulated in the operation history storage unit 102 among the operations for which the operation relevance finding unit 103 has obtained the operation relevance. Only the operation relevance that matches the situation needs to be selected.
  • the display operation procedure selecting means 104 preferentially selects the latest operation as a third method for selecting the display operation procedure. For example, when it is determined that a certain operation procedure has not been performed recently, the display operation procedure selecting unit 104 can determine that the operation is not displayed. In addition, for example, the display operation procedure selection unit 104 can determine that the display is performed even if the relevance of the previous operation procedure is low.
  • the operation history storage unit 102 may also store information indicating the recent operation as operation history information, for example, in association with the operation content information. Good. Then, the display operation procedure selecting unit 104 selects an operation related item that matches the status of the most recent operation based on the information stored in the operation history storage unit 102 among the operations that the operation relevance finding unit 103 obtains the operation relevance. Only sex should be selected.
  • the display operation procedure selecting means 104 preferentially selects an operation related to the current operation as a fourth method for selecting the display operation procedure. For example, if the display operation procedure selecting means 104 determines that the operation a ⁇ operation b has been performed in this order, “display a ⁇ operation b” such as operation a ⁇ operation b ⁇ operation c ⁇ operation d is performed. It can be determined that the operation procedure including it is preferentially selected.
  • the operation history storage unit 102 When determining based on the status of the operation related to the current operation, the operation history storage unit 102 indicates, as operation history information, for example, an operation related to the current operation in association with the operation content information. Information may also be stored. Then, the display operation procedure selection unit 104 determines the operation status related to the current operation based on the information accumulated in the operation history storage unit 102 among the operations for which the operation relevance finding unit 103 has obtained the operation relevance. Only matching operation relevance may be selected.
  • the display operation procedure selecting means 104 may be selected according to the operation history of the operator himself / herself, another person, a person who has a close tendency to the operator himself / herself, a person belonging to the same group as the operator himself / herself, and the like. For example, if the display operation procedure selection unit 104 determines that a certain operation is likely to be performed by a person who performs another operation often performed by the operator, the display operation procedure selection unit 104 gives priority to the operation procedure related to the operation. It can be judged that it is selected.
  • the display operation procedure selection unit 104 may not be provided due to the system configuration of the operation support apparatus 101. In that case, the operation procedure display means 105 described later may display all the operation relevance obtained by the operation relevance finding means 103 on the display device 121.
  • the operation procedure display means 105 presents the operation procedure selected by the display operation procedure selection means 104 and the information on the operation relevance to the service operation screen and the operation target.
  • the operation procedure display means 105 causes the display device 121 to display the operation procedure and operation relevance information added to the displayed operation screen.
  • the operation relevance finding unit 103 obtains the operation relevance between operations indicated in each operation history information accumulated in the operation history storage unit 102. Then, the operation procedure display means 105 is displayed on the display device 121 based on the operation relevance (the operation relevance selected by the display operation procedure selection means 104 when the display operation procedure selection means 104 is provided). Thus, a series of recommended operation procedures can be displayed on the operation screen or the like.
  • the operation relevance finding unit 103 has an operation transition probability of 0.5 or more for operation A ⁇ operation B, operation B ⁇ operation C, and operation C ⁇ operation D, and the relevance is very high.
  • the operation procedure display unit 105 for example, between the operation A and the operation B on the operation screen, between the operation B and the operation C, and between the operation C and the operation D, for example. Each arrow is displayed. Then, a series of operation procedures from operation A to operation B, operation C, and operation D are displayed on the operation screen.
  • the operation procedure display unit 105 performs display control based on the operation relevance between operations obtained by the operation relevance discovery unit 103, and as a result, a series of operation procedures are displayed on the operation screen.
  • the display operation procedure selection unit 104 (or the operation relevance discovery unit 103 if the display operation procedure selection unit 104 is not provided) may be based on the operation relevance obtained by the operation relevance discovery unit 103.
  • Information indicating an operation procedure may be generated.
  • the operation relevance finding unit 103 has an operation transition probability of 0.5 or more for operation A ⁇ operation B, operation B ⁇ operation C, and operation C ⁇ operation D, and the relevance is very high.
  • the display operation procedure selection unit 104 (or the operation relevance discovery unit 103) specifies a series of operation procedures of operation A ⁇ operation B ⁇ operation C ⁇ operation D by tracing the context between operations. .
  • the display operation procedure selection unit 104 (or the operation relevance discovery unit 103) generates information indicating the operation procedure by adding information (for example, a serial number) indicating the operation order to each operation, for example. To do.
  • the operation procedure display means 105 displays a series of operation procedures on the operation screen according to information such as a push number added by the display operation procedure selection means 104 (or operation relevance finding means 103).
  • a predetermined threshold for example, 0.5
  • a plurality of operation procedures may be estimated.
  • a display method using an arrow or the like shown below a plurality of operations can be displayed on one operation screen. Therefore, a plurality of operation procedures may be displayed on the operation screen. Conversely, for example, it may be displayed by narrowing down to one operation procedure having the highest average operation transition probability.
  • the operation procedure display means 105 displays a line segment or a key line (for example, on the display screen) in a space between related operation objects on the operation screen. In order to avoid characters, etc.), the link symbol is displayed. Further, the operation procedure display means 105 displays a link symbol such as a broken line, a wavy line, a multiple line, or an arrow (a symbol including information on a direction such as a directed line segment or a triangle is referred to as an arrow), a service operation screen or an operation. Add to target and display.
  • the operation procedure display means 105 is based on the operation transition probability obtained by the operation relevance finding means 103, and the thickness or density, density, and color (hue, brightness, saturation) of the link symbol. Etc.) is determined.
  • the operation procedure display means 105 can also express the magnitude of the operation transition probability at a glance by displaying the link symbol with the determined thickness, thickness, density, and color. For example, if the darkness of the link symbol is displayed so as to increase in proportion to the value of the operation transition probability, the strongly related procedure can be displayed conspicuously, and the weakly related procedure does not get in the way. Can be displayed thinly. Therefore, it is possible for the user to easily understand the operation procedure at a glance.
  • the operation procedure display means 105 is a mark of the same color, a mark of the same shape, a number indicating the order, a mark symbol such as a mark that moves in order. Is added to the service operation screen or operation target and displayed.
  • the operation procedure display means 105 like the case of displaying the link symbol, based on the operation transition probability obtained by the operation relevance finding means 103, the size or density of the mark symbol, One of density and color (hue, lightness, saturation, etc.) is determined.
  • the operation procedure display means 105 can also express the magnitude of the operation transition probability at a glance by displaying the mark symbol with the determined thickness, density, and color.
  • the animation in order, for example, if the mark of each step is displayed every 0.5 seconds and the mark of the last step is displayed and then paused for 3 seconds, the starting point of the operation And the end point is easy to understand.
  • the operation procedure display unit 105 treats a set of operation objects such as a set of radio buttons and a check box of the same group as one operation object instead of a plurality of link symbols and landmarks. Only the rectangular display indicating the entire operation target set is displayed without displaying each symbol. By doing so, the number of link symbols and landmark symbols is not excessive, and can be displayed in an easy-to-understand manner. For example, when a web service is used, the operation procedure display unit 105 can automatically determine whether it is a table or a group structure based on a data structure such as HTML. And the operation procedure display means 105 can make it easy to understand the display without losing the amount of information by grouping together those that can be determined to be a table or a group.
  • a set of operation objects such as a set of radio buttons and a check box of the same group.
  • the system designer or user may describe and set the grouping structure in advance. And the operation procedure display means 105 may group the operation target on a display screen based on the preset setting information.
  • the operation procedure display means 105 displays a plurality of screens or windows side by side, and calculates the space or positional relationship between the screens or windows in the calculation. May be regarded as one screen and a link symbol or a landmark symbol may be displayed. In this way, although the operation steps on one screen are short, the list of operation procedures can be improved in a task in which operations are performed across many screens.
  • display or non-display may be switched.
  • display or non-display may be switched when the user simultaneously presses the Ctrl key and the F1 key, or when a user clicks a certain button. This is desirable because the display of the operation procedure is not obstructive.
  • the operation procedure display means 105 acquires (inputs) the position of a component such as a text box or a button from the browser, for example, when displaying the operation procedure of the browser. Then, the operation procedure display means 105 can display a frame such as a square or an ellipse on the input position. For example, if a browser add-on such as Firefox is used, it can be mounted relatively easily. In addition, when displaying across multiple windows, the operation procedure display means 105 uses the window size and window position information to make it appear that link symbols that span multiple windows are connected. Can be displayed.
  • FIG. 4 is a flowchart illustrating a processing example for supporting the operation of the operator by the operation support apparatus 101.
  • the operation support apparatus 101 inputs or receives the operation history information and stores it in the operation history storage unit 102 as needed each time one or more operators perform an operation using the application 111 or the like (step S101). .
  • the operator When the operator wants to use the operation support function while operating using the application 111 such as a browser, for example, the operator operates the operation support apparatus 101 and performs an operation support instruction operation. Then, the operation support apparatus 101 starts an operation support process according to the operation of the operator. Note that the operation support apparatus 101 may always perform the operation support process and display information indicating the operation procedure on the operation screen regardless of the presence or absence of the instruction operation by the operator.
  • the operation relevance finding unit 103 of the operation support apparatus 101 calculates an operation transition probability between operations based on the operation indicated in each operation history information accumulated in the operation history storage unit 102. Calculation is performed to obtain operation relevance between operations (step S102).
  • the display operation procedure selection unit 104 selects an operation relevance to be displayed on the operation screen based on the operation relevance obtained by the operation relevance discovery unit 103 (step S103).
  • the operation procedure display means 105 displays information indicating each operation relevance on the operation screen based on the operation relevance selected by the display operation procedure selection means 104 (step S104).
  • the operation procedure display means 105 displays information indicating the operation procedure such as arrows and circled numbers as shown in FIG. 2 on the operation screen.
  • the operation support apparatus 101 operates based on the operation history information stored in the operation history storage unit 102 and is related to operations that may be performed on the operation screen. Ask for.
  • the operation support apparatus 101 performs display control of the operation procedure by adding information indicating the obtained operation relevance to the operation screen or the operation target displayed on the operation screen and performing display control.
  • FIG. 5 is a block diagram illustrating an example of the configuration of the operation support apparatus according to the second embodiment.
  • the operation support apparatus 101 ⁇ / b> A is different from the first embodiment in that the operation support apparatus 101 ⁇ / b> A does not include the display operation procedure selection unit 104 among the components shown in FIG. 1. That is, as described in the first embodiment, when the operation relevance finding unit 103 is configured to obtain the operation relevance by narrowing down the operation history information according to the situation S, the display operation procedure selecting unit 104 is not necessarily provided. There is no need to provide it. Therefore, in the present embodiment, a case will be described in which the operation support apparatus 101A is realized without providing the display operation procedure selection unit 104.
  • the operation relevance finding means 103 has a function for obtaining a procedure and relevance between a plurality of operations such as text box editing, check box selection, and button pressing on various operation screens.
  • the operation relevance discovery unit 103 uses the operation history information stored in the operation history storage unit 102 to calculate an operation transition probability between operations stored as an operation history, and thus between operations. Discover (require) relevance (operation relevance).
  • the operation relevance finding unit 103 calculates operation transition probabilities by narrowing down operation history information according to the situation S according to the same processing shown in the first embodiment, and the operation relevance between operations. Ask for.
  • the operation procedure display means 105 is a function for presenting the display operation procedure information to the original operation screen of the service or the operation target in the screen based on the operation relevance obtained by the operation relevance finding means 103. Is provided.
  • the operation procedure display unit 105 causes the display device 121 to display, on the operation screen being displayed, an arrow indicating the front-rear relationship regarding a plurality of operations, a number indicating the operation order, or the like. The display operation procedure is presented.
  • FIG. 6 is a flowchart illustrating an example of a process for supporting the operation of the operator by the operation support apparatus 101A according to the second embodiment.
  • the operation support apparatus 101 inputs the operation history information every time one or more operators perform operations using the application 111 or the like according to the same process as step S101 described in the first embodiment. It is received and stored in the operation history storage means 102 as needed (step S201).
  • the operator When the operator wants to use the operation support function while operating using the application 111 such as a browser, for example, the operator operates the operation support apparatus 101A and performs an operation support instruction operation. Then, the operation support apparatus 101A starts an operation support process in accordance with the operation of the operator. Note that the operation support apparatus 101A may always perform an operation support process and display information indicating the operation procedure on the operation screen regardless of whether or not the operator performs an instruction operation.
  • the operation relevance finding unit 103 of the operation support apparatus 101A operates according to the situation S based on the operation indicated in each operation history information stored in the operation history storage unit 102.
  • the operation transition probability between operations is calculated by narrowing down and the operation relevance between operations is obtained (step S202).
  • the operation procedure display unit 105 displays information indicating each operation relevance on the operation screen based on the operation relevance obtained by the operation relevance discovery unit 103 (step S203).
  • the operation procedure display means 105 displays information indicating an operation procedure such as an arrow or a circled number on the operation screen in the same display manner as in FIG.
  • the operation support apparatus 101A can be performed on the operation screen based on the operation history information accumulated in the operation history storage unit 102, as in the first embodiment. To find the operation relevance between the various operations. Further, the operation support apparatus 101A performs display control of the operation procedure by adding information indicating the obtained operation relevance to the operation screen or the operation target displayed on the operation screen and performing display control. By controlling in this way, it is possible not only to estimate and present the next operation, but also to estimate a series of operation procedures and present them to the operator. Therefore, even for applications and services that have complicated operation procedures, the operator can grasp the appropriate operation procedure according to the operation status on the entire screen at a glance, and only follow the guide without having to learn complicated operation procedures. You can get service at
  • the operation relevance finding unit 103 narrows down the operations to be calculated in accordance with the situation S and obtains the operation relevance between operations, thereby reducing the operation relevance calculation load. In addition, it is not necessary to select the operation relevance to be displayed after obtaining the operation relevance, and the processing load on the operation support apparatus 101A can be reduced.
  • Embodiment 3 a third embodiment of the present invention will be described with reference to the drawings.
  • the operation support method according to the present invention is not limited to a case where the operation support method is realized by using one information processing apparatus, and can be applied to, for example, a business model that distributes information related to operation support via a communication network such as the Internet.
  • FIG. 7 is a block diagram showing an example of the configuration of the operation support system according to the present invention.
  • the operation support system includes an operator terminal 20 having an operation procedure display means, and an operation support server 10 having an operation history storage means and an operation relevance finding means.
  • the operation support server 10 and the operator terminal 20 are connected via a communication network such as the Internet.
  • the operation support system may include a plurality of operator terminals 20.
  • the operation support server 10 is a server operated by a service provider that provides an operation support service, and is specifically realized by an information processing apparatus such as a personal computer that operates according to a program. As shown in FIG. 7, the operation support server 10 includes an operation history information collection unit 11, an operation history storage unit 12, an operation relevance discovery unit 13, a display operation procedure selection unit 14, and an operation support information transmission unit 15.
  • the operation history information collecting means 11 is specifically realized by a CPU and a network interface unit of an information processing apparatus that operates according to a program.
  • the operation history information collection unit 11 has a function of receiving operation history information from the operator terminal 20 via a communication network.
  • the operation history information collection unit 11 has a function of storing the received operation history information in the operation history storage unit 12.
  • the operation history storage means 12 is specifically realized by a storage device such as a magnetic disk device or an optical disk device.
  • the operation history storage unit 12 retains (stores) information indicating operation details performed by one or more operators as operation history information.
  • the operation relevance finding means 13 is specifically realized by a CPU of an information processing apparatus that operates according to a program.
  • the operation relevance finding means 13 has a function for obtaining a procedure and relevance between a plurality of operations such as text box editing, check box selection, and button pressing on various operation screens.
  • the operation relevance finding unit 13 uses the operation history information stored in the operation history storage unit 12 to calculate an operation transition probability between operations stored as an operation history, thereby performing an operation between operations. Discover (require) relevance (operation relevance).
  • the display operation procedure selection means 14 is specifically realized by a CPU of an information processing apparatus that operates according to a program.
  • the display operation procedure selection unit 14 has a function of selecting an operation procedure or relevance (display operation procedure) suitable for display based on the situation of the operation relevance obtained by the operation relevance discovery unit 13. .
  • the operation relevance finding means 13 is configured to narrow down and calculate the operation transition probability according to the situation S
  • the operation support server 10 The display operation procedure selecting means 14 may not be provided.
  • the operation support information transmitting unit 15 is realized by a CPU and a network interface unit of an information processing apparatus that operates according to a program.
  • the operation support information transmitting unit 15 has a function of generating operation support information including the selection result of the display operation procedure selecting unit 14 and transmitting the operation support information to the operator terminal 20 via the communication network.
  • the operator terminal 20 is a terminal on which an application such as a browser is installed and used by the operator. Specifically, the operator terminal 20 is realized by an information processing terminal such as a personal computer that operates according to a program. The operator terminal 20 may be realized by a terminal such as a mobile phone or a PDA. As shown in FIG. 7, the operator terminal 20 includes an operation history information transmission unit 21, an operation support information reception unit 22, an operation procedure display unit 23, and a display device 24.
  • the operation history information transmitting means 21 is specifically realized by a CPU and a network interface unit of an information processing terminal that operates according to a program.
  • the operation history information transmitting unit 21 has a function of generating operation history information and transmitting the operation history information to the operation support server 10 via the communication network every time an operation using the application is performed by the operator of the operator terminal 20.
  • the operation support information receiving means 22 is specifically realized by a CPU and a network interface unit of an information processing terminal that operates according to a program.
  • the operation support information receiving unit 22 has a function of receiving operation support information from the operation support server 10 via a communication network.
  • the operation procedure display means 23 is specifically realized by a CPU of an information processing terminal that operates according to a program. Based on the operation support information received by the operation support information receiving means 22, the display operation procedure information selected by the operation support server 10 is added to the original operation screen of the service and the operation target in the screen and presented. It has a function. For example, the operation procedure display means 23 presents a display operation procedure by causing the display device 24 to display an arrow indicating the front-rear relationship regarding a plurality of operations, a number indicating the operation order, or the like on the operation screen being displayed.
  • FIG. 8 is a flowchart illustrating a processing example for supporting the operation of the operator by the operation support system.
  • the operator terminal 20 generates operation history information and transmits it to the operation support server 10 via the communication network every time one or more operators operate using an application or the like (step S301). Further, every time the operation support server 10 receives operation history information from the operator terminal 20, the operation support server 10 stores the received operation history information in the operation history storage unit 12 as needed (step S302).
  • the operator When the operator wants to use the operation support function while operating using an application such as a browser, for example, the operator operates the operator terminal 20 to perform an operation support instruction operation. Then, the operator terminal 20 transmits an operation support service provision request to the operation support server 10 via the communication network in accordance with the operation of the operator. Then, the operation support server 10 starts the operation support process based on the reception of the operation support service provision request.
  • the operation relevance finding unit 13 of the operation support server 10 calculates the operation transition probability between operations based on the operation indicated in each operation history information accumulated in the operation history storage unit 12. Calculation is performed to obtain operation relevance between operations (step S303).
  • the display operation procedure selecting unit 14 selects the operation relevance to be displayed on the operation screen based on the operation relevance obtained by the operation relevance finding unit 13 (step S304).
  • the operation support information transmission unit 15 of the operation support server 10 generates operation support information including the selection result of the display operation procedure selection unit 14 and transmits it to the operator terminal 20 via the communication network (step S305).
  • the operation procedure display means 23 of the operator terminal 20 Upon receiving the operation support information, the operation procedure display means 23 of the operator terminal 20 displays information indicating each operation relevance on the operation screen based on the operation relevance selected by the operation support server 10 (Ste S306). For example, the operation procedure display means 23 displays information indicating the operation procedure, such as arrows and circled numbers, on the operation screen in the same display manner as in FIG.
  • the operation support server 10 can be performed on the operation screen based on the operation history information accumulated in the operation history storage unit 12 as in the first embodiment.
  • the operator terminal 20 controls the display of the operation procedure by adding and displaying the information indicating the obtained operation relevance to the operation screen or the operation target displayed on the operation screen.
  • Embodiment 4 a fourth embodiment of the present invention will be described with reference to the drawings.
  • a terminal such as a remote controller for AV operation
  • the operation support apparatus or the operation support system shown in the first to third embodiments may be.
  • a camera may be mounted on the display glasses, and a link symbol or a mark symbol may be superimposed on the display glasses in accordance with the location of the buttons on the remote controller based on information captured by the camera.
  • FIG. 9 is a block diagram showing an example of the configuration of display glasses that can use the operation support method according to the present invention.
  • the display glasses include an operation relevance storage unit 31, an operation procedure display unit 32, and a display device 33.
  • the operation relevance storage means 31 is specifically realized by a storage device such as a memory.
  • the operation relevance storage unit 31 stores, for example, information indicating operation procedures and operation relevance obtained in advance using an operation support device or an operation support system.
  • the operation procedure display means 32 is specifically realized by a control unit mounted on display glasses.
  • the operation procedure display unit 32 has a function of superimposing and displaying the display operation procedure information in accordance with the position of the operation unit of the remote controller based on information stored in advance by the operation relevance storage unit 31.
  • the operation procedure display means 32 presents a display operation procedure by causing the display device 33 mounted on the display glasses to display an arrow indicating the front-rear relationship regarding a plurality of operations, a number indicating the operation order, and the like.
  • FIG. 10 is a block diagram illustrating a minimum configuration example of the operation support apparatus.
  • the operation support apparatus includes an operation relevance finding unit 103 and an operation procedure display unit 105 as minimum components.
  • the operation relevance finding means 103 has a function for obtaining operation relevance between operations that may be performed on the operation screen. Further, the operation procedure display means 105 adds information indicating the operation relevance obtained by the operation relevance discovery means 103 to the operation screen or the operation target displayed on the operation screen, thereby controlling the display of the operation procedure. It has a function to control display.
  • the operation support apparatus having the minimum configuration shown in FIG. 10, it is possible not only to estimate and present the next operation, but also to estimate and present a series of combined operation procedures to the operator. Therefore, even for applications and services that have complicated operation procedures, the operator can grasp the appropriate operation procedure according to the operation status on the entire screen at a glance, and only follow the guide without having to learn complicated operation procedures. You can get service at
  • the operation support method is an operation support method for supporting an operation on the operation screen, and includes an operation relevance calculation step for obtaining an operation relevance between operations that may be performed on the operation screen, and an operation relevance calculation.
  • An operation procedure display step of controlling the operation procedure by adding and controlling the information indicating the operation relevance obtained in the step to the operation screen or an operation target displayed on the operation screen.
  • the operation relevance between operations is obtained by calculating an operation transition probability using operation history information indicating a history of operations performed by the operator. It may be configured.
  • the operation support method calculates the operation relevance between operations by performing predetermined weighting on an operation that matches a preset situation (for example, situation S) in the operation relevance calculation step. It may be configured.
  • the operation relevance calculation step calculates the operation relevance between operations so that the relevance increases as the operation of the preset time zone, day of the week, or place is closer to the current situation. It may be configured to.
  • the operation relevance calculation step operations between operations are performed so that the relevance increases as the operation tendency or the personal attribute of the operator set in advance is similar to the operator who is currently operating. It may be configured to calculate relevance.
  • the operation support method may be configured to calculate the operation relevance between operations so that the relevance of the recent operation set in advance is higher in the operation relevance calculation step.
  • the operation support method may be configured to calculate the operation relevance between operations so that the relevance of the operation related to the preset current operation is higher in the operation relevance calculation step. Good.
  • the operation support method may be configured to calculate operation relevance between operations by calculating a similarity of a keyword corresponding to the operation in an operation relevance calculation step.
  • the operation support method is an operation support method for supporting an operation on the operation screen, and information indicating operation relevance between operations obtained in advance is stored as operation relevance storage means (for example, operation relevance storage means 31). And the operation relevance storage step stored in the operation relevance storage means and the information indicating the operation relevance stored in the operation relevance storage means are displayed on the operation screen or the operation target displayed on the operation screen.
  • the operation procedure display step for displaying the operation procedure may be included.
  • the operation support method includes a link by a line segment, a key line, a broken line, a wavy line, a multiple line, or an arrow between operation targets indicated by the operation relevance obtained in the operation relevance calculation step in the operation procedure display step. A symbol may be added to the operation screen to control the display.
  • the operation support method calculates operation transition probabilities using operation history information indicating a history of operations performed by the operator in the operation relevance calculation step, thereby obtaining operation relevance between operations,
  • operation history information indicating a history of operations performed by the operator in the operation relevance calculation step, thereby obtaining operation relevance between operations.
  • one of the thickness, density, density, color, hue, lightness, or saturation of the link symbol is determined based on the operation transition probability, and the link symbol is displayed and controlled in the determined manner. It may be configured to.
  • the operation support method calculates an operation transition probability using operation history information indicating a history of operations performed by an operator in an operation relevance calculation step, thereby obtaining operation relevance between operations,
  • the size, density, density, color, hue, brightness, or saturation of the landmark symbol is determined based on the operation transition probability, and the landmark symbol is displayed and controlled in the determined manner. It may be configured to.
  • the operation support method is configured to display the link symbol or the mark symbol by grouping the operation target set of the same group displayed on the operation screen as one operation target in the operation procedure display step. It may be.
  • the operation procedure display step with respect to an operation performed over a plurality of operation screens, the plurality of operation screens are displayed and controlled, and the entire plurality of operation screens are combined into one screen. It may be configured to display and control the link symbol or the mark symbol.
  • the operation support method includes an operation relevance selection step for selecting an operation relevance in accordance with the current operation state among the operation relevance obtained in the operation relevance calculation step.
  • Information indicating the operation relevance selected in the operation relevance selection step may be preferentially added to control display.
  • the operation support method is configured to preferentially select an operation relevance in an operation relevance selection step by preferentially selecting an operation in which a preset time zone, day of the week, or place is close to the current situation. Also good.
  • the operation relevance is selected by giving priority to an operation similar to the operator whose operation tendency or person attribute is set in advance. It may be configured.
  • the operation support method may be configured to select the operation relevance in the operation relevance selection step by giving priority to a previously set recent operation.
  • the operation support method may be configured to preferentially select an operation relevance in an operation relevance selection step by giving priority to an operation related to a preset current operation.
  • the operation support system is an operation support system that supports an operation on an operation screen, and an operation support server (for example, an operator terminal 20) and an operation support server (for example, an operation support server that performs an operation on the operation screen)
  • the operation support server is realized by operation relevance calculating means (for example, operation relevance finding means 13) for obtaining operation relevance between operations that may be performed on the operation screen. ), And an operation relevance transmission unit (for example, realized by the operation support information transmission unit 15) that transmits information indicating the operation relevance obtained by the operation relevance calculation unit to the operator terminal via the communication network.
  • the operator terminal adds information indicating the operation relevance received from the operation support server to the operation screen or the operation target displayed on the operation screen.
  • control characterized in that it comprises the operation procedure display means for displaying control the operation procedures (for example, implemented by the operation procedure display unit 23).
  • the operation relevance calculating means calculates the operation relevance using operation history information indicating a history of operations performed by the operator so as to obtain operation relevance between operations. It may be configured.
  • the operation support apparatus is an operation support apparatus that supports an operation on the operation screen, and is an operation relevance calculation unit that calculates operation relevance between operations that may be performed on the operation screen (for example, operation relevance The operation procedure by adding information indicating the operation relevance obtained by the operation relevance calculating means to the operation screen or the operation target displayed on the operation screen and controlling the display. And an operation procedure display means (for example, realized by the operation procedure display means 105).
  • the operation relevance calculating means calculates the operation relevance between the operations by calculating operation transition probabilities using operation history information indicating a history of operations performed by the operator. It may be configured.
  • the operation support system is an operation support system that supports an operation on the operation screen, and includes an operator terminal and an operation support server that performs a process of supporting an operation on the operation screen.
  • An operation relevance calculation unit for obtaining operation relevance between operations that may be performed on the screen, and information indicating the operation relevance obtained by the operation relevance calculation unit are transmitted to the operator terminal via the communication network.
  • An operation relevance transmission unit, and the operator terminal performs display control by adding information indicating the operation relevance received from the operation support server to the operation screen or an operation target displayed on the operation screen.
  • An operation procedure display unit that controls display of the operation procedure may be included.
  • the operation relevance calculation unit obtains the operation relevance between operations by calculating an operation transition probability using operation history information indicating a history of operations performed by the operator. It may be configured.
  • the operation support device is an operation support device that supports an operation on the operation screen, and includes an operation relevance calculation unit that calculates operation relevance between operations that may be performed on the operation screen, and an operation relevance calculation.
  • An operation procedure display unit configured to display and control an operation procedure by adding information indicating operation relevance obtained by the operation unit to an operation screen or an operation target displayed on the operation screen and controlling the display. May be.
  • the operation relevance calculation unit calculates operation relevance using operation history information indicating a history of operations performed by the operator so as to obtain operation relevance between operations. It may be configured.
  • the present invention can be applied to personal computers, portable terminals, car navigation terminals, digital home appliances, and ATMs.
  • Operation support apparatus 101, 101A Operation support apparatus 102 Operation history storage means 103 Operation relevance discovery means 104 Display operation procedure selection means 105 Operation procedure display means 111 Application 121 Display device 10 Operation support server 11 Operation history information collection means 11 12 operation history storage means 13 operation relevance discovery means 14 display operation procedure selection means 15 operation support information transmission means 20 operator terminal 21 operation history information transmission means 22 operation support information reception means 23 operation procedure display means 24 display device 31 operation related Storage means 32 Operating procedure display means 33 Display device

Abstract

 本発明による操作支援装置は、操作画面における操作を支援する操作支援装置であって、前記操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出手段と、前記操作関連性算出手段が求めた前記操作関連性を示す情報を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示手段とを備えたことを特徴とする。

Description

操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラム
 本発明は、操作画面における操作を支援する操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラムに関する。
 パーソナルコンピュータや、携帯端末、カーナビゲーション端末、デジタル家電製品、ATMにおける操作を支援する各種の操作支援システムが提案されている。例えば、関連する技術として、操作支援システムの一例が特許文献1に記載されている。
 図11は、特許文献1に記載された機器操作支援システムの構成例を示すブロック図である。図11に示すように、この特許文献1に記載された機器操作支援システムは、主要な構成要素として、操作履歴記憶手段902と、次操作予測手段903と、次操作表示手段905とを備える。操作履歴記憶手段902は、アプリケーション911やOSにおいて操作者が行った操作を操作履歴として保持する。また、次操作予測手段903は、操作履歴記憶手段902が記憶する操作履歴に基づいて、操作者が次に操作しそうな操作(次操作という)を予測する。また、次操作表示手段905は、次操作予測手段903によって予測された次操作を表示する。
 特許文献1に記載された機器操作支援システムでは、上記の構成により、次操作を予測し、煩雑なメニューの操作から操作者を開放することを目的としている。
 また、関連する技術として、操作支援システムの別の一例が特許文献2に記載されている。この特許文献2に記載された機器操作支援システムでは、特許文献1に記載されたシステムと同様の次操作予測を行うことに加えて、先行処理制御を行う。そのようにすることで、処理時間が長い操作の待ち時間を減少することを目的としている。また、特許文献2には、入力コマンドを統計することによって次回のコマンドへの遷移確率表を生成し、生成した遷移確率表を参照して次回の先行コマンドを出力することが記載されている。
 また、関連する技術として、操作支援システムのさらに別の一例が特許文献3に記載されている。この特許文献3に記載された機器操作支援システムでは、特許文献1に記載された機器操作支援システムが1つの次操作コマンドの入力操作の予測を行うものであったのに対し、複数の次操作コマンドを一括して予測する。なお、特許文献3に記載された機器操作支援システムは、主要な構成要素として、特許文献1に記載された機器操作支援システムと同様に、図11に示されるような構成要素を備える。そして、次操作予測手段が操作を複数予測し、次操作表示手段が予測された複数の操作を頻度の高い順に並べて表示する点において、特許文献1に記載された機器操作支援システムと異なることを特徴とする。
 また、関連する技術として、例えば、特許文献4には、予め格納する操作手順に基づいて操作ガイドを行うように構成された操作ガイド装置が記載されている。また、関連する技術として、例えば、特許文献5には、蓄積した履歴情報に含まれる日時に基づいて対象機器を制御することが記載されている。また、関連する技術として、例えば、特許文献6には、ユーザの選択操作に従って、コピー操作などのガイダンス画面を表示したり、操作対象のボタンの表示色を変えて表示したりすることが記載されている。
特開平10-27089号公報 特開2001-5779号公報 特開2007-58737号公報 特開平5-35383号公報 特開2005-86768号公報 特開2008-65630号公報
 アプリケーションやOS、デジタル家電製品、ATM等を用いたサービスが高度化し複雑化したことに伴い、その操作が複雑になってきている。そのため、ユーザがサービスの使い方(具体的には操作の仕方)を覚えきれなかったり、サービスを使えるようになるまでに試行錯誤を繰り返さなければならない場面が増えている。
 特許文献1や特許文献2に記載された関連技術を用いた場合、次の操作を予測して提示することによって、ある程度ユーザの操作を助けることができる。しかし、次操作のみを予測して提示できるにすぎないので、一画面に多くのステップを含むようなアプリケーションやサービスにおいては、操作者が一見して画面全体における操作手順を把握することは難しい。
 また、特許文献3に記載された関連技術を用いた場合、複数の操作を同時に予測して提示することによって、ユーザ操作の入力支援を行うことができる。しかし、予測された複数の操作を頻度の高い順に並べて表示できるにすぎず、各操作間の関連性や前後関係については何ら考慮していない。そのため、その画面においてよく行う操作を閲覧することはできても、どういう手順で操作を行えばよいかを知ることはできい。
 また、特許文献4に記載された関連技術を用いれば、予め格納する操作手順を操作者に提示することができる。しかし、操作手順が予め定まっている場合にしか操作手順を提示することができず、操作状況に応じた適切な操作手順を提示できるとはかぎらない。さらに、特許文献5や特許文献6に記載された関連技術では、単に履歴情報に基づいて対象機器を制御したり、操作のガイダンス画面を表示したりできるにすぎない。
 そこで、本発明は、上記課題を解決するためになされたものであって、複雑な操作手順を有するようなアプリケーションやサービスにおいても、操作者が一見して画面全体における操作状況に応じた適切な操作手順を把握でき、複雑な操作手順を覚えなくてもガイドに従うだけでサービスを受けられる操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラムを提供することを目的とする。
 本発明による操作支援方法は、操作画面における操作を支援する操作支援方法であって、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出ステップと、操作関連性算出ステップで求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示ステップとを含むことを特徴とする。
 本発明による操作支援システムは、操作画面における操作を支援する操作支援システムであって、操作者端末と、操作画面における操作を支援する処理を行う操作支援サーバとを備え、操作支援サーバは、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出手段と、操作関連性算出手段が求めた操作関連性を示す情報を、通信ネットワークを介して操作者端末に送信する操作関連性送信手段とを含み、操作者端末は、操作支援サーバから受信した操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示手段を含むことを特徴とする。
 本発明による操作支援装置は、操作画面における操作を支援する操作支援装置であって、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出手段と、操作関連性算出手段が求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示手段とを備えたことを特徴とする。
 本発明による操作支援プログラムは、操作画面における操作を支援するための操作支援プログラムであって、コンピュータに、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出処理と、操作関連性算出処理で求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示処理とを実行させるためのものである。
 本発明によれば、複雑な操作手順を有するようなアプリケーションやサービスにおいても、操作者が一見して画面全体における操作状況に応じた適切な操作手順を把握でき、複雑な操作手順を覚えなくてもガイドに従うだけでサービスを受けることができる。
本発明による操作支援装置の構成の一例を示すブロック図である。 操作支援を行う場合の操作画面の具体的な表示例を示す説明図である。 操作履歴記憶手段が記憶する操作履歴情報の例を示す説明図である。 操作支援装置による操作者の操作を支援するための処理例を示す流れ図である。 第2の実施形態における操作支援装置の構成の一例を示すブロック図である。 第2の実施形態における操作支援装置による操作者の操作を支援するための処理例を示す流れ図である。 本発明による操作支援システムの構成の一例を示すブロック図である。 操作支援システムによる操作者の操作を支援するための処理例を示す流れ図である。 本発明による操作支援方法を利用可能なディスプレイ眼鏡の構成の一例を示すブロック図である。 操作支援装置の最小の構成例を示すブロック図である。 特許文献1に記載された機器操作支援システムの構成例を示すブロック図である。
実施形態1.
 以下、本発明の第1の実施形態を図面を参照して説明する。本発明による操作支援方法では、操作者が行いそうな次の操作のみを提示するのではなく、画面に表示されている構成部品(ボタンやテキストボックス、チェックボックス、リンク等)間でどのような手順で操作者が操作や入力を行いそうであるかの前後関係や、その遷移確率等の操作手順情報を一度に提示する。本発明による操作支援方法では、操作履歴情報に基づいてユーザ操作における画面構成部品間の遷移確率を求め、その遷移確率が高いものを関連性が高いと判断して矢印等で提示(表示)する。この場合、遷移確率が大きいものを矢印の線を濃くして表示し、小さいものを薄くして表示する等して、遷移確率の大きさを表現する。例えば、あるサービスを利用する際にボタンAを押してからボタンBを押す確率が高いという関連性を操作履歴情報に基づいて推定した場合、そのサービスにおける操作画面においてボタンAからボタンBに対して濃い矢印を描画する。
 図1は、本発明による操作支援装置の構成の一例を示すブロック図である。図1に示すように、操作支援装置101は、操作履歴記憶手段102、操作関連性発見手段103、表示操作手順選択手段104、及び操作手順表示手段105を含む。なお、本実施形態において、操作支援装置101は、アプリケーション111やOS、デジタル家電製品、ATM等のサービスにおける操作を支援する用途に用いられる。また、本実施形態において、操作支援装置101は、具体的には、プログラムに従って動作するパーソナルコンピュータ等の情報処理装置によって実現される。
 操作履歴記憶手段102は、具体的には、磁気ディスク装置や光ディスク装置等の記憶装置によって実現される。操作履歴記憶手段102は、1人又は複数人の操作者が行った操作内容を示す情報を操作履歴情報として保持(記憶)する。
 操作関連性発見手段103は、具体的には、プログラムに従って動作する情報処理装置のCPUによって実現される。操作関連性発見手段103は、各種操作画面におけるテキストボックス編集やチェックボックス選択、ボタン押下等の複数操作間の手順や関連性(以下、順序関係を有する関連性を手順という)を求める機能を備える。本実施形態では、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作履歴情報を用いて、操作履歴として記憶する操作間の操作遷移確率等の計算を行うことにより、操作間の関連性(以下、操作関連性ともいう)を発見する(求める)。
 表示操作手順選択手段104は、具体的には、プログラムに従って動作する情報処理装置のCPUによって実現される。表示操作手順選択手段104は、操作関連性発見手段103が求めた操作関連性のうち、その場の状況に基づいて表示するにふさわしい操作手順や関連性(以下、表示操作手順という)を選択する機能を備える。
 操作手順表示手段105は、具体的には、プログラムに従って動作する情報処理装置のCPUによって実現される。操作手順表示手段105は、表示操作手順選択手段104が選択した表示操作手順の情報を、サービスの元来の操作画面や画面中の操作対象に付加して提示する機能を備える。例えば、操作手順表示手段105は、表示装置121に、表示中の操作画面において、複数操作に関する前後関係を示す矢印や操作順番を示す数字等を表示させることにより、表示操作手順を提示する。
 アプリケーション111は、プログラムに従って動作する情報処理装置が搭載するブラウザ等のソフトウェアである。また、表示装置121は、例えば、プログラムに従って動作する情報処理装置が備えるディスプレイ装置等によって実現される。
 なお、本実施形態において、操作支援装置を実現する情報処理装置の記憶装置(図示せず)は、各種操作画面おける操作支援をするための各種プログラムを記憶している。例えば、情報処理装置の記憶装置は、コンピュータに、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出処理と、操作関連性算出処理で求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示処理とを実行させるための操作支援プログラムを記憶している。
 次に、図1に示す操作支援装置を用いて操作支援を行う場合の操作画面の具体的な表示例について説明する。図2は、操作支援を行う場合の操作画面の具体的な表示例を示す説明図である。図2に示す例では、アプリケーション111としてブラウザを用いて検索サービスを利用する場合を示している。例えば、図2に示す例では、操作者(ユーザ)は、検索サービスにおいて、検索式を検索式テキストボックス301に入力する操作を行い、検索ボタン302を押す(例えば、マウスクリックする)操作を行う。すると、検索式テキストボックス301の隣のサブウィンドウの結果一覧リスト303に結果一覧が出力(表示)される。そして、結果一覧の中から興味のある項目をチェックボックスで選んでから一覧表示ボタン304を押す(例えば、マウスクリックする)操作を行うと、興味のある情報の概要が表示される。
 上記の手順によるインタフェースがある場合、操作支援装置を用いた操作支援の処理を行うことによって、検索式テキストボックス301から検索ボタン302への矢印311が表示される。また、検索ボタン302から結果一覧リスト303のチェックボックスへの矢印312が表示され、結果一覧リスト303のチェックボックスから一覧表示ボタン304への矢印313が表示される。
 さらに、検索式テキストボックス301の操作が一番最初にすべき操作であることを示す番号321が表示され、検索ボタン302の操作が2番目にすべき操作であることを示す番号322が表示される。また、結果一覧リスト303のチェックボックスの操作が3番目にすべき操作であることを示す番号323が表示され、一覧表示ボタン304の操作が4番目にすべき操作であることを示す番号324が表示される。
 以上のような態様で、操作画面において操作手順情報が表示される。
 なお、図2に示す例では、矢印311や矢印312、矢印313のような関連性が非常に高い操作手順を太めの実線矢印で表示している。また、矢印314や矢印315、矢印316のような関連性が次に高い操作手順を破線矢印で表示している。さらに、チェックボックスの集合を矩形表示331のようにグルーピングして表示することによって、矢印の数が増えすぎて煩雑な画面にならないように表示している。
 図2に示すように、複数ステップの操作に関する情報を同時に表示することにより、操作者が一見して画面全体における操作手順を把握しやすいようにしている。
 次に、各手段の機能について順次説明する。
 操作履歴記憶手段102は、1つ又は複数のサービスにおける1人又は複数人の操作者が行った操作内容を示す情報を操作履歴情報として保持(記憶)する。図3は、操作履歴記憶手段102が記憶する操作履歴情報の例を示す説明図である。なお、図3は、図2に示すようなアプリケーション111としてブラウザを用いる場合に蓄積される操作履歴情報を示している。図3に示すように、操作履歴記憶手段102は、操作の行われた日時と、操作を行ったユーザ(操作者)と、操作内容とを、対応付けて操作履歴情報として記憶する。
 図3に示すように、操作内容の情報とあわせて、日時情報や利用者情報のような状況情報も蓄積することによって、操作間の時間的近接性を判断したり、ユーザや状況に応じた手順表示を可能にする。なお、操作履歴記憶手段102は、操作が行われた順序が特定可能な態様(例えば、操作が行われた順に情報を格納)で各情報を記憶していれば、必ずしも日時情報を記憶していなくてもよい。
 なお、図3に示す操作履歴情報は、例えば、操作者によってアプリケーション111を用いた操作が行われる毎に操作履歴記憶手段102に随時蓄積される。また、例えば、操作履歴記憶手段102が複数の操作者の操作履歴情報を蓄積する場合には、操作支援装置は、各操作者の端末から、インターネット等の通信ネットワークを介して操作履歴情報を随時受信し、操作履歴記憶手段102に蓄積する。
 操作関連性発見手段103は、各種操作画面におけるテキストボックス編集やチェックボックス選択、ボタン押下等の複数操作間の手順や関連性を、操作履歴記憶手段102が記憶する操作履歴情報を用いた操作遷移確率等の計算により発見する(求める)。
 操作関連性発見手段103は、複数操作間の手順や関連性を発見する第1の方法として、操作遷移確率の計算に基づいて各操作間の関連性を求める。以下、操作遷移確率の算出手順について説明する。
 まず、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作履歴情報に示される各操作のうち、一連のまとまった操作群の最初に行われたと判断される操作を特定する。例えば、操作関連性発見手段103は、操作履歴記憶手段102が記憶する日時情報に基づいて、前回操作が行われてから所定時間以上経過してから行われた操作を、最初に行われた操作と特定することができる。
 また、例えば、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作内容の情報に基づいて、アプリケーション等の起動を示す操作を、最初に行われた操作と特定することができる。また、例えば、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作内容の情報に基づいて、アプリケーション等の終了やシャットダウンを示す操作の次に行われた操作を、最初に行われた操作と特定することができる。さらに、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作内容の情報に基づいて、画面の切り替え等を示す操作を、最初に行われた操作と特定することができる。
 また、操作関連性発見手段103は、最初に行われた操作を特定することによって、操作履歴記憶手段102が記憶する操作履歴情報に示される各操作を、一連のまとまったいくつの操作群(以下、操作ブロックという)に分けることができるかも特定することができる。
 そして、操作関連性発見手段103は、最初に行われた操作を実行する確率を求める。例えば、操作関連性発見手段103は、最初に行われた操作として操作AをX個特定するとともに操作ブロック数をY個と特定した場合には、最初に操作Aを実行する確率をX/Yを計算することによって求めることができる。
 また、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作履歴情報に基づいて、各操作の前後関係を特定する。この場合、操作関連性発見手段103は、例えば、操作履歴記憶手段102が記憶する操作履歴情報に示される各操作について、ある操作Aが実行された後に操作Bが実行された回数Sを特定するとともに、操作Aが実行された全回数Tを特定する。そして、操作関連性発見手段103は、S/Tを求めることによって、操作Aを実行した後に操作Bを実行する確率を求める。
 以上のような処理を行うことによって、操作関連性発見手段103は、各操作ブロックの最初に行われ操作や各操作の前後関係を特定する。
 例えば、操作履歴記憶手段102が記憶する操作履歴情報に示される操作の種類として、操作A、操作B、操作C及び操作Dが存在している場合を考える。この場合、ある状況Sにおける操作a1から操作a2への操作遷移確率をP(S|a1→a2)と表現すると、103は、以下の式(1)に示すような操作遷移確率を、操作履歴記憶手段102が記憶する操作履歴情報に基づいて計算できる。
P(ユーザ1|操作A→操作B)=0.52
P(ユーザ1|操作A→操作C)=0.23
P(ユーザ1|操作A→操作D)=0.02
P(ユーザ1|操作B→操作A)=0.01
P(ユーザ1|操作B→操作C)=0.82
P(ユーザ1|操作B→操作D)=0.01
P(ユーザ1|操作C→操作A)=0.00
P(ユーザ1|操作C→操作B)=0.01
P(ユーザ1|操作C→操作D)=0.51
P(ユーザ1|操作D→操作A)=0.11
P(ユーザ1|操作D→操作B)=0.00
P(ユーザ1|操作D→操作C)=0.05   式(1)
 例えば、操作関連性発見手段103は、式(1)において、P(ユーザ1|操作A→操作B)を、(ユーザ1が操作Aを行った後に1分以内に操作Bを行った回数)÷(ユーザ1が操作Aを行った回数)を求めることによって計算できる。
 ここで、操作関連性発見手段103は、求めた操作遷移確率が一定の値以上であれば、操作間の関連性が高いと判断できる。この場合、例えば、非常に関連が大きいと判断するための閾値を0.5とする。すると、操作関連性発見手段103は、式(1)に示す例では、操作Aから操作Bに遷移する場合、操作Bから操作Cに遷移する場合、及び操作Cから操作Dに遷移する場合の3つの場合の操作遷移確率の値が0.5以上であるので、非常に関連が大きいと判断できる。なお、閾値0.5は一例であり、操作関連性発見手段103は、操作間の関連性が非常に大きいと判断する閾値の値として他の値(例えば、0.6や0.4)を予め設定して用いてもよい。
 また、操作関連性発見手段103は、操作間の関連性を複数レベルに場合分けして判定することもできる。例えば、操作関連性発見手段103は、操作間の関連性が非常に大きいレベルAであるか否かを判定するとともに、次のレベルとして操作間に多少関連があるレベルBであるか否かを判定することもできる。この場合、例えば、多少関連があると判断するための閾値を0.1とする。すると、操作関連性発見手段103は、式(1)に示す例では、操作Aから操作Cに遷移する場合と、操作Dから操作Aに遷移する場合についても、操作遷移確率の値が0.1以上であるので、多少関連があると判断できる。なお、閾値0.1は一例であり、操作関連性発見手段103は、操作間に多少関連性があると判断する閾値の値として他の値(例えば、0.2や0.05)を予め設定して用いてもよい。
 なお、操作関連性発見手段103は、操作関連性を求める方法として、このように閾値を絶対値として規定するのでなく、他の方法を用いて求めてもよい。例えば、操作関連性発見手段103は、求めた操作遷移確率を値の大きい順に並び変えたときに、値の大きい方から上位1割に入る操作遷移確率に対応する操作の関連性が高いと判断するような方法を用いてもよい。
 また、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作履歴情報に示される全ての操作について操作遷移確率を計算し、操作間の関連性を求めるのではなく、予め設定した状況Sに合致する操作についてのみ操作遷移確率を計算して関連性を求めるようにしてもよい。すなわち、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作履歴情報に示される操作のうち、予め設定された状況Sに合致する操作のみを絞り込み、絞り込んだ操作について操作遷移確率を求める。
 状況Sとして、例えば、操作が行われた時間帯や曜日、場所等の状況を予め設定して用いることができる。また、状況Sとして、操作者の年齢や性別、所属グループ、利用傾向パターン等の人物属性を予め設定して用いることができる。また、状況Sとして、最近の操作であるかどうかや、現在までの操作手順のような情報を予め設定して用いることもできる。
 例えば、状況Sとして、操作が行われた時間帯や曜日、場所等の状況を設定することによって、操作関連性発見手段103は、時間帯や曜日、場所等の状況が現在の状況と近い操作ほど関連性が高くなるように計算できる。例えば、現在の場所で行うことが多い操作手順である操作a→操作bがあるとする。この場合、操作関連性発見手段103は、通常の状況では操作aと操作bとの関連性(具体的には、操作遷移確率)を0.01と求めるのに対して、状況Sとして現在の場所を設定した場合には、その操作aと操作bとの関連性を0.50のように高い値となるように計算する。
 例えば、操作履歴記憶手段102が蓄積する操作履歴情報として、以下に示す10個の情報が蓄積されている場合を考える。
状況S:操作A→B
状況S:操作B→C
状況T:操作C→D
状況T:操作D→E
状況T:操作E→F
状況T:操作F→G
状況T:操作B→C
状況T:操作C→D
状況T:操作D→E
状況T:操作E→F
 上記に示す例では、操作関連性発見手段103は、状況を限定しなければ、操作Aと操作Bとの操作関連確率を、1/10=0.01と求める。一方、状況Sに限定した場合には、操作関連性発見手段103は、操作Aと操作Bとの操作関連確率を、1/2=0.50と求める。
 なお、状況Sとして時間帯や曜日、場所等の情報を用いる場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、操作が行われた時間帯や曜日、場所等を示す情報も記憶するようにしてもよい。そして、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する時間帯や曜日、場所等の状況に合致する操作履歴情報のみを抽出し、抽出した操作履歴情報に基づいて、操作遷移確率を求めるようにすればよい。
 なお、予め設定した状況Sを用いた操作遷移確率の算出方法は、本実施形態で示した方法に限られない。例えば、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する時間帯や曜日、場所等の状況に合致する操作履歴情報で示される操作間の操作遷移確率に対して重み付け計算(例えば、所定量の重み係数を乗算)するようにしてもよい。
 また、状況Sとして、操作者の年齢や性別、所属グループ、利用傾向パターン等の人物属性を設定することによって、操作関連性発見手段103は、操作者の利用傾向や人物属性が当該操作者と類似する操作者の操作ほど関連性が高くなるように計算できる。例えば、あるサークルCに所属する人物が行うことが多い操作手順である操作a→操作bがあるとする。この場合、操作関連性発見手段103は、通常の人物(サークルC以外の人物)では操作aと操作bとの関連性(具体的には、操作遷移確率)を0.01と求めるのに対して、状況SとしてサークルCを設定した場合には、その操作aと操作bとの関連性を0.50のように高い値となるように計算する。
 なお、状況Sとして年齢や性別、所属グループ、利用傾向パターン等の人物属性の情報を用いる場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、年齢や性別、所属グループ、利用傾向パターン等の人物属性を示す情報も記憶するようにしてもよい。そして、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する年齢や性別、所属グループ、利用傾向パターン等の人物属性の状況に合致する操作履歴情報のみを抽出し、抽出した操作履歴情報に基づいて、操作遷移確率を求めるようにすればよい。
 なお、予め設定した状況Sを用いた操作遷移確率の算出方法は、本実施形態で示した方法に限られない。例えば、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する年齢や性別、所属グループ、利用傾向パターン等の人物属性の状況に合致する操作履歴情報で示される操作間の操作遷移確率に対して重み付け計算(例えば、所定量の重み係数を乗算)するようにしてもよい。
 また、状況Sとして、最近の操作であるかどうかを設定することによって、操作関連性発見手段103は、最近の操作ほど関連性が高くなるように計算できる。例えば、最近行うことが多い操作手順である操作a→操作bがあるとする。この場合、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する操作履歴全体でみると操作aと操作bとの関連性(具体的には、操作遷移確率)を0.01と求めるのに対して、状況Sとして最近の操作であることを設定した場合には、その操作aと操作bとの関連性を0.50のように高い値となるように計算する。
 なお、状況Sとして最近の操作であるか否かを示す情報を用いる場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、最近の操作であるか否かを示す情報も記憶するようにしてもよい。そして、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する最近の操作であるか否かを示す状況に合致する操作履歴情報のみを抽出し、抽出した操作履歴情報に基づいて、操作遷移確率を求めるようにすればよい。
 なお、予め設定した状況Sを用いた操作遷移確率の算出方法は、本実施形態で示した方法に限られない。例えば、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する最近の操作であるか否かを示す状況に合致する操作履歴情報で示される操作間の操作遷移確率に対して重み付け計算(例えば、所定量の重み係数を乗算)するようにしてもよい。
 また、状況Sとして、現在までの操作手順を設定することによって、操作関連性発見手段103は、現在の操作と関連する操作ほど関連性が高くなるように計算できる。例えば、操作fを行った後に行うことが多い操作手順である操作a→操作bがあるとする。この場合、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する操作履歴全体でみると操作aと操作bとの関連性(具体的には、操作遷移確率)を0.01と求めるのに対して、状況Sとして直前操作が操作fであることを設定した場合には、その操作aと操作bとの関連性を0.50のように高い値となるように計算する。
 なお、状況Sとして現在までの操作手順を示す情報を用いる場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、現在までの操作手順を示す情報も記憶するようにしてもよい。そして、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する現在までの操作手順を示す状況に合致する操作履歴情報のみを抽出し、抽出した操作履歴情報に基づいて、操作遷移確率を求めるようにすればよい。
 なお、予め設定した状況Sを用いた操作遷移確率の算出方法は、本実施形態で示した方法に限られない。例えば、操作関連性発見手段103は、操作履歴記憶手段102が蓄積する情報のうち、予め設定する現在までの操作手順を示す状況に合致する操作履歴情報で示される操作間の操作遷移確率に対して重み付け計算(例えば、所定量の重み係数を乗算)するようにしてもよい。
 また、状況Sを設定する際に、操作履歴記憶手段102に操作履歴として蓄積されたデータ数が多い場合には多くの条件を状況Sとして設定するようにし、操作履歴として蓄積されたデータ数が少ない場合には少ない条件を状況Sとして設定するようにすればよい。そのようにすれば、比較的安定した操作間の関連性推定を行うことが可能である。
 なお、状況Sを規定(設定)して操作遷移確率を求めることは、後述する表示操作手順選択手段104が実行する機能内容と近い機能を実現することになる。そのため、状況Sを設定して操作遷移確率を求めるようにする場合には、後述する表示操作手順選択手段104を設けなくても、ほぼ同様の効果を得ることができる。また、逆に、表示操作手順選択手段104を備える場合には、操作関連性発見手段103は、状況Sを設定することなく、操作履歴記憶手段102が蓄積する全ての操作履歴情報に基づいて、操作間の操作遷移確率を計算し、操作間の関連性を求めるようにしてもよい。
 また、操作関連性発見手段103は、複数操作間の手順や関連性を発見する第2の方法として、キーワードの類似性判断に基づいて各操作間の関連性を求めることもできる。例えば、操作履歴記憶手段102が蓄積する複数の操作履歴情報に示される操作に対して、それぞれ以下のようなラベルが付加されているとする。
操作A:「検索式」テキストボックス
操作B:「検索」ボタン
操作C:「検索結果選択」チェックボックス
操作D:「結果概要表示」ボタン
 上記に示す例の場合、操作関連性発見手段103は、各操作に対応するラベルをテキスト解析することによって、操作Aと操作Bと操作Cとには、いずれも「検索」というキーワードが含まれていることを特定する。そして、操作関連性発見手段103は、操作Aと操作Bと操作Cとを関連のある操作であると推測することができる。さらに、操作関連性発見手段103は、操作Cと操作Dとには「結果」というキーワードが含まれており、操作Cと操作Dとを関連のある操作であると推測することができる。
 なお、上記に示す例のように、共通するキーワードが含まれている場合には比較的容易に類似性を判断できるが、意味が同じでも表現が異なるキーワードが含まれている場合には容易に類似性を判断できない。例えば、「検索」と「サーチ」のように内容的に近いだけで表面上異なるキーワードが含まれている場合には、操作関連性発見手段103は、キーワードマッチングを行っても操作間の類似性を判断できない。そのような場合、操作関連性発見手段103は、例えば、類似語を検索するための辞書を予め備えることによって、操作間の類似性を判断できるようにしてもよい。例えば、操作関連性発見手段103は、類似語辞書を用いて、各操作に対応するラベルの表現のうち「サーチ」や「search」のような派生表現を「検索」のような代表表現に変換する。そして、操作関連性発見手段103は、変換後の表現に基づいてキーワードのマッチングを行えば、操作間の類似性を判断することができる。
 表示操作手順選択手段104は、操作関連性発見手段103が求めた操作関連性のうちその場の状況に基づいて表示するにふさわしい操作手順や関連性(表示操作手順)を選択する。
 表示操作手順選択手段104は、表示操作手順を選択する第1の方法として、操作が行われた時間帯や曜日、場所等の状況が現在の状況と近い操作を優先的に選択する。例えば、表示操作手順選択手段104は、現時刻が平日に相当する場合に、ある操作は平日に実行する確率が著しく低いと判断した場合には、その操作に関連する操作手順を表示しないと判断できる。
 なお、時間帯や曜日、場所等の状況に基づいて判断する場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、操作が行われた時間帯や曜日、場所等を示す情報も記憶するようにしてもよい。そして、表示操作手順選択手段104は、操作関連性発見手段103が操作関連性を求めた操作のうち、操作履歴記憶手段102が蓄積する情報に基づいて、時間帯や曜日、場所等の状況に合致する操作関連性のみを選択するようにすればよい。
 また、表示操作手順選択手段104は、表示操作手順を選択する第2の方法として、操作者の利用傾向や人物属性が当該操作者と類似する操作者の操作を優先的に選択する。例えば、表示操作手順選択手段104は、ある操作が操作者自身がよく行う別のある操作を行う人が実行する確率が高いと判断した場合には、その操作に関連する操作手順を優先して選択すると判断できる。また、例えば、表示操作手順選択手段104は、ある操作が操作者自身が属するグループと同じ操作者が実行する確率が高いと判断した場合には、その操作に関連する操作手順を優先して選択すると判断できる。
 なお、操作者の利用傾向や人物属性等の状況に基づいて判断する場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、操作者の利用傾向や人物属性等を示す情報も記憶するようにしてもよい。そして、表示操作手順選択手段104は、操作関連性発見手段103が操作関連性を求めた操作のうち、操作履歴記憶手段102が蓄積する情報に基づいて、操作者の利用傾向や人物属性等の状況に合致する操作関連性のみを選択するようにすればよい。
 また、表示操作手順選択手段104は、表示操作手順を選択する第3の方法として、最近の操作を優先的に選択する。例えば、表示操作手順選択手段104は、ある操作手順が最近行われていないと判断した場合には、その操作は表示しないと判断できる。また、例えば、表示操作手順選択手段104は、前回の操作手順の関連性が低くても表示すると判断することもできる。
 なお、最近の操作の状況に基づいて判断する場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、最近の操作を示す情報も記憶するようにしてもよい。そして、表示操作手順選択手段104は、操作関連性発見手段103が操作関連性を求めた操作のうち、操作履歴記憶手段102が蓄積する情報に基づいて、最近の操作の状況に合致する操作関連性のみを選択するようにすればよい。
 また、表示操作手順選択手段104は、表示操作手順を選択する第4の方法として、現在の操作と関連する操作を優先的に選択する。例えば、表示操作手順選択手段104は、ここまで操作a→操作bの順に操作されたと判断した場合には、操作a→操作b→操作c→操作dのような「操作a→操作b」を含む操作手順を優先的に選択すると判断できる。
 なお、現在の操作と関連する操作の状況に基づいて判断する場合、操作履歴記憶手段102は、操作履歴情報として、例えば、操作内容の情報に対応付けて、現在の操作と関連する操作を示す情報も記憶するようにしてもよい。そして、表示操作手順選択手段104は、操作関連性発見手段103が操作関連性を求めた操作のうち、操作履歴記憶手段102が蓄積する情報に基づいて、現在の操作と関連する操作の状況に合致する操作関連性のみを選択するようにすればよい。
 また、表示操作手順選択手段104は、操作者自身や他人、操作者自身と傾向が近い人、操作者自身と同じグループに属する人等の操作履歴に応じて選択するようにしてもよい。例えば、表示操作手順選択手段104は、ある操作が操作者自身がよく行う別のある操作を行う人が実行する確率が高いと判断した場合には、その操作に関連する操作手順を優先して選択すると判断できる。
 なお、操作支援装置101のシステム構成上、表示操作手順選択手段104を設けなくてもよい。その場合、後述する操作手順表示手段105は、操作関連性発見手段103が求めた全ての操作関連性を表示装置121に表示させるようにすればよい。
 操作手順表示手段105は、表示操作手順選択手段104が選択した操作手順や操作関連性の情報を、サービスの操作画面や操作対象に付加して提示する。例えば、操作手順表示手段105は、表示装置121に、操作手順や操作関連性の情報を表示中の操作画面に付加して表示させる。
 本実施形態では、前述したように、操作関連性発見手段103が操作履歴記憶手段102に蓄積した各操作履歴情報に示される操作間の操作関連性を求める。そして、操作手順表示手段105がその操作関連性(表示操作手順選択手段104を備える場合には、さらに表示操作手順選択手段104によって選択された操作関連性)に基づいて表示装置121に表示させることによって、操作画面等に一連の操作推奨手順を表示させることができる。
 例えば、操作関連性発見手段103が、操作A→操作Bと、操作B→操作Cと、操作C→操作Dとについて、それぞれ操作遷移確率が0.5以上であり、関連性が非常に高いと判断したとする。そして、操作手順表示手段105は、その判断結果に基づいて、例えば、操作画面上の操作Aと操作Bとの間、操作Bと操作Cとの間、及び操作Cと操作Dとの間にそれぞれ矢印等を表示させる。すると、操作Aから操作B、操作C、操作Dに至る一連の操作手順が操作画面上に表示されることになる。
 なお、本実施形態では、操作関連性発見手段103が求めた操作間の操作関連性に基づいて操作手順表示手段105が表示制御を行うことによって、結果的に一連の操作手順が操作画面上に表示される場合を示しているが、操作関連性発見手段103が求めた操作間の操作関連性に基づいて、予め一連の操作手順を示す情報を生成するようにしてもよい。例えば、表示操作手順選択手段104(表示操作手順選択手段104を備えていない場合には、操作関連性発見手段103でもよい)は、操作関連性発見手段103が求めた操作関連性に基づいて、操作手順を示す情報を生成してもよい。
 例えば、操作関連性発見手段103が、操作A→操作Bと、操作B→操作Cと、操作C→操作Dとについて、それぞれ操作遷移確率が0.5以上であり、関連性が非常に高いと判断したとする。この場合、表示操作手順選択手段104(又は、操作関連性発見手段103)は、操作間の前後関係を辿ることによって、操作A→操作B→操作C→操作Dの一連の操作手順を特定する。そして、表示操作手順選択手段104(又は、操作関連性発見手段103)は、例えば、各操作に対して操作順を示す情報(例えば、通し番号)を付加することによって、操作手順を示す情報を生成する。そして、操作手順表示手段105は、表示操作手順選択手段104(又は、操作関連性発見手段103)によって付加されたと押し番号等の情報に従って、一連の操作手順を操作画面上に表示させる。
 なお、本実施形態では、過去の操作履歴情報に基づいて操作遷移確率が所定の閾値(例えば0.5)以上である操作間の関連性を特定することによって、最も適切と推定される操作手順を操作画面上に表示可能として、ユーザの操作を支援するのである。この場合に、過去の操作履歴情報に基づいた推定を行っていることから、必ずしも1つの操作手順のみに絞り込まれるとは限らず、結果的に複数の操作手順が推定される場合もありうる。この場合、以下に示す矢印等を用いた表示方法を用いれば、1つの操作画面上に複数表示を行えることから、操作画面上に複数の操作手順を表示するようにしてもよい。また、逆に、例えば、最も平均の操作遷移確率が高い1つの操作手順に絞り込んで表示するようにしてもよい。
 操作手順表示手段105は、操作手順や操作関連性を表現するための第1の方法として、操作画面上における関連する各操作対象の間の空間に、線分やカギ線(例えば、表示画面上で文字等を避けるように表示)等のリンク記号を表示させる。また、操作手順表示手段105は、例えば、破線や波線、多重線、矢印(有向線分や三角形等の方向の情報を含む記号を矢印という)等のリンク記号を、サービスの操作画面や操作対象に付加して表示させる。
 第1の方法を用いる場合、操作手順表示手段105は、操作関連性発見手段103が求めた操作遷移確率に基づいて、リンク記号の太さ又は濃さ、密度、色(色相、明度、彩度等)のいずれか1つを決定する。そして、操作手順表示手段105は、決定した太さや濃さ、密度、色でリンク記号を表示させることによって、一見して操作遷移確率の大きさを表現することもできる。例えば、リンク記号の濃さを操作遷移確率の値に比例して大きくなるようにように表示させると、関連の強い手順を目立たせて表示させることができ、関連の弱い手順も邪魔にならない程度に薄く表示させることができる。そのため、ユーザにとって操作手順が一見して把握しやすくなるようにすることができる。
 なお、図2に示す表示例では、関連性の高い操作間を太い矢印を用いて表示し、やか関連性の低い操作間を薄い矢印を用いて表示している。
 また、操作手順表示手段105は、操作手順や操作関連性を表現するための第2の方法として、同色の目印や、同形の目印、順番を表す数字、順番通りアニメーション移動する目印等の目印記号を、サービスの操作画面や操作対象に付加して表示させる。
 第2の方法を用いる場合、操作手順表示手段105は、リンク記号を表示させる場合と同様に、操作関連性発見手段103が求めた操作遷移確率に基づいて、目印記号の大きさ又は濃さ、密度、色(色相、明度、彩度等)のいずれか1つを決定する。そして、操作手順表示手段105は、決定した太さや密度、色で目印記号を表示させることによって、一見して操作遷移確率の大きさを表現することもできる。順番通りアニメーション表示させる場合には、例えば、各ステップの目印を0.5秒毎に表示させ、最後のステップの目印を表示させた後に3秒休止させる等のように表示させると、操作の始点と終点がわかりやすい。
 なお、図2に示す表示例では、操作間に順番を示す丸付き数字を表示させている。
 また、図2に示す矩形表示331のように、操作手順表示手段105は、同一グループのラジオボタン集合やチェックボックス集合等の操作対象集合を、複数ではなく1つの操作対象として、リンク記号や目印記号をそれぞれ表示させず、操作対象集合全体を示す矩形表示のみを表示させる。そのようにすることによって、リンク記号や目印記号が多くなりすぎず、わかりやすく表示することもできる。例えば、Webサービスを利用している場合等には、操作手順表示手段105は、HTMLのようなデータ構造に基づいて、表であるかどうかやグループ構造を自動的に判断することができる。そして、操作手順表示手段105は、表やグループであると判断できるものを1つにまとめてグルーピングすることで、情報量を失わずに表示をわかりやすくできる。
 なお、自動的に判断できない場合には、システム設計者やユーザが予めグルーピング構造を記述して設定してもよい。そして、操作手順表示手段105は、予め設定された設定情報に基づいて、表示画面上の操作対象をグルーピングしてもよい。
 また、操作手順表示手段105は、複数の画面やウィンドウにまたがる操作を行う場合には、複数の画面やウィンドウを並べて表示させ、その画面やウィンドウの間の空間や位置関係を計算に入れて全体を1つの画面とみなしてリンク記号や目印記号を表示させるようにしてもよい。そのようにすれば、一画面における操作のステップは短いものの、多くの画面にまたがって操作が行われるようなタスクにおいて、操作手順の一覧性を向上させることができる。
 また、常に図2に示すような操作手順を表示し続けるのでなく、例えば、操作者(ユーザ)が所定の操作を行った場合に表示又は非表示を切り替えるようにしてもよい。例えば、ユーザがCtrlキーとF1キーとを同時に押したときや、あるボタンをクリックしたとき等に、表示又は非表示を切り替えるようにしてもよい。そのようにすれば、操作手順の表示が邪魔になりにくいので望ましい。
 なお、実際の実装については、操作手順表示手段105は、例えば、ブラウザの操作手順を表示させる場合には、テキストボックスやボタン等のコンポーネントの位置をブラウザから取得(入力)する。そして、操作手順表示手段105は、その入力した位置に四角や楕円等の枠を重ねて表示させることができる。例えば、Firefoxのようなブラウザのアドオンを利用すれば、比較的容易に実装することができる。また、複数のウィンドウにまたがって表示する場合には、操作手順表示手段105は、ウィンドウのサイズやウィンドウの位置の情報を用いることによって、複数のウィンドウにまたがるリンク記号をつながっているように見せかけて表示させることができる。
 次に、動作について説明する。図4は、操作支援装置101による操作者の操作を支援するための処理例を示す流れ図である。操作支援装置101は、1人又は複数人の操作者がアプリケーション111等を用いて操作を行う毎に、その操作履歴情報を入力又は受信して随時操作履歴記憶手段102に記憶させる(ステップS101)。
 操作者は、ブラウザ等のアプリケーション111を用いて操作しているときに、操作支援機能を利用したい場合には、例えば、操作支援装置101を操作して、操作支援の指示操作を行う。すると、操作支援装置101は、操作者の操作に従って、操作支援の処理を開始する。なお、操作支援装置101は、操作者の指示操作の有無にかかわらず、常に操作支援の処理を行って操作画面上に操作手順を示す情報を表示するようにしてもよい。
 操作支援の処理を開始すると、まず、操作支援装置101の操作関連性発見手段103は、操作履歴記憶手段102が蓄積する各操作履歴情報に示される操作に基づいて、操作間の操作遷移確率を計算し、操作間の操作関連性を求める(ステップS102)。次いで、表示操作手順選択手段104は、操作関連性発見手段103が求めた操作関連性に基づいて、操作画面上に表示する表示対象とする操作関連性を選択する(ステップS103)。
 そして、操作手順表示手段105は、表示操作手順選択手段104が選択した操作関連性に基づいて、操作画面に上に各操作関連性を示す情報を表示させる(ステップS104)。例えば、操作手順表示手段105は、図2に示すような矢印や丸付き数字等の操作手順を示す情報を操作画面上に表示させる。
 以上に説明したように、本実施形態によれば、操作支援装置101は、操作履歴記憶手段102が蓄積する操作履歴情報に基づいて、操作画面において行われる可能性のある操作間の操作関連性を求める。また、操作支援装置101は、求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する。そのように制御することによって、単に次の操作を推定して提示するだけでなく、一連のまとまった操作手順を推定して操作者に対して提示することができる。従って、複雑な操作手順を有するようなアプリケーションやサービスにおいても、操作者が一見して画面全体における操作状況に応じた適切な操作手順を把握でき、複雑な操作手順を覚えなくてもガイドに従うだけでサービスを受けることができる。
実施形態2.
 次に、本発明の第2の実施形態を図面を参照して説明する。図5は、第2の実施形態における操作支援装置の構成の一例を示すブロック図である。図5に示すように、本実施形態では、操作支援装置101Aは、図1に示した構成要素のうち、表示操作手順選択手段104を含まない点で、第1の実施形態と異なる。すなわち、第1の実施形態でも説明したように、操作関連性発見手段103が状況Sに従って操作履歴情報を絞り込んで操作関連性を求めるように構成した場合には、必ずしも表示操作手順選択手段104を設ける必要はない。そこで、本実施形態では、表示操作手順選択手段104を設けずに操作支援装置101Aを実現する場合を説明する。
 なお、本実施形態において、第1の実施形態と同様の構成および処理をなす部分についてはその詳細な説明を省略し、主として第1の実施形態と異なる部分について説明する。
 操作関連性発見手段103は、各種操作画面におけるテキストボックス編集やチェックボックス選択、ボタン押下等の複数操作間の手順や関連性を求める機能を備える。本実施形態では、操作関連性発見手段103は、操作履歴記憶手段102が記憶する操作履歴情報を用いて、操作履歴として記憶する操作間の操作遷移確率等の計算を行うことにより、操作間の関連性(操作関連性)を発見する(求める)。ただし、本実施形態では、操作関連性発見手段103は、第1の実施形態で示した同様の処理に従って、状況Sに従って操作履歴情報を絞り込んで操作遷移確率を計算し、操作間の操作関連性を求める。
 操作手順表示手段105は、操作関連性発見手段103が求めた操作関連性に基づいて、表示操作手順の情報を、サービスの元来の操作画面や画面中の操作対象に付加して提示する機能を備える。例えば、操作手順表示手段105は、第1の実施形態と同様に、表示装置121に、表示中の操作画面において、複数操作に関する前後関係を示す矢印や操作順番を示す数字等を表示させることにより、表示操作手順を提示する。
 次に、動作について説明する。図6は、第2の実施形態における操作支援装置101Aによる操作者の操作を支援するための処理例を示す流れ図である。操作支援装置101は、第1の実施形態で示したステップS101と同様の処理に従って、1人又は複数人の操作者がアプリケーション111等を用いて操作を行う毎に、その操作履歴情報を入力又は受信して随時操作履歴記憶手段102に記憶させる(ステップS201)。
 操作者は、ブラウザ等のアプリケーション111を用いて操作しているときに、操作支援機能を利用したい場合には、例えば、操作支援装置101Aを操作して、操作支援の指示操作を行う。すると、操作支援装置101Aは、操作者の操作に従って、操作支援の処理を開始する。なお、操作支援装置101Aは、操作者の指示操作の有無にかかわらず、常に操作支援の処理を行って操作画面上に操作手順を示す情報を表示するようにしてもよい。
 操作支援の処理を開始すると、まず、操作支援装置101Aの操作関連性発見手段103は、操作履歴記憶手段102が蓄積する各操作履歴情報に示される操作に基づいて、状況Sに従って計算対象の操作を絞り込んで操作間の操作遷移確率を計算し、操作間の操作関連性を求める(ステップS202)。
 そして、操作手順表示手段105は、操作関連性発見手段103が求めた操作関連性に基づいて、操作画面に上に各操作関連性を示す情報を表示させる(ステップS203)。例えば、操作手順表示手段105は、図2と同様の表示態様で、矢印や丸付き数字等の操作手順を示す情報を操作画面上に表示させる。
 以上に説明したように、本実施形態によれば、操作支援装置101Aは、第1の実施形態と同様に、操作履歴記憶手段102が蓄積する操作履歴情報に基づいて、操作画面において行われる可能性のある操作間の操作関連性を求める。また、操作支援装置101Aは、求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する。そのように制御することによって、単に次の操作を推定して提示するだけでなく、一連のまとまった操作手順を推定して操作者に対して提示することができる。従って、複雑な操作手順を有するようなアプリケーションやサービスにおいても、操作者が一見して画面全体における操作状況に応じた適切な操作手順を把握でき、複雑な操作手順を覚えなくてもガイドに従うだけでサービスを受けることができる。
 また、本実施形態によれば、操作関連性発見手段103が状況Sに従って計算対象の操作を絞り込んで操作間の操作関連性を求めるので、操作関連性の算出負担を軽減することができる。また、操作関連性を求めた後に表示対象とする操作関連性を選択する処理を不要とし、操作支援装置101Aの処理負担を軽減することができる。
実施形態3.
 次に、本発明の第3の実施形態を図面を参照して説明する。本発明による操作支援方法は、1つの情報処理装置を用いて実現する場合に限らず、例えば、操作支援に関する情報を、インターネット等の通信ネットワークを介して配信するビジネスモデルにも適用可能である。
 図7は、本発明による操作支援システムの構成の一例を示すブロック図である。図7に示すように、本実施形態では、操作支援システムは、操作手順表示手段を有する操作者端末20と、操作履歴記憶手段や操作関連性発見手段を有する操作支援サーバ10とを含む。なお、操作支援サーバ10と操作者端末20とは、インターネット等の通信ネットワークを介して接続される。また、図7では、1つの操作者端末20を示しているが、操作支援システムは、複数の操作者端末20を含んでいてもよい。
 操作支援サーバ10は、操作支援のサービスを提供するサービス事業者が運営するサーバであり、具体的には、プログラムに従って動作するパーソナルコンピュータ等の情報処理装置によって実現される。図7に示すように、操作支援サーバ10は、操作履歴情報収集手段11、操作履歴記憶手段12、操作関連性発見手段13、表示操作手順選択手段14、及び操作支援情報送信手段15を含む。
 操作履歴情報収集手段11は、具体的には、プログラムに従って動作する情報処理装置のCPU及びネットワークインタフェース部によって実現される。操作履歴情報収集手段11は、通信ネットワークを介して、操作者端末20から操作履歴情報を受信する機能を備える。また、操作履歴情報収集手段11は、受信した操作履歴情報を操作履歴記憶手段12に記憶させる機能を備える。
 操作履歴記憶手段12は、具体的には、磁気ディスク装置や光ディスク装置等の記憶装置によって実現される。操作履歴記憶手段12は、1人又は複数人の操作者が行った操作内容を示す情報を操作履歴情報として保持(記憶)する。
 操作関連性発見手段13は、具体的には、プログラムに従って動作する情報処理装置のCPUによって実現される。操作関連性発見手段13は、各種操作画面におけるテキストボックス編集やチェックボックス選択、ボタン押下等の複数操作間の手順や関連性を求める機能を備える。本実施形態では、操作関連性発見手段13は、操作履歴記憶手段12が記憶する操作履歴情報を用いて、操作履歴として記憶する操作間の操作遷移確率等の計算を行うことにより、操作間の関連性(操作関連性)を発見する(求める)。
 表示操作手順選択手段14は、具体的には、プログラムに従って動作する情報処理装置のCPUによって実現される。表示操作手順選択手段14は、操作関連性発見手段13が求めた操作関連性のうち、その場の状況に基づいて表示するにふさわしい操作手順や関連性(表示操作手順)を選択する機能を備える。なお、第1の実施形態や第2の実施形態で説明したように、操作関連性発見手段13が状況Sに従って操作遷移確率を絞り込んで算出するように構成する場合には、操作支援サーバ10は、表示操作手順選択手段14を備えていなくてもよい。
 操作支援情報送信手段15は、具体的には、プログラムに従って動作する情報処理装置のCPU及びネットワークインタフェース部によって実現される。操作支援情報送信手段15は、表示操作手順選択手段14の選択結果を含む操作支援情報を生成し、通信ネットワークを介して操作者端末20に送信する機能を備える。
 操作者端末20は、ブラウザ等のアプリケーションが搭載され、操作者が使用する端末である。操作者端末20は、具体的には、プログラムに従って動作するパーソナルコンピュータ等の情報処理端末によって実現される。なお、操作者端末20は、携帯電話機やPDA等の端末によって実現されてもよい。図7に示すように、操作者端末20は、操作履歴情報送信手段21、操作支援情報受信手段22、操作手順表示手段23、及び表示装置24を含む。
 操作履歴情報送信手段21は、具体的には、プログラムに従って動作する情報処理端末のCPU及びネットワークインタフェース部によって実現される。操作履歴情報送信手段21は、操作者端末20の操作者によってアプリケーションを用いた操作が行われる毎に、操作履歴情報を生成し、通信ネットワークを介して操作支援サーバ10に送信する機能を備える。
 操作支援情報受信手段22は、具体的には、プログラムに従って動作する情報処理端末のCPU及びネットワークインタフェース部によって実現される。操作支援情報受信手段22は、操作支援サーバ10から、通信ネットワークを介して操作支援情報受信する機能を備える。
 操作手順表示手段23は、具体的には、プログラムに従って動作する情報処理端末のCPUによって実現される。操作支援情報受信手段22が受信した操作支援情報に基づいて、操作支援サーバ10によって選択された表示操作手順の情報を、サービスの元来の操作画面や画面中の操作対象に付加して提示する機能を備える。例えば、操作手順表示手段23は、表示装置24に、表示中の操作画面において、複数操作に関する前後関係を示す矢印や操作順番を示す数字等を表示させることにより、表示操作手順を提示する。
 次に、動作について説明する。図8は、操作支援システムによる操作者の操作を支援するための処理例を示す流れ図である。操作者端末20は、1人又は複数人の操作者がアプリケーション等を用いて操作を行う毎に、操作履歴情報を生成し、通信ネットワークを介して操作支援サーバ10に送信する(ステップS301)。また、操作支援サーバ10は、操作者端末20から操作履歴情報を受信する毎に、受信した操作履歴情報を随時操作履歴記憶手段12に記憶させる(ステップS302)。
 操作者は、ブラウザ等のアプリケーションを用いて操作しているときに、操作支援機能を利用したい場合には、例えば、操作者端末20を操作して、操作支援の指示操作を行う。すると、操作者端末20は、操作者の操作に従って、操作支援のサービス提供の要求を、通信ネットワークを介して操作支援サーバ10に送信する。すると、操作支援サーバ10は、操作支援のサービス提供の要求を受信したことに基づいて、操作支援の処理を開始する。
 操作支援の処理を開始すると、まず、操作支援サーバ10の操作関連性発見手段13は、操作履歴記憶手段12が蓄積する各操作履歴情報に示される操作に基づいて、操作間の操作遷移確率を計算し、操作間の操作関連性を求める(ステップS303)。次いで、表示操作手順選択手段14は、操作関連性発見手段13が求めた操作関連性に基づいて、操作画面上に表示する表示対象とする操作関連性を選択する(ステップS304)。
 そして、操作支援サーバ10の操作支援情報送信手段15は、表示操作手順選択手段14の選択結果を含む操作支援情報を生成し、通信ネットワークを介して操作者端末20に送信する(ステップS305)。
 操作者端末20の操作手順表示手段23は、操作支援情報を受信すると、操作支援サーバ10によって選択された操作関連性に基づいて、操作画面に上に各操作関連性を示す情報を表示させる(ステップS306)。例えば、操作手順表示手段23は、図2と同様の表示態様で、矢印や丸付き数字等の操作手順を示す情報を操作画面上に表示させる。
 以上に説明したように、本実施形態によれば、操作支援サーバ10は、第1の実施形態と同様に、操作履歴記憶手段12が蓄積する操作履歴情報に基づいて、操作画面において行われる可能性のある操作間の操作関連性を求める。また、操作者端末20は、求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する。そのように制御することによって、単に次の操作を推定して提示するだけでなく、一連のまとまった操作手順を推定して操作者に対して提示することができる。従って、複雑な操作手順を有するようなアプリケーションやサービスにおいても、操作者が一見して画面全体における操作状況に応じた適切な操作手順を把握でき、複雑な操作手順を覚えなくてもガイドに従うだけでサービスを受けることができる。
実施形態4.
 次に、本発明の第4の実施形態を図面を参照して説明する。例えば、第1の実施形態~第3の実施形態に示した操作支援装置や操作支援システムを用いて、AV操作用リモートコントローラ等の端末をディスプレイ眼鏡を通して見た時に、操作手順が重畳されるようにしてもよい。この場合、例えば、ディスプレイ眼鏡にカメラを搭載し、カメラで撮影した情報に基づいて、リモートコントローラのボタンの場所に合わせてリンク記号や目印記号をディスプレイ眼鏡に重畳表示するようにしてもよい。
 図9は、本発明による操作支援方法を利用可能なディスプレイ眼鏡の構成の一例を示すブロック図である。図9に示すように、ディスプレイ眼鏡は、操作関連性記憶手段31、操作手順表示手段32、及び表示装置33を含む。
 操作関連性記憶手段31は、具体的には、メモリ等の記憶装置によって実現される。操作関連性記憶手段31は、例えば、予め操作支援装置や操作支援システムを用いて求められた操作手順や操作関連性を示す情報を記憶する。
 操作手順表示手段32は、具体的には、ディスプレイ眼鏡が搭載する制御部によって実現される。操作手順表示手段32は、操作関連性記憶手段31が予め記憶する情報に基づいて、表示操作手順の情報を、リモートコントローラの操作部の位置にあわせて重畳表示する機能を備える。例えば、操作手順表示手段32は、ディスプレイ眼鏡が搭載する表示装置33に、複数操作に関する前後関係を示す矢印や操作順番を示す数字等を表示させることにより、表示操作手順を提示する。
 以上に説明したように、本実施形態によれば、AV操作用リモートコントローラ等の端末を用いる場合であっても、予め求めた操作関連性を示す情報を、ディスプレイ眼鏡を利用して、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する。従って、AV操作用リモートコントローラ等の端末を用いる場合であっても、操作者が一見して画面全体における操作状況に応じた適切な操作手順を把握でき、複雑な操作手順を覚えなくてもガイドに従うだけでサービスを受けることができる。
 次に、本発明による操作支援装置の最小構成について説明する。図10は、操作支援装置の最小の構成例を示すブロック図である。図10に示すように、操作支援装置は、最小の構成要素として、操作関連性発見手段103と、操作手順表示手段105とを含む。
 図10に示す最小構成の操作支援装置において、操作関連性発見手段103は、操作画面において行われる可能性のある操作間の操作関連性を求める機能を備える。また、操作手順表示手段105は、操作関連性発見手段103が求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する機能を備える。
 図10に示す最小構成の操作支援装置によれば、単に次の操作を推定して提示するだけでなく、一連のまとまった操作手順を推定して操作者に対して提示することができる。従って、複雑な操作手順を有するようなアプリケーションやサービスにおいても、操作者が一見して画面全体における操作状況に応じた適切な操作手順を把握でき、複雑な操作手順を覚えなくてもガイドに従うだけでサービスを受けることができる。
 なお、本実施形態では、以下の(1)~(28)に示すような操作支援方法、操作支援システム、及び操作支援装置の特徴的構成が示されている。
(1)操作支援方法は、操作画面における操作を支援する操作支援方法であって、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出ステップと、操作関連性算出ステップで求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示ステップとを含むことを特徴とする。
(2)操作支援方法は、操作関連性算出ステップで、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求めるように構成されていてもよい。
(3)操作支援方法は、操作関連性算出ステップで、予め設定した状況(例えば、状況S)に合致する操作に対して所定の重み付けを行うことによって、操作間の操作関連性を計算するように構成されていてもよい。
(4)操作支援方法は、操作関連性算出ステップで、予め設定した時間帯、曜日又は場所の状況が現在の状況と近い操作ほど関連性が高くなるように、操作間の操作関連性を計算するように構成されていてもよい。
(5)操作支援方法は、操作関連性算出ステップで、予め設定した操作者の利用傾向又は人物属性が現在操作中の操作者と類似する操作ほど関連性が高くなるように、操作間の操作関連性を計算するように構成されていてもよい。
(6)操作支援方法は、操作関連性算出ステップで、予め設定した最近の操作ほど関連性が高くなるように、操作間の操作関連性を計算するように構成されていてもよい。
(7)操作支援方法は、操作関連性算出ステップで、予め設定した現在の操作と関連する操作ほど関連性が高くなるように、操作間の操作関連性を計算するように構成されていてもよい。
(8)操作支援方法は、操作関連性算出ステップで、操作に対応したキーワードの類似度を計算することによって、操作間の操作関連性を求めるように構成されていてもよい。
(9)操作支援方法は、操作画面における操作を支援する操作支援方法であって、予め求められた操作間の操作関連性を示す情報を操作関連性記憶手段(例えば、操作関連性記憶手段31によって実現される)に記憶する操作関連性記憶ステップと、操作関連性記憶手段に記憶した操作関連性示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示することによって、操作手順を表示する操作手順表示ステップとを含むように構成されていてもよい。
(10)操作支援方法は、操作手順表示ステップで、操作関連性算出ステップで求めた操作関連性で示される操作対象の間に、線分、カギ線、破線、波線、多重線又は矢印によるリンク記号を、操作画面に付加して表示制御するように構成されていてもよい。
(11)操作支援方法は、操作手順表示ステップで、操作関連性算出ステップで求めた操作関連性で示される操作対象に対して、同色の目印、同形の目印、操作順を示す数字、又は所定の順序に従ってアニメーション移動する目印による目印記号を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御するように構成されていてもよい。
(12)操作支援方法は、操作関連性算出ステップで、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求め、操作手順表示ステップで、操作遷移確率に基づいて、リンク記号の太さ、濃さ、密度、色、色相、明度、又は彩度のいずれか1つを決定し、決定した態様でリンク記号を表示制御するように構成されていてもよい。
(13)操作支援方法は、操作関連性算出ステップで、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求め、操作手順表示ステップで、操作遷移確率に基づいて、目印記号の大きさ、濃さ、密度、色、色相、明度、又は彩度のいずれか1つを決定し、決定した態様で目印記号を表示制御するように構成されていてもよい。
(14)操作支援方法は、操作手順表示ステップで、操作画面上に表示される同一グループの操作対象集合を、1つの操作対象としてグルーピングしてリンク記号又は目印記号を表示制御するように構成されていてもよい。
(15)操作支援方法は、操作手順表示ステップで、複数の操作画面にまたがって行われる操作に対して、当該複数の操作画面を並べて表示制御し、当該複数の操作画面全体を1つの画面とみなしてリンク記号又は目印記号を表示制御するように構成されていてもよい。
(16)操作支援方法は、操作関連性算出ステップで求めた操作関連性のうち、現在操作中の状況に応じた操作関連性を選択する操作関連性選択ステップを含み、操作手順表示ステップで、操作関連性選択ステップで選択した操作関連性を示す情報を優先して付加して表示制御するように構成されていてもよい。
(17)操作支援方法は、操作関連性選択ステップで、予め設定した時間帯、曜日又は場所の状況が現在の状況と近い操作を優先的して操作関連性を選択するように構成されていてもよい。
(18)操作支援方法は、操作関連性選択ステップで、予め設定した操作者の利用傾向又は人物属性が現在操作中の操作者と類似する操作を優先的して操作関連性を選択するように構成されていてもよい。
(19)操作支援方法は、操作関連性選択ステップで、予め設定した最近の操作を優先的して操作関連性を選択するように構成されていてもよい。
(20)操作支援方法は、操作関連性選択ステップで、予め設定した現在の操作と関連する操作を優先的して操作関連性を選択するように構成されていてもよい。
(21)操作支援システムは、操作画面における操作を支援する操作支援システムであって、操作者端末(例えば、操作者端末20)と、操作画面における操作を支援する処理を行う操作支援サーバ(例えば、操作支援サーバ10)とを備え、操作支援サーバは、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出手段(例えば、操作関連性発見手段13によって実現される)と、操作関連性算出手段が求めた操作関連性を示す情報を、通信ネットワークを介して操作者端末に送信する操作関連性送信手段(例えば、操作支援情報送信手段15によって実現される)とを含み、操作者端末は、操作支援サーバから受信した操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示手段(例えば、操作手順表示手段23によって実現される)を含むことを特徴とする。
(22)操作支援システムにおいて、操作関連性算出手段は、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求めるように構成されていてもよい。
(23)操作支援装置は、操作画面における操作を支援する操作支援装置であって、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出手段(例えば、操作関連性発見手段103によって実現される)と、操作関連性算出手段が求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示手段(例えば、操作手順表示手段105によって実現される)とを備えたことを特徴とする。
(24)操作支援装置において、操作関連性算出手段は、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求めるように構成されていてもよい。
(25)操作支援システムは、操作画面における操作を支援する操作支援システムであって、操作者端末と、操作画面における操作を支援する処理を行う操作支援サーバとを備え、操作支援サーバは、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出部と、操作関連性算出部が求めた操作関連性を示す情報を、通信ネットワークを介して操作者端末に送信する操作関連性送信部とを含み、操作者端末は、操作支援サーバから受信した操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示部を含むように構成されていてもよい。
(26)操作支援システムにおいて、操作関連性算出部は、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求めるように構成されていてもよい。
(27)操作支援装置は、操作画面における操作を支援する操作支援装置であって、操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出部と、操作関連性算出部が求めた操作関連性を示す情報を、操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示部とを備えるように構成されていてもよい。
(28)操作支援装置において、操作関連性算出部は、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求めるように構成されていてもよい。
 以上、実施形態及び実施例を参照して本願発明を説明したが、本願発明は上記実施形態および実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
 この出願は、2008年12月12日に出願された日本特許出願2008-317585を基礎とする優先権を主張し、その開示の全てをここに取り込む。
 本発明は、パーソナルコンピュータや、携帯端末、カーナビゲーション端末、デジタル家電製品、ATMに適用できる。
101,101A 操作支援装置
102 操作履歴記憶手段
103 操作関連性発見手段
104 表示操作手順選択手段
105 操作手順表示手段
111 アプリケーション
121 表示装置
10 操作支援サーバ
11 操作履歴情報収集手段11
12 操作履歴記憶手段
13 操作関連性発見手段
14 表示操作手順選択手段
15 操作支援情報送信手段
20 操作者端末
21 操作履歴情報送信手段
22 操作支援情報受信手段
23 操作手順表示手段
24 表示装置
31 操作関連性記憶手段
32 操作手順表示手段
33 表示装置

Claims (44)

  1.  操作画面における操作を支援する操作支援方法であって、
     前記操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出ステップと、
     前記操作関連性算出ステップで求めた前記操作関連性を示す情報を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示ステップとを含む
     ことを特徴とする操作支援方法。
  2.  前記操作関連性算出ステップで、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求める
     請求項1記載の操作支援方法。
  3.  前記操作関連性算出ステップで、予め設定した状況に合致する操作に対して所定の重み付けを行うことによって、操作間の操作関連性を計算する
     請求項1又は請求項2記載の操作支援方法。
  4.  前記操作関連性算出ステップで、予め設定した時間帯、曜日又は場所の状況が現在の状況と近い操作ほど関連性が高くなるように、操作間の操作関連性を計算する
     請求項3記載の操作支援方法。
  5.  前記操作関連性算出ステップで、予め設定した操作者の利用傾向又は人物属性が現在操作中の操作者と類似する操作ほど関連性が高くなるように、操作間の操作関連性を計算する
     請求項3記載の操作支援方法。
  6.  前記操作関連性算出ステップで、予め設定した最近の操作ほど関連性が高くなるように、操作間の操作関連性を計算する
     請求項3記載の操作支援方法。
  7.  前記操作関連性算出ステップで、予め設定した現在の操作と関連する操作ほど関連性が高くなるように、操作間の操作関連性を計算する
     請求項3記載の操作支援方法。
  8.  前記操作関連性算出ステップで、操作に対応したキーワードの類似度を計算することによって、操作間の操作関連性を求める
     請求項1記載の操作支援方法。
  9.  操作画面における操作を支援する操作支援方法であって、
     予め求められた操作間の操作関連性を示す情報を操作関連性記憶手段に記憶する操作関連性記憶ステップと、
     前記操作関連性記憶手段に記憶した前記操作関連性示す情報を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示することによって、操作手順を表示する操作手順表示ステップとを含む
     ことを特徴とする操作支援方法。
  10.  前記操作手順表示ステップで、前記操作関連性算出ステップで求めた前記操作関連性で示される操作対象の間に、線分、カギ線、破線、波線、多重線又は矢印によるリンク記号を、前記操作画面に付加して表示制御する
     請求項1から請求項9のうちのいずれか1項に記載の操作支援方法。
  11.  前記操作手順表示ステップで、前記操作関連性算出ステップで求めた前記操作関連性で示される操作対象に対して、同色の目印、同形の目印、操作順を示す数字、又は所定の順序に従ってアニメーション移動する目印による目印記号を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示制御する
     請求項1から請求項9のうちのいずれか1項に記載の操作支援方法。
  12.  前記操作関連性算出ステップで、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求め、
     前記操作手順表示ステップで、前記操作遷移確率に基づいて、前記リンク記号の太さ、濃さ、密度、色、色相、明度、又は彩度のいずれか1つを決定し、決定した態様で前記リンク記号を表示制御する
     請求項10記載の操作支援方法。
  13.  前記操作関連性算出ステップで、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求め、
     前記操作手順表示ステップで、前記操作遷移確率に基づいて、前記目印記号の大きさ、濃さ、密度、色、色相、明度、又は彩度のいずれか1つを決定し、決定した態様で前記目印記号を表示制御する
     請求項11記載の操作支援方法。
  14.  前記操作手順表示ステップで、前記操作画面上に表示される同一グループの操作対象集合を、1つの操作対象としてグルーピングして前記リンク記号又は前記目印記号を表示制御する
     請求項10から請求項13のうちのいずれか1項に記載の操作支援方法。
  15.  前記操作手順表示ステップで、複数の操作画面にまたがって行われる操作に対して、当該複数の操作画面を並べて表示制御し、当該複数の操作画面全体を1つの画面とみなして前記リンク記号又は前記目印記号を表示制御する
     請求項10から請求項14のうちのいずれか1項に記載の操作支援方法。
  16.  前記操作関連性算出ステップで求めた前記操作関連性のうち、現在操作中の状況に応じた操作関連性を選択する操作関連性選択ステップを含み、
     前記操作手順表示ステップで、前記操作関連性選択ステップで選択した操作関連性を示す情報を優先して付加して表示制御する
     請求項1から請求項15のうちのいずれか1項に記載の操作支援方法。
  17.  前記操作関連性選択ステップで、予め設定した時間帯、曜日又は場所の状況が現在の状況と近い操作を優先的して操作関連性を選択する
     請求項16記載の操作支援方法。
  18.  前記操作関連性選択ステップで、予め設定した操作者の利用傾向又は人物属性が現在操作中の操作者と類似する操作を優先的して操作関連性を選択する
     請求項16記載の操作支援方法。
  19.  前記操作関連性選択ステップで、予め設定した最近の操作を優先的して操作関連性を選択する
     請求項16記載の操作支援方法。
  20.  前記操作関連性選択ステップで、予め設定した現在の操作と関連する操作を優先的して操作関連性を選択する
     請求項16記載の操作支援方法。
  21.  操作画面における操作を支援する操作支援システムであって、
     操作者端末と、
     前記操作画面における操作を支援する処理を行う操作支援サーバとを備え、
     前記操作支援サーバは、
     前記操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出手段と、
     前記操作関連性算出手段が求めた前記操作関連性を示す情報を、通信ネットワークを介して前記操作者端末に送信する操作関連性送信手段とを含み、
     前記操作者端末は、
     前記操作支援サーバから受信した前記操作関連性を示す情報を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示手段を含む
     ことを特徴とする操作支援システム。
  22.  前記操作関連性算出手段は、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求める
     請求項21記載の操作支援システム。
  23.  操作画面における操作を支援する操作支援装置であって、
     前記操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出手段と、
     前記操作関連性算出手段が求めた前記操作関連性を示す情報を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示手段とを備えた
     ことを特徴とする操作支援装置。
  24.  前記操作関連性算出手段は、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求める
     請求項23記載の操作支援装置。
  25.  操作画面における操作を支援するための操作支援プログラムであって、
     コンピュータに、
     前記操作画面において行われる可能性のある操作間の操作関連性を求める操作関連性算出処理と、
     前記操作関連性算出処理で求めた前記操作関連性を示す情報を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示制御することによって、操作手順を表示制御する操作手順表示処理とを
     実行させるための操作支援プログラム。
  26.  コンピュータに、
     前記操作関連性算出処理で、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求める処理を実行させる
     請求項25記載の操作支援プログラム。
  27.  コンピュータに、
     前記操作関連性算出処理で、予め設定した状況に合致する操作に対して所定の重み付けを行うことによって、操作間の操作関連性を計算する処理を実行させる
     請求項25又は請求項26記載の操作支援プログラム。
  28.  コンピュータに、
     前記操作関連性算出処理で、予め設定した時間帯、曜日又は場所の状況が現在の状況と近い操作ほど関連性が高くなるように、操作間の操作関連性を計算する処理を実行させる
     請求項27記載の操作支援プログラム。
  29.  コンピュータに、
     前記操作関連性算出処理で、予め設定した操作者の利用傾向又は人物属性が現在操作中の操作者と類似する操作ほど関連性が高くなるように、操作間の操作関連性を計算する処理を実行させる
     請求項27記載の操作支援プログラム。
  30.  コンピュータに、
     前記操作関連性算出処理で、予め設定した最近の操作ほど関連性が高くなるように、操作間の操作関連性を計算する処理を実行させる
     請求項27記載の操作支援プログラム。
  31.  コンピュータに、
     前記操作関連性算出処理で、予め設定した現在の操作と関連する操作ほど関連性が高くなるように、操作間の操作関連性を計算する処理を実行させる
     請求項27記載の操作支援プログラム。
  32.  コンピュータに、
     前記操作関連性算出処理で、操作に対応したキーワードの類似度を計算することによって、操作間の操作関連性を求める処理を実行させる
     請求項25記載の操作支援プログラム。
  33.  操作画面における操作を支援するための操作支援プログラムであって、
     予め求められた操作間の操作関連性を示す情報を記憶する操作関連性記憶手段を備えたコンピュータに、
     前記操作関連性記憶手段に記憶した前記操作関連性示す情報を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示することによって、操作手順を表示する操作手順表示処理を
     実行させるための操作支援プログラム。
  34.  コンピュータに、
     前記操作手順表示処理で、前記操作関連性算出処理で求めた前記操作関連性で示される操作対象の間に、線分、カギ線、破線、波線、多重線又は矢印によるリンク記号を、前記操作画面に付加して表示制御する処理を実行させる
     請求項25から請求33のうちのいずれか1項に記載の操作支援プログラム。
  35.  コンピュータに、
     前記操作手順表示処理で、前記操作関連性算出処理で求めた前記操作関連性で示される操作対象に対して、同色の目印、同形の目印、操作順を示す数字、又は所定の順序に従ってアニメーション移動する目印による目印記号を、前記操作画面又は当該操作画面に表示される操作対象に付加して表示制御する処理を実行させる
     請求項25から請求項33のうちのいずれか1項に記載の操作支援プログラム。
  36.  コンピュータに、
     前記操作関連性算出処理で、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求める処理を実行させ、
     前記操作手順表示処理で、前記操作遷移確率に基づいて、前記リンク記号の太さ、濃さ、密度、色、色相、明度、又は彩度のいずれか1つを決定し、決定した態様で前記リンク記号を表示制御する処理を実行させる
     請求項34記載の操作支援プログラム。
  37.  コンピュータに、
     前記操作関連性算出処理で、操作者が行った操作の履歴を示す操作履歴情報を用いて操作遷移確率を計算することによって、操作間の操作関連性を求める処理を実行させ、
     前記操作手順表示処理で、前記操作遷移確率に基づいて、前記目印記号の大きさ、濃さ、密度、色、色相、明度、又は彩度のいずれか1つを決定し、決定した態様で前記目印記号を表示制御する処理を実行させる
     請求項35記載の操作支援プログラム。
  38.  コンピュータに、
     前記操作手順表示処理で、前記操作画面上に表示される同一グループの操作対象集合を、1つの操作対象としてグルーピングして前記リンク記号又は前記目印記号を表示制御する処理を実行させる
     請求項34から請求項37のうちのいずれか1項に記載の操作支援プログラム。
  39.  コンピュータに、
     前記操作手順表示処理で、複数の操作画面にまたがって行われる操作に対して、当該複数の操作画面を並べて表示制御し、当該複数の操作画面全体を1つの画面とみなして前記リンク記号又は前記目印記号を表示制御する処理を実行させる
     請求項34から請求項38のうちのいずれか1項に記載の操作支援プログラム。
  40.  コンピュータに、
     前記操作関連性算出処理で求めた前記操作関連性のうち、現在操作中の状況に応じた操作関連性を選択する操作関連性選択処理を実行させ、
     前記操作手順表示処理で、前記操作関連性選択処理で選択した操作関連性を示す情報を優先して付加して表示制御する処理を実行させる
     請求項25から請求項39のうちのいずれか1項に記載の操作支援プログラム。
  41.  コンピュータに、
     前記操作関連性選択処理で、予め設定した時間帯、曜日又は場所の状況が現在の状況と近い操作を優先的して操作関連性を選択する処理を実行させる
     請求項40記載の操作支援プログラム。
  42.  コンピュータに、
     前記操作関連性選択処理で、予め設定した操作者の利用傾向又は人物属性が現在操作中の操作者と類似する操作を優先的して操作関連性を選択する処理を実行させる
     請求項40記載の操作支援プログラム。
  43.  コンピュータに、
     前記操作関連性選択処理で、予め設定した最近の操作を優先的して操作関連性を選択する処理を実行させる
     請求項40記載の操作支援プログラム。
  44.  コンピュータに、
     前記操作関連性選択処理で、予め設定した現在の操作と関連する操作を優先的して操作関連性を選択する処理を実行させる
     請求項40記載の操作支援プログラム。
PCT/JP2009/006790 2008-12-12 2009-12-11 操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラム WO2010067618A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010542035A JP5472118B2 (ja) 2008-12-12 2009-12-11 操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008-317585 2008-12-12
JP2008317585 2008-12-12

Publications (1)

Publication Number Publication Date
WO2010067618A1 true WO2010067618A1 (ja) 2010-06-17

Family

ID=42242610

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/006790 WO2010067618A1 (ja) 2008-12-12 2009-12-11 操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラム

Country Status (2)

Country Link
JP (1) JP5472118B2 (ja)
WO (1) WO2010067618A1 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010191483A (ja) * 2009-02-13 2010-09-02 Nec Corp 操作支援装置、操作支援方法、及びプログラム
JP2012008770A (ja) * 2010-06-24 2012-01-12 Fujitsu Ltd 情報処理装置および情報処理方法
JP2013246471A (ja) * 2012-05-23 2013-12-09 Denso Corp 携帯機器用操作反力付与システム
JP2014041546A (ja) * 2012-08-23 2014-03-06 Omron Corp 操作補助システム、当該システムに備えられたサーバーおよび電子機器、並びに、モジュール、プログラム
JP2014232377A (ja) * 2013-05-28 2014-12-11 株式会社エヌ・ティ・ティ・データ 操作支援装置、操作支援方法、及びプログラム
CN110221733A (zh) * 2018-03-01 2019-09-10 阿里巴巴集团控股有限公司 展示方法及装置
JP2020009100A (ja) * 2018-07-06 2020-01-16 富士ゼロックス株式会社 情報処理装置、端末装置、情報処理システム、及びプログラム
US10546000B2 (en) 2017-07-03 2020-01-28 Fanuc Corporation Information processing apparatus and information processing system
EP2993831B1 (de) * 2014-09-03 2020-02-12 BSH Hausgeräte GmbH Verfahren zur ermittlung und anzeige von zubehör und dienstleistungen für vernetzte hausgeräte

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003271278A (ja) * 2002-03-15 2003-09-26 Hitachi Ltd ネットワーク上で提供されるサービス表示方法
JP2005032239A (ja) * 2003-06-19 2005-02-03 Kyocera Mita Corp タッチパネル式の設定操作部の表示制御装置および電子機器
JP2006155164A (ja) * 2004-11-29 2006-06-15 Canon Inc 操作誘導方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003271278A (ja) * 2002-03-15 2003-09-26 Hitachi Ltd ネットワーク上で提供されるサービス表示方法
JP2005032239A (ja) * 2003-06-19 2005-02-03 Kyocera Mita Corp タッチパネル式の設定操作部の表示制御装置および電子機器
JP2006155164A (ja) * 2004-11-29 2006-06-15 Canon Inc 操作誘導方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010191483A (ja) * 2009-02-13 2010-09-02 Nec Corp 操作支援装置、操作支援方法、及びプログラム
JP2012008770A (ja) * 2010-06-24 2012-01-12 Fujitsu Ltd 情報処理装置および情報処理方法
JP2013246471A (ja) * 2012-05-23 2013-12-09 Denso Corp 携帯機器用操作反力付与システム
JP2014041546A (ja) * 2012-08-23 2014-03-06 Omron Corp 操作補助システム、当該システムに備えられたサーバーおよび電子機器、並びに、モジュール、プログラム
JP2014232377A (ja) * 2013-05-28 2014-12-11 株式会社エヌ・ティ・ティ・データ 操作支援装置、操作支援方法、及びプログラム
EP2993831B1 (de) * 2014-09-03 2020-02-12 BSH Hausgeräte GmbH Verfahren zur ermittlung und anzeige von zubehör und dienstleistungen für vernetzte hausgeräte
US10546000B2 (en) 2017-07-03 2020-01-28 Fanuc Corporation Information processing apparatus and information processing system
CN110221733A (zh) * 2018-03-01 2019-09-10 阿里巴巴集团控股有限公司 展示方法及装置
JP2020009100A (ja) * 2018-07-06 2020-01-16 富士ゼロックス株式会社 情報処理装置、端末装置、情報処理システム、及びプログラム

Also Published As

Publication number Publication date
JP5472118B2 (ja) 2014-04-16
JPWO2010067618A1 (ja) 2012-05-17

Similar Documents

Publication Publication Date Title
JP5472118B2 (ja) 操作支援方法、操作支援システム、操作支援装置、及び操作支援プログラム
KR101065644B1 (ko) 정보 피드들을 브라우징하기 위한 방법 및 디바이스
US7761781B2 (en) Web browsing method and system, and recording medium thereof
JP4536638B2 (ja) 表示情報選択装置及び方法、プログラム並びに記録媒体
US10680906B2 (en) Information management method, control system, and method for controlling display device
US9497313B2 (en) User interface generation apparatus
CN105653134B (zh) 应用切换方法及其系统
JP6640893B2 (ja) 文字を入力する方法及び装置
US20110125700A1 (en) User model processing device
KR20170000329A (ko) 콘텍스트 기반 탭 관리를 위한 방법 및 전자 장치
EP3853733A1 (en) Proactive notification of relevant feature suggestions based on contextual analysis
JP2010176195A (ja) ウェブ・アプリケーション内のコンポーネントの接続先候補を提示するための方法、並びにそのコンピュータ・プログラム及びコンピュータ・システム
US20110145695A1 (en) Web page conversion system
US10126918B2 (en) Customized guided workflow element arrangement
CN109857787B (zh) 一种展示方法及终端
CN112083854A (zh) 应用程序的运行方法及装置
JP4717098B2 (ja) 表示操作装置
CN112286611B (zh) 图标显示方法、装置和电子设备
JP5437325B2 (ja) 情報処理装置、システム、方法及びプログラム
CN108920266B (zh) 程序切换方法、智能终端及计算机可读存储介质
CN113986083A (zh) 文件处理的方法和电子设备
CN113253883A (zh) 应用界面显示方法、装置和电子设备
CN112416212A (zh) 程序访问方法、装置、电子设备和可读存储介质
JP4655779B2 (ja) 携帯情報端末機
CN113626709B (zh) 一种基于热度的内容推荐方法及服务器

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09831724

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2010542035

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09831724

Country of ref document: EP

Kind code of ref document: A1