WO2020189030A1 - 情報生成装置、及び制御システム - Google Patents
情報生成装置、及び制御システム Download PDFInfo
- Publication number
- WO2020189030A1 WO2020189030A1 PCT/JP2020/003059 JP2020003059W WO2020189030A1 WO 2020189030 A1 WO2020189030 A1 WO 2020189030A1 JP 2020003059 W JP2020003059 W JP 2020003059W WO 2020189030 A1 WO2020189030 A1 WO 2020189030A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- screen
- user
- statistical
- software
- unit
- Prior art date
Links
- 238000012545 processing Methods 0.000 claims abstract description 110
- 230000010365 information processing Effects 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 claims description 4
- 230000007717 exclusion Effects 0.000 description 95
- 238000005401 electroluminescence Methods 0.000 description 43
- 238000000034 method Methods 0.000 description 43
- 230000006870 function Effects 0.000 description 23
- 230000008569 process Effects 0.000 description 23
- 238000004891 communication Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 17
- 239000000203 mixture Substances 0.000 description 11
- 230000000694 effects Effects 0.000 description 7
- 239000012141 concentrate Substances 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000011664 signaling Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 230000001174 ascending effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000006249 magnetic particle Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/453—Help systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0613—The adjustment depending on the type of the information to be displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
Definitions
- the present invention relates to an information generator and a control system.
- a service that presents auxiliary information that assists a user's operation based on a user's operation history in a user device has become widespread.
- the user's operation includes a user's input operation for inputting a character string for an item on the screen displayed on the display device, and a user's selection operation for selecting one of a plurality of items on the screen. Is done.
- Patent Document 1 discloses that when a user's operation pattern is analyzed and a confused state is determined, auxiliary information on the operation method is provided.
- the information generator sets the first statistical value of the display time of the screen displayed on the display device for each type of screen displayed on the display device.
- the first statistical processing unit that generates a plurality of first statistical values corresponding to a plurality of types of screens by calculation, and the screen of the type among the plurality of first statistical values for each type of the screen.
- the first determination unit that determines whether the user's consciousness is concentrated on the screen of the type corresponds to the first determination unit of the plurality of types of screens. It includes a generation unit that generates a list including screen identification information that identifies the type of screen for which the determination result is affirmative.
- control system includes the information generating device and a plurality of information processing devices each having a display device and capable of communicating with the information generating device.
- each of the plurality of information processing devices includes an acquisition unit that acquires the list from the information generator and screen identification information indicating the type of screen displayed on the display device.
- FIG. 3A It is a figure which shows an example of the storage contents of the exclusion list EL. It is a figure which shows an example of the memory content of auxiliary information HI. It is a figure which shows the outline of the function of the control system 1. It is a figure which shows an example of specifying the average value of the number of application types. It is a figure which shows the specific example of the statistical value of the number of operations.
- FIG. 1 is a block diagram which shows the whole structure of the control system 1 which concerns on 1st Embodiment of this invention.
- the control system 1 includes a server device 10, user devices 20_1 to 20_m (m is an integer of 2 or more) possessed by users U_1 to U_m, and a network NW, respectively.
- the server device 10 is an example of an “information generator”.
- the user device 20 is an example of an “information processing device”.
- the server device 10 controls whether or not to provide the user U with auxiliary information that assists the operation of the user U.
- An application is an example of "software”.
- An application may be referred to as a "package”, for example, depending on the OS (Operating System) on which the application operates.
- screens managed by an application are sometimes referred to as "activity.”
- Auxiliary information is information that can be used as a reference when the user U is confused about how to operate the application, for example.
- the auxiliary information is character information or image information indicating a specific explanation of the operation method.
- the user device 20 is, for example, a portable terminal device such as a smartphone or a tablet terminal.
- a portable terminal device such as a smartphone or a tablet terminal.
- any information processing device can be adopted, and for example, a terminal-type information device such as a personal computer may be used.
- FIG. 2 is a diagram illustrating the configuration of the control system 1.
- the user device 20_1 among the user devices 20_1 to 20_m is displayed as a representative.
- the server device 10 includes a processing device 12, a storage device 14, and a communication device 16.
- the processing device 12, the storage device 14, and the communication device 16 are mutually accessible by a plurality of buses 19 for communicating information.
- the bus 19 may be composed of a single bus. Different buses may be used between the devices.
- the processing device 12 is a processor that controls the entire server device 10, and is composed of, for example, a single or a plurality of chips.
- the processing device 12 is composed of, for example, a central processing unit (CPU: Central Processing Unit) including an interface with peripheral devices, an arithmetic unit, registers, and the like.
- CPU Central Processing Unit
- a part or all of the functions of the processing device 12 are realized by hardware such as DSP (Digital Signal Processor), ASIC (Application Specific Integrated Circuit), PLD (Programmable Logic Device), FPGA (Field Programmable Gate Array). You may.
- the processing device 12 executes various processes in parallel or sequentially.
- the storage device 14 is a recording medium that can be read by the processing device 12, and is a plurality of programs including the control program PR1 executed by the processing device 12, various data used by the processing device 12, an operation log 142, and a first.
- the exclusion list EL generated by the processing device 12 in the embodiment is stored.
- the storage device 14 is composed of, for example, one or more types of storage circuits such as ROM (ReadOnlyMemory), EPROM (ErasableProgrammableROM), EPROM (ElectricallyErasableProgrammableROM), and RAM (RandomAccessMemory).
- FIG. 3A is a diagram showing an example of a part of the stored contents of the operation log 142.
- FIG. 3B is a diagram showing a continuation of FIG. 3A. More specifically, FIG. 3B is a diagram showing an example of the remaining stored contents of the operation log 142 not shown in FIG. 3A.
- the operation log 142 shows the display time of each screen from the user device 20_1 to the user device 20_m in a predetermined period, for example, one hour.
- the operation log 142 shown in FIGS. 3A and 3B has records 1421-1 to 1421-12.
- the device ID IDentifier
- the date and time the operation type
- the application type application name
- screen type screen name
- the terminal ID is identification information that identifies the user device 20 in which the operation has occurred from the user devices 20_1 to 20_m.
- the identification information is, for example, a UID (User IDentifier), a MAC (Media Access Control) address, an IMSI (International Mobile Subscriber Identity) recorded in a subscriber authentication module (SIM: Subscriber Identity Module), a user ID, or the like.
- the UID is an ID assigned to each user by the service provider.
- the terminal ID is indicated by the subscript of the user device 20 for the sake of simplification of the description.
- the date and time indicates the date and time when the operation occurred.
- the operation type indicates the type of operation that has occurred.
- the operation types include foreground and background.
- the display time of the screen is from the date and time when the foreground occurred to the date and time when the background occurred.
- the application name is the name of the application in which the operation occurred.
- the screen name is the name of the screen.
- the screen name has a one-to-one correspondence with the screen. In the above-mentioned OS, the application names may be the same even if the applications are different from each other.
- the package name is an identifier that uniquely identifies the application. Therefore, the package name is an example of "software identification information that identifies software".
- the application names are different from each other if the applications are different from each other.
- the identifier that uniquely identifies the application will be described as the application name.
- the screen name is an example of "screen identification information for identifying the screen type”. In the following description, the screen type is simply referred to as "screen name”.
- the operation logs 142 shown in FIGS. 3A and 3B are 1) a mail composition screen managed by the mail application, 2) a call screen managed by the telephone application and 3) a dial pad screen, 4) a home screen managed by the home application, and 5). ) Operation playback screen managed by the video playback application, and 6) Music playback screen managed by the music playback application are shown.
- FIG. 4 is a diagram showing an example of the stored contents of the exclusion list EL.
- the exclusion list EL indicates a screen name for which the auxiliary information HI is not provided to the user U.
- the exclusion list EL shown in FIG. 4 is data in which application names and screen names associated with each other are recorded.
- the exclusion list EL shown in FIG. 4 has a record EL1-1. In the example of record EL-1, it is shown that the auxiliary information HI is not provided to the user U on the mail composition screen managed by the mail application.
- the communication device 16 is a device that communicates with another device via a mobile communication network or a network NW such as the Internet.
- the communication device 16 is also referred to as, for example, a network device, a network controller, a network card, or a communication module.
- the communication device 16 can communicate with, for example, the user device 20 via the network NW.
- the user device 20 includes a processing device 22, a storage device 24, a display device 26, an operation device 27, and a communication device 28.
- the processing device 22, the storage device 24, the display device 26, the operating device 27, and the communication device 28 are mutually accessible by one or more buses 29 for communicating information.
- the plurality of buses 29 may be a single bus. Different buses may be used between the devices.
- the processing device 22 is a processor that controls the entire user device 20, and is composed of, for example, a single or a plurality of chips.
- the processing device 22 is composed of, for example, a central processing unit including an interface with peripheral devices, an arithmetic unit, registers, and the like.
- a part or all of the functions of the processing device 22 may be realized by hardware such as DSP, ASIC, PLD, and FPGA.
- the processing device 22 executes various processes in parallel or sequentially.
- the storage device 24 is a recording medium that can be read by the processing device 22.
- the storage device 24 stores a plurality of programs including the control program PR2 executed by the processing device 22, an operation log 142_1, an exclusion list EL, and various data used by the processing device 22.
- the storage device 24 is composed of, for example, one type of storage circuit such as ROM, EPROM, EEPROM, and RAM.
- the operation log 142_1 indicates the display time of the screen on the user device 20_1. This screen is displayed on the display device 26 by the program module.
- the program module is a part of a program stored in the storage device 24.
- the program module has a cohesive function.
- the program module that displays the screen on the display device 26 may be referred to as, for example, an "activity class”.
- the operation log 142_1 stores a record having the same contents as the records 1421-1 to 9.
- the exclusion list EL is information received from the server device 10.
- the auxiliary information HI is information that assists the operation of the user U, and is provided according to the operation status of the user U.
- FIG. 5 is a diagram showing an example of the stored contents of the auxiliary information HI.
- the auxiliary information HI shown in FIG. 5 provides hints on how to operate the dial pad screen managed by the telephone application.
- the display device 26 displays various images under the control of the processing device 22.
- various display panels such as a liquid crystal display panel or an organic EL (Electro Luminescence) display panel are preferably used as the display device 26.
- the operation device 27 is a device for receiving information used by the user device 20.
- the operation device 27 accepts operations by the user. Specifically, the operation device 27 accepts an operation for inputting a code (numbers, characters, etc.) and an operation for selecting an icon displayed by the display device 26.
- a touch panel that detects the contact of the user's finger with the display surface of the display device 26 is suitable as the operation device 27.
- the operation device 27 is a touch panel.
- the operation device 27 may include an operator that can be operated by the user. The operator is, for example, a stylus.
- the communication device 28 is a device that communicates with another device via a mobile communication network or a network NW such as the Internet.
- the communication device 28 is also referred to as, for example, a network device, a network controller, a network card, or a communication module.
- the communication device 28 can communicate with, for example, the server device 10 via the network NW.
- the function processing device 12 of the first embodiment reads the control program PR1 from the storage device 14 and executes the control program PR1 to execute the log acquisition unit 122, the first statistical processing unit 124, the first determination unit 126, and the exclusion list. It functions as a generation unit 128 and a communication control unit 129.
- the processing device 22 functions as the exclusion list acquisition unit 222, the determination unit 226, and the display control unit 228 by executing the control program PR2 from the storage device 24.
- the exclusion list generation unit 128 is an example of the “generation unit”.
- the exclusion list acquisition unit 222 is an example of the “acquisition unit”.
- FIG. 6 is a diagram showing an outline of the functions of the control system 1.
- the user device 20_1 and the user device 20_2 are represented as representatives of the user device 20_1 to the user device 20_m.
- the log acquisition unit 122 acquires the operation log 142 from each of the user devices 20_1 to 20_m. In the example of FIG. 6, the log acquisition unit 122 acquires the operation log 142_1 from the user device 20_1 and the operation log 142_2 from the user device 20_2.
- the first statistical processing unit 124 calculates the statistical value of the screen display time for each screen name based on the operation log 142.
- the display time statistical value is a numerical value that summarizes the characteristics of the display time of the screen.
- the display time statistic is, for example, the mean, median, or value obtained by adding twice the standard deviation to the mean.
- the first statistical processing unit 124 calculates, for example, the average value of the display time from the display time of the screen. Alternatively, when the same screen is displayed at different timings, the first statistical processing unit 124 compares the length of the screen display time at one timing with the length of the screen display time at another timing. , The median display time may be specified. In the following description, it is assumed that the statistical value of the display time is the average value of the display time.
- the first statistical processing unit 124 manages, for example, the average value of the display time of the mail composition screen managed by the mail application, the average value of the display time of the call screen managed by the telephone application, and the music playback application. Calculate the average value of the display time of the music playback screen to be played.
- the first determination unit 126 determines whether the user U's consciousness is concentrated on the screen for each screen name based on the average value of the display time calculated for each screen name.
- the first determination unit 126 may take any of the following six aspects.
- the first determination unit 126 determines that the screen name in which the average value of the display time exceeds a predetermined value is the screen name of the screen in which the user U's consciousness is concentrated. judge.
- the predetermined value has, for example, the following two aspects.
- the first aspect of the predetermined value is a fixed value.
- the second aspect of the predetermined value is a value determined based on an average value of display times of a plurality of screens.
- the average value of the display time of the plurality of screens is, for example, the average value of the display time of the entire screen.
- a screen that is not used for determining a predetermined value may be determined in advance.
- the first determination unit 126 is the screen name of the screen in which the user's consciousness is concentrated on the top predetermined screen names in descending order of the average value of the display time. Is determined.
- the first statistical processing unit 124 specifies the statistical value of the number of types of applications started within the unit period including the time when the screen is displayed for each screen name.
- the statistical value of the number of types of started applications is the average value or the median value of the number of types of started applications. In the following description, it is assumed that the statistical value of the number of types of started applications is the average value of the number of types of started applications.
- the unit period including the time when the screen is displayed is, more specifically, the time including any time in the period from the start time when the screen is displayed to the end time.
- the unit period may have any length, for example, 10 minutes or 1 hour.
- FIG. 7 is a diagram showing an example of specifying the average value of the number of types of applications.
- a screen on a user device 20 has a unit period 1 from 10:00 to 11:00 and a unit period 2 from 11:00 to 12:00. Indicates the display time of.
- the user device 20 displayed the screen A, the screen B, the screen C, the screen D, and the screen E as screen names during the period from 10:00 to 12:00.
- the screen A, the screen B, the screen C, the screen D, and the screen E are managed by different applications.
- the application for managing each screen is running.
- the user device 20 displays the screen A and the screen B, and in the unit period 2, the user device 20 displays the screen A, the screen C, the screen D, and the screen E.
- the first statistical processing unit 124 calculates the number of types of started applications as 2 in the unit period 1 including the time when the screen A and the screen B are displayed.
- the first statistical processing unit 124 calculates the number of types of applications started as 4 in the unit period 2 including the time when the screen A, the screen C, the screen D, and the screen E are displayed. Since the screen A is displayed in the unit periods 1 and 2, the number of types of the started application in the unit period 1 is 2, and the number of types of the started application in the unit period 2 is 4.
- the first statistical processing unit 124 calculates the average value of the number of types of started applications as 3. Similarly, since the screen B is displayed only in the unit period 1, the number of types of the started applications in the unit period 1 is 2. Therefore, the first statistical processing unit 124 calculates the average value of the number of types of started applications as 2. Similarly, for screen C, screen D, and screen E, since the number of types of started applications in the unit period 2 is 4, the first statistical processing unit 124 sets the average value of the number of types of started applications. Calculate as 4.
- the first determination unit 126 has each screen name based on the average value of the display time for each screen name and the number of types of applications started for each screen name. It is determined whether or not the user U's consciousness is concentrated on the screen.
- the determination method for example, there are the following two methods. In the first method, when the average value of the display time exceeds the predetermined value and the average value of the number of types of started applications is less than the predetermined value, the first determination unit 126 concentrates the user's consciousness. It is determined that the screen name is the screen name of the screen.
- the first determination unit 126 determines the type of screen in which the average value of the number of types of started applications is less than the predetermined value among the top predetermined screen names in descending order of the average value of the display time. Is determined to be the type of screen in which the user's consciousness is concentrated.
- the first statistical processing unit 124 specifies the statistical value of the number of operations of the user U within the unit period including the display time of the screen for each screen name.
- the number of operations of the user U is, for example, the number of times the user U taps the touch panel and the number of times the user U flicks the touch panel.
- the statistical value of the number of operations is, for example, the average value or the median value of the number of operations. In the following description, the statistical value of the number of operations will be described as the average value of the number of operations.
- FIG. 8 is a diagram showing a specific example of the statistical value of the number of operations.
- the number of operations in the unit period 1 and the number of operations in the unit period 2 are shown.
- the number of operations of the user U is 600 times, and in the unit period 2, the number of operations of the user U is 200 times.
- the statistical value of the number of operations is used as the average value of the number of types of started applications.
- the first statistical processing unit 124 calculates the average value of the number of operations as 400 times. Similarly, the first statistical processing unit 124 calculates the average value of the number of operations as 600 for the screen B because the number of operations in the unit period 1 is 600. Similarly, the first statistical processing unit 124 calculates the average value of the number of operations as 200 for the screen C, the screen D, and the screen E because the number of operations in the unit period 2 is 200.
- the first determination unit 126 displays the user's consciousness on the screen for each screen name based on the average value of the display time for each screen name and the number of operations for each screen name. Determine if you are focused.
- the determination method for example, there are the following two methods. In the first method, when the average value of the display time exceeds the predetermined value and the number of operations is equal to or greater than the predetermined value, the first determination unit 126 is a screen on which the user's consciousness is concentrated. Judge that it is the screen name.
- the first determination unit 126 concentrates the user's consciousness on the screen names whose number of operations is equal to or greater than the predetermined value among the top predetermined screen names in descending order of the average value of the display times. Judge that it is the screen name of the existing screen.
- the first determination unit 126 statistics on the number of calls of the moving image library or the still image library called within the unit period including the time when the screen is displayed for each screen name. Calculate the value.
- the video library is, for example, a library that decodes video information encoded in the MPEG (Moving Picture Experts Group) format.
- the still image library is, for example, a library that decodes still image information encoded in JPEG (Joint Photographic Experts Group), GIF (Graphics Interchange Format), or PNG (Portable Network Graphics) format.
- JPEG Joint Photographic Experts Group
- GIF Graphics Interchange Format
- PNG Portable Network Graphics
- the first determination unit 126 displays the user's consciousness for each screen name based on the statistical value of the display time for each screen name and the statistical value of the number of calls of the video library or the still image library for each screen name. Determine if you are concentrating on.
- the determination method for example, there are the following two methods. In the first method, when the average value of the display time exceeds the predetermined value and the number of calls is equal to or greater than the predetermined value, the first determination unit 126 is the screen name of the screen in which the user's consciousness is concentrated on the screen. Is determined to be.
- the first determination unit 126 concentrates the user's consciousness on the screen names whose number of calls is equal to or greater than the predetermined value among the top predetermined screen names in descending order of the average value of the display time. Judge that it is the screen name of the existing screen.
- the sixth aspect of the first determination unit 126 is a combination of the first to fifth aspects of the first determination unit 126.
- the statistical value of the display time exceeds the predetermined value, and the average value of the number of types of started applications is less than the predetermined value. If the number of calls is equal to or greater than a predetermined value, it is determined that the screen name is the screen on which the user's consciousness is concentrated.
- the first determination unit 126 will be described as determining that the screen name is the screen name on which the user U's consciousness is concentrated according to the first aspect.
- the first determination unit 126 displays the mail creation screen managed by the mail application and the video playback screen managed by the video playback application based on the average value of the display time calculated for each screen name. , It is determined that the screen name is the screen on which the user U is concentrated.
- the exclusion list generation unit 128 generates the exclusion list EL.
- the exclusion list EL includes a screen name in which the determination result of the first determination unit 126 is affirmative.
- the exclusion list generation unit 128 uses the screen name "mail composition screen" of the mail composition screen managed by the mail application and the screen name "operation playback screen” of the video playback screen managed by the video playback application. Generate an exclusion list EL to include.
- the communication control unit 129 transmits the exclusion list EL generated by the exclusion list generation unit 128 to the user device 20.
- the exclusion list acquisition unit 222 acquires the exclusion list EL from the server device 10.
- the exclusion list acquisition unit 222 of the user device 20_1 and the user device 20_2 acquires the exclusion list EL from the server device 10.
- the determination unit 226 determines that the auxiliary information HI is not provided to the user U when the screen (screen name) displayed on the display device 26 is included in the exclusion list EL. On the other hand, the determination unit 226 determines that if the screen (screen name) displayed on the display device 26 is not included in the exclusion list EL, the auxiliary information HI is provided to the user U according to the operation status.
- the information indicating the operation status is, for example, the bag-of-words feature amount described later.
- the display device 26 of the user device 20_1 displays the mail composition screen managed by the mail application, and the exclusion list EL includes the “mail creation screen”.
- the determination unit 226 of the user apparatus 20_1 determines that the auxiliary information HI is not provided to the user.
- the display device 26 of the user device 20_2 displays the dial pad screen managed by the moving image playback application, and the exclusion list EL does not include the “dial pad screen”. Therefore, the determination unit 226 of the user apparatus 20_2 determines that the auxiliary information HI is provided to the user U according to the operation status of the user U_2.
- the display control unit 228 causes the display device 26 to display an image based on the auxiliary information HI.
- the display control unit 228 of the user device 20_2 causes the display device 26 to display an image based on the auxiliary information HI.
- the server device 10 executes the exclusion list generation process shown in FIG.
- the user device 20 executes the auxiliary information providing process shown in FIG.
- FIG. 9 is a flowchart showing the exclusion list generation process.
- the server device 10 acquires the operation logs 142 of all users from the user devices 20_1 to 20_m (step S1).
- the server device 10 extracts a set of records having the same device ID and having consecutive operation types in the order of foreground and background from each operation log 142 (step S2).
- the set of records 1421-1 and 1421-2, the set of records 1423-1 and 1424-14, and the set of records 1421-5 and 1421-6 are It is continuous in the order of foreground and background.
- the server device 10 calculates the display time of the screen from the set of the extracted records (step S3).
- the server device 10 sets the display time of the first mail composition screen from the set of record 1421-1 and record 1421-2 to 10:00:20 on August 1, 2016. It is calculated as 20 seconds by subtracting 10:00:00 on August 1, 2016 from.
- the server device 10 calculates the display time of the first call screen as 40 seconds from the set of the record 1423-1 and the record 1421-4.
- the server device 10 calculates the display time of the second mail composition screen as 4 minutes from the set of records 1421-5 and records 1421-6.
- the server device 10 calculates the average value of the screen display time for each screen name (step S4).
- the server device 10 calculates the average value of the display time of the mail composition screen as 2 minutes and 10 seconds, which is the average value of 20 seconds and 4 minutes.
- the server device 10 selects an unselected screen name from the screen names appearing in the operation log 142 (step S5), and the average value of the display time of the screen corresponding to the selected screen name is a predetermined value. It is determined whether or not it has been exceeded (step S6). If the determination result in step S6 is affirmative, the server device 10 adds the selected screen name to the exclusion list EL (step S7). After the processing in step S7 is completed, or when the determination result in step S6 is negative, the server device 10 determines whether or not all the screen names have been selected (step S8). If the determination result in step S8 is negative, that is, if there is a screen name that has not yet been selected, the server device 10 returns the process to step S5.
- step S8 determines whether the determination result in step S8 is affirmative.
- the server device 10 transmits the exclusion list EL to each user device 20_1 to 20_m (step S9).
- the content of the exclusion list EL is common to the plurality of user devices 20.
- FIG. 10 is a flowchart showing the auxiliary information providing process.
- the user device 20_x executes the auxiliary information providing process periodically or when a specific application is started.
- x is an integer from 1 to m. Periodic can be any time interval, for example 10 seconds.
- the user device 20_x specifies the current foreground screen name from the operation log 142_x (step S11). Specifically, the user device 20_x identifies the screen name of the current foreground by acquiring the screen name of the record having the latest date and time in the operation log 142_x.
- the user device 20_x determines whether or not the acquired screen name is included in the exclusion list EL (step S12). If the determination result in step S12 is negative, the user device 20_x ends a series of processes shown in FIG. On the other hand, when the determination result in step S12 is affirmative, the user device 20_x extracts the bag-of-words feature amount from the operation log 142_x (step S13). Bag-of-words is an algorithm that counts the number of times a word appears in a document on a word-by-word basis. By comparing the number of occurrences for each word, the similarity between a plurality of documents can be measured. The bag-of-words feature is the number of occurrences of a word counted for each word. In the process of step S13, the user device 20_x regards the screen name as one word and counts the number of appearances of the corresponding screen for each screen name.
- the user device 20_x inputs the extracted bag-of-words feature quantity into the inference model trained in advance, and acquires a determination result indicating whether or not the user U_x is confused as the output of the inference model. (Step S14).
- This inference model outputs that the user U_x is confused.
- this inference model outputs confusing content. What is confusing is, for example, that I am confused because I do not know how to use a certain screen.
- the user device 20_x determines whether or not the acquired determination result indicates that the user U_x is confused (step S15). If the determination result in step S15 is negative, the user device 20_x ends a series of processes shown in FIG. On the other hand, if the determination result in step S15 is affirmative, the user apparatus 20_x determines to provide the user U with auxiliary information HI corresponding to the confusion of the user U_x (step S16). Then, the user device 20_x displays an image based on the auxiliary information HI on the display device 26 (step S17). After the processing in step S17 is completed, the user device 20_x ends a series of processing shown in FIG.
- the information generation device (for example, "server device") is displayed on the display device for each type of screen displayed on the display device.
- a first statistical processing unit that generates a plurality of first statistical values corresponding to each of a plurality of types of screens by calculating a first statistical value of the display time of the screen, and the plurality of screens for each type of the screen.
- the first determination unit Based on the first statistical value calculated for the screen of the type among the first statistical values, the first determination unit for determining whether the user's consciousness is concentrated on the screen of the type, and the screens of the plurality of types.
- a generation unit (for example, “exclusion list generation unit") that generates a list (for example, "exclusion list”) including screen identification information for identifying a screen type for which the corresponding determination result is affirmative by the first determination unit. ) And.
- the server device 10 determines whether the user U's consciousness is concentrated on the screen for each screen based on the average value of the display time for each screen displayed on the display device 26. Next, when the determination result is affirmative, the server device 10 identifies the screen as a screen that does not provide the auxiliary information HI for assisting the operation of the user U, and generates an exclusion list EL including the specified screen name. To do.
- the user device 20 can use the exclusion list EL to determine whether or not the screen displayed on the display device 26 is a screen on which the user U's consciousness is concentrated. Therefore, the user device 20 can reduce the provision of auxiliary information HI when the user U's consciousness is concentrated on the screen, and can suppress the user U's concentration from being distracted. Further, as shown in FIG. 10, when the screen name currently displayed by the display device 26 is included in the exclusion list EL, it is not necessary to execute the processes of steps S13 and S14. Therefore, the load on the user device 20 is reduced, and the battery consumption of the user device 20 can be suppressed.
- the first determination unit 126 displays the screen of the type corresponding to the first statistical value exceeding a predetermined value among the plurality of first statistical values, in the user's consciousness. It is determined that the screen is of a type in which is concentrated.
- the first determination unit 126 determines that the screen name whose average display time exceeds a predetermined value is the screen name of the screen on which the user U's consciousness is concentrated.
- the display time of this screen tends to be long. Therefore, by specifying the screen name whose average value of the display time exceeds a predetermined value, it is possible to specify the screen name of the screen on which the user U's consciousness is concentrated.
- the first statistical processing unit specifies one or a plurality of unit periods including the time when the screen of the type is displayed for each type of the screen, and the unit period thereof is specified. By calculating the third statistical value based on the number of types of software started within each specified unit period, a plurality of third statistical values corresponding to the screens of the plurality of types are generated. The first determination unit determines whether or not the user's consciousness is concentrated on the screen of the type based on the corresponding first statistical value and the third statistical value for each screen type.
- the first determination unit 126 displays the user U's consciousness on the screen for each screen name based on the average value of the display time for each screen name and the number of types of started applications for each screen name. Determine if you are focused. In general, when the user U's consciousness is concentrated on the screen, the number of types of started applications tends to decrease because attention is reduced to areas other than this screen. On the contrary, when the user U's consciousness is not concentrated on the screen, in other words, when the user U's consciousness is distracted, the user U tends to start various applications. Therefore, the first determination unit 126 determines whether or not the user U's consciousness is concentrated by using the number of types of started applications for each screen name. This determination makes it possible to improve the accuracy of determining whether or not the user U's consciousness is concentrated on the screen, as compared with the case where the number of types of started applications for each screen name is not used.
- the first statistical processing unit specifies one or a plurality of unit periods including the time when the screen of the type is displayed for each type of the screen. By calculating the fourth statistical value based on the number of operations of the user within each of the specified unit periods, a plurality of fourth statistical values corresponding to the plurality of types of screens are generated. The first determination unit determines whether or not the user's consciousness is concentrated on the screen of the type based on the corresponding first statistical value and the fourth statistical value for each screen type.
- the first determination unit 126 determines whether or not the user's consciousness is concentrated for each screen name based on the average value of the display time for each screen name and the number of operations for each screen name. .. Generally, when the user U's consciousness is concentrated on the screen, the number of operations on this screen tends to increase. On the contrary, when the user U's consciousness is distracted, the user U's hand tends to stop and the number of screen operations tends to decrease. As an example of the case where the user U is distracted, there is a case where the operation method of the screen is unknown, or there is a case where the user device 20 is operated while watching TV.
- the first determination unit 126 determines whether or not the user U's consciousness is concentrated on the screen by using the number of operations for each screen name. This determination makes it possible to improve the accuracy of determining whether or not the user U's consciousness is concentrated, as compared with the case where the first determination unit 126 does not use the number of operations for each screen name.
- the first determination unit 126 uses the statistical value of the display time for each screen name and the statistical value of the number of calls of the moving image library or the still image library for each screen name. Based on this, it is determined whether or not the user's consciousness is concentrated for each screen name. Screens where the user U's consciousness is concentrated include an operation playback screen, a posting screen of an SNS (Social Networking Service) application, and the like. In general, the motion playback screen tends to increase the number of calls to the video library. Further, since the image of the photograph or illustration posted by the user U is displayed on the posting screen, the number of calls to the moving image library or the still image library tends to increase.
- SNS Social Networking Service
- the first determination unit 126 determines whether or not the user U's consciousness is concentrated on the screen by using the number of calls of the moving image library or the still image library for each screen name. By this determination, the accuracy of determining whether or not the user U's consciousness is concentrated on the screen is improved as compared with the case where the first determination unit 126 does not use the number of calls of the video library or the still image library for each screen name. It becomes possible to make it.
- the control system includes an information generation device and a plurality of information processing devices (for example, "user device"), each of which is provided with a display device and capable of communicating with the information generation device.
- each of the plurality of information processing devices includes an acquisition unit that acquires the list from the information generation device and screen identification information indicating the type of screen displayed on the display device, the user When it is determined that the auxiliary information for assisting the operation of the above operation is not provided to the user and the screen identification information indicating the type of the screen displayed on the display device is not included in the list, the operation is described according to the situation of the operation.
- the average value of the screen display time is calculated for each screen name, but in the 2nd embodiment, the average value of the screen display time is further calculated for each application.
- the control system 1 according to the second embodiment will be described.
- the reference numerals are used in the above description, and detailed description of each is appropriately omitted.
- FIG. 11 is a diagram illustrating the configuration of the server device 10 according to the second embodiment.
- the storage device 14 stores the exclusion list ELa instead of the exclusion list EL.
- the exclusion list ELa indicates a screen name that does not provide auxiliary information HI and an application name that does not provide auxiliary information HI.
- FIG. 12 is a diagram showing an example of the stored contents of the exclusion list ELa.
- the exclusion list ELa shown in FIG. 12 has records ELa1-1 and records ELa1-2.
- Record ELa1-1 is an example of a screen name that does not provide auxiliary information HI.
- Record ELa1-2 is an example of an application name that does not provide auxiliary information HI.
- the record ELa1-1 indicates that the mail composition screen managed by the mail application is a screen that does not provide the auxiliary information HI.
- the record ELa1-2 indicates that all the screens managed by the sentence creation application are screens that do not provide the auxiliary information HI.
- the processing device 12 By reading and executing the control program PR1 from the storage device 14, the processing device 12 reads and executes the log acquisition unit 122, the first statistical processing unit 124, the second statistical processing unit 125, the first determination unit 126, and the second determination unit 127. It functions as an exclusion list generation unit 128a and a communication control unit 129.
- the second statistical processing unit 125 specifies the average value of the display time of the screen for each application that manages the screen displayed on the display device 26.
- the second determination unit 127 determines whether the user's consciousness is concentrated on the screen for each application based on the average value of the display time specified for each application.
- the second determination unit 127 may take the same mode as any of the six aspects of the first determination unit 126. The specific difference is that "for each screen name" in the first determination unit 126 is replaced with "for each application”.
- the exclusion list generation unit 128a includes the application name in which the determination result of the second determination unit 127 is affirmative in the exclusion list EL.
- the second statistical processing unit is a screen displayed on the display device for each software that manages the screen displayed on the display device.
- a second statistical processing unit that generates a plurality of second statistical values corresponding to a plurality of software by calculating a second statistical value of the display time, and one of the plurality of second statistical values for each software.
- a second determination unit for determining whether the user's consciousness is concentrated on the screen corresponding to the software is further provided based on the second statistical value calculated for the software.
- the generation unit includes in the list software identification information for identifying software in which the corresponding determination result is affirmative by the second determination unit among the plurality of software.
- the server device 10 determines whether the user's consciousness is concentrated on the screen for each application based on the average value of the display time specified for each application, and the application name whose determination result is affirmative. Is included in the exclusion list EL.
- the user device 20 uses the exclusion list EL, it can be determined whether or not the screen displayed on the display device 26 is a screen in which the user U's consciousness is concentrated. Therefore, the user device 20 can reduce the provision of auxiliary information HI when the user U's consciousness is concentrated on the screen managed by the application. As a result, it is possible to prevent the concentration of users from being distracted.
- FIG. 13 is a diagram illustrating the configuration of the server device 10 according to the third embodiment.
- the storage device 14 stores the work interruption application list IL in addition to the information described in the first embodiment.
- the work interruption application list IL is a list of applications that may interrupt the user's work by notifying the user U.
- the applications registered in the work interruption application list IL are a telephone application, an alarm application, a scheduler application, and the like.
- the application registered in the work interruption application list IL will be referred to as a "work interruption application”.
- a work interruption application is an example of "predetermined software".
- the first statistical processing unit 124b has the second aspect shown below.
- the first statistical processing unit 124b manages the front screen displayed before the screen managed by the work interruption application and the work interruption application is started. It is determined whether or not the application and the application that manages the screen after being displayed after the screen managed by the work interruption application are the same.
- the screen managed by the work interruption application is referred to as "work interruption screen”
- the previous screen displayed before the work interruption screen is referred to as "pre-interruption screen” and is displayed before the work interruption screen.
- the screen after the screen is displayed is referred to as a "screen after interruption”.
- the first statistical processing unit 124b displays the display time of the screen before interruption or after the interruption.
- the display time of the screen is replaced with the total time of the display time of the screen before the interruption and the display time of the screen after the interruption, and the average value of the display time is specified for each screen type.
- the display time to be replaced may be either the display time of the screen before the interruption or the display time of the screen after the interruption. Display times that are not to be replaced are excluded from the calculation of the average value of display times. In the following description, it is assumed that the display time to be replaced is the display time of the screen before interruption.
- the screen before interruption has, for example, the following two aspects.
- the screen before interruption in the first aspect is a screen displayed immediately before the work interruption screen.
- the screen before interruption in the second aspect is a screen displayed before a predetermined number of work interruption screens.
- the screen after interruption has three modes.
- the post-interruption screen in the first aspect is a screen displayed immediately after the work interruption screen.
- the post-interruption screen in the second aspect is a screen displayed after a predetermined number of work interruption screens.
- the post-interruption screen in the third aspect is a screen managed by the same application as the application that manages the pre-interruption screen among the screens displayed after a predetermined number from the screen displayed immediately after the work interruption screen.
- the first aspect of the first statistical processing unit 124b will be described with reference to FIGS. 3A and 3B as examples.
- the pre-interruption screen and the post-interruption screen are the first aspect.
- the telephone application which is a work interruption application, is started. Therefore, the first statistical processing unit 124b uses the operation log 142 to display the mail creation screen shown in records 1421-1 and 1421-2 as the pre-interruption screen, and the record 1421-5 and the post-interruption screen. Identify the mail composition screen shown in record 1421-6. Since the application that manages the pre-interruption screen and the post-interruption screen is the same in the mail application, the first statistical processing unit 124b calculates the display time of the pre-interruption screen according to the following equation (1).
- the display time of the front screen is 20 seconds and the display time of the screen after interruption is 4 minutes. Therefore, the first statistical processing unit 124b sets the display time of the screen before interruption to 20. Replace from seconds to 4 minutes and 20 seconds. Then, the first statistical processing unit 124b specifies the average value of the display time corresponding to the type of the previous screen.
- the first statistical processing unit 124b displayed the home screen during the period from displaying the pre-interruption screen to displaying the screen managed by the work interruption application.
- the display time corresponding to the type of the screen before work is not replaced with the total time.
- the home screen is an example of a standby screen that awaits the operation of the user U.
- step S31 to step S38 shown in FIG. 15 is the same as the processing from step S2 to step S9, the description thereof will be omitted.
- the operation log 142 is sorted by device ID and date and time as shown in FIGS. 3A and 3B, and is stored in ascending order, that is, the older record of the date and time is stored earlier. To do.
- the server device 10 acquires the operation log 142 of all users from each user device 20_1 to 20_m (step S21). Next, the server device 10 selects a record indicating the work interrupted application from the operation log 142 (step S22). When there are a plurality of records indicating the work interruption application in the operation log 142, the server device 10 selects, for example, the record having the oldest date and time among the records indicating the work interruption application.
- the server device 10 determines whether or not the application name before interruption indicated by the record before the selected record is the same as the application name after interruption indicated by the record after the selected record (step S23). ). However, it is assumed that the device IDs of the records before and after the selected record match the device ID of the selected record. Since the operation log 142 is sorted in ascending order of date and time, the previous record relates to an operation that occurred before the operation of the selected record. Later records relate to operations that occur after the operation of the selected record.
- the reason for comparing the application name before interruption with the application name after interruption instead of comparing the screen name before interruption with the screen name after interruption is that, depending on the OS, when the background application becomes the foreground, it is back. This is because the screen that was displayed when the ground is reached may not be displayed and the top screen of the application may be displayed.
- step S24 determines whether or not the home screen is displayed while the pre-interruption screen is displayed and the work interruption screen is displayed. ..
- the server device 10 replaces the display time of the pre-interruption screen with the total time of the display time of the pre-interruption screen and the display time of the post-interruption screen (step S25). Then, the server device 10 sets the display time of the screen after interruption to be excluded from the calculation target of the average value (step S26).
- step S27 the server device 10 determines whether or not all the records indicating the work interrupted application have been selected. Further, even when the determination result in step S23 is negative or the determination result in step S24 is affirmative, the server device 10 executes the process of step S27.
- step S27 If the determination result in step S27 is negative, that is, if there is a record that has not yet been selected among the records indicating the work interrupted application, the server device 10 returns the process to step S22.
- the server device 10 selects, as step S22, the record having the oldest date and time among the unselected records indicating the work interruption application.
- the server device 10 executes the process in step S31.
- the display device includes a first screen (for example, a “pre-interruption screen”) managed by the first software and the first software.
- a second screen eg, "work interruption screen” managed by different second software (eg, "work interruption application”) and a third screen (eg, "post-interruption screen”) managed by the third software.
- the first statistical processing unit adds the first display time of the first screen to the third display time of the third screen when the first software is the same as the third software. The total time is calculated, and one of the first display time and the third display time is replaced.
- the server device 10 sets the display time of the screen before the interruption to the screen before the interruption. Replace the display time of and the display time of the screen after interruption with the total time. If the work interruption application did not start, it is considered that the user U's consciousness would continue to concentrate on the screen before the interruption. Therefore, by adding up the display time of the screen before the interruption and the display time of the screen after the interruption by the server device 10, it is possible to obtain the time during which the consciousness of the user U will continue to concentrate on the screen. By obtaining the time during which the user U's consciousness will continue to concentrate on the screen, it is possible to improve the accuracy of determining whether or not the user U's consciousness is concentrated on the screen.
- the first statistical processing unit displays the first display.
- One of the time and the third display time is not replaced with the total time.
- the server device 10 sets the display time of the screen before interruption before interruption. Do not replace the display time of the screen with the display time of the screen after interruption with the total time.
- the home screen is displayed while the work interruption screen is displayed after the pre-interruption screen is displayed, it means that the user U actively starts the work interruption application.
- the user U actively starts the work interruption application, the user U's consciousness is not concentrated on the screen before the interruption. Therefore, by not replacing the total time, it is possible to improve the accuracy of determining whether or not the user U's consciousness is concentrated.
- the user apparatus 20 determines whether or not to provide the auxiliary information HI to the user U by using the exclusion list EL transmitted from the server apparatus 10.
- the user device 20_x when a predetermined period elapses after the screen is displayed on the display device 26, the user device 20_x generates an update exclusion list ELu based on its own operation log 142_x, and sets the update exclusion list ELu. It is used to determine whether to provide the auxiliary information HI to the user U.
- the control system 1 according to the fourth embodiment will be described.
- the above reference numerals are used, and detailed description of each is omitted as appropriate.
- FIG. 16 is a diagram illustrating the configuration of the user device 20_x according to the fourth embodiment.
- the storage device 24 stores the update exclusion list ELu generated by the processing device 22 in the fourth embodiment in addition to the information described in the first embodiment.
- the update exclusion list ELu like the exclusion list EL, indicates a screen name that does not provide the auxiliary information HI to the user U_x.
- the processing device 22 reads the control program PR2 from the storage device 24 and executes the control program PR2. By this execution, the processing device 22 functions as an exclusion list acquisition unit 222, a determination unit 226c, a display control unit 228, a third statistical processing unit 232, a third determination unit 234, and an exclusion list update unit 236.
- the exclusion list update unit 236 is an example of the “update unit”.
- the third statistical processing unit 232 specifies the average value of the display time for each type of screen displayed on the display device 26 when a predetermined period has elapsed since the screen was displayed on the display device 26.
- the predetermined period has, for example, the following two aspects.
- the first aspect of the predetermined period is a fixed value.
- the second aspect of the predetermined period is a period from when the screen is first displayed on the display device 26 until the number of records in the operation log 142_x becomes a predetermined number or more.
- the third determination unit 234 determines whether the user U_x's consciousness is concentrated on the screen for each screen type based on the average value of the display time specified by the third statistical processing unit 232 for each screen type. ..
- the exclusion list update unit 236 generates an update exclusion list ELu including a screen name in which the determination result of the third determination unit 234 is affirmative.
- the update exclusion list ELu is an example of an "update list”.
- the determination unit 226c determines whether or not to provide the auxiliary information HI to the user U_x based on the exclusion list EL until the predetermined period elapses. After the predetermined period has elapsed, the determination unit 226c determines whether or not to provide the auxiliary information HI to the user U_x based on the update exclusion list ELu.
- the user device 20 sets the exclusion list EL as to whether or not to provide the auxiliary information HI to the user U_x until the predetermined period elapses. After the predetermined period has elapsed, it is determined based on the update exclusion list ELu whether or not to provide the auxiliary information HI to the user U_x.
- the user apparatus 20 uses the update exclusion list ELu generated based on the operation log 142_x to be aware of the user U_x. Determine if is concentrated. The operation history of only the user U_x is reflected in the operation log 142_x.
- the accuracy of determining whether or not the consciousness of the user U is concentrated on the screen is determined as compared with the case where the user device 20 determines whether or not the consciousness of the user U_x is concentrated using the exclusion list EL. It will be possible to improve.
- the user device 20_x calculates an average value of screen display time for each screen name.
- the average value of the screen display time is further calculated for each application.
- the control system 1 according to the fifth embodiment will be described.
- the above reference numerals will be used and detailed description of each will be omitted as appropriate.
- FIG. 17 is a diagram illustrating the configuration of the user device 20_x according to the fifth embodiment.
- the storage device 14 stores the exclusion list ELd instead of the exclusion list EL, and stores the update exclusion list ELud instead of the update exclusion list ELu.
- the exclusion list ELd and the update exclusion list ELud indicate a screen name that does not provide the auxiliary information HI and an application name that does not provide the auxiliary information HI.
- the processing device 22 reads the control program PR2 from the storage device 24 and executes the control program PR2. By this execution, the processing device 22 includes the exclusion list acquisition unit 222, the determination unit 226, the display control unit 228, the third statistical processing unit 232, the fourth statistical processing unit 233, the third determination unit 234, and the fourth determination unit 235. It also functions as an exclusion list update unit 236d.
- the fourth statistical processing unit 233 specifies the average value of the display time for each application that manages the screen displayed on the display device 26 when a predetermined period has elapsed since the screen was displayed on the display device 26.
- the fourth determination unit 235 determines whether the user's consciousness is concentrated for each application based on the average value of the display time calculated for each application.
- the exclusion list update unit 236d includes the application name in which the determination result of the fourth determination unit 235 is affirmative in the update exclusion list ELud.
- the fourth determination unit 235 displays the user's consciousness for each application based on the average value of the display time specified for each application.
- the exclusion list update unit 236d includes the application name whose determination result is affirmative in the update exclusion list ELud.
- the user device 20 uses the update exclusion list ELud, it can be determined whether or not the screen displayed on the display device 26 is a screen in which the user U's consciousness is concentrated. Therefore, the user device 20 can reduce the provision of auxiliary information HI when the user U's consciousness is concentrated on the screen managed by the application, and can suppress the user's consciousness from being distracted. Become.
- the determination unit 226 determines the auxiliary information HI based on the number of types of applications started within the predetermined period and the number of user operations within the predetermined period. It may be determined whether or not to provide it to the user.
- FIG. 18 is a flowchart showing the auxiliary information providing process in the first modification.
- the user device 20_x identifies the current foreground screen name from the operation log 142_x (step S41).
- the user device 20_x determines whether or not the specified screen name is included in the exclusion list EL (step S42). If the determination result in step S42 is negative, the user device 20_x ends a series of processes shown in FIG.
- step S42 determines whether or not the counted number of types is 1.
- step S44 determines whether or not the counted number of types is 1.
- step S44 determines whether or not the number of operations is equal to or greater than a predetermined number (step S46). If the determination result in step S46 is affirmative, the user device 20_x ends a series of processes shown in FIG.
- step S46 determines whether or not the user U_x is confused.
- the user device 20_x determines whether or not the acquired determination result indicates that the user U_x is confused (step S49). If the determination result in step S49 is negative, the user device 20_x ends a series of processes shown in FIG. On the other hand, if the determination result in step S49 is affirmative, the user apparatus 20_x determines to provide the user U_x with auxiliary information HI corresponding to the confusion of the user U_x (step S50). Then, the user device 20_x displays an image based on the auxiliary information HI on the display device 26 (step S51). After the processing in step S51 is completed, the user device 20_x ends a series of processing shown in FIG.
- control system 1 in each of the above-described embodiments includes the server device 10 and the user device 20, the user device 20 may independently generate an exclusion list EL including a screen name. Further, the user device 20 may independently include the application name in the exclusion list EL. When the user device 20 independently generates the exclusion list EL including the screen name, the user device 20 is an example of the "information generation device".
- the statistical value of the display time of the screen is described as an average value or a median value, but the statistical value is not limited to this and may be the mode value. However, since the display time of the screen is a continuous value and the mode value is not suitable, the server device 10 may obtain the frequency distribution of the display time and set the center value of the frequency with the largest distribution as the mode value.
- the first statistical processing unit 124 operates the user U for each screen name within a unit period including the display time of the screen. Although the statistical value of is calculated, the statistical value of the number of operations for each screen name may be simply calculated.
- each functional block is realized by one physically and / or logically coupled device, or directly and / or indirectly by two or more physically and / or logically separated devices. (For example, wired and / or wireless) may be connected and realized by these plurality of devices.
- information notification includes physical layer signaling (for example, DCI (Downlink Control Information), UCI (Uplink Control Information)), higher layer signaling (for example, RRC (Radio Resource Control) signaling, MAC (Medium Access Control) signaling, etc. It may be carried out by notification information (MIB (Master Information Block), SIB (System Information Block)), other signals, or a combination thereof.
- RRC signaling may be referred to as an RRC message, and may be, for example, an RRC connection setup (RRCConnectionSetup) message, an RRC connection reconfiguration (RRCConnectionReconfiguration) message, or the like.
- the specific operation for example, identification of the position information by the base station
- the specific operation may be performed by its upper node (upper node) in some cases.
- various operations performed for communication with a terminal are performed by the base station and / or other network nodes other than the base station (for example,). It is clear that it can be done by (but not limited to) MME or S-GW.
- MME Mobility Management Entity
- S-GW Serving Mobility Management Entity
- Information and the like can be output from the upper layer (or lower layer) to the lower layer (or upper layer). Input / output may be performed via a plurality of network nodes.
- the input / output information and the like may be stored in a specific place (for example, a memory) or may be managed by a management table. Input / output information and the like can be overwritten, updated, or added. The output information and the like may be deleted. The input information or the like may be transmitted to another device.
- the determination may be made by a value represented by 1 bit (0 or 1) or by a boolean value (Boolean: true or false). However, it may be performed by comparing numerical values (for example, comparing with a predetermined value).
- a portable information processing device such as a mobile phone or a smartphone is exemplified as the user device 20, but the specific form of the user device 20 is arbitrary, and examples of each of the above-described forms are exemplified. Not limited to. For example, a portable or stationary personal computer may be used as the user device 20.
- the storage device 14 is a recording medium that can be read by the processing device 12, and examples thereof include a ROM and a RAM.
- Applications Disks Blu-ray (registered trademark) disks, smart cards, flash memory devices (for example, cards, sticks, key drives), CD-ROMs (Compact Disc-ROMs), registers, removable disks, hard disks, floppies (registration) Trademarks) Disks, magnetic strips, databases, servers and other suitable storage media.
- the program may be transmitted from the network NW.
- the program may also be transmitted from the communication network via a telecommunication line.
- the storage device 24 is also the same as the storage device 14.
- LTE Long Term Evolution
- LTE-A Long Term Evolution-Advanced
- SUPER 3G IMT-Advanced
- 4G 5G
- FRA Full Radio Access
- W-CDMA registered trademark
- GSM registered trademark
- CDMA2000 Code Division Multiple Access 2000
- UMB Universal Mobile Broadband
- IEEE 802.11 Wi-Fi
- IEEE 802.16 WiMAX
- IEEE 802.20 UWB (Ultra-WideBand)
- Bluetooth® and other suitable It may be applied to systems that utilize the system and / or next-generation systems that are extended based on them.
- the described information, signals, and the like may be represented using any of a variety of different techniques.
- data, instructions, commands, information, signals, bits, symbols, chips, etc. that may be referred to throughout the above description are voltages, currents, electromagnetic waves, magnetic fields or magnetic particles, light fields or photons, or any of these. It may be represented by a combination of.
- the terms described herein and / or the terms necessary for understanding the present specification may be replaced with terms having the same or similar meanings.
- each of the functions illustrated in FIGS. 2, 11, 13, 16 and 17 is realized by any combination of hardware and software.
- each function may be realized by a single device, or may be realized by two or more devices configured as separate bodies from each other.
- the program exemplified in each of the above-described embodiments is called a software, firmware, middleware, microcode or hardware description language, or an instruction, instruction set, code, code segment regardless of whether it is called by another name.
- Program code, subprograms, software modules, applications, software applications, software packages, routines, subroutines, objects, executable files, execution threads, procedures or functions, etc. should be broadly interpreted. Further, software, instructions, and the like may be transmitted and received via a transmission medium.
- the software uses wired technology such as coaxial cable, fiber optic cable, twisted pair and digital subscriber line (DSL) and / or wireless technology such as infrared, wireless and microwave to websites, servers, or other When transmitted from a remote source, these wired and / or wireless technologies are included within the definition of transmission medium.
- wired technology such as coaxial cable, fiber optic cable, twisted pair and digital subscriber line (DSL) and / or wireless technology such as infrared, wireless and microwave to websites, servers, or other
- the information, parameters, etc. may be represented by absolute values, relative values from predetermined values, or other corresponding information. May be good.
- the radio resource may be indexed.
- the base station can accommodate one or more (eg, three) cells (also referred to as sectors). When a base station accommodates multiple cells, the entire coverage area of the base station can be divided into multiple smaller areas, each smaller area being a base station subsystem (eg, small indoor base station RRH: Remote). Communication services can also be provided by Radio Head).
- the term “cell” or “sector” refers to a part or all of the coverage area of a base station and / or base station subsystem that provides communication services in this coverage.
- the terms “base station,” “eNB,” “cell,” and “sector” may be used interchangeably herein.
- a base station may be referred to by terms such as a fixed station, a NodeB, an eNodeB (eNB), an access point, a femtocell, and a small cell.
- the user device 20 may be a mobile station.
- Mobile stations can be subscriber stations, mobile units, subscriber units, wireless units, remote units, mobile devices, wireless devices, wireless communication devices, remote devices, mobile subscriber stations, access terminals, mobile terminals, wireless, depending on the trader. It may also be referred to as a terminal, remote terminal, handset, user agent, mobile client, client, or some other suitable term.
- connection means any direct or indirect connection or connection between two or more elements. It can include the presence of one or more intermediate elements between two elements that are “connected” to each other.
- the connections between the elements may be physical, logical, or a combination of these.
- the two elements are by using one or more wires, cables and / or printed electrical connections, and, as some non-limiting and non-comprehensive examples, radio frequencies. It can be considered to be “connected” to each other by using electromagnetic energies such as electromagnetic energies having wavelengths in the region, microwave region and light (both visible and invisible) regions.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
サーバ装置は、表示装置に表示される画面の種別ごとに前記表示装置に表示された画面の表示時間の第1統計値を算出することにより、複数種別の画面にそれぞれ対応する複数の第1統計値を生成する第1統計処理部と、前記画面の種別ごとに、前記複数の第1統計値のうち当該種別の画面について算出された第1統計値に基づいて、ユーザの意識が当該種別の画面に集中しているかを判定する第1判定部と、前記複数種別の画面のうち、前記第1判定部による、対応する判定結果が肯定となる画面の種別を識別する画面識別情報を含むリストを生成する生成部と、を備える。
Description
本発明は、情報生成装置、及び制御システムに関する。
従来、ユーザ装置におけるユーザの操作履歴に基づいて、ユーザの操作を補助する補助情報を提示するサービスが普及している。ユーザの操作には、表示装置に表示される画面内の項目に対して文字列を入力するユーザの入力操作、及び画面内の複数の項目から何れかの項目を選択するユーザの選択操作が含まれる。例えば、特許文献1には、ユーザの操作パターンを分析して困惑状態と判定された場合に、操作方法の補助情報を提供することが開示されている。
しかしながら、上述した従来技術では、ユーザの意識が画面に集中している場合に補助情報を提供すると、ユーザ集中がそがれるという問題があった。
以上の課題を解決するために、本発明の好適な態様にかかる情報生成装置は、表示装置に表示される画面の種別ごとに前記表示装置に表示された画面の表示時間の第1統計値を算出することにより、複数種別の画面にそれぞれ対応する複数の第1統計値を生成する第1統計処理部と、前記画面の種別ごとに、前記複数の第1統計値のうち当該種別の画面について算出された第1統計値に基づいて、ユーザの意識が当該種別の画面に集中しているかを判定する第1判定部と、前記複数種別の画面のうち、前記第1判定部による、対応する判定結果が肯定となる画面の種別を識別する画面識別情報を含むリストを生成する生成部と、を備える。
以上の課題を解決するために、本発明の好適な態様にかかる制御システムは、前記情報生成装置と、各々が表示装置を備え、前記情報生成装置と通信可能な複数の情報処理装置と、を備える制御システムであって、前記複数の情報処理装置の各々は、前記情報生成装置から前記リストを取得する取得部と、前記表示装置に表示されている画面の種別を示す画面識別情報が前記リストに含まれる場合、前記ユーザの操作を補助する補助情報を前記ユーザに提供しないと決定し、前記表示装置に表示されている画面の種別を示す画面識別情報が前記リストに含まれない場合、前記操作の状況に応じて前記補助情報を前記ユーザに提供すると決定する決定部と、前記決定部が前記補助情報を前記ユーザに提供すると決定した場合、前記補助情報に基づく画像を前記表示装置に表示させる表示制御部と、を備える。
本発明によれば、ユーザの意識が画面に集中している場合に、補助情報を提供することを低減することができる。
1.第1実施形態
図1は、本発明の第1実施形態にかかる制御システム1の全体構成を示すブロック図である。図1に示すように、制御システム1は、サーバ装置10と、ユーザU_1~U_mがそれぞれ所持するユーザ装置20_1~20_m(mは2以上の整数)と、ネットワークNWとを備える。サーバ装置10が、「情報生成装置」の一例である。ユーザ装置20が、「情報処理装置」の一例である。
図1は、本発明の第1実施形態にかかる制御システム1の全体構成を示すブロック図である。図1に示すように、制御システム1は、サーバ装置10と、ユーザU_1~U_mがそれぞれ所持するユーザ装置20_1~20_m(mは2以上の整数)と、ネットワークNWとを備える。サーバ装置10が、「情報生成装置」の一例である。ユーザ装置20が、「情報処理装置」の一例である。
以下の説明では、同種の要素を区別する場合には、ユーザ装置20_1、ユーザ装置20_2、ユーザU_1、ユーザU_2のような参照符号を使用する。一方、同種の要素の区別が不要な場合には、即ち、任意の要素を示す場合には、ユーザ装置20、ユーザUのように、添え字を省略する。
サーバ装置10は、ユーザ装置20上で動作するアプリケーションソフトウェアを実行した場合、ユーザUの操作を補助する補助情報をユーザUに提供するか否かを制御する。アプリケーションは、「ソフトウェア」の一例である。アプリケーションは、アプリケーションが動作するOS(Operating System)によっては、例えば、「パッケージ」と称されることがある。同様に、アプリケーションが管理する画面は、「アクティビティ」と称されることがある。
補助情報は、例えば、ユーザUがアプリケーションの操作方法に困惑している場合に参考となる情報である。具体的には、補助情報は、操作方法の具体的な説明を示す文字情報又は画像情報である。
ユーザ装置20は、例えば、スマートフォン又はタブレット端末等の可搬型の端末装置である。ただし、ユーザ装置20としては、任意の情報処理装置を採用することができ、例えば、パーソナルコンピュータ等の端末型の情報機器であってもよい。
図2は、制御システム1の構成を例示する図である。図2では、ユーザ装置20_1~20_mのうちのユーザ装置20_1を代表として表示してある。サーバ装置10は、処理装置12、記憶装置14、及び、通信装置16を備える。処理装置12、記憶装置14、及び、通信装置16は、情報を通信するための複数のバス19により相互にアクセス可能である。バス19は、単一のバスによって構成されてもよい。装置間において異なる複数のバスが用いられてもよい。
処理装置12は、サーバ装置10の全体を制御するプロセッサであり、例えば単数又は複数のチップで構成される。処理装置12は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置(CPU:Central Processing Unit)によって構成される。なお、処理装置12の機能の一部又は全部を、DSP(Digital Signal Processor)、ASIC(Application Specific Integrated Circuit)、PLD(Programmable Logic Device)、FPGA(Field Programmable Gate Array)等のハードウェアによって実現してもよい。処理装置12は、各種の処理を並列的又は逐次的に実行する。
記憶装置14は、処理装置12が読取可能な記録媒体であり、処理装置12が実行する制御プログラムPR1を含む複数のプログラム、処理装置12が使用する各種のデータ、操作ログ142、及び、第1実施形態における処理装置12によって生成される除外リストELを記憶する。記憶装置14は、例えば、ROM(Read Only Memory)、EPROM(Erasable Programmable ROM)、EEPROM(Electrically Erasable Programmable ROM)、RAM(Random Access Memory)等の記憶回路の1種類以上で構成される。
図3Aは、操作ログ142の一部の記憶内容の一例を示す図である。図3Bは、図3Aの続きを示す図である。より詳細には、図3Bは、図3Aでは示さなかった操作ログ142の残余の記憶内容の一例を示す図である。操作ログ142は、所定期間、例えば1時間における、ユーザ装置20_1からユーザ装置20_mまでのそれぞれの画面の表示時間を示す。図3A及び図3Bに示す操作ログ142は、レコード1421-1~レコード1421-12を有する。図3A及び図3Bに示される操作ログ142は、発生した操作ごとに、装置ID(IDentifier)、日時、操作種別、アプリケーションの種別(アプリケーション名)、及び画面種別(画面名)が互いに対応付けられたレコード(組)を有する情報である。
端末IDは、ユーザ装置20_1から20_mの中から、操作が発生したユーザ装置20を識別する識別情報である。識別情報は、例えば、UID(User IDentifier)、MAC(Media Access Control)アドレス、加入者認証モジュール(SIM:Subscriber Identity Module)に記録されたIMSI(International Mobile Subscriber Identity)、又はユーザID等である。UIDは、サービスを提供する事業者が、ユーザごとに割り当てたIDである。第1実施形態では、説明の簡略化のため、端末IDを、ユーザ装置20の添え字を用いて示す。
日時は、操作が発生した日時を示す。操作種別は、発生した操作の種別を示す。操作種別には、フォアグラウンドとバックグラウンドとがある。フォアグラウンドが発生した日時からバックグラウンドが発生した日時までが、画面の表示時間である。アプリケーション名は、操作が発生したアプリケーションの名称である。画面名は、画面の名称である。画面名は、画面と1対1で対応している。
前述のOSにおいて、アプリケーション名は、互いに異なるアプリケーションであっても同一の名称となる場合がある。一方、パッケージの名称は、アプリケーションを一意に識別する識別子である。従って、パッケージの名称は、「ソフトウェアを識別するソフトウェア識別情報」の一例である。ただし、以下では、説明を容易にするため、互いに異なるアプリケーションであればアプリケーション名も互いに異なる前提であるとして説明する。また、アプリケーションを一意に識別する識別子が、アプリケーション名であるとして説明する。画面名は、「画面の種別を識別する画面識別情報」の一例である。以下の記載では、画面の種別を、単に「画面名」と称する。
前述のOSにおいて、アプリケーション名は、互いに異なるアプリケーションであっても同一の名称となる場合がある。一方、パッケージの名称は、アプリケーションを一意に識別する識別子である。従って、パッケージの名称は、「ソフトウェアを識別するソフトウェア識別情報」の一例である。ただし、以下では、説明を容易にするため、互いに異なるアプリケーションであればアプリケーション名も互いに異なる前提であるとして説明する。また、アプリケーションを一意に識別する識別子が、アプリケーション名であるとして説明する。画面名は、「画面の種別を識別する画面識別情報」の一例である。以下の記載では、画面の種別を、単に「画面名」と称する。
図3A及び図3Bに示す操作ログ142は、1)メールアプリケーションが管理するメール作成画面、2)電話アプリケーションが管理する通話画面及び3)ダイヤルパッド画面、4)ホームアプリケーションが管理するホーム画面、5)動画再生アプリケーションが管理する動作再生画面、並びに、6)音楽再生アプリケーションが管理する音楽再生画面という6個の画面名を示す。
図4は、除外リストELの記憶内容の一例を示す図である。除外リストELは、補助情報HIがユーザUに提供されない画面名を示す。図4に示す除外リストELは、互いに対応付けられたアプリケーション名及び画面名が記録されたデータである。図4に示す除外リストELは、レコードEL1-1を有する。レコードEL-1の例では、メールアプリケーションが管理するメール作成画面において、補助情報HIがユーザUに提供されないことを示す。
説明を図2に戻す。通信装置16は、移動体通信網又はインターネット等のネットワークNWを介して他の装置と通信する機器である。通信装置16は、例えばネットワークデバイス、ネットワークコントローラ、ネットワークカード又は通信モジュールとも表記される。通信装置16は、ネットワークNWを介して、例えば、ユーザ装置20と通信可能である。
ユーザ装置20は、処理装置22、記憶装置24、表示装置26、操作装置27、及び、通信装置28を備える。処理装置22、記憶装置24、表示装置26、操作装置27、及び、通信装置28は、情報を通信するための1又は複数のバス29により相互にアクセス可能である。複数のバス29は、単一のバスであってもよい。装置間において異なる複数のバスが用いられてもよい。
処理装置22は、ユーザ装置20の全体を制御するプロセッサであり、例えば単数又は複数のチップで構成される。処理装置22は、例えば、周辺装置とのインタフェース、演算装置及びレジスタ等を含む中央処理装置によって構成される。なお、処理装置22の機能の一部又は全部を、DSP、ASIC、PLD、FPGA等のハードウェアによって実現してもよい。処理装置22は、各種の処理を並列的又は逐次的に実行する。
記憶装置24は、処理装置22が読取可能な記録媒体である。記憶装置24は、処理装置22が実行する制御プログラムPR2を含む複数のプログラム、操作ログ142_1、除外リストEL、及び処理装置22が使用する各種のデータを記憶する。記憶装置24は、例えば、ROM、EPROM、EEPROM、RAM等の記憶回路の1種類上によって構成される。
操作ログ142_1は、ユーザ装置20_1における画面の表示時間を示す。この画面は、プログラムモジュールによって表示装置26に表示される。プログラムモジュールは、記憶装置24に記憶されるプログラムの一部である。プログラムモジュールは、まとまりのある機能を有する。画面を表示装置26に表示させるプログラムモジュールは、例えば、「アクティビティクラス」と称されることがある。
図3A及び図3Bに示した操作ログ142を用いると、操作ログ142_1は、レコード1421-1~9と同一の内容のレコードが記憶されている。除外リストELは、サーバ装置10から受信された情報である。補助情報HIは、ユーザUの操作を補助する情報であり、ユーザUの操作の状況に応じて提供される。
図3A及び図3Bに示した操作ログ142を用いると、操作ログ142_1は、レコード1421-1~9と同一の内容のレコードが記憶されている。除外リストELは、サーバ装置10から受信された情報である。補助情報HIは、ユーザUの操作を補助する情報であり、ユーザUの操作の状況に応じて提供される。
図5は、補助情報HIの記憶内容の一例を示す図である。図5に示す補助情報HIは、電話アプリケーションが管理するダイヤルパッド画面の操作方法のヒントを示す。
説明を図2に戻す。表示装置26は、処理装置22による制御のもとで各種の画像を表示する。例えば液晶表示パネル、又は有機EL(Electro Luminescence)表示パネル等の各種の表示パネルが表示装置26として好適に利用される。
操作装置27は、ユーザ装置20が使用する情報を受け付けるための機器である。操作装置27は、利用者による操作を受け付ける。具体的には、操作装置27は、符号(数字及び文字等)を入力するための操作と、表示装置26が表示するアイコンを選択するための操作とを受け付ける。例えば、表示装置26の表示面に対するユーザの指の接触を検出するタッチパネルが操作装置27として好適である。以下の説明では、操作装置27は、タッチパネルであるとする。なお、利用者が操作可能な操作子を操作装置27が含んでもよい。操作子は、例えば、タッチペンである。
通信装置28は、移動体通信網又はインターネット等のネットワークNWを介して他の装置と通信する機器である。通信装置28は、例えばネットワークデバイス、ネットワークコントローラ、ネットワークカード又は通信モジュールとも表記される。通信装置28は、ネットワークNWを介して、例えば、サーバ装置10と通信可能である。
1.1.第1実施形態の機能
処理装置12は、記憶装置14から制御プログラムPR1を読み取り、制御プログラムPR1を実行することによって、ログ取得部122、第1統計処理部124、第1判定部126、除外リスト生成部128、及び、通信制御部129として機能する。同様に、処理装置22は、記憶装置24から制御プログラムPR2を実行することによって、除外リスト取得部222、決定部226、及び、表示制御部228として機能する。なお、除外リスト生成部128は、「生成部」の一例である。また、除外リスト取得部222は、「取得部」の一例である。
図6を用いて、処理装置12及び処理装置22によって実現される機能について説明する。
処理装置12は、記憶装置14から制御プログラムPR1を読み取り、制御プログラムPR1を実行することによって、ログ取得部122、第1統計処理部124、第1判定部126、除外リスト生成部128、及び、通信制御部129として機能する。同様に、処理装置22は、記憶装置24から制御プログラムPR2を実行することによって、除外リスト取得部222、決定部226、及び、表示制御部228として機能する。なお、除外リスト生成部128は、「生成部」の一例である。また、除外リスト取得部222は、「取得部」の一例である。
図6を用いて、処理装置12及び処理装置22によって実現される機能について説明する。
図6は、制御システム1の機能の概要を示す図である。図6では、図示の簡略化のため、ユーザ装置20_1~ユーザ装置20_mのうち、ユーザ装置20_1及びユーザ装置20_2を代表として表示してある。
ログ取得部122は、それぞれのユーザ装置20_1~20_mから、操作ログ142を取得する。図6の例では、ログ取得部122は、ユーザ装置20_1から操作ログ142_1を取得し、ユーザ装置20_2から操作ログ142_2を取得する。
第1統計処理部124は、操作ログ142に基づいて、画面名ごとに画面の表示時間の統計値を算出する。表示時間の統計値は、画面の表示時間の特徴を要約した数値である。表示時間の統計値は、例えば、平均値、中央値、又は、平均値に標準偏差の2倍の値を加算することで得られた値である。第1統計処理部124は、例えば、画面の表示時間から表示時間の平均値を算出する。又は、同じ画面が異なるタイミングにおいて表示されたとき、第1統計処理部124は、あるタイミングにおける画面の表示時間の長さと、もう一つのタイミングにおける画面の表示時間の長さを互いに比較することにより、表示時間の中央値を特定してもよい。以下の説明では、表示時間の統計値が、表示時間の平均値であるとして説明する。
図6の例では、第1統計処理部124は、例えば、メールアプリケーションが管理するメール作成画面の表示時間の平均値、電話アプリケーションが管理する通話画面の表示時間の平均値、音楽再生アプリケーションが管理する音楽再生画面の表示時間の平均値をそれぞれ算出する。
第1判定部126は、画面名ごとに算出された表示時間の平均値に基づいて、画面名ごとにユーザUの意識が画面に集中しているかを判定する。第1判定部126は、以下の6つの態様の何れかを取り得る。
第1判定部126の第1の態様において、第1判定部126は、表示時間の平均値が所定値を超えた画面名を、ユーザUの意識が集中している画面の画面名であると判定する。所定値は、例えば、以下に示す2つの態様がある。所定値の第1態様は、固定値である。所定値の第2態様は、複数の画面の表示時間の平均値に基づいて決定した値である。複数の画面の表示時間の平均値は、例えば、全画面の表示時間の平均値である。また、所定値を決定するために用いない画面を予め決めておいてもよい。
第1判定部126の第2の態様において、第1判定部126は、表示時間の平均値の大きい順から上位所定個の画面名を、ユーザの意識が集中している画面の画面名であると判定する。
第1判定部126の第3態様では、第1統計処理部124は、画面名ごとに、画面が表示された時刻を含む単位期間内において起動されたアプリケーションの種別数の統計値を特定する。起動されたアプリケーションの種別数の統計値は、起動されたアプリケーションの種別数の平均値又は中央値である。以下の説明では、起動されたアプリケーションの種別数の統計値が、起動されたアプリケーションの種別数の平均値であるとして説明する。画面が表示された時刻を含む単位期間は、より詳細には、画面が表示された開始時刻から終了時刻までの期間における何れかの時刻を含む時間である。単位期間は、どのような長さを持っていてもよく、例えば、10分又は1時間等である。
図7は、アプリケーションの種別数の平均値の特定の一例を示す図である。図7に示す例では、10:00:00から11:00:00までの単位期間1と、11:00:00から12:00:00までの単位期間2とについて、あるユーザ装置20における画面の表示時間を示す。図7では、ユーザ装置20は、10:00:00から12:00:00までの期間に、画面名として画面A、画面B、画面C、画面D、及び、画面Eを表示したとことを想定する。説明の簡略化のため、画面A、画面B、画面C、画面D、及び、画面Eは、互いに異なるアプリケーションによって管理されているとする。また、画面A、画面B、画面C、画面D、及び、画面Eが表示される場合に、それぞれの画面を管理するアプリケーションが起動しているとする。
単位期間1では、ユーザ装置20は、画面A及び画面Bを表示しており、単位期間2では、ユーザ装置20は、画面A、画面C、画面D、及び画面Eを表示している。第1統計処理部124は、画面A及び画面Bが表示されている時刻を含む単位期間1において、起動されたアプリケーションの種別数を、2と算出する。同様に、第1統計処理部124は、画面A、画面C、画面D、及び画面Eが表示されている時刻を含む単位期間2において、起動されたアプリケーションの種別数を、4と算出する。単位期間1および2において画面Aが表示されたので、単位期間1における起動されたアプリケーションの種別数が2であり、単位期間2における起動されたアプリケーションの種別数が4である。このため、第1統計処理部124は、起動されたアプリケーションの種別数の平均値を、3と算出する。同様に、単位期間1においてのみ、画面Bが表示されたので、単位期間1における起動されたアプリケーションの種別数が2である。このため、第1統計処理部124は、起動されたアプリケーションの種別数の平均値を、2と算出する。同様に、画面C、画面D、及び画面Eについて、単位期間2における起動されたアプリケーションの種別数が4であるため、第1統計処理部124は、起動されたアプリケーションの種別数の平均値を、4と算出する。
説明を図2に戻す。第1判定部126の第3の態様において、第1判定部126は、画面名ごとの表示時間の平均値、及び、画面名ごとに起動されたアプリケーションの種別数に基づいて、画面名ごとにユーザUの意識が画面に集中しているか否かを判定する。判定方法は、例えば、以下に示す2つの方法がある。第1の方法において、第1判定部126は、表示時間の平均値が所定値を上回り、かつ、起動されたアプリケーションの種別数の平均値が所定値未満である場合、ユーザの意識が集中している画面の画面名であると判定する。第2の方法において、第1判定部126は、表示時間の平均値の大きい順から上位所定個の画面名のうち、起動されたアプリケーションの種別数の平均値が所定値未満である画面の種別を、ユーザの意識が集中している画面の種別であると判定する。
第1判定部126の第4の態様では、第1統計処理部124は、画面名ごとに、画面の表示時間を含む単位期間内におけるユーザUの操作回数の統計値を特定する。ユーザUの操作回数は、例えば、ユーザUがタッチパネルをタップした回数、及び、ユーザUがタッチパネルをフリックした回数である。操作回数の統計値は、例えば、操作回数の平均値又は中央値である。以下の説明では、操作回数の統計値が、操作回数の平均値として説明する。
図8は、操作回数の統計値の特定の一例を示す図である。図8に示す例では、図7の例において、単位期間1の操作回数と、単位期間2の操作回数とを示す。単位期間1では、ユーザUの操作回数は600回であり、単位期間2では、ユーザUの操作回数は200回であるとする。さらに、操作回数の統計値を、起動されたアプリケーションの種別数の平均値とする。
第1統計処理部124は、画面Aについて、単位期間1における操作回数が600回、単位期間2における操作回数が200回であるため、操作回数の平均値を、400回と算出する。同様に、第1統計処理部124は、画面Bについて、単位期間1における操作回数が600回であるため、操作回数の平均値を、600回と算出する。同様に、第1統計処理部124は、画面C、画面D、及び画面Eについて、単位期間2における操作回数が200回であるため、操作回数の平均値を、200回と算出する。
説明を図2に戻す。第1判定部126の第4の態様において、第1判定部126は、画面名ごとの表示時間の平均値、及び画面名ごとの操作回数に基づいて、画面名ごとにユーザの意識が画面に集中しているか否かを判定する。判定方法は、例えば、以下に示す2つの方法がある。第1の方法において、第1判定部126は、表示時間の平均値が所定値を上回り、かつ、操作回数が所定値以上である場合、当該画面が、ユーザの意識が集中している画面の画面名であると判定する。第2の方法において、第1判定部126は、表示時間の平均値の大きい順から上位所定個の画面名のうち、操作回数が所定値以上である画面名を、ユーザの意識が集中している画面の画面名であると判定する。
第1判定部126の第5の態様において、第1判定部126は、画面名ごとに、画面が表示された時刻を含む単位期間内において呼び出された動画ライブラリ又は静止画ライブラリの呼び出し回数の統計値を算出する。動画ライブラリは、例えば、MPEG(Moving Picture Experts Group)形式でエンコードされた動画情報を、デコードするライブラリである。静止画ライブラリは、例えば、JPEG(Joint Photographic Experts Group)、GIF(Graphics Interchange Format)、又は、PNG(Portable Network Graphics)形式でエンコードされた静止画情報を、デコードするライブラリである。例えば、アプリケーションは、エンコードされた動画情報を受け付けた場合、動画ライブラリを呼び出して、デコードされた動画情報を取得する。
そして、第1判定部126は、画面名ごとの表示時間の統計値、及び、画面名ごとの動画ライブラリ又は静止画ライブラリの呼び出し回数の統計値に基づいて、画面名ごとにユーザの意識が画面に集中しているか否かを判定する。判定方法は、例えば、以下に示す2つの方法がある。第1の方法において、第1判定部126は、表示時間の平均値が所定値を上回り、かつ、呼び出し回数が所定値以上である場合、ユーザの意識が画面に集中している画面の画面名であると判定する。第2の方法において、第1判定部126は、表示時間の平均値の大きい順から上位所定個の画面名のうち、呼び出し回数が所定値以上である画面名を、ユーザの意識が集中している画面の画面名であると判定する。
第1判定部126の第6の態様は、第1判定部126の第1の態様から第5の態様の組み合わせである。例えば、第3の態様と第4の態様とを組み合わせた例として、第1判定部126は、表示時間の統計値が所定値を上回り、起動されたアプリケーションの種別数の平均値が所定値未満であり、かつ、呼び出し回数が所定値以上である場合、ユーザの意識が集中している画面の画面名であると判定する。
以下では、第1実施形態では、第1判定部126は第1の態様により、ユーザUの意識が集中している画面の画面名であると判定するとして説明する。
以下では、第1実施形態では、第1判定部126は第1の態様により、ユーザUの意識が集中している画面の画面名であると判定するとして説明する。
図6の例では、第1判定部126は、画面名ごとに算出された表示時間の平均値に基づいて、メールアプリケーションが管理するメール作成画面、及び、動画再生アプリケーションが管理する動画再生画面を、ユーザUが集中している画面の画面名であると判定する。
除外リスト生成部128は、除外リストELを生成する。除外リストELは、第1判定部126の判定結果が肯定となる画面名を含む。図6の例では、除外リスト生成部128は、メールアプリケーションが管理するメール作成画面の画面名「メール作成画面」、及び、動画再生アプリケーションが管理する動画再生画面の画面名「動作再生画面」を含む除外リストELを生成する。
通信制御部129は、除外リスト生成部128が生成した除外リストELを、ユーザ装置20に送信する。
除外リスト取得部222は、サーバ装置10から除外リストELを取得する。図6の例では、ユーザ装置20_1及びユーザ装置20_2の除外リスト取得部222は、サーバ装置10から除外リストELを取得する。
決定部226は、表示装置26に表示されている画面(画面名)が、除外リストELに含まれる場合、補助情報HIをユーザUに提供しないと決定する。一方、決定部226は、表示装置26に表示されている画面(画面名)が、除外リストELに含まれない場合、操作の状況に応じて補助情報HIをユーザUに提供すると決定する。操作の状況を示す情報は、例えば、後述するbag-of-words特徴量である。図6の例では、ユーザ装置20_1の表示装置26には、メールアプリケーションが管理するメール作成画面が表示されており、除外リストELには、「メール作成画面」が含まれている。従って、ユーザ装置20_1の決定部226は、補助情報HIをユーザに提供しないと決定する。一方、ユーザ装置20_2の表示装置26には、動画再生アプリケーションが管理するダイヤルパッド画面が表示されており、除外リストELには、「ダイヤルパッド画面」は含まれていない。従って、ユーザ装置20_2の決定部226は、補助情報HIを、ユーザU_2の操作の状況に応じて補助情報HIをユーザUに提供すると決定する。
表示制御部228は、補助情報HIに基づく画像を表示装置26に表示させる。例えば、ユーザ装置20_2の表示制御部228は、補助情報HIに基づく画像を表示装置26に表示させる。
1.2.第1実施形態の動作
次に、制御システム1が実施する処理について、図9及び図10を用いて説明する。サーバ装置10は、図9に示す除外リスト生成処理を実行する。ユーザ装置20は、図10に示す補助情報提供処理を実行する。
次に、制御システム1が実施する処理について、図9及び図10を用いて説明する。サーバ装置10は、図9に示す除外リスト生成処理を実行する。ユーザ装置20は、図10に示す補助情報提供処理を実行する。
図9は、除外リスト生成処理を示すフローチャートである。サーバ装置10は、全ユーザの操作ログ142を、各ユーザ装置20_1~20_mから取得する(ステップS1)。次に、サーバ装置10は、各操作ログ142から、同一装置IDにおいて、操作種別がフォアグラウンド、バックグラウンドの順に連続するレコードの組を抽出する(ステップS2)。図3A及び図3Bの例を用いると、レコード1421-1及びレコード1421-2の組、レコード1421-3及びレコード1421-4の組、並びに、レコード1421-5及びレコード1421-6の組が、フォアグラウンド、バックグラウンドの順に連続している。
そして、サーバ装置10は、抽出したレコードの組から、画面の表示時間を算出する(ステップS3)。図3A及び図3Bの例では、サーバ装置10は、レコード1421-1及びレコード1421-2の組から、1回目のメール作成画面の表示時間を、2016年8月1日10時0分20秒から2016年8月1日10時0分00秒を減算することにより、20秒間と算出する。同様に、サーバ装置10は、レコード1421-3及びレコード1421-4の組から、1回目の通話画面の表示時間を、40秒間と算出する。同様に、サーバ装置10は、レコード1421-5及びレコード1421-6の組から、2回目のメール作成画面の表示時間を、4分間と算出する。
次に、サーバ装置10は、画面名ごとに画面の表示時間の平均値を算出する(ステップS4)。図3A及び図3Bの例では、サーバ装置10は、メール作成画面の表示時間の平均値を、20秒間と4分間の平均値である2分10秒間と算出する。
そして、サーバ装置10は、操作ログ142に出現する画面名のうち、選択されていない画面名を選択し(ステップS5)、選択した画面名に該当する画面の表示時間の平均値が所定値を超えたか否かを判定する(ステップS6)。ステップS6の判定結果が肯定の場合、サーバ装置10は、選択した画面名を、除外リストELに追加する(ステップS7)。ステップS7の処理の終了後、又は、ステップS6の判定結果が否定の場合、サーバ装置10は、全ての画面名を選択したか否かを判定する(ステップS8)。ステップS8の判定結果が否定の場合、すなわちまだ選択していない画面名がある場合、サーバ装置10は、処理をステップS5に戻す。一方、ステップS8の判定結果が肯定の場合、サーバ装置10は、除外リストELを、各ユーザ装置20_1~20_mに送信する(ステップS9)。なお、除外リストELの内容は、複数のユーザ装置20間で共通である。ステップS9の処理終了後、サーバ装置10は、図9に示す一連の処理を終了する。
図10は、補助情報提供処理を示すフローチャートである。ユーザ装置20_xは、補助情報提供処理を、定期的に、又は、特定のアプリケーションを起動したときに実施する。xは、1からmまでの整数である。定期的とは、どのような時間間隔でもよく、例えば、10秒である。
ユーザ装置20_xは、操作ログ142_xから、現在フォアグラウンドの画面名を特定する(ステップS11)。具体的には、ユーザ装置20_xは、操作ログ142_xのうち、日時が最も新しいレコードの画面名を取得することにより、現在フォアグラウンドの画面名を特定する。
次に、ユーザ装置20_xは、取得した画面名が除外リストELに含まれるか否かを判定する(ステップS12)。ステップS12の判定結果が否定の場合、ユーザ装置20_xは、図10に示す一連の処理を終了する。
一方、ステップS12の判定結果が肯定の場合、ユーザ装置20_xは、操作ログ142_xから、bag-of-words特徴量を抽出する(ステップS13)。bag-of-wordsは、ある文書における単語の出現回数を単語単位で計数するアルゴリズムである。単語ごとに当該出現回数を比較することにより、複数の文書間の類似性を測定することができる。bag-of-words特徴量は、単語ごとに計数された単語の出現回数である。ステップS13の処理において、ユーザ装置20_xは、画面名を一つの単語とみなして、画面名ごとに該当する画面の出現回数を計数する。
一方、ステップS12の判定結果が肯定の場合、ユーザ装置20_xは、操作ログ142_xから、bag-of-words特徴量を抽出する(ステップS13)。bag-of-wordsは、ある文書における単語の出現回数を単語単位で計数するアルゴリズムである。単語ごとに当該出現回数を比較することにより、複数の文書間の類似性を測定することができる。bag-of-words特徴量は、単語ごとに計数された単語の出現回数である。ステップS13の処理において、ユーザ装置20_xは、画面名を一つの単語とみなして、画面名ごとに該当する画面の出現回数を計数する。
次に、ユーザ装置20_xは、予め訓練した推論モデルに、抽出したbag-of-words特徴量を入力し、推論モデルの出力として、ユーザU_xが困惑しているか否かを示す判定結果を取得する(ステップS14)。この推論モデルは、ユーザU_xが困惑していることを出力する。さらに、この推論モデルは、困惑している内容を出力する。困惑している内容は、例えば、ある画面の使い方が分からず困惑していることである。
そして、ユーザ装置20_xは、取得した判定結果が、ユーザU_xが困惑していることを示すか否かを判定する(ステップS15)。ステップS15の判定結果が否定の場合、ユーザ装置20_xは、図10に示す一連の処理を終了する。
一方、ステップS15の判定結果が肯定の場合、ユーザ装置20_xは、ユーザU_xが困惑していることに対応する補助情報HIをユーザUに提供すると決定する(ステップS16)。そして、ユーザ装置20_xは、補助情報HIに基づく画像を表示装置26に表示する(ステップS17)。ステップS17の処理終了後、ユーザ装置20_xは、図10に示す一連の処理を終了する。
一方、ステップS15の判定結果が肯定の場合、ユーザ装置20_xは、ユーザU_xが困惑していることに対応する補助情報HIをユーザUに提供すると決定する(ステップS16)。そして、ユーザ装置20_xは、補助情報HIに基づく画像を表示装置26に表示する(ステップS17)。ステップS17の処理終了後、ユーザ装置20_xは、図10に示す一連の処理を終了する。
1.3.第1実施形態の効果
以上説明したように、第1実施形態によれば、情報生成装置(例えば、「サーバ装置」)は、表示装置に表示される画面の種別ごとに前記表示装置に表示された画面の表示時間の第1統計値を算出することにより、複数種別の画面にそれぞれ対応する複数の第1統計値を生成する第1統計処理部と、前記画面の種別ごとに、前記複数の第1統計値のうち当該種別の画面について算出された第1統計値に基づいて、ユーザの意識が当該種別の画面に集中しているかを判定する第1判定部と、前記複数種別の画面のうち、前記第1判定部による、対応する判定結果が肯定となる画面の種別を識別する画面識別情報を含むリスト(例えば、「除外リスト」)を生成する生成部(例えば、「除外リスト生成部」)と、を備える。
以上説明したように、第1実施形態によれば、情報生成装置(例えば、「サーバ装置」)は、表示装置に表示される画面の種別ごとに前記表示装置に表示された画面の表示時間の第1統計値を算出することにより、複数種別の画面にそれぞれ対応する複数の第1統計値を生成する第1統計処理部と、前記画面の種別ごとに、前記複数の第1統計値のうち当該種別の画面について算出された第1統計値に基づいて、ユーザの意識が当該種別の画面に集中しているかを判定する第1判定部と、前記複数種別の画面のうち、前記第1判定部による、対応する判定結果が肯定となる画面の種別を識別する画面識別情報を含むリスト(例えば、「除外リスト」)を生成する生成部(例えば、「除外リスト生成部」)と、を備える。
具体的には、サーバ装置10は、表示装置26に表示される画面ごとの表示時間の平均値に基づいて、画面ごとにユーザUの意識が画面に集中しているかを判定する。次に、サーバ装置10は、判定結果が肯定となる場合、当該画面をユーザUの操作を補助するための補助情報HIを提供しない画面として特定し、特定した画面名を含む除外リストELを生成する。
一般的に、ユーザの意識が画面に集中している場合には、困惑していることが少ないため、補助情報HIを提供する必要性が低い。そこで、第1実施形態では、ユーザ装置20が除外リストELを用いることにより、表示装置26に表示される画面が、ユーザUの意識が集中する画面か否かを判定できる。従って、ユーザ装置20は、ユーザUの意識が画面に集中している場合に補助情報HIを提供することを低減でき、ユーザUの集中がそがれることを抑制することが可能になる。
また、図10に示すように、表示装置26が現在表示している画面名が、除外リストELに含まれる場合には、ステップS13及びステップS14の処理を実行しなくて済む。このため、ユーザ装置20にかかる負荷が減り、ユーザ装置20のバッテリ消費量を抑えることができる。
また、図10に示すように、表示装置26が現在表示している画面名が、除外リストELに含まれる場合には、ステップS13及びステップS14の処理を実行しなくて済む。このため、ユーザ装置20にかかる負荷が減り、ユーザ装置20のバッテリ消費量を抑えることができる。
また、第1判定部126の第1態様において、前記第1判定部は、前記複数の第1統計値のうち、所定値を超える第1統計値に対応する種別の画面を、前記ユーザの意識が集中している種別の画面であると判定する。
具体的には、第1判定部126は、表示時間の平均値が所定値を超えた画面名を、ユーザUの意識が集中している画面の画面名であると判定する。一般的に、ユーザUの意識が画面に集中している場合、この画面の表示時間が長くなる傾向がある。従って、表示時間の平均値が所定値を超えた画面名を特定することにより、ユーザUの意識が集中している画面の画面名を特定することが可能になる。
また、第1判定部126の第3の態様において、第1統計処理部は、前記画面の種別ごとに、当該種別の画面が表示された時刻を含む1又は複数の単位期間を特定し、当該特定した各単位期間内において起動されたソフトウェアの種別数に基づいて第3統計値を算出することにより、前記複数種別の画面にそれぞれ対応する複数の第3統計値を生成する。前記第1判定部は、画面の種別ごとに、対応する第1統計値及び第3統計値に基づいて、前記ユーザの意識が当該種別の画面に集中しているか否かを判定する。
具体的には、第1判定部126は、画面名ごとの表示時間の平均値、及び、画面名ごとの起動されたアプリケーションの種別数に基づいて、画面名ごとにユーザUの意識が画面に集中しているか否かを判定する。一般的に、ユーザUの意識が画面に集中している場合、この画面以外に注意がそがれることが減るため、起動されたアプリケーションの種別数が少なくなる傾向がある。逆に、ユーザUの意識が画面に集中していない場合、換言すれば、ユーザUの意識が散漫している場合、ユーザUは様々なアプリケーションを起動させる傾向がある。従って、第1判定部126が画面名ごとの起動されたアプリケーションの種別数を用いてユーザUの意識が集中しているか否かを判定する。この判定により、画面名ごとの起動されたアプリケーションの種別数を用いない場合と比較して、ユーザUの意識が画面に集中しているか否かの判定精度を向上させることが可能になる。
また、第1判定部126の第4の態様において、前記第1統計処理部は、前記画面の種別ごとに、当該種別の画面が表示された時刻を含む1又は複数の単位期間を特定し、当該特定した各単位期間内における前記ユーザの操作回数に基づいて第4統計値を算出することにより、前記複数種別の画面にそれぞれ対応する複数の第4統計値を生成する。前記第1判定部は、画面の種別ごとに、対応する第1統計値及び第4統計値に基づいて、前記ユーザの意識が当該種別の画面に集中しているか否かを判定する。
具体的には、第1判定部126は、画面名ごとの表示時間の平均値、及び画面名ごとの操作回数に基づいて、画面名ごとにユーザの意識が集中しているか否かを判定する。一般的に、ユーザUの意識が画面に集中している場合、この画面の操作回数が多くなる傾向がある。逆に、ユーザUの意識が散漫している場合、ユーザUの手が止まり、画面の操作回数が減る傾向がある。ユーザUの意識が散漫している場合の例としては、画面の操作方法が不明の場合、又は、テレビを見ながらユーザ装置20を操作している場合がある。従って、第1判定部126が画面名ごとの操作回数を用いてユーザUの意識が画面に集中しているか否かを判定する。この判定により、第1判定部126が画面名ごとの操作回数を用いない場合と比較して、ユーザUの意識が集中しているか否かの判定精度を向上させることが可能になる。
また、第1判定部126の第5の態様において、第1判定部126は、画面名ごとの表示時間の統計値、及び、画面名ごとの動画ライブラリ又は静止画ライブラリの呼び出し回数の統計値に基づいて、画面名ごとにユーザの意識が集中しているか否かを判定する。ユーザUの意識が集中する画面としては、動作再生画面、及び、SNS(Social Networking Service)アプリケーションの投稿画面等がある。一般的に、動作再生画面では、動画ライブラリの呼び出し回数が増える傾向がある。また、投稿画面では、ユーザUが投稿した写真又はイラストの画像を表示するため、動画ライブラリ又は静止画ライブラリの呼び出し回数が増える傾向がある。従って、第1判定部126が画面名ごとの動画ライブラリ又は静止画ライブラリの呼び出し回数を用いてユーザUの意識が画面に集中しているか否かを判定する。この判定により、第1判定部126が画面名ごとの動画ライブラリ又は静止画ライブラリの呼び出し回数を用いない場合と比較して、ユーザUの意識が画面に集中しているか否かの判定精度を向上させることが可能になる。
第1実施形態によれば、制御システムは、情報生成装置と、各々が表示装置を備え、前記情報生成装置と通信可能な複数の情報処理装置(例えば、「ユーザ装置」)と、を備える。前記複数の情報処理装置の各々は、前記情報生成装置から前記リストを取得する取得部と、前記表示装置に表示されている画面の種別を示す画面識別情報が前記リストに含まれる場合、前記ユーザの操作を補助する補助情報を前記ユーザに提供しないと決定し、前記表示装置に表示されている画面の種別を示す画面識別情報が前記リストに含まれない場合、前記操作の状況に応じて前記補助情報を前記ユーザに提供すると決定する決定部と、前記決定部が前記補助情報を前記ユーザに提供すると決定した場合、前記補助情報に基づく画像を前記表示装置に表示させる表示制御部と、を備える。前記制御システムにおいても、ユーザUの意識が集中している画面の画面名を特定することが可能になる。
2.第2実施形態
第1実施形態では、画面名ごとに画面の表示時間の平均値を算出するが、第2実施形態では、さらに、アプリケーションごとに画面の表示時間の平均値を算出する。以下、第2実施形態にかかる制御システム1を説明する。なお、以下に例示する第2実施形態において作用又は機能が第1実施形態と同等である要素については、以上の説明で参照の符号を流用して各々の詳細な説明を適宜に省略する。
第1実施形態では、画面名ごとに画面の表示時間の平均値を算出するが、第2実施形態では、さらに、アプリケーションごとに画面の表示時間の平均値を算出する。以下、第2実施形態にかかる制御システム1を説明する。なお、以下に例示する第2実施形態において作用又は機能が第1実施形態と同等である要素については、以上の説明で参照の符号を流用して各々の詳細な説明を適宜に省略する。
2.1.第2実施形態の機能
図11は、第2実施形態にかかるサーバ装置10の構成を例示する図である。記憶装置14は、除外リストELの替わりに、除外リストELaを記憶する。除外リストELaは、補助情報HIを提供しない画面名、及び、補助情報HIを提供しないアプリケーション名を示す。
図11は、第2実施形態にかかるサーバ装置10の構成を例示する図である。記憶装置14は、除外リストELの替わりに、除外リストELaを記憶する。除外リストELaは、補助情報HIを提供しない画面名、及び、補助情報HIを提供しないアプリケーション名を示す。
図12は、除外リストELaの記憶内容の一例を示す図である。図12に示される除外リストELaは、レコードELa1-1、及びレコードELa1-2を有する。レコードELa1-1が、補助情報HIを提供しない画面名の一例である。レコードELa1-2が、補助情報HIを提供しないアプリケーション名の一例である。レコードELa1-1は、メールアプリケーションが管理するメール作成画面が、補助情報HIを提供しない画面であることを示す。レコードELa1-2は、文章作成アプリケーションが管理する全ての画面が、補助情報HIを提供しない画面であることを示す。
説明を図11に戻す。処理装置12は、記憶装置14から制御プログラムPR1を読み取り実行することによって、ログ取得部122、第1統計処理部124、第2統計処理部125、第1判定部126、第2判定部127、除外リスト生成部128a、及び、通信制御部129として機能する。
第2統計処理部125は、表示装置26に表示される画面を管理するアプリケーションごとに、画面の表示時間の平均値を特定する。第2判定部127は、アプリケーションごとに特定された表示時間の平均値に基づいて、アプリケーションごとにユーザの意識が画面に集中しているかを判定する。第2判定部127は、第1判定部126の6つの態様の何れかと同様の態様を取り得る。具体的な差異は、第1判定部126における「画面名ごと」が「アプリケーションごと」に置き換わることである。除外リスト生成部128aは、第2判定部127の判定結果が肯定となるアプリケーション名を除外リストELに含ませる。
2.2.第2実施形態の効果
以上説明したように、第2実施形態によれば、第2統計処理部は、前記表示装置に表示される画面を管理するソフトウェアごとに前記表示装置に表示された画面の表示時間の第2統計値を算出することにより、複数のソフトウェアにそれぞれ対応する複数の第2統計値を生成する第2統計処理部と、前記ソフトウェアごとに、前記複数の第2統計値のうち当該ソフトウェアについて算出された第2統計値に基づいて、前記ユーザの意識が当該ソフトウェアに対応する画面に集中しているかを判定する第2判定部を更に備える。前記生成部は、前記複数のソフトウェアのうち、前記第2判定部による、対応する判定結果が肯定となるソフトウェアを識別するソフトウェア識別情報を前記リストに含ませる。
以上説明したように、第2実施形態によれば、第2統計処理部は、前記表示装置に表示される画面を管理するソフトウェアごとに前記表示装置に表示された画面の表示時間の第2統計値を算出することにより、複数のソフトウェアにそれぞれ対応する複数の第2統計値を生成する第2統計処理部と、前記ソフトウェアごとに、前記複数の第2統計値のうち当該ソフトウェアについて算出された第2統計値に基づいて、前記ユーザの意識が当該ソフトウェアに対応する画面に集中しているかを判定する第2判定部を更に備える。前記生成部は、前記複数のソフトウェアのうち、前記第2判定部による、対応する判定結果が肯定となるソフトウェアを識別するソフトウェア識別情報を前記リストに含ませる。
具体的には、サーバ装置10は、アプリケーションごとに特定された表示時間の平均値に基づいて、アプリケーションごとにユーザの意識が画面に集中しているかを判定し、判定結果が肯定となるアプリケーション名を除外リストELに含める。ユーザ装置20が除外リストELを用いることにより、表示装置26に表示される画面が、ユーザUの意識が集中する画面か否かを判定できる。従って、ユーザ装置20は、アプリケーションが管理する画面にユーザUの意識が画面に集中している場合に補助情報HIを提供することを低減できる。その結果、ユーザの集中がそがれることを抑制することが可能になる。
3.第3実施形態
第3実施形態では、ユーザUの意識が画面に集中していたにも関わらず、何らかの要因によってユーザUの集中が阻害され、ユーザUの意識が同じ画面に再び集中した場合に、外部からの要因の前後の画面の表示時間を合算する。以下、第3実施形態にかかる制御システム1を説明する。なお、以下に例示する第3実施形態において作用又は機能が第1実施形態と同等である要素については、以上の同じ参照符号を流用し、各々の詳細な説明を適宜に省略する。
第3実施形態では、ユーザUの意識が画面に集中していたにも関わらず、何らかの要因によってユーザUの集中が阻害され、ユーザUの意識が同じ画面に再び集中した場合に、外部からの要因の前後の画面の表示時間を合算する。以下、第3実施形態にかかる制御システム1を説明する。なお、以下に例示する第3実施形態において作用又は機能が第1実施形態と同等である要素については、以上の同じ参照符号を流用し、各々の詳細な説明を適宜に省略する。
3.1.第3実施形態の機能
図13は、第3実施形態にかかるサーバ装置10の構成を例示する図である。記憶装置14は、第1実施形態で説明した情報に加えて、作業中断アプリケーションリストILを記憶する。作業中断アプリケーションリストILは、ユーザUに通知することにより、ユーザの作業を中断させる可能性があるアプリケーションの一覧である。例えば、作業中断アプリケーションリストILに登録されたアプリケーションは、電話アプリケーション、アラームアプリケーション、及び、スケジューラアプリケーション等である。以下、作業中断アプリケーションリストILに登録されたアプリケーションを、「作業中断アプリケーション」と称する。作業中断アプリケーションが、「所定のソフトウェア」の一例である。
図13は、第3実施形態にかかるサーバ装置10の構成を例示する図である。記憶装置14は、第1実施形態で説明した情報に加えて、作業中断アプリケーションリストILを記憶する。作業中断アプリケーションリストILは、ユーザUに通知することにより、ユーザの作業を中断させる可能性があるアプリケーションの一覧である。例えば、作業中断アプリケーションリストILに登録されたアプリケーションは、電話アプリケーション、アラームアプリケーション、及び、スケジューラアプリケーション等である。以下、作業中断アプリケーションリストILに登録されたアプリケーションを、「作業中断アプリケーション」と称する。作業中断アプリケーションが、「所定のソフトウェア」の一例である。
第3実施形態において、第1統計処理部124bは、以下に示す第2の態様がある。第1統計処理部124bの第1の態様において、第1統計処理部124bは、作業中断アプリケーションが起動しており、かつ、作業中断アプリケーションが管理する画面の前に表示された前画面を管理するアプリケーションと、作業中断アプリケーションが管理する画面の後に表示された後画面を管理するアプリケーションとが同一であるか否かを判定する。以下の説明では、作業中断アプリケーションが管理する画面を、「作業中断画面」と称し、作業中断画面の前に表示された前画面を、「中断前画面」と称し、作業中断画面の前に表示された後画面を、「中断後画面」と称する。
第1統計処理部124bは、作業中断アプリケーションが起動しており、かつ、中断前画面を管理するアプリケーションと中断後画面を管理するアプリケーションとが同一である場合、中断前画面の表示時間又は中断後画面の表示時間を、中断前画面の表示時間と中断後画面の表示時間とを合算した時間に置き換えて、画面の種別ごとに表示時間の平均値を特定する。
置き換え対象となる表示時間は、中断前画面の表示時間又は中断後画面の表示時間の何れでもよい。置き換え対象としない表示時間は、表示時間の平均値の計算対象外とする。以下の説明では、置き換え対象となる表示時間は、中断前画面の表示時間であるとする。
中断前画面は、例えば、以下に示す2つの態様がある。第1の態様における中断前画面は、作業中断画面の直前に表示された画面である。第2の態様における中断前画面は、作業中断画面の所定個前に表示された画面である。
中断後画面は、3つの態様がある。第1の態様における中断後画面は、作業中断画面の直後に表示された画面である。第2の態様における中断後画面は、作業中断画面の所定個後に表示された画面である。第3の態様における中断後画面は、作業中断画面の直後に表示された画面から所定個後に表示された画面のうち、中断前画面を管理するアプリケーションと同一のアプリケーションによって管理される画面である。
中断後画面は、3つの態様がある。第1の態様における中断後画面は、作業中断画面の直後に表示された画面である。第2の態様における中断後画面は、作業中断画面の所定個後に表示された画面である。第3の態様における中断後画面は、作業中断画面の直後に表示された画面から所定個後に表示された画面のうち、中断前画面を管理するアプリケーションと同一のアプリケーションによって管理される画面である。
図3A及び図3Bを例に用いて、第1統計処理部124bの第1態様を説明する。中断前画面及び中断後画面は、第1態様であるとする。レコード1421-3及びレコード1421-4において、作業中断アプリケーションである電話アプリケーションが起動されている。従って、第1統計処理部124bは、操作ログ142を用いて、中断前画面として、レコード1421-1及びレコード1421-2に示されたメール作成画面と、中断後画面として、レコード1421-5及びレコード1421-6に示されたメール作成画面とを特定する。中断前画面と中断後画面とを管理するアプリケーションは、メールアプリケーションで同一であるため、第1統計処理部124bは、中断前画面の表示時間を、下記(1)式に従って算出する。
中断前画面の表示時間=中断前画面の表示時間+中断後画面の表示時間 (1)
図3A及び図3Bの例では、前画面の表示時間が20秒間であり、中断後画面の表示時間が4分間であるから、第1統計処理部124bは、中断前画面の表示時間を、20秒間から4分20秒間に置き換える。そして、第1統計処理部124bは、前画面の種別に対応する表示時間の平均値を特定する。
第1統計処理部124bの第2の態様において、第1統計処理部124bは、中断前画面を表示してから作業中断アプリケーションが管理する画面を表示するまでの期間に、ホーム画面が表示された場合、作業前画面の種別に対応する表示時間を合算した時間に置き換えない。ホーム画面は、ユーザUの操作を待ち受ける待ち受け画面の一例である。
3.2.第3実施形態の動作
次に、サーバ装置10が実行する、第3実施形態における除外リスト生成処理について、図14及び図15を用いて説明する。
次に、サーバ装置10が実行する、第3実施形態における除外リスト生成処理について、図14及び図15を用いて説明する。
図14及び図15は、第3実施形態における除外リスト生成処理を示すフローチャートである。図15に示すステップS31からステップS38までの処理は、ステップS2からステップS9までの処理と同一であるため、説明を省略する。さらに、説明の簡略化のため、操作ログ142は、図3A及び図3Bに示すように、装置ID及び日時によってソートされており、昇順に、すなわち日時の古いレコードほど前に格納されているとする。
サーバ装置10は、全ユーザの操作ログ142を、各ユーザ装置20_1~20_mから取得する(ステップS21)。次に、サーバ装置10は、操作ログ142から、作業中断アプリケーションを示すレコードを選択する(ステップS22)。操作ログ142に作業中断アプリケーションを示すレコードが複数存在する場合には、サーバ装置10は、例えば、作業中断アプリケーションを示すレコードのうち、日時が最も古いレコードを選択する。
そして、サーバ装置10は、選択したレコードの前のレコードによって示される中断前のアプリケーション名が、選択したレコードの後のレコードによって示される中断後のアプリケーション名と同一か否かを判定する(ステップS23)。ただし、選択したレコードの前のレコード及び後のレコードの装置IDが、選択したレコードの装置IDと一致するものとする。操作ログ142が日時の昇順でソートされているため、前のレコードは、選択したレコードの操作より前に発生した操作に関するものである。後のレコードは、選択したレコードの操作より後に発生した操作に関する。
中断前の画面名を中断後の画面名と比較せず、中断前のアプリケーション名を中断後のアプリケーション名と比較する理由は、OSによっては、バックグラウンドのアプリケーションがフォアグラウンドとなった場合に、バックグラウンドになった際に表示されていた画面が表示されず、アプリケーションのトップ画面が表示される現象が起こり得るためである。
中断前の画面名を中断後の画面名と比較せず、中断前のアプリケーション名を中断後のアプリケーション名と比較する理由は、OSによっては、バックグラウンドのアプリケーションがフォアグラウンドとなった場合に、バックグラウンドになった際に表示されていた画面が表示されず、アプリケーションのトップ画面が表示される現象が起こり得るためである。
ステップS23の判定結果が肯定の場合、サーバ装置10は、続けて、中断前画面を表示してから作業中断画面を表示する間に、ホーム画面が表示されたか否かを判定する(ステップS24)。中断前画面を表示してから作業中断画面を表示する間に、ホーム画面が表示された場合とは、ユーザUが能動的に作業中断アプリケーションを起動させたことを意味する。作業中断アプリケーションをユーザUが能動的に起動させた時点で、ユーザUの意識は中断前画面に集中していない。ステップS24の判定結果が否定の場合、サーバ装置10は、中断前画面の表示時間を、中断前画面の表示時間と中断後画面の表示時間とを合算した時間に置き換える(ステップS25)。そして、サーバ装置10は、中断後画面の表示時間を平均値の計算対象外に設定する(ステップS26)。
ステップS26の処理終了後、サーバ装置10は、作業中断アプリケーションを示す全てのレコードを選択したか否かを判定する(ステップS27)。また、ステップS23の判定結果が否定の場合、又は、ステップS24の判定結果が肯定の場合にも、サーバ装置10は、ステップS27の処理を実行する。
ステップS27の判定結果が否定の場合、すなわち作業中断アプリケーションを示すレコードのうち、まだ選択されていないレコードがある場合、サーバ装置10は、処理をステップS22に戻す。処理をステップS22に戻した場合に、サーバ装置10は、ステップS22として、作業中断アプリケーションを示す、選択されていないレコードのうち、日時が最も古いレコードを選択する。
一方、ステップS27の判定結果が肯定の場合、すなわち作業中断アプリケーションを示す全てのレコードを選択した場合、サーバ装置10は、ステップS31の処理を実行する。
一方、ステップS27の判定結果が肯定の場合、すなわち作業中断アプリケーションを示す全てのレコードを選択した場合、サーバ装置10は、ステップS31の処理を実行する。
3.3.第3実施形態の効果
以上説明したように、第3実施形態によれば、前記表示装置が、第1ソフトウェアが管理する第1画面(例えば、「中断前画面」)と、前記第1ソフトウェアとは異なる第2ソフトウェア(例えば、「作業中断アプリケーション」)が管理する第2画面(例えば、「作業中断画面」)と、第3ソフトウェアが管理する第3画面(例えば、「中断後画面」)とを順に表示した場合、前記第1統計処理部は、前記第1ソフトウェアが前記第3ソフトウェアと同一である場合、前記第1画面の第1表示時間を前記第3画面の第3表示時間に合算した合計時間を算出し、前記第1表示時間及び前記第3表示時間の一方を置き換える。
以上説明したように、第3実施形態によれば、前記表示装置が、第1ソフトウェアが管理する第1画面(例えば、「中断前画面」)と、前記第1ソフトウェアとは異なる第2ソフトウェア(例えば、「作業中断アプリケーション」)が管理する第2画面(例えば、「作業中断画面」)と、第3ソフトウェアが管理する第3画面(例えば、「中断後画面」)とを順に表示した場合、前記第1統計処理部は、前記第1ソフトウェアが前記第3ソフトウェアと同一である場合、前記第1画面の第1表示時間を前記第3画面の第3表示時間に合算した合計時間を算出し、前記第1表示時間及び前記第3表示時間の一方を置き換える。
具体的には、作業中断アプリケーションが起動しており、かつ、中断前のアプリケーション名と中断後のアプリケーション名とが同一である場合、サーバ装置10は、中断前画面の表示時間を、中断前画面の表示時間と中断後画面の表示時間とを合算した時間に置き換える。仮に、作業中断アプリケーションが起動しなかった場合、ユーザUの意識は中断前画面に集中し続けただろうと考えられる。よって、サーバ装置10が中断前画面の表示時間と中断後画面の表示時間とを合算することにより、ユーザUの意識が画面に集中し続けたであろう時間を求めることができる。ユーザUの意識が画面に集中し続けたであろう時間を求めることにより、ユーザUの意識が画面に集中しているか否かの判定精度を向上させることができる。
ただし、前記第1統計処理部は、前記第1画面が表示されてから前記第2画面が表示されるまでの期間に、前記ユーザの操作を待ち受ける待ち受け画面が表示された場合、前記第1表示時間及び前記第3表示時間の一方を前記合計時間に置き換えない。
具体的には、中断前画面が表示されてから作業中断画面が表示されるまでの間に、ホーム画面が表示された場合には、サーバ装置10は、中断前画面の表示時間を、中断前画面の表示時間と中断後画面の表示時間とを合算した時間に置き換えない。中断前画面を表示してから作業中断画面を表示する間にホーム画面が表示された場合とは、ユーザUが能動的に作業中断アプリケーションを起動させたことを意味する。作業中断アプリケーションをユーザUが能動的に起動させた時点で、ユーザUの意識は中断前画面に集中していない。従って、合算時間の置き換えを行わないことにより、ユーザUの意識が集中したか否かの判定精度を向上させることが可能になる。
4.第4実施形態
第1実施形態では、ユーザ装置20は、サーバ装置10から送信された除外リストELを用いて、補助情報HIをユーザUに提供するか否かを決定する。一方、第4実施形態では、表示装置26に画面を表示してから所定期間が経過すると、ユーザ装置20_xは、自身の操作ログ142_xに基づいて更新除外リストELuを生成し、更新除外リストELuを用いて、補助情報HIをユーザUに提供するか否かを決定する。以下、第4実施形態にかかる制御システム1を説明する。なお、以下に例示する第4実施形態において作用又は機能が第1実施形態と同等である要素については、以上の参照符号を流用し、各々の詳細な説明を適宜に省略する。
第1実施形態では、ユーザ装置20は、サーバ装置10から送信された除外リストELを用いて、補助情報HIをユーザUに提供するか否かを決定する。一方、第4実施形態では、表示装置26に画面を表示してから所定期間が経過すると、ユーザ装置20_xは、自身の操作ログ142_xに基づいて更新除外リストELuを生成し、更新除外リストELuを用いて、補助情報HIをユーザUに提供するか否かを決定する。以下、第4実施形態にかかる制御システム1を説明する。なお、以下に例示する第4実施形態において作用又は機能が第1実施形態と同等である要素については、以上の参照符号を流用し、各々の詳細な説明を適宜に省略する。
4.1.第4実施形態の機能
図16は、第4実施形態にかかるユーザ装置20_xの構成を例示する図である。記憶装置24は、第1実施形態で説明した情報に加えて、第4実施形態における処理装置22によって生成される更新除外リストELuを記憶する。更新除外リストELuは、除外リストELと同様に、補助情報HIをユーザU_xに提供しない画面名を示す。
図16は、第4実施形態にかかるユーザ装置20_xの構成を例示する図である。記憶装置24は、第1実施形態で説明した情報に加えて、第4実施形態における処理装置22によって生成される更新除外リストELuを記憶する。更新除外リストELuは、除外リストELと同様に、補助情報HIをユーザU_xに提供しない画面名を示す。
処理装置22は、記憶装置24から制御プログラムPR2を読み取り、制御プログラムPR2を実行する。この実行によって、処理装置22は、除外リスト取得部222、決定部226c、表示制御部228、第3統計処理部232、第3判定部234、及び、除外リスト更新部236として機能する。除外リスト更新部236は、「更新部」の一例である。
第3統計処理部232は、表示装置26に画面を表示してから所定期間が経過すると、表示装置26に表示された画面の種別ごとに表示時間の平均値を特定する。所定期間には、例えば、以下に示す2つの態様がある。所定期間の第1の態様は、固定値である。所定期間の第2の態様は、表示装置26に始めて画面を表示してから操作ログ142_xのレコード数が所定数以上になるまでの期間である。
第3判定部234は、第3統計処理部232によって画面の種別ごとに特定された表示時間の平均値に基づいて、画面の種別ごとにユーザU_xの意識が画面に集中しているかを判定する。
除外リスト更新部236は、第3判定部234の判定結果が肯定となる画面名を含む更新除外リストELuを生成する。更新除外リストELuは、「更新リスト」の一例である。
決定部226cは、所定期間が経過するまでは、補助情報HIをユーザU_xに提供するか否かを除外リストELに基づいて決定する。決定部226cは、所定期間が経過した後は、補助情報HIをユーザU_xに提供するか否かを更新除外リストELuに基づいて決定する。
4.2.第4実施形態の効果
以上説明したように、第4実施形態によれば、ユーザ装置20は、所定期間が経過するまでは、補助情報HIをユーザU_xに提供するか否かを除外リストELに基づいて決定し、所定期間が経過した後は、補助情報HIをユーザU_xに提供するか否かを更新除外リストELuに基づいて決定する。
以上説明したように、第4実施形態によれば、ユーザ装置20は、所定期間が経過するまでは、補助情報HIをユーザU_xに提供するか否かを除外リストELに基づいて決定し、所定期間が経過した後は、補助情報HIをユーザU_xに提供するか否かを更新除外リストELuに基づいて決定する。
従って、所定期間が経過するまで、すなわち、操作ログ142_xに十分にレコードが蓄積されていない場合では、サーバ装置10が生成した除外リストELを用いてユーザU_xの意識が画面に集中しているか否かを判定する。この判定により、ユーザU_xの意識が画面に集中しているか否かの判定精度を維持することができる。さらに、所定期間が経過した後、すなわち、操作ログ142_xに十分にレコードが蓄積された場合では、ユーザ装置20は、操作ログ142_xに基づいて生成された更新除外リストELuを用いてユーザU_xの意識が集中しているか否かを判定する。操作ログ142_xにはユーザU_xのみの操作履歴が反映されている。このため、ユーザ装置20が除外リストELを用いてユーザU_xの意識が集中しているか否かを判定する場合と比較して、ユーザUの意識が画面に集中しているか否かの判定精度を向上させることが可能になる。
5.第5実施形態
第4実施形態では、ユーザ装置20_xは、画面名ごとに画面の表示時間の平均値を算出する。一方、第5実施形態では、さらに、アプリケーションごとに画面の表示時間の平均値を算出する。以下、第5実施形態にかかる制御システム1を説明する。なお、以下に例示する第5実施形態において作用又は機能が第4実施形態と同等である要素については、以上の参照符号を流用し、各々の詳細な説明を適宜に省略する。
第4実施形態では、ユーザ装置20_xは、画面名ごとに画面の表示時間の平均値を算出する。一方、第5実施形態では、さらに、アプリケーションごとに画面の表示時間の平均値を算出する。以下、第5実施形態にかかる制御システム1を説明する。なお、以下に例示する第5実施形態において作用又は機能が第4実施形態と同等である要素については、以上の参照符号を流用し、各々の詳細な説明を適宜に省略する。
5.1.第5実施形態の機能
図17は、第5実施形態にかかるユーザ装置20_xの構成を例示する図である。記憶装置14は、除外リストELの替わりに除外リストELdを記憶し、更新除外リストELuの替わりに更新除外リストELudを記憶する。除外リストELd及び更新除外リストELudは、補助情報HIを提供しない画面名、及び、補助情報HIを提供しないアプリケーション名を示す。
図17は、第5実施形態にかかるユーザ装置20_xの構成を例示する図である。記憶装置14は、除外リストELの替わりに除外リストELdを記憶し、更新除外リストELuの替わりに更新除外リストELudを記憶する。除外リストELd及び更新除外リストELudは、補助情報HIを提供しない画面名、及び、補助情報HIを提供しないアプリケーション名を示す。
処理装置22は、記憶装置24から制御プログラムPR2を読み取り、制御プログラムPR2を実行する。この実行によって、処理装置22は、除外リスト取得部222、決定部226、表示制御部228、第3統計処理部232、第4統計処理部233、第3判定部234、第4判定部235、及び、除外リスト更新部236dとして機能する。
第4統計処理部233は、表示装置26に画面を表示してから所定期間が経過すると、表示装置26に表示される画面を管理するアプリケーションごとの表示時間の平均値を特定する。
第4判定部235は、アプリケーションごとに算出された表示時間の平均値に基づいて、アプリケーションごとにユーザの意識が集中しているかを判定する。
除外リスト更新部236dは、第4判定部235の判定結果が肯定となるアプリケーション名を更新除外リストELudに含ませる。
第4判定部235は、アプリケーションごとに算出された表示時間の平均値に基づいて、アプリケーションごとにユーザの意識が集中しているかを判定する。
除外リスト更新部236dは、第4判定部235の判定結果が肯定となるアプリケーション名を更新除外リストELudに含ませる。
5.2.第5実施形態の効果
以上説明したように、第5実施形態によれば、第4判定部235は、アプリケーションごとに特定された表示時間の平均値に基づいて、アプリケーションごとにユーザの意識が画面に集中しているかを判定し、除外リスト更新部236dは、判定結果が肯定となるアプリケーション名を更新除外リストELudに含める。
以上説明したように、第5実施形態によれば、第4判定部235は、アプリケーションごとに特定された表示時間の平均値に基づいて、アプリケーションごとにユーザの意識が画面に集中しているかを判定し、除外リスト更新部236dは、判定結果が肯定となるアプリケーション名を更新除外リストELudに含める。
ユーザ装置20が更新除外リストELudを用いることにより、表示装置26に表示される画面が、ユーザUの意識が集中する画面か否かを判定できる。従って、ユーザ装置20は、アプリケーションが管理する画面にユーザUの意識が集中している場合に補助情報HIを提供することを低減でき、ユーザの意識の集中がそがれることを抑制することが可能になる。
6.第6実施形態
本発明は、以上に例示した各実施形態に限定されない。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2以上の態様を併合してもよい。
本発明は、以上に例示した各実施形態に限定されない。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2以上の態様を併合してもよい。
(1)第1変形例として、上述した各形態において、決定部226は、所定期間内において起動されたアプリケーションの種別数、及び、所定期間内におけるユーザの操作回数に基づいて、補助情報HIをユーザに提供するか否かを判定してもよい。
図18は、第1変形例における補助情報提供処理を示すフローチャートである。ユーザ装置20_xは、操作ログ142_xから、現在フォアグラウンドの画面名を特定する(ステップS41)。次に、ユーザ装置20_xは、特定した画面名が除外リストELに含まれるか否かを判定する(ステップS42)。ステップS42の判定結果が否定の場合、ユーザ装置20_xは、図18に示す一連の処理を終了する。
一方、ステップS42の判定結果が肯定の場合、ユーザ装置20_xは、所定期間におけるアプリケーションの種別数を計数する(ステップS43)。所定期間は、例えば、直近の1時間である。そして、ユーザ装置20_xは、計数した種別数が1か否かを判定する(ステップS44)。ステップS44の判定結果が肯定の場合、すなわち計数した種別数が1である場合、ユーザ装置20_xは、図18に示す一連の処理を終了する。
一方、ステップS44の判定結果が否定の場合、すなわち計数した種別数が2以上である場合、ユーザ装置20_xは、所定期間における操作回数を計数する(ステップS45)。ユーザ装置20_xは、操作回数が所定回数以上か否かを判定する(ステップS46)。ステップS46の判定結果が肯定の場合、ユーザ装置20_xは、図18に示す一連の処理を終了する。
一方、ステップS46の判定結果が否定の場合、ユーザ装置20_xは、操作ログ142から、bag-of-words特徴量を抽出する(ステップS47)。そして、ユーザ装置20_xは、予め訓練した推論モデルに、抽出したbag-of-words特徴量を入力し、ユーザU_xが困惑しているか否かを示す判定結果を取得する(ステップS48)。
そして、ユーザ装置20_xは、取得した判定結果が、ユーザU_xが困惑していることを示すか否かを判定する(ステップS49)。ステップS49の判定結果が否定の場合、ユーザ装置20_xは、図18に示す一連の処理を終了する。
一方、ステップS49の判定結果が肯定の場合、ユーザ装置20_xは、ユーザU_xが困惑していることに対応する補助情報HIをユーザU_xに提供すると決定する(ステップS50)。そして、ユーザ装置20_xは、補助情報HIに基づく画像を表示装置26に表示する(ステップS51)。ステップS51の処理終了後、ユーザ装置20_xは、図18に示す一連の処理を終了する。
一方、ステップS49の判定結果が肯定の場合、ユーザ装置20_xは、ユーザU_xが困惑していることに対応する補助情報HIをユーザU_xに提供すると決定する(ステップS50)。そして、ユーザ装置20_xは、補助情報HIに基づく画像を表示装置26に表示する(ステップS51)。ステップS51の処理終了後、ユーザ装置20_xは、図18に示す一連の処理を終了する。
(2)上述した各実施形態における制御システム1は、サーバ装置10及びユーザ装置20を含んだが、ユーザ装置20が、単独で、画面名を含む除外リストELを生成してもよい。さらに、ユーザ装置20が、単独で、この除外リストELに、アプリケーション名を含ませてもよい。ユーザ装置20が単独で画面名を含む除外リストELを生成する場合、ユーザ装置20は、「情報生成装置」の一例となる。
(3)上述した各実施形態において、画面の表示時間の統計値は、平均値又は中央値であると記載したが、これに限らず、最頻値でもよい。ただし、画面の表示時間は連続値であり最頻値は適さないから、サーバ装置10は、表示時間の度数分布を求め、分布の最も多い度数の中心値を最頻値としてもよい。
(4)上述した各実施形態において、第1判定部126の第4の態様において、第1統計処理部124は、画面名ごとに、画面の表示時間を含む単位期間内におけるユーザUの操作回数の統計値を算出するが、単に、画面名ごとの操作回数の統計値を算出してもよい。
(5)上述した各実施形態の説明に用いたブロック図は、機能単位のブロックを示している。これらの機能ブロック(構成部)は、ハードウェア及び/又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び/又は論理的に結合した1つの装置により実現されてもよいし、物理的及び/又は論理的に分離した2つ以上の装置を直接的及び/又は間接的に(例えば、有線及び/又は無線)で接続し、これら複数の装置により実現されてもよい。
(6)情報の通知は、本明細書で説明した態様/実施形態に限られず、他の方法で行われてもよい。例えば、情報の通知は、物理レイヤシグナリング(例えば、DCI(Downlink Control Information)、UCI(Uplink Control Information))、上位レイヤシグナリング(例えば、RRC(Radio Resource Control)シグナリング、MAC(Medium Access Control)シグナリング、報知情報(MIB(Master Information Block)、SIB(System Information Block)))、その他の信号又はこれらの組み合わせによって実施されてもよい。また、RRCシグナリングは、RRCメッセージと呼ばれてもよく、例えば、RRC接続セットアップ(RRC Connection Setup)メッセージ、RRC接続再構成(RRC Connection Reconfiguration)メッセージなどであってもよい。
(7)上述した各実施形態における処理手順、シーケンス、フローチャートなどは、矛盾のない限り、順序を入れ替えてもよい。例えば、本明細書で説明した方法については、例示的な順序で様々なステップの要素を提示しており、提示した特定の順序に限定されない。
(8)基地局によって行われるとした特定動作(例えば、基地局による位置情報の特定)は、場合によってはその上位ノード(upper node)によって行われることもある。基地局を有する1つ又は複数のネットワークノード(network nodes)からなるネットワークにおいて、端末との通信のために行われる様々な動作は、基地局及び/又は基地局以外の他のネットワークノード(例えば、MME又はS-GWなどが考えられるが、これらに限られない)によって行われ得ることは明らかである。上記において基地局以外の他のネットワークノードが1つである場合を例示したが、複数の他のネットワークノードの組み合わせ(例えば、MME及びS-GW)であってもよい。
(9)情報等は、上位レイヤ(又は下位レイヤ)から下位レイヤ(又は上位レイヤ)へ出力され得る。複数のネットワークノードを介して入出力されてもよい。
(10)上述した各実施形態において、入出力された情報等は特定の場所(例えば、メモリ)に保存されてもよいし、管理テーブルで管理してもよい。入出力される情報等は、上書き、更新、又は追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。
(11)上述した各実施形態において、判定は、1ビットで表される値(0か1か)によって行われてもよいし、真偽値(Boolean:true又はfalse)によって行われてもよいし、数値の比較(例えば、所定の値との比較)によって行われてもよい。
(12)上述した各実施形態では、携帯電話機又はスマートフォン等の可搬型の情報処理装置をユーザ装置20として例示したが、ユーザ装置20の具体的な形態は任意であり、前述の各形態の例示には限定されない。例えば、可搬型又は据置型のパーソナルコンピュータをユーザ装置20として利用してもよい。
(13)上述した各実施形態では、記憶装置14は、処理装置12が読取可能な記録媒体であり、ROM及びRAMなどを例示したが、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Blu-ray(登録商標)ディスク)、スマートカード、フラッシュメモリデバイス(例えば、カード、スティック、キードライブ)、CD-ROM(Compact Disc-ROM)、レジスタ、リムーバブルディスク、ハードディスク、フロッピー(登録商標)ディスク、磁気ストリップ、データベース、サーバその他の適切な記憶媒体である。また、プログラムは、ネットワークNWから送信されても良い。また、プログラムは、電気通信回線を介して通信網から送信されても良い。記憶装置24も、記憶装置14と同様である。
(14)LTE(Long Term Evolution)、LTE-A(LTE-Advanced)、SUPER 3G、IMT-Advanced、4G、5G、FRA(Future Radio Access)、W-CDMA(登録商標)、GSM(登録商標)、CDMA2000、UMB(Ultra Mobile Broadband)、IEEE 802.11(Wi-Fi)、IEEE 802.16(WiMAX)、IEEE 802.20、UWB(Ultra-WideBand)、Bluetooth(登録商標)、その他の適切なシステムを利用するシステム及び/又はこれらに基づいて拡張された次世代システムに適用されてもよい。
(15)上述した各実施形態において、説明した情報及び信号などは、様々な異なる技術の何れかを使用して表されてもよい。例えば、上述の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。
なお、本明細書で説明した用語及び/又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。
なお、本明細書で説明した用語及び/又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。
(16)図2、図11、図13、図16及び図17に例示された各機能は、ハードウェア及びソフトウェアの任意の組み合わせによって実現される。また、各機能は、単体の装置によって実現されてもよいし、相互に別体で構成された2個以上の装置によって実現されてもよい。
(17)上述した各実施形態で例示したプログラムは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード又はハードウェア記述言語と呼ばれるか、他の名称によって呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順又は機能等を意味するよう広く解釈されるべきである。
また、ソフトウェア、命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線(DSL)などの有線技術及び/又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び/又は無線技術は、伝送媒体の定義内に含まれる。
また、ソフトウェア、命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線(DSL)などの有線技術及び/又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び/又は無線技術は、伝送媒体の定義内に含まれる。
(18)上述した各実施形態において、「システム」及び「ネットワーク」という用語は、互換的に使用される。
(19)上述した各実施形態において、情報、パラメータなどは、絶対値で表されてもよいし、所定の値からの相対値で表されてもよいし、対応する別の情報で表されてもよい。例えば、無線リソースはインデックスで指示されるものであってもよい。
(20)上述したパラメータに使用する名称はいかなる点においても限定的なものではない。さらに、これらのパラメータを使用する数式等は、本明細書で明示的に開示したものと異なる場合もある。様々なチャネル(例えば、PUCCH、PDCCHなど)及び情報要素(例えば、TPCなど)は、あらゆる好適な名称によって識別できるので、これらの様々なチャネル及び情報要素に割り当てている様々な名称は、いかなる点においても限定的なものではない。
(21)基地局は、1つ又は複数(例えば、3つ)の(セクタとも呼ばれる)セルを収容できる。基地局が複数のセルを収容する場合、基地局のカバレッジエリア全体は複数のより小さいエリアに区分でき、各々のより小さいエリアは、基地局サブシステム(例えば、屋内用の小型基地局RRH:Remote Radio Head)によって通信サービスを提供することもできる。「セル」又は「セクタ」という用語は、このカバレッジにおいて通信サービスを行う基地局、及び/又は基地局サブシステムのカバレッジエリアの一部又は全体を指す。さらに、「基地局」「eNB」、「セル」、及び「セクタ」という用語は、本明細書では互換的に使用され得る。基地局は、固定局(fixed station)、NodeB、eNodeB(eNB)、アクセスポイント(access point)、フェムトセル、スモールセルなどの用語で呼ばれる場合もある。
(22)上述した各実施形態において、ユーザ装置20は、移動局である場合が含まれる。移動局は、当業者によって、加入者局、モバイルユニット、加入者ユニット、ワイヤレスユニット、リモートユニット、モバイルデバイス、ワイヤレスデバイス、ワイヤレス通信デバイス、リモートデバイス、モバイル加入者局、アクセス端末、モバイル端末、ワイヤレス端末、リモート端末、ハンドセット、ユーザエージェント、モバイルクライアント、クライアント、又はいくつかの他の適切な用語で呼ばれる場合もある。
(23)上述した各実施形態において、「接続された(connected)」という用語、又はこれらのあらゆる変形は、2又はそれ以上の要素間の直接的又は間接的なあらゆる接続又は結合を意味し、互いに「接続」された2つの要素間に1又はそれ以上の中間要素が存在することを含むことができる。要素間の接続は、物理的なものであっても、論理的なものであっても、あるいはこれらの組み合わせであってもよい。本明細書で使用する場合、2つの要素は、1又はそれ以上の電線、ケーブル及び/又はプリント電気接続を使用することにより、並びにいくつかの非限定的かつ非包括的な例として、無線周波数領域、マイクロ波領域及び光(可視及び不可視の両方)領域の波長を有する電磁エネルギーなどの電磁エネルギーを使用することにより、互いに「接続」されると考えることができる。
(24)上述した各実施形態において、「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。
(25)本明細書で使用する「第1」、「第2」などの呼称を使用した要素へのいかなる参照も、それらの要素の量又は順序を全般的に限定するものではない。これらの呼称は、2つ以上の要素間を区別する便利な方法として本明細書で使用され得る。従って、第1及び第2の要素への参照は、2つの要素のみがそこで採用され得ること、又は何らかの形で第1の要素が第2の要素に先行しなければならないことを意味しない。
(26)上述した各実施形態において「含む(including)」、「含んでいる(comprising)」、及びそれらの変形が、本明細書あるいは特許請求の範囲で使用されている限り、これら用語は、用語「備える」と同様に、包括的であることが意図される。さらに、本明細書あるいは特許請求の範囲において使用されている用語「又は(or)」は、排他的論理和ではないことが意図される。
(27)本願の全体において、例えば、英語におけるa、an及びtheのように、翻訳によって冠詞が追加された場合、これらの冠詞は、文脈から明らかにそうではないことが示されていなければ、複数を含む。
(28)本発明が本明細書中に説明した実施形態に限定されないことは当業者にとって明白である。本発明は、特許請求の範囲の記載に基づいて定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施できる。従って、本明細書の記載は、例示的な説明を目的とし、本発明に対して何ら制限的な意味を有さない。また、本明細書に例示した態様から選択された複数の態様を組み合わせてもよい。
1…制御システム、10…サーバ装置、20…ユーザ装置,22…処理装置、122…ログ取得部、124、124b…第1統計処理部、125…第2統計処理部、126…第1判定部、127…第2判定部、128,128a…除外リスト生成部、142…操作ログ、222…除外リスト取得部、226,226c…決定部、228…表示制御部、232…第3統計処理部、233…第4統計処理部、234…第3判定部、235…第4判定部、236,236d…除外リスト更新部、EL,ELa…除外リスト、ELu,ELud…更新除外リスト、U…ユーザ。
Claims (10)
- 表示装置に表示される画面の種別ごとに前記表示装置に表示された画面の表示時間の第1統計値を算出することにより、複数種別の画面にそれぞれ対応する複数の第1統計値を生成する第1統計処理部と、
前記画面の種別ごとに、前記複数の第1統計値のうち当該種別の画面について算出された第1統計値に基づいて、ユーザの意識が当該種別の画面に集中しているかを判定する第1判定部と、
前記複数種別の画面のうち、前記第1判定部による、対応する判定結果が肯定となる画面の種別を識別する画面識別情報を含むリストを生成する生成部と、
を備える情報生成装置。 - 前記表示装置に表示される画面を管理するソフトウェアごとに前記表示装置に表示された画面の表示時間の第2統計値を算出することにより、複数のソフトウェアにそれぞれ対応する複数の第2統計値を生成する第2統計処理部と、
前記ソフトウェアごとに、前記複数の第2統計値のうち当該ソフトウェアについて算出された第2統計値に基づいて、前記ユーザの意識が当該ソフトウェアに対応する画面に集中しているかを判定する第2判定部を更に備え、
前記生成部は、前記複数のソフトウェアのうち、前記第2判定部による、対応する判定結果が肯定となるソフトウェアを識別するソフトウェア識別情報を前記リストに含ませる、
請求項1に記載の情報生成装置。 - 前記表示装置が、第1ソフトウェアが管理する第1画面と、前記第1ソフトウェアとは異なる第2ソフトウェアが管理する第2画面と、第3ソフトウェアが管理する第3画面とを順に表示した場合、
前記第1統計処理部は、前記第1ソフトウェアが前記第3ソフトウェアと同一である場合、前記第1画面の第1表示時間を前記第3画面の第3表示時間に合算した合計時間を算出し、前記第1表示時間及び前記第3表示時間の一方を置き換える、請求項1に記載の情報生成装置。 - 前記第1統計処理部は、前記第1画面が表示されてから前記第2画面が表示されるまでの期間に、前記ユーザの操作を待ち受ける待ち受け画面が表示された場合、前記第1表示時間及び前記第3表示時間の一方を前記合計時間に置き換えない、請求項3に記載の情報生成装置。
- 前記第1判定部は、前記複数の第1統計値のうち、所定値を超える第1統計値に対応する種別の画面を、前記ユーザの意識が集中している種別の画面であると判定する、請求項1から4までの何れか1項に記載の情報生成装置。
- 前記第1統計処理部は、前記画面の種別ごとに、当該種別の画面が表示された時刻を含む1又は複数の単位期間を特定し、当該特定した各単位期間内において起動されたソフトウェアの種別数に基づいて第3統計値を算出することにより、前記複数種別の画面にそれぞれ対応する複数の第3統計値を生成し、
前記第1判定部は、画面の種別ごとに、対応する第1統計値及び第3統計値に基づいて、前記ユーザの意識が当該種別の画面に集中しているか否かを判定する請求項1から4までの何れか1項に記載の情報生成装置。 - 前記第1統計処理部は、前記画面の種別ごとに、当該種別の画面が表示された時刻を含む1又は複数の単位期間を特定し、当該特定した各単位期間内における前記ユーザの操作回数に基づいて第4統計値を算出することにより、前記複数種別の画面にそれぞれ対応する複数の第4統計値を生成し、
前記第1判定部は、画面の種別ごとに、対応する第1統計値及び第4統計値に基づいて、前記ユーザの意識が当該種別の画面に集中しているか否かを判定する請求項1から4までの何れか1項に記載の情報生成装置。 - 請求項1から7までの何れか1項に記載の情報生成装置と、
各々が表示装置を備え、前記情報生成装置と通信可能な複数の情報処理装置と、
を備える制御システムであって、
前記複数の情報処理装置の各々は、
前記情報生成装置から前記リストを取得する取得部と、
前記表示装置に表示されている画面の種別を示す画面識別情報が前記リストに含まれる場合、前記ユーザの操作を補助する補助情報を前記ユーザに提供しないと決定し、前記表示装置に表示されている画面の種別を示す画面識別情報が前記リストに含まれない場合、前記操作の状況に応じて前記補助情報を前記ユーザに提供すると決定する決定部と、
前記決定部が前記補助情報を前記ユーザに提供すると決定した場合、前記補助情報に基づく画像を前記表示装置に表示させる表示制御部と、
を備える制御システム。 - 前記複数の情報処理装置の各々は、
前記表示装置に任意の画面を表示してから所定期間が経過すると、前記表示装置に表示される画面の種別ごとに前記表示装置に表示された画面の表示時間の第5統計値を算出することにより、複数種別の画面にそれぞれ対応する複数の第5統計値を生成する第3統計処理部と、
前記画面の種別ごとに、前記複数の第5統計値のうち当該種別の画面について算出された第5統計値に基づいて、前記ユーザの意識が当該種別の画面に集中しているかを判定する第3判定部と、
前記複数種別の画面のうち、前記第3判定部による、対応する判定結果が肯定となる画面の種別を識別する画面識別情報を含む更新リストを生成する更新部とを更に備える、
請求項8に記載の制御システム。 - 前記複数の情報処理装置の各々は、
前記表示装置に任意の画面を表示してから前記所定期間が経過すると、前記表示装置に表示される画面を管理するソフトウェアごとに前記表示装置に表示された画面の表示時間の第6統計値を算出することにより、複数のソフトウェアにそれぞれ対応する複数の第6統計値を生成する第4統計処理部と、
前記ソフトウェアごとに、前記複数の第6統計値のうち当該ソフトウェアについて算出された第6統計値に基づいて、前記ユーザの意識が当該ソフトウェアに対応する画面に集中しているかを判定する第4判定部を更に備え、
前記更新部は、前記複数のソフトウェアのうち、前記第4判定部による、対応する判定結果が肯定となるソフトウェアを識別するソフトウェア識別情報を前記更新リストに含ませる、
請求項9に記載の制御システム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/437,962 US11797321B2 (en) | 2019-03-20 | 2020-01-29 | Information generation apparatus and control system |
JP2021506215A JP7291779B2 (ja) | 2019-03-20 | 2020-01-29 | 情報生成装置、及び制御システム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019053161 | 2019-03-20 | ||
JP2019-053161 | 2019-03-20 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2020189030A1 true WO2020189030A1 (ja) | 2020-09-24 |
Family
ID=72520712
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2020/003059 WO2020189030A1 (ja) | 2019-03-20 | 2020-01-29 | 情報生成装置、及び制御システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11797321B2 (ja) |
JP (1) | JP7291779B2 (ja) |
WO (1) | WO2020189030A1 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10154057A (ja) * | 1996-09-27 | 1998-06-09 | Hitachi Ltd | 能動的利用者支援方法 |
JP2000227826A (ja) * | 1999-02-08 | 2000-08-15 | Fuji Xerox Co Ltd | アクティブ・ヘルプ装置 |
JP2008003816A (ja) * | 2006-06-21 | 2008-01-10 | Matsushita Electric Ind Co Ltd | 操作誘導装置及び操作誘導方法 |
WO2010089989A1 (ja) * | 2009-02-05 | 2010-08-12 | パナソニック株式会社 | 情報表示装置及び情報表示方法 |
US20150130705A1 (en) * | 2013-11-12 | 2015-05-14 | Samsung Electronics Co., Ltd. | Method for determining location of content and an electronic device |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150286487A1 (en) * | 2014-04-04 | 2015-10-08 | CafeX Communications Inc. | System for monitoring and analyzing application data to proactively offer assistance |
JP2016057854A (ja) | 2014-09-10 | 2016-04-21 | 日本電気株式会社 | 操作支援システムおよび操作支援方法 |
US20170169520A1 (en) * | 2015-12-14 | 2017-06-15 | Pelorus Technology Llc | Time Tracking System and Method |
US10146628B2 (en) * | 2016-06-17 | 2018-12-04 | Dell Products, L.P. | Software backup and restoration procedures using application and file monitoring |
US10318096B2 (en) * | 2016-09-16 | 2019-06-11 | Microsoft Technology Licensing, Llc | Intelligent productivity monitoring with a digital assistant |
US10671245B2 (en) * | 2017-03-29 | 2020-06-02 | Microsoft Technology Licensing, Llc | Collection and control of user activity set data and activity set user interface |
US10223138B2 (en) * | 2017-03-31 | 2019-03-05 | International Business Machines Corporation | Software installation assistance method and system |
US10908785B2 (en) * | 2018-11-06 | 2021-02-02 | Citrix Systems, Inc | Systems and methods for SaaS overlays using an embedded browser |
US20220147840A1 (en) * | 2019-07-31 | 2022-05-12 | Hewlett-Packard Development Company, L.P. | Domain knowledge determination |
-
2020
- 2020-01-29 WO PCT/JP2020/003059 patent/WO2020189030A1/ja active Application Filing
- 2020-01-29 JP JP2021506215A patent/JP7291779B2/ja active Active
- 2020-01-29 US US17/437,962 patent/US11797321B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10154057A (ja) * | 1996-09-27 | 1998-06-09 | Hitachi Ltd | 能動的利用者支援方法 |
JP2000227826A (ja) * | 1999-02-08 | 2000-08-15 | Fuji Xerox Co Ltd | アクティブ・ヘルプ装置 |
JP2008003816A (ja) * | 2006-06-21 | 2008-01-10 | Matsushita Electric Ind Co Ltd | 操作誘導装置及び操作誘導方法 |
WO2010089989A1 (ja) * | 2009-02-05 | 2010-08-12 | パナソニック株式会社 | 情報表示装置及び情報表示方法 |
US20150130705A1 (en) * | 2013-11-12 | 2015-05-14 | Samsung Electronics Co., Ltd. | Method for determining location of content and an electronic device |
Also Published As
Publication number | Publication date |
---|---|
JP7291779B2 (ja) | 2023-06-15 |
US20220179669A1 (en) | 2022-06-09 |
US11797321B2 (en) | 2023-10-24 |
JPWO2020189030A1 (ja) | 2020-09-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102424190B1 (ko) | Nsa 및 sa 네트워킹 모드 선택 방법 및 단말 기기 | |
CN113242580A (zh) | 一种小区驻留方法、终端及存储介质 | |
CN104010351A (zh) | 用于在终端中连接短程无线通信的方法和设备 | |
US9386622B2 (en) | Call service method and apparatus | |
EP2787772A1 (en) | Method for connecting short-range communication in electronic device and the electronic device | |
US20160308768A1 (en) | Electronic device and method for operating communication of the same | |
US10117135B2 (en) | Apparatuses and methods for reducing setup time of a circuit-switched fallback (CSFB) call | |
KR102191366B1 (ko) | 무선통신 시스템에서 전자장치의 핸드오버 방법 및 장치 | |
US9807439B2 (en) | Method for managing channel and electronic device therefor | |
CN112399515B (zh) | 通信处理方法及装置 | |
CN104038832A (zh) | 一种播放视频的方法及装置 | |
WO2020189030A1 (ja) | 情報生成装置、及び制御システム | |
US20160050592A1 (en) | Mobile terminal for cell reselection in cellular mobile communication system and methods therefor | |
CN114268913B (zh) | 消息域选方法及装置、存储介质及电子设备 | |
US9906456B2 (en) | Apparatuses and methods for cell selection or reselection with application-specific congestion control for data communication (ACDC), and storage medium thereof | |
JP2023542558A (ja) | ネットワーク選択方法、情報送信方法、情報取得方法及び装置 | |
JP7374990B2 (ja) | 情報処理装置 | |
WO2024022398A1 (zh) | 托管网络的选网信息的获取方法、终端及网络侧设备 | |
JP2020194990A (ja) | ノード群及びマイグレーション方法 | |
CN114760655B (zh) | 触发异频测量的方法、装置、产品、介质及设备 | |
WO2023040806A1 (zh) | 网络选择方法、装置、终端及网络侧设备 | |
US20240040414A1 (en) | Measurement method and apparatus, and terminal | |
JP6968988B2 (ja) | 認証装置、個人識別装置、及び情報処理装置 | |
US20240129717A1 (en) | Information processing method, key material obtaining method, and device | |
WO2024051546A1 (zh) | 选网方法及装置、终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20772761 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2021506215 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 20772761 Country of ref document: EP Kind code of ref document: A1 |