WO2022029908A1 - 情報処理装置及び情報処理方法 - Google Patents

情報処理装置及び情報処理方法 Download PDF

Info

Publication number
WO2022029908A1
WO2022029908A1 PCT/JP2020/029921 JP2020029921W WO2022029908A1 WO 2022029908 A1 WO2022029908 A1 WO 2022029908A1 JP 2020029921 W JP2020029921 W JP 2020029921W WO 2022029908 A1 WO2022029908 A1 WO 2022029908A1
Authority
WO
WIPO (PCT)
Prior art keywords
function
information
user
notification
input operation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2020/029921
Other languages
English (en)
French (fr)
Inventor
兼捷 本江
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to PCT/JP2020/029921 priority Critical patent/WO2022029908A1/ja
Priority to JP2022541392A priority patent/JP7224553B2/ja
Priority to CN202080104429.9A priority patent/CN115997200A/zh
Priority to DE112020007270.3T priority patent/DE112020007270B4/de
Publication of WO2022029908A1 publication Critical patent/WO2022029908A1/ja
Priority to US18/075,442 priority patent/US20230098858A1/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/348Circuit details, i.e. tracer hardware
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3438Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment monitoring of user actions
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3013Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is an embedded system, i.e. a combination of hardware and software dedicated to perform a certain function in mobile devices, printers, automotive or aircraft systems

Definitions

  • This disclosure relates to an information processing device and an information processing method.
  • An information processing device that guides users who repeat interrupted operations without knowing the operation procedure by displaying a guide for the function selected based on the operation history managed by the log management unit when monitored. (See, for example, Patent Document 1).
  • the conventional information processing device monitors the occurrence of an interruption operation that interrupts the function of the device.
  • the user executes the function of the device when the user forgets to perform the input operation even though the user has already performed the input operation to execute the function of the device. A new input operation may be performed. Since the conventional information processing device monitors the occurrence of an interruption operation that interrupts the function of the device, the conventional information processing device uses the conventional information processing device when the user repeatedly performs an input operation for executing the function of the device. , There is a problem that the input operation repeatedly performed by the user cannot be detected.
  • This disclosure is for solving the above-mentioned problems, and when the user repeatedly performs an input operation for executing a function of the device, the user is notified that the user has repeatedly performed the input operation. It is intended to provide an information processing device that enables such operations.
  • the information processing device is for executing the function possessed by the device among the operation acquisition unit that acquires the operation information corresponding to the input operation performed by the user and the plurality of operation information acquired by the operation acquisition unit.
  • Function that is an input operation The user performed the function input operation by determining whether or not the function input operation performed by the user is a repetition of a predetermined operation pattern based on a plurality of function operation information corresponding to the function input operation. It is predetermined when the operation determination unit for determining whether or not the function input operation is the operation intended by the user and the operation determination unit determine that the function input operation performed by the user is not the operation intended by the user. It is provided with a notification output unit that outputs notification information indicating that the user has performed a function input operation by repeating the operation pattern.
  • the user when the user repeatedly performs an input operation for executing a function of the device, the user can be notified that the user has repeatedly performed the input operation.
  • FIG. 1 is a block diagram showing an example of the configuration of the information processing apparatus according to the first embodiment and the main parts of the equipment to which the information processing apparatus is applied.
  • 2A and 2B are diagrams showing an example of the hardware configuration of the main part of the information processing apparatus according to the first embodiment.
  • FIG. 3 is a flowchart illustrating an example of processing of the information processing apparatus according to the first embodiment.
  • FIG. 1 is a block diagram showing an example of the configuration of the information processing device 100 according to the first embodiment and the main parts of the device 1 to which the information processing device 100 is applied.
  • the device 1 includes an operation unit 10, an output unit 20, a function execution unit 30, and an information processing device 100.
  • the device 1 is a home electric appliance such as a rice cooker, a microwave oven, an air conditioner, or a television.
  • the device 1 is not limited to home appliances.
  • the device 1 may be a mobile terminal such as a smartphone or a tablet terminal, or may be a smart speaker that searches for designated information or operates a linked home appliance based on the designated information. ..
  • the operation unit 10 is for the user to perform an input operation for controlling the device 1, and is configured by a button, a dial, or the like.
  • the operation unit 10 receives an input operation from the user and outputs operation information corresponding to the input operation to the information processing apparatus 100.
  • the operation unit 10 is not limited to the one composed of buttons or dials, and is, for example, one configured by a touch operation means including a touch panel or the like, or acquired by a voice input means such as a microphone and a microphone. It may be configured by a voice input operation means including a voice analysis acquisition means for acquiring voice analysis information corresponding to the voice.
  • the operation unit 10 is not limited to the one provided in the main body of the device 1 as long as the user performs an input operation for controlling the device 1, and the main body of the device 1 such as a remote controller is not limited to the operation unit 10. It may be configured by a remote control device separate from the above.
  • the information processing apparatus 100 acquires the operation information output by the operation unit 10, performs predetermined processing based on the acquired operation information, and outputs the notification information to the output unit 20.
  • the information processing apparatus 100 is not limited to the one provided in the main body of the device 1 as long as it acquires the operation information output by the operation unit 10 and outputs the notification information to the output unit 20.
  • the operation unit 10 is configured by a remote control device separate from the main body of the device 1
  • the information processing device 100 may be provided in the remote control device.
  • the operation unit 10 is configured by a remote operation device separate from the main body of the device 1 and the information processing device 100 is provided in the main body of the device 1, the user goes to the operation unit 10.
  • the operation information corresponding to the input operation is output to the information processing apparatus 100 via wireless communication means such as infrared communication, Bluetooth (registered trademark), wireless LAN (Local Area Network), and LTE (Long Term Evolution).
  • wireless communication means such as infrared communication, Bluetooth (registered trademark), wireless LAN (Local Area Network), and LTE (Long Term Evolution). The details of the information processing apparatus 100 will be described later.
  • the output unit 20 is composed of a display output device such as a display or a voice output device such as a speaker, acquires notification information output by the information processing device 100, and outputs a display output or a voice output based on the acquired notification information. conduct.
  • the output unit 20 is limited to the one provided in the main body of the device 1 as long as it acquires the notification information output by the information processing apparatus 100 and performs display output or voice output based on the acquired notification information. It's not a thing.
  • the operation unit 10 is configured by a remote control device separate from the main body of the device 1, the output unit 20 may be provided in the remote control device.
  • the notification information output by the information processing device 100 is infrared communication, Bluetooth ( It is output to the output unit 20 via wireless communication means such as (registered trademark), wireless LAN, and LTE.
  • the function execution unit 30 executes the function of the device 1. Specifically, the function execution unit 30 performs operation information output by the information processing apparatus 100 by performing predetermined processing by the information processing apparatus 100 based on the operation information acquired from the operation unit 10 by the information processing apparatus 100. Among the functions possessed by the device 1, the function corresponding to the operation information is executed.
  • the function of the device 1 here is, for example, a rice cooking function for cooking rice or the like if the device 1 is a rice cooker, or a rice cooking reservation function for designating a rice cooking start or rice cooking completion time.
  • the function of the device 1 is a heating function for heating foods and the like arranged in the microwave oven.
  • the function of the device 1 is a cooling function for adjusting the temperature or humidity in the room, a heating function, or a dehumidifying function, or a target value of the temperature or humidity in the room. It is a temperature setting function or a humidity setting function to set.
  • the functions possessed by the device 1 include a video output function for displaying and outputting and outputting audio based on the input video signal, and a video signal for switching the input video signal. It is a switching function, a volume setting function for setting the volume of audio output, and the like.
  • the information processing apparatus 100 includes an operation acquisition unit 110, an operation determination unit 120, a notification output unit 130, and an operation information output unit 140.
  • the operation acquisition unit 110 acquires operation information corresponding to the input operation performed by the user. Specifically, for example, the operation acquisition unit 110 acquires the operation information corresponding to the input operation performed by the user by acquiring the operation information output by the operation unit 10.
  • the operation determination unit 120 has a plurality of operation information (hereinafter referred to as “function input operation”) corresponding to an input operation (hereinafter referred to as “function input operation”) for executing a function possessed by the device 1 among the plurality of operation information acquired by the operation acquisition unit 110.
  • the function input operation performed by the user is performed by the user by determining whether or not the function input operation performed by the user is a repetition of a predetermined operation pattern based on the following "function operation information"). Determine if it is the intended operation.
  • the operation determination unit 120 acquires a single predetermined function operation information within a predetermined period based on a plurality of function operation information acquired by the operation acquisition unit 110. By determining whether or not the unit 110 has repeatedly acquired the information, it is determined whether or not the function input operation performed by the user is a repetition of a predetermined operation pattern.
  • the predetermined single function operation information is, for example, an operation corresponding to an input operation for the device 1 to execute the rice cooking function (hereinafter referred to as "rice cooking start operation"). Information.
  • the operation determination unit 120 determines whether or not the operation acquisition unit 110 has repeatedly acquired the operation information within a predetermined period.
  • the predetermined period is, for example, the period from the acquisition of the first operation information corresponding to the rice cooking start operation by the operation acquisition unit 110 to the completion of the execution of the rice cooking function by the device 1. .. That is, in this case, the predetermined period is, for example, a period during which the device 1 is cooking rice (hereinafter referred to as “rice cooking period”).
  • the operation determination unit 120 is performed by the user. It is determined that the function input operation is not the operation intended by the user.
  • the operation acquisition unit 110 acquires the first operation information corresponding to the rice cooking start operation
  • the operation determination unit 120 does not repeatedly acquire the operation information during the rice cooking period. It is determined that the function input operation performed by the user is the operation intended by the user.
  • the operation information output unit 140 corresponds to the function input operation acquired by the operation acquisition unit 110. Is output to the function execution unit 30 provided in the device 1.
  • the function execution unit 30 acquires the function operation information output by the operation information output unit 140 and executes the function corresponding to the function operation information. That is, the operation information output unit 140 has a function corresponding to the function input operation acquired by the operation acquisition unit 110 when the operation determination unit 120 determines that the function input operation performed by the user is the operation intended by the user.
  • the operation information is output to the function execution unit 30 provided in the device 1, and the function execution unit 30 is made to execute the function corresponding to the function operation information.
  • the notification output unit 130 repeats a predetermined operation pattern to indicate that the user has performed the function input operation. Is output to the output unit 20 provided in the device 1.
  • the output unit 20 acquires the notification information output by the notification output unit 130, and performs display output or voice output based on the acquired notification information. That is, when the notification output unit 130 determines that the function input operation performed by the user is not the operation intended by the user, the notification information indicating that the user has performed the function input operation by repeating a predetermined operation pattern. Is output to the output unit 20 provided in the device 1, and the output unit 20 is made to perform display output or voice output based on the notification information.
  • the notification output unit 130 tells the output unit 20 that the rice is being cooked.
  • the rice cooker start operation has been performed.
  • ”And output notification information to output the display output or voice output to the output unit 20.
  • the information processing apparatus 100 when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation. Can be done.
  • the notification output unit 130 When the notification output unit 130 outputs the notification information, the notification output unit 130 includes the confirmation information for confirming whether or not the function corresponding to the function operation information acquired by the operation acquisition unit 110 may be executed and outputs the notification information. It may be a thing.
  • the output unit 20 acquires the notification information output by the notification output unit 130 including the confirmation information, and performs display output or voice output based on the acquired notification information. Specifically, for example, when the device 1 is a rice cooker and the operation acquisition unit 110 acquires the operation information corresponding to the rice cooking start operation during the rice cooking period, the notification output unit 130 tells the output unit 20 that the rice is being cooked. The rice cooking start operation has been performed. Do you want to stop the current rice cooking and start cooking again?
  • the operation acquisition unit 110 acquires the operation information corresponding to the input operation from the user corresponding to the confirmation information included in the notification information.
  • the operation acquisition unit 110 acquires the operation information corresponding to the input operation indicating "Yes", for example, the operation information output unit 140 outputs the information for stopping the function being executed to the function execution unit 30. Further, the operation determination unit 120 outputs the function operation information used when determining whether or not the function input operation performed by the user is a repetition of a predetermined operation pattern to the function execution unit 30. Further, when the operation acquisition unit 110 acquires the operation information corresponding to the input operation indicating "No", for example, in the operation information output unit 140, the function input operation performed by the user is predetermined in the operation determination unit 120. Deletes the function operation information used to determine whether or not the operation pattern is repeated.
  • the information processing apparatus 100 when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation.
  • the input operation is the operation intended by the user, the device 1 can be made to execute the function corresponding to the input operation.
  • the notification output unit 130 may include a plurality of function operation information acquired by the operation acquisition unit 110 in the notification information as operation history information when outputting the notification information.
  • the output unit 20 is a display output device, for example, the output unit 20 acquires notification information including operation history information, repeats a predetermined operation pattern indicated by the notification information, and the user performs a function input operation. The notification to that effect and the operation history information included in the notification information are displayed and output.
  • the information processing apparatus 100 when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation. It is possible to provide the user with information indicating the history of the input operation performed by the user.
  • the operation determination unit 120 may measure the number of times the operation pattern is repeated when the function input operation performed by the user is the repetition of a predetermined operation pattern.
  • the notification output unit 130 is used for notification information. It is preferable to output the notification information in the mode corresponding to the number of repetitions measured by the operation determination unit 120.
  • the notification output unit 130 is based on the number of repetitions measured by the operation determination unit 120, as compared with the case where the number of repetitions is large and the number of repetitions is small. , Outputs notification information in a mode in which the font of characters to be displayed on the output unit 20 is enlarged.
  • the mode of the notification information output by the notification output unit 130 based on the number of repetitions measured by the operation determination unit 120 changes the size of the character font to be displayed on the output unit 20. It is not limited to doing.
  • the notification output unit 130 draws the user's attention to the characters displayed on the output unit 20 as compared with the case where the number of repetitions is large and the number of repetitions is small. As long as the notification information is output, the notification information in which the color of the characters is changed may be output, or the notification information in which the background color of the characters is changed may be output. Further, when the output unit 20 is a voice output device, for example, the notification output unit 130 is based on the number of repetitions measured by the operation determination unit 120, and the output unit is compared with the case where the number of repetitions is large and the number of repetitions is small. 20 Outputs notification information in a mode in which the volume to be output by voice is increased.
  • the information processing apparatus 100 when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation. Can be done. In particular, with the above configuration, the information processing apparatus 100 more reliably notifies the user of the notification when the user repeatedly performs an input operation for executing the function of the device 1. be able to.
  • the operation determination unit 120 obtains a predetermined single function operation information within a predetermined period based on a plurality of function operation information acquired by the operation acquisition unit 110. By determining whether or not the 110 has repeatedly acquired, it is determined whether or not the function input operation performed by the user is a repetition of a predetermined operation pattern. However, the operation determination unit 120 determines whether or not the function input operation is repeated. The method of determining whether or not the function input operation performed by the user is a repetition of a predetermined operation pattern is to obtain a predetermined single function operation information within a predetermined period of time by the operation acquisition unit 110. Is not limited to the determination as to whether or not the acquisition is repeated.
  • the operation determination unit 120 sets a function operation information set consisting of a plurality of predetermined function operation information different from each other based on a plurality of function operation information acquired by the operation acquisition unit 110 within a predetermined period. By determining whether or not the operation acquisition unit 110 has repeatedly acquired the information, it may be determined whether or not the function input operation performed by the user is a repetition of a predetermined operation pattern.
  • the operation unit 10 when the operation unit 10 is composed of a plurality of remote control devices, a plurality of users can perform a function input operation for executing a plurality of functions possessed by the device 1 by using the plurality of remote control devices. I may go. Further, for example, a child user, a user suffering from a mental disease, a neurological disease, or the like executes a plurality of functions possessed by the device 1 even though the user does not intend to execute the specific function possessed by the device 1.
  • the function input operation for making the function may be repeated. More specifically, when the device 1 is an air conditioner, for example, the above-mentioned user repeatedly performs a function input operation for executing the cooling function, the heating function, and the dehumidifying function of the device 1. Etc. are conceivable.
  • the information processing apparatus 100 includes a plurality of predetermined function operation information different from each other based on the plurality of function operation information acquired by the operation determination unit 120 by the operation determination unit 120. By determining whether or not the operation acquisition unit 110 has repeatedly acquired the function operation information set within a predetermined period, whether the function input operation performed by the user is a repetition of the predetermined operation pattern. It can be determined whether or not.
  • FIGS. 2A and 2B are diagrams showing an example of the hardware configuration of the main part of the information processing apparatus 100 according to the first embodiment.
  • the information processing apparatus 100 is composed of a computer, which has a processor 201 and a memory 202.
  • the memory 202 stores a program for causing the computer to function as an operation acquisition unit 110, an operation determination unit 120, a notification output unit 130, and an operation information output unit 140.
  • the processor 201 reads out and executes the program stored in the memory 202, the operation acquisition unit 110, the operation determination unit 120, the notification output unit 130, and the operation information output unit 140 are realized.
  • the information processing apparatus 100 may be configured by the processing circuit 203.
  • the functions of the operation acquisition unit 110, the operation determination unit 120, the notification output unit 130, and the operation information output unit 140 may be realized by the processing circuit 203.
  • the information processing apparatus 100 may be composed of a processor 201, a memory 202, and a processing circuit 203 (not shown).
  • a processor 201 some of the functions of the operation acquisition unit 110, the operation determination unit 120, the notification output unit 130, and the operation information output unit 140 are realized by the processor 201 and the memory 202, and the remaining functions are the processing circuit. It may be realized by 203.
  • the processor 201 uses, for example, a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), a microprocessor, a microprocessor, or a DSP (Digital Signal Processor).
  • a CPU Central Processing Unit
  • GPU Graphics Processing Unit
  • microprocessor a microprocessor
  • DSP Digital Signal Processor
  • the memory 202 uses, for example, a semiconductor memory or a magnetic disk. More specifically, the memory 202 includes a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory, an EPROM (Erasable Programmable Read Only Memory), and an EEPROM (Electrically SSD). State Drive) or HDD (Hard Disk Drive) or the like is used.
  • RAM Random Access Memory
  • ROM Read Only Memory
  • flash memory a flash memory
  • EPROM Erasable Programmable Read Only Memory
  • EEPROM Electrically SSD. State Drive
  • HDD Hard Disk Drive
  • the processing circuit 203 is, for example, an ASIC (Application Specific Integrated Circuit), a PLD (Programmable Logic Device), an FPGA (Field-Programmable Gate Array), an FPGA (Field-Programmable Gate Array), a System-System (System) System ) Is used.
  • ASIC Application Specific Integrated Circuit
  • PLD Programmable Logic Device
  • FPGA Field-Programmable Gate Array
  • FPGA Field-Programmable Gate Array
  • FIG. 3 is a flowchart illustrating an example of processing of the information processing apparatus 100 according to the first embodiment.
  • the information processing apparatus 100 repeatedly executes the processing of the flowchart.
  • step ST301 the operation acquisition unit 110 acquires operation information.
  • step ST302 the operation determination unit 120 determines whether or not the function input operation performed by the user is the operation intended by the user.
  • the operation information output unit 140 performs a function operation on the function execution unit 30 in step ST303. Output information.
  • step ST303 the information processing apparatus 100 ends the processing of the flowchart, returns to step ST301, and executes the processing of the flowchart.
  • step ST302 If the operation determination unit 120 determines in step ST302 that the function input operation performed by the user is not the operation intended by the user, the operation determination unit 120 measures the number of repetitions of the operation pattern in step ST311. After step ST311 in step ST312, the notification output unit 130 outputs the notification information. After step ST312, in step ST313, the operation acquisition unit 110 acquires the operation information corresponding to the input operation from the user corresponding to the confirmation information included in the notification information. After step ST313, in step ST314, the operation acquisition unit 110 determines whether or not the operation information acquired by the operation acquisition unit 110 is the operation information corresponding to the input operation indicating "yes".
  • step ST314 determines in step ST314 that the operation information is the operation information corresponding to the input operation indicating "yes", in step ST315, the operation information output unit 140 performs the function being executed. Output information to stop. After step ST315, the operation information output unit 140 executes the process of step ST303.
  • the operation acquisition unit 110 determines in step ST314 that the operation information is not the operation information corresponding to the input operation indicating "yes", that is, the operation acquisition unit 110 is an input operation indicating that the operation information is "no". If it is determined that the operation information corresponds to, the operation information output unit 140 deletes the function operation information in step ST321.
  • step ST321 the information processing apparatus 100 ends the processing of the flowchart, returns to step ST301, and executes the processing of the flowchart.
  • the information processing apparatus 100 has the operation acquisition unit 110 that acquires the operation information corresponding to the input operation performed by the user, and the function of the device 1 among the plurality of operation information acquired by the operation acquisition unit 110.
  • the operation acquisition unit 110 that acquires the operation information corresponding to the input operation performed by the user, and the function of the device 1 among the plurality of operation information acquired by the operation acquisition unit 110.
  • the operation determination unit 120 that determines whether or not the function input operation performed by the user is the operation intended by the user, and the operation determination unit 120 determine that the function input operation performed by the user is not the operation intended by the user.
  • a notification output unit 130 for outputting notification information indicating that the user has performed a function input operation by repeating a predetermined operation pattern.
  • the operation determination unit 120 has a single function operation information predetermined based on a plurality of function operation information acquired by the operation acquisition unit 110. By determining whether or not the operation acquisition unit 110 has repeatedly acquired the information within a predetermined period, it is determined whether or not the function input operation performed by the user is a repetition of the predetermined operation pattern. It was configured to do. With this configuration, when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation. It can be carried out.
  • the operation determination unit 120 has a plurality of predetermined function operations different from each other based on the plurality of function operation information acquired by the operation acquisition unit 110. By determining whether or not the operation acquisition unit 110 has repeatedly acquired the function operation information set consisting of information within a predetermined period, the function input operation performed by the user repeats the predetermined operation pattern. It was configured to determine whether or not it was. With this configuration, when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation. It can be carried out.
  • the information processing apparatus 100 executes a function corresponding to the function operation information acquired by the operation acquisition unit 110 when the notification output unit 130 outputs the notification information.
  • the confirmation information for confirming whether or not it is good is included in the notification information and output, and the operation acquisition unit 110 acquires the operation information corresponding to the input operation from the user corresponding to the confirmation information included in the notification information.
  • the information processing apparatus 100 when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation. While performing the input operation, if the input operation is the operation intended by the user, the device 1 can be made to execute the function corresponding to the input operation.
  • the information processing apparatus 100 when the notification output unit 130 outputs the notification information, the information processing apparatus 100 notifies the plurality of function operation information acquired by the operation acquisition unit 110 as operation history information. It was configured to be included in the information and output. With this configuration, when the user repeatedly performs an input operation for executing the function of the device 1, the information processing apparatus 100 notifies the user that the user has repeatedly performed the input operation. While doing so, it is possible to provide the user with information indicating a history of input operations performed by the user.
  • the operation determination unit 120 repeats the operation pattern when the function input operation performed by the user is a repetition of a predetermined operation pattern.
  • the notification output unit 130 is configured to output the notification information in a mode corresponding to the number of repetitions measured by the operation determination unit 120.
  • the information processing device can be applied to devices such as home appliances, mobile terminals, and smart speakers.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Debugging And Monitoring (AREA)

Abstract

情報処理装置(100)は、ユーザが行った入力操作に対応する操作情報を取得する操作取得部(110)と、操作取得部(100)が取得する複数の操作情報のうち、機器が有する機能を実行させるための入力操作である機能入力操作に対応する複数の機能操作情報に基づいて、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定することにより、ユーザが行った機能入力操作がユーザの意図した操作であるか否かを判定する操作判定部(120)と、操作判定部(120)が、ユーザが行った機能入力操作がユーザの意図した操作でないと判定した場合に、予め定められた操作パターンを繰り返してユーザが機能入力操作を行った旨を示す通知情報を出力する通知出力部(130)と、を備えた。

Description

情報処理装置及び情報処理方法
 この開示は、情報処理装置及び情報処理方法に関するものである。
 ログ管理部により管理される操作履歴に基づいて中断処理が所定時間内に複数回発生したかどうかを監視し、中断操作の発生に応じて、中断操作が所定時間内に複数回発生したことを監視された場合に、ログ管理部により管理されている操作履歴に基づき選択される機能のガイド表示を行うことにより、操作手順が分からずに中断操作を繰り返すユーザに対してガイドを行う情報処理装置がある(例えば、特許文献1参照。)。
 従来の情報処理装置は、機器が有する機能を中断させる中断操作の発生を監視するものである。
特開2017-73596号公報
 ユーザは、機器が有する機能を実行させる入力操作をユーザが既に行っていたにも関わらず、ユーザが当該入力操作を行ったことを忘れてしまった等の場合に、機器が有する機能を実行させる入力操作を新たに行ってしまうことがある。
 従来の情報処理装置は、機器が有する機能を中断させる中断操作の発生を監視するものであるため、機器が有する機能を実行させる入力操作をユーザが繰り返して行った場合、従来の情報処理装置では、ユーザが繰り返して行った当該入力操作を検知できないという問題点があった。
 この開示は、上述の問題点を解決するためのもので、機器が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行うことを可能にする情報処理装置を提供することを目的としている。
 この開示に係る情報処理装置は、ユーザが行った入力操作に対応する操作情報を取得する操作取得部と、操作取得部が取得する複数の操作情報のうち、機器が有する機能を実行させるための入力操作である機能入力操作に対応する複数の機能操作情報に基づいて、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定することにより、ユーザが行った機能入力操作がユーザの意図した操作であるか否かを判定する操作判定部と、操作判定部が、ユーザが行った機能入力操作がユーザの意図した操作でないと判定した場合に、予め定められた操作パターンを繰り返してユーザが機能入力操作を行った旨を示す通知情報を出力する通知出力部と、を備えたものである。
 この開示によれば、機器が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行うことができる。
図1は、実施の形態1に係る情報処理装置、及び、情報処理装置が適用された機器の要部の構成の一例を示すブロック図である。 図2A及び図2Bは、実施の形態1に係る情報処理装置の要部のハードウェア構成の一例を示す図である。 図3は、実施の形態1に係る情報処理装置の処理の一例を説明するフローチャートである。
 以下、この開示の実施の形態について、図面を参照しながら詳細に説明する。
実施の形態1.
 図1から図3を参照して、実施の形態1に係る情報処理装置100、及び、情報処理装置100が適用された機器1について説明する。
 図1は、実施の形態1に係る情報処理装置100、及び、情報処理装置100が適用された機器1の要部の構成の一例を示すブロック図である。
 機器1は、操作部10、出力部20、機能実行部30、及び情報処理装置100を備える。
 機器1は、炊飯器、電子レンジ、エアーコンディショナ、又はテレビジョン等の家電機器である。
 機器1は、家電機器に限定されるものではない。例えば、機器1は、スマートフォン又はタブレット端末等の携帯端末であっても、指定された情報の検索、又は、指定された情報に基づいて連携する家電機器の操作を行うスマートスピーカであってもよい。
 操作部10は、ユーザが機器1を制御するための入力操作を行うためのものであり、ボタン又はダイアル等により構成されている。操作部10は、ユーザからの入力操作を受けて、当該入力操作に対応する操作情報を情報処理装置100に出力する。
 操作部10は、ボタン又はダイアルにより構成されるものに限定されるものではなく、例えば、タッチパネル等からなるタッチ操作手段により構成されたもの、又は、マイク等の音声入力手段と、マイクにより取得した音声に対応する音声解析情報を取得する音声解析取得手段とからなる音声入力操作手段により構成されたもの等であってもよい。
 また、操作部10は、ユーザが機器1を制御するための入力操作を行うものであれば、機器1の本体に備えられたものに限定されるものではなく、リモートコントローラ等の機器1の本体とは別体の遠隔操作装置により構成されたものであってもよい。
 情報処理装置100は、操作部10が出力する操作情報を取得し、取得した操作情報に基づいて予め定められた処理を行い、通知情報を出力部20に出力する。情報処理装置100は、操作部10が出力する操作情報を取得し、通知情報を出力部20に出力するものであれば、機器1の本体に備えられたものに限定されるものではない。例えば、操作部10が機器1の本体とは別体の遠隔操作装置により構成されたものである場合、情報処理装置100は、当該遠隔操作装置に備えられたものであってもよい。
 操作部10が機器1の本体とは別体の遠隔操作装置により構成されたものであり、情報処理装置100が機器1の本体に備えられたものである場合、ユーザが操作部10に行った入力操作に対応する操作情報は、赤外線通信、Bluetooth(登録商標)、無線LAN(Local Area Network)、LTE(Long Term Evolution)等の無線通信手段を介して、情報処理装置100に出力される。
 情報処理装置100の詳細については後述する。
 出力部20は、ディスプレイ等の表示出力装置、又は、スピーカ等の音声出力装置により構成され、情報処理装置100が出力する通知情報を取得して、取得した通知情報に基づく表示出力又は音声出力を行う。
 出力部20は、情報処理装置100が出力する通知情報を取得して、取得した通知情報に基づく表示出力又は音声出力を行うものであれば、機器1の本体に備えられたものに限定されるものではない。例えば、操作部10が機器1の本体とは別体の遠隔操作装置により構成されたものである場合、出力部20は、当該遠隔操作装置に備えられたものであってもよい。
 出力部20が当該遠隔操作装置に備えられたものであり、情報処理装置100が機器1の本体に備えられたものである場合、情報処理装置100が出力する通知情報は、赤外線通信、Bluetooth(登録商標)、無線LAN、LTE等の無線通信手段を介して、出力部20に出力される。
 機能実行部30は、機器1が有する機能を実行する。具体的には、機能実行部30は、情報処理装置100が操作部10から取得する操作情報に基づいて情報処理装置100が予め定められた処理を行うことにより情報処理装置100が出力する操作情報に基づいて、機器1が有する機能のうち当該操作情報に対応する機能を実行する。
 ここでいう機器1が有する機能とは、例えば、機器1が炊飯器であれば、米等を炊く炊飯機能、又は、炊飯開始若しくは炊飯完了時刻を指定する炊飯予約機能等である。また、例えば、機器1が電子レンジである場合、機器1が有する機能とは、電子レンジ内に配置された食材等を加温する加温機能等である。また、例えば、機器1がエアーコンディショナである場合、機器1が有する機能とは、室内の温度若しくは湿度を調整する冷房機能、暖房機能、若しくは除湿機能、又は、室内の温度若しくは湿度の目標値を設定する温度設定機能若しくは湿度設定機能等である。また、例えば、機器1がテレビジョンである場合、機器1が有する機能とは、入力された映像信号に基づく画像及び音声を表示出力及び音声出力する映像出力機能、入力する映像信号を切り替える映像信号切替機能、又は、音声出力する音量を設定する音量設定機能等である。
 情報処理装置100について説明する。
 情報処理装置100は、操作取得部110、操作判定部120、通知出力部130、及び操作情報出力部140を備える。
 操作取得部110は、ユーザが行った入力操作に対応する操作情報を取得する。具体的には、例えば、操作取得部110は、操作部10が出力する操作情報を取得することにより、ユーザが行った入力操作に対応する操作情報を取得する。
 操作判定部120は、操作取得部110が取得する複数の操作情報のうち、機器1が有する機能を実行させるための入力操作(以下「機能入力操作」という。)に対応する複数の操作情報(以下「機能操作情報」という。)に基づいて、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定することにより、ユーザが行った機能入力操作がユーザの意図した操作であるか否かを判定する。
 具体的には、例えば、操作判定部120は、操作取得部110が取得する複数の機能操作情報に基づいて、予め定められた単一の機能操作情報を、予め定められた期間内に操作取得部110が繰り返して取得したか否かを判定することにより、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定する。
 機器1が炊飯器である場合、予め定められた単一の機能操作情報とは、例えば、機器1が炊飯機能を実行するための入力操作(以下「炊飯開始操作」という。)に対応する操作情報である。当該場合、操作判定部120は、予め定められた期間内に当該操作情報を操作取得部110が繰り返して取得したか否かを判定する。当該場合、予め定められた期間とは、例えば、操作取得部110が炊飯開始操作に対応する1回目の操作情報を取得してから、機器1が炊飯機能の実行を完了するまでの期間である。すなわち、当該場合、予め定められた期間とは、例えば、機器1が炊飯している期間(以下「炊飯期間」という。)である。
 炊飯期間中に、機器1が炊飯機能を実行しているにも関わらず、操作取得部110が炊飯開始操作に対応する2回目の操作情報を取得した場合、操作判定部120は、ユーザが行った機能入力操作がユーザの意図した操作でないと判定する。
 なお、操作取得部110が炊飯開始操作に対応する1回目の操作情報を取得した場合、操作判定部120は、当該操作情報を炊飯期間中に操作取得部110が繰り返して取得していないため、ユーザが行った機能入力操作がユーザの意図した操作であると判定する。
 操作情報出力部140は、操作判定部120が、ユーザが行った機能入力操作がユーザの意図した操作であると判定した場合に、操作取得部110が取得した機能入力操作に対応する機能操作情報を機器1が備える機能実行部30に出力する。
 機能実行部30は、操作情報出力部140が出力する機能操作情報を取得して、当該機能操作情報に対応する機能を実行する。すなわち、操作情報出力部140は、操作判定部120が、ユーザが行った機能入力操作がユーザの意図した操作であると判定した場合に、操作取得部110が取得した機能入力操作に対応する機能操作情報を機器1が備える機能実行部30に出力して、機能実行部30に当該機能操作情報に対応する機能を実行させる。
 通知出力部130は、操作判定部120が、ユーザが行った機能入力操作がユーザの意図した操作でないと判定した場合に、予め定められた操作パターンを繰り返してユーザが機能入力操作を行った旨を示す通知情報を機器1が備える出力部20に出力する。
 出力部20は、通知出力部130が出力する通知情報を取得して、取得した通知情報に基づく表示出力又は音声出力を行う。すなわち、通知出力部130は、ユーザが行った機能入力操作がユーザの意図した操作でないと判定した場合に、予め定められた操作パターンを繰り返してユーザが機能入力操作を行った旨を示す通知情報を機器1が備える出力部20に出力して、出力部20に当該通知情報に基づく表示出力又は音声出力を行わせる。
 具体的には、例えば、機器1が炊飯器であり、炊飯期間中に操作取得部110が炊飯開始操作に対応する操作情報を取得した場合、通知出力部130は、出力部20に「炊飯中に炊飯開始操作が行われました。」等の表示出力又は音声出力を行わせる通知情報を出力部20に出力する。
 以上のように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行うことができる。
 通知出力部130は、通知情報を出力する際に、操作取得部110が取得した機能操作情報に対応する機能を実行しても良いか否かを確認する確認情報を通知情報に含めて出力するものであってもよい。
 出力部20は、確認情報を含む通知出力部130が出力する通知情報を取得して、取得した通知情報に基づく表示出力又は音声出力を行う。
 具体的には、例えば、機器1が炊飯器であり、炊飯期間中に操作取得部110が炊飯開始操作に対応する操作情報を取得した場合、通知出力部130は、出力部20に「炊飯中に炊飯開始操作が行われました。現在の炊飯を停止して炊飯を開始し直しますか。」等の表示出力又は音声出力を行わせる通知情報を出力部20に出力する。
 ユーザは、通知情報に含まれる確認情報に対応する「はい」又は「いいえ」等を示す入力操作を操作部10に行う。
 操作取得部110は、通知情報に含まれる確認情報に対応するユーザからの入力操作に対応する操作情報を取得する。
 操作取得部110が「はい」を示す入力操作に対応する操作情報を取得した場合、例えば、操作情報出力部140は、実行中の機能を停止するための情報を機能実行部30に出力し、更に、操作判定部120が、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定する際に用いた機能操作情報を機能実行部30に出力する。
 また、操作取得部110が「いいえ」を示す入力操作に対応する操作情報を取得した場合、例えば、操作情報出力部140は、操作判定部120が、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定する際に用いた機能操作情報を消去する。
 以上のように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行いつつ、当該入力操作がユーザの意図した操作である場合に、当該入力操作に対応する機能を機器1に実行させることができる。
 また、通知出力部130は、通知情報を出力する際に、操作取得部110が取得した複数の機能操作情報を操作履歴情報として通知情報に含めて出力するものであってもよい。
 出力部20が表示出力装置である場合、例えば、出力部20は、操作履歴情報を含む通知情報を取得して、通知情報が示す予め定められた操作パターンを繰り返してユーザが機能入力操作を行った旨の通知と、通知情報に含まれる操作履歴情報とを表示出力する。
 以上のように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行いつつ、ユーザが行った入力操作の履歴を示す情報をユーザに提供することができる。
 操作判定部120は、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しである場合に、操作パターンの繰り返し回数を計測するものであってもよい。
 操作判定部120が、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しである場合に、操作パターンの繰り返し回数を計測するものである場合、例えば、通知出力部130は、通知情報を出力する際に、操作判定部120が計測した繰り返し回数に対応する態様の通知情報を出力することが好適である。
 具体的には、出力部20が表示出力装置である場合、例えば、通知出力部130は、操作判定部120が計測した繰り返し回数に基づいて、繰り返し回数が多い場合には少ない場合と比較して、出力部20に表示させる文字のフォントを大きくした態様の通知情報を出力する。
 出力部20が表示出力装置である場合、操作判定部120が計測した繰り返し回数に基づいて通知出力部130が出力する通知情報の態様は、出力部20に表示させる文字のフォントの大きさを変更することに限定されるものではない。例えば、出力部20が表示出力装置である場合、通知出力部130は、繰り返し回数が多い場合には少ない場合と比較して、出力部20に表示させる文字を、よりユーザの注意をひく態様にした通知情報を出力するものであれば、文字の色を変更した通知情報を出力するもの、又は、文字の背景色を変更した通知情報を出力するもの等であってもよい。
 また、出力部20が音声出力装置である場合、例えば、通知出力部130は、操作判定部120が計測した繰り返し回数に基づいて、繰り返し回数が多い場合には少ない場合と比較して、出力部20に音声出力させる音量を大きくした態様の通知情報を出力する。
 以上のように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行うことができる。特に、以上のように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った回数が多い場合に、より確実に当該通知をユーザに知らしめることができる。
 これまでの説明において、操作判定部120は、操作取得部110が取得する複数の機能操作情報に基づいて、予め定められた単一の機能操作情報を、予め定められた期間内に操作取得部110が繰り返して取得したか否かを判定することにより、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定するものとしたが、操作判定部120は、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定する方法は、予め定められた単一の機能操作情報を、予め定められた期間内に操作取得部110が繰り返して取得したか否かの判定に限定されるものではない。
 例えば、操作判定部120は、操作取得部110が取得する複数の機能操作情報に基づいて、予め定められた互いに異なる複数の機能操作情報からなる機能操作情報組を、予め定められた期間内に操作取得部110が繰り返して取得したか否かを判定することにより、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定してもよい。
 例えば、操作部10が複数の遠隔操作装置により構成されたものである場合、複数の遠隔操作装置を用いて、複数のユーザが、機器1が有する複数の機能を実行させるための機能入力操作を行ってしまうことがある。
 また、例えば、子供のユーザ、又は、精神疾患若しくは神経疾患等を患ったユーザ等が、機器1が有する特定の機能を実行させる意図がないにも関わらず、機器1が有する複数の機能を実行させるための機能入力操作を繰り返して行ってしまうことがある。
 より具体的には、機器1がエアーコンディショナである場合、例えば、上述のユーザが、機器1が有する冷房機能、暖房機能、及び除湿機能を実行させるための機能入力操作を繰り返して行ってしまう等が考えられる。
 このような場合であっても、情報処理装置100は、操作判定部120が、操作取得部110が取得する複数の機能操作情報に基づいて、予め定められた互いに異なる複数の機能操作情報からなる機能操作情報組を、予め定められた期間内に操作取得部110が繰り返して取得したか否かを判定することにより、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定することができる。
 図2A及び図2Bを参照して、実施の形態1に係る情報処理装置100の要部のハードウェア構成について説明する。
 図2A及び図2Bは、実施の形態1に係る情報処理装置100の要部のハードウェア構成の一例を示す図である。
 図2Aに示す如く、情報処理装置100は、コンピュータにより構成されており、当該コンピュータは、プロセッサ201及びメモリ202を有している。
 メモリ202には、当該コンピュータを、操作取得部110、操作判定部120、通知出力部130、及び操作情報出力部140として機能させるためのプログラムが記憶されている。メモリ202に記憶されているプログラムをプロセッサ201が読み出して実行することにより、操作取得部110、操作判定部120、通知出力部130、及び操作情報出力部140が実現される。
 また、図2Bに示す如く、情報処理装置100は、処理回路203により構成されても良い。この場合、操作取得部110、操作判定部120、通知出力部130、及び操作情報出力部140の機能が処理回路203により実現されても良い。
 また、情報処理装置100はプロセッサ201、メモリ202、及び処理回路203により構成されても良い(不図示)。この場合、操作取得部110、操作判定部120、通知出力部130、及び操作情報出力部140の機能のうちの一部の機能がプロセッサ201及びメモリ202により実現されて、残余の機能が処理回路203により実現されるものであっても良い。
 プロセッサ201は、例えば、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、マイクロプロセッサ、マイクロコントローラ、又はDSP(Digital Signal Processor)を用いたものである。
 メモリ202は、例えば、半導体メモリ又は磁気ディスクを用いたものである。より具体的には、メモリ202は、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable Read Only Memory)、EEPROM(Electrically Erasable Programmable Read-Only Memory)、SSD(Solid State Drive)、又はHDD(Hard Disk Drive)などを用いたものである。
 処理回路203は、例えば、ASIC(Application Specific Integrated Circuit)、PLD(Programmable Logic Device)、FPGA(Field-Programmable Gate Array)、SoC(System-on-a-Chip)、又はシステムLSI(Large-Scale Integration)を用いたものである。
 図3を参照して、実施の形態1に係る情報処理装置100の動作について説明する。
 図3は、実施の形態1に係る情報処理装置100の処理の一例を説明するフローチャートである。
 情報処理装置100は、当該フローチャートの処理を繰り返し実行する。
 まず、ステップST301にて、操作取得部110は、操作情報を取得する。
 次に、ステップST302にて、操作判定部120は、ユーザが行った機能入力操作がユーザの意図した操作であるか否かを判定する。
 ステップST302にて、操作判定部120が、ユーザが行った機能入力操作がユーザの意図した操作であると判定し場合、ステップST303にて、操作情報出力部140は、機能実行部30に機能操作情報を出力する。
 ステップST303の後、情報処理装置100は、当該フローチャートの処理を終了し、ステップST301に戻って当該フローチャートの処理を実行する。
 ステップST302にて、操作判定部120が、ユーザが行った機能入力操作がユーザの意図した操作でないと判定し場合、ステップST311にて、操作判定部120は、操作パターンの繰り返し回数を計測する。
 ステップST311の後、ステップST312にて、通知出力部130は、通知情報を出力する。
 ステップST312の後、ステップST313にて、操作取得部110は、通知情報に含まれる確認情報に対応するユーザからの入力操作に対応する操作情報を取得する。
 ステップST313の後、ステップST314にて、操作取得部110は、操作取得部110が取得した操作情報が「はい」を示す入力操作に対応する操作情報であるか否かを判定する。
 ステップST314にて、操作取得部110が、操作情報が「はい」を示す入力操作に対応する操作情報であると判定した場合、ステップST315にて、操作情報出力部140は、実行中の機能を停止するための情報を出力する。
 ステップST315の後、操作情報出力部140は、ステップST303の処理を実行する。
 ステップST314にて、操作取得部110が、操作情報が「はい」を示す入力操作に対応する操作情報でないと判定した場合、すなわち、操作取得部110が、操作情報が「いいえ」を示す入力操作に対応する操作情報であると判定した場合、ステップST321にて、操作情報出力部140は、機能操作情報を消去する。
 ステップST321の後、情報処理装置100は、当該フローチャートの処理を終了し、ステップST301に戻って当該フローチャートの処理を実行する。
 以上のように、情報処理装置100は、ユーザが行った入力操作に対応する操作情報を取得する操作取得部110と、操作取得部110が取得する複数の操作情報のうち、機器1が有する機能を実行させるための入力操作である機能入力操作に対応する複数の機能操作情報に基づいて、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定することにより、ユーザが行った機能入力操作がユーザの意図した操作であるか否かを判定する操作判定部120と、操作判定部120が、ユーザが行った機能入力操作がユーザの意図した操作でないと判定した場合に、予め定められた操作パターンを繰り返してユーザが機能入力操作を行った旨を示す通知情報を出力する通知出力部130と、を備えた。
 このように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行うことができる。
 また、以上のように、情報処理装置100は、上述の構成において、操作判定部120は、操作取得部110が取得する複数の機能操作情報に基づいて、予め定められた単一の機能操作情報を、予め定められた期間内に操作取得部110が繰り返して取得したか否かを判定することにより、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定するように構成した。
 このように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行うことができる。
 また、以上のように、情報処理装置100は、上述の構成において、操作判定部120は、操作取得部110が取得する複数の機能操作情報に基づいて、予め定められた互いに異なる複数の機能操作情報からなる機能操作情報組を、予め定められた期間内に操作取得部110が繰り返して取得したか否かを判定することにより、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定するように構成した。
 このように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行うことができる。
 また、以上のように、情報処理装置100は、上述の構成において、通知出力部130は、通知情報を出力する際に、操作取得部110が取得した機能操作情報に対応する機能を実行しても良いか否かを確認する確認情報を通知情報に含めて出力し、操作取得部110は、通知情報に含まれる確認情報に対応するユーザからの入力操作に対応する操作情報を取得するように構成した。
 このように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行いつつ、当該入力操作がユーザの意図した操作である場合に、当該入力操作に対応する機能を機器1に実行させることができる。
 また、以上のように、情報処理装置100は、上述の構成において、通知出力部130は、通知情報を出力する際に、操作取得部110が取得した複数の機能操作情報を操作履歴情報として通知情報に含めて出力するように構成した。
 このように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った場合に、ユーザが当該入力操作を繰り返して行った旨の通知をユーザに行いつつ、ユーザが行った入力操作の履歴を示す情報をユーザに提供することができる。
 また、以上のように、情報処理装置100は、上述の構成において、操作判定部120は、ユーザが行った機能入力操作が予め定められた操作パターンの繰り返しである場合に、操作パターンの繰り返し回数を計測し、通知出力部130は、通知情報を出力する際に、操作判定部120が計測した繰り返し回数に対応する態様の通知情報を出力するように構成した。
 このように構成することにより、情報処理装置100は、機器1が有する機能を実行させる入力操作をユーザが繰り返して行った回数が多い場合に、より確実に当該通知をユーザに知らしめることができる。
 なお、この開示は、その開示の範囲内において、実施の形態の任意の構成要素の変形、もしくは実施の形態において任意の構成要素の省略が可能である。
 この開示に係る情報処理装置は、家電機器、携帯端末、又はスマートスピーカ等の機器に適用することができる。
 1 機器、10 操作部、20 出力部、30 機能実行部、100 情報処理装置、110 操作取得部、120 操作判定部、130 通知出力部、140 操作情報出力部、201 プロセッサ、202 メモリ、203 処理回路。

Claims (7)

  1.  ユーザが行った入力操作に対応する操作情報を取得する操作取得部と、
     前記操作取得部が取得する複数の前記操作情報のうち、機器が有する機能を実行させるための前記入力操作である機能入力操作に対応する複数の機能操作情報に基づいて、前記ユーザが行った前記機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定することにより、前記ユーザが行った前記機能入力操作が前記ユーザの意図した操作であるか否かを判定する操作判定部と、
     前記操作判定部が、前記ユーザが行った前記機能入力操作が前記ユーザの意図した操作でないと判定した場合に、予め定められた前記操作パターンを繰り返して前記ユーザが前記機能入力操作を行った旨を示す通知情報を出力する通知出力部と、
     を備えたこと
     を特徴とする情報処理装置。
  2.  前記操作判定部は、前記操作取得部が取得する複数の前記機能操作情報に基づいて、予め定められた単一の前記機能操作情報を、予め定められた期間内に前記操作取得部が繰り返して取得したか否かを判定することにより、前記ユーザが行った前記機能入力操作が予め定められた前記操作パターンの繰り返しであるか否かを判定すること
     を特徴とする請求項1記載の情報処理装置。
  3.  前記操作判定部は、前記操作取得部が取得する複数の前記機能操作情報に基づいて、予め定められた互いに異なる複数の前記機能操作情報からなる機能操作情報組を、予め定められた期間内に前記操作取得部が繰り返して取得したか否かを判定することにより、前記ユーザが行った前記機能入力操作が予め定められた前記操作パターンの繰り返しであるか否かを判定すること
     を特徴とする請求項1記載の情報処理装置。
  4.  前記通知出力部は、前記通知情報を出力する際に、前記操作取得部が取得した前記機能操作情報に対応する前記機能を実行しても良いか否かを確認する確認情報を前記通知情報に含めて出力し、
     前記操作取得部は、前記通知情報に含まれる前記確認情報に対応する前記ユーザからの前記入力操作に対応する前記操作情報を取得すること
     を特徴とする請求項1記載の情報処理装置。
  5.  前記通知出力部は、前記通知情報を出力する際に、前記操作取得部が取得した複数の前記機能操作情報を操作履歴情報として前記通知情報に含めて出力すること
     を特徴とする請求項1記載の情報処理装置。
  6.  前記操作判定部は、前記ユーザが行った前記機能入力操作が予め定められた前記操作パターンの繰り返しである場合に、前記操作パターンの繰り返し回数を計測し、
     前記通知出力部は、前記通知情報を出力する際に、前記操作判定部が計測した前記繰り返し回数に対応する態様の前記通知情報を出力すること
     を特徴とする請求項1記載の情報処理装置。
  7.  操作取得部が、ユーザが行った入力操作に対応する操作情報を取得する操作取得ステップと、
     操作判定部が、前記操作取得ステップにより取得された複数の前記操作情報のうち、機器が有する機能を実行させるための前記入力操作である機能入力操作に対応する複数の機能操作情報に基づいて、前記ユーザが行った前記機能入力操作が予め定められた操作パターンの繰り返しであるか否かを判定することにより、前記ユーザが行った前記機能入力操作が前記ユーザの意図した操作であるか否かを判定する操作判定ステップと、
     通知出力部が、前記操作判定ステップにより、前記ユーザが行った前記機能入力操作が前記ユーザの意図した操作でないと判定された場合に、予め定められた前記操作パターンを繰り返して前記ユーザが前記機能入力操作を行った旨を示す通知情報を出力する通知出力ステップと、
     を備えたこと
     を特徴とする情報処理方法。
PCT/JP2020/029921 2020-08-05 2020-08-05 情報処理装置及び情報処理方法 Ceased WO2022029908A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
PCT/JP2020/029921 WO2022029908A1 (ja) 2020-08-05 2020-08-05 情報処理装置及び情報処理方法
JP2022541392A JP7224553B2 (ja) 2020-08-05 2020-08-05 情報処理装置及び情報処理方法
CN202080104429.9A CN115997200A (zh) 2020-08-05 2020-08-05 信息处理装置和信息处理方法
DE112020007270.3T DE112020007270B4 (de) 2020-08-05 2020-08-05 Informationsverarbeitungseinrichtung und informationsverarbeitungsverfahren
US18/075,442 US20230098858A1 (en) 2020-08-05 2022-12-06 Information processing device and information processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/029921 WO2022029908A1 (ja) 2020-08-05 2020-08-05 情報処理装置及び情報処理方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/075,442 Continuation US20230098858A1 (en) 2020-08-05 2022-12-06 Information processing device and information processing method

Publications (1)

Publication Number Publication Date
WO2022029908A1 true WO2022029908A1 (ja) 2022-02-10

Family

ID=80117762

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/029921 Ceased WO2022029908A1 (ja) 2020-08-05 2020-08-05 情報処理装置及び情報処理方法

Country Status (5)

Country Link
US (1) US20230098858A1 (ja)
JP (1) JP7224553B2 (ja)
CN (1) CN115997200A (ja)
DE (1) DE112020007270B4 (ja)
WO (1) WO2022029908A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004104881A1 (ja) * 2003-05-26 2004-12-02 Matsushita Electric Industrial Co., Ltd. 操作履歴利用システム
JP2018073347A (ja) * 2016-11-04 2018-05-10 コニカミノルタ株式会社 画像形成装置
JP2020127174A (ja) * 2019-02-06 2020-08-20 大阪瓦斯株式会社 情報処理システム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5978595A (en) * 1996-09-27 1999-11-02 Hitachi, Ltd. Method for supporting user operation
WO2007145007A1 (ja) * 2006-06-13 2007-12-21 Panasonic Corporation 操作確認情報提供装置およびそのような装置を備えた電子機器
KR101384527B1 (ko) * 2007-04-09 2014-04-11 삼성전자주식회사 도움말 제공 방법 및 장치
CN102282526B (zh) * 2009-01-13 2015-06-24 富士通株式会社 信息处理装置、输入模式适宜化方法
KR20110006243A (ko) * 2009-07-14 2011-01-20 삼성전자주식회사 휴대용 단말기에서 매뉴얼 포커싱 방법 및 장치
JP6221265B2 (ja) * 2013-03-04 2017-11-01 株式会社デンソー タッチパネル操作装置及びタッチパネル操作装置における操作イベント判定方法
KR102201634B1 (ko) * 2013-12-27 2021-01-12 엘지전자 주식회사 단말기 및 그 동작 방법
JP6565194B2 (ja) * 2015-01-15 2019-08-28 富士通株式会社 端末判定装置、方法、及びプログラム
US20190179421A1 (en) 2015-04-07 2019-06-13 Santa Clara University Reminder or gesture control device wearable by a user
DE112016004833T5 (de) * 2015-10-21 2018-07-05 Honda Motor Co., Ltd. Benachrichtigungssystem
KR102137731B1 (ko) * 2015-12-16 2020-07-24 삼성전자주식회사 전자 장치, 전자 장치의 알림 정보 표시 방법
US10955956B2 (en) * 2018-05-07 2021-03-23 Apple Inc. Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region
JP2020107066A (ja) * 2018-12-27 2020-07-09 ソニー株式会社 操作制御装置、撮像装置、操作制御方法
JP7070483B2 (ja) * 2019-03-19 2022-05-18 カシオ計算機株式会社 電子機器、情報出力システム、情報出力方法、及びコンピュータプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004104881A1 (ja) * 2003-05-26 2004-12-02 Matsushita Electric Industrial Co., Ltd. 操作履歴利用システム
JP2018073347A (ja) * 2016-11-04 2018-05-10 コニカミノルタ株式会社 画像形成装置
JP2020127174A (ja) * 2019-02-06 2020-08-20 大阪瓦斯株式会社 情報処理システム

Also Published As

Publication number Publication date
DE112020007270T5 (de) 2023-07-20
JPWO2022029908A1 (ja) 2022-02-10
US20230098858A1 (en) 2023-03-30
CN115997200A (zh) 2023-04-21
JP7224553B2 (ja) 2023-02-17
DE112020007270B4 (de) 2025-01-09

Similar Documents

Publication Publication Date Title
US20150256957A1 (en) User terminal device, audio system, and method for controlling speaker thereof
JP2010517400A (ja) 局所領域内の電子器具を制御するシステム、方法、デバイス及びコンピュータプログラム
CN106775053A (zh) 触摸屏灵敏度的确定方法及装置
JP5481503B2 (ja) ユーザインタフェース装置、ユーザインタフェース方法及びプログラム
WO2014103307A1 (ja) 制御方法
JP2019168222A (ja) 制御方法及び冷蔵庫
JP5179857B2 (ja) 調理支援装置
KR102051715B1 (ko) IoT 가전기기를 제어하는 방법 및 그 장치
TWI613919B (zh) 家電控制系統及其控制方法
CN110850749B (zh) 烹饪设备的控制方法、烹饪设备及计算机可读存储介质
WO2022029908A1 (ja) 情報処理装置及び情報処理方法
CN112130459A (zh) 状态信息显示方法、装置、存储介质及电子装置
EP3001870A1 (en) Remote control arrangement
CN108415293B (zh) 烹饪的烹饪控制方法及装置
JP6643180B2 (ja) 通信装置
WO2015008639A1 (ja) 制御装置、機器管理システム、通知メッセージ表示方法及びプログラム
CN105527854B (zh) 移动终端及通过其对用户操作进行错误提示的方法和装置
CN113934490B (zh) 设备控制页面的打开方法及装置、存储介质及电子装置
CN205375043U (zh) 控制装置及烹饪电器
CN111399387A (zh) 烹饪器具的控制方法、烹饪器具和计算机可读存储介质
CN107065653B (zh) 开关面板自学习方法和装置
JP2016051215A (ja) 情報処理装置、情報処理方法、及びプログラム
JP6366416B2 (ja) 通信システムおよび制御方法
JP7349642B2 (ja) 通知のオフを受け付ける提示システム
JP7742271B2 (ja) 見守りシステム、およびプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20948595

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022541392

Country of ref document: JP

Kind code of ref document: A

122 Ep: pct application non-entry in european phase

Ref document number: 20948595

Country of ref document: EP

Kind code of ref document: A1