WO2022269869A1 - 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム - Google Patents

情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム Download PDF

Info

Publication number
WO2022269869A1
WO2022269869A1 PCT/JP2021/023974 JP2021023974W WO2022269869A1 WO 2022269869 A1 WO2022269869 A1 WO 2022269869A1 JP 2021023974 W JP2021023974 W JP 2021023974W WO 2022269869 A1 WO2022269869 A1 WO 2022269869A1
Authority
WO
WIPO (PCT)
Prior art keywords
rule
information
information processing
device operation
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2021/023974
Other languages
English (en)
French (fr)
Inventor
渉 佐々木
達彦 糸原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to DE112021007876.3T priority Critical patent/DE112021007876T5/de
Priority to PCT/JP2021/023974 priority patent/WO2022269869A1/ja
Priority to US18/571,735 priority patent/US20240121166A1/en
Priority to CN202180099556.9A priority patent/CN117501251A/zh
Priority to JP2022510185A priority patent/JP7106032B1/ja
Publication of WO2022269869A1 publication Critical patent/WO2022269869A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/16Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks using machine learning or artificial intelligence
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00Computing arrangements using knowledge-based models
    • G06N5/02Knowledge representation; Symbolic representation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00Computing arrangements using knowledge-based models
    • G06N5/04Inference or reasoning models
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range

Definitions

  • the present disclosure relates to an information processing device, an information processing system, an information processing method, and an information processing program.
  • Japanese Patent Application Laid-Open No. 2002-200003 manages a rule that specifies that an action execution server that provides an action execution service executes a given action triggered by the provision of predetermined information from an information provision server that provides an information provision service.
  • a collaboration server which is a device that This cooperation server changes a rule that is not subject to the change instruction (that is, another rule) that can be changed in the same way as the rule that is the subject of the change instruction, along with the rule that is the subject of the change instruction, in accordance with the change instruction.
  • JP 2017-102643 A (for example, claim 1, paragraph 0022)
  • the above device does not perform processing for estimating rules from information indicating the user's device operation.
  • the user has to manually create a change instruction for the target rule, so there is a problem that the rule cannot be changed easily.
  • An object of the present disclosure is to provide an information processing device, an information processing system, an information processing method, and an information processing program that make it possible to easily change rules for coordinating the operations of devices.
  • An information processing device includes a communication unit that communicates with an external device including a terminal, a rule management unit that manages rules regarding cooperation between a plurality of devices, a notification management unit, and a device management unit.
  • the rule management unit acquires device operation information indicating a user operation on a first device among the plurality of devices, and controls a cooperative device of a second device among the plurality of devices based on the device operation information.
  • Estimates the rule including a trigger condition that is a condition for starting an operation
  • the notification management unit notifies the terminal of an inquiry including the estimated rule via the communication unit, and sends the inquiry from the terminal to the Obtaining an answer as to whether or not to register the rule
  • the rule management unit registers the rule if the answer indicates approval of registration of the rule
  • the device management unit registers the registered rule.
  • the linked device operation is executed based on the rule when the device operation information that satisfies the included trigger condition is input to the first device.
  • An information processing method is a method implemented by an information processing device that communicates with an external device including a terminal and manages rules regarding cooperation between a plurality of devices, wherein a first out of the plurality of devices Acquiring device operation information indicating a user operation on a device, and creating the rule including a trigger condition that is a condition for starting a linked device operation of a second device among the plurality of devices based on the device operation information. informing the terminal of an inquiry including the inferred rule, obtaining an answer from the terminal as to whether or not to register the rule, the answer indicating approval of registration of the rule. registering the rule; and when the device operation information satisfying the trigger condition included in the registered rule is input to the first device, the linked device is operated based on the rule. and executing.
  • FIG. 1 is a diagram showing an overview of an information processing system according to Embodiment 1;
  • FIG. 2 is a diagram showing an outline of rule estimation and rule registration executed by the information processing system shown in FIG. 1;
  • FIG. FIG. 2 is a diagram showing an outline of discarding of rules executed by the information processing system shown in FIG. 1;
  • 2 is a block diagram showing an example of the configuration of the information processing device and terminal shown in FIG. 1;
  • FIG. 5 is a diagram showing a data structure and a specific example of device management information stored in a device management information storage unit of a device management unit of the information processing apparatus shown in FIG. 4;
  • FIG. (A) and (B) are diagrams showing examples of display of inquiry information on a terminal.
  • FIG. 5 is a block diagram showing an example of the hardware configuration of the information processing apparatus shown in FIGS. 1 and 4;
  • FIG. FIG. 5 is a block diagram showing an example of the hardware configuration of the terminal shown in FIGS. 1 and 4;
  • FIG. 7 is a flow chart showing an example of processing for registering a rule executed by the information processing system according to the first embodiment;
  • 7 is a flowchart showing an example of processing for discarding a rule executed by the information processing system according to Embodiment 1;
  • FIG. 10 is a diagram showing an outline of an information processing system according to Embodiment 2;
  • FIG. 12 is a diagram showing an overview of rule estimation and rule registration executed by the information processing system shown in FIG. 11;
  • FIG. 12 is a block diagram showing an example of the configuration of the information processing device and terminal shown in FIG. 11;
  • FIG. 14 is a diagram showing a data structure and a specific example of sensor management information stored in a sensor management information storage unit of the sensor management unit of the information processing apparatus shown in FIG. 13;
  • FIG. FIG. 11 is a flow chart showing an example of processing for registering a rule executed by the information processing system according to the second embodiment;
  • FIG. 1 is a diagram showing an outline of an information processing system 3 according to Embodiment 1.
  • the information processing system 3 is a system that provides device operations.
  • the information processing system 3 performs device operations based on rules relating to cooperation of a plurality of devices.
  • a rule includes a set of operating procedures and trigger conditions for operating the device. That is, in the information processing system 3, when the user performs an operation that satisfies a trigger condition on a device (for example, the target device ND1), the information processing device 1 operates the remaining devices (for example, the target device) based on the rule.
  • the device operation of ND2) which is a linked device different from that of ND2), is executed.
  • the trigger condition is a condition related to the operation of the target device, and when the device operation information D1 indicating the operation of the target device satisfies the trigger condition, the linked device cooperating with this target device operates based on the linked device operation information D2. Automatically perform the action specified in the rule.
  • the information processing system 3 can provide equipment operation services that combine various equipment operations.
  • the information processing system 3 includes an information processing device 1 that provides device management, rule management, and notification management, and a terminal 2 that is an inquiry destination when the information processing device 1 makes an inquiry about the status of rules.
  • the information processing device 1 is, for example, a computer.
  • the terminal 2 is, for example, a terminal device such as a smart phone, a tablet terminal, or a personal computer (PC).
  • the plurality of devices includes a device ND1 that transmits device operation information D1 to the information processing device 1, and a device ND2 that performs an operation based on the linked device operation information D2 received from the information processing device 1.
  • the device ND1 may be one device, or a plurality of devices ND1_1, ND1_2, . . . , ND1_m (where m is a positive integer).
  • the device ND2 may be one device, or may be a plurality of devices ND2_1, ND2_2, . . . , ND2_n (where n is a positive integer).
  • the device ND1 and the device ND2 are examples of household electrical devices, for example, and are also denoted as device ND. Note that the device ND may be an electrical device other than a household electrical device.
  • the device ND1 When the device ND1 is operated by the user, the device ND1 transmits device operation information D1 to the information processing device 1. Then, the information processing apparatus 1 transmits the linked device operation information to the device ND2 and executes the device operation of the device ND2. That is, when the user operates the device ND1, the device operation of the device ND2 is automatically performed by the information processing apparatus 1, and the device ND2 performs an operation based on the received linked device operation information D2.
  • the device ND has one or both of a function of transmitting the device operation information D1 to the information processing device 1 and a function of executing an operation based on the linked device operation information D2 received from the information processing device 1 .
  • the device ND1 has a function of transmitting device operation information D1 to the information processing apparatus 1
  • the device ND2 has a function of executing an operation based on the received linked device operation information D2.
  • the information processing device 1 manages rules regarding cooperation between multiple devices ND.
  • the information processing apparatus 1 acquires device operation information D1 indicating a user operation on a device (also referred to as a "first device") ND1 among the plurality of devices ND, and based on the device operation information D1, controls the plurality of devices ND.
  • a rule including a trigger condition which is a condition for starting the operation of the linked device of the device (also referred to as “second device”) ND2, is estimated.
  • the information processing device 1 notifies the terminal 2 of an inquiry I1 including the estimated rule, and obtains from the terminal 2 an answer I2 as to whether or not to register the rule.
  • the information processing device 1 registers the rule when the reply I2 indicates approval of rule registration.
  • device operation information D1 that satisfies a trigger condition included in a registered rule is input to the device ND1, the information processing apparatus 1 executes a linked device operation based on the corresponding rule.
  • the user possesses the terminal 2, and the information processing device 1 notifies the user of the rule (including the trigger condition of this rule) through the terminal 2.
  • the information processing apparatus 1 acquires the device operation information D1 from the device ND1, the information processing apparatus 1 estimates rules (including trigger conditions) based on the device operation information D1.
  • the information processing device 1 notifies the user's terminal 2 of an inquiry I1 about the rule (including the trigger condition).
  • the information processing device 1 responds to the rule (including the trigger conditions). including conditions).
  • FIG. 2 is a diagram showing an overview of rule estimation and rule registration executed by the information processing system 3 shown in FIG. First, management of registered rules will be described.
  • the information processing device 1 stores and manages the rule management information 104a in a storage device (for example, the rule management information storage unit 104 in FIG. 3, which will be described later).
  • the rule management information 104a is a rule created by the information processing device 1 and is stored in a storage device within the information processing device 1 or an external storage device that can communicate with the information processing device 1 .
  • the rule management information 104a is desirably created for each user. That is, the rule management information 104a may be multiple pieces of information.
  • a plurality of pieces of rule management information 104a are associated with a plurality of user IDs for identifying a plurality of users.
  • the rule management information 104a shown in FIG. 2 is a database that manages a rule ID that is identification information of a rule, information indicating the registration date and time of the rule, and a series of device operation procedures in association with each other.
  • the device operation procedure includes a device ID for identifying the device, property information, and whether or not the device operation procedure is the trigger condition (indicated by a circle "O"). (indicated by "-")).
  • FIG. 2 shows D001 and D002 as specific examples of the device ND indicated by the device ID. In subsequent description, D001 shows a bathroom light and D002 shows a bathroom heating. However, the example of the device ND is not limited to bathroom lamps and bathroom heaters, and may be other electric devices.
  • the information processing device 1 can perform device operations according to the rules registered as the rule management information 104a.
  • the device operating procedure of the trigger condition is that the operating state of the bathroom light, which is the device of D001, is True (that is, the power is on).
  • the operating state of the bathroom heater which is the device of D002
  • the operation state of the bathroom heater (D002), which is one of the devices ND, can be set to True (that is, the power is turned on).
  • the device operation information of the device ND is accumulated as the device operation information 123a.
  • the device operation information 123a shown in FIG. 2 includes time indicating time information, device operation information ID indicating identification information of the device operation information, device ID indicating device identification information, and property information.
  • the device operation information of the device ND indicated by the device operation information ID shown in FIG. and device operation information indicating that the operating state of bathroom heating is True (that is, the power is on), which occurred at 19:00:06 by DE002.
  • the accumulated device operation information 123a is not limited to that shown in FIG. 2, and may be other information.
  • the information processing device 1 estimates the rule by referring to the device operation information 123a.
  • the information processing apparatus 1 determines that the device operation indicated by DE001 (that is, , power-on operation of the bathroom light), and the rule R001, which is the device operation indicated by DE002 (that is, operation of power-on of the bathroom heater).
  • the rule estimation executed by the information processing device 1 is not limited to the example shown in FIG.
  • the information processing device 1 transmits a notification of the rule (including the trigger condition) to the terminal 2 .
  • the terminal 2 displays the information of the rule R001 as text on the display unit 23 such as a touch panel.
  • the terminal 2 displays on the display unit 23 an inquiry (that is, a question sentence) "Would you like to register the rule?" to ask whether to register the rule R001.
  • the user transmits an answer I2 as to whether or not to register the rule (including the trigger condition) by operating one of the "Yes" and "No” buttons displayed on the display unit 23 of the terminal 2. can do.
  • the content displayed on the display unit 23 of the terminal 2 is not limited to the example shown in FIG.
  • the information processing device 1 registers the rule in the rule management information storage unit 104 as the rule management information 104a when the registration of the rule is approved by the notification made by the terminal 2.
  • the information processing apparatus 1 registers the rule R001 when the user presses the "yes" button on the terminal 2.
  • FIG. 1 the user can use the information processing apparatus 1 to estimate the rule for operating the linked device from the device operation information D1 generated in daily life, and register the rule when the user's approval is obtained. can be done.
  • the information processing system 3 determines whether or not to cancel the registration of the rule.
  • the terminal 2 receives an answer I2 indicating that the rule is to be discarded, the rule is discarded.
  • FIG. 3 is a diagram showing an overview of rule discarding executed by the information processing system 3 shown in FIG.
  • components having the same functions as the components described in FIG. 2 are assigned the same reference numerals as those shown in FIG.
  • DE011 generated at 19:00:03 is the device operation information indicating that the operating state of the bathroom light is True (that is, the power is on), and DE012 generated at 19:00:06.
  • the operation state of bathroom heating is True (that is, the power is on), and DE013 indicates the device operation information that the bathroom heating is powered off at 19:00:06.
  • the information processing device 1 when the information processing device 1 acquires the device operation information corresponding to the existing trigger condition, the information processing device 1 performs the remaining device operations of the rule.
  • the operation state of D001 is set to True (that is, the power is turned on), and after the operation state of D002 is set to True (that is, the power is turned on), the user manually turns on the bathroom heating.
  • the information processing device 1 instructs the terminal 2 to Notify about rule revocation.
  • This notification allows the user to recognize that the rule is unnecessary and to select whether to discard the rule.
  • whether or not to discard the rule R001 is checked by pressing a "Yes” or “No” button to answer the question "Are you sure you want to discard the rule?".
  • the information processing device 1 discards the rule in the rule management information 104a when the discarding of the rule is approved by the reply sent from the terminal 2.
  • the information processing device 1 discards the rule R001.
  • the information processing apparatus 1 determines whether to cancel a rule based on device operation information that occurs in the user's daily life, and discards a rule that has been approved for discard based on the user's intention.
  • FIG. 4 is a block diagram showing an example of the configuration of the information processing device 1 and the terminal 2. As shown in FIG. Here, the information processing device 1 will be described first, and then the terminal 2 will be described.
  • the information processing apparatus 1 includes a rule management unit 10 that manages rules for device operation, a notification management unit 11 that notifies the terminal 2, a device management unit 12 that acquires device operation information and operates the device, and information
  • the processing device 1 includes a communication unit 13 for communicating with external devices including the terminal 2 .
  • FIG. 4 shows an example in which one communication unit 13 communicates with the terminal 2 and the device ND.
  • the information processing apparatus 1 may perform communication via a different communication unit (that is, communication interface) according to the device of the communication partner.
  • the rule management unit 10 manages rules. Specifically, the rule management unit 10 registers, determines, estimates, and discards rules. Rule management unit 10 includes rule registration unit 100 , rule determination unit 101 , rule estimation unit 102 , rule discard unit 103 , and rule management information storage unit 104 .
  • the rule registration unit 100 registers rules from the rule information acquired from the notification management unit 11. Specifically, the rule information based on the device operation information is acquired from the notification management unit 11 and stored in the rule management information storage unit 104 .
  • the rule determination unit 101 determines whether or not the device operation information satisfies the trigger conditions stored in the rule management information storage unit 104. If the conditions are met, the device management unit 12 is instructed to execute the remaining device operating procedures of the rule. Also, after the rule determination unit 101 starts executing the remaining device operation procedure of the rule, every time the device management unit 12 acquires the device operation information from the device ND, the user cancels the remaining device operation. It is determined whether or not it is information, and if it is device operation information to be canceled, an instruction is sent to the notification management unit 11 to inquire whether or not to cancel the registration of the rule.
  • the device operation information for canceling the device operation is, for example, an operation by the user to turn off the power of the device ND after the device operation unit 120 has turned on the power of the device ND according to the device operation procedure of a predetermined rule. be.
  • the user sets the mode of the device ND to "mode X”
  • the user sets the mode of the device ND to "mode Y”.
  • the rule estimation unit 102 estimates a rule (including trigger conditions) indicating a series of operation procedures for operating a user's device from one or more pieces of device operation information stored in the device management unit 12 .
  • the rule estimating unit 102 describes a case where, for example, the user turns on the bathroom light and then turns on the bathroom heater. Based on this series of actions, if there is device operation information to turn on the power of the light in the bathroom, the device operation to turn on the heating in the bathroom is predicted as the next device operation.
  • the rule estimating unit 102 determines that the series of equipment operation procedures is a rule if the series of equipment operation procedures appears a predetermined number of times (that is, a threshold value) or more. can be estimated.
  • the rule estimating unit 102 uses an LSTM (Long Short Term Memory) network, which is a type of recursive neural network, to calculate the device operation procedure based on the time-series data of the normalized device operation information. may
  • the rule estimating unit 102 applies the above pattern not only to the machine operation learning model by the LSTM network, but also to machine learning other than deep learning, such as the K nearest neighbor method, decision tree, random forest, SVM (Support Vector Machine), etc.
  • Data used for estimation may also include date and time information.
  • information such as the same time every day and a specific day of the week contributes to the estimation of the device operation procedure.
  • the rule estimating unit 102 uses machine learning
  • the rule estimating unit 102 operates as a machine learning device that receives device operation information generated by the user's operation of the device, generates a learned model, and stores it in the storage device. (for example, the rule management information storage unit 104).
  • the device management unit 12 may execute the process of executing the linked device operation of the linked device based on the rule using the learned model. good.
  • the rule discarding unit 103 discards the rule information stored in the rule management information storage unit 104 based on the rule discarding approval information acquired from the notification management unit 11 . For example, if the notification management unit 11 receives a notification result from the terminal 2 and the result of analysis is information indicating approval of discarding the rule, the rule discarding unit 103 identifies the rule from the obtained discard approval information. and discarded from the rule management information 104a.
  • Rules are stored in the rule management information storage unit 104 as rule management information 104a.
  • the notification management unit 11 manages notifications. Specifically, it generates and transmits notifications, obtains results, and analyzes results.
  • Notification management unit 11 includes notification generation unit 110 , notification transmission unit 111 , notification result acquisition unit 112 , and notification result analysis unit 113 .
  • the notification generation unit 110 generates a notification (that is, an inquiry) from the rule estimated by the rule management unit 10.
  • the notification is, for example, an inquiry as to whether the user approves the registration of the inferred rule (including the trigger condition).
  • the notification transmission unit 111 notifies the terminal 2 of the notification generated by the notification generation unit 110 .
  • the notification result acquisition unit 112 acquires the notification result (that is, the reply to the inquiry). Specifically, the notification result acquisition unit 112 acquires the response as the notification result when the terminal 2 responds to the notification. For example, in response to the notification as to whether or not to register the estimated rule, the notification result acquisition unit 112 displays a question regarding the registration of the rule and "Yes" and "No” buttons on the terminal 2. The result of the selection is received as registration approval or registration disapproval in response to a "yes" or "no" operation.
  • Notifications are not limited to notifications intended for screen display, and may be other types of notifications such as voice utterances.
  • the notification result analysis unit 113 analyzes the notification received by the notification result acquisition unit 112, and transmits the rule to the rule management unit 10 as necessary. For example, the notification result analysis unit 113 analyzes the registration approval notification result, analyzes whether or not to register the rule, and transmits the information to the rule management unit 10 if the information indicates registration.
  • the device management unit 12 manages devices. Specifically, the device management unit 12 acquires device operation information and performs device operation for the device ND.
  • the device management section 12 includes a device operation section 120 , a device management information storage section 121 , a device operation information acquisition section 122 and a device operation information storage section 123 .
  • the device operation information acquisition unit 122 acquires device operation information from the device ND.
  • the device operation unit 120 operates the device ND.
  • the device management information storage unit 121 stores device management information 121a.
  • the device management information 121a is information about the device ND, and is generated for each device ND.
  • FIG. 5 is a diagram showing the data structure and specific example of the device management information 121a stored in the device management information storage unit 121 of the device management unit 12 of the information processing apparatus 1 shown in FIG.
  • the device management information storage unit 121 shown in FIG. 5 stores a device ID that is identification information of the device ND, device label information (“device label” in FIG. 5) that is the name of the device ND presented to the user on the terminal 2, and It stores property information (“property” in FIG. 5), which is the definition of variables that describe the state of the device.
  • Property information is associated with property names and property data types. One or more pieces of property information exist for one device ID.
  • the device ND with the device ID D001 has the device label information "bathroom light", and in the terminal 2, the device ND is presented to the user under the name "bathroom light”. Further, the device ND can have Bool type data as an operating state, and the operating state can be set and acquired. Note that in the Boolean type in the operating state, True is treated as power on, and False is treated as power off.
  • the device operation information storage unit 123 stores the device operation information 123a acquired by the device operation information acquisition unit 122.
  • the device operation information 123a may include date, time, and the like.
  • the device operation unit 120 operates the device. For example, if the operation target is an air conditioner, which is a home appliance, the device operation unit 120 turns on/off the power of the device, switches modes such as heating/cooling, or changes temperature settings.
  • the terminal 2 includes a terminal control unit 20 that controls all parts of the terminal 2, a terminal communication unit 21 that allows the terminal 2 to communicate with other devices, an input unit 22 that receives user input operations, and a terminal control unit 20. It includes a display unit 23 that displays a screen according to control, and a terminal storage unit 24 that stores various data used by the terminal 2 .
  • the terminal control unit 20 includes an information notification unit 200, an inquiry response unit 201, and an information acquisition unit 202. These may be implemented by installing application software in the terminal 2, for example.
  • the information notification unit 200 transmits various information acquired from the inquiry response unit 201 to the information processing device via the terminal communication unit 21 .
  • the inquiry response unit 201 displays a predetermined user interface (UI) screen to notify about the rule. Specifically, the inquiry response unit 201 displays an inquiry screen regarding registration or cancellation of a rule as one of the UI screens, and allows various designations regarding the state of the rule estimated by the rule estimation unit 102 of the information processing apparatus 1. accept.
  • UI user interface
  • the information acquisition unit 202 acquires various types of information acquired from the notification transmission unit 111 of the notification management unit 11 of the information processing device 1 and outputs the information to the inquiry response unit 201 .
  • FIGS. 6A and 6B are diagrams showing examples of display of inquiry information on the terminal 2.
  • the inquiry screen is a screen for inquiring about registration or cancellation of a rule, and is shown in FIGS. 6A and 6B, for example.
  • the inquiry screens of FIGS. 6A and 6B are screens for inquiring whether or not to approve the state of rule R001.
  • a “Yes” button 233 and a registration date/time display portion 234 are included.
  • the inquiry response unit 201 outputs inquiry information acquired by the information acquisition unit 202 .
  • the inquiry response section 201 causes the trigger condition display section 230, the device operation display section 231, and the registration date and time display section 234 of the inquiry screen to display the rule information according to the inquiry screen data.
  • FIG. 6A is an example of an inquiry about rule registration when a new rule is inferred.
  • the trigger condition "bathroom light is on” and the device operation "bathroom heating is on” in rule R001 are displayed. It is Here, when the user selects the “No” button 232 , the inquiry response unit 201 outputs rule registration denial information to the information notification unit 200 . Then, the information notification unit 200 transmits the acquired rule registration denial information to the information processing apparatus 1 .
  • inquiry response section 201 outputs rule registration approval information to information notification section 200 .
  • the information notification unit 200 transmits the acquired rule registration approval information to the information processing device 1, and the information processing device 1 registers the rule.
  • FIG. 6B is an example of an inquiry regarding rule cancellation when the rule is canceled. is displayed.
  • the inquiry response unit 201 outputs rule discard denial information to the information notification unit 200 .
  • the information notification unit 200 transmits the acquired rule discard denial information to the information processing apparatus 1 .
  • the inquiry response section 201 outputs rule discard approval information to the information notification section 200 .
  • the information notification unit 200 transmits the acquired rule discard approval information to the information processing device 1, and the information processing device 1 discards the rule.
  • FIG. 7 is a block diagram showing an example of the hardware configuration of the information processing device 1 shown in FIGS. 1 and 4.
  • the information processing device 1 has a processor 151 such as a CPU (Central Processing Unit), a memory 152 and a storage device 153 .
  • the memory 152 is, for example, a volatile semiconductor memory such as RAM (Random Access Memory).
  • the storage device 153 is, for example, a nonvolatile storage device such as a hard disk drive (HDD) or solid state drive (SSD).
  • the information processing device 1 also has a communication unit 13 and an interface 154 .
  • the processing circuitry may be dedicated hardware or processor 151 executing programs stored in memory 152 .
  • the processor 151 may be any of a processing device, an arithmetic device, a microprocessor, a microcomputer, and a DSP (Digital Signal Processor).
  • the processing circuit is the processor 151
  • the information processing program is realized by software, firmware, or a combination of software and firmware.
  • Software and firmware are written as programs and stored in memory 152 .
  • the processor 151 reads out and executes the information processing program stored in the memory 152, thereby implementing the functions of the units shown in FIG.
  • the information processing apparatus 1 may be partially realized by dedicated hardware and partially realized by software or firmware.
  • the processing circuitry may implement each of the functions described above in hardware, software, firmware, or any combination thereof.
  • FIG. 8 is a block diagram showing an example of the hardware configuration of the terminal 2 shown in FIGS. 1 and 4.
  • the terminal 2 has a processor 251 such as a CPU, a memory 252 and a storage device 253 .
  • Memory 252 is, for example, a RAM.
  • the storage device 253 is, for example, an SSD.
  • the terminal 2 also has a terminal communication unit 21 and a user interface 254 such as a touch panel.
  • Each function of terminal 2 is realized by a processing circuit.
  • the processing circuitry may be dedicated hardware or processor 251 executing programs stored in memory 252 .
  • Processor 251 may be any of a processing unit, an arithmetic unit, a microprocessor, a microcomputer, and a DSP.
  • FIG. 9 is a flowchart showing an example of processing for registering a rule executed by the information processing system 3 according to the first embodiment.
  • the device operation information acquisition unit 122 of the device management unit 12 acquires device operation information from the device ND (step S101).
  • the acquired device operation information is stored in the device operation information storage unit 123 of the device management unit 12 as the device operation information 123a.
  • the rule estimation unit 102 of the rule management unit 10 estimates rules (including trigger conditions) based on the device operation information (step S102).
  • the rule estimation unit 102 transmits the estimated rule information to the notification management unit 11.
  • the rule estimation unit 102 ends the rule estimation process.
  • the notification generation unit 110 of the notification management unit 11 acquires the estimated rule information, it generates a rule registration notification (that is, an inquiry as to whether or not to approve the registration). and transmits it to the terminal 2 (step S103).
  • a rule registration notification that is, an inquiry as to whether or not to approve the registration.
  • the information acquisition unit 202 of the terminal 2 receives the rule registration notification via the terminal communication unit 21 (step S111).
  • the inquiry response unit 201 of the terminal 2 causes the display unit 23 to display an inquiry screen (for example, FIG. 6A) in accordance with the rule registration notification (step S112).
  • the inquiry response unit 201 generates a rule registration approval result according to the user's operation, and outputs it to the information notification unit 200 .
  • the information notification unit 200 notifies the information processing apparatus 1 of the acquired rule registration approval result via the terminal communication unit 21 (step S113).
  • the notification management unit 11 of the information processing device 1 acquires the rule registration approval result via the communication unit 13 (step S104).
  • the notification result acquisition unit 112 of the notification management unit 11 of the information processing device 1 outputs the rule registration approval result to the notification result analysis unit 113 .
  • the notification result analysis unit 113 analyzes the rule registration approval result.
  • Notification result analysis unit 113 analyzes the rule registration approval result, and outputs the rule information to rule registration unit 100 if the information indicates registration (YES in step S105). If the information does not indicate registration (NO in step S105), the processing for rule registration executed by the information processing device 1 and the terminal 2 ends.
  • the rule registration unit 100 Upon acquiring the rule information, the rule registration unit 100 registers the rule in the rule management information storage unit 104 as the rule management information 104a (step S106). With this, the processing for registering the rule executed by the information processing device 1 and the terminal 2 ends.
  • FIG. 10 is a flow chart showing an example of processing for discarding a rule executed by the information processing system 3 .
  • the device operation information acquisition unit 122 of the information processing device 1 acquires device operation information from the device ND (step S201).
  • the acquired device operation information is stored in the device operation information storage unit 123 .
  • the rule determination unit 101 determines whether or not the trigger condition is met based on the device operation information and the rule management information 104a registered in the rule management information storage unit 104 (step S202). . If the trigger condition is met (YES in step S202), the rule determination unit 101 issues an instruction to the device operation unit 120 of the device management unit 12 to execute the remaining device operation procedure of the rule, and executes the device operation. (Step S203). On the other hand, if the trigger condition is not met (NO in step S202), the information processing device 1 terminates the processing for discarding the rule.
  • the rule determination unit 101 acquires device operation information for canceling the remaining device operation after starting execution of the remaining device operation procedure (YES in step S204)
  • the rule determination unit 101 inquires whether or not to cancel the registration of the rule.
  • the notification generation unit 110 of the notification management unit 11 is instructed to do so.
  • the information processing apparatus 1 terminates the process.
  • the notification generation unit 110 of the notification management unit 11 acquires the canceled rule information, it generates a rule discard notification and notifies it to the terminal 2 via the communication unit 13 by the notification transmission unit 111 (step S205).
  • the information acquisition unit 202 of the terminal 2 receives the rule discard notification via the terminal communication unit 21 (step S211).
  • the inquiry response unit 201 of the terminal 2 causes the display unit 23 to display an inquiry screen (for example, FIG. 6B) in accordance with the rule discard notification (step S212).
  • the inquiry response unit 201 generates a rule abandonment approval result according to the user's operation, and outputs it to the information notification unit 200 .
  • the information notification unit 200 notifies the information processing apparatus 1 of the acquired rule discard approval result via the terminal communication unit 21 (step S213).
  • the notification management unit 11 of the information processing device 1 acquires the rule abandonment approval result via the communication unit 13 (step S206).
  • the notification result acquisition unit 112 of the notification management unit 11 of the information processing device 1 outputs the rule discard approval result to the notification result analysis unit 113 .
  • the notification result analysis unit 113 analyzes the rule abandonment approval result.
  • Notification result analysis unit 113 analyzes the rule discard approval result, and outputs the rule information to rule discard unit 103 if the information indicates discard (YES in step S207). If the information does not indicate discarding (NO in step S207), the processing executed by the information processing device 1 and the terminal 2 ends.
  • the rule discarding unit 103 Upon acquiring the rule information, the rule discarding unit 103 discards the rule information from the rule management information 104a (step S208). With this, the processing for discarding the rule executed by the information processing device 1 and the terminal 2 ends.
  • the rule (including the trigger condition of the rule) is estimated from the device operation information that occurs in the user's daily life, and the rule ( (including trigger conditions for the rule), and by obtaining registration approval information from the user as to whether or not to register the rule, it is possible to register the rule according to the user's intention.
  • the rule when the user acquires the device operation information for canceling the remaining device operation after the device operation of the rule is started, the rule is discarded by the user. If an inquiry is made as to whether the rule is valid and discard approval information is acquired from the user, the rule can be discarded, thereby facilitating the updating of the rule that changes daily.
  • Embodiment 2 The information processing apparatus 1 according to Embodiment 1 estimates and registers a rule that defines a linked device operation, and discards the rule, based on device operation information generated by a user's device operation.
  • the information processing apparatus 1a according to the second embodiment estimates a rule that defines the operation of a linked device based on device operation information generated by a user's device operation and sensor information acquired from a sensor. Register and discard rules.
  • FIG. 11 is a diagram showing an overview of the information processing system 3a according to the second embodiment.
  • components having the same functions as the components described in FIG. 1 are assigned the same reference numerals as those shown in FIG.
  • the information processing device 1a operates according to rules.
  • a rule consists of a series of operating procedures and trigger conditions for operating a user's device. That is, in the information processing system 3a, when predetermined sensor information that satisfies a predetermined trigger condition is acquired, the remaining device operations are executed based on the rule. This makes it possible to provide equipment operation services that combine various sensor information and equipment operation information.
  • the information processing system 3a of FIG. 11 includes an information processing device 1 that provides device management, sensor management, and rule management, a device ND that transmits device operation information or executes device operation, a sensor NS that executes transmission of sensor information, and It includes a terminal 2 for inquiring about the rule status from the information processing device 1 .
  • the sensor NS when the sensor NS detects a user, it transmits sensor information to the information processing device 1a. Then, the information processing device 1a executes the device operation of the device ND. Thereby, when the information of the sensor NS is acquired, the device operation of the device ND can be executed.
  • the sensor NS may be one or more sensors.
  • the device ND only needs to have the function of transmitting device operation information. Moreover, in Embodiment 2, an example in which the sensor NS is a human sensor will be described.
  • FIG. 12 is a diagram showing an overview of rule estimation and rule registration executed by the information processing system 3a shown in FIG.
  • the sensor information 142a accumulates the sensor information of the human sensor.
  • the sensor information 142a of FIG. 12 includes time indicating time information, sensor information ID indicating identification information of sensor information, sensor ID indicating identification information of sensor, and property information.
  • the human detection state of the human sensor in the bathroom where SE021 occurred at 19:00:03 is True (that is, human detection is present).
  • the present embodiment is not limited to this example.
  • the device operation information 123a in FIG. 12 device operation information in which the operation state of the bathroom heating that occurred at 19:00:06 by DE021 is True (that is, the power is on) will be described.
  • the sensor information with the trigger condition of SE021 that is, the human detection reaction of the bathroom sensor
  • the operation information, that is, the rule R002 for turning on the bathroom heater is estimated from the sensor information 142a and the device operation information 123a.
  • the rule estimating unit 102 uses machine learning
  • the rule estimating unit 102 operates as a machine learning device that receives device operation information generated by the user's operation of the device and sensor information, and generates a learned model.
  • a storage device for example, the rule management information storage unit 104.
  • the device management unit 12 may execute the process of executing the linked device operation of the linked device based on the rule using the learned model. good.
  • the information processing apparatus 1a allows the user to estimate rules for device operation from sensor information and device operation information generated in daily life, and to register the rules based on the user's intention.
  • FIG. 13 is a block diagram showing an example of the configuration of the information processing device 1a and the terminal 2 included in the information processing system 3a shown in FIG. 13, components having the same functions as the components described in FIG. 4 are given the same reference numerals as those shown in FIG.
  • the information processing device 1a includes a sensor management section 14.
  • the sensor management section 14 includes a sensor management section 14a.
  • the communication unit 13 of the information processing device 1a can communicate with the sensor NS.
  • FIG. 13 shows an example in which one communication unit 13 communicates with the terminal 2, the device ND, and the sensor NS.
  • the sensor management unit 14 manages sensors. Specifically, the sensor information for the sensor NS is acquired.
  • the sensor management section 14 includes a sensor management information storage section 140 , a sensor information acquisition section 141 and a sensor information storage section 142 .
  • the sensor information acquisition unit 141 acquires sensor information from the sensor NS.
  • FIG. 14 is a diagram showing the data structure and specific example of the sensor management information 140a stored in the sensor management information storage unit 140. As shown in FIG.
  • the sensor management information 140a is information relating to the sensor NS, and is generated for each sensor NS.
  • the sensor management information 141a of FIG. 14 includes a sensor ID that is identification information of the sensor NS, sensor label information (“sensor label” in FIG. 14) that is the name of the sensor NS presented to the user on the terminal 2, and sensor label information. It stores property information (“property” in FIG. 14), which is the definition of variables that describe the state.
  • Property information is associated with property names and property data types. One or more pieces of property information exist for one sensor ID.
  • the sensor NS with the sensor ID S001 has the sensor label information "bathroom human sensor", and in the terminal 2, the sensor NS is presented to the user under the name "bathroom human sensor”. be. Further, the sensor NS can have Boolean data as a human detection state, and the human detection state can be acquired. Note that the Boolean type in the human detection state is handled as human detection if True, and human non-detection if False.
  • the sensor information storage unit 142 stores the sensor information acquired by the sensor information acquisition unit 141. This sensor information may include date, time, and the like.
  • FIG. 15 is a flowchart showing an example of processing for registering a rule executed by the information processing system 3a according to the second embodiment. 15, components having the same functions as the components described in FIG. 9 are given the same reference numerals as those shown in FIG.
  • step S121 rules are estimated based on sensor information and device operation information.
  • the rule estimation unit 102 estimates rules (including trigger conditions) based on information stored in the sensor information storage unit 142 and the device operation information storage unit 123 . If it can be estimated (YES in step S121), the rule (including the trigger condition) is transmitted to the notification management unit 11, and the process proceeds to step S103. If the estimation could not be made (NO in step S121), the information processing device 1a terminates the process.
  • the processing after step S103 is the same as that in FIG.
  • rules are estimated from device operation information and sensor information that occur in the user's daily life, and the user's It is possible to register a rule according to the user's intention by notifying the user of the rule and obtaining registration approval information from the user as to whether or not to register the rule.
  • the information processing apparatus 1a when the user acquires the device operation information for canceling the remaining device operation, the user is asked whether to discard the rule, and the user approves the discard. By discarding the rule when the information is acquired, it is possible to easily update the rule that changes on a daily basis.
  • the device by inputting information of one or more of temperature/humidity sensor information and human sensor, a certain temperature, the device can also be operated using the season that matches the humidity conditions as one of the trigger conditions.
  • the operation of the heating device during bathing and the operation of the heating device during drying of clothes can be made different.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Medical Informatics (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Selective Calling Equipment (AREA)

Abstract

情報処理装置(1)は、通信部(13)と、ルール管理部(10)と、通知管理部(11)と、機器管理部(12)とを備え、ルール管理部(10)は、複数の機器(ND)のうちの第1の機器(ND1)に対するユーザ操作を示す機器操作情報(D1)を取得し、機器操作情報(D1)に基づいて、複数の機器のうちの第2の機器(ND2)の連携機器操作を開始させる条件であるトリガー条件を含む、ルールを推定し、通知管理部(11)は、通信部(13)を介して、推定されたルールを含む問合せ(I1)を端末(2)に通知し、端末(2)からルールを登録するか否かの回答(I2)を取得し、ルール管理部(10)は、回答(I2)がルールの登録の承認を示す場合、ルールを登録し、機器管理部(12)は、登録されたルールに含まれるトリガー条件を満たす機器操作情報(D1)が第1の機器に入力されたときに、前記ルールに基づいて連携機器操作を実行する。

Description

情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム
 本開示は、情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラムに関する。
 特許文献1は、情報提供サービスを提供する情報提供サーバから所定の情報が提供されたことをトリガーとして、動作実行サービスを提供する動作実行サーバに所定のアクションを実行させることを規定したルールを管理する装置である連携サーバを提案している。この連携サーバは、変更指示の対象のルールと同一の変更が可能な、変更指示の対象でないルール(すなわち、別のルール)を、変更指示の対象のルールとともに変更指示に従って変更する。
特開2017-102643号公報(例えば、請求項1、段落0022)
 しかしながら、上記装置は、ユーザの機器操作を示す情報からルールを推定する処理を実行していない。上記装置では、ユーザが手動で対象のルールの変更指示を作成する必要があるため、ルールの変更を容易に行うことができないという課題がある。
 本開示は、機器の動作を連携させるルールを容易に変更することを可能にする情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラムを提供することを目的とする。
 本開示の情報処理装置は、端末を含む外部機器と通信を行う通信部と、複数の機器の連携に関するルールを管理するルール管理部と、通知管理部と、機器管理部と、を備え、前記ルール管理部は、前記複数の機器のうちの第1の機器に対するユーザ操作を示す機器操作情報を取得し、前記機器操作情報に基づいて、前記複数の機器のうちの第2の機器の連携機器操作を開始させる条件であるトリガー条件を含む、前記ルールを推定し、前記通知管理部は、前記通信部を介して、推定された前記ルールを含む問合せを前記端末に通知し、前記端末から前記ルールを登録するか否かの回答を取得し、前記ルール管理部は、前記回答が前記ルールの登録の承認を示す場合、前記ルールを登録し、前記機器管理部は、登録された前記ルールに含まれる前記トリガー条件を満たす前記機器操作情報が前記第1の機器に入力されたときに、前記ルールに基づいて前記連携機器操作を実行することを特徴とする。
 本開示の情報処理方法は、端末を含む外部機器と通信を行い、複数の機器の連携に関するルールを管理する情報処理装置によって実施される方法であって、前記複数の機器のうちの第1の機器に対するユーザ操作を示す機器操作情報を取得し、前記機器操作情報に基づいて、前記複数の機器のうちの第2の機器の連携機器操作を開始させる条件であるトリガー条件を含む、前記ルールを推定するステップと、推定された前記ルールを含む問合せを前記端末に通知し、前記端末から前記ルールを登録するか否かの回答を取得するステップと、前記回答が前記ルールの登録の承認を示す場合、前記ルールを登録するステップと、登録された前記ルールに含まれる前記トリガー条件を満たす前記機器操作情報が前記第1の機器に入力されたときに、前記ルールに基づいて前記連携機器操作を実行するステップとを有することを特徴とする。
 本開示によれば、機器の動作を連携させるルールを容易に変更することができる。
実施の形態1に係る情報処理システムの概要を示す図である。 図1に示される情報処理システムが実行するルールの推定とルールの登録の概要を示す図である。 図1に示される情報処理システムが実行するルールの破棄の概要を示す図である。 図1に示される情報処理装置及び端末の構成の例を示すブロック図である。 図4に示される情報処理装置の機器管理部の機器管理情報記憶部に格納される機器管理情報のデータ構造及び具体例を示す図である。 (A)及び(B)は、端末における問合せ情報の表示の例を示す図である。 図1及び図4に示される情報処理装置のハードウェア構成の例を示すブロック図である。 図1及び図4に示される端末のハードウェア構成の例を示すブロック図である。 実施の形態1に係る情報処理システムが実行するルールの登録のための処理の例を示すフローチャートである。 実施の形態1に係る情報処理システムが実行するルールの破棄のための処理の例を示すフローチャートである。 実施の形態2に係る情報処理システムの概要を示す図である。 図11に示される情報処理システムが実行するルールの推定とルールの登録の概要を示す図である。 図11に示される情報処理装置及び端末の構成の例を示すブロック図である。 図13に示される情報処理装置のセンサ管理部のセンサ管理情報記憶部に格納されるセンサ管理情報のデータ構造及び具体例を示す図である。 実施の形態2に係る情報処理システムが実行するルールの登録のための処理の例を示すフローチャートである。
 以下に、実施の形態に係る情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラムを、図面を参照しながら説明する。以下の実施の形態は、例にすぎず、実施の形態を適宜組み合わせること及び各実施の形態を適宜変更することが可能である。
実施の形態1.
〔情報処理システムの概要〕
 図1は、実施の形態1に係る情報処理システム3の概要を示す図である。情報処理システム3は、機器操作を提供するシステムである。情報処理システム3は、複数の機器の連携に関するルールに基づいて機器操作を行う。ルールは、機器を操作する一連の操作手順とトリガー条件とを含む。すなわち、情報処理システム3において、情報処理装置1は、ユーザが機器(例えば、対象機器であるND1)に対するトリガー条件を満たす操作を行ったときに、ルールに基づいて残りの機器(例えば、対象機器と異なる連携機器であるND2)の機器操作を実行する。つまり、トリガー条件は、対象機器の操作に関する条件であり、対象機器の操作を示す機器操作情報D1がトリガー条件を満たす場合に、この対象機器と連携する連携機器が連携機器操作情報D2に基づいてルールに規定された動作を自動的に実行する。これにより、情報処理システム3は、多様な機器操作を組み合わせた機器操作のサービスを提供することができる。
 情報処理システム3は、機器管理、ルール管理、及び通知管理を提供する情報処理装置1と、情報処理装置1からルールの状態に関する問合せを行う際の問合せ先である端末2とを含む。情報処理装置1は、例えば、コンピュータである。端末2は、例えば、スマートフォン、タブレット式端末、パーソナルコンピュータ(PC)などの端末装置である。
 複数の機器は、情報処理装置1に機器操作情報D1の送信を行う機器ND1と、情報処理装置1から受け取った連携機器操作情報D2に基づく動作を実行する機器ND2とを含む。機器ND1は、1つの機器でもよいが、複数の機器ND1_1,ND1_2,…,ND1_m(ここで、mは正の整数)であってもよい。また、機器ND2は、1つの機器でもよいが、複数の機器ND2_1,ND2_2,…,ND2_n(ここで、nは正の整数)であってもよい。機器ND1と機器ND2とは、例えば、家庭用電気機器の例であり、機器NDとも表記される。なお、機器NDは、家庭用電気機器以外の電気機器であってもよい。
 機器ND1がユーザによって操作されると、機器ND1は、情報処理装置1に機器操作情報D1を送信する。そして、情報処理装置1は、機器ND2に連携機器操作情報を送信して機器ND2の機器操作を実行する。つまり、ユーザが機器ND1の操作を行うと、情報処理装置1による機器ND2の機器操作が自動的に実行され、機器ND2は受け取った連携機器操作情報D2に基づく動作を実行する。
 機器NDは、機器操作情報D1を情報処理装置1に送信する機能と情報処理装置1から受け取った連携機器操作情報D2に基づく動作を実行する機能との一方又は両方を備えている。図1の例では、機器ND1が機器操作情報D1を情報処理装置1に送信する機能を有し、機器ND2が受け取った連携機器操作情報D2に基づく動作を実行する機能を有する。
 情報処理装置1は、複数の機器NDの連携に関するルールを管理する。情報処理装置1は、複数の機器NDのうちの機器(「第1の機器」ともいう)ND1に対するユーザ操作を示す機器操作情報D1を取得し、機器操作情報D1に基づいて、複数の機器NDのうちの機器(「第2の機器」ともいう)ND2の連携機器操作を開始させる条件であるトリガー条件を含む、ルールを推定する。情報処理装置1は、推定されたルールを含む問合せI1を端末2に通知し、端末2からルールを登録するか否かの回答I2を取得する。情報処理装置1は、回答I2がルールの登録の承認を示す場合、ルールを登録する。情報処理装置1は、登録されたルールに含まれるトリガー条件を満たす機器操作情報D1が機器ND1に入力されたときに、対応するルールに基づいて連携機器操作を実行する。
 図1では、ユーザは、端末2を所持しており、情報処理装置1は、端末2を通してユーザに対するルール(このルールのトリガー条件を含む)の通知を行う。
〔ルールの推定及び登録〕
 情報処理装置1は、機器ND1から機器操作情報D1を取得すると、機器操作情報D1に基づいてルール(トリガー条件を含む)の推定を行う。ルール(トリガー条件を含む)の推定が行われると、情報処理装置1は、ユーザの端末2にルール(トリガー条件を含む)についての問合せI1を通知する。ルール(トリガー条件を含む)の問合せI1に対して、ユーザが端末2でルール(トリガー条件を含む)の登録の承認をする回答I2を送信した場合に、情報処理装置1は、当該ルール(トリガー条件を含む)の登録を行う。
 図2は、図1に示される情報処理システム3が実行するルールの推定とルールの登録の概要を示す図である。まず、登録されたルールの管理について説明する。情報処理装置1は、ルール管理情報104aを記憶装置(例えば、後述の図3のルール管理情報記憶部104)に保存して管理する。ルール管理情報104aは、情報処理装置1によって作成されたルールであり、情報処理装置1内の記憶装置又は情報処理装置1と通信可能な外部の記憶装置に保存される。ルール管理情報104aは、ユーザごとに作成されることが望ましい。すなわち、ルール管理情報104aは、複数の情報であってもよい。複数のルール管理情報104aは、複数のユーザを識別するための複数のユーザIDにそれぞれ対応付けられている。
 図2に示されるルール管理情報104aは、ルールの識別情報であるルールIDと、ルールの登録日時を示す情報と、一連の機器操作手順と、を対応付けて管理するデータベースである。図2の例では、機器操作手順は、機器を識別するための機器IDと、プロパティ情報と、機器操作手順がトリガー条件である(丸印「〇」で示されている。)か否か(「-」で示されている。)を示すトリガー条件情報とを含む。図2には、機器IDが示す機器NDの具体例として、D001とD002とが示されている。以降の説明では、D001が浴室電灯を示し、D002が浴室暖房を示す。ただし、機器NDの例は、浴室電灯及び浴室暖房に限定されず、他の電気機器であってもよい。
 情報処理装置1は、ルール管理情報104aを参照することにより、ルール管理情報104aとして登録されたルールに従って機器操作を実行することができる。例えば、ルールIDがR001のルールでは、トリガー条件の機器操作手順は、D001の機器である浴室電灯の動作状態がTrue(すなわち、電源オン)となっている。また、このルールでは、残りの機器操作手順は、D002の機器である浴室暖房の動作状態がTrue(すなわち、電源オン)となっている。よって、情報処理装置1は、当該トリガー条件を満たすと判定した場合に、一方の機器NDである浴室暖房(D002)の動作状態をTrue(すなわち、電源オン)にすることができる。
 また、図2に示されるように、情報処理装置1には、機器操作情報123aとして、機器NDの機器操作情報が蓄積される。図2に示される機器操作情報123aは、時間情報を示す時刻、機器操作情報の識別情報を示す機器操作情報ID、機器の識別情報を示す機器ID、及びプロパティ情報を含む。図2に示される機器操作情報IDが示す機器NDの機器操作情報の具体例として、DE001が19時00分03秒に発生した浴室電灯の動作状態がTrue(すなわち、電源オン)を示す機器操作情報と、DE002が19時00分06秒に発生した浴室暖房の動作状態がTrue(すなわち、電源オン)を示す機器操作情報とが示される。ただし、蓄積される機器操作情報123aは、図2に示されるものに限定されず、他の情報であってもよい。
 情報処理装置1は、機器操作情報123aを参照することにより、ルールを推定する。図2に示される例では、情報処理装置1は、DE001で示される機器操作の後にDE002で示される機器操作が行われたという機器操作情報123aから、トリガーが、DE001で示される機器操作(すなわち、浴室電灯の電源オンの操作)、DE002で示される機器操作(すなわち、浴室暖房の電源オンの操作)となるルールR001を推定する。ただし、情報処理装置1によって実行されるルールの推定は、図2に示される例に限定されるものではない。
 ルールの推定が行われると、情報処理装置1は、端末2に対して当該ルール(トリガー条件を含む)の通知を端末2に送信する。この通知により、ユーザは、当該ルールが推定されたことを認識し、通知されたルール(トリガー条件を含む)を登録するか否か選択することができる。図2の例では、端末2は、タッチパネルなどのような表示部23にテキストでルールR001の情報を表示する。例えば、端末2は、表示部23に、ルールR001を登録するか否かを質問するために「ルールを登録しますか?」という問合せ(すなわち、質問文)を表示する。ユーザは、端末2の表示部23に表示された、「はい」及び「いいえ」のボタンのいずれかを操作することによって、ルール(トリガー条件を含む)を登録するか否かの回答I2を送信することができる。ただし、端末2の表示部23の表示内容は図2の例に限定されない。
 情報処理装置1は、端末2で行われる通知によって、当該ルールの登録承認が行われると、ルール管理情報記憶部104に当該ルールをルール管理情報104aとして登録する。図2の例では、ユーザが端末2上の「はい」ボタンを押下することで、情報処理装置1は、ルールR001の登録を行う。これにより、ユーザは、情報処理装置1によって、日々の生活で発生する機器操作情報D1から連携機器操作のためのルールを推定し、ユーザの承認が得られた場合に、ルールの登録を行うことができる。
〔ルールの破棄〕
 以上の説明では、浴室電灯の電源がオンになった場合、浴室暖房の電源をオンにするというルールを例に説明した。しかしながら、例えば、季節が夏である場合に、ユーザは、浴室暖房の電源のオンが不要であると考えるかもしれない。
 そのため、情報処理システム3は、ルールに基づいて残りの機器操作を実行し始めてから、ユーザが残りの機器操作をキャンセルする機器操作情報を取得したときは、当該ルールの登録を破棄するか否かについて問合せI1を端末2に通知し、ユーザから当該ルールを破棄することを示す回答I2を取得したときは、当該ルールを破棄する。
 図3は、図1に示される情報処理システム3が実行するルールの破棄の概要を示す図である。図3において、図2で説明した構成要素と同じ機能を有する構成要素には、図2に示される符号と同じ符号が付されている。図3に示される例では、DE011が19時00分03秒に発生した浴室電灯の動作状態がTrue(すなわち、電源オン)を示す機器操作情報であり、DE012が19時00分06秒に発生した浴室暖房の動作状態がTrue(すなわち、電源オン)の機器操作情報であり、DE013が19時00分06秒に発生した浴室暖房の電源がオフの機器操作情報を示す。
 情報処理装置1は、機器操作情報123aを参照することにより、既存のトリガー条件に該当する機器操作情報を取得した場合、当該ルールの残りの機器操作を行う。図3の例は、D001の動作状態をTrue(すなわち、電源オン)にする操作が行われたことにより、D002の動作状態がTrue(すなわち、電源オン)にされた後にユーザが手動で浴室暖房の電源をオフとする機器操作を行った例を示す。
 ルールをキャンセルする機器操作(図3の例では、ルールR001による浴室暖房の電源オンの後、ユーザによる浴室暖房の電源オフ)が行われた場合、情報処理装置1は、端末2に対して当該ルールの破棄に関する通知を行う。この通知により、ユーザは、当該ルールが不要であることを認識し、該当ルールを破棄するか否かを選択することができる。図3の例では、ルールR001を破棄するか否かを「ルールを破棄しますか?」という問合せに対する回答を、「はい」又は「いいえ」のボタンで確認している。
 情報処理装置1は、端末2から送信される回答によって、当該ルールの破棄承認が行われた場合、ルール管理情報104aの当該ルールを破棄する。図3の例では、ユーザが端末2上の「はい」ボタンを押下することで、情報処理装置1は、ルールR001の破棄を行う。このように、情報処理装置1によって、ユーザの日々の生活で発生する機器操作情報からルールのキャンセルが判定され、ユーザの意思に基づいて破棄承認のあったルールが破棄される。
〔情報処理装置と端末の構成〕
 図4は、情報処理装置1と端末2との構成の例を示すブロック図である。ここでは、まず情報処理装置1について説明し、その後、端末2について説明する。
〔情報処理装置の構成〕
 情報処理装置1は、機器操作のルールを管理するルール管理部10と、端末2に通知を行うための通知管理部11と、機器操作情報の取得及び機器操作を行う機器管理部12と、情報処理装置1が、端末2を含む外部機器と通信を行うための通信部13とを含む。図4には、1つの通信部13にて、端末2、及び機器NDと通信する例が示されている。ただし、情報処理装置1は、通信相手の機器に応じて、異なる通信部(すなわち、通信インターフェース)を介して通信を行ってもよい。
 ルール管理部10は、ルールを管理する。具体的には、ルール管理部10は、ルールの登録、判定、推定、及び破棄を行う。ルール管理部10は、ルール登録部100、ルール判定部101、ルール推定部102、ルール破棄部103、及びルール管理情報記憶部104を含む。
 ルール登録部100は、通知管理部11から取得したルール情報からルールを登録する。具体的には、通知管理部11から機器操作情報に基づいたルール情報を取得し、ルール管理情報記憶部104に保存する。
 ルール判定部101は、機器管理部12が機器NDから機器操作情報を取得する度に、ルール管理情報記憶部104に保存されているトリガー条件に該当する機器操作情報か否かを判定し、トリガー条件に該当する場合は、機器管理部12に当該ルールの残りの機器操作手順を実行するよう指示する。また、ルール判定部101は、当該ルールの残りの機器操作手順を実行し始めてから、機器管理部12が機器NDから機器操作情報を取得する度に、ユーザが残りの機器操作をキャンセルする機器操作情報か否かを判定し、キャンセルする機器操作情報であった場合は、当該ルールの登録を破棄するか否かについて問合せする指示を通知管理部11へ行う。
 機器操作をキャンセルする機器操作情報とは、例えば、機器操作部120が予め定められたルールの機器操作手順により機器NDの電源をオンにした後に、ユーザが機器NDの電源をオフにする操作である。また、他の例では、ユーザが機器NDのモードを「モードX」にした後に、ユーザが機器NDのモードを「モードY」にする操作である。
 ルール推定部102は、機器管理部12に保存される1つ以上の機器操作情報からユーザの機器を操作する一連の操作手順を示すルール(トリガー条件を含む)を推定する。ルール推定部102は、例えば、ユーザが浴室の電灯をつけた後に、浴室の暖房をつける行動を行った場合を説明する。この一連の行動から、浴室の電灯の電源オンという機器操作情報があった場合、浴室の暖房をオンにする機器操作が次の機器操作として予測されるという操作手順の推定を行う。
 ルール推定部102は、このような操作手順の推定に際し、一連の機器操作手順が予め定められた規定回数(すなわち、しきい値)以上現れた場合に、一連の機器操作手順をルールであると推定してもよい。また、ルール推定部102は、正規化された機器操作情報の時系列データに基づいて、再起型ニューラルネットワークの一種であるLSTM(Long Short Term Memory)ネットワークを使用して、機器操作手順を算出してもよい。ルール推定部102は、前記のパターンを、LSTMネットワークによる機器操作学習モデルに限らず、例えば、K近傍法、決定木、Random forest、SVM(Support Vector Machine)などをアンサンブルした、深層学習でない機械学習モデルに基づいて、推定してもよい。また、推定に用いるデータは、日時情報を含んでもよい。日時情報を機器操作手順の推定に用いることで、毎日同時刻、毎週特定の曜日等の情報が、機器操作手順の推定に寄与する。
 また、ルール推定部102が機械学習を用いる場合、ルール推定部102は、ユーザによる機器の操作によって発生する機器操作情報を入力とする機械学習装置として動作し、学習済モデルを生成して記憶装置(例えば、ルール管理情報記憶部104)に格納する。機器管理部12は、トリガー条件を満たす機器操作情報D1が対象機器に入力されたときに、ルールに基づいて連携機器の連携機器操作を実行する処理を、学習済モデルを用いて実行してもよい。
 ルール破棄部103は、通知管理部11から取得したルール破棄承認情報から、ルール管理情報記憶部104に保存されている当該ルール情報を破棄する。例えば、通知管理部11が端末2から通知結果を受け取り、解析を行った結果が当該ルールの破棄承認を示す情報であった場合、ルール破棄部103は、取得した破棄承認情報から当該ルールを特定しルール管理情報104aから破棄する。
 ルール管理情報記憶部104には、ルール管理情報104aとしてルールが保存される。
 通知管理部11は、通知を管理する。具体的には、通知の生成、送信、結果取得及び結果解析を行う。通知管理部11は、通知生成部110、通知送信部111、通知結果取得部112、及び通知結果解析部113を含む。
 通知生成部110は、ルール管理部10によって推定されたルールから通知(すなわち、問合せ)を生成する。通知は、例えば、ユーザが、推定されたルール(トリガー条件を含む)の登録を承認するか否かの問合せである。
 通知送信部111は、通知生成部110によって生成された通知を端末2に通知する。
 通知結果取得部112は、通知結果(すなわち、問合せの回答)を取得する。具体的には、通知結果取得部112は、端末2によって通知に対する回答がなされたときに、通知結果として回答を取得する。例えば、通知結果取得部112は、推定されたルールを登録するか否かという通知に対して、端末2上でルールの登録に関する質問文と「はい」及び「いいえ」のボタンとが表示され、その選択結果を「はい」又は「いいえ」の操作に応じて登録承認又は登録不承認として受け取る。
 通知は、画面表示を目的とした通知に限らず、音声発話、などの他の種類の通知であってもよい。
 通知結果解析部113は、通知結果取得部112が受け取った通知を解析し、必要に応じてルール管理部10へ当該ルールを送信する。例えば、通知結果解析部113は、登録承認通知結果を解析して、当該ルールを登録するか否かを解析し、登録することを示す情報であった場合は、ルール管理部10に送信する。
 機器管理部12は、機器を管理する。具体的には、機器管理部12は、機器NDを対象とした機器操作情報の取得及び機器操作を行う。機器管理部12は、機器操作部120、機器管理情報記憶部121、機器操作情報取得部122、及び機器操作情報記憶部123を含む。
 機器操作情報取得部122は、機器NDから機器操作情報を取得する。機器操作部120は、機器NDの機器操作を行う。
 機器管理情報記憶部121は、機器管理情報121aを記憶する。ここで、機器管理情報121aとは、機器NDに関する情報であり、機器NDごとに生成される。
 図5は、図4に示される情報処理装置1の機器管理部12の機器管理情報記憶部121に格納される機器管理情報121aのデータ構造及び具体例を示す図である。図5の機器管理情報記憶部121は、機器NDの識別情報である機器ID、端末2でユーザに提示される機器NDの名称である機器ラベル情報(図5では、「機器ラベル」)、及び機器の状態を説明する変数の定義であるプロパティ情報(図5では、「プロパティ」)が格納されている。
 プロパティ情報は、プロパティの名称、及びプロパティのデータ型が紐付けられている。プロパティ情報は、1つの機器IDに対して1つ以上存在する。
 図5の例において、機器IDがD001の機器NDは、機器ラベル情報が「浴室電灯」であり、端末2においては、当該機器NDとして「浴室電灯」という名前でユーザに提示される。また、当該機器NDは、動作状態として、Bool型のデータを持つことができ、その動作状態は、設定可能かつ取得可能である。なお、動作状態におけるBool型では、Trueは電源オン、Falseは電源オフとして扱われる。
 機器操作情報記憶部123は、機器操作情報取得部122によって取得された機器操作情報123aが記憶される。この機器操作情報123aには、日付、時間等が含まれていてもよい。
 機器操作部120は、機器の操作行う。例えば、操作対象が家庭用電気器具であるエアコンである場合、機器操作部120は、例えば、機器の電源のオン/オフ、又は暖房/冷房等のモードの切り替え、又は温度設定の変更を行う。
〔端末の構成〕
 端末2は、端末2の各部を統括して制御する端末制御部20、端末2が他の機器と通信するための端末通信部21、ユーザの入力操作を受け付ける入力部22、端末制御部20の制御に従って画面を表示する表示部23、及び端末2が使用する各種データを記憶する端末記憶部24を含む。
 端末制御部20は、情報通知部200、問合せ応答部201、及び情報取得部202を含む。これらは、例えば、アプリケーションソフトウェアを端末2にインストールすることで実現してもよい。
 情報通知部200は、問合せ応答部201から取得した各種情報を、端末通信部21を介して情報処理装置に送信する。
 問合せ応答部201は、予め定められたユーザインターフェース(UI)画面を表示させて、ルールに関する通知を行う。具体的には、問合せ応答部201は、UI画面の1つとして、ルールの登録又は破棄に関する問合せ画面を表示させて、情報処理装置1のルール推定部102が推定したルールの状態に関する各種指定を受け付ける。
 情報取得部202は、情報処理装置1の通知管理部11の通知送信部111から取得した各種情報を取得し、問合せ応答部201に出力する。
 図6(A)及び(B)は、端末2における問合せ情報の表示の例を示す図である。問合せ画面は、ルールの登録又は破棄に関する問合せを行う画面であり、例えば、図6(A)及び(B)に示されるようなものである。図6(A)及び(B)の問合せ画面は、ルールR001の状態を承認するか否か問合せするための画面であり、トリガー条件表示部230、機器操作表示部231、「いいえ」ボタン232、「はい」ボタン233、及び登録日時表示部234を含む。問合せ応答部201は、情報取得部202が取得した問合せ情報を出力する。
 問合せ応答部201は、問合せ画面データに従って、問合せ画面のトリガー条件表示部230、機器操作表示部231、及び登録日時表示部234にルール情報を表示させる。図6(A)は、新たなルールが推定された場合のルール登録に関する問合せの例であり、ルールR001におけるトリガー条件の「浴室電灯がオン」と、機器操作の「浴室暖房がオン」が表示されている。ここで、ユーザが「いいえ」ボタン232を選択すると、問合せ応答部201は、ルールの登録否認情報を、情報通知部200に出力する。そして、情報通知部200は、取得したルール登録否認情報を情報処理装置1に送信する。一方、ユーザが「はい」ボタン233を選択すると、問合せ応答部201は、ルール登録承認情報を、情報通知部200に出力する。そして、情報通知部200は、取得したルール登録承認情報を情報処理装置1に送信し、情報処理装置1は、ルールを登録する。
 また、図6(B)は、ルールがキャンセルされた場合のルールの破棄に関する問合せの例であり、ルールR001におけるトリガー条件の「浴室電灯がオン」と、機器操作の「浴室暖房がオン」が表示されている。ここで、ユーザが「いいえ」ボタン232を選択すると、問合せ応答部201は、ルールの破棄否認情報を、情報通知部200に出力する。そして、情報通知部200は、取得したルール破棄否認情報を情報処理装置1に送信する。一方、ユーザが「はい」ボタン233を選択すると、問合せ応答部201は、ルールの破棄承認情報を、情報通知部200に出力する。そして、情報通知部200は、取得したルール破棄承認情報を情報処理装置1に送信し、情報処理装置1は、ルールを破棄する。
〔ハードウェア構成〕
 図7は、図1及び図4に示される情報処理装置1のハードウェア構成の例を示すブロック図である。情報処理装置1は、CPU(Central Processing Unit)などのプロセッサ151と、メモリ152と、記憶装置153とを有している。メモリ152は、例えば、RAM(Random Access Memory)などの、揮発性の半導体メモリである。記憶装置153は、例えば、ハードディスクドライブ(HDD)又はソリッドステートドライブ(SSD)などの不揮発性の記憶装置である。また、情報処理装置1は、通信部13と、インタフェース154とを有している。
 情報処理装置1の各機能は、処理回路により実現される。処理回路は、専用のハードウェアであっても、メモリ152に格納されるプログラムを実行するプロセッサ151であってもよい。プロセッサ151は、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、及びDSP(Digital Signal Processor)のいずれであってもよい。
 処理回路がプロセッサ151である場合、情報処理プログラムは、ソフトウェア、ファームウェア、又はソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェア及びファームウェアは、プログラムとして記述され、メモリ152に格納される。プロセッサ151は、メモリ152に記憶された情報処理プログラムを読み出して実行することにより、図4に示される各部の機能を実現する。
 なお、情報処理装置1は、一部を専用のハードウェアで実現し、一部をソフトウェア又はファームウェアで実現するようにしてもよい。このように、処理回路は、ハードウェア、ソフトウェア、ファームウェア、又はこれらのうちのいずれかの組み合わせによって、上述の各機能を実現することができる。
 図8は、図1及び図4に示される端末2のハードウェア構成の例を示すブロック図である。端末2は、CPUなどのプロセッサ251と、メモリ252と、記憶装置253とを有している。メモリ252は、例えば、RAMである。記憶装置253は、例えば、SSDである。また、端末2は、端末通信部21と、タッチパネルなどのユーザインターフェース254とを有している。
 端末2の各機能は、処理回路により実現される。処理回路は、専用のハードウェアであっても、メモリ252に格納されるプログラムを実行するプロセッサ251であってもよい。プロセッサ251は、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、及びDSPのいずれであってもよい。
〔ルールの登録に関する処理〕
 図9は、実施の形態1に係る情報処理システム3が実行するルールの登録のための処理の例を示すフローチャートである。ルールの登録に関する処理をするにあたり、まず、機器管理部12の機器操作情報取得部122は、機器NDから機器操作情報を取得する(ステップS101)。取得した機器操作情報は、機器管理部12の機器操作情報記憶部123に機器操作情報123aとして保存される。
 次に、ルール管理部10のルール推定部102は、機器操作情報に基づいてルール(トリガー条件を含む)の推定を行う(ステップS102)。ルール推定部102は、ルール(トリガー条件を含む)の推定ができた場合(ステップS102においてYES)、推定したルール情報を通知管理部11に送信する。一方、ルール推定部102は、ルール(トリガー条件を含む)の推定ができなかった場合(ステップS103においてNO)、ルール推定処理を終了する。
 通知管理部11の通知生成部110は、推定したルール情報を取得すると、ルール登録通知(すなわち、登録を承認するか否かの問合せ)を生成し、通知送信部111によって、通信部13を介して、端末2に送信する(ステップS103)。
 端末2の情報取得部202は、前記ルール登録通知を、端末通信部21を介して受信する(ステップS111)。次に、端末2の問合せ応答部201は、前記ルール登録通知に従い、問合せ画面(例えば、図6(A))を表示部23に表示させる(ステップS112)。これにより、ユーザは、端末2を操作して、ルールの登録を承認するか否かを回答することができる。問合せ応答部201は、ユーザの操作に応じたルール登録承認結果を生成し、情報通知部200に出力する。情報通知部200は、取得したルール登録承認結果を、端末通信部21を介して情報処理装置1に通知する(ステップS113)。そして、情報処理装置1の通知管理部11は、通信部13を介して、ルール登録承認結果を取得する(ステップS104)。
 次に、情報処理装置1の通知管理部11の通知結果取得部112は、通知結果解析部113にルール登録承認結果を出力する。通知結果解析部113は、ルール登録承認結果を解析する。通知結果解析部113は、ルール登録承認結果を解析し、登録を示す情報であった場合(ステップS105においてYES)は、ルール情報をルール登録部100に出力する。登録を示す情報ではなかった場合(ステップS105においてNO)は、情報処理装置1及び端末2が実行するルール登録のための処理は終了する。
 ルール登録部100は、ルール情報を取得すると、ルールをルール管理情報104aとしてルール管理情報記憶部104に登録する(ステップS106)。以上で、情報処理装置1及び端末2が実行するルールの登録のための処理は終了する。
〔ルールの破棄に関する処理〕
 図10は、情報処理システム3が実行するルールの破棄のための処理の例を示すフローチャートである。
 ルールの破棄に関する処理をするにあたり、まず情報処理装置1の機器操作情報取得部122は、機器NDから機器操作情報を取得する(ステップS201)。取得した機器操作情報は、機器操作情報記憶部123に保存される。次に、ルール判定部101は、機器操作情報に基づいて、ルール管理情報記憶部104に登録されているルール管理情報104aに基づいて、トリガー条件に一致するか否か判定をする(ステップS202)。トリガー条件に一致する場合(ステップS202においてYES)、ルール判定部101は、機器管理部12の機器操作部120に、ルールの残りの機器操作手順を実行する指示を出して、機器操作を実行する(ステップS203)。一方、トリガー条件に一致しない場合(ステップS202においてNO)、情報処理装置1は、ルールの破棄のための処理を終了する。
 ルール判定部101は、残りの機器操作手順を実行し始めてから、残りの機器操作をキャンセルする機器操作情報を取得した場合(ステップS204においてYES)は、ルールの登録を破棄するか否かについて問合せする指示を通知管理部11の通知生成部110へ行う。一方、キャンセルする機器操作情報を取得しなかった場合(ステップS204においてNO)は、情報処理装置1は、処理を終了する。
 通知管理部11の通知生成部110は、キャンセルされたルール情報を取得すると、ルール破棄通知を生成し、通知送信部111によって、通信部13を介して、端末2に通知する(ステップS205)。
 端末2の情報取得部202は、前記ルール破棄通知を、端末通信部21を介して受信する(ステップS211)。次に、端末2の問合せ応答部201は、前記ルール破棄通知に従い、問合せ画面(例えば、図6(B))を表示部23に表示させる(ステップS212)。これにより、ユーザは、端末2を操作して、ルールの破棄をするか否かを回答することができる。問合せ応答部201は、ユーザの操作に応じたルール破棄承認結果を生成し、情報通知部200に出力する。情報通知部200は、取得したルール破棄承認結果を、端末通信部21を介して情報処理装置1に通知する(ステップS213)。そして、情報処理装置1の通知管理部11は、通信部13を介して、ルール破棄承認結果を取得する(ステップS206)。
 次に、情報処理装置1の通知管理部11の通知結果取得部112は、通知結果解析部113にルール破棄承認結果を出力する。通知結果解析部113は、ルール破棄承認結果を解析する。通知結果解析部113は、ルール破棄承認結果を解析し、破棄を示す情報であった場合(ステップS207においてYES)は、ルール情報をルール破棄部103に出力する。破棄を示す情報ではなかった場合(ステップS207においてNO)は、情報処理装置1及び端末2が実行する処理は終了する。
 ルール破棄部103は、ルール情報を取得すると、ルール情報をルール管理情報104aから破棄する(ステップS208)。以上で、情報処理装置1及び端末2が実行するルール破棄のための処理は終了する。
 以上に説明したように、実施の形態1に係る情報処理装置1によれば、ユーザの日々の生活で発生する機器操作情報からルール(ルールのトリガー条件を含む)を推定し、ユーザへルール(ルールのトリガー条件を含む)を通知し、ユーザからルールを登録するか否かの登録承認情報を取得することで、ユーザの意思によるルールの登録ができる。
 また、実施の形態1に係る情報処理装置1によれば、ルールの機器操作を実行し始めてから、ユーザが残りの機器操作をキャンセルする機器操作情報を取得したときは、ユーザへルールを破棄するかについて問合せを行い、ユーザから破棄承認情報を取得した場合は、ルールを破棄することで、日々変化するルールの更新を容易にできる。
実施の形態2.
 実施の形態1に係る情報処理装置1は、ユーザが機器操作を行うことで生成される機器操作情報に基づいて、連携機器操作を規定するルールの推定及び登録、並びにルールの破棄を行う。これに対し、実施の形態2に係る情報処理装置1aは、ユーザが機器操作を行うことで発生する機器操作情報及びセンサから取得したセンサ情報に基づいて、連携機器操作を規定するルールの推定及び登録、並びにルールの破棄を行う。
 図11は、実施の形態2に係る情報処理システム3aの概要を示す図である。図11において、図1で説明した構成要素と同じ機能を有する構成要素には、図1に示される符号と同じ符号が付されている。
 情報処理システム3aにおいて、情報処理装置1aは、機器操作は、ルールに基づいて行われる。ルールは、ユーザの機器を操作する一連の操作手順とトリガー条件で構成される。すなわち、情報処理システム3aでは、予め定められたトリガー条件を満たす予め定められたセンサ情報の取得が行われたときに、ルールに基づいて残りの機器操作を実行する。これにより、多様なセンサ情報と機器操作情報を組み合わせた機器操作のサービスを提供することができる。
 図11の情報処理システム3aは、機器管理、センサ管理及びルール管理を提供する情報処理装置1、機器操作情報の送信又は機器操作を実行する機器ND、センサ情報の送信を実行するセンサNS、及び情報処理装置1からルールの状態に関する問合せを行う端末2を含む。
 センサNSは、例えば、ユーザを検知すると情報処理装置1aにセンサ情報を送信する。そして、情報処理装置1aは、機器NDの機器操作を実行する。これにより、センサNSの情報を取得すると、機器NDの機器操作を実行することができる。また、センサNSは、1つ以上のセンサであればよい。
 機器NDは、機器操作情報を送信する機能を備えていればよい。また、実施の形態2では、センサNSが人感センサである例を説明する。
 図12は、図11に示される情報処理システム3aが実行するルールの推定とルールの登録の概要を示す図である。
 まず、浴室にセンサ、具体的には、人感センサが設置されていた例を説明する。図12のように、センサ情報142aには、人感センサのセンサ情報が蓄積される。図12のセンサ情報142aは、時間情報を示す時刻、センサ情報の識別情報を示すセンサ情報ID、センサの識別情報を示すセンサID、及びプロパティ情報を含む。また、図12のセンサ情報142aが示すセンサのセンサ情報の具体例として、以降、SE021が19時00分03秒に発生した浴室の人感センサの人検知状態がTrue(すなわち、人検知あり)を示すセンサ情報として説明するが、本実施の形態は、この例に限定されるものではない。また、図12の機器操作情報123aの具体例として、DE021が19時00分06秒に発生した浴室暖房の動作状態がTrue(すなわち、電源がオン)の機器操作情報として説明する。
 図12の例では、SE021のセンサ情報の後にDE021が行われたという機器操作情報があることから、トリガー条件がSE021のセンサ情報、すなわち浴室人感センサの人検知反応、機器操作がDE021の機器操作情報、すなわち浴室暖房の電源オンとなるルールR002を、センサ情報142aと機器操作情報123aから推定する。
 ルール推定部102が機械学習を用いる場合、ルール推定部102は、ユーザによる機器の操作によって発生する機器操作情報とセンサ情報とを入力とする機械学習装置として動作し、学習済モデルを生成して記憶装置(例えば、ルール管理情報記憶部104)に格納する。機器管理部12は、トリガー条件を満たす機器操作情報D1が対象機器に入力されたときに、ルールに基づいて連携機器の連携機器操作を実行する処理を、学習済モデルを用いて実行してもよい。
 ルールの推定以降のルールの登録は、図2のものと同様である。これにより、ユーザは、情報処理装置1aによって、日々の生活で発生するセンサ情報及び機器操作情報から機器操作のためのルールを推定し、ユーザの意思に基づいてルールの登録をすることができる。
〔情報処理装置の構成〕
 図13は、図11に示される情報処理システム3aに含まれる情報処理装置1a及び端末2の構成の例を示すブロック図である。図13において、図4で説明した構成要素と同じ機能を有する構成要素には、図4に示される符号と同じ符号が付されている。図13に示されるように、情報処理装置1aは、センサ管理部14を含んでいる。情報処理装置1aの通信部13は、センサNSと通信可能である。
 図13では、1つの通信部13にて、端末2、機器ND、及びセンサNSと通信する例を示しているが、通信相手の機器に応じて異なる通信部(通信インターフェース)を介して通信してもよい。
 センサ管理部14は、センサを管理する。具体的には、センサNSを対象としたセンサ情報の取得を行う。センサ管理部14は、センサ管理情報記憶部140、センサ情報取得部141、及びセンサ情報記憶部142を含む。センサ情報取得部141は、センサNSからセンサ情報を取得する。
 図14は、センサ管理情報記憶部140に記憶されたセンサ管理情報140aのデータ構造及び具体例を示す図である。センサ管理情報140aとは、センサNSに関する情報であり、センサNSごとに生成される。
 図14のセンサ管理情報141aは、センサNSの識別情報であるセンサID、端末2でユーザに提示されるセンサNSの名称であるセンサラベル情報(図14では、「センサラベル」)、及びセンサの状態を説明する変数の定義であるプロパティ情報(図14では、「プロパティ」)が格納されている。
 プロパティ情報は、プロパティの名称、及びプロパティのデータ型が紐付けられている。プロパティ情報は、1つのセンサIDに対して1つ以上存在する。
 図14の例において、センサIDがS001のセンサNSは、センサラベル情報が「浴室人感センサ」であり、端末2においては、当該センサNSとして「浴室人感センサ」という名前でユーザに提示される。また、当該センサNSは、人検知状態として、Bool型のデータを持つことができ、その人検知状態は、取得可能である。なお、人検知状態におけるBool型は、Trueであれば人検知、Falseであれば人未検知として扱う。
 センサ情報記憶部142は、センサ情報取得部141によって取得されたセンサ情報を記憶する。このセンサ情報には、日付、時間等が含まれていてもよい。
〔ルールの登録に関する処理〕
 図15は、実施の形態2に係る情報処理システム3aが実行するルールの登録のための処理の例を示すフローチャートである。図15において、図9で説明した構成要素と同じ機能を有する構成要素には、図9に示される符号と同じ符号が付されている。
 ステップS121では、センサ情報、及び機器操作情報に基づいてルールを推定する。具体的には、ルール推定部102は、センサ情報記憶部142、及び機器操作情報記憶部123に保存された情報に基づいて、ルール(トリガー条件を含む)を推定する。推定できた場合(ステップS121においてYES)は、ルール(トリガー条件を含む)を通知管理部11に送信し、ステップS103へ進む。推定できなかった場合(ステップS121においてNO)は、情報処理装置1aは、処理を終了する。ステップS103以降の処理は、図9におけるものと同じである。
 以上に説明したように、実施の形態2に係る情報処理装置1aによれば、ユーザの日々の生活で発生する機器操作情報及びセンサ情報からルール(ルールのトリガー条件を含む)を推定し、ユーザへルールを通知し、ユーザからルールを登録するか否かの登録承認情報を取得することで、ユーザの意思によるルールの登録ができる。
 また、実施の形態2に係る情報処理装置1aによれば、ユーザが残りの機器操作をキャンセルする機器操作情報を取得したときは、ユーザへルールを破棄するかについて問合せを行い、ユーザから破棄承認情報を取得した場合は、ルールを破棄することで、日々変化するルールの更新を容易にできる。
 また、実施の形態2による情報処理装置の構成及びルールの登録に関する処理によると、温度・湿度センサの情報、及び人感センサのうちの1つ以上の情報を入力とすることで、ある温度、湿度の条件に当てはまる季節をトリガー条件の一つとして、機器を操作することもできる。
 また、入浴中の暖房機器の動作と、衣類乾燥中の暖房機器の動作とを、異なる動作にすることができる。
 1、1a 情報処理装置、 2 端末、 3、3a 情報処理システム、 ND 機器、 ND1 機器、 ND2 機器、 NS センサ、 10 ルール管理部、 11 通知管理部、 12 機器管理部、 13 通信部、 14 センサ管理部、 20 端末制御部、 21 端末通信部、 22 入力部、 23 表示部、 24 端末記憶部、 100 ルール登録部、 101 ルール判定部、 102 ルール推定部、 103 ルール破棄部、 104 ルール管理情報記憶部、 104a ルール管理情報、 110 通知生成部、 111 通知送信部、 112 通知結果取得部、 113 通知結果解析部、 120 機器操作部、 121 機器管理情報記憶部、 121a 機器管理情報、 122 機器操作情報取得部、 123 機器操作情報記憶部、 123a 機器操作情報、 140 センサ管理情報記憶部、 140a センサ管理情報、 141 センサ情報取得部、 142 センサ情報記憶部、 142a センサ情報、 200 情報通知部、 201 問合せ応答部、 202 情報取得部、 230 トリガー条件表示部、 231 機器操作表示部、 232 「いいえ」ボタン、 233 「はい」ボタン、 234 登録日時表示部。

Claims (8)

  1.  端末を含む外部機器と通信を行う通信部と、
     複数の機器の連携に関するルールを管理するルール管理部と、
     通知管理部と、
     機器管理部と、
     を備え、
     前記ルール管理部は、前記複数の機器のうちの第1の機器に対するユーザ操作を示す機器操作情報を取得し、前記機器操作情報に基づいて、前記複数の機器のうちの第2の機器の連携機器操作を開始させる条件であるトリガー条件を含む、前記ルールを推定し、
     前記通知管理部は、前記通信部を介して、推定された前記ルールを含む問合せを前記端末に通知し、前記端末から前記ルールを登録するか否かの回答を取得し、
     前記ルール管理部は、前記回答が前記ルールの登録の承認を示す場合、前記ルールを登録し、
     前記機器管理部は、登録された前記ルールに含まれる前記トリガー条件を満たす前記機器操作情報が前記第1の機器に入力されたときに、前記ルールに基づいて前記連携機器操作を実行する
     ことを特徴とする情報処理装置。
  2.  センサによって検出された情報であるセンサ情報D3を取得するセンサ管理部をさらに備え、
     前記ルール管理部は、前記機器操作情報と前記センサ情報とに基づいて、前記ルールを推定する
     ことを特徴とする請求項1に記載の情報処理装置。
  3.  前記ルール管理部は、ユーザによる前記複数の機器の操作によって発生する前記機器操作情報を入力とする機械学習によって前記ルールを推定して学習済モデルを生成し、
     前記機器管理部は、前記学習済モデルを用いて、前記ルールに基づく前記連携機器操作を実行する
     ことを特徴とする請求項1に記載の情報処理装置。
  4.  前記ルール管理部は、ユーザによる前記複数の機器の操作によって発生する前記機器操作情報及び前記センサ情報を入力とする機械学習によって前記ルールを推定して学習済モデルを生成し、
     前記機器管理部は、前記学習済モデルを用いて、前記ルールに基づく前記連携機器操作を実行する
     ことを特徴とする請求項2に記載の情報処理装置。
  5.  前記機器管理部が前記連携機器操作のキャンセルを示す機器操作情報を取得したときに、前記通知管理部は、前記連携機器操作を規定する前記ルールの登録を破棄するか否かの問合せを前記端末に通知し、前記端末から前記ルールを破棄するか否かの回答情報を取得し、
     前記ルール管理部は、前記回答情報が前記ルールの破棄の承認を示す場合、前記破棄の承認があった前記ルールを破棄する
     ことを特徴とする請求項1から4のいずれか1項に記載の情報処理装置。
  6.  請求項1から5のいずれか1項に記載の情報処理装置と、
     前記端末と、
     を有することを特徴とする情報処理システム。
  7.  端末を含む外部機器と通信を行い、複数の機器の連携に関するルールを管理する情報処理装置によって実施される情報処理方法であって、
     前記複数の機器のうちの第1の機器に対するユーザ操作を示す機器操作情報を取得し、前記機器操作情報に基づいて、前記複数の機器のうちの第2の機器の連携機器操作を開始させる条件であるトリガー条件を含む、前記ルールを推定するステップと、
     推定された前記ルールを含む問合せを前記端末に通知し、前記端末から前記ルールを登録するか否かの回答を取得するステップと、
     前記回答が前記ルールの登録の承認を示す場合、前記ルールを登録するステップと、
     登録された前記ルールに含まれる前記トリガー条件を満たす前記機器操作情報が前記第1の機器に入力されたときに、前記ルールに基づいて前記連携機器操作を実行するステップと
     を有することを特徴とする情報処理方法。
  8.  端末を含む外部機器と通信を行い、複数の機器の連携に関するルールを管理するコンピュータに、
     前記複数の機器のうちの第1の機器に対するユーザ操作を示す機器操作情報を取得し、前記機器操作情報に基づいて、前記複数の機器のうちの第2の機器の連携機器操作を開始させる条件であるトリガー条件を含む、前記ルールを推定するステップと、
     推定された前記ルールを含む問合せを前記端末に通知し、前記端末から前記ルールを登録するか否かの回答を取得するステップと、
     前記回答が前記ルールの登録の承認を示す場合、前記ルールを登録するステップと、
     登録された前記ルールに含まれる前記トリガー条件を満たす前記機器操作情報が前記第1の機器に入力されたときに、前記ルールに基づいて前記連携機器操作を実行するステップと
     を実行させることを特徴とする情報処理プログラム。
PCT/JP2021/023974 2021-06-24 2021-06-24 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム Ceased WO2022269869A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
DE112021007876.3T DE112021007876T5 (de) 2021-06-24 2021-06-24 Informationsverarbeitungseinrichtung, informationsverarbeitungssystem, informationsverarbeitungsverfahren und informationsverarbeitungsprogramm
PCT/JP2021/023974 WO2022269869A1 (ja) 2021-06-24 2021-06-24 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム
US18/571,735 US20240121166A1 (en) 2021-06-24 2021-06-24 Information processing device, information processing system, information processing method, and storage medium storing information processing program
CN202180099556.9A CN117501251A (zh) 2021-06-24 2021-06-24 信息处理装置、信息处理系统、信息处理方法和信息处理程序
JP2022510185A JP7106032B1 (ja) 2021-06-24 2021-06-24 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2021/023974 WO2022269869A1 (ja) 2021-06-24 2021-06-24 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム

Publications (1)

Publication Number Publication Date
WO2022269869A1 true WO2022269869A1 (ja) 2022-12-29

Family

ID=82556745

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/023974 Ceased WO2022269869A1 (ja) 2021-06-24 2021-06-24 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム

Country Status (5)

Country Link
US (1) US20240121166A1 (ja)
JP (1) JP7106032B1 (ja)
CN (1) CN117501251A (ja)
DE (1) DE112021007876T5 (ja)
WO (1) WO2022269869A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7595817B1 (ja) * 2023-11-09 2024-12-06 三菱電機株式会社 制御システム、制御方法、および制御プログラム
WO2025099957A1 (ja) * 2023-11-09 2025-05-15 三菱電機株式会社 制御システム、制御方法、および制御プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH087188A (ja) * 1994-06-22 1996-01-12 Tokyo Gas Co Ltd 人間活動監視補助装置
JP2009044247A (ja) * 2007-08-06 2009-02-26 Panasonic Electric Works Co Ltd 機器制御システム
JP2017102643A (ja) * 2015-12-01 2017-06-08 シャープ株式会社 連携サーバ、連携システム、および連携サーバの制御方法
WO2017212793A1 (ja) * 2016-06-10 2017-12-14 パナソニックIpマネジメント株式会社 制御システム、及び、制御方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060213000A1 (en) * 2005-03-25 2006-09-28 Kimble Christopher J Automatic energy-efficient bathroom exhaust fan controller
US8171325B2 (en) * 2008-12-03 2012-05-01 International Business Machines Corporation Computing component and environment mobility
US9208676B2 (en) * 2013-03-14 2015-12-08 Google Inc. Devices, methods, and associated information processing for security in a smart-sensored home
US9558043B2 (en) * 2013-01-25 2017-01-31 Cisco Technology Inc. System and method for abstracting and orchestrating mobile data networks in a network environment
US9520054B2 (en) * 2013-10-07 2016-12-13 Google Inc. Mobile user interface for smart-home hazard detector configuration
WO2015127566A1 (en) * 2014-02-28 2015-09-03 Appareils Connectés Casa Ltée Thermostat unit and associated system and method
US9841205B2 (en) * 2015-05-20 2017-12-12 Google Llc Systems and methods of detection with active infrared sensors
JP6819614B2 (ja) * 2016-01-18 2021-01-27 日本電気株式会社 情報処理システム、デバイス登録方法、情報処理装置、通信端末およびそれらの制御方法と制御プログラム
US10754673B2 (en) * 2017-05-08 2020-08-25 Google Llc Smart device configuration guidance via automated assistant interface of separate client device
PL3416337T3 (pl) * 2017-06-12 2020-04-30 Smart Place Ag Urządzenie do automatyzacji domu lub budynku
US10977579B2 (en) * 2018-08-27 2021-04-13 Vmware, Inc. Adversarial automated reinforcement-learning-based application-manager training
US20200120163A1 (en) * 2018-10-12 2020-04-16 Thingify Private Limited Managing data and personification of iot devices in multiple networks
US11032312B2 (en) * 2018-12-19 2021-06-08 Abnormal Security Corporation Programmatic discovery, retrieval, and analysis of communications to identify abnormal communication activity
JP7012764B2 (ja) * 2020-03-02 2022-01-28 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH087188A (ja) * 1994-06-22 1996-01-12 Tokyo Gas Co Ltd 人間活動監視補助装置
JP2009044247A (ja) * 2007-08-06 2009-02-26 Panasonic Electric Works Co Ltd 機器制御システム
JP2017102643A (ja) * 2015-12-01 2017-06-08 シャープ株式会社 連携サーバ、連携システム、および連携サーバの制御方法
WO2017212793A1 (ja) * 2016-06-10 2017-12-14 パナソニックIpマネジメント株式会社 制御システム、及び、制御方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7595817B1 (ja) * 2023-11-09 2024-12-06 三菱電機株式会社 制御システム、制御方法、および制御プログラム
WO2025099957A1 (ja) * 2023-11-09 2025-05-15 三菱電機株式会社 制御システム、制御方法、および制御プログラム

Also Published As

Publication number Publication date
DE112021007876T5 (de) 2024-04-11
CN117501251A (zh) 2024-02-02
JP7106032B1 (ja) 2022-07-25
JPWO2022269869A1 (ja) 2022-12-29
US20240121166A1 (en) 2024-04-11

Similar Documents

Publication Publication Date Title
JP5803249B2 (ja) 情報処理装置、情報処理方法、及びプログラム
EP3055844B1 (en) Smart-home hazard detector providing useful follow up communications to detection events
KR102740291B1 (ko) 전자 장치에서 스케줄 관리 방법 및 장치
JP4741500B2 (ja) 機器制御装置、機器、機器制御装置の制御方法、プログラムおよび機器制御システム
JP7106032B1 (ja) 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム
JP2012234421A (ja) 情報処理装置、情報処理方法、及びプログラム
JP5850240B2 (ja) 電力管理装置
CN111023475B (zh) 网络系统、服务器及信息处理方法
JP7747461B2 (ja) 情報出力方法、情報出力装置及びプログラム
WO2014103307A1 (ja) 制御方法
Vastardis et al. A user behaviour-driven smart-home gateway for energy management
JP2025164908A (ja) 機器制御方法及び機器制御装置
CN109196352B (zh) 用于通过使用声学信号来监视对象及其状态的系统和方法
CN104777754B (zh) 一种虚拟设备创建方法及装置
RU2622859C2 (ru) Способ для реализации инсталляции прибора с интеллектуальным аппаратным обеспечением и устройство для того же
CN110093739B (zh) 运行控制方法、装置、洗涤设备和计算机可读存储介质
JP2005260919A (ja) コントローラ、プログラムおよび記憶媒体
JP6103006B2 (ja) 情報処理装置、情報処理方法、及びプログラム
CN112789635A (zh) 信息提供方法
JP2003196412A (ja) 保守管理サーバおよび機器
KR101801952B1 (ko) 콘텍스트-기초 대기 전력 절감 방법 및 장치
Lim et al. CASPRE: A context-aware standby power reduction scheme for household appliances
CN114265647B (zh) 交互界面的显示方法、控制终端、空调器及介质
US20210319791A1 (en) Electronic apparatus and controlling method thereof
JP7764587B2 (ja) 機器制御装置、機器制御方法、プログラム及び機器制御システム

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2022510185

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21947154

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 202180099556.9

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 18571735

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 112021007876

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21947154

Country of ref document: EP

Kind code of ref document: A1