WO2023026746A1 - 異常判定方法、情報処理装置、及びプログラム - Google Patents

異常判定方法、情報処理装置、及びプログラム Download PDF

Info

Publication number
WO2023026746A1
WO2023026746A1 PCT/JP2022/028780 JP2022028780W WO2023026746A1 WO 2023026746 A1 WO2023026746 A1 WO 2023026746A1 JP 2022028780 W JP2022028780 W JP 2022028780W WO 2023026746 A1 WO2023026746 A1 WO 2023026746A1
Authority
WO
WIPO (PCT)
Prior art keywords
remote operation
information
event
abnormal
remote
Prior art date
Application number
PCT/JP2022/028780
Other languages
English (en)
French (fr)
Inventor
圭介 岩田
Original Assignee
パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ filed Critical パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ
Priority to CN202280058160.4A priority Critical patent/CN117882366A/zh
Priority to JP2023543755A priority patent/JPWO2023026746A1/ja
Publication of WO2023026746A1 publication Critical patent/WO2023026746A1/ja
Priority to US18/585,631 priority patent/US20240195654A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/14—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic
    • H04L63/1408—Network architectures or network communication protocols for network security for detecting or protecting against malicious traffic by monitoring network traffic
    • H04L63/1425—Traffic logging, e.g. anomaly detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2825—Reporting to a device located outside the home and the home network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems

Definitions

  • the present disclosure relates to an abnormality determination method, an information processing device, and a program.
  • Patent Document 1 discloses a device control system that includes an abnormal state determination unit. When determining that the operation mode of the control device is the remote control mode, the abnormality determination unit reduces the magnitude of the abnormality determination threshold compared to when determining that the operation mode is not the remote control mode. .
  • Patent Document 1 no consideration is given to determining whether remote operation is normal or abnormal based on remote operation information and event information.
  • An object of the present disclosure is to obtain an abnormality determination method, an information processing apparatus, and a program capable of highly accurately determining whether remote operation is normal or abnormal based on remote operation information and event information. aim.
  • An abnormality determination method includes an information processing device that acquires remote operation information for remotely operating a device, and detects occurrence of a predetermined event related to user behavior associated with the remote operation. event information indicating whether the remote operation is normal or abnormal based on the relationship information indicating the relationship between the remote operation and the event, and the acquired remote operation information and the event information. If it is determined that the remote operation is abnormal, an abnormality notification is output.
  • FIG. 4 is a flow chart showing the flow of processing executed by an information processing unit; It is a figure which shows an example of table information. It is a figure which shows an example of table information.
  • 1 is a diagram showing a simplified overall configuration of a remote control system;
  • FIG. 4 is a flow chart showing the flow of processing executed by an information processing unit; It is a figure which shows an example of table information.
  • remote control systems are accompanied by the user's anxiety that the device will be illegally operated by hacking by a third party. Therefore, in order to give users a sense of security and spread remote control systems, it is important to build a mechanism that can detect abnormal remote control with high accuracy.
  • the inventors of the present invention have found that by using remote operation information and event information associated with it, it is possible to determine with high accuracy whether the remote operation is normal or abnormal. As a result, the present disclosure has been conceived.
  • an information processing apparatus acquires remote operation information for remotely operating a device, and a predetermined event related to user behavior associated with the remote operation occurs. and based on the relationship information indicating the relationship between the remote operation and the event, and the acquired remote operation information and the event information, whether the remote operation is normal or abnormal If it is determined that the remote operation is abnormal, an abnormality notification is output.
  • the information processing device determines whether the remote operation is normal or abnormal based on the relationship information indicating the relationship between the remote operation and the event, and the acquired remote operation information and event information. determine whether This makes it possible to determine with high accuracy whether the remote operation is normal or abnormal.
  • the relevance information may include first threshold information regarding a time difference between the acquisition time of the remote operation information and the occurrence time of the event.
  • the relationship information includes the first threshold information regarding the time difference between the acquisition time of the remote operation information and the event occurrence time, thereby increasing the accuracy of determining whether the remote operation is normal or abnormal. can be improved.
  • the content of the abnormality notification may be changed according to the correlation strength between the acquisition time of the remote operation information and the occurrence time of the event. .
  • the third aspect by varying the content of the abnormality notification according to the correlation strength, it is possible to clearly notify the user of the occurrence of a truly urgent abnormality.
  • the remote operation is normal or abnormal.
  • the information processing device determines whether the remote operation is normal or abnormal based on the acquisition time of the remote operation information and the second threshold information regarding the variation in the acquisition time. This makes it possible to further improve the accuracy of determining whether the remote operation is normal or abnormal.
  • the abnormality determination method in the fourth aspect, even if the content of the abnormality notification is changed according to the correlation strength between the acquisition time of the remote operation information and the variation in the acquisition time good.
  • the fifth aspect by varying the content of the abnormality notification according to the correlation strength, it is possible to clearly notify the user of the occurrence of a truly urgent abnormality.
  • An abnormality determination method in any one of the first to fifth aspects, further includes determining whether or not to stop the remote operation when it is determined that the remote operation is abnormal. You may output the confirmation notice for confirming with a user.
  • the user when the information processing device outputs the confirmation notification, the user can execute a cancel operation for canceling the abnormal remote operation.
  • An abnormality determination method in any one of the first to fifth aspects, further includes control for stopping the remote operation when it is determined that the remote operation is abnormal. You can output commands.
  • the seventh aspect by outputting the control command from the information processing device, it is possible to stop the abnormal remote operation without depending on the user's stop operation.
  • An information processing apparatus acquires remote operation information for remotely operating a device, and event information indicating occurrence of a predetermined event related to user behavior associated with the remote operation. determining whether the remote operation is normal or abnormal based on an acquisition unit for determining whether the remote operation is normal or abnormal based on the relationship information indicating the relationship between the remote operation and the event, and the acquired remote operation information and the event information. and an output unit for outputting an abnormality notification when it is determined that the remote operation is abnormal.
  • the determination unit determines whether the remote operation is normal or abnormal based on the relationship information indicating the relationship between the remote operation and the event, and the acquired remote operation information and event information. judge. This makes it possible to determine with high accuracy whether the remote operation is normal or abnormal.
  • a program includes remote operation information for remotely operating an information processing device, and event information indicating occurrence of a predetermined event related to user behavior associated with the remote operation.
  • relevance information indicating the relevance between the remote operation and the event, and whether the remote operation is normal or abnormal based on the acquired remote operation information and the event information.
  • output means for outputting an abnormality notification when it is determined that the remote operation is abnormal.
  • the determination means determines whether the remote operation is normal or abnormal based on the relationship information indicating the relationship between the remote operation and the event, and the acquired remote operation information and event information. judge. This makes it possible to determine with high accuracy whether the remote operation is normal or abnormal.
  • the present disclosure can also be realized as a program that causes a computer to execute each characteristic configuration included in such a method or apparatus, or as a system that operates with this program. It goes without saying that such a computer program can be distributed via a computer-readable non-temporary recording medium such as a CD-ROM or a communication network such as the Internet. (Embodiment of the present disclosure)
  • FIG. 1 is a diagram showing a simplified overall configuration of a remote control system 1 according to the first embodiment of the present disclosure.
  • the remote control system 1 includes an abnormality detection server 2 , a remote control terminal 3 , a remote control server 4 , a communication device 51 , a detection device 52 and an operation target device 53 .
  • the operation target device 53 is a target device to be remotely operated by the remote control terminal 3 .
  • the communication device 51, the detection device 52, and the operation target device 53 are installed, for example, in the house 5 where the user lives.
  • the abnormality detection server 2 , the remote control terminal 3 , the remote control server 4 , and the communication device 51 can communicate with each other via the communication network 6 .
  • the communication network 6 is any dedicated or general-purpose line network that supports any communication method such as IP.
  • the anomaly detection server 2 includes an information processing section 11, a storage section 12, and a communication section 13.
  • the information processing section 11 is configured using a CPU or the like.
  • the storage unit 12 is configured using an HDD, SSD, flash memory, or the like.
  • the communication unit 13 is configured using a communication module or the like compatible with the communication method of the communication network 6 .
  • the information processing unit 11 has an acquisition unit 21, a setting unit 22, a determination unit 23, and an output unit 24 as functions realized by the CPU executing a predetermined program.
  • Remote operation data 31 , event data 32 , threshold data 33 , and table information 101 are stored in the storage unit 12 . Details of these data and information will be described later.
  • the acquisition unit 21 acquires a remote operation command signal as remote operation information for remotely operating the operation target device 53 from the remote operation terminal 3 via the communication network 6 and the communication unit 13 .
  • the acquisition unit 21 also acquires an event detection signal as event information indicating the occurrence of an event from the detection device 52 via the communication device 51 , the communication network 6 and the communication unit 13 .
  • the acquisition unit 21 also acquires remote operation data 31 and event data 32 stored as a database in the storage unit 12 by reading them from the storage unit 12 .
  • the setting unit 22 performs statistical data analysis on the remote operation data 31 and the event data 32 acquired by the acquisition unit 21 .
  • the setting unit 22 also sets a first threshold based on the result of data analysis, and stores threshold data 33 indicating the first threshold in the storage unit 12 .
  • the setting unit 22 creates the table information 101 by associating the content of the remote operation, the content of the corresponding event, and the first threshold.
  • the setting unit 22 stores the created table information 101 in the storage unit 12 .
  • the determination unit 23 determines whether the remote operation command signal to be determined is normal or abnormal.
  • the output unit 24 generates and outputs an alert notification when it is determined that the remote operation command signal is abnormal.
  • the remote control terminal 3 is, for example, a smartphone possessed by a user who is a resident of the house 5.
  • the remote control terminal 3 includes an input section 41 , a display section 42 , a processing section 43 and a communication section 44 .
  • the input unit 41 and the display unit 42 are configured using, for example, a touch panel display using liquid crystal, organic EL, or the like.
  • the processing unit 43 is configured using a CPU or the like.
  • the communication unit 44 is configured using a communication module or the like compatible with the communication method of the communication network 6 .
  • a communication device 51 , a detection device 52 , and an operation target device 53 are installed in the house 5 .
  • the communication device 51 is configured using, for example, a gateway device for connecting the communication network 6 outside the house 5 and a communication network such as a wireless LAN inside the house 5 .
  • the detection device 52 is a sensor for detecting the occurrence of a predetermined event inside the house 5 .
  • a predetermined event indicates an event or an event related to the behavior of the user, and includes, for example, leaving home, returning home, picking up and dropping off from cram school, dining out with family, lessons, school events, and the like.
  • the detection device 52 may be a human sensor installed at the entrance of the house 5 or an opening/closing sensor of the entrance door.
  • the operation target device 53 is an IoT device or the like to be remotely controlled from outside the house 5, such as an air conditioner, an electronic lock for the front door, or a Blu-ray recorder.
  • the remote control server 4 receives the remote operation command signal transmitted from the remote control terminal 3, and based on the remote operation command signal, generates and transmits a control signal for controlling the operation of the operation target device 53. . By inputting the control signal to the operation target device 53 via the communication device 51, the operation target device 53 is remotely operated.
  • FIG. 2 is a flowchart showing the flow of processing executed by the information processing section 11 of the anomaly detection server 2.
  • the processing unit 43 sends the remote operation instruction signal from the communication unit 44 to the remote control server 4 via the communication network 6 and to the abnormal state.
  • the communication unit 13 of the abnormality detection server 2 receives the remote operation command signal.
  • the acquisition unit 21 acquires from the communication unit 13 the remote operation command signal received by the communication unit 13 .
  • the information processing section 11 also stores the remote operation command signal received by the communication section 13 in the storage section 12 .
  • the remote operation command signal is stored in the storage unit 12 as one record of remote operation data 31, which is a database.
  • an event detection signal regarding the event is transmitted from the communication device 51 to the abnormality detection server 2 via the communication network 6 .
  • the communication unit 13 of the anomaly detection server 2 receives the event detection signal.
  • the acquisition unit 21 acquires from the communication unit 13 the event detection signal received by the communication unit 13 .
  • the information processing section 11 also stores the event detection signal received by the communication section 13 in the storage section 12 .
  • the event detection signal is stored in the storage unit 12 as one record of the event data 32, which is a database.
  • the remote operation command signal and the event detection signal are stored in the storage unit 12 .
  • remote operation data 31 as a database including a plurality of records corresponding to a plurality of remote operation command signals and event data 32 as a database including a plurality of records corresponding to a plurality of event detection signals are stored in the storage unit. 12.
  • the acquisition unit 21 acquires the remote operation data 31 and the event data 32 accumulated in the storage unit 12.
  • the setting unit 22 performs statistical data analysis on the acquired remote operation data 31 and event data 32 .
  • the setting unit 22 sets the first threshold based on the result of the data analysis at step SP102, and stores the threshold data 33 indicating the first threshold in the storage unit 12. Based on the remote operation data 31, the event data 32, and the threshold data 33, the setting unit 22 also creates the table information 101 by associating the content of the remote operation, the content of the corresponding event, and the first threshold value.
  • the table information 101 is stored in the storage unit 12 .
  • FIG. 3 is a diagram showing an example of the table information 101.
  • an event that the user returns to the house 5 is associated with the remote operation of "air conditioner ON" for the air conditioner that is the operation target device 53, and the first threshold for the time difference between the air conditioner ON and returning home is " 1 hour is set.
  • an event that the user returns to the house 5 is associated with the remote operation of "unlocking the electronic lock” for the electronic lock of the front door, which is the operation target device 53, and the time difference between the unlocking of the electronic lock and the time of returning home is associated.
  • "1 minute” is set as the first threshold for These first thresholds correspond to relevance information indicating relevance between the remote operation and the corresponding event.
  • the setting unit 22 averages the time difference based on a large number of samples regarding the time difference between the reception time (acquisition time) of the remote operation command signal and the reception time (event occurrence time) of the event detection signal related to the corresponding event.
  • a value and a standard deviation ⁇ are calculated, and a time obtained by adding a time equivalent to, for example, +3 ⁇ to the average value of the time difference can be set as the first threshold.
  • +3 ⁇ is an example, and +2 ⁇ or +1 ⁇ may be used. This also applies to the second threshold, which will be described later.
  • the first threshold is set to 1 hour for the remote operation to turn on the air conditioner, and the first threshold is set to 1 minute for the remote operation to unlock the electronic lock.
  • the user of this house 5 normally returns home within one hour after transmitting the remote control command signal to turn on the air conditioner. It is normal to be home within a minute of sending the signal.
  • the setting unit 22 calculates the first threshold value and updates the threshold data 33 and table information 101 stored in the storage unit 12. .
  • the determination unit 23 determines whether the remote operation command signal to be determined is normal or abnormal. In the example shown in FIG. 3, when the remote operation command signal to be determined is to turn the air conditioner ON, the determination unit 23 determines the reception time (acquisition time) of the remote operation command signal to turn the air conditioner ON and the time at which the user returns home after that. A time difference from the reception time (occurrence time) of the event detection signal relating to the event is calculated, and it is determined whether or not the time difference is within a first threshold value (one hour in the example of FIG. 3).
  • the determination unit 23 determines the reception time (acquisition time) of the remote operation command signal for unlocking the electronic lock, and the subsequent return-home event of the user. A time difference from the reception time (occurrence time) of the event detection signal is calculated, and it is determined whether or not the time difference is within a first threshold value (one minute in the example of FIG. 3).
  • step SP105 NO
  • the remote operation command signal to be determined is normal, and the process returns to step SP101.
  • step SP105 If the time difference exceeds the first threshold (step SP105: YES), the remote operation command signal to be determined is determined to be abnormal. An alert notification such as characters or graphics is generated and output to notify the user of the fact.
  • the communication unit 13 transmits the alert notification data input from the output unit 24 to the remote control terminal 3 via the communication network 6 .
  • the communication section 44 receives the alert notification data, and the processing section 43 displays the alert notification on the display section 42 based on the data received by the communication section 44 .
  • step SP107 the output unit 24 generates and outputs a cancellation confirmation notification such as characters or graphics for confirming with the user whether to cancel (discontinue) the abnormal remote operation.
  • the communication unit 13 transmits data of the cancellation confirmation notification input from the output unit 24 to the remote control terminal 3 via the communication network 6 .
  • the communication section 44 receives the data of the cancellation confirmation notice, and the processing section 43 displays the cancellation confirmation notice on the display section 42 based on the data received by the communication section 44 .
  • the processing unit 43 transmits a stop command signal from the communication unit 44 to the remote control server 4 via the communication network 6 .
  • the remote control server 4 receives the stop command signal transmitted from the remote control terminal 3, and based on the stop command signal, generates and transmits a control signal for stopping the remote control of the operation target device 53. By inputting the control signal to the operation target device 53 via the communication device 51, the remote operation of the operation target device 53 is stopped.
  • alert notification in step SP106 and the cancellation confirmation notification in step SP107 may be output as voice messages from the speaker of the remote control terminal 3 instead of being displayed on the display unit 42 as characters or images.
  • step SP106 and the cancellation confirmation notification in step SP107 may be executed simultaneously as a single step instead of separate steps.
  • the cancellation confirmation notification in step SP107 may be a request signal requesting the user's reply input as to whether or not to cancel the abnormal remote operation.
  • a response to cancel the remote operation is input from the input unit 41 by tapping a cancel button or the like, the response signal is transmitted from the remote control terminal 3 to the abnormality detection server 2, and the abnormality detection server 2 performs remote control.
  • a remote operation stop control command may be transmitted to the server 4 .
  • the determination unit 23 determines that the remote operation is abnormal
  • the user's response input is omitted, and the abnormality detection server 2 immediately transmits a remote control stop control command to the remote control server 4.
  • whether to request a response input from the user or to omit the response input and immediately send a stop control command may be set individually according to the type of remote operation. For example, for remote operations with low security importance such as turning on the air conditioner, a response input from the user is required.On the other hand, remote operations with high security importance such as unlocking the electronic lock are immediately stopped. You can send commands.
  • the determination unit 23 receives the By checking the beacon information or the like, it may be determined whether or not the user who left home or returned home is a registered authorized user. The determination unit 23 does not need to consider that an event has occurred if it is not an event by an authorized user.
  • the anomaly detection server 2 (information processing device) includes a first threshold value (relationship information) indicating the relevance between a remote operation and a corresponding event, and a remote operation command signal ( Based on the remote operation information) and the event detection signal (event information), it is determined whether the remote operation to be determined is normal or abnormal. This makes it possible to determine with high accuracy whether the remote operation is normal or abnormal.
  • the relationship information includes the threshold data 33 (first threshold information) regarding the time difference between the acquisition time of the remote operation command signal and the event occurrence time, thereby determining whether the remote operation is normal. It is possible to improve the accuracy of determination as to whether there is an abnormality.
  • the user can execute a cancel operation for canceling an abnormal remote operation by outputting a cancellation confirmation notice from the abnormality detection server 2 .
  • the abnormality detection server 2 outputs a stop control command, so that the abnormal remote operation can be immediately stopped without depending on the user's stop operation.
  • the determination unit 23 determines whether or not the time difference between the acquisition time of the remote operation command signal and the occurrence time of the corresponding event is within the first threshold. It may be determined whether or not the acquisition time of the command signal is within a second threshold regarding the variation of the acquisition time. However, it is also possible to omit the first threshold value and determine whether the remote operation is normal or abnormal based only on the second threshold value.
  • FIG. 4 is a diagram showing an example of the table information 102.
  • table information 102 is stored in the storage unit 12 instead of the table information 101 shown in FIG.
  • the time "18:00” is set as the average acquisition time of the air conditioner ON
  • the second threshold for the time difference from the average acquisition time is " 30 minutes” is set.
  • the time "19:00” is set as the average acquisition time for unlocking the electronic lock
  • "30 minutes” is set as the second threshold regarding the time difference from the average acquisition time.
  • threshold data 33 indicating the first threshold and the second threshold are stored in the storage unit 12 .
  • the second threshold indicates the maximum permissible variation in remote control information acquisition time.
  • the setting unit 22 calculates the average value and the standard deviation ⁇ based on a large number of samples regarding the reception time (acquisition time) of the remote operation command, and sets a time corresponding to ⁇ 3 ⁇ with respect to the average value to the second It can be set as a threshold.
  • the user of this house 5 normally transmits a remote control command signal to turn on the air conditioner between 17:30 and 18:30, and also remotely unlocks the electronic lock. It means that it is normal to transmit the operation command signal between 18:30 and 19:30.
  • the setting unit 22 calculates the second threshold value and updates the threshold data 33 and table information 102 stored in the storage unit 12 .
  • step SP104 the determination unit 23 performs the following determination process in addition to the determination process of the first embodiment.
  • the determination unit 23 determines the acquisition time of the air conditioner ON remote operation command signal and the average acquisition time (18:00). is calculated, and it is determined whether or not the time difference is within the second threshold value (30 minutes).
  • the determination unit 23 determines the time difference between the acquisition time of the remote operation command signal for unlocking the electronic lock and the average acquisition time (19:00). is calculated, and it is determined whether or not the time difference is within the second threshold value (30 minutes).
  • the determination unit 23 determines that the remote operation command signal to be determined is normal when the time difference between the acquisition time of the remote operation command signal and the average acquisition time is within the second threshold. It is determined that Specifically, the determination unit 23 determines that the time difference between the acquisition time of the remote operation command signal and the occurrence time of the corresponding event is within the first threshold, and the time difference between the acquisition time of the remote operation command signal and the average acquisition time is the first threshold. If it is within two thresholds, it is determined that the remote operation command signal to be determined is normal. On the other hand, if the time difference between the acquisition time of the remote operation command signal and the average acquisition time exceeds the second threshold, it is determined that the remote operation command signal to be determined is abnormal.
  • the remote operation command signal to be determined is abnormal.
  • the determination unit 23 performs the remote operation command signal based on the acquisition time of the remote operation command signal and the second threshold information regarding the variation in the acquisition time. Determine whether the command signal is normal or abnormal. This makes it possible to further improve the accuracy of determining whether the remote operation is normal or abnormal.
  • FIG. 5 is a diagram showing a simplified overall configuration of the remote control system 1 according to the third embodiment of the present disclosure.
  • the storage unit 12 stores correlation data 34 .
  • FIG. 6 is a flow chart showing the flow of processing executed by the information processing section 11 according to the third embodiment. In the following, based on the above-described second embodiment, differences therefrom will be mainly described.
  • the setting unit 22 sets the first correlation strength and the second correlation strength based on the result of the data analysis at step SP102, and stores the correlation data 34 indicating the set contents in the storage unit 12.
  • the first correlation strength indicates the magnitude (smallness of variation) of the correlation between the acquisition time of the remote operation command signal and the occurrence time of the corresponding event in two levels of "strong” or "weak.”
  • the second correlation strength indicates the magnitude of the correlation between the acquisition time of the remote operation command signal and the variation of the acquisition time in two stages of "strong” or "weak.”
  • the first correlation strength and the second correlation strength may be divided into three or more stages.
  • the setting unit 22 sets the content of the remote operation, the content of the corresponding event, the first and second thresholds, and the second threshold.
  • Table information 103 that associates the first correlation strength and the second correlation strength is created, and the table information 103 is stored in the storage unit 12 .
  • FIG. 7 is a diagram showing an example of the table information 103.
  • FIG. A first correlation strength is set corresponding to the first threshold, and a second correlation strength is set corresponding to the second threshold.
  • the first correlation strength is "strong” corresponding to the first threshold value (1 hour) for turning on the air conditioner, and "strong” corresponding to the first threshold value (1 minute) for unlocking the electronic lock. is set.
  • a second correlation strength is set to "weak” corresponding to the second threshold (30 minutes) for turning on the air conditioner, and "strong” to corresponding to the second threshold (30 minutes) to unlocking the electronic lock.
  • the determination unit 23 determines that the time difference between the acquisition time of the remote operation command signal and the occurrence time of the corresponding event is within the first threshold value (step SP105A: NO), and the time difference between the acquisition time of the remote operation command signal and the average acquisition time. If the time difference is within the second threshold (step SP105B: NO), it is determined that the remote operation command signal to be determined is normal, and the process returns to step SP101.
  • step SP105A YES
  • step SP105B YES
  • step SP106 the output unit 24 issues an alert notification to strongly notify the user that an abnormal remote operation has been performed by highlighting. is generated and output.
  • the communication unit 13 transmits the alert notification data input from the output unit 24 to the remote control terminal 3 via the communication network 6 .
  • the communication section 44 receives the alert notification data, and the processing section 43 displays the alert notification on the display section 42 based on the data received by the communication section 44 .
  • step SP202 the output unit 24 displays a warning to normally notify the user that an abnormal remote operation has been performed. Generate and print notifications.
  • the communication unit 13 transmits the warning notification data input from the output unit 24 to the remote control terminal 3 via the communication network 6 .
  • the communication section 44 receives the warning notification data, and the processing section 43 displays the warning notification on the display section 42 based on the data received by the communication section 44 .
  • the correlation strength may be set according to the type of the device 53 to be operated. For example, for operation target devices 53 with low security importance such as air conditioners, the correlation strength is set to "weak", while for operation target devices 53 with high security importance such as front door electronic locks , the correlation strength may be set to "strong".
  • the output unit 24 outputs the first aspect including normal display.
  • An abnormality notification (warning notification in the above example) is sent.
  • the output unit 24 outputs the second mode including a highlighting indicating a higher degree of urgency than the first mode.
  • Abnormal notification (alert notification in the above example) is performed. This makes it possible to clearly notify the user of the occurrence of a truly urgent abnormality.
  • the present disclosure is particularly useful when applied to a remote control system that allows remote control of IoT devices in the home from a control terminal such as a smartphone.
  • anomaly detection server 11 information processing unit 12 storage unit 21 acquisition unit 22 setting unit 23 determination unit 24 output unit 31 remote operation data 32 event data 33 threshold data 34 correlation data

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Abstract

情報処理装置は、機器を遠隔操作するための遠隔操作情報を取得し、前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報を取得し、前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定し、前記遠隔操作が異常であると判定した場合に異常通知を出力する。

Description

異常判定方法、情報処理装置、及びプログラム
　本開示は、異常判定方法、情報処理装置、及びプログラムに関する。
　特許文献１には、異常状態判定部を備える機器制御システムが開示されている。異常状態判定部は、制御装置の動作モードが遠隔操作モードであると判定した場合には、当該動作モードが遠隔操作モードではないと判定した場合に比べて、異常判定閾値の大きさを小さくする。
　しかし、特許文献１では、遠隔操作情報とイベント情報とに基づいて遠隔操作が正常であるか異常であるかを判定することについては、何ら考慮されていない。
特開２０１９－９６８５号公報
　本開示は、遠隔操作情報とイベント情報とに基づいて遠隔操作が正常であるか異常であるかを高精度に判定することが可能な、異常判定方法、情報処理装置、及びプログラムを得ることを目的とする。
　本開示の一態様に係る異常判定方法は、情報処理装置が、機器を遠隔操作するための遠隔操作情報を取得し、前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報を取得し、前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定し、前記遠隔操作が異常であると判定した場合に異常通知を出力する。
遠隔操作システムの全体構成を簡略化して示す図である。 情報処理部が実行する処理の流れを示すフローチャートである。 テーブル情報の一例を示す図である。 テーブル情報の一例を示す図である。 遠隔操作システムの全体構成を簡略化して示す図である。 情報処理部が実行する処理の流れを示すフローチャートである。 テーブル情報の一例を示す図である。
　（本開示の基礎となった知見）
　ＩｏＴ技術の普及に伴い、ユーザは、家電等の様々な機器を通信ネットワークに接続し、スマートフォン等の操作端末から通信ネットワークを介して機器を遠隔操作できるようになった。
　この便利さの一方で、遠隔操作システムには、第三者のハッキングによって機器が不正操作されるという不安がユーザにつきまとう。そのため、ユーザに安心感を与えて遠隔操作システムを普及させるためには、異常な遠隔操作を高精度に検出することが可能な仕組みの構築が重要である。
　特許文献１に開示された機器制御システムにおいて、異常状態判定部は、制御装置の動作モードが遠隔操作モードであると判定した場合には、当該動作モードが遠隔操作モードではないと判定した場合に比べて、異常判定閾値の大きさを小さくする。しかし、当該機器制御システムでは、遠隔操作情報とイベント情報とに基づいて遠隔操作が正常であるか異常であるかを判定することについては何ら考慮されておらず、判定精度が十分ではないため、判定精度のさらなる向上が望まれる。
　かかる課題を解決するために、本発明者は、遠隔操作情報とそれに対応付けられたイベント情報とを用いることにより、遠隔操作が正常であるか異常であるかを高精度に判定できるとの知見を得て、本開示を想到するに至った。
　次に、本開示の各態様について説明する。
　本開示の第１態様に係る異常判定方法は、情報処理装置が、機器を遠隔操作するための遠隔操作情報を取得し、前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報を取得し、前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定し、前記遠隔操作が異常であると判定した場合に異常通知を出力する。
　第１態様によれば、情報処理装置は、遠隔操作とイベントとの関連性を示す関連性情報と、取得した遠隔操作情報及びイベント情報とに基づいて、遠隔操作が正常であるか異常であるかを判定する。これにより、遠隔操作が正常であるか異常であるかを高精度に判定することが可能となる。
　本開示の第２態様に係る異常判定方法は、第１態様において、前記関連性情報は、前記遠隔操作情報の取得時刻と前記イベントの発生時刻との時間差に関する第１閾値情報を含んでも良い。
　第２態様によれば、関連性情報が遠隔操作情報の取得時刻とイベントの発生時刻との時間差に関する第１閾値情報を含むことにより、遠隔操作が正常であるか異常であるかの判定精度を向上することが可能となる。
　本開示の第３態様に係る異常判定方法は、第２態様において、前記遠隔操作情報の取得時刻と前記イベントの発生時刻との相関強度に応じて、前記異常通知の内容を異ならせても良い。
　第３態様によれば、相関強度に応じて異常通知の内容を異ならせることにより、真に緊急性の高い異常の発生をユーザに明確に報知することが可能となる。
　本開示の第４態様に係る異常判定方法は、第１又は第２態様において、さらに、前記遠隔操作情報の取得時刻と、当該取得時刻のばらつきに関する第２閾値情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定しても良い。
　第４態様によれば、情報処理装置は、遠隔操作情報の取得時刻と、当該取得時刻のばらつきに関する第２閾値情報とに基づいて、遠隔操作が正常であるか異常であるかを判定する。これにより、遠隔操作が正常であるか異常であるかの判定精度をさらに向上することが可能となる。
　本開示の第５態様に係る異常判定方法は、第４態様において、前記遠隔操作情報の取得時刻と、当該取得時刻のばらつきとの相関強度に応じて、前記異常通知の内容を異ならせても良い。
　第５態様によれば、相関強度に応じて異常通知の内容を異ならせることにより、真に緊急性の高い異常の発生をユーザに明確に報知することが可能となる。
　本開示の第６態様に係る異常判定方法は、第１～第５態様のいずれか一つにおいて、さらに、前記遠隔操作が異常であると判定した場合に、前記遠隔操作を中止するか否かをユーザに確認するための確認通知を出力しても良い。
　第６態様によれば、情報処理装置が確認通知を出力することにより、ユーザは、異常な遠隔操作を中止するための中止操作を実行することができる。
　本開示の第７態様に係る異常判定方法は、第１～第５態様のいずれか一つにおいて、さらに、前記遠隔操作が異常であると判定した場合に、前記遠隔操作を中止させるための制御命令を出力しても良い。
　第７態様によれば、情報処理装置が制御命令を出力することにより、ユーザの中止操作によらずに、異常な遠隔操作を中止させることができる。
　本開示の第８態様に係る情報処理装置は、機器を遠隔操作するための遠隔操作情報と、前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報とを取得する取得部と、前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定する判定部と、前記遠隔操作が異常であると判定した場合に異常通知を出力する出力部と、を備える。
　第８態様によれば、判定部は、遠隔操作とイベントとの関連性を示す関連性情報と、取得した遠隔操作情報及びイベント情報とに基づいて、遠隔操作が正常であるか異常であるかを判定する。これにより、遠隔操作が正常であるか異常であるかを高精度に判定することが可能となる。
　本開示の第９態様に係るプログラムは、情報処理装置を、機器を遠隔操作するための遠隔操作情報と、前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報とを取得する取得手段と、前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定する判定手段と、前記遠隔操作が異常であると判定した場合に異常通知を出力する出力手段と、として機能させる。
　第９態様によれば、判定手段は、遠隔操作とイベントとの関連性を示す関連性情報と、取得した遠隔操作情報及びイベント情報とに基づいて、遠隔操作が正常であるか異常であるかを判定する。これにより、遠隔操作が正常であるか異常であるかを高精度に判定することが可能となる。
　本開示は、このような方法又は装置に含まれる特徴的な各構成をコンピュータに実行させるプログラム、或いはこのプログラムによって動作するシステムとして実現することもできる。また、このようなコンピュータプログラムを、ＣＤ－ＲＯＭ等のコンピュータ読取可能な非一時的な記録媒体あるいはインターネット等の通信ネットワークを介して流通させることができるのは、言うまでもない。
　（本開示の実施形態）
　以下、図面を参照しながら、本開示の実施形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明、又は、実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が必要以上に冗長になるのを避け、当業者の理解を容易にするためである。
　なお、添付図面及び以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することを意図していない。
　（第１実施形態）
　図１は、本開示の第１実施形態に係る遠隔操作システム１の全体構成を簡略化して示す図である。遠隔操作システム１は、異常検出サーバ２、遠隔操作端末３、遠隔制御サーバ４、通信装置５１、検出装置５２、及び操作対象機器５３を備えている。操作対象機器５３は、遠隔操作端末３によって遠隔操作される対象の機器である。通信装置５１、検出装置５２、及び操作対象機器５３は、例えばユーザが居住する住宅５内に設置されている。異常検出サーバ２、遠隔操作端末３、遠隔制御サーバ４、及び通信装置５１は、通信ネットワーク６を介して相互に通信可能である。通信ネットワーク６は、ＩＰ等の任意の通信方式に対応した専用又は汎用の任意の回線網である。
　異常検出サーバ２は、情報処理部１１、記憶部１２、及び通信部１３を備えている。情報処理部１１は、ＣＰＵ等を用いて構成されている。記憶部１２は、ＨＤＤ、ＳＳＤ、又はフラッシュメモリ等を用いて構成されている。通信部１３は、通信ネットワーク６の通信方式に対応した通信モジュール等を用いて構成されている。情報処理部１１は、所定のプログラムをＣＰＵが実行することによって実現される機能として、取得部２１、設定部２２、判定部２３、及び出力部２４を有している。記憶部１２には、遠隔操作データ３１、イベントデータ３２、閾値データ３３、及びテーブル情報１０１が記憶されている。これらのデータ及び情報の詳細については後述する。取得部２１は、操作対象機器５３を遠隔操作するための遠隔操作情報としての遠隔操作命令信号を、遠隔操作端末３から通信ネットワーク６及び通信部１３を介して取得する。また、取得部２１は、イベントの発生を示すイベント情報としてのイベント検出信号を、検出装置５２から通信装置５１、通信ネットワーク６、及び通信部１３を介して取得する。また、取得部２１は、記憶部１２にデータベースとして蓄積されている遠隔操作データ３１及びイベントデータ３２を、記憶部１２から読み出すことによって取得する。設定部２２は、取得部２１が取得した遠隔操作データ３１及びイベントデータ３２に関して統計的なデータ分析を行う。また、設定部２２は、データ分析の結果に基づいて第１閾値を設定し、当該第１閾値を示す閾値データ３３を記憶部１２に記憶する。さらに、設定部２２は、遠隔操作データ３１、イベントデータ３２、及び閾値データ３３に基づいて、遠隔操作の内容と対応イベントの内容と第１閾値とを関連付けることによってテーブル情報１０１を作成する。設定部２２は、作成したテーブル情報１０１を記憶部１２に記憶する。判定部２３は、判定対象の遠隔操作命令信号が正常であるか異常であるかの判定を行う。出力部２４は、遠隔操作命令信号が異常であると判定された場合に、アラート通知を生成して出力する。
　遠隔操作端末３は、例えば、住宅５の居住者であるユーザが所持するスマートフォンである。遠隔操作端末３は、入力部４１、表示部４２、処理部４３、及び通信部４４を備えている。入力部４１及び表示部４２は、例えば、液晶又は有機ＥＬ等を用いたタッチパネルディスプレイを用いて構成されている。処理部４３は、ＣＰＵ等を用いて構成されている。通信部４４は、通信ネットワーク６の通信方式に対応した通信モジュール等を用いて構成されている。
　住宅５には、通信装置５１、検出装置５２、及び操作対象機器５３が設置されている。通信装置５１は、例えば、住宅５の外部の通信ネットワーク６と、住宅５の内部の無線ＬＡＮ等の通信ネットワークとを接続するためのゲートウェイ装置を用いて構成されている。検出装置５２は、住宅５内における所定のイベントの発生を検出するためのセンサである。所定のイベントとは、ユーザの行動に関する行事又は催しを示し、例えば、出宅、帰宅、塾の送迎、家族での外食、習い事、又は学校行事等が含まれる。例えば、所定のイベントがユーザの出宅又は帰宅である場合には、検出装置５２は住宅５の玄関に設置された人感センサ又は玄関ドアの開閉センサ等である。操作対象機器５３は、住宅５の外部からの遠隔操作の対象となるＩｏＴ機器等であり、例えば、エアコン、玄関ドアの電子錠、又はブルーレイレコーダである。
　遠隔制御サーバ４は、遠隔操作端末３から送信された遠隔操作命令信号を受信し、当該遠隔操作命令信号に基づいて、操作対象機器５３の動作を制御するための制御信号を生成して送信する。当該制御信号が通信装置５１を介して操作対象機器５３に入力されることにより、操作対象機器５３が遠隔操作される。
　図２は、異常検出サーバ２の情報処理部１１が実行する処理の流れを示すフローチャートである。
　ユーザが遠隔操作端末３の入力部４１から操作対象機器５３の遠隔操作命令を入力すると、処理部４３は、遠隔操作命令信号を、通信部４４から通信ネットワーク６を介して遠隔制御サーバ４及び異常検出サーバ２に送信する。異常検出サーバ２の通信部１３は、当該遠隔操作命令信号を受信する。ステップＳＰ１０１において、取得部２１は、通信部１３が受信した遠隔操作命令信号を通信部１３から取得する。また、情報処理部１１は、通信部１３が受信した遠隔操作命令信号を記憶部１２に記憶する。当該遠隔操作命令信号は、データベースである遠隔操作データ３１の１レコードとして記憶部１２に記憶される。また、検出装置５２が住宅５内における所定のイベントの発生を検出すると、当該イベントに関するイベント検出信号が、通信装置５１から通信ネットワーク６を介して異常検出サーバ２に送信される。異常検出サーバ２の通信部１３は、当該イベント検出信号を受信する。ステップＳＰ１０１において、取得部２１は、通信部１３が受信したイベント検出信号を通信部１３から取得する。また、情報処理部１１は、通信部１３が受信したイベント検出信号を記憶部１２に記憶する。当該イベント検出信号は、データベースであるイベントデータ３２の１レコードとして記憶部１２に記憶される。通信部１３が遠隔操作命令信号及びイベント検出信号を受信する度に、当該遠隔操作命令信号及び当該イベント検出信号は記憶部１２に記憶される。これにより、複数の遠隔操作命令信号に対応する複数のレコードを含むデータベースとしての遠隔操作データ３１、及び、複数のイベント検出信号に対応する複数のレコードを含むデータベースとしてのイベントデータ３２が、記憶部１２に蓄積される。
　ステップＳＰ１０２において、取得部２１は、記憶部１２に蓄積されている遠隔操作データ３１及びイベントデータ３２を取得する。設定部２２は、取得した遠隔操作データ３１及びイベントデータ３２に関して統計的なデータ分析を行う。
　ステップＳＰ１０３において、設定部２２は、ステップＳＰ１０２におけるデータ分析の結果に基づいて第１閾値を設定し、当該第１閾値を示す閾値データ３３を記憶部１２に記憶する。また、設定部２２は、遠隔操作データ３１、イベントデータ３２、及び閾値データ３３に基づいて、遠隔操作の内容と対応イベントの内容と第１閾値とを関連付けることによってテーブル情報１０１を作成し、当該テーブル情報１０１を記憶部１２に記憶する。
　図３は、テーブル情報１０１の一例を示す図である。この例では、操作対象機器５３であるエアコンに対する「エアコンＯＮ」という遠隔操作に関して、ユーザが住宅５に帰宅するというイベントが対応付けられており、エアコンＯＮと帰宅との時間差に関する第１閾値として「１時間」が設定されている。また、操作対象機器５３である玄関ドアの電子錠に対する「電子錠解錠」という遠隔操作に関して、ユーザが住宅５に帰宅するというイベントが対応付けられており、電子錠解錠と帰宅との時間差に関する第１閾値として「１分」が設定されている。これらの第１閾値は、遠隔操作と対応イベントとの関連性を示す関連性情報に相当する。設定部２２は、例えば、遠隔操作命令信号の受信時刻（取得時刻）と、対応イベントに関するイベント検出信号の受信時刻（イベントの発生時刻）との時間差に関する多数のサンプルに基づいて、当該時間差の平均値及び標準偏差σを算出し、時間差の平均値に対して例えば＋３σに相当する時間を加算した時間を、第１閾値として設定することができる。但し、＋３σは一例であり、＋２σ又は＋１σ等であっても良い。このことは、後述する第２閾値に関しても同様である。図３に示した例では、エアコンＯＮの遠隔操作に対して第１閾値は１時間に設定されており、電子錠解錠の遠隔操作に対して第１閾値は１分に設定されている。つまり図３に示した例では、この住宅５のユーザは、エアコンＯＮの遠隔操作命令信号を送信してから１時間以内に帰宅することが通常であり、また、電子錠解錠の遠隔操作命令信号を送信してから１分以内に帰宅することが通常である、ということである。通信部１３が遠隔操作命令信号及びイベント検出信号を受信する毎に、設定部２２は第１閾値を算出して、記憶部１２に記憶されている閾値データ３３及びテーブル情報１０１の内容を更新する。
　ステップＳＰ１０４において、判定部２３は、判定対象の遠隔操作命令信号が正常であるか異常であるかの判定を行う。図３に示した例において、判定対象の遠隔操作命令信号がエアコンＯＮである場合には、判定部２３は、エアコンＯＮの遠隔操作命令信号の受信時刻（取得時刻）と、その後のユーザの帰宅イベントに関するイベント検出信号の受信時刻（発生時刻）との時間差を算出し、その時間差が第１閾値（図３の例では１時間）以内であるか否かを判定する。また、判定対象の遠隔操作命令信号が電子錠解錠である場合には、判定部２３は、電子錠解錠の遠隔操作命令信号の受信時刻（取得時刻）と、その後のユーザの帰宅イベントに関するイベント検出信号の受信時刻（発生時刻）との時間差を算出し、その時間差が第１閾値（図３の例では１分）以内であるか否かを判定する。
　時間差が第１閾値以内である場合（ステップＳＰ１０５：ＮＯ）は、判定対象の遠隔操作命令信号は正常なものであるとして、ステップＳＰ１０１に戻る。
　時間差が第１閾値を超える場合（ステップＳＰ１０５：ＹＥＳ）は、判定対象の遠隔操作命令信号は異常なものであるとして、次にステップＳＰ１０６において、出力部２４は、異常な遠隔操作が実行されたことをユーザに報知するための文字又は図形等のアラート通知を生成して出力する。通信部１３は、出力部２４から入力されたアラート通知のデータを、通信ネットワーク６を介して遠隔操作端末３に送信する。遠隔操作端末３において、通信部４４はアラート通知のデータを受信し、処理部４３は、通信部４４が受信したデータに基づいて、アラート通知を表示部４２に表示する。
　次にステップＳＰ１０７において、出力部２４は、異常な遠隔操作をキャンセル（中止）するか否かをユーザに確認するための文字又は図形等のキャンセル確認通知を生成して出力する。通信部１３は、出力部２４から入力されたキャンセル確認通知のデータを、通信ネットワーク６を介して遠隔操作端末３に送信する。遠隔操作端末３において、通信部４４はキャンセル確認通知のデータを受信し、処理部４３は、通信部４４が受信したデータに基づいて、キャンセル確認通知を表示部４２に表示する。
　ユーザが遠隔操作端末３の入力部４１から遠隔操作の中止命令を入力すると、処理部４３は、中止命令信号を、通信部４４から通信ネットワーク６を介して遠隔制御サーバ４に送信する。遠隔制御サーバ４は、遠隔操作端末３から送信された中止命令信号を受信し、当該中止命令信号に基づいて、操作対象機器５３の遠隔操作を中止するための制御信号を生成して送信する。当該制御信号が通信装置５１を介して操作対象機器５３に入力されることにより、操作対象機器５３の遠隔操作が中止される。
　なお、ステップＳＰ１０６のアラート通知及びステップＳＰ１０７のキャンセル確認通知は、文字又は画像等として表示部４２に表示される態様に代えて、音声メッセージとして遠隔操作端末３のスピーカから出力されても良い。
　また、ステップＳＰ１０６のアラート通知及びステップＳＰ１０７のキャンセル確認通知は、別々のステップではなく単一のステップとして同時に実行されても良い。
　また、ステップＳＰ１０７のキャンセル確認通知は、異常な遠隔操作を中止するか否かについてユーザの返答入力を要求する要求信号であっても良い。キャンセルボタンのタップ操作等によって遠隔操作を中止する旨の返答が入力部４１から入力された場合に、その返答信号が遠隔操作端末３から異常検出サーバ２に送信され、異常検出サーバ２から遠隔制御サーバ４に遠隔操作の中止制御命令が送信されても良い。ここで、遠隔操作が異常であると判定部２３が判定した場合には、ユーザからの返答入力を省略して、異常検出サーバ２から遠隔制御サーバ４に直ちに遠隔操作の中止制御命令を送信しても良い。
　また、ユーザからの返答入力を要求するか、返答入力を省略して直ちに中止制御命令を送信するかを、遠隔操作の種別に応じて個別に設定しても良い。例えば、エアコンＯＮ等のセキュリティ上の重要性が低い遠隔操作に関しては、ユーザからの返答入力を要求し、一方、電子錠解錠等のセキュリティ上の重要性が高い遠隔操作に関しては、直ちに中止制御命令を送信しても良い。
　さらに、対応イベントがユーザの出宅又は帰宅等である場合には、判定部２３は、住宅５の玄関に設置したカメラによる撮影映像を解析することによって、又は、ユーザが所持するスマートフォンから受信するビーコン情報を照合すること等によって、出宅又は帰宅したユーザが既登録の正規ユーザであるか否かを判定しても良い。判定部２３は、正規ユーザによるイベントではない場合は、イベントが発生したものとして扱わなくても良い。
　本実施形態によれば、異常検出サーバ２（情報処理装置）は、遠隔操作と対応イベントとの関連性を示す第１閾値（関連性情報）と、取得部２１が取得した遠隔操作命令信号（遠隔操作情報）及びイベント検出信号（イベント情報）とに基づいて、判定対象の遠隔操作が正常であるか異常であるかを判定する。これにより、遠隔操作が正常であるか異常であるかを高精度に判定することが可能となる。
　また、本実施形態によれば、関連性情報が遠隔操作命令信号の取得時刻とイベントの発生時刻との時間差に関する閾値データ３３（第１閾値情報）を含むことにより、遠隔操作が正常であるか異常であるかの判定精度を向上することが可能となる。
　また、本実施形態によれば、異常検出サーバ２がキャンセル確認通知を出力することにより、ユーザは、異常な遠隔操作を中止するための中止操作を実行することができる。
　また、本実施形態によれば、異常検出サーバ２が中止制御命令を出力することにより、ユーザの中止操作によらずに、異常な遠隔操作を直ちに中止させることができる。
　（第２実施形態）
　上記第１実施形態では、判定部２３は、遠隔操作命令信号の取得時刻と対応イベントの発生時刻との時間差が第１閾値以内であるか否かを判定したが、これに加えて、遠隔操作命令信号の取得時刻が当該取得時刻のばらつきに関する第２閾値以内であるか否かを判定しても良い。但し、第１閾値を省略して第２閾値のみに基づいて遠隔操作の正常又は異常を判定しても良い。
　図４は、テーブル情報１０２の一例を示す図である。本実施形態では、図１に示したテーブル情報１０１に代えてテーブル情報１０２が記憶部１２に記憶される。図４に示した例では、図３に示した項目に加えて、エアコンＯＮの平均取得時刻として時刻「１８：００」が設定されており、その平均取得時刻との時間差に関する第２閾値として「３０分」が設定されている。また、電子錠解錠の平均取得時刻として時刻「１９：００」が設定されており、その平均取得時刻との時間差に関する第２閾値として「３０分」が設定されている。本実施形態では、第１閾値及び第２閾値を示す閾値データ３３が、記憶部１２に記憶される。
　第２閾値は、遠隔操作情報の取得時刻のばらつきの許容最大値を示す。設定部２２は、例えば、遠隔操作命令の受信時刻（取得時刻）に関する多数のサンプルに基づいて平均値及び標準偏差σを算出し、平均値に対して例えば±３σに相当する時間を、第２閾値として設定することができる。つまり図４に示した例では、この住宅５のユーザは、エアコンＯＮの遠隔操作命令信号を１７：３０～１８：３０の間に送信することが通常であり、また、電子錠解錠の遠隔操作命令信号を１８：３０～１９：３０の間に送信することが通常である、ということである。通信部１３が遠隔操作命令信号を受信する毎に、設定部２２は第２閾値を算出して、記憶部１２に記憶されている閾値データ３３及びテーブル情報１０２の内容を更新する。
　ステップＳＰ１０４において判定部２３は、上記第１実施形態の判定処理に加えて以下の判定処理を行う。図４に示した例において、判定対象の遠隔操作命令信号がエアコンＯＮである場合には、判定部２３は、エアコンＯＮの遠隔操作命令信号の取得時刻と、平均取得時刻（１８：００）との時間差を算出し、その時間差が第２閾値（３０分）以内であるか否かを判定する。また、判定対象の遠隔操作命令信号が電子錠解錠である場合には、判定部２３は、電子錠解錠の遠隔操作命令信号の取得時刻と、平均取得時刻（１９：００）との時間差を算出し、その時間差が第２閾値（３０分）以内であるか否かを判定する。
　判定部２３は、上記第１実施形態の判定処理に加えて、遠隔操作命令信号の取得時刻と平均取得時刻との時間差が第２閾値以内である場合は、判定対象の遠隔操作命令信号は正常であると判定する。具体的に判定部２３は、遠隔操作命令信号の取得時刻と対応イベントの発生時刻との時間差が第１閾値以内であり、かつ、遠隔操作命令信号の取得時刻と平均取得時刻との時間差が第２閾値以内である場合は、判定対象の遠隔操作命令信号は正常であると判定する。一方、遠隔操作命令信号の取得時刻と平均取得時刻との時間差が第２閾値を超える場合は、判定対象の遠隔操作命令信号は異常であると判定する。具体的に判定部２３は、遠隔操作命令信号の取得時刻と対応イベントの発生時刻との時間差が第１閾値を超えている場合、又は、遠隔操作命令信号の取得時刻と平均取得時刻との時間差が第２閾値を超えている場合は、判定対象の遠隔操作命令信号は異常であると判定する。
　本実施形態によれば、判定部２３は、上記第１実施形態の判定処理に加えて、遠隔操作命令信号の取得時刻と、当該取得時刻のばらつきに関する第２閾値情報とに基づいて、遠隔操作命令信号が正常であるか異常であるかを判定する。これにより、遠隔操作が正常であるか異常であるかの判定精度をさらに向上することが可能となる。
　（第３実施形態）
　情報処理部１１は、遠隔操作命令信号の取得時刻とイベントの発生時刻との相関強度に応じて、又は、遠隔操作命令信号の取得時刻と当該取得時刻のばらつきとの相関強度に応じて、異常通知の内容を異ならせても良い。図５は、本開示の第３実施形態に係る遠隔操作システム１の全体構成を簡略化して示す図である。上記第１実施形態又は第２実施形態に加えて、記憶部１２には相関データ３４が記憶されている。
　図６は、第３実施形態に係る情報処理部１１が実行する処理の流れを示すフローチャートである。以下、上記第２実施形態を基礎として、それとの相違点を中心に説明する。
　ステップＳＰ１０３において、設定部２２は、ステップＳＰ１０２におけるデータ分析の結果に基づいて第１相関強度及び第２相関強度を設定し、その設定内容を示す相関データ３４を記憶部１２に記憶する。第１相関強度は、遠隔操作命令信号の取得時刻と対応イベントの発生時刻との相関の大きさ（ばらつきの小ささ）を、「強」又は「弱」の２段階で表す。第２相関強度は、遠隔操作命令信号の取得時刻と当該取得時刻のばらつきとの相関の大きさを、「強」又は「弱」の２段階で表す。但し、第１相関強度及び第２相関強度は３段階以上に区分されていても良い。また、設定部２２は、遠隔操作データ３１、イベントデータ３２、閾値データ３３、及び相関データ３４に基づいて、遠隔操作の内容と、対応イベントの内容と、第１閾値及び第２閾値と、第１相関強度及び第２相関強度とを関連付けるテーブル情報１０３を作成し、当該テーブル情報１０３を記憶部１２に記憶する。
　図７は、テーブル情報１０３の一例を示す図である。第１閾値に対応して第１相関強度が設定されており、第２閾値に対応して第２相関強度が設定されている。図７に示した例では、エアコンＯＮに対する第１閾値（１時間）に対応して「強」、電子錠解錠に対する第１閾値（１分）に対応して「強」なる第１相関強度が設定されている。また、エアコンＯＮに対する第２閾値（３０分）に対応して「弱」、電子錠解錠に対する第２閾値（３０分）に対応して「強」なる第２相関強度が設定されている。
　判定部２３は、遠隔操作命令信号の取得時刻と対応イベントの発生時刻との時間差が第１閾値以内であり（ステップＳＰ１０５Ａ：ＮＯ）、かつ、遠隔操作命令信号の取得時刻と平均取得時刻との時間差が第２閾値以内である（ステップＳＰ１０５Ｂ：ＮＯ）場合は、判定対象の遠隔操作命令信号は正常であると判定して、ステップＳＰ１０１に戻る。一方、遠隔操作命令信号の取得時刻と対応イベントの発生時刻との時間差が第１閾値を超えて逸脱する場合（ステップＳＰ１０５Ａ：ＹＥＳ）、又は、遠隔操作命令信号の取得時刻と平均取得時刻との時間差が第２閾値を超えて逸脱する場合（ステップＳＰ１０５Ｂ：ＹＥＳ）は、次にステップＳＰ２０１において、判定部２３は、逸脱する閾値に対応して設定されている相関強度が「強」であるか「弱」であるかを判定する。
　相関強度が「強」である場合（ステップＳＰ２０１：ＹＥＳ）は、次にステップＳＰ１０６において、出力部２４は、異常な遠隔操作が実行されたことを強調表示によってユーザに強く報知するためのアラート通知を生成して出力する。通信部１３は、出力部２４から入力されたアラート通知のデータを、通信ネットワーク６を介して遠隔操作端末３に送信する。遠隔操作端末３において、通信部４４はアラート通知のデータを受信し、処理部４３は、通信部４４が受信したデータに基づいて、アラート通知を表示部４２に表示する。
　相関強度が「弱」である場合（ステップＳＰ２０１：ＮＯ）は、次にステップＳＰ２０２において、出力部２４は、異常な遠隔操作が実行されたことを通常表示によってユーザに通常に報知するためのワーニング通知を生成して出力する。通信部１３は、出力部２４から入力されたワーニング通知のデータを、通信ネットワーク６を介して遠隔操作端末３に送信する。遠隔操作端末３において、通信部４４はワーニング通知のデータを受信し、処理部４３は、通信部４４が受信したデータに基づいて、ワーニング通知を表示部４２に表示する。
　なお、操作対象機器５３の種別に応じて相関強度を設定しても良い。例えば、エアコン等のセキュリティ上の重要性が低い操作対象機器５３に関しては相関強度を「弱」に設定し、一方、玄関ドアの電子錠等のセキュリティ上の重要性が高い操作対象機器５３に関しては、相関強度を「強」に設定しても良い。
　本実施形態によれば、相関強度に応じて異常通知の内容を異ならせることにより、真に緊急性の高い異常の発生をユーザに明確に報知することが可能となる。
　相関強度に応じて異常通知の内容を異ならせる例として、相関強度が閾値未満である場合（上記例における「弱」である場合）には、出力部２４は、通常表示を含む第１態様の異常通知（上記例におけるワーニング通知）を行う。一方、相関強度が当該閾値以上である場合（上記例における「強」である場合）には、出力部２４は、上記第１態様よりも高い緊急性を示唆する強調表示を含む第２態様の異常通知（上記例におけるアラート通知）を行う。これにより、真に緊急性の高い異常の発生をユーザに明確に報知することが可能となる。
　本開示は、スマートフォン等の操作端末から宅内のＩｏＴ機器等を遠隔操作することが可能な遠隔操作システムへの適用が特に有用である。
　２　異常検出サーバ
　１１　情報処理部
　１２　記憶部
　２１　取得部
　２２　設定部
　２３　判定部
　２４　出力部
　３１　遠隔操作データ
　３２　イベントデータ
　３３　閾値データ
　３４　相関データ

Claims (9)

  1. 　情報処理装置が、
    　機器を遠隔操作するための遠隔操作情報を取得し、
    　前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報を取得し、
    　前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定し、
    　前記遠隔操作が異常であると判定した場合に異常通知を出力する、
    異常判定方法。
  2. 　前記関連性情報は、前記遠隔操作情報の取得時刻と前記イベントの発生時刻との時間差に関する第１閾値情報を含む、請求項１に記載の異常判定方法。
  3. 　前記遠隔操作情報の取得時刻と前記イベントの発生時刻との相関強度に応じて、前記異常通知の内容を異ならせる、請求項２に記載の異常判定方法。
  4. 　さらに、前記遠隔操作情報の取得時刻と、当該取得時刻のばらつきに関する第２閾値情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定する、請求項１に記載の異常判定方法。
  5. 　前記遠隔操作情報の取得時刻と、当該取得時刻のばらつきとの相関強度に応じて、前記異常通知の内容を異ならせる、請求項４に記載の異常判定方法。
  6. 　さらに、前記遠隔操作が異常であると判定した場合に、前記遠隔操作を中止するか否かをユーザに確認するための確認通知を出力する、請求項１～５のいずれか一つに記載の異常判定方法。
  7. 　さらに、前記遠隔操作が異常であると判定した場合に、前記遠隔操作を中止させるための制御命令を出力する、請求項１～５のいずれか一つに記載の異常判定方法。
  8. 　機器を遠隔操作するための遠隔操作情報と、前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報とを取得する取得部と、
    　前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定する判定部と、
    　前記遠隔操作が異常であると判定した場合に異常通知を出力する出力部と、
    を備える、情報処理装置。
  9. 　情報処理装置を、
    　機器を遠隔操作するための遠隔操作情報と、前記遠隔操作に対応付けられた、ユーザの行動に関する所定のイベントの発生を示すイベント情報とを取得する取得手段と、
    　前記遠隔操作と前記イベントとの関連性を示す関連性情報と、取得した前記遠隔操作情報及び前記イベント情報とに基づいて、前記遠隔操作が正常であるか異常であるかを判定する判定手段と、
    　前記遠隔操作が異常であると判定した場合に異常通知を出力する出力手段と、
    として機能させるためのプログラム。
PCT/JP2022/028780 2021-08-27 2022-07-26 異常判定方法、情報処理装置、及びプログラム WO2023026746A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202280058160.4A CN117882366A (zh) 2021-08-27 2022-07-26 异常判定方法、信息处理装置以及程序
JP2023543755A JPWO2023026746A1 (ja) 2021-08-27 2022-07-26
US18/585,631 US20240195654A1 (en) 2021-08-27 2024-02-23 Abnormality determination method, information processing device, and computer-readable recording medium recording a program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021-138914 2021-08-27
JP2021138914 2021-08-27

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/585,631 Continuation US20240195654A1 (en) 2021-08-27 2024-02-23 Abnormality determination method, information processing device, and computer-readable recording medium recording a program

Publications (1)

Publication Number Publication Date
WO2023026746A1 true WO2023026746A1 (ja) 2023-03-02

Family

ID=85323070

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/028780 WO2023026746A1 (ja) 2021-08-27 2022-07-26 異常判定方法、情報処理装置、及びプログラム

Country Status (4)

Country Link
US (1) US20240195654A1 (ja)
JP (1) JPWO2023026746A1 (ja)
CN (1) CN117882366A (ja)
WO (1) WO2023026746A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006203516A (ja) * 2005-01-20 2006-08-03 Toshiba Corp 家電機器制御システム
JP2007074058A (ja) * 2005-09-05 2007-03-22 Matsushita Electric Ind Co Ltd 遠隔制御装置
JP2010288231A (ja) * 2009-06-15 2010-12-24 Nippon Telegr & Teleph Corp <Ntt> 家電遠隔制御システムおよび家電遠隔制御方法
JP2016015544A (ja) * 2014-06-30 2016-01-28 シャープ株式会社 遠隔操作システム、及び専用操作器

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006203516A (ja) * 2005-01-20 2006-08-03 Toshiba Corp 家電機器制御システム
JP2007074058A (ja) * 2005-09-05 2007-03-22 Matsushita Electric Ind Co Ltd 遠隔制御装置
JP2010288231A (ja) * 2009-06-15 2010-12-24 Nippon Telegr & Teleph Corp <Ntt> 家電遠隔制御システムおよび家電遠隔制御方法
JP2016015544A (ja) * 2014-06-30 2016-01-28 シャープ株式会社 遠隔操作システム、及び専用操作器

Also Published As

Publication number Publication date
CN117882366A (zh) 2024-04-12
JPWO2023026746A1 (ja) 2023-03-02
US20240195654A1 (en) 2024-06-13

Similar Documents

Publication Publication Date Title
US11798396B2 (en) Interface for security system
US20210382984A1 (en) Automatic password reset using a security system
US10619380B2 (en) Wireless electronic lock system and method
US11908257B2 (en) Premises access system
US10217090B2 (en) Methods for providing notifications for follow-up actions in response to events detected by an automation system, and systems and devices related thereto
CN103680083B (zh) 事件通知
US8749375B2 (en) Hands-free home automation application
US10991218B2 (en) Sharing video stream during an alarm event
KR101814544B1 (ko) 보안 시스템의 원격 관리 방법 및 시스템
CN105323144A (zh) 即时通讯中消息异常提示方法和系统
US11447977B2 (en) Monitoring access
US20170175419A1 (en) Smart Door Lock System And Method Thereof
US20170063841A1 (en) Trusting intermediate certificate authorities
US20230290236A1 (en) Adaptation of a security control panel
CN108140299B (zh) 现场音频的历史存档及使用其的方法
JP4829799B2 (ja) セキュリティシステムのホスト装置およびセキュリティ設定方法
WO2023026746A1 (ja) 異常判定方法、情報処理装置、及びプログラム
WO2018063544A2 (en) Addressing inside-enterprise hack attempts
JP2009086947A (ja) 警備装置および警備システム
JP5248694B2 (ja) 警備装置および警備システム
US9043882B2 (en) Integration of home security into existing infrastructure
US11606694B2 (en) System that provides cybersecurity in a home or office by interacting with internet of things devices and other devices
EP3522129A1 (en) Remote-control security monitoring system and method
JP2006277394A (ja) 警備システム、警備装置及び警備方法
JP4034247B2 (ja) 防災受信機、試験方法および試験プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22861037

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2023543755

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 202280058160.4

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22861037

Country of ref document: EP

Kind code of ref document: A1