JP2015146514A - Sensor management system, sensor management method, and sensor management program - Google Patents

Sensor management system, sensor management method, and sensor management program Download PDF

Info

Publication number
JP2015146514A
JP2015146514A JP2014018608A JP2014018608A JP2015146514A JP 2015146514 A JP2015146514 A JP 2015146514A JP 2014018608 A JP2014018608 A JP 2014018608A JP 2014018608 A JP2014018608 A JP 2014018608A JP 2015146514 A JP2015146514 A JP 2015146514A
Authority
JP
Japan
Prior art keywords
sensor
user
storage unit
individual
information storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014018608A
Other languages
Japanese (ja)
Inventor
利春 竹ノ内
Toshiharu Takenouchi
利春 竹ノ内
山中 睦裕
Mutsuhiro Yamanaka
睦裕 山中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2014018608A priority Critical patent/JP2015146514A/en
Publication of JP2015146514A publication Critical patent/JP2015146514A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a sensor management system, a sensor management method, and a sensor management program which efficiently grasp the whereabouts and the state of a user in order to grasp a user's activity and perform power control corresponding to each user.SOLUTION: There is provided a management server 20 connected with plural sensors 10. A controller 21 in the management server 20 detects a person on the basis of sensor information acquired from the sensors 10 and executes recording processing of whereabouts in an individual information storage unit 25. Further, the controller 21 executes state detection processing, used device detection processing, and used amount recording processing in the individual information storage unit 25. Then, the controller 21 executes the tracking processing of a person. In the case of having determined that a user is identifiable, the controller 21 executes recording processing of user information in the individual information storage unit 25.

Description

本発明は、ユーザの所在や状態を管理するためのセンサ管理システム、センサ管理方法及びセンサ管理プログラムに関するものである。   The present invention relates to a sensor management system, a sensor management method, and a sensor management program for managing the location and state of a user.

電力管理やセキュリティ管理のために、ユーザの居場所を検知する技術が検討されている。また、発信器を携帯することなく、移動体が多数ある場合も複数の移動体を識別し、追跡する技術も検討されている(例えば、特許文献1を参照。)。この文献に記載された技術では、移動体のそれぞれについての特徴を表すデータ(形状、音、重量)と、センサから取得した移動体の画像や重量、音との相関に基づいて、移動体を識別し、識別した移動体についての位置データを特定する。   A technique for detecting a user's whereabouts is being studied for power management and security management. In addition, a technique for identifying and tracking a plurality of moving bodies even when there are a large number of moving bodies without carrying a transmitter has been studied (for example, see Patent Document 1). In the technique described in this document, based on the correlation between the data (shape, sound, weight) representing the characteristics of each mobile object and the image, weight, and sound of the mobile object acquired from the sensor, Identify and identify location data for the identified mobile.

また、快適性の向上、省エネ運転のために、人物を識別する技術も検討されている(例えば、特許文献2を参照。)。この文献に記載された技術においては、人物の位置情報を利用して人物識別を実現する。   In addition, a technique for identifying a person has been studied in order to improve comfort and save energy (see, for example, Patent Document 2). In the technique described in this document, person identification is realized using position information of a person.

特開平7−287781号公報JP-A-7-287781 特開2012−37102号公報JP 2012-37102 A

ユーザの動きに応じた快適な空間を提供するためには、ユーザの所在や状態を把握する必要がある。しかしながら、人間の存在を検知できたとしても、ユーザを特定できるとは限らない。また、すべての領域に、ユーザを特定するためのセンサを新たに設置する場合、設備投資の負担が大きくなる。   In order to provide a comfortable space according to the movement of the user, it is necessary to grasp the location and state of the user. However, even if the presence of a person can be detected, the user cannot always be specified. Moreover, when a sensor for specifying a user is newly installed in all areas, the burden of capital investment increases.

本発明は、上記問題を解決するためになされたものであり、その目的はユーザの所在や状態を効率的に把握するためのセンサ管理システム、センサ管理方法及びセンサ管理プログラムを提供することにある。   The present invention has been made to solve the above problems, and an object thereof is to provide a sensor management system, a sensor management method, and a sensor management program for efficiently grasping the location and state of a user. .

(1)上記課題を解決するためのセンサ管理システムは、空間内に設置された複数のセンサの配置を示したレイアウト情報記憶部と、前記空間内において配置されて個体を検知し、人検出情報を送信するセンサと、各ユーザの所在情報を記録する個体情報記憶部と、前記センサと通信を行なう制御部を備える。そして、前記制御部が、個体を検知するセンサから取得した人検出情報に基づいて、前記レイアウト情報記憶部を用いて所在を特定し、各個体の所在情報を、前記個体情報記憶部に、継続的に記録し、前記人検出情報に基づいてユーザを特定できた場合には、前記個体情報記憶部において継続的に記録された所在情報を、前記特定できたユーザ識別子に関連付けて記録することを特徴とする。   (1) A sensor management system for solving the above-described problems includes a layout information storage unit that indicates the arrangement of a plurality of sensors installed in a space, an individual that is arranged in the space, and detects human detection information. , A solid information storage unit that records location information of each user, and a control unit that communicates with the sensor. Then, the control unit identifies the location using the layout information storage unit based on the person detection information acquired from the sensor that detects the individual, and continues the location information of each individual in the individual information storage unit. If the user can be identified based on the person detection information, the location information continuously recorded in the individual information storage unit is recorded in association with the identified user identifier. Features.

(2)更に、上記センサ管理システムにおいて、センサから人検出情報を取得できなくなった場合、前記レイアウト情報記憶部において、最後に人検出情報を取得したセンサが設置された領域の隣接領域に移動したとして所在を推定することが好ましい。   (2) Furthermore, in the sensor management system, when it is no longer possible to acquire human detection information from the sensor, the layout information storage unit moves to an adjacent area of the area where the sensor from which human detection information was last acquired is installed. It is preferable to estimate the location as

(3)更に、上記センサ管理システムにおいて、前記センサは、前記空間内において既存の電気機器に備えられたものを含むことが好ましい。
(4)更に、上記センサ管理システムにおいて、前記制御部が、前記センサから取得した人検出情報に基づいて、前記個体の状態を検知して記録することが好ましい。
(3) Further, in the sensor management system, it is preferable that the sensor includes one provided in an existing electric device in the space.
(4) Further, in the sensor management system, it is preferable that the control unit detects and records the state of the individual based on human detection information acquired from the sensor.

(5)更に、上記センサ管理システムにおいて、前記制御部が、前記個体情報記憶部において継続的に記録された所在情報に基づいて、各ユーザの活動量を算出し、他のユーザの活動量との比較結果を出力することが好ましい。   (5) Further, in the sensor management system, the control unit calculates an activity amount of each user based on the location information continuously recorded in the individual information storage unit, It is preferable to output the comparison result.

(6)更に、上記センサ管理システムにおいて、前記制御部が、前記個体情報記憶部において継続的に記録された所在情報に基づいて、各ユーザが使用した電気機器の電力使用量を取得して前記個体情報記憶部に記録し、他のユーザの電力使用量との比較結果を出力することが好ましい。   (6) Further, in the sensor management system, the control unit obtains the power usage amount of the electric device used by each user based on the location information continuously recorded in the individual information storage unit, and It is preferable to record in the individual information storage unit and output a comparison result with the power usage of other users.

(7)更に、上記センサ管理システムにおいて、前記制御部が、前記個体情報記憶部において継続的に記録された所在情報に基づいて、前記空間内に設置された電気機器の動作を制御することが好ましい。   (7) Further, in the sensor management system, the control unit may control the operation of the electrical device installed in the space based on the location information continuously recorded in the individual information storage unit. preferable.

本発明によれば、ユーザの活動の把握や各ユーザに応じた電力制御を行なうために、ユーザの所在や状態を効率的に把握することができる。   ADVANTAGE OF THE INVENTION According to this invention, in order to grasp | ascertain a user's activity and perform power control according to each user, a user's location and state can be grasped | ascertained efficiently.

本実施形態のセンサ管理システムの構成図。The block diagram of the sensor management system of this embodiment. 本実施形態の処理手順の説明図であって、(a)は行動記録処理、(b)ユーザ特定処理の説明図。It is explanatory drawing of the process sequence of this embodiment, Comprising: (a) is an action recording process, (b) Explanatory drawing of a user specific process. 本実施形態の処理手順の説明図。Explanatory drawing of the process sequence of this embodiment. 本実施形態の処理手順の説明図。Explanatory drawing of the process sequence of this embodiment.

以下、センサ管理システムの一実施形態を、図1〜図4に従って説明する。本実施形態では、住宅内に設置された複数のセンサを用いて、ユーザの所在や行動、電力使用量の管理を行なう管理サーバ20(センサ管理システム)として説明する。   Hereinafter, an embodiment of a sensor management system will be described with reference to FIGS. This embodiment demonstrates as the management server 20 (sensor management system) which manages a user's location, action, and electric power consumption using the some sensor installed in the house.

本実施形態では、図1に示すように、管理サーバ20には、住宅内に設けられている複数のセンサ10が接続されている。これらのセンサ10は、新たに設置されたセンサや、既存の家電製品(電気機器)が備えているセンサを用いることができる。そして、各センサ10は、管理サーバ20にセンサ情報を送信する。新たに設置されたセンサ10としては、例えば、人感センサ、カメラ(画像センサ)やマイク(集音センサ)を用いることができる。これらのセンサを用いることにより、人間の所在の検知や、この人間の所在場所、姿勢状態、ユーザの識別を行なうことができる。ここで、状態としては、立った状態(立位)、座った状態(着座)、寝た状態(臥位)等がある。   In the present embodiment, as shown in FIG. 1, a plurality of sensors 10 provided in a house are connected to the management server 20. These sensors 10 may be newly installed sensors or sensors provided in existing home appliances (electrical devices). Each sensor 10 transmits sensor information to the management server 20. As the newly installed sensor 10, for example, a human sensor, a camera (image sensor) or a microphone (sound collecting sensor) can be used. By using these sensors, it is possible to detect the location of a person, identify the location of the person, the posture state, and the user. Here, the state includes a standing state (standing position), a sitting state (sitting), a sleeping state (recumbent position), and the like.

例えば、人感センサ(例えば、受動型赤外線人体検知センサ(PIR))を用いることにより、人間の所在の検知や、この人間の所在場所を特定することができる。
画像センサを用いることにより、人間の所在の検知や、この人間の所在場所を特定することができる。更に、画像センサにより撮影した顔画像を用いた本人照合により、ユーザを特定することもできる。また、センサ10により撮影した身体全体画像により、ユーザの状態を検知することができる。
For example, by using a human sensor (for example, a passive infrared human body detection sensor (PIR)), it is possible to detect a human location or to specify the location of the human.
By using an image sensor, it is possible to detect the location of a person and specify the location of the person. Furthermore, the user can be specified by the person collation using the face image photographed by the image sensor. Further, the state of the user can be detected from the whole body image captured by the sensor 10.

集音センサを用いることにより、人間の所在の検知や、この人間の所在場所を特定することができる。更に、集音センサによって収集した音声を用いた本人照合により、ユーザを特定することもできる。また、集音センサによって収集した人間の発声や作業音(例えば、うがい音、手洗い音等)により、ユーザの状態を検知することができる。   By using the sound collection sensor, it is possible to detect the location of a person and specify the location of the person. Furthermore, the user can be specified by the personal verification using the voice collected by the sound collection sensor. Further, the state of the user can be detected by a human voice or work sound (for example, gargle sound, hand washing sound, etc.) collected by the sound collection sensor.

また、センサ10を利用することができる既存の家電製品としては、例えば、空調設備(エアコン)やテレビ装置、冷蔵庫、照明器具、暖房器具等がある。具体的には、空調設備(エアコン)やテレビ装置に設けられたカメラ(画像センサ)を用いる。また、エアコンやテレビ装置に設けられたマイク(集音センサ)を用いる。   Moreover, as an existing household appliance which can utilize the sensor 10, there exist an air-conditioning installation (air conditioner), a television apparatus, a refrigerator, a lighting fixture, a heating appliance etc., for example. Specifically, a camera (image sensor) provided in an air conditioner (air conditioner) or a television set is used. In addition, a microphone (sound collecting sensor) provided in an air conditioner or a television device is used.

また、冷蔵庫や照明器具に設けられた赤外線センサ(人感センサ)を用いる。
更に、ホットカーペットやホットマット、電気毛布等の暖房器具に設けられた接触センサ(圧力センサ)を用いる。この接触センサにより、人間の所在の検知や、この人間の所在場所を特定することができる。更に、接触センサにより検知した接触範囲分布により、ユーザの状態を特定することができる。
Moreover, an infrared sensor (human sensor) provided in a refrigerator or a lighting fixture is used.
Furthermore, a contact sensor (pressure sensor) provided in a heating appliance such as a hot carpet, a hot mat, or an electric blanket is used. With this contact sensor, it is possible to detect the location of a person and specify the location of the person. Furthermore, the state of the user can be specified by the contact range distribution detected by the contact sensor.

更に、各家電製品には、電力使用量を検知するための電力センサや外部制御インターフェイスが設けられている。この電力センサは、使用電力情報を管理サーバ20に送信する。この使用電力情報には、電力センサが設けられた家電の家電コード及び電力使用量に関するデータを含める。また、外部制御インターフェイスにおいて、管理サーバ20から稼働制御指示を取得する。この場合、各家電製品は、稼働制御指示に応じた動作を実行する。   Further, each home appliance is provided with a power sensor and an external control interface for detecting the amount of power used. This power sensor transmits power usage information to the management server 20. The power usage information includes data related to the home appliance code of the home appliance provided with the power sensor and the power consumption. In addition, an operation control instruction is acquired from the management server 20 in the external control interface. In this case, each home appliance performs an operation according to the operation control instruction.

各センサ10は、ネットワークを介して、住宅内に設置された管理サーバ20に接続される。ネットワークとしては、通信ケーブルや電力線を用いた有線通信や、各種無線通信を利用することができる。管理サーバ20は、センサ10から取得した情報に基づいて、ユーザの特定、行動の記録、家電製品の稼働制御等を行なうコンピュータシステムである。この管理サーバ20は、制御部21、ユーザ情報記憶部22、マップ情報記憶部23、パターン情報記憶部24、個体情報記憶部25、行動情報記憶部26を備えている。   Each sensor 10 is connected to a management server 20 installed in a house via a network. As the network, wired communication using a communication cable or a power line, and various wireless communications can be used. The management server 20 is a computer system that performs user identification, action recording, home appliance operation control, and the like based on information acquired from the sensor 10. The management server 20 includes a control unit 21, a user information storage unit 22, a map information storage unit 23, a pattern information storage unit 24, an individual information storage unit 25, and a behavior information storage unit 26.

制御部21は、CPU、ROM、RAM等を備えており、センサ管理プログラムを実行することにより、検知部211、管理部212、ユーザ特定部213、電力制御部214、比較部215として機能する。   The control unit 21 includes a CPU, a ROM, a RAM, and the like, and functions as a detection unit 211, a management unit 212, a user specifying unit 213, a power control unit 214, and a comparison unit 215 by executing a sensor management program.

検知部211は、各センサ10から各種センサ情報を取得する処理を実行する。
管理部212は、各センサ10から取得したセンサ情報に基づいて、ユーザの行動の記録処理や、家電製品の電力使用量の管理処理を実行する。
The detection unit 211 executes processing for acquiring various sensor information from each sensor 10.
Based on the sensor information acquired from each sensor 10, the management unit 212 executes a process for recording user behavior and a process for managing the power consumption of home appliances.

ユーザ特定部213は、各センサ10から取得したセンサ情報に基づいて、ユーザを特定する処理を実行する。
電力制御部214は、ユーザの行動に応じて、家電製品の動作を制御する処理を実行する。
比較部215は、ユーザの活動量、消費電力を比較する処理を実行する。この比較部215は、単位時間当たり状態や単位距離当たりの活動単位量に関するデータを保持している。
The user specifying unit 213 executes processing for specifying a user based on the sensor information acquired from each sensor 10.
The power control unit 214 executes processing for controlling the operation of the home appliance according to the user's action.
The comparison unit 215 executes processing for comparing the amount of activity and power consumption of the user. The comparison unit 215 holds data relating to a state per unit time and an activity unit amount per unit distance.

ユーザ情報記憶部22は、各住宅におけるユーザに関するユーザ管理データが記録される。このユーザ管理データは、ユーザを登録した場合に記録される。このユーザ管理データは、ユーザコード、氏名、属性、認証情報に関するデータを含んで構成される。   The user information storage unit 22 stores user management data related to users in each house. This user management data is recorded when a user is registered. This user management data includes data relating to a user code, name, attribute, and authentication information.

ユーザコードデータ領域には、この住宅のユーザを特定するための識別子に関するデータが記録される。
氏名データ領域には、このユーザの氏名に関するデータが記録される。
属性データ領域には、このユーザの属性(年齢、性別等)に関するデータが記録される。
認証情報データ領域には、このユーザの本人照合に用いる認証情報(ここでは、顔画像特徴量や音声特徴量)に関するデータが記録される。
In the user code data area, data relating to an identifier for identifying the user of the house is recorded.
Data relating to the name of the user is recorded in the name data area.
In the attribute data area, data relating to the user's attributes (age, gender, etc.) is recorded.
In the authentication information data area, data relating to authentication information (in this case, a face image feature value and a voice feature value) used for the user verification is recorded.

マップ情報記憶部23は、各住宅の家屋のレイアウト(間取り)に関するマップデータが記録される。このマップデータは、家屋の間取りが登録された場合に記録される。このマップデータには、家屋の間取りに対して、各センサ10が設置され場所と検知領域(座標)、各センサ10のセンサコードが関連付けられて記録されている。また、このマップデータに基づいて、センサ10が設置されていない領域を特定することができる。これにより、センサコードを含んだセンサ情報に基づいて、各センサ10の検知領域内においてユーザの所在を特定することができる。更に、マップデータを用いることにより、移動距離を算出することができる。   The map information storage unit 23 stores map data related to the layout (planning) of houses in each house. This map data is recorded when the floor plan of the house is registered. In this map data, the location, detection area (coordinates), and sensor code of each sensor 10 are recorded in association with the floor plan of the house. Moreover, the area | region where the sensor 10 is not installed can be specified based on this map data. Accordingly, the location of the user can be specified within the detection area of each sensor 10 based on the sensor information including the sensor code. Further, the moving distance can be calculated by using the map data.

パターン情報記憶部24は、センサ情報に基づいて、人間の状態(姿勢)に関するパターンデータが記録される。このパターンデータは、センサ10によって取得できるパターンが登録された場合に記録される。このパターンデータには、センサコードに対して、状態コード、パターンが関連付けられて記録されている。   The pattern information storage unit 24 records pattern data related to the human state (posture) based on the sensor information. This pattern data is recorded when a pattern that can be acquired by the sensor 10 is registered. In this pattern data, a state code and a pattern are recorded in association with the sensor code.

センサコードデータ領域には、各センサ10を特定するための識別子に関するデータが記録される。
状態コードデータ領域には、人間の状態(姿勢)を特定するための識別子に関するデータが記録される。本実施形態では、状態コードにより、立位、着座、臥位を識別する。
Data relating to an identifier for identifying each sensor 10 is recorded in the sensor code data area.
In the status code data area, data relating to an identifier for specifying a human state (posture) is recorded. In the present embodiment, standing, sitting, and lying are identified by the status code.

パターンデータ領域には、各センサ10から取得したセンサ情報に基づいて、各状態(姿勢)を特定するためのパターンに関するデータが記録される。例えば、画像の場合には、立位、着座、臥位のパターン画像が記録される。また、音声の場合には、立位、着座、臥位に生じるパターン音(例えば、キーワードや作業音等)が記録される。   In the pattern data area, data related to a pattern for specifying each state (attitude) is recorded based on sensor information acquired from each sensor 10. For example, in the case of an image, a pattern image of standing, sitting, and lying is recorded. In the case of voice, pattern sounds (for example, keywords and work sounds) generated in standing, sitting, and lying are recorded.

個体情報記憶部25は、センサ10が検知した個体(人間)の所在に関する個体管理データが記録される。個体管理データは、センサ10が人間を検知した場合に登録される。この個体管理データは、個体コード、ユーザコード、所在、状態、使用電気機器に関するデータを含む。   The individual information storage unit 25 stores individual management data related to the location of the individual (human) detected by the sensor 10. The individual management data is registered when the sensor 10 detects a person. This individual management data includes data relating to an individual code, a user code, a location, a state, and an electric device used.

個体コードデータ領域には、検知した各人間(個体)を区別するための識別子に関するデータが記録される。
ユーザコードデータ領域には、この人間の本人照合により認識したユーザを特定するための識別子に関するデータが記録される。このユーザコードは、本人照合によりユーザを特定できた場合に登録される。
In the individual code data area, data relating to an identifier for distinguishing each detected person (individual) is recorded.
In the user code data area, data relating to an identifier for identifying a user recognized by human identification is recorded. This user code is registered when a user can be specified by collation.

所在データ領域には、この人間の所在を特定するためのデータが記録される。本実施形態では、時刻に関連付けて、所在位置(間取りにおける座標)を記録した所在履歴を記録する。   In the location data area, data for specifying the location of the person is recorded. In the present embodiment, a location history in which a location position (coordinates in the floor plan) is recorded in association with time is recorded.

状態データ領域には、この人間の状態(立位、着座、臥位等)を特定するためのデータが記録される。本実施形態では、時刻に関連付けて状態に関するデータを時系列に記録する。
使用電気機器データ領域には、この人間が使用した家電製品の使用状況に関するデータが記録される。本実施形態では、時刻に関連付けて、使用した家電製品、電力使用量についての使用実績を記録に関するデータを時系列に記録する。
In the state data area, data for specifying the human state (standing position, sitting, lying position, etc.) is recorded. In the present embodiment, data relating to the state is recorded in time series in association with the time.
In the used electrical equipment data area, data relating to the usage status of the home appliances used by humans is recorded. In the present embodiment, data relating to recording of usage records of used home appliances and power consumption is recorded in time series in association with time.

行動情報記憶部26は、各ユーザの行動履歴に関する行動管理データが記録される。この行動管理データは、本人照合されたユーザが移動した場合に更新される。行動管理データは、ユーザコード、行動パターン、利用機器に関するデータを含む。   The behavior information storage unit 26 records behavior management data related to the behavior history of each user. This behavior management data is updated when the user who has been verified moves. The behavior management data includes data related to user codes, behavior patterns, and devices used.

ユーザコードデータ領域には、各ユーザを特定するための識別子に関するデータが記録される。
行動パターンデータ領域には、このユーザが、家屋内における移動や状態のパターンに関するデータが記録される。この移動パターンは、マップ情報記憶部23に記録されたマップデータのレイアウトの座標を用いて記録される。状態パターンは、レイアウト上の所定の座標における所定期間の状態維持や状態変化が記録される。
利用機器データ領域には、この行動パターンにおいて、ユーザの行動後に使用された家電製品(例えば、エアコンや照明器具)を特定するための識別子に関するデータが記録される。
Data relating to an identifier for identifying each user is recorded in the user code data area.
In the behavior pattern data area, data related to movement and state patterns of the user in the house is recorded. This movement pattern is recorded using the layout coordinates of the map data recorded in the map information storage unit 23. The state pattern records state maintenance and state changes for a predetermined period at predetermined coordinates on the layout.
In the use device data area, data relating to an identifier for specifying a home appliance (for example, an air conditioner or a lighting fixture) used after the user's action is recorded in the action pattern.

更に、管理サーバ20は、クライアント端末50に接続される。このクライアント端末50は、キーボードやポインティングデバイス等の入力部、ディスプレイ等の出力部を備えているコンピュータ端末である。このクライアント端末50は、各種情報を入力したり、出力したりするために用いられる。   Furthermore, the management server 20 is connected to the client terminal 50. The client terminal 50 is a computer terminal that includes an input unit such as a keyboard and a pointing device, and an output unit such as a display. The client terminal 50 is used for inputting and outputting various information.

以下、管理サーバ20を用いたセンサ管理方法を説明する。ここでは、行動記録処理、ユーザ特定処理、電力制御処理、結果出力処理の順番で説明する。
(行動記録処理)
次に、図2(a)を用いて、行動記録処理を説明する。
まず、管理サーバ20の制御部21は、人検知処理を実行する(ステップS11)。具体的には、制御部21の検知部211は、センサ10から、センサ情報を取得する。このセンサ情報には、人の存在を検知したセンサ10のセンサコードが含まれる。更に、センサ情報には、人の存在を検知したときの画像、作業音が含まれる。この場合、管理部212は、このセンサコードに基づいて、マップ情報記憶部23において、人間が存在する場所を特定する。
Hereinafter, a sensor management method using the management server 20 will be described. Here, description will be made in the order of action recording processing, user identification processing, power control processing, and result output processing.
(Behavior recording process)
Next, the action recording process will be described with reference to FIG.
First, the control part 21 of the management server 20 performs a person detection process (step S11). Specifically, the detection unit 211 of the control unit 21 acquires sensor information from the sensor 10. This sensor information includes the sensor code of the sensor 10 that has detected the presence of a person. Furthermore, the sensor information includes an image and work sound when the presence of a person is detected. In this case, the management unit 212 specifies a place where a person exists in the map information storage unit 23 based on the sensor code.

次に、管理サーバ20の制御部21は、所在の記録処理を実行する(ステップS12)。具体的には、制御部21の管理部212は、新たに検知した人間か、既に検知している人間かを判定する。新たに検知した人間の場合には、新しい個体コードを付与する。そして、個体コードや、時刻に関連付けた所在を記録した個体管理データを生成し、個体情報記憶部25に登録する。一方、既に検知している人間の場合には、個体情報記憶部25において、この人間の個体管理データに対して、時刻に関連付けて、センサ10に基づいて特定された位置情報を追加記録する。   Next, the control unit 21 of the management server 20 executes a location recording process (step S12). Specifically, the management unit 212 of the control unit 21 determines whether the person has been newly detected or has already been detected. In the case of a newly detected person, a new individual code is assigned. Then, individual management data in which the individual code and the location associated with the time are recorded is generated and registered in the individual information storage unit 25. On the other hand, in the case of a person who has already been detected, the individual information storage unit 25 additionally records the position information specified based on the sensor 10 in association with the time with respect to the human individual management data.

次に、管理サーバ20の制御部21は、状態検知処理を実行する(ステップS13)。具体的には、制御部21の管理部212は、パターン情報記憶部24に記録されたパターンと、センサ情報に含まれている画像、作業音とを照合して、人間の状態を特定する。そして、管理部212は、個体情報記憶部25の個体管理データにおいて、時刻に関連付けて状態を記録する。   Next, the control part 21 of the management server 20 performs a state detection process (step S13). Specifically, the management unit 212 of the control unit 21 collates the pattern recorded in the pattern information storage unit 24 with the image and work sound included in the sensor information, and specifies the human state. Then, the management unit 212 records the state in association with the time in the individual management data in the individual information storage unit 25.

次に、管理サーバ20の制御部21は、使用機器の検知処理を実行する(ステップS14)。具体的には、制御部21の管理部212は、この部屋において使用されている家電製品を特定する。そして、管理部212は、この家電製品の電力センサから使用電力情報を取得する。   Next, the control part 21 of the management server 20 performs the detection process of an apparatus used (step S14). Specifically, the management part 212 of the control part 21 specifies the household appliances currently used in this room. And the management part 212 acquires the electric power usage information from the electric power sensor of this household appliance.

次に、管理サーバ20の制御部21は、使用量の記録処理を実行する(ステップS15)。具体的には、制御部21の管理部212は、取得した使用電力情報に基づいて、電力使用量を特定する。そして、管理部212は、個体情報記憶部25において、この人間の個体管理データに、時刻に関連付けて、使用した家電製品、電力使用量を記録する。   Next, the control unit 21 of the management server 20 executes a usage amount recording process (step S15). Specifically, the management unit 212 of the control unit 21 specifies the power usage amount based on the acquired power usage information. Then, in the individual information storage unit 25, the management unit 212 records the used home appliances and power usage in association with the time in the human individual management data.

次に、管理サーバ20の制御部21は、追跡処理を実行する(ステップS16)。具体的には、制御部21の管理部212は、各センサ10を用いて、この人間の状況変化を追跡する。例えば、移動がない場合には、同じセンサ10において、継続して所在や行動を確認する。一方、特定のセンサ10において、人間を検知できなくなった場合には、管理部212は、マップ情報記憶部23に記録された間取りにおいて、最後にセンサ情報を取得したセンサ10の設置領域の隣接領域に移動したと判定する。そして、隣接領域に配置されたセンサ10からセンサ情報を取得する。隣接領域に配置されたセンサ10からセンサ情報を取得できない場合には、センサ10が設置されていない隣接領域に所在すると推定する。このセンサ情報や、マップ情報記憶部23に記録された隣接領域に基づいて、移動した人間を追跡し、所在の記録処理(ステップS12)以降の処理を継続する。   Next, the control part 21 of the management server 20 performs a tracking process (step S16). Specifically, the management unit 212 of the control unit 21 uses each sensor 10 to track this human situation change. For example, when there is no movement, the location and action are continuously confirmed in the same sensor 10. On the other hand, when the specific sensor 10 can no longer detect a human, the management unit 212 is adjacent to the installation region of the sensor 10 that last acquired the sensor information in the floor plan recorded in the map information storage unit 23. It is determined that it has moved to. And sensor information is acquired from the sensor 10 arrange | positioned at an adjacent area | region. When sensor information cannot be acquired from the sensor 10 arranged in the adjacent area, it is estimated that the sensor information is located in the adjacent area where the sensor 10 is not installed. Based on the sensor information and the adjacent area recorded in the map information storage unit 23, the person who has moved is tracked, and the processing after the location recording process (step S12) is continued.

(ユーザ特定処理)
次に、図2(b)を用いて、ユーザ特定処理を説明する。
まず、管理サーバ20の制御部21は、ステップS11と同様に、人検知処理を実行する(ステップS21)。
次に、管理サーバ20の制御部21は、ユーザを特定可能かどうかについての判定処理を実行する(ステップS22)。具体的には、制御部21のユーザ特定部213は、センサ情報に基づいて、ユーザを特定できるかどうかを判定する。例えば、センサ情報として画像情報を取得した場合には、顔領域の特徴量を算出し、ユーザ記憶部に記録された顔画像特徴量と比較する。また、センサ情報として、音声を取得した場合には、ユーザ情報記憶部22に記録された音声特徴量と比較する。特徴量が一致するユーザを検知した場合には、ユーザを特定可能と判定する。
(User-specific processing)
Next, the user specifying process will be described with reference to FIG.
First, the control part 21 of the management server 20 performs a person detection process similarly to step S11 (step S21).
Next, the control part 21 of the management server 20 performs the determination process about whether a user can be specified (step S22). Specifically, the user specifying unit 213 of the control unit 21 determines whether the user can be specified based on the sensor information. For example, when image information is acquired as sensor information, the feature amount of the face area is calculated and compared with the face image feature amount recorded in the user storage unit. Further, when voice is acquired as sensor information, it is compared with the voice feature amount recorded in the user information storage unit 22. When a user whose feature quantity matches is detected, it is determined that the user can be specified.

ユーザを特定不可と判定した場合(ステップS22において「NO」の場合)、管理サーバ20の制御部21は、人検知処理(ステップS21)に戻る。   When it is determined that the user cannot be specified (in the case of “NO” in step S22), the control unit 21 of the management server 20 returns to the human detection process (step S21).

一方、ユーザを特定可能と判定した場合(ステップS22において「YES」の場合)、管理サーバ20の制御部21は、ユーザ情報の記録処理を実行する(ステップS23)。具体的には、制御部21のユーザ特定部213は、個体情報記憶部25の個体管理データに、特定したユーザのユーザコードを記録する。   On the other hand, when it is determined that the user can be specified (in the case of “YES” in step S22), the control unit 21 of the management server 20 executes a user information recording process (step S23). Specifically, the user specifying unit 213 of the control unit 21 records the user code of the specified user in the individual management data of the individual information storage unit 25.

次に、管理サーバ20の制御部21は、行動パターンの記録処理を実行する(ステップS24)。具体的には、制御部21のユーザ特定部213は、このユーザの行動パターンを特定する。ここでは、個体情報記憶部25に記録されている所在履歴や状態履歴に基づいて、頻度が基準値以上のパターン(始点座標〜終点座標、所定時間の状態等)を特定する。そして、ユーザ特定部213は、この行動内容を行動パターンとして、ユーザコードに関連付けて、行動情報記憶部26に記録する。
そして、管理サーバ20の制御部21は、人検知処理(ステップS21)を継続する。
Next, the control unit 21 of the management server 20 executes a behavior pattern recording process (step S24). Specifically, the user specifying unit 213 of the control unit 21 specifies the user's behavior pattern. Here, based on the location history and state history recorded in the individual information storage unit 25, a pattern having a frequency equal to or higher than a reference value (start point coordinates to end point coordinates, state at a predetermined time, etc.) is specified. And the user specific | specification part 213 records this action content on the action information storage part 26 in association with a user code as an action pattern.
And the control part 21 of the management server 20 continues a person detection process (step S21).

(電力制御処理)
次に、図3を用いて、電力制御処理を説明する。ここでは、ユーザの移動を検知した場合に、ユーザの動きを予測して、家電製品の制御を行なう。
(Power control processing)
Next, the power control process will be described with reference to FIG. Here, when the movement of the user is detected, the movement of the user is predicted and the home appliance is controlled.

まず、管理サーバ20の制御部21は、行動パターンに基づいて行動予測処理を実行する(ステップS31)。具体的には、制御部21の電力制御部214は、個体情報記憶部25において、ユーザの所在及び動きを特定する。そして、電力制御部214は、このユーザについての行動情報記憶部26から、行動パターンを取得する。そして、電力制御部214は、ユーザの所在と動きに対応する行動パターンを検索する。   First, the control unit 21 of the management server 20 executes a behavior prediction process based on the behavior pattern (step S31). Specifically, the power control unit 214 of the control unit 21 specifies the location and movement of the user in the individual information storage unit 25. And the electric power control part 214 acquires an action pattern from the action information storage part 26 about this user. Then, the power control unit 214 searches for an action pattern corresponding to the location and movement of the user.

次に、管理サーバ20の制御部21は、機器利用の可能性があるかどうかについての判定処理を実行する(ステップS32)。具体的には、制御部21の電力制御部214は、行動情報記憶部26から、現在の所在及び動きに対応する行動パターンにおいて、利用機器を検索する。次に、電力制御部214は、行動情報記憶部26に利用機器が登録されている場合には、機器利用の可能性があると判定する。   Next, the control part 21 of the management server 20 performs the determination process about whether there exists possibility of apparatus utilization (step S32). Specifically, the power control unit 214 of the control unit 21 searches the behavior information storage unit 26 for a device to be used in the behavior pattern corresponding to the current location and movement. Next, the power control unit 214 determines that there is a possibility of using the device when the device used is registered in the behavior information storage unit 26.

機器利用の可能性がないと判定した場合(ステップS32において「NO」の場合)、管理サーバ20の制御部21は、行動パターンに基づいて行動予測処理(ステップS31)に戻る。   When it is determined that there is no possibility of using the device (in the case of “NO” in step S32), the control unit 21 of the management server 20 returns to the behavior prediction process (step S31) based on the behavior pattern.

一方、機器利用の可能性があると判定した場合(ステップS32において「YES」の場合)、管理サーバ20の制御部21は、行動予測に応じた機器制御処理を実行する(ステップS33)。具体的には、制御部21の電力制御部214は、行動情報記憶部26の行動管理データに記録されている利用機器を特定し、この家電製品の稼働制御指示を送信する。そして、管理サーバ20の制御部21は、行動パターンに基づいて行動予測処理(ステップS31)に戻る。   On the other hand, when it is determined that there is a possibility of using the device (in the case of “YES” in step S32), the control unit 21 of the management server 20 executes a device control process corresponding to the behavior prediction (step S33). Specifically, the power control unit 214 of the control unit 21 specifies a use device recorded in the behavior management data of the behavior information storage unit 26 and transmits an operation control instruction for the home appliance. And the control part 21 of the management server 20 returns to an action prediction process (step S31) based on an action pattern.

(結果出力処理)
次に、図4を用いて、結果出力処理を説明する。ここでは、複数のユーザの活動量や電力使用量を比較する。
(Result output processing)
Next, the result output process will be described with reference to FIG. Here, the amount of activity and power consumption of a plurality of users are compared.

まず、管理サーバ20の制御部21は、比較対象者の特定処理を実行する(ステップS41)。具体的には、クライアント端末50を用いて、比較対象者(ユーザコード)、比較期間を入力する。この場合、制御部21の比較部215は、クライアント端末50から比較対象者、比較期間を取得する。   First, the control unit 21 of the management server 20 executes a comparison target person specifying process (step S41). Specifically, the comparison target person (user code) and the comparison period are input using the client terminal 50. In this case, the comparison unit 215 of the control unit 21 acquires the comparison target person and the comparison period from the client terminal 50.

次に、管理サーバ20の制御部21は、比較対象者の活動量の取得処理を実行する(ステップS42)。具体的には、制御部21の比較部215は、個体情報記憶部25において、比較対象者のユーザコードが記録された個体管理データを特定し、個体管理データに記録された比較期間の所在履歴、状態履歴を取得する。次に、比較部215は、マップ情報記憶部23のマップデータを用いて、比較対象者毎に、所在履歴に対応した移動距離を算出する。更に、比較部215は、状態履歴を用いて、各状態の継続時間を算出する。そして、比較部215は、移動距離、各状態の継続時間に活動単位量を乗算して活動量を算出する。   Next, the control unit 21 of the management server 20 executes an activity amount acquisition process for the comparison target person (step S42). Specifically, the comparison unit 215 of the control unit 21 specifies the individual management data in which the user code of the person to be compared is recorded in the individual information storage unit 25, and the location history of the comparison period recorded in the individual management data Get state history. Next, the comparison unit 215 uses the map data in the map information storage unit 23 to calculate a movement distance corresponding to the location history for each person to be compared. Further, the comparison unit 215 calculates the duration of each state using the state history. Then, the comparison unit 215 calculates the activity amount by multiplying the movement distance and the duration of each state by the activity unit amount.

次に、管理サーバ20の制御部21は、比較対象者の電力量の取得処理を実行する(ステップS43)。具体的には、制御部21の比較部215は、個体情報記憶部25の個体管理データに記録された比較期間の使用実績を取得する。そして、比較部215は、比較対象者毎に、使用実績に基づいて、電力使用量を合計して電力量を算出する。   Next, the control part 21 of the management server 20 performs the acquisition process of the electric energy of a comparison subject (step S43). Specifically, the comparison unit 215 of the control unit 21 acquires the usage record of the comparison period recorded in the individual management data of the individual information storage unit 25. Then, the comparison unit 215 calculates the amount of power for each person to be compared by summing the amount of power used based on the usage record.

次に、管理サーバ20の制御部21は、比較結果の出力処理を実行する(ステップS44)。具体的には、制御部21の比較部215は、比較対象者毎に、活動量及び電力量を対比させた比較表を作成する。そして、比較部215は、作成した比較表をクライアント端末50に出力する。   Next, the control unit 21 of the management server 20 executes a comparison result output process (step S44). Specifically, the comparison unit 215 of the control unit 21 creates a comparison table that compares the amount of activity and the amount of power for each comparison target person. Then, the comparison unit 215 outputs the created comparison table to the client terminal 50.

上記実施形態によれば、以下のような効果を得ることができる。
(1)上記実施形態では、管理サーバ20には、住宅内に設けられている複数のセンサ10が接続されている。これらのセンサ10は、新たに設置されたセンサや、既存の家電製品が備えているセンサを用いることができる。そして、各センサ10は、管理サーバ20にセンサ情報を送信する。そして、管理サーバ20の制御部21は、人検知処理(ステップS11)、所在の記録処理(ステップS12)、追跡処理(ステップS16)を実行する。これにより、各種センサを用いて、人間の存在を検知したり、所在場所を検知したりすることができる。ここでは、特に、複数の家電製品が備えている既存センサを用いることにより、効率的に存在や所在を特定することができる。
According to the above embodiment, the following effects can be obtained.
(1) In the above embodiment, the management server 20 is connected with a plurality of sensors 10 provided in the house. These sensors 10 may be newly installed sensors or sensors provided in existing home appliances. Each sensor 10 transmits sensor information to the management server 20. And the control part 21 of the management server 20 performs a person detection process (step S11), a location recording process (step S12), and a tracking process (step S16). Thereby, it is possible to detect the presence of a person or to detect the location using various sensors. Here, in particular, the presence and location can be efficiently identified by using existing sensors provided in a plurality of home appliances.

(2)上記実施形態では、管理サーバ20の制御部21は、状態検知処理を実行する(ステップS13)。これにより、各種センサを用いて、人間の姿勢等、状態を把握することができる。そして、この状態情報を用いることによって、電力制御等を行なうことができる。例えば、横になっている状態で動きがない場合には、睡眠と判断して、消灯する等の制御を行なうことができる。   (2) In the above embodiment, the control unit 21 of the management server 20 executes the state detection process (step S13). Thereby, it is possible to grasp the state such as the posture of the human using various sensors. And power control etc. can be performed by using this state information. For example, when there is no movement in a lying state, it can be determined that sleep is performed and control such as turning off the light can be performed.

(3)上記実施形態では、管理サーバ20の制御部21は、使用機器の検知処理(ステップS14)、使用量の記録処理(ステップS15)を実行する。これにより、各人が使用する家電製品を特定したり、電力使用状況を把握したりすることができる。   (3) In the said embodiment, the control part 21 of the management server 20 performs the detection process (step S14) of an apparatus used, and the recording process (step S15) of a usage-amount. Thereby, the household appliances which each person uses can be specified, or an electric power usage condition can be grasped | ascertained.

(4)上記実施形態では、管理サーバ20の制御部21は、ユーザを特定可能かどうかについての判定処理を実行する(ステップS22)。ユーザを特定可能と判定した場合(ステップS22において「YES」の場合)、ユーザ情報の記録処理(ステップS23)を実行する。これにより、ユーザを特定できなかった段階で所在や活動を、特定できたユーザに関連づけることができる。更に、行動パターンの記録処理(ステップS24)により、各ユーザの行動パターンを特定し、行動予測に活用することができる。   (4) In the above embodiment, the control unit 21 of the management server 20 executes a determination process as to whether or not a user can be specified (step S22). If it is determined that the user can be specified (“YES” in step S22), a user information recording process (step S23) is executed. Thereby, the location and activity can be associated with the identified user at the stage where the user could not be identified. Furthermore, by the action pattern recording process (step S24), the action pattern of each user can be specified and used for action prediction.

(5)上記実施形態では、管理サーバ20の制御部21は、行動パターンに基づいて行動予測処理を実行する(ステップS31)。機器利用の可能性があると判定した場合(ステップS32において「YES」の場合)、管理サーバ20の制御部21は、行動予測に応じた機器制御処理を実行する(ステップS33)。これにより、ユーザの行動に対応して、事前に電力制御を行ない、ユーザに応じた快適な環境を提供することができる。   (5) In the embodiment described above, the control unit 21 of the management server 20 executes a behavior prediction process based on the behavior pattern (step S31). When it is determined that there is a possibility of using the device (in the case of “YES” in step S32), the control unit 21 of the management server 20 executes a device control process corresponding to the behavior prediction (step S33). Thereby, corresponding to a user's action, electric power control can be performed in advance and the comfortable environment according to the user can be provided.

(6)上記実施形態では、管理サーバ20の制御部21は、比較対象者の特定処理(ステップS41)、比較対象者の活動量の取得処理(ステップS42)を実行する。これにより、ユーザの活動状況を相対的に評価することができる。   (6) In the above embodiment, the control unit 21 of the management server 20 executes the comparison target person specifying process (step S41) and the comparison target person activity amount acquisition process (step S42). Thereby, a user's activity condition can be evaluated relatively.

更に、管理サーバ20の制御部21は、比較対象者の電力量の取得処理を実行する(ステップS43)。これにより、電力使用量を比較し、比較に基づき使用量抑制のモチベーションとして利用することができる。   Furthermore, the control part 21 of the management server 20 performs the acquisition process of the electric energy of a comparison subject (step S43). Thereby, electric power usage-amount can be compared and it can utilize as a motivation of usage-amount suppression based on a comparison.

なお、上記実施形態は以下のように変更してもよい。
・上記実施形態においては、住宅内に設置された複数のセンサを用いて、ユーザの所在や行動、電力使用量の管理を行なうセンサ管理システムとして説明した。管理対象の空間は、所定のユーザが存在する空間であればよく、住宅に限定されるものではない。例えば、オフィス等に適用することも可能である。
In addition, you may change the said embodiment as follows.
In the above-described embodiment, the sensor management system has been described in which a plurality of sensors installed in a house are used to manage a user's location, behavior, and power usage. The space to be managed is not limited to a house as long as a predetermined user exists. For example, it can be applied to an office or the like.

・上記実施形態においては、管理サーバ20が、センサ10から取得した情報に基づいて、ユーザの特定、行動の記録、家電製品の稼働制御等を行なう。ここで、管理サーバ20は、設備や家電を制御することができる機能を有すれば、PC等に限定されるものでない。例えば、家庭内の機器を接続して操作パネルを一元化したHEMS(Home Energy Management System)や、インターネットを介して接続されるクラウドサーバ、家電製品に組み込まれたコンピュータを利用することができる。   In the above embodiment, the management server 20 performs user identification, action recording, home appliance operation control, and the like based on information acquired from the sensor 10. Here, the management server 20 is not limited to a PC or the like as long as it has a function of controlling equipment and home appliances. For example, it is possible to use a HEMS (Home Energy Management System) in which devices in a home are connected and an operation panel is integrated, a cloud server connected via the Internet, or a computer incorporated in a home appliance.

・上記実施形態においては、管理サーバ20の制御部21は、比較対象者の特定処理を実行する(ステップS41)。この場合、制御部21の比較部215は、クライアント端末50から比較対象者、比較期間を取得する。これに代えて、管理サーバ20が比較対象者を特定するようにしてもよい。この場合には、ユーザ情報記憶部22に記録されている属性を用いて、関連する属性を有するユーザを比較対象者として特定する。   In the above embodiment, the control unit 21 of the management server 20 executes a comparison target person specifying process (step S41). In this case, the comparison unit 215 of the control unit 21 acquires the comparison target person and the comparison period from the client terminal 50. Instead of this, the management server 20 may specify the person to be compared. In this case, using the attribute recorded in the user information storage unit 22, a user having a related attribute is specified as a comparison target person.

また、上記実施形態では、一つの住宅でのユーザの活動量や電力量の比較を行なった。これに加えて、他の住宅におけるユーザの活動量や電力量と比較するようにしてもよい。この場合には、ネットワークを介して、各住宅の管理サーバ20における情報を統合する統合サーバ(クラウドサーバ)に接続する。この統合サーバにおいては、各管理サーバ20から、ユーザ管理データとともに、各ユーザの活動量や電力量を取得して、データベースに記録する。そして、統合サーバは、ユーザ管理データに記録されている属性を用いて、関連する属性を有するユーザを比較対象者として特定し、各ユーザに比較表や、活動量や電力量により順位付けしたランキングを提供するための出力を行なう。   Moreover, in the said embodiment, the user's activity amount and electric energy in one house were compared. In addition, you may make it compare with the user's activity amount and electric energy in another house. In this case, it connects to the integrated server (cloud server) which integrates the information in the management server 20 of each house via a network. In this integrated server, the activity amount and power amount of each user are acquired from each management server 20 together with the user management data and recorded in the database. The integrated server uses the attributes recorded in the user management data to identify users having related attributes as comparison targets, and ranks each user according to a comparison table, activity amount, and power amount. Output to provide

・上記実施形態においては、各家電製品には、電力使用量を検知するための電力センサが設けられている。この電力センサは、使用電力情報を管理サーバ20に送信する。ここで、使用電力情報を送信できるものであれば、各家電製品に限定されるものではない。例えば、配線器具(例えば、コンセント)に電力センサを設けておく。そして、電気機器をコンセントに差し込んだユーザを、各種センサ10を用いて特定する。そして、コンセントの電力センサから取得した電力使用量を、このユーザの個体管理データに記録する。これにより、家電製品に電力センサが設けられていない場合にも、電力使用量を把握することができる。また、配線器具に、各種センサ(人感センサ、画像センサ、集音センサ等)を設けてもよい。この場合には、無線通信や電力線通信により、検知結果を管理サーバ20に送信する。   In the above embodiment, each home appliance is provided with a power sensor for detecting the amount of power used. This power sensor transmits power usage information to the management server 20. Here, as long as power consumption information can be transmitted, it is not limited to each home appliance. For example, a power sensor is provided in a wiring device (for example, an outlet). And the user who plugged in the electric equipment into an outlet is specified using various sensors 10. Then, the power usage acquired from the power sensor of the outlet is recorded in the individual management data of the user. Thereby, also when the electric power sensor is not provided in household appliances, electric power consumption can be grasped | ascertained. Further, various sensors (human sensor, image sensor, sound collection sensor, etc.) may be provided in the wiring device. In this case, the detection result is transmitted to the management server 20 by wireless communication or power line communication.

・上記実施形態においては、画像センサ、集音センサ、接触センサを用いて、人間の存在や所在を検知する。人間を検知したり、ユーザを特定したりするためのセンサは、これらに限定されるものではない。また、センサ10を利用することができる既存の家電製品も、空調設備やテレビ装置、冷蔵庫、照明器具、暖房器具等に限定されるものではない。例えば、玄関等の入口において、カードキーにより施錠を行なう場合には、このカードキーの所有者に基づいて、ユーザを特定するようにしてもよい。この場合にも、屋内では、各種センサ10を用いて、特定したユーザを追跡する。   In the above embodiment, the presence or location of a person is detected using an image sensor, a sound collection sensor, or a contact sensor. Sensors for detecting a human or identifying a user are not limited to these. Moreover, the existing household appliances which can utilize the sensor 10 are not limited to an air-conditioning installation, a television apparatus, a refrigerator, a lighting fixture, a heating appliance etc. For example, when locking with a card key at the entrance of a front door or the like, the user may be specified based on the owner of the card key. Also in this case, the specified user is tracked indoors using various sensors 10.

また、センサ10を備えた家電製品についても、空調設備(エアコン)やテレビ装置、冷蔵庫、照明器具、暖房器具に限定されるものではない。例えば、パソコンや個人使用製品に備えられたセンサを用いることも可能である。例えば、パソコンの場合には、ログイン認証により、ユーザを特定することができる。また、電動歯ブラシやシェーバのような個人使用製品の場合には、利用者が限定されるため、使用により、ユーザを特定することができる。   Further, the home appliance provided with the sensor 10 is not limited to an air conditioner (air conditioner), a television set, a refrigerator, a lighting fixture, or a heating fixture. For example, it is possible to use a sensor provided in a personal computer or a product for personal use. For example, in the case of a personal computer, a user can be specified by login authentication. In addition, in the case of a personal use product such as an electric toothbrush or a shaver, since the user is limited, the user can be specified by use.

・上記実施形態においては、管理サーバ20の制御部21は、状態検知処理を実行する(ステップS13)。具体的には、制御部21の管理部212は、パターン情報記憶部24に記録されたパターンと、センサ情報に含まれている画像、作業音とを照合して、人間の状態を特定する。状態の検知方法はこれに限定されるものでない。例えば、生理状況や覚醒状況を検出する生体検出手段(例えば、心拍数や心拍パターンを測定可能な健康管理機器や、携帯可能なライフログ記憶装置等)を用いることも可能である。この場合には、これらの生体検出手段のセンサから、無線通信等により、ユーザの状態を取得することができる。   In the above embodiment, the control unit 21 of the management server 20 executes a state detection process (step S13). Specifically, the management unit 212 of the control unit 21 collates the pattern recorded in the pattern information storage unit 24 with the image and work sound included in the sensor information, and specifies the human state. The state detection method is not limited to this. For example, it is possible to use living body detection means (for example, a health management device capable of measuring a heart rate or a heart rate pattern, a portable life log storage device, or the like) that detects a physiological state or an arousal state. In this case, the state of the user can be acquired from the sensors of these living body detection means by wireless communication or the like.

・上記実施形態においては、状態のパターンとして、立位、着座、臥位等を特定したが、認識対象のパターンはこれらに限定されるものではない。パターン情報記憶部24に記録されたパターン(姿勢等)に基づいて、運動、喧嘩、不審者等、多様な認識に適用できる。この場合、パターン情報記憶部24に、動的パターンに関連付けたパターン判定情報(不審者侵入、運動不足等)を記録する。そして、動的パターンのマッチングにより、パターン判定を行ない、例えば、防犯、生活習慣や行動パターンの改善提案等の注意喚起を行なうことができる。   In the above embodiment, standing, sitting, lying, etc. are specified as the state pattern, but the pattern to be recognized is not limited to these. Based on the pattern (posture, etc.) recorded in the pattern information storage unit 24, the present invention can be applied to various recognitions such as exercise, fighting, and suspicious persons. In this case, pattern determination information associated with the dynamic pattern (suspicious person intrusion, lack of exercise, etc.) is recorded in the pattern information storage unit 24. Then, pattern determination can be performed by dynamic pattern matching, and alerts such as crime prevention, lifestyle habits and behavior pattern improvement suggestions can be made, for example.

10…センサ、20…管理サーバ、21…制御部、22…ユーザ情報記憶部、23…マップ情報記憶部、24…パターン情報記憶部、25…個体情報記憶部、26…行動情報記憶部、211…検知部、212…管理部、213…ユーザ特定部、214…電力制御部、215…比較部、50…クライアント端末。   DESCRIPTION OF SYMBOLS 10 ... Sensor, 20 ... Management server, 21 ... Control part, 22 ... User information storage part, 23 ... Map information storage part, 24 ... Pattern information storage part, 25 ... Individual information storage part, 26 ... Behavior information storage part, 211 Detecting unit 212 Management unit 213 User specifying unit 214 Power control unit 215 Comparison unit 50 Client terminal

Claims (9)

空間内に設置された複数のセンサの配置を示したレイアウト情報記憶部と、
前記空間内において配置されて個体を検知し、人検出情報を送信するセンサと、
各ユーザの所在情報を記録する個体情報記憶部と、
前記センサと通信を行なう制御部を備えたセンサ管理システムであって、
前記制御部が、
個体を検知するセンサから取得した人検出情報に基づいて、前記レイアウト情報記憶部を用いて所在を特定し、
各個体の所在情報を、前記個体情報記憶部に、継続的に記録し、
前記人検出情報に基づいてユーザを特定できた場合には、前記個体情報記憶部において継続的に記録された所在情報を、前記特定できたユーザ識別子に関連付けて記録することを特徴とするセンサ管理システム。
A layout information storage unit showing the arrangement of a plurality of sensors installed in the space;
A sensor for detecting an individual arranged in the space and transmitting human detection information;
An individual information storage unit for recording location information of each user;
A sensor management system comprising a control unit for communicating with the sensor,
The control unit is
Based on the person detection information acquired from the sensor that detects the individual, the location is identified using the layout information storage unit,
The location information of each individual is continuously recorded in the individual information storage unit,
When the user can be identified based on the person detection information, the location information continuously recorded in the individual information storage unit is recorded in association with the identified user identifier. system.
センサから人検出情報を取得できなくなった場合、前記レイアウト情報記憶部において、最後に人検出情報を取得したセンサが設置された領域の隣接領域に移動したとして所在を推定することを特徴とする請求項1に記載のセンサ管理システム。   When it becomes impossible to acquire human detection information from a sensor, the layout information storage unit estimates the location as having moved to an adjacent area of the area where the sensor from which human detection information was last acquired is installed. Item 2. The sensor management system according to Item 1. 前記センサは、前記空間内において既存の電気機器に備えられたものを含むことを特徴とする請求項1又は2に記載のセンサ管理システム。   The sensor management system according to claim 1, wherein the sensor includes one provided in an existing electric device in the space. 前記制御部が、前記センサから取得した人検出情報に基づいて、前記個体の状態を検知して記録することを特徴とする請求項1〜3のいずれか一項に記載のセンサ管理システム。   The sensor control system according to any one of claims 1 to 3, wherein the control unit detects and records the state of the individual based on human detection information acquired from the sensor. 前記制御部が、前記個体情報記憶部において継続的に記録された所在情報に基づいて、各ユーザの活動量を算出し、他のユーザの活動量との比較結果を出力することを特徴とする請求項1〜4のいずれか一項に記載のセンサ管理システム。   The control unit calculates an activity amount of each user based on location information continuously recorded in the individual information storage unit, and outputs a comparison result with the activity amount of other users. The sensor management system as described in any one of Claims 1-4. 前記制御部が、前記個体情報記憶部において継続的に記録された所在情報に基づいて、各ユーザが使用した電気機器の電力使用量を取得して前記個体情報記憶部に記録し、他のユーザの電力使用量との比較結果を出力することを特徴とする請求項1〜5のいずれか一項に記載のセンサ管理システム。   Based on the location information continuously recorded in the individual information storage unit, the control unit acquires the power usage amount of the electric equipment used by each user and records it in the individual information storage unit. The sensor management system according to any one of claims 1 to 5, wherein a comparison result with the amount of power used is output. 前記制御部が、前記個体情報記憶部において継続的に記録された所在情報に基づいて、前記空間内に設置された電気機器の動作を制御することを特徴とする請求項1〜6のいずれか一項に記載のセンサ管理システム。   The said control part controls the operation | movement of the electric equipment installed in the said space based on the location information continuously recorded in the said individual information storage part. The sensor management system according to one item. 空間内に設置された複数のセンサの配置を示したレイアウト情報記憶部と、
前記空間内において配置されて個体を検知し、人検出情報を送信するセンサと、
各ユーザの所在情報を記録する個体情報記憶部と、
前記センサと通信を行なう制御部を備えたセンサ管理システムを用いて、センサを管理する方法であって、
前記制御部が、
個体を検知するセンサから取得した人検出情報に基づいて、前記レイアウト情報記憶部を用いて所在を特定し、
各個体の所在情報を、前記個体情報記憶部に、継続的に記録し、
前記人検出情報に基づいてユーザを特定できた場合には、前記個体情報記憶部において継続的に記録された所在情報を、前記特定できたユーザ識別子に関連付けて記録することを特徴とするセンサ管理方法。
A layout information storage unit showing the arrangement of a plurality of sensors installed in the space;
A sensor for detecting an individual arranged in the space and transmitting human detection information;
An individual information storage unit for recording location information of each user;
A method for managing a sensor using a sensor management system including a control unit that communicates with the sensor,
The control unit is
Based on the person detection information acquired from the sensor that detects the individual, the location is identified using the layout information storage unit,
The location information of each individual is continuously recorded in the individual information storage unit,
When the user can be identified based on the person detection information, the location information continuously recorded in the individual information storage unit is recorded in association with the identified user identifier. Method.
空間内に設置された複数のセンサの配置を示したレイアウト情報記憶部と、
前記空間内において配置されて個体を検知し、人検出情報を送信するセンサと、
各ユーザの所在情報を記録する個体情報記憶部と、
前記センサと通信を行なう制御部を備えたセンサ管理システムを用いて、センサを管理するプログラムであって、
前記制御部を、
個体を検知するセンサから取得した人検出情報に基づいて、前記レイアウト情報記憶部を用いて所在を特定し、
各個体の所在情報を、前記個体情報記憶部に、継続的に記録し、
前記人検出情報に基づいてユーザを特定できた場合には、前記個体情報記憶部において継続的に記録された所在情報を、前記特定できたユーザ識別子に関連付けて記録する手段として機能させることを特徴とするセンサ管理プログラム。
A layout information storage unit showing the arrangement of a plurality of sensors installed in the space;
A sensor for detecting an individual arranged in the space and transmitting human detection information;
An individual information storage unit for recording location information of each user;
A program for managing a sensor using a sensor management system including a control unit that communicates with the sensor,
The control unit
Based on the person detection information acquired from the sensor that detects the individual, the location is identified using the layout information storage unit,
The location information of each individual is continuously recorded in the individual information storage unit,
When the user can be identified based on the person detection information, the location information continuously recorded in the individual information storage unit is made to function as a means for recording in association with the identified user identifier. A sensor management program.
JP2014018608A 2014-02-03 2014-02-03 Sensor management system, sensor management method, and sensor management program Pending JP2015146514A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014018608A JP2015146514A (en) 2014-02-03 2014-02-03 Sensor management system, sensor management method, and sensor management program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014018608A JP2015146514A (en) 2014-02-03 2014-02-03 Sensor management system, sensor management method, and sensor management program

Publications (1)

Publication Number Publication Date
JP2015146514A true JP2015146514A (en) 2015-08-13

Family

ID=53890572

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014018608A Pending JP2015146514A (en) 2014-02-03 2014-02-03 Sensor management system, sensor management method, and sensor management program

Country Status (1)

Country Link
JP (1) JP2015146514A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017195440A1 (en) * 2016-05-12 2017-11-16 ソニー株式会社 Information processing device, information processing method, and program
JP2018088195A (en) * 2016-11-29 2018-06-07 パナソニックIpマネジメント株式会社 Life pattern management system, life pattern management method, and program
JP2019506028A (en) * 2015-12-08 2019-02-28 グリーンコム カンパニー リミテッドGreencomm Co.,Ltd. Internet of Things system that recognizes user behavior and controls things
JP2021518004A (en) * 2018-04-13 2021-07-29 ブレイノフティー インコーポレイテッド Use of contextual information in the environment component area for event / activity prediction

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07287781A (en) * 1994-04-19 1995-10-31 Hitachi Ltd Device for identifying/tracking mobile object
JPH11337149A (en) * 1998-05-28 1999-12-10 Matsushita Electric Ind Co Ltd System for comparing states of use of air conditioning apparatuses
JP2003178378A (en) * 2001-12-12 2003-06-27 Sekisui Chem Co Ltd Life watching system
WO2006030742A1 (en) * 2004-09-14 2006-03-23 Matsushita Electric Industrial Co., Ltd. Apparatus control system and apparatus control method
JP2010050664A (en) * 2008-08-21 2010-03-04 Panasonic Corp Household electric appliance controller and program thereof

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07287781A (en) * 1994-04-19 1995-10-31 Hitachi Ltd Device for identifying/tracking mobile object
JPH11337149A (en) * 1998-05-28 1999-12-10 Matsushita Electric Ind Co Ltd System for comparing states of use of air conditioning apparatuses
JP2003178378A (en) * 2001-12-12 2003-06-27 Sekisui Chem Co Ltd Life watching system
WO2006030742A1 (en) * 2004-09-14 2006-03-23 Matsushita Electric Industrial Co., Ltd. Apparatus control system and apparatus control method
JP2010050664A (en) * 2008-08-21 2010-03-04 Panasonic Corp Household electric appliance controller and program thereof

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019506028A (en) * 2015-12-08 2019-02-28 グリーンコム カンパニー リミテッドGreencomm Co.,Ltd. Internet of Things system that recognizes user behavior and controls things
WO2017195440A1 (en) * 2016-05-12 2017-11-16 ソニー株式会社 Information processing device, information processing method, and program
JPWO2017195440A1 (en) * 2016-05-12 2019-03-07 ソニー株式会社 Information processing apparatus, information processing method, and program
JP7031578B2 (en) 2016-05-12 2022-03-08 ソニーグループ株式会社 Information processing equipment, information processing methods and programs
US11340565B2 (en) 2016-05-12 2022-05-24 Sony Corporation Information processing apparatus, information processing method, and program
JP2018088195A (en) * 2016-11-29 2018-06-07 パナソニックIpマネジメント株式会社 Life pattern management system, life pattern management method, and program
JP2021518004A (en) * 2018-04-13 2021-07-29 ブレイノフティー インコーポレイテッド Use of contextual information in the environment component area for event / activity prediction

Similar Documents

Publication Publication Date Title
CN105629936B (en) A kind of intelligent floor of controllable smart home device
US9846525B2 (en) Location-based healthcare collaboration, data management and access control
CN205581626U (en) Steerable intelligent household equipment's intelligent floor
CN105144023B (en) Other devices are waken up for additional data
US20220207972A1 (en) Appearance based access verification
CN107708412A (en) Intelligent pet monitoring system
JP2015146514A (en) Sensor management system, sensor management method, and sensor management program
JP7346019B2 (en) Systems and methods in object history association
KR20170098621A (en) Companion animal friend robot based internet of things companion animal management system using the same
CN106844699A (en) A kind of authorization method of the service employee of intelligent Community
Ghosh et al. UltraSense: A non-intrusive approach for human activity identification using heterogeneous ultrasonic sensor grid for smart home environment
CN108053587A (en) Personal identification method and its device, carpet
KR101927373B1 (en) Method, apparatus and system for monitering resident
US20230326318A1 (en) Environment sensing for care systems
CA3104823C (en) Network activity validation
Arora et al. Home automation system with the use of internet of things and artificial intelligence
US11631279B2 (en) Smart cleaning system
JP2005018166A (en) Living information managing system and method and data tag device
CA3193169A1 (en) Access control system
US10764387B2 (en) Profile information system and information processing apparatus
US11521384B1 (en) Monitoring system integration with augmented reality devices
Suryadevara et al. An intelligent system for continuous monitoring of wellness of an inhabitant for sustainable future
Vasileiadis et al. A living lab infrastructure for investigating activity monitoring needs in service robot applications
Phua et al. Control home appliances through internet of things to assist elderly in their daily routine
WO2021161404A1 (en) Information processing device, communication system, generation method, and generation program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161019

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170926

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180410