BE1027428A1 - SENSOR SYSTEM FOR ACTIVITY RECOGNITION - Google Patents

SENSOR SYSTEM FOR ACTIVITY RECOGNITION Download PDF

Info

Publication number
BE1027428A1
BE1027428A1 BE20195453A BE201905453A BE1027428A1 BE 1027428 A1 BE1027428 A1 BE 1027428A1 BE 20195453 A BE20195453 A BE 20195453A BE 201905453 A BE201905453 A BE 201905453A BE 1027428 A1 BE1027428 A1 BE 1027428A1
Authority
BE
Belgium
Prior art keywords
sensor system
sensor
data
activity
primary
Prior art date
Application number
BE20195453A
Other languages
Dutch (nl)
Other versions
BE1027428B1 (en
Inventor
Mey Jens De
Lode Vuegen
Gert Dekkers
Peter Karsmakers
Original Assignee
Niko Nv
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Niko Nv filed Critical Niko Nv
Priority to BE20195453A priority Critical patent/BE1027428B1/en
Priority to EP20185382.7A priority patent/EP3767602A1/en
Publication of BE1027428A1 publication Critical patent/BE1027428A1/en
Application granted granted Critical
Publication of BE1027428B1 publication Critical patent/BE1027428B1/en

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/04Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0407Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis
    • G08B21/0423Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis detecting deviation from an expected pattern of behaviour or schedule
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/04Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438Sensor means for detecting
    • G08B21/0469Presence detectors to detect unsafe condition, e.g. infrared sensor, microphone

Landscapes

  • Health & Medical Sciences (AREA)
  • Emergency Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Gerontology & Geriatric Medicine (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Engineering & Computer Science (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

De huidige uitvinding verschaft een sensorsysteem (1) voor activiteitsherkenning. Het sensorsysteem (1) omvat ten minste één sensor (S1, S2,..., Sn) voor het verzamelen van omgevingsgegevens, een gegevensverwerkingseenheid (3) voor het verwerken van de verzamelde gegevens, een kenmerkextractie-eenheid (6) voor het comprimeren van de verwerkte gegevens door het uitfilteren van de verwerkte voor de activiteit irrelevante gegevensinformatie, waardoor voor de activiteit relevante gegevens verkregen worden, en een primaire activiteitsherkenningseenheid (10) voor het herkennen van een primaire activiteit vanuit de geëxtraheerde relevante gegevens. De primaire activiteitsherkenningseenheid (10) is onderdeel van het sensorsysteem (1) of, met andere woorden, bevindt zich in het sensorsysteem (1).The present invention provides a sensor system (1) for activity recognition. The sensor system (1) comprises at least one sensor (S1, S2, ..., Sn) for collecting environmental data, a data processing unit (3) for processing the collected data, a feature extraction unit (6) for compressing of the processed data by filtering out the processed data information irrelevant to the activity, thereby obtaining data relevant to the activity, and a primary activity recognition unit (10) for recognizing a primary activity from the extracted relevant data. The primary activity recognition unit (10) is part of the sensor system (1) or, in other words, it is located in the sensor system (1).

Description

SENSORSYSTEEM VOOR ACTIVITEITHERKENNING Technisch gebied van de uitvinding De huidige uitvinding heeft betrekking op een sensorsysteem. Meer in het bijzonder heeft de huidige uitvinding betrekking op een sensorsysteem voor activiteitsherkenning.Technical Field of the Invention The present invention relates to a sensor system. More specifically, the present invention relates to an activity recognition sensor system.

Achtergrond van de uitvinding Sensorinrichtingen, zoals temperatuursensoren, relatieve vochtigheidssensoren, CO:-sensoren, be- wegingssensoren en dergelijke worden meer en meer geïntegreerd in huizen of gebouwen, om het comfort van een gebruiker te verbeteren. Dit gaat van eenvoudige inrichtingen met één sensor tot geavanceerdere sensorsystemen die het huis of gebouw “slimmer” maken.Background of the Invention Sensor devices, such as temperature sensors, relative humidity sensors, CO 2 sensors, motion sensors, and the like, are more and more integrated into homes or buildings to improve the comfort of a user. This ranges from simple devices with one sensor to more advanced sensor systems that make the house or building “smarter”.

US 2018/0306609 beschrijft een detectiesysteem omvattende een sensorsamenstel dat communiceer- baar met een computersysteem, zoals een server of een cloudrekensysteem, verbonden is. In Fig. 1 is een blokdiagram van het detectiesysteem van US 2018/0306609 afgebeeld. Het detectiesysteem 100 omvat een sensorsamenstel 102 met één of meer sensoren 110 die een verscheidenheid aan ver- schillende fysische fenomenen detecteren. Het sensorsamenstel 102 kenmerkt, via een kenmerkings- module 112, de onbewerkte sensorgegevens en verzendt de gekenmerkte gegevens naar een compu- tersysteem 104. Door middel van machine-leren (machine-leermodule 116), traint het computersys- teem 104 vervolgens een classificator om als een virtuele sensor 118 te dienen voor een gebeurtenis die gecorreleerd is met de gegevens vanuit één of meer sensorstromen binnen de gekenmerkte sen- sorgegevens. De virtuele sensor 118 kan zich dan abonneren op de relevante sensorinvoeren vanuit het sensorsamenstel 102 en daaropvolgende voorvallen van de gebeurtenis bewaken. Virtuele senso- ren van een hogere orde kunnen de uitvoeren van virtuele sensoren van een lagere orde ontvangen om niet-binaire details te deduceren over de omgeving waarin de sensorsamenstellen 102 zich be- vinden. Het detectiesysteem 100 is dus ingericht voor het trainen en implementeren van één of meer virtuele sensoren 118, die op machine-leren-gebaseerde classificatiesystemen of algoritmen zijn die zijn getraind om bepaalde gebeurtenissen te detecteren waaraan de virtuele sensoren 118 toegewezen zijn als gecorreleerd met de door de sensoren 110 van het sensorsamenstel 102 en/of andere virtuele sensoren 118 gedetecteerde gegevens.US 2018/0306609 describes a detection system comprising a sensor assembly that is communicably connected to a computer system, such as a server or a cloud computing system. In fig. 1 is a block diagram of the detection system of US 2018/0306609. Detection system 100 includes a sensor assembly 102 with one or more sensors 110 that detect a variety of different physical phenomena. The sensor assembly 102 tags, through a tag module 112, the raw sensor data and sends the tagged data to a computer system 104. By machine learning (machine learning module 116), the computer system 104 then trains a classifier to serve as a virtual sensor 118 for an event correlated with the data from one or more sensor streams within the tagged sensor data. The virtual sensor 118 can then subscribe to the relevant sensor inputs from the sensor assembly 102 and monitor subsequent occurrences of the event. Higher order virtual sensors can receive the outputs of lower order virtual sensors to deduce non-binary details about the environment in which the sensor assemblies 102 reside. Thus, the detection system 100 is arranged to train and implement one or more virtual sensors 118, which are machine learning based classification systems or algorithms trained to detect certain events to which the virtual sensors 118 are assigned as correlated with the the sensors 110 of the sensor assembly 102 and / or other virtual sensors 118 detect data.

In het systeem volgens US 2018/0306609 vindt verdere verwerking van gekenmerkte, onbewerkte gegevens plaats op een locatie op afstand, d.w.z. op een locatie weg van de sensor. Gegevens moeten daarom via het internet naar de cloud overgebracht worden. Een nadeel hiervan is dat er speciale maatregelen genomen moeten worden om de privacy van gebruikers te waarborgen. Verder wordt er continu informatie vanaf het sensorsysteem naar de cloud heen en weer gestuurd, waarbij elk verbin- dingsverlies met de cloud de werking van het systeem kan onderbreken en/of ervoor kan zorgen dat het systeem niet goed werkt.In the system according to US 2018/0306609, further processing of labeled raw data takes place at a remote location, i.e. at a location away from the sensor. Data must therefore be transferred to the cloud via the internet. A disadvantage of this is that special measures must be taken to guarantee the privacy of users. Furthermore, information is continuously sent back and forth from the sensor system to the cloud, where any loss of connection to the cloud could interrupt the operation of the system and / or cause the system to malfunction.

Samenvatting van de uitvindingSummary of the Invention

Het is een doel van uitvoeringsvormen van de huidige uitvinding om een sensorsysteem voor activi- teitsherkenning verschaffen. Het bovenstaande doel wordt bereikt door een mrichting volgens uitvoeringsvormen van de huidige uitvinding.It is an object of embodiments of the present invention to provide an activity recognition sensor system. The above object is achieved by a device according to embodiments of the present invention.

De huidige uitvinding verschaft een systeem voor activiteitsherkenning. Het sensorsysteem omvat ten minste één sensor voor het verzamelen van omgevingsgegevens, een gegevensverwerkingseen- heid voor het verwerken van de verzamelde gegevens, een kenmerkextractie-eenheid voor het com- primeren van de (onbewerkte) verwerkte gegevens door het uitfilteren van voor de activiteit irrele- vante informatie uit de verwerkte gegevens, waardoor voor de activiteit relevante gegevens verkre- gen worden, en een primaire activiteitsherkenningseenheid voor het herkennen van een primaire ac- tiviteit vanuit de geëxtraheerde relevante gegevens. De primaire activiteitsherkenningseenheid is on- derdeel van het sensorsysteem of, met andere woorden, bevindt zich in het sensorsysteem. Zodoende is de primaire activiteitsherkenningseenheid onderdeel van het sensorsysteem en bevindt het zich dicht bij de sensor in dezelfde eenheid. Met andere woorden, alle gegevensverwerking wordt intern in het sensorsysteem uitgevoerd. Met primaire activiteit wordt een basale activiteit bedoeld, zoals bijvoorbeeld, maar niet beperkt tot, een deur die geopend of gesloten wordt, water stromende uit cen waterkraan, een lamp die brandt, hoge relatieve vochtigheid in een kamer, stijgende tempera- tuur in een kamer, … .The present invention provides an activity recognition system. The sensor system comprises at least one sensor for collecting environmental data, a data processing unit for processing the collected data, a feature extraction unit for compressing the (raw) processed data by filtering out irrelevant for the activity. information from the processed data, thereby obtaining data relevant to the activity, and a primary activity recognition unit for recognizing a primary activity from the extracted relevant data. The primary activity recognition unit is part of the sensor system or, in other words, is located in the sensor system. Thus, the primary activity recognition unit is part of the sensor system and is located close to the sensor in the same unit. In other words, all data processing is performed internally in the sensor system. By primary activity is meant a basic activity, such as, but not limited to, a door being opened or closed, water flowing from a water tap, a lamp lit, high relative humidity in a room, rising temperature in a room ,….

Een voordeel van een sensorsysteem volgens uitvoeringsvormen van de uitvinding 1s dat verwerking van de gegevens verzameld door de ten minste één akoestische sensor in de sensormodule dicht bij de sensor bij het uiterste randniveau uitgevoerd wordt, of met andere woorden lokaal wordt uitge- voerd. Er worden geen gegevens naar de cloud overgedragen, wat de veiligheid verhoogt en een betere bescherming voor de gegevens van een gebruiker biedt. Bovendien zijn mensen geneigd zich beter op hun gemak te voelen wanneer ze zich realiseren dat hun gegevens niet over het internet overgedragen worden.An advantage of a sensor system according to embodiments of the invention is that processing of the data collected by the at least one acoustic sensor in the sensor module is carried out close to the sensor at the extreme edge level, or in other words is performed locally. No data is transferred to the cloud, which increases security and provides better protection for a user's data. In addition, people tend to feel more comfortable when they realize that their data is not being transferred over the internet.

Een verder voordeel is ook dat het een eenvoudiger systeem 1s, omdat er geen verbinding met de cloud of een ander systeem op afstand gemaakt hoeft te worden om het sensorsysteem volgens uit- voeringsvormen van de uitvinding te laten werken.A further advantage is also that it is a simpler system, as there is no need to establish a connection to the cloud or other remote system for the sensor system to operate according to embodiments of the invention.

Volgens uitvoeringsvormen van de uitvinding kan de gegevensverwerkingseenheid een middel voor het verzamelen van gegevens ontvangen vanaf de ten minste één sensor, en cen A/D-omzetter voor het omzetten van de verzamelde gegevens omvatten.According to embodiments of the invention, the data processing unit may comprise means for collecting data received from the at least one sensor, and an A / D converter for converting the collected data.

De kenmerkextractie-eenheid kan een middel omvatten voor het omzetten van de A/D-verwerkte gegevens in overlappende kaders, een detectoreenheid voor het evalueren van elk van de overlap- pende kaders, en een extractie-eenheid voor het extraheren van voor de activiteit relevante kaders vanuit de overlappende kaders.The feature extraction unit may include a means for converting the A / D processed data into overlapping frames, a detector unit for evaluating each of the overlapping frames, and an extraction unit for extracting activity relevant frames from the overlapping frames.

Volgens uitvoeringsvormen van de uitvinding kan het sensorsysteem verder ten minste één verdere sensor, en een verdere gegevensverwerkingseenheid en een verdere kenmerkextractie-eenheid voor elk van de ten minste één verdere sensor omvatten.According to embodiments of the invention, the sensor system may further comprise at least one further sensor, and a further data processing unit and a further feature extraction unit for each of the at least one further sensor.

Zodoende is voor elke sensor aanwezig in het sensorsysteem, een gegevensverwerkingseenheid en een kenmerkextractie-eenheid verschaft. Elk van de sensoren heeft dus zijn eigen gegevensverwer- kingseenheid en kenmerkextractie-eenheid. Een voordeel van een akoestische sensormodule volgens dergelijke uitvoeringsvormen van de uitvinding is dat het geluidsgebeurtenissen op basis van multi- model-sensorgegevens detecteert. Hierdoor kan de detectierobuustheid verhoogd worden.Thus, for each sensor present in the sensor system, a data processing unit and a feature extraction unit are provided. Thus, each of the sensors has its own data processing unit and feature extraction unit. An advantage of an acoustic sensor module according to such embodiments of the invention is that it detects sound events based on multi-model sensor data. This can increase detection robustness.

Volgens nog verdere uitvoeringsvormen kan het sensorsysteem verder een secundaire activiteitsher- kenningseenheid omvatten voor het bepalen, vanuit een combinatie van elk van de primaire activi- teiten herkend door de primaire herkenningseenheid, van een secundaire activiteit op een hoger m- veau.In still further embodiments, the sensor system may further include a secondary activity recognition unit for determining, from a combination of each of the primary activities recognized by the primary recognition unit, a secondary activity at a higher level.

Met secundaire activiteit op een hoger niveau wordt een activiteit bedoeld die vanuit een combinatie van ten minste twee primaire activiteiten afgeleid kan worden.By secondary activity at a higher level is meant an activity that can be derived from a combination of at least two primary activities.

Volgens uitvoeringsvormen van de uitvinding kan de secundaire activiteitsherkenningseenheid deel uitmaken van het sensorsysteem of, met andere woorden, kan het zich in het sensorsysteem bevinden. Volgens andere uitvoermgsvormen van de uitvinding kan de secundaire activiteitsherkenningseen- heid op een locatie op afstand van het sensorsysteem verschaft worden, zoals bijv. in een toegangs- poort of in de cloud.According to embodiments of the invention, the secondary activity recognition unit may be part of the sensor system or, in other words, it may be in the sensor system. In accordance with other embodiments of the invention, the secondary activity recognition unit may be provided at a remote location from the sensor system, such as, for example, in an access gate or in the cloud.

Het sensorsysteem kan verder een geheugen voor het opslaan van parameters van de relevante gege- vens en gecorreleerde primaire en/of secundaire activiteiten omvatten.The sensor system may further include a memory for storing parameters of the relevant data and correlated primary and / or secondary activities.

Bovendien kan het sensorsysteem verder een trainingseenheid omvatten voor het bijwerken, vanuit daaropvolgende relevante gegevens en gecorreleerde primaire en/of secundaire activiteiten, van de opgeslagen parameters voor verbeterde prestaties.In addition, the sensor system may further include a training unit for updating, from subsequent relevant data and correlated primary and / or secondary activities, the stored parameters for improved performance.

Het sensorsysteem kan verder een communicatie-eenheid voor het verzenden van signalen die repre- sentatief zijn voor de primaire en/of secundaire activiteit naar een elektrische of elektronische in- richtmg verzenden. Dit kan bijvoorbeeld het verzenden van een notificatie naar bijv. een smartphone, een tablet of een andere geschikte inrichting voor het notificeren van een gebruiker zijn, bijv. van 1emand die het huis binnenkomt, een temperatuur die stijgt in een huis, water dat stroomt, of iets dergelijks. Volgens andere uitvoermgsvormen kan het verzenden van een signaal een signaal naar een elektrische of elektronische inrichting op afstand voor het starten van een actie zijn. Bijvoorbeeld, maar niet beperkt tot, wanneer het sensorsysteem detecteert dat een deur geopend 1s, kan besloten worden dat iemand het huis binnenkomt en kan een signaal naar een thermostaat om het huis te verwarmen verzonden worden.The sensor system may further transmit a communication unit for transmitting signals representative of the primary and / or secondary activity to an electrical or electronic device. This could be, for example, sending a notification to e.g. a smartphone, a tablet or any other suitable device for notifying a user, e.g. someone entering the house, a temperature rising in a house, water flowing, or the like. In other embodiments, the sending of a signal may be a signal to a remote electrical or electronic device to initiate an action. For example, but not limited to, when the sensor system detects that a door is open 1s, it can decide that someone is entering the house and send a signal to a thermostat to heat the house.

Volgens uitvoeringsvormen van de uitvinding kan elk van de ten minste één sensor van het sensor- systeem zich binnen het sensorsysteem bevinden. Volgens andere uitvoeringsvormen kan echter ten minste één van de ten minste één sensor zich buiten het sensorsysteem bevinden. Sensoren die reeds in een huis of gebouw aanwezig zijn kunnen bijvoorbeeld ook gebruikt worden voor het verzenden van sensorgegevens naar het sensorsysteem, om de activiteit te helpen herkennen. Volgens uitvoeringsvormen van de uitvinding kan de ten minste één sensor ten minste één tempera- tuursensor, een CO:-sensor, een relatieve vochtigheidssensor, een akoestische sensor, een VOC-sen- sor of dergelijke zijn. Volgens uitvoermgsvormen van de uitvinding kan het sensorsysteem een op zichtzelf staand systeem zijn. Volgens andere uitvoeringsvormen kan het sensorsysteem onderdeel van een domoticasysteem uitmaken. Korte beschrijving van de tekeningen Er moet opgemerkt worden dat gelijke referentietekens in de verschillende afbeeldingen verwijzen naar dezelfde, soortgelijke of analoge elementen.In accordance with embodiments of the invention, any of the at least one sensor of the sensor system can be located within the sensor system. However, in other embodiments, at least one of the at least one sensor may be outside the sensor system. For example, sensors that are already in a house or building can also be used to send sensor data to the sensor system to help recognize the activity. According to embodiments of the invention, the at least one sensor may be at least one temperature sensor, a CO 2 sensor, a relative humidity sensor, an acoustic sensor, a VOC sensor, or the like. In accordance with embodiments of the invention, the sensor system may be a self-contained system. According to other embodiments, the sensor system can form part of a home automation system. Brief Description of the Drawings It should be noted that like reference characters in the different figures refer to the same, like or analogous elements.

Fig. 1 illustreert een detectiesysteem volgens de laatste stand der techniek.FIG. 1 illustrates a state of the art detection system.

Fig. 2 toont de hiërarchische benadermg van een sensorsysteem volgens uitvoeringsvormen van de uitvinding.FIG. 2 shows the hierarchical approach to a sensor system according to embodiments of the invention.

Fis. 3 illustreert schematisch een sensorsysteem volgens een uitvoeringsvorm van de uitvinding. Fig. 4 illustreert schematisch een sensorsysteem volgens een uitvoeringsvorm van de uitvinding. Fig. 5 illustreert schematisch een sensorsysteem volgens een uitvoeringsvorm van de uitvinding. Fig. 6 toont de hiërarchische benadermg van een sensorsysteem volgens uitvoeringsvormen van de uitvinding.Fis. 3 schematically illustrates a sensor system according to an embodiment of the invention. FIG. 4 schematically illustrates a sensor system according to an embodiment of the invention. FIG. 5 schematically illustrates a sensor system according to an embodiment of the invention. FIG. 6 shows the hierarchical approach to a sensor system according to embodiments of the invention.

Fig. 7 illustreert schematisch een sensorsysteem volgens een uitvoeringsvorm van de uitvinding. Fig. 8 illustreert schematisch een sensorsysteem volgens een uitvoeringsvorm van de uitvinding. Beschrijving van illustratieve uitvoeringsvormen In de beschrijving worden verschillende uitvoeringsvormen gebruikt voor het beschrijven van de uitvinding. Daarom zal er naar verschillende tekeningen verwezen worden. Het is wel verstaan dat deze tekenmgen niet-beperkend bedoeld zijn, waarbij de uitvinding alleen door de conclusies beperkt wordt. De tekeningen zijn dus voor illustratieve doeleinden, waarbij de afmetingen van sommige elementen in de tekeningen voor verduidelijkende doeleinden overdreven kunnen zijn.FIG. 7 schematically illustrates a sensor system according to an embodiment of the invention. FIG. 8 schematically illustrates a sensor system according to an embodiment of the invention. Description of Illustrative Embodiments Various embodiments are used in the description to describe the invention. Therefore, various drawings will be referred to. It is understood that these symbols are not intended to be limiting, the invention being limited only by the claims. Thus, the drawings are for illustrative purposes, with the dimensions of some elements in the drawings being exaggerated for illustrative purposes.

De term “omvattende” mag op geen enkele wijze geïnterpreteerd worden als beperkend voor de uit- vinding. De term “omvattende”, die in de conclusies gebruikt wordt, is niet bedoeld om beperkend te zijn op de middelen die daama beschreven worden; het sluit geen andere elementen, onderdelen of stappen uit.The term “comprising” should in no way be construed as limiting the invention. The term "comprising" as used in the claims is not intended to be limiting of the agents hereinafter described; it does not exclude other elements, parts or steps.

De term “verbonden” zoals deze in de conclusies en in de beschrijving gebruikt wordt mag, tenzij anders aangegeven, niet geïnterpreteerd worden als zijnde beperkt tot directe verbindingen. Onder- deel A dat verbonden is met onderdeel B is dus niet beperkt tot onderdeel A dat in direct contact staat met onderdeel B, maar omvat ook indirect contact tussen onderdeel A en onderdeel B en omvat met andere woorden ook het geval waarin tussenliggende onderdelen aanwezig zijn tussen onderdeel A en onderdeel B m.The term "connected" as used in the claims and in the description, unless otherwise indicated, should not be construed as being limited to direct connections. Thus, part A connected to part B is not limited to part A in direct contact with part B, but also includes indirect contact between part A and part B, in other words also includes the case where intermediate parts are present between part A and part B m.

Niet alle uitvoeringsvormen van de uitvinding omvatten alle kenmerken van de uitvinding. In de volgende beschrijving en conclusies kunnen alle geconcludeerde uitvoeringsvormen bijvoorbeeld in een combinatie gebruikt worden.Not all embodiments of the invention include all features of the invention. For example, in the following description and claims, all of the claimed embodiments can be used in a combination.

De huidige uitvinding verschaft een sensorsysteem voor activiteitsherkenning. Het sensorsysteem 5 omvat ten minste één sensor voor het verzamelen van omgevingsgegevens, een gegevensverwer- kingseenheid voor het verwerken van de verzamelde gegevens, een kenmerkextractie-eenheid voor het comprimeren van de verwerkte gegevens door het uitfilteren van de verwerkte voor de activiteit irrelevante gegevensinformatie, waardoor voor de activiteit relevante gegevens verkregen worden, en een primaire activiteitsherkenningseenheid voor het herkennen, vanuit de geëxtraheerde relevante gegevens, van een primaire activiteit. De primaire activiteitsherkenningseenheid is onderdeel van het sensorsysteem of, met andere woorden, bevindt zich in het sensorsysteem.The present invention provides an activity recognition sensor system. The sensor system 5 comprises at least one sensor for collecting environmental data, a data processing unit for processing the collected data, a feature extraction unit for compressing the processed data by filtering out the processed data information irrelevant to the activity, thereby data relevant to the activity are obtained, and a primary activity recognition unit for recognizing, from the extracted relevant data, a primary activity. The primary activity recognition unit is part of the sensor system or, in other words, it is located in the sensor system.

Zodoende is de primaire activiteitsherkenningseenheid onderdeel van het sensorsysteem en bevindt het zich dicht bij de sensor in dezelfde eenheid. Met andere woorden, alle gegevensverwerking wordt intern in het sensorsysteem uitgevoerd. Met primaire activiteit wordt een basale activiteit bedoeld, zoals bijvoorbeeld, maar niet beperkt tot, een deur die geopend of gesloten wordt, water stromende uit cen waterkraan, een lamp die brandt, hoge relatieve vochtigheid in een kamer, stijgende tempera- tuur in een kamer, … .Thus, the primary activity recognition unit is part of the sensor system and is located close to the sensor in the same unit. In other words, all data processing is performed internally in the sensor system. By primary activity is meant a basic activity, such as, but not limited to, a door being opened or closed, water flowing from a water tap, a lamp lit, high relative humidity in a room, rising temperature in a room ,….

Een voordeel van een sensorsysteem volgens uitvoeringsvormen van de uitvinding is dat verwerking van de gegevens verzameld door de ten minste één akoestische sensor in de sensormodule dicht bij de sensor bij het uiterste randniveau uitgevoerd wordt, of met andere woorden lokaal wordt uitge- voerd. Er worden geen gegevens naar de cloud overgedragen, wat de veiligheid verhoogt en een betere bescherming voor de gegevens van een gebruiker biedt. Zodoende wordt de privacy van de gebruiker verbeterd ten opzichte van sensorsystemen volgens de laatste stand der techniek. Boven- dien zijn mensen geneigd zich beter op hun gemak te voelen wanneer ze zich realiseren dat hun gegevens niet over het internet overgedragen worden.An advantage of a sensor system according to embodiments of the invention is that processing of the data collected by the at least one acoustic sensor in the sensor module is performed close to the sensor at the extreme edge level, or in other words is performed locally. No data is transferred to the cloud, which increases security and provides better protection for a user's data. Thus, user privacy is improved over state of the art sensor systems. In addition, people tend to feel more comfortable when they realize that their data is not being transferred over the Internet.

Een verder voordeel is ook dat het een eenvoudiger systeem 1s, omdat er geen verbinding met de cloud of een ander systeem op afstand gemaakt hoeft te worden om het sensorsysteem volgens uit- voeringsvormen van de uitvinding te laten werken. Zodoende is een onderbreking in de verbinding met de cloud niet van invloed op de werking van het sensorsysteem.A further advantage is also that it is a simpler system, as there is no need to establish a connection to the cloud or other remote system for the sensor system to operate according to embodiments of the invention. Thus, an interruption in the connection to the cloud does not affect the operation of the sensor system.

De huidige uitvinding wordt hierna beschreven door middel van verschillende uitvoeringsvormen. Het is wel verstaan dat deze uitvoeringsvormen uitsluitend bedoeld zijn om de uitvinding te begrijpen en niet bedoeld zijn om de uitvinding op enige wijze te beperken.The present invention is described below by means of various embodiments. It is understood that these embodiments are for the understanding of the invention only and are not intended to limit the invention in any way.

Fig. 2 illustreert een hiërarchische benadering volgens één uitvoeringsvorm van de uitvinding. Het is de bedoeling om omgevingsinformatie te verzamelen door middel van ten minste één sensor. Van- uit de gegevens verzameld door de ten minste één sensor worden primaire activiteiten gedetecteerd of herkend bij het uiterste randniveau, d.w.z. lokaal in het sensorsysteem. Met primaire activiteiten worden basale, simpele activiteiten bedoeld, zoals bijv. voetstappen, spraak, lopende kraan, ventilatie actief, afzuigkap actief, gasfornuis actief, temperatuur stijgt, CO:-gehalte stijgt, toilet doorspoelen, openen of sluiten van een deur of raam, de deur vergrendelen of ontgrendelen met een sleutel en dergelijke.FIG. 2 illustrates a hierarchical approach according to one embodiment of the invention. The intention is to collect environmental information by means of at least one sensor. From the data collected by the at least one sensor, primary activities are detected or recognized at the extreme edge level, i.e. locally in the sensor system. Primary activities refer to basic, simple activities, such as footsteps, speech, running tap, ventilation active, extractor hood active, gas stove active, temperature rises, CO: content rises, flushing the toilet, opening or closing a door or window, lock or unlock the door with a key or the like.

Het bovenstaande kan gedaan worden met een sensorsysteem volgens uitvoeringsvormen van de uitvinding.The above can be done with a sensor system according to embodiments of the invention.

Fig. 3 illustreert een sensorsysteem 1 volgens een eerste uitvoeringsvorm. Het sensorsysteem 1 vol- gens deze uitvoeringsvorm omvat één sensor S voor het verzamelen van omgevingsgegevens. De ten minste één sensor S, kan, bijvoorbeeld, één van een temperatuursensor, een COz-sensor, een relatieve vochtigheidssensor, een akoestische sensor, een VOC-sensor of dergelijke zijn. Het sensorsysteem 1 omvat verder een gegevensverwerkingseenheid 3 voor het verwerken van de omgevingsgegevens verzameld door de sensor S1. Volgens uitvoermgsvormen van de uitvinding kan de gegevensverwer- kingseenheid 3 een middel 4 voor het verzamelen van gegevens ontvangen vanaf de sensor Si en een A/D-omzetter 5 voor het omzetten van de verzamelde gegevens omvatten. Het sensorsysteem 1 om- vat verder een kenmerkextractiesysteem 6 voor het uitfilteren van voor de activiteit irrelevante in- formatie uit de A/D-verwerkte gegevens, waarna alleen voor de activiteit relevante gegevens in de gegevens die verder binnen het sensorsysteem 1 verwerkt worden overblijven. Het kenmerkextrac- tiesysteem 6 kan een middel 7 omvatten voor het omzetten van de A/D-verwerkte gegevens in over- lappende kaders, een detectoreenheid 8 voor het evalueren van elk van de kaders en een extractie- eenheid 9 voor het extraheren van voor de activiteit relevante kaders vanuit de kaders.FIG. 3 illustrates a sensor system 1 according to a first embodiment. The sensor system 1 according to this embodiment comprises one sensor S for collecting environmental data. The at least one sensor S may be, for example, one of a temperature sensor, a CO2 sensor, a relative humidity sensor, an acoustic sensor, a VOC sensor or the like. The sensor system 1 further comprises a data processing unit 3 for processing the environmental data collected by the sensor S1. According to embodiments of the invention, the data processing unit 3 may comprise a means 4 for collecting data received from the sensor S 1 and an A / D converter 5 for converting the collected data. The sensor system 1 further comprises a feature extraction system 6 for filtering out information irrelevant to the activity from the A / D-processed data, after which only data relevant to the activity remains in the data further processed within the sensor system 1. The feature extraction system 6 may comprise a means 7 for converting the A / D processed data into overlapping frames, a detector unit 8 for evaluating each of the frames and an extraction unit 9 for extracting for the activity relevant frameworks from the frameworks.

Het sensorsysteem 1 omvat verder een primaire activiteitsherkenningseenheid 10 voor het herken- nen, vanuit de geëxtraheerde voor de activiteit relevante gegevens, van een primaire activiteit. Met primaire activiteit wordt een basale activiteit bedoeld, zoals bijvoorbeeld, maar niet beperkt tot, een deur die geopend of gesloten wordt, water stromende uit een waterkraan, een lamp die brandt, hoge relatieve vochtigheid in een kamer, stijgende temperatuur in een kamer, … . Volgens de uitvinding 1s de primaire activiteitsherkenningseenheid 10 onderdeel van het sensorsysteem 1 of, met andere woorden, bevindt zich in het sensorsysteem. Zodoende, is de primaire activiteitsherkenningseenheid 10 onderdeel van het sensorsysteem 1 en bevindt het zich dicht bij de sensor S; in dezelfde eenheid. Met andere woorden, wordt alle gegevensverwerking voor het bepalen of herkennen van de primaire activiteit intern in het sensorsysteem uitgevoerd.The sensor system 1 further comprises a primary activity recognition unit 10 for recognizing, from the extracted data relevant for the activity, a primary activity. Primary activity refers to a basic activity, such as, but not limited to, a door that is opened or closed, water flowing from a water tap, a lamp that is on, high relative humidity in a room, rising temperature in a room, ... . According to the invention, the primary activity recognition unit 10 is part of the sensor system 1 or, in other words, is located in the sensor system. Thus, the primary activity recognition unit 10 is part of the sensor system 1 and is located close to the sensor S; in the same unit. In other words, all data processing for determining or recognizing the primary activity is performed internally in the sensor system.

De A/D-verwerkte gegevens worden dus in de kenmerkextractie-eenheid 6 in kleine stukjes, de ka- ders, gehakt. Op basis van een set kaders, kan een activiteit, bijv. geluid, herkend worden. Alleen de kaders met voldoende signaalenergie of signaaldruk worden echter gebruikt voor dergelijke activi- teitsherkenning. Met andere woorden, wordt een set van kaders waar de signaalenergie te laag is, niet naar de primaire activiteitsherkenningseenheid 10 verzonden. Op deze wijze, kan het aantal verwer- kingsstappen in de primaire activiteitsherkenningseenheid 10 tot een minimum beperkt worden. Dit 1s een groot voordeel aangezien de primaire activiteitsherkenningseenheid 10 van het sensorsysteem 1 deel uitmaakt. Op die wijze kan verwarming vanwege de verwerking laag gehouden worden.The A / D processed data is thus chopped in the feature extraction unit 6 into small pieces, the frames. Based on a set of frames, an activity, eg sound, can be recognized. However, only the frames with sufficient signal energy or signal pressure are used for such activity recognition. In other words, a set of frames where the signal energy is too low is not sent to the primary activity recognition unit 10. In this way, the number of processing steps in the primary activity recognition unit 10 can be kept to a minimum. This is a great advantage since the primary activity recognition unit 10 is part of the sensor system 1. In this way heating can be kept low because of the processing.

Het primaire activiteitsherkenningssysteem 10 kan als een kunstmatige intelligentie-cenheid gezien worden.The primary activity recognition system 10 can be seen as an artificial intelligence unit.

Machine-leren wordt op gegevenskaders toegepast voor het herkennen of detecteren van de relevante activiteit.Machine learning is applied to data frames to recognize or detect the relevant activity.

Volgens uitvoermgsvormen van de uitvinding kan het sensorsysteem 1 verder een geheugen voor het opslaan van parameters van de relevante gegevens en gecorreleerde primaire activiteit omvatten.According to embodiments of the invention, the sensor system 1 may further comprise a memory for storing parameters of the relevant data and correlated primary activity.

Het sensorsysteem 1 kan verder ook een trainmgseenheid 12 omvatten voor het bijwerken, vanuit daar- opvolgende relevante gegevens en gecorreleerde primaire activiteiten, van de opgeslagen parameters voor verbeterde prestaties.The sensor system 1 may further include a training unit 12 for updating, from subsequent relevant data and correlated primary activities, the stored parameters for improved performance.

Activiteiten worden dan efficiënter en correcter herkend door het verge- lijken van de A/D-verwerkte kenmerken met een gegevensbank van kenmerken gerelateerd aan ac- tiviteiten die in het sensorsysteem 1 opgeslagen worden.Activities are then recognized more efficiently and correctly by comparing the A / D-processed features with a database of features related to activities stored in the sensor system 1.

Het sensorsysteem 10 kan verder een communicatie-eenheid 12 voor het verzenden van signalen die representatief zijn voor de primaire activiteit naar een elektrische of elektronische inrichtmg op af- stand.The sensor system 10 may further include a communication unit 12 for transmitting signals representative of the primary activity to a remote electrical or electronic device.

Volgens uitvoermgsvormen van de uitvinding kan de communicatie-eenheid 13 mgericht zijn voor het verzenden van een notificatie naar de inrichting op afstand om een gebruiker te notificeren van de herkende primaire activiteit.According to embodiments of the invention, the communication unit 13 may be directed to send a notification to the remote device to notify a user of the recognized primary activity.

Een gebruiker kan vanaf het sensorsysteem 1 bijvoorbeeld een notificatie op zijn/haar smartphone of tablet ontvangen, dat gedetecteerd is dat een waterkraan loopt.A user can for instance receive a notification on his / her smartphone or tablet from the sensor system 1 that a water tap has been detected.

Een ander voorbeeld kan zijn dat een gebruiker op zijn/haar smartphone of tablet een notificatie ontvangt dat een deur geopend of gesloten is.Another example could be that a user receives a notification on his / her smartphone or tablet that a door has been opened or closed.

Volgens andere uitvoeringsvormen van de uitvinding kan de communicatie-eenheid 13 ingericht zijn voor het verzenden van een signaal naar de op afstand gelegen of elektronische richting om een actie te starten.In accordance with other embodiments of the invention, the communication unit 13 may be arranged to send a signal to the remote or electronic direction to initiate an action.

Wanneer bijvoorbeeld gedetecteerd wordt dat het donker wordt, kan een signaal naar een verlichtingsinrichting verzonden worden om in te schakelen en/of kan een signaal naar jaloezieën verzonden worden om omlaag te gaan.For example, when it is detected that it is getting dark, a signal can be sent to a lighting device to turn on and / or a signal can be sent to blinds to lower.

Volgens een verdere uitvoeringsvorm kan het sensorsysteem 1 meerdere sensoren Si, S2, …, Sn om- vatten.According to a further embodiment, the sensor system 1 may comprise a plurality of sensors S1, S2, ..., Sn.

Dit is schematisch geïllustreerd in Fig. 4. Elk aantal sensoren S1, S2, …, Sn kan gecombineerd worden.This is schematically illustrated in Fig. 4. Any number of sensors S1, S2,…, Sn can be combined.

Voor elk van de sensoren Si, S>, … Sn is een gegevensverwerkingseenheid 3 en een ken- merkextractie-eenheid 9 verschaft.A data processing unit 3 and a feature extraction unit 9 are provided for each of the sensors S1, S>,… Sn.

Zodoende, heeft elke sensor 1 zijn eigen gegevensverwerkings- eenheid 3 en kenmerkextractie-eenheid 9. Het sensorsysteem 1 volgens deze uitvoeringsvorm omvat verder een primaire activiteitsherken- ningseenheid 10 zoals hierboven beschreven is.Thus, each sensor 1 has its own data processing unit 3 and feature extraction unit 9. The sensor system 1 according to this embodiment further includes a primary activity recognition unit 10 as described above.

Het sensorsysteem 1 kan verder, zoals ook hierboven beschreven is, verder een geheugen 11, een trainingseenheid 12 en een communicatie-eenheid 13 omvatten.The sensor system 1 may further comprise a memory 11, a training unit 12 and a communication unit 13, as also described above.

In het voorbeeld van Fig. 4 wordt, voor elk van de sensoren S1, Sz, ..., Sn, cen primaire activiteit herkend of gedetecteerd.In the example of Fig. 4, for each of the sensors S1, Sz, ..., Sn, a primary activity is recognized or detected.

Sensor S, kan bijvoorbeeld een temperatuursensor zijn, waardoor de pri- maire activiteit gedetecteerd door het sensorsysteem S kan zijn dat, bijvoorbeeld, de temperatuur stijgt.Sensor S, may be, for example, a temperature sensor, whereby the primary activity detected by the sensor system S may be that, for example, the temperature is rising.

De tweede sensor Sa kan, bijvoorbeeld, een omgevingssensor zijn en de primaire activiteit gedetecteerd door het sensorsysteem 1 kan zijn dat de gasconcentratie toeneemt, … Daarom leidt elk van de sensoren S1, S2, … Sn naar een andere primaire activiteit.The second sensor Sa may be, for example, an environmental sensor, and the primary activity detected by the sensor system 1 may be that the gas concentration is increasing, ... Therefore, each of the sensors S1, S2, ... leads Sn to a different primary activity.

Volgens een verdere uitvoeringsvorm kan het sensorsysteem 1 ingericht zijn voor sensorfusie.According to a further embodiment, the sensor system 1 can be adapted for sensor fusion.

Met sensorfusie wordt bedoeld dat resultaten van ten minste twee sensoren gecombineerd worden om tot één resultaat te komen, d.w.z. tot één primaire activiteit.By sensor fusion it is meant that results from at least two sensors are combined to arrive at one result, i.e., one primary activity.

Dit is geïllustreerd in Fig. 5. De primaire activiteitsherkenningseenheid 10 kan, volgens deze uitvoeringsvorm, ingericht zijn om, vanuit de geëxtraheerde kenmerken van gegevens van verschillende sensoren, een primaire activiteit te detec- teren.This is illustrated in Fig. 5. The primary activity recognition unit 10 may, according to this embodiment, be arranged to detect, from the extracted features of data from different sensors, a primary activity.

Volgens een verdere uitvoeringsvorm wordt een verdere stap in de hiërarchische benadering gezet, zoals geïllustreerd in Fig. 6. Volgens deze uitvoeringsvorm kan het sensorsysteem 1 verder een se- cundaire activiteitsherkenningseenheid 14 omvatten, zoals schematisch geïllustreerd in Fig. 7. De tweede activiteitsherkenningseenheid 14 is mgericht om, vanuit een combinatie van elk van de pri- maire activiteiten die door de primaire activiteitsherkenningseenheid 10 herkend worden, een secun- daire activiteit op een hoger niveau te bepalen.According to a further embodiment, a further step is taken in the hierarchical approach, as illustrated in FIG. 6. According to this embodiment, the sensor system 1 may further comprise a secondary activity recognition unit 14, as schematically illustrated in FIG. 7. The second activity recognition unit 14 is adapted to determine, from a combination of each of the primary activities recognized by the primary activity recognition unit 10, a secondary activity at a higher level.

Met secundaire activiteit op een hoger niveau wordt een activiteit bedoeld die vanuit een combinatie van ten minste twee primaire activiteiten afgeleid kan worden.By secondary activity at a higher level is meant an activity that can be derived from a combination of at least two primary activities.

Een secundaire activiteit op een hoger niveau is complexer dan een primaire, basale activiteit.A secondary activity at a higher level is more complex than a primary, basic activity.

Een secundaire activiteit op een hoger niveau kan, bijvoorbeeld, gasfornuisactiviteit die is afgeleid vanuit primaire activiteiten, zoals toename van temperatuur, geluid (van gas), en toename van de gasconcentratie zijn.A secondary activity at a higher level can be, for example, gas stove activity derived from primary activities such as increase in temperature, noise (of gas), and increase in gas concentration.

Een ander voorbeeld kan, bijvoorbeeld, aanwezigheidsvoorspelling als een secundaire activiteit op een hoger niveau bepaald vanuit primaire activiteiten, zoals CO:-toe- name, toename van relatieve vochtigheid en temperatuurstijging zijn.Another example can be, for example, presence prediction as a secondary activity at a higher level determined from primary activities, such as CO 2 increase, relative humidity increase and temperature rise.

Een ander voorbeeld kan een abnormaal waterverbruik als een secundaire activiteit op een hoger niveau zijn, bepaald vanuit pri- maire activiteiten zoals waterlekkage.Another example may be abnormal water consumption as a secondary activity at a higher level, determined from primary activities such as water leakage.

Volgens uitvoeringsvormen van de uitvinding kan de secundaire activiteitsherkenningseenheid 14 deel uitmaken van het sensorsysteem 1 of, met andere woorden, kan het zich in het sensorsysteem 1 bij de locatie van het sensorsysteem 1 (zie Fig. 7) bevinden.According to embodiments of the invention, the secondary activity recognition unit 14 may be part of the sensor system 1 or, in other words, it may be located in the sensor system 1 at the location of the sensor system 1 (see Fig. 7).

In dergelijke gevallen, wordt alle ver- werking binnen het sensorsysteem 1 uitgevoerd en is geen internet- of cloudverbinding vereist voor goede werking van het sensorsysteem 1. Volgens andere uitvoeringsvormen van de uitvinding kan de secundaire activiteitsherkenningseenheid 14 op een locatie op afstand verschaft zijn, met andere woorden, maakt het geen deel uit van het sensorsysteem.In such cases, all processing is performed within the sensor system 1 and no internet or cloud connection is required for proper operation of the sensor system 1. According to other embodiments of the invention, the secondary activity recognition unit 14 may be provided at a remote location, with in other words, it is not part of the sensor system.

Volgens deze uitvoeringsvormen kan de secundaire activiteitsherkenningseenheid 14 zich in een toegangspoort op afstand of in de cloud (zie Fig. 8) bevinden.According to these embodiments, the secondary activity recognition unit 14 may be located in a remote access port or in the cloud (see Fig. 8).

Volgens deze uitvoeringsvormen, hoewel informatie via het internet verzonden moet worden, wordt er geen cruciale privé-informatie via het internet naar de cloud of naar een toe- gangspoort op afstand verzonden, maar hoeven alleen primaire activiteiten verzonden te worden.According to these embodiments, although information must be sent over the internet, no critical private information is sent over the internet to the cloud or to a remote access port, only primary activities need to be sent.

Zodoende is een sensorsysteem 1 volgens de huidige uitvoeringsvorm nog steeds erg veilig en draagt het zorg voor de privacy van een gebruiker omdat verwerking van cruciale privégegevens volledig lokaal in het sensorsysteem 1 uitgevoerd wordt en niet via het internet naar de cloud overgebracht wordt.Thus, a sensor system 1 according to the present embodiment is still very secure and ensures the privacy of a user because processing of crucial private data is carried out completely locally in the sensor system 1 and is not transferred to the cloud via the internet.

Volgens de uitvoeringsvorm geïllustreerd in Fig. 7 en Fig. 8 kan het sensorsysteem 1 ook een geheu- gen 11 omvatten. Volgens dergelijke uitvoeringsvormen kan het geheugen 11 mgericht zijn om pa- rameters van relevante gegevens en gecorreleerde primaire en secundaire activiteiten op te slaan.According to the embodiment illustrated in FIG. 7 and FIG. 8, the sensor system 1 may also comprise a memory 11. According to such embodiments, the memory 11 may be dedicated to store parameters of relevant data and correlated primary and secondary activities.

Het sensorsysteem 1 kan ook een tramingseenheid 12 omvatten voor het bijwerken, vanuit daarop- volgende relevante gegevens en gecorreleerde primaire en/of secundaire activiteiten, van de opge- slagen parameters voor verbeterde prestaties.The sensor system 1 may also include a timing unit 12 for updating, from subsequent relevant data and correlated primary and / or secondary activities, the stored parameters for improved performance.

Nog verder, kan het sensorsysteem 1 verder een communicatie-eenheid voor het verzenden van sig- nalen die representatief zijn voor de herkende primaire en/of secundaire activiteit naar een elektrische of elektronische inrichting op afstand omvatten.Still further, the sensor system 1 may further comprise a communication unit for transmitting signals representative of the recognized primary and / or secondary activity to a remote electrical or electronic device.

Volgens uitvoermgsvormen waar het sensorsysteem 1 meer dan één sensor S1, Sa, … Sn omvat, kun- nen deze sensoren S1, S2, … Sn zich allemaal binnen het sensorsysteem 1 bevmden. Volgens andere uitvoeringsvormen kan echter ten minste één van de meerdere sensoren S1, S2, … , Sa zich buiten het sensorsysteem 1 bevinden. Reeds in een huis of gebouw bestaande sensoren kunnen geïntegreerd worden om met het sensorsysteem 1 te werken. Dit betekent dat het sensorsysteem 1 rekening kan houden met mvoer ontvangen vanaf de “externe” sensor(en) om de primaire en/of secundaire activi- teiten te bepalen.According to embodiments where the sensor system 1 comprises more than one sensor S1, Sa,… Sn, these sensors S1, S2,… Sn may all be located within the sensor system 1. However, according to other embodiments, at least one of the plurality of sensors S1, S2,…, Sa may be outside the sensor system 1. Sensors already existing in a house or building can be integrated to work with the sensor system 1. This means that the sensor system 1 can take into account the input received from the “external” sensor (s) to determine the primary and / or secondary activities.

Volgens uitvoeringsvormen van de uitvinding kan het sensorsysteem 1 een op zichzelf staand sys- teem zijn, wat betekent dat het perfect zelfstandig kan werken. Volgens andere uitvoeringsvormen kan het sensorsysteem 1 onderdeel van een domoticasysteem uitmaken.According to embodiments of the invention, the sensor system 1 can be a self-contained system, which means that it can work perfectly independently. According to other embodiments, the sensor system 1 can form part of a home automation system.

Claims (17)

CONCLUSIES l.- Sensorsysteem (1) voor activiteitsherkenning, waarbij het sensorsysteem (1) omvat: - ten minste één sensor (S1, S>, …, Sn) voor het verzamelen van omgevingsgegevens, - een gegevensverwerkingseenheid (3) voor het verwerken van de verzamelde gegevens, - een kenmerkextractie-eenheid (6) voor het uitfilteren van voor de actrviteit irrelevante in- formatie uit de A/D-verwerkte gegevens, waarna alleen voor de activiteit relevante gege- vens in de gegevens overblijven die verder worden verwerkt in het sensorsysteem (1), en - een primaire activiteitsherkenningseenheid (10) voor het herkennen, vanuit de voor de ac- tiviteit relevante gegevens, van een primaire activiteit, waarbij de primaire activitertsherkenningseenheid deel uitmaakt van het sensorsysteem (1).CONCLUSIONS 1. - Sensor system (1) for activity recognition, the sensor system (1) comprising: - at least one sensor (S1, S>,…, Sn) for collecting environmental data, - a data processing unit (3) for processing the collected data, - a feature extraction unit (6) for filtering out information irrelevant to the activity from the A / D-processed data, leaving only data relevant to the activity in the data that is further processed in the sensor system (1), and - a primary activity recognition unit (10) for recognizing, from the data relevant to the activity, a primary activity, the primary activity recognition unit being part of the sensor system (1). 2.- Sensorsysteem (1) volgens conclusie 1, waarbij de gegevensverwerkingseenheid (3) omvat: - middelen (4) voor het verzamelen van gegevens ontvangen vanaf de ten minste één sensor, en - een A/D-omzetter (5) voor het omzetten van de verzamelde gegevens.Sensor system (1) according to claim 1, wherein the data processing unit (3) comprises: - means (4) for collecting data received from the at least one sensor, and - an A / D converter (5) for the converting the collected data. 3.- Sensorsysteem (1) volgens conclusie 1 of 2, waarbij de kenmerkextractie-eenheid (6) omvat: - middel (7) om de A/D-verwerkte gegevens om te zetten m overlappende kaders, - detectoreenheid (8) voor het evalueren van elk van de kaders, en - extractie-eenheid (9) voor het extraheren van de voor de activiteit relevante kaders vanuit de kaders.Sensor system (1) according to claim 1 or 2, wherein the feature extraction unit (6) comprises: - means (7) for converting the A / D processed data into overlapping frames, - detector unit (8) for evaluating each of the frames, and - extraction unit (9) for extracting the frames relevant to the activity from the frames. 4- Sensorsysteem (1) volgens één van de voorgaande conclusies, waarbij het sensorsysteem om- vat: - ten minste één verdere sensor (S1, S2, …, Sn), en - een verdere gegevensverwerkingseenheid (3) en een verdere kenmerkextractie-eenheid (6) voor elk van de ten minste één verdere sensor (Si, S2, …, Sn).Sensor system (1) according to one of the preceding claims, wherein the sensor system comprises: - at least one further sensor (S1, S2, ..., Sn), and - a further data processing unit (3) and a further feature extraction unit (6) for each of the at least one further sensor (S1, S2, ..., Sn). 5.- Sensorsysteem (1) volgens conclusie 4, waarbij het sensorsysteem (1) verder een secundaire activiteitsherkenningseenheid (14) omvat voor het bepalen, vanuit een combinatie van elk van de primaire activiteiten herkend door de primaire herkenningseenheid (10), van een secundaire activiteit op een hoger niveau.Sensor system (1) according to claim 4, wherein the sensor system (1) further comprises a secondary activity recognition unit (14) for determining, from a combination of each of the primary activities recognized by the primary recognition unit (10), a secondary activity at a higher level. 6.- Sensorsysteem (1) volgens conclusie 5, waarbij de secundaire activiteitsherkennmgseenheid (14) deel uitmaakt van het sensorsysteem (1).Sensor system (1) according to claim 5, wherein the secondary activity recognition unit (14) is part of the sensor system (1). 7.- Sensorsysteem (1) volgens conclusie 5, waarbij de secundaire activiteitsherkenningseenheid (14) voorzien is op een locatie op afstand van het sensorsysteem (1).Sensor system (1) according to claim 5, wherein the secondary activity recognition unit (14) is provided at a location remote from the sensor system (1). 8.- Sensorsysteem (1) volgens één van de voorgaande conclusies, verder omvattende een geheu- gen (11) voor het opslaan van parameters van de relevante gegevens en gecorreleerde primaire en/of secundaire activiteiten.Sensor system (1) according to any of the preceding claims, further comprising a memory (11) for storing parameters of the relevant data and correlated primary and / or secondary activities. 9- Sensorsysteem (1) volgens conclusie 8, verder omvattende een trainingseenheid (12) voor het bijwerken van de opgeslagen parameters, vanuit opeenvolgende relevante gegevens en gecor- releerde primaire en/of secundaire activiteiten, voor een verbeterde prestatie.Sensor system (1) according to claim 8, further comprising a training unit (12) for updating the stored parameters, from successive relevant data and correlated primary and / or secondary activities, for improved performance. 10.- Sensorsysteem (1) volgens één van de voorgaande conclusies, verder omvattende een commu- nicatie-eenheid (13) voor het verzenden van signalen die representatief zijn voor de herkende primaire en/of secundaire activiteit naar een elektrische of elektronische inrichting op afstand.Sensor system (1) according to any of the preceding claims, further comprising a communication unit (13) for sending signals representative of the recognized primary and / or secondary activity to a remote electrical or electronic device . 11.- Sensorsysteem (1) volgens conclusie 10, waarbij de communicatie-eenheid (13) ingericht is voor het verzenden van een melding naar de elektrische of elektronische inrichtmg op afstand om een gebruiker op de hoogte te brengen van de herkende primaire en/of secundaire activiteit.Sensor system (1) according to claim 10, wherein the communication unit (13) is arranged to send a notification to the remote electrical or electronic device to notify a user of the recognized primary and / or secondary activity. 12.- Sensorsysteem (1) volgens conclusie 10, waarbij de communicatie-eenheid (13) ingericht is voor het verzenden van een signaal naar de elektrische of elektronische inrichting op afstand om een actie te starten.Sensor system (1) according to claim 10, wherein the communication unit (13) is arranged to send a signal to the remote electrical or electronic device to initiate an action. 13.- Sensorsysteem (1) volgens één van de voorgaande conclusies, waarbij elk van de ten minste sen sensor (Si, S>, …, Sn) zich binnen het sensorsysteem (1) bevindt.Sensor system (1) according to any of the preceding claims, wherein each of the at least sen sensor (Si, S>,…, Sn) is located within the sensor system (1). 14.- Sensorsysteem (1) volgens één van conclusies 1 tot 12, waarbij ten minste één van de ten minste één sensor (S1, S>, … , Sn) zich buiten het sensorsysteem (1) bevindt.Sensor system (1) according to any one of claims 1 to 12, wherein at least one of the at least one sensor (S1, S>,…, Sn) is located outside the sensor system (1). 15.- Sensorsysteem (1) volgens één van de voorgaande conclusies, waarbij de ten minste één sensor (S1, Sa, … Sn) ten minste één van een temperatuursensor, een CO:-sensor, een relatieve voch- tigheidssensor, een akoestische sensor, een VOC-sensor of dergelijke is.Sensor system (1) according to any of the preceding claims, wherein the at least one sensor (S1, Sa, ... Sn) contains at least one of a temperature sensor, a CO 2 sensor, a relative humidity sensor, an acoustic sensor , a VOC sensor or the like. 16.- Sensorsysteem (1) volgens één van de voorgaande conclusies, waarbij het sensorsysteem (1) een op zichzelf staand systeem is.Sensor system (1) according to any of the preceding claims, wherein the sensor system (1) is a stand-alone system. 17.- Sensorsysteem (1) volgens één van de voorgaande conclusies, waarbij het sensorsysteem (1) deel uitmaakt van een automatiseringssysteem.Sensor system (1) according to any of the preceding claims, wherein the sensor system (1) is part of an automation system.
BE20195453A 2019-07-14 2019-07-14 SENSOR SYSTEM FOR ACTIVITY RECOGNITION BE1027428B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
BE20195453A BE1027428B1 (en) 2019-07-14 2019-07-14 SENSOR SYSTEM FOR ACTIVITY RECOGNITION
EP20185382.7A EP3767602A1 (en) 2019-07-14 2020-07-10 Sensor system for activity recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
BE20195453A BE1027428B1 (en) 2019-07-14 2019-07-14 SENSOR SYSTEM FOR ACTIVITY RECOGNITION

Publications (2)

Publication Number Publication Date
BE1027428A1 true BE1027428A1 (en) 2021-02-05
BE1027428B1 BE1027428B1 (en) 2021-02-11

Family

ID=68295882

Family Applications (1)

Application Number Title Priority Date Filing Date
BE20195453A BE1027428B1 (en) 2019-07-14 2019-07-14 SENSOR SYSTEM FOR ACTIVITY RECOGNITION

Country Status (2)

Country Link
EP (1) EP3767602A1 (en)
BE (1) BE1027428B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180306609A1 (en) 2017-04-24 2018-10-25 Carnegie Mellon University Virtual sensor system

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2264988A1 (en) * 2009-06-18 2010-12-22 Deutsche Telekom AG Method of detecting a current user activity and environment context of a user of a mobile phone using an accelerator sensor and a microphone, computer program product, and mobile phone
US8948783B2 (en) * 2013-06-28 2015-02-03 Facebook, Inc. User activity tracking system
US10896756B2 (en) * 2015-04-21 2021-01-19 Washington State University Environmental sensor-based cognitive assessment
EP3433774A1 (en) * 2016-03-22 2019-01-30 Koninklijke Philips N.V. Automated procedure-determination and decision-generation
EP3223253A1 (en) * 2016-03-23 2017-09-27 Thomson Licensing Multi-stage audio activity tracker based on acoustic scene recognition
CN110248593B (en) * 2017-02-14 2022-07-08 松下知识产权经营株式会社 Communication device, abnormality notification system, and method for generating history data of body temperature

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180306609A1 (en) 2017-04-24 2018-10-25 Carnegie Mellon University Virtual sensor system

Also Published As

Publication number Publication date
EP3767602A1 (en) 2021-01-20
BE1027428B1 (en) 2021-02-11

Similar Documents

Publication Publication Date Title
US10868712B1 (en) Cooperative monitoring networks
EP3511938B1 (en) Audio events triggering video analytics
US20160239723A1 (en) Enhanced home security system
Ntalampiras et al. Probabilistic novelty detection for acoustic surveillance under real-world conditions
US20160180239A1 (en) Motion detection and recognition employing contextual awareness
US20170132888A1 (en) Intruder detection devices, methods and systems
EP2250632A1 (en) Video sensor and alarm system and method with object and event classification
WO2012119253A1 (en) Area monitoring method and system
US11409989B2 (en) Video object detection with co-occurrence
US10834363B1 (en) Multi-channel sensing system with embedded processing
Rieger et al. {ARGUS}:{Context-Based} Detection of Stealthy {IoT} Infiltration Attacks
Chong et al. An Overview of IoT Based Smart Home Surveillance and Control System: Challenges and Prospects
BE1027428B1 (en) SENSOR SYSTEM FOR ACTIVITY RECOGNITION
Hamzah et al. Smart Homes Automation System Using Cloud Computing Based Enhancement Security
US11869532B2 (en) System and method for controlling emergency bell based on sound
Rashid et al. Intelligent intrusion prevention system for households based on system-on-chip computer
US11379288B2 (en) Apparatus and method for event classification based on barometric pressure sensor data
Pr et al. Research Dimension on Home Recognition for Improved Security System
Mathuseck et al. ATwo-Stage IoT Window Intrusion Detection System
US20240019596A1 (en) Audio-based occupancy detection
US11941959B2 (en) Premises monitoring using acoustic models of premises
KR20230070601A (en) Sound-based intelligent emergency analysis system and method thereof
Oltramari et al. Towards Knowledge Oriented Intelligent Audio Analytics
US20240185697A1 (en) Premises monitoring using acoustic models of premises
Bhardwaj et al. Automated Smart Home Security System Using Biometric Solution

Legal Events

Date Code Title Description
FG Patent granted

Effective date: 20210211