EP1979854A1 - Method for identifying a person's posture - Google Patents

Method for identifying a person's posture

Info

Publication number
EP1979854A1
EP1979854A1 EP07704329A EP07704329A EP1979854A1 EP 1979854 A1 EP1979854 A1 EP 1979854A1 EP 07704329 A EP07704329 A EP 07704329A EP 07704329 A EP07704329 A EP 07704329A EP 1979854 A1 EP1979854 A1 EP 1979854A1
Authority
EP
European Patent Office
Prior art keywords
postures
segments
parameters
identifying
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP07704329A
Other languages
German (de)
French (fr)
Inventor
Stéphane BONNET
Christelle Godin
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Commissariat a lEnergie Atomique et aux Energies Alternatives CEA
Original Assignee
Commissariat a lEnergie Atomique CEA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Commissariat a lEnergie Atomique CEA filed Critical Commissariat a lEnergie Atomique CEA
Publication of EP1979854A1 publication Critical patent/EP1979854A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/24Character recognition characterised by the processing or recognition method
    • G06V30/242Division of the character sequences into groups prior to recognition; Selection of dictionaries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching

Definitions

  • the subject of this invention is the remote identification of postures taken by a person by using the signals given continuously from a sensor it carries. It involves the classification of the states taken successively by the sensor and the person. A notable difficulty is to exploit abundant but not very descriptive signals since the postures are complex, subject to variations and transient states and they do not lend themselves to direct measurements.
  • each event to be classified is defined a number of characteristics called parameters that are used for classification and may come from sensors or other information. Events must be divided into categories called classes based on the values that the parameters take.
  • Some classification methods are performed automatically, by a computer having logical or digital tools of comparison and decision. There are two main processes.
  • the classification uses explicit rules that make membership in a class depend on the value of a particular parameter or group of parameters. For example, an event is assigned to a class if a parameter reaches a value greater than a threshold, or if the sum of one group of parameters is greater than a threshold, whose value is defined by those skilled in the art. Such methods make it possible to identify certain postures as will be seen, but their effectiveness is not sufficient and many portions of the sensor signals can not be identified.
  • the other group of known methods uses what is called a learning base comprising a certain number of events.
  • the computer must then define the classification rules, which remain implicit to the operator according to the values of the parameters.
  • unsupervised learning the computer itself distributes the events of the base into classes according to the similarities or distances between the events, and the definition of the classes remains unknown.
  • supervised learning the operator indicates the class of each event of the learning base, and the task of the computer is to define a numerical or logical function which respects the classification decided by the operator according to the event parameters. It is also possible to combine the two variants to obtain a third so-called semi-supervised learning where the membership of a class is defined by the operator only for some of the events of the learning base (in practice, in small number compared to others).
  • the progress made by the invention in its most general form, is to improve the classification results in the application mentioned.
  • the invention relates to a method of identifying postures of a person, comprising the following steps: - fixing a sensor on the person; recording at least one sensor signal during a time window; extracting partitioning parameters from said signal; dividing, from the partitioning parameters, the time window into segments satisfying a criterion of homogeneity of posture or change of posture, and extracting, for each of the segments, a first set of parameters from said signal ; classifying each of the segments in one of the event classes associated with said events or in a class that is not associated with an event, by applying first decision rules from the first parameter set associated with the segments;
  • Some processes use multiple sensors, placed in as many different locations of the body, to detect unambiguous postures; but the permanent wearing of all these sensors is unpleasant.
  • FIG. 1 is a general view of the process
  • FIG. 2 is a view of a neural network
  • FIG. 3 is a schematic view of an application of the method
  • FIG. 4 is a diagram detailing an example of a signal sample of this application
  • FIG. 5 illustrates another signal sampling
  • FIG. 6 is a detailed view of a particular method.
  • FIG. 1 The invention implements an operator in the first steps of the method and then a computer.
  • the operator distinguishes two subsets of parameters of the events in step 2, and elaborates first decision rules in step 3 by means of the subset of the first parameters. It finally creates a learning base that can be either empty or partially filled.
  • the computer receives the information of a new event as a signal to be processed in step 4; this signal includes the parameters of the event, obtained by measurements or other means.
  • the computer extracts the first parameter values of this signal in step 5. It then tries to classify the event among the different classes using the first rules. defined in Step 3, but not necessarily in the presence of a questionable event (step 6). In this case, the computer extracts from the signal the values of the second parameters in step 7 and resumes the classification attempt in the following step 8 by applying second decision rules in step 10. A classification status is finally given to step 11.
  • step 6 If, however, the first step of classification of step 6 has been successful, the method is carried out differently and the extraction of the second parameters, carried out at a step 12, then serves to fill the learning base by adding these parameters and the result of the first classification, completing or amending the second decision rules used in step 10 according to the classification result of the present event and the values of its second parameters. There is a presumption that future events will be classified with increasing safety.
  • the network comprises a layer of input neurons P1, P2,..., Pn for receiving the values of the second parameters of the events. in digital form.
  • the classification decision in a given class is given, also in digital form, by the content of an output neuron D.
  • the neural network comprises at least one hidden layer of neurons y-, which perform numerical combinations of the parameters and transmit them to the next layer of the network, here immediately to the output neuron D.
  • Numerical weights w are applied to the transmitted values before they reach the neurons of the hidden layer or the output neuron.
  • the neurons of the hidden layer perform a hyperbolic tangent activation and the output neuron performs a linear activation.
  • the decision function can then be written according to the formula (1)
  • sgn is the sign function, tanh the hyperbolic tangent function, w-, the weight connecting the output of the neuron y-, to the output neuron D
  • w 0 and w 0 particular weights called biases or thresholds connecting a fictitious neuron of output of value equal to 1 to the output neuron (for w 0 ) or to the neurons y-, of the hidden layer (for w 0 :) and w : i the weights connecting the input neurons P 1 to the neurons of the layer hidden
  • Neural networks allow, subject to choosing the number of neurons in the hidden layer or hidden layers, to approach any function once the correct weights have been found.
  • the elaboration of the second decision rules therefore amounts to adjusting the weights w so that, for each or almost every example of the learning base 9, the result of the decision by the neural network and the result known, of the classification.
  • the computer adjusts the weights so that the largest number of events in the learning base - enriched with the new event - is properly evaluated by the second decision rules.
  • linear separators Other types of numerical classifiers are known in the art: linear separators, decision trees, SVM (vector support machine or wide margin separator); the invention also applies to them.
  • SVM vector support machine or wide margin separator
  • the person is equipped with a motion sensor of a known kind and may include a triaxial accelerometer and a triaxial magnetometer to detect the orientation and movement of the wearer according to the directions of the Earth's magnetic field and gravity.
  • a motion sensor of a known kind and may include a triaxial accelerometer and a triaxial magnetometer to detect the orientation and movement of the wearer according to the directions of the Earth's magnetic field and gravity.
  • a preliminary calibration procedure is performed on the person 15 to align the measurement axes of the sensor and the anatomical axes of the person 15, by determining a passage matrix that connects them.
  • This matrix is supposed to be invariable, which is true as long as the sensor 16 is not moved on the person 15.
  • information fusion algorithms make it possible to give the orientation of the sensor 16 in space from its measurements by expressing them by rotations of Euler angles or quaternions.
  • the angle of inclination of the person in the sagittal plane using measurements of the accelerometer and at the yaw angle to determine the azimuth (angle of the anteroposterior axis with a fixed reference, here magnetic North) with the magnetometer.
  • the invention is implemented to distinguish between certain kinds of activity of the person 15 and some of his postures.
  • energy of activity expressed as a function of time
  • Transition states always correspond to strong activities and energy peaks, and stable position states are often longer and less active, but exceptions exist, such as running, during which the wearer in a stable standing position will have great energy.
  • the energy can vary greatly during the same state.
  • a race period 24 during the first standing state 19 is thus shown. It is therefore not possible to directly deduce the succession of states from a diagram such as that of FIG.
  • the classes are nine, ten or eleven: three stable states (sitting, standing and lying), and six states. transfer from one to another of the previous steady states (standing towards sitting, sitting towards standing, standing towards bed, lying towards standing, sitting down to bed and lying down towards sitting); we can add a new class "unknown", in which we pour the events that could not be in one of the previous classes, or a class "ARTEFACT" which designates the movements limited by two similar postures and do not correspond not to a defined event.
  • ARTEFACT ARTEFACT
  • a first step the recording is divided into portions or segments according to a set of several criteria. This leads to an alternation of homogeneous zones in the sense of postures (called “O-segments”) and active zones ("1- segments”) which potentially represent postural transfers.
  • Each temporal segment designates an event whose class is to be determined.
  • all time segments have the UNKNOWN class.
  • a first classification is made according to the first rules explicitly notified by seeking to assign - and in the safest possible way - to certain events (associated with respective time segments) a class of posture. . Due to the positioning of the movement sensor to the torso, it is easier to distinguish the horizontal and vertical postures occupied by the person. We therefore seek above all to distinguish horizontal postures (LAYER) from vertical postures
  • step E12 the learning base is implemented in an attempt to best classify the events still remaining in the unknown class. The manner in which the first part of the process is conducted will be described below.
  • the analysis is first made on short sampling data, of the order of one second (E2); we try to determine areas of homogeneous posture without trying to determine this posture.
  • the criteria for dividing the signals into unequal length segments (E3) are two and based on the activity index IA provided by the signals 3a (of the triaxial accelerometer) and on the variations of inclination of the torso of the person 15 in the sagittal plane.
  • the corresponding parameters are calculated as follows.
  • the signal standard 3a of the accelerometer is representative of the energy of the movement in progress and gives objective information on the physical activity of the wearer.
  • the average value is calculated for each duration of one second of the signal of the quantity:
  • N a ⁇ HF [n] 4aHF ⁇ P [nf + aHF ML [nf + aHF v ⁇ [nf to obtain the activity index
  • n is an index
  • F e a sampling frequency
  • F AP a sampling frequency
  • F ML and F V the measured values of the signal components
  • F the signal, at acceleration and H denotes a band-pass filtering to conserve the "High frequencies" (here 0.5 to 10 Hz), representative of human activity, in removing the DC component (acceleration of gravity) and noise.
  • the activity index IA based on the signal 3a is compared with a threshold - represented by the horizontal line 25 of FIG. 5, of value 0.04 - to determine whether a time range is associated with an active phase or a phase resting.
  • the values of the index IA are positive and generally between 0 and 1. It is also possible to determine an index of activity of the yaw activity of the wearer. To reduce the correlation of the 3m signal (of the triaxial magnetometer) with the signal 3a, it is proposed to calculate an index based solely on the temporal variations of the ML (mediolateral) component of the magnetometer:
  • the low frequency signal (at 0.5 Hz) is used.
  • Pitch [n] arcsin (aLF AP ), where, similarly, a designates the acceleration, L a low-pass filtering of the signal, and F the signal.
  • a negative pitch is a person leaning forward; Positive pitch, to a person leaning backward.
  • Thresholds of variation of these amounts of activity and inclination of the torso are used to detect posture transfers. Consecutive sampling portions of non-varying signals reaching these thresholds are grouped together. Segments of unequal duration are thus obtained from uniform sampling portions, and more precisely with an alternation of time segments of value 0, (O-segments) corresponding to zones homogeneous in the sense of the posture (still unknown) and short-term time segments of value 1 (1-segments), corresponding to areas with a large movement that may be a postural transfer.
  • E4 The distinction between these two categories of segments is made (E4).
  • the underlying idea is that a postural transfer corresponds to a certain level of activity and a certain variation of inclination of the torso.
  • the thresholds used during this step are relatively critical in the sense that the distribution of the data obtained will condition the sensitivity of the classification of postures. In unfavorable cases, a small number of segments with the same 0-segment can be obtained which can contain several different postures or on the contrary a high number of segments and unspecific 1-segments of a postural transition.
  • the two criteria were finally applied as follows: a probable posture transfer corresponds to a minimum variation of 20 degrees for 3 seconds simultaneous to a minimum variation of 0.08 (standardized units) for 3 seconds. Any sampling portion meeting these two criteria will therefore belong to one segment, the others to one segment.
  • the criterion chosen is accVT ⁇ thl) or accMlJ> th3), where ace is this time used to designate the measured acceleration. This allows to detect cases where the person is strongly bent in the sagittal plane (person lying on the stomach / back) or in the lateral plane (person lying on the side).
  • a difficulty here is not to confuse a horizontal posture type LAYER with the case where the person leans strongly forward.
  • a temporal criterion (duration of the horizontal posture bent forward) is implemented in this case to detect these situations, and the posture of the LAYER type is assumed if a threshold of 300 seconds is reached.
  • the 0-segment must have a temporal duration greater than a given time (10 seconds for example).
  • the phases of walking are identified by analysis of the signal 3a filtered at high frequencies. If the
  • 0-segment contains a significant part of the walking phase, the whole segment the range is classified STANDING.
  • the step is detected by the presence of a large energy peak at about 1 Hz.
  • a threshold 0.04
  • the 0-segment must have a time duration greater than a given time (30 seconds for example). b) If the 0-segment corresponds to a posture inclined towards the back (of 20 degrees at least), one assigns the segment to the class ASSIS. c) Similarly, if the activity level IA or IM is below a threshold (0.02), the segment is assigned to the ASSIS class.
  • Certain 1-segments are determined in fact in intra-postural movement (artifact) or inter-postural (transfer). This assignment is determined by the nature of the preceding and following postures, when they have been determined.
  • a 1-segment between two different postures is a transfer
  • a 1-segment between two similar postures is an artifact and is not classified.
  • the segments then classified are poured by the system into a learning base which collects their classification results and second parameters which, related to the results of the classification. classification, are used to develop second decision rules by the system (by adjusting the weights in the case of a neural network); these second decision rules generally remain implicit, or unknown to the operators, who do not program them, and they are different from the first rules since they call on different parameters.
  • the first decision rules use the acceleration measurements in the example in question, whereas the second rules instead use magnetometry measurements. It should be noted that other sensors could also be useful for second decision rules, such as gyrometers to measure the speed of rotation of the person, including yaw.
  • the second rules are applied to classify the remaining events in UNKNOWN class (E12).
  • the parameters on which the algorithm operates are conventionally calculated on the signals acquired by the sensor 16 and on the intermediate signals (tilt angle, yaw angle, activity index, etc.).
  • the calculated parameters are, for example, for each segment:
  • An idea of the invention is to use all or some of the already well-classified events to build a machine learning base to move to a supervised learning algorithm (IS).
  • IS supervised learning algorithm
  • the learning base is completed as a result of the results of the newly identified segments.
  • the second decision rules weight in the neural network
  • the computer holding the learning base therefore analyzes each segment, already identified or not, in a similar way according to the second group of parameters using the learning base. For each of the unknown segments, it calculates similarity scores with elements of each of the classes, or distances calculated according to usual mathematical norms in a space with multiple dimensions.
  • the parameters considered can be, with regard to the statistics of the signals, average values, energies, variances; as far as the segment itself is concerned, similarities are sought with previous segments as a whole; this research is done essentially for the 1-segments likely to represent transient states based on the frequent and almost exact repetition of the same gestures to move from one posture to another.
  • the signature of the segment is a component of the signal that reflects a function of evolution of the posture. Another interesting criterion would be the recognition of a significant rest phase with a yaw angle (average azimuth considered on a segment) similar to a reference azimuth
  • the rules of the first group may be chosen from among the following, in more complex embodiments of the method: recognition of a phase of activity corresponding to a step (positive and fairly regular acceleration in the AP axis), therefore of standing class;
  • This information is given either by the accelerometers (for the movement), by the magnetometers (for the orientations), or by a combination of the two.
  • the parameters used for the second decision rules can be those used to apply the first classification rules (by combining them differently) or, more typically and more fruitfully, other parameters.
  • the second classification rules are determined and can be amended to tend to match the evaluations they give of the identified states with the evaluations obtained with the first classification rules for the same phases. If the first decision rules are associated with the production of a confidence index of the ranking result that they give, the events that have been classified in the first step can be paid to the learning base only if the index has reached a value above a certain threshold: events classified in the first step but with insufficient safety will have no influence on second decision rules.
  • the method of the invention lends itself well to supervised learning of the second decision rules. All the decision rules are then defined by the operator: the first decision rules can be those whose application is the simplest, and the second decision rules those which require calculations, which interact with each other or which tolerate exceptions or are not known perfectly and may be amended later.
  • the result given by the second decision rules will allow identify the first decision rules that will have given an opposite result; these rules may be amended (when they depend on a threshold for example), reduced by giving them less importance, or even deleted.
  • the correction may be decided according to the number and the confidence index of the results, or the respective reliability of the rules.
  • the second decision rules can themselves be controlled by third decision rules specified by the operator and used to detect classification errors of the second decision rules. When errors are detected, the second decision rules can be corrected to tend to match their ranking result with the desired result. It is still possible to pour the events concerned into the learning base with the values of their parameters and the result corrected by the third decision rules. Another improvement of the method would be to delete the first decision rules or only some of them, gradually or not, when it is judged that the second decision rules have reached a sufficient reliability, especially when the learning base has reached a sufficient size or that the second decision rules are stabilized to a state where they classify all events reliably.

Abstract

The invention relates to a classification method including a first step (6) for the classification of any type of event using first rules and a subsequent second step (8) for the classification of events that were not identified by the first classification, using a training corpus (9) consolidated with all of the events identified by the first classification. The method is adaptive if the second classification rules are amended according to the new examples that may have been determined by the first rules.

Description

PROCEDE D'IDENTIFICATION DE POSTURES D'UNE PERSONNE METHOD FOR IDENTIFYING POSTURES OF A PERSON
DESCRIPTIONDESCRIPTION
Le sujet de cette invention est l'identification à distance de postures prises par une personne en exploitant les signaux donnés continûment d'un capteur qu'elle porte. Elle implique la classification des états pris successivement par le capteur et la personne. Une difficulté notable est d'exploiter des signaux abondants mais peu descriptifs puisque les postures sont complexes, sujettes à des variations et à des états transitoires et qu'elles ne se prêtent pas à des mesures directes. Dans l'art de la classification, à chaque événement à classer est défini un certain nombre de caractéristiques appelées paramètres qui servent à la classification et qui peuvent provenir de capteurs ou d'autres informations. Les événements doivent être répartis en catégories appelées classes d'après les valeurs que prennent les paramètres. Certains procédés de classification sont accomplis de façon automatique, par un ordinateur disposant d'outils logiques ou numériques de comparaison et de décision. Deux procédés principaux existent. Dans le premier, la classification fait appel à des règles explicites qui font dépendre l'appartenance à une classe de la valeur d'un paramètre particulier ou d'un groupe des paramètres. Par exemple, un événement est attribué à une classe si un paramètre atteint une valeur supérieure à un seuil, ou si la somme d'un groupe des paramètres est supérieure à un seuil, dont la valeur est définie par l'homme de l'art. De tels procédés permettent d' identifier certaines postures ainsi qu'on le verra, mais leur efficacité n'est pas suffisante et de nombreuses portions des signaux du capteur ne peuvent être identifiées.The subject of this invention is the remote identification of postures taken by a person by using the signals given continuously from a sensor it carries. It involves the classification of the states taken successively by the sensor and the person. A notable difficulty is to exploit abundant but not very descriptive signals since the postures are complex, subject to variations and transient states and they do not lend themselves to direct measurements. In the art of classification, each event to be classified is defined a number of characteristics called parameters that are used for classification and may come from sensors or other information. Events must be divided into categories called classes based on the values that the parameters take. Some classification methods are performed automatically, by a computer having logical or digital tools of comparison and decision. There are two main processes. In the first, the classification uses explicit rules that make membership in a class depend on the value of a particular parameter or group of parameters. For example, an event is assigned to a class if a parameter reaches a value greater than a threshold, or if the sum of one group of parameters is greater than a threshold, whose value is defined by those skilled in the art. Such methods make it possible to identify certain postures as will be seen, but their effectiveness is not sufficient and many portions of the sensor signals can not be identified.
L'autre groupe de méthodes connues utilise ce qu'on appelle une base d'apprentissage comprenant un certains nombres d'événements. L'ordinateur doit alors définir les règles de classification, qui restent implicites à l'opérateur d'après les valeurs des paramètres. Dans une première variante dite d'apprentissage non supervisé, l'ordinateur répartit lui-même les événements de la base en classes d'après les similitudes ou les distances entre les événements, et la définition des classes reste inconnue. Dans une autre variante, dite d'apprentissage supervisé, l'opérateur indique la classe de chaque événement de la base d'apprentissage, et la tâche de l'ordinateur est de définir une fonction numérique ou logique qui respecte le classement décidé par l'opérateur d'après les paramètres des événements. Il est aussi possible de combiner les deux variantes pour en obtenir une troisième dite d'apprentissage semi-supervisé où l'appartenance à une classe est définie par l'opérateur seulement pour certains des événements de la base d'apprentissage (en pratique, en petit nombre par rapport aux autres) .The other group of known methods uses what is called a learning base comprising a certain number of events. The computer must then define the classification rules, which remain implicit to the operator according to the values of the parameters. In a first variant called unsupervised learning, the computer itself distributes the events of the base into classes according to the similarities or distances between the events, and the definition of the classes remains unknown. In another variant, called supervised learning, the operator indicates the class of each event of the learning base, and the task of the computer is to define a numerical or logical function which respects the classification decided by the operator according to the event parameters. It is also possible to combine the two variants to obtain a third so-called semi-supervised learning where the membership of a class is defined by the operator only for some of the events of the learning base (in practice, in small number compared to others).
L'inconvénient commun à toutes ces méthodes est la difficulté d'établir de bonnes règles, aptes à minimiser la proportion d'événements mal classés. Avec des règles explicites définies par l'opérateur, beaucoup d'événements restent indéterminés en pratique car il est difficile d'établir des règles précises et détaillées par l'observation ou l'intuition ; dans les procédés par apprentissage, les règles définies automatiquement seront imprécises si les exemples versés dans la base d'apprentissage sont mal représentatifs des événements futurs, et parfois le manque de maîtrise de l'opérateur sur ces règles implicites ne lui permettra pas de les corriger. De plus, la constitution manuelle d'une base d'apprentissage demande du temps et peut impliquer des erreurs. Enfin, une telle table ne sera pas évolutive.The disadvantage common to all these methods is the difficulty of establishing good rules, able to minimize the proportion of badly classified events. With explicit rules defined by the operator, many events remain indeterminate in practice because it is difficult to establish precise and detailed rules by observation or intuition; in learning processes, automatically defined rules will be imprecise if the examples in the learning base are poorly representative of future events, and sometimes the lack of operator control over these implicit rules will not allow it to be corrected. . In addition, the manual constitution of a learning base takes time and may involve errors. Finally, such a table will not be scalable.
Le progrès apporté par l'invention, sous sa forme la plus générale, est d'améliorer les résultats de classification dans l'application mentionné.The progress made by the invention, in its most general form, is to improve the classification results in the application mentioned.
Sous sa forme la plus générale, l'invention est relative à un procédé d' identification de postures d'une personne, comprenant les étapes suivantes : - fixation d'un capteur sur la personne ; enregistrement d'au moins un signal du capteur pendant une fenêtre de temps ; extraction de paramètres de partitionnement à partir dudit signal ; - division, à partir des paramètres de partitionnement, de la fenêtre temporelle en segments satisfaisant à un critère d'homogénéité de posture ou de changement de posture, et extraction, pour chacun des segments, d'un premier jeu de paramètres à partir dudit signal ; - classement de chacun des segments dans une des classes d'événement associées auxdits événements ou dans une classe qui n'est pas associée à un événement, en appliquant des premières règles de décision à partir du premier jeu de paramètres associé aux segments ;In its most general form, the invention relates to a method of identifying postures of a person, comprising the following steps: - fixing a sensor on the person; recording at least one sensor signal during a time window; extracting partitioning parameters from said signal; dividing, from the partitioning parameters, the time window into segments satisfying a criterion of homogeneity of posture or change of posture, and extracting, for each of the segments, a first set of parameters from said signal ; classifying each of the segments in one of the event classes associated with said events or in a class that is not associated with an event, by applying first decision rules from the first parameter set associated with the segments;
- comprenant une opération de calibration destinée à créer une base d'apprentissage, comprenant les étapes suivantes pour chaque segment appartenant à une classe d'événement :- comprising a calibration operation for creating a learning base, comprising the following steps for each segment belonging to an event class:
- extraction d'un second jeu de paramètres à partir dudit signal ; ajout dans ladite base d'apprentissage d'une donnée répertoriant le second jeu de paramètres et la classe d'événement associés au segment considéré,extracting a second set of parameters from said signal; adding to said learning base data item listing the second set of parameters and the class of events associated with the segment in question,
- et utilisation de la base d'apprentissage pour classer des segments dudit enregistrement ou d'un autre enregistrement ultérieur qui n'ont pas été associés à un événement en appliquant des secondes règles de décision utilisant la base d'apprentissage à partir d'un second jeu de paramètres associé à ces segments .and using the learning base to classify segments of said record or other subsequent record that have not been associated with an event by applying second decision rules using the learning base from a second set of parameters associated with these segments.
Certains procédés font emploi de plusieurs capteurs, placés à autant d'endroits différents du corps, pour détecter des postures sans ambiguïté ; mais le port permanent de tous ces capteurs est désagréable.Some processes use multiple sensors, placed in as many different locations of the body, to detect unambiguous postures; but the permanent wearing of all these sensors is unpleasant.
D'autres procédés font emploi d'un seul capteur et cherchent typiquement les états transitoires, indices d'un changement de posture, sur les signaux ; mais des ambiguïtés subsistent, par exemple entre une position assise et une position debout .Other methods use a single sensor and typically look for transient states indicative of a change of posture on the signals; but ambiguities remain, for example between a sitting position and a standing position.
Aucun procédé n'existe dans l'application envisagée, d'après lequel on utilise deux étapes de classification fondamentalement différentes, puisque faisant appel à des paramètres en général différents, pour classifier des segments de signaux caractéristiques de postures différentes. La séparation rationnelle du signal en segments homogènes, apte à être faite de façon automatique, n'est elle-même pas résolue. Il en résulte qu'un nombre de segments beaucoup plus grand reste indéterminé avec les procédés antérieurs. L'intérêt de l'invention provient de ce que certaines parties des signaux peuvent être analysées de façon simple pour en extraire certaines caractéristiques contribuant directement à leur identification (le premier groupe de paramètres) , puis exploitées pour en extraire d'autres caractéristiques (le second groupe de paramètres) pour aider à identifier d'autres parties des signaux. Les secondes règles de décision, qui font appel à l'expérience acquise, et d'autant plus qu'elles peuvent être rendues évolutives en accueillant de nouveaux résultats, trouvent donc un intérêt particulier ici. Parmi certains modes de réalisation particulièrement importants, on citera la répartition des segments en deux catégories, les uns ressortissant à des postures stables et les autres à des états transitoires entre deux postures stables ; et une division rationnelle du signal en segments, ainsi qu'on l'a évoqué. L'invention sera maintenant décrite plus en détail au moyen des figures : la figure 1 est une vue générale du procédé, - la figure 2 est une vue d'un réseau de neurones,No method exists in the intended application, according to which two fundamentally different classification steps are used, since using generally different parameters, to classify signal segments characteristic of different postures. The rational separation of the signal into homogeneous segments, which can be done automatically, is itself not solved. As a result, a much larger number of segments remains undetermined with prior methods. The advantage of the invention comes from the fact that certain parts of the signals can be analyzed in a simple way to extract certain characteristics directly contributing to their identification (the first group of parameters), then exploited to extract other characteristics (the second group of parameters) to help identify other parts of the signals. The second decision rules, which call on the experience acquired, and all the more so that they can be made evolutive by welcoming new results, are therefore of particular interest here. Among some particularly important embodiments, there will be mentioned the distribution of the segments into two categories, one being stable at the postures and the others at transitional states between two stable postures; and a rational division of the signal into segments, as has been mentioned. The invention will now be described in more detail by means of the figures: FIG. 1 is a general view of the process, FIG. 2 is a view of a neural network,
- la figure 3 est une vue schématique d'une application du procédé,FIG. 3 is a schematic view of an application of the method,
- la figure 4 est un diagramme détaillant un exemple d'échantillon de signal de cette application, la figure 5 illustre un autre échantillonnage de signal,FIG. 4 is a diagram detailing an example of a signal sample of this application, FIG. 5 illustrates another signal sampling,
- et la figure 6 est une vue détaillée d'un procédé particulier.and FIG. 6 is a detailed view of a particular method.
Nous abordons la figure 1. L'invention met en œuvre un opérateur dans les premières étapes du procédé, puis un ordinateur. Dans une étape de début 1, l'opérateur distingue deux sous-ensembles de paramètres des événements à l'étape 2, et élabore des premières règles de décision à l'étape 3 au moyen du sous- ensemble des premiers paramètres. Il crée enfin une base d'apprentissage qui peut être soit vide, soit partiellement remplie. L'ordinateur reçoit ensuite l'information d'un nouvel événement sous forme d'un signal à traiter à l'étape 4 ; ce signal comprend les paramètres de l'événement, qu'on a obtenu par des mesures ou d'autres moyens. L'ordinateur extrait les valeurs de premiers paramètres de ce signal à l'étape 5. Il s'efforce ensuite de classer l'événement parmi les différentes classes au moyen des premières règles de décision définies à l'étape 3, mais sans y parvenir nécessairement en présence d'un événement douteux (étape 6) . Dans ce cas, l'ordinateur extrait du signal les valeurs des deuxièmes paramètres à l'étape 7 et reprend la tentative de classification à l'étape 8 suivante en appliquant des secondes règles de décision à l'étape 10. Un état de classification est finalement donné à l'étape 11.FIG. 1. The invention implements an operator in the first steps of the method and then a computer. In a step of beginning 1, the operator distinguishes two subsets of parameters of the events in step 2, and elaborates first decision rules in step 3 by means of the subset of the first parameters. It finally creates a learning base that can be either empty or partially filled. The computer then receives the information of a new event as a signal to be processed in step 4; this signal includes the parameters of the event, obtained by measurements or other means. The computer extracts the first parameter values of this signal in step 5. It then tries to classify the event among the different classes using the first rules. defined in Step 3, but not necessarily in the presence of a questionable event (step 6). In this case, the computer extracts from the signal the values of the second parameters in step 7 and resumes the classification attempt in the following step 8 by applying second decision rules in step 10. A classification status is finally given to step 11.
Si cependant la première étape de classification de l'étape 6 a été fructueuse, le procédé est mené autrement et l'extraction des deuxièmes paramètres, effectuée à une étape 12, sert alors à remplir la base d'apprentissage en y ajoutant ces paramètres et le résultat de la première classification, complétant ou amendant les secondes règles de décision utilisées à l'étape 10 d'après le résultat de classification du présent événement et les valeurs de ses seconds paramètres. On a ainsi la présomption que les événements futurs seront classifiés avec de plus en plus de sûreté.If, however, the first step of classification of step 6 has been successful, the method is carried out differently and the extraction of the second parameters, carried out at a step 12, then serves to fill the learning base by adding these parameters and the result of the first classification, completing or amending the second decision rules used in step 10 according to the classification result of the present event and the values of its second parameters. There is a presumption that future events will be classified with increasing safety.
Les moyens concrets d'élaboration des secondes règles de décision comprennent divers genres connus. On décrira ici à titre d'illustration l'utilisation d'un réseau de neurones à la figure 2. Le réseau comprend une couche de neurones d'entrée Pl, P2,..., Pn pour recevoir les valeurs des deuxièmes paramètres des événements sous forme numérique.Concrete means of developing the second decision rules include various known genres. An illustration of the use of a neural network in FIG. 2 will be described here. The network comprises a layer of input neurons P1, P2,..., Pn for receiving the values of the second parameters of the events. in digital form.
La décision de classification dans une classe déterminée est donnée, aussi sous forme numérique, par le contenu d'un neurone de sortie D. Le réseau de neurones comprend au moins une couche cachée de neurones y-, qui effectuent des combinaisons numériques des paramètres et les transmettent à la couche suivante du réseau, ici immédiatement au neurone de sortie D. Des poids numériques w sont appliqués aux valeurs transmises avant qu'elles n'atteignent les neurones de la couche cachée ou le neurone de sortie. Ici, les neurones de la couche cachée effectuent une activation en tangente hyperbolique et le neurone de sortie effectue une activation linéaire. La fonction de décision peut alors être écrite d'après la formule (1)The classification decision in a given class is given, also in digital form, by the content of an output neuron D. The neural network comprises at least one hidden layer of neurons y-, which perform numerical combinations of the parameters and transmit them to the next layer of the network, here immediately to the output neuron D. Numerical weights w are applied to the transmitted values before they reach the neurons of the hidden layer or the output neuron. Here, the neurons of the hidden layer perform a hyperbolic tangent activation and the output neuron performs a linear activation. The decision function can then be written according to the formula (1)
où sgn est la fonction signe, tanh la fonction tangente hyperbolique, w-, le poids reliant la sortie du neurone y-, au neurone de sortie D, w0 et w0: des poids particuliers appelés biais ou seuils reliant un neurone fictif de sortie de valeur égale à 1 au neurone de sortie (pour w0) ou aux neurones y-, de la couche cachée (pour w0:) et w:i les poids reliant les neurones d'entrée P1 aux neurones de la couche cachée where sgn is the sign function, tanh the hyperbolic tangent function, w-, the weight connecting the output of the neuron y-, to the output neuron D, w 0 and w 0: particular weights called biases or thresholds connecting a fictitious neuron of output of value equal to 1 to the output neuron (for w 0 ) or to the neurons y-, of the hidden layer (for w 0 :) and w : i the weights connecting the input neurons P 1 to the neurons of the layer hidden
Les réseaux de neurones permettent, sous réserve de bien choisir le nombre de neurones dans la couche cachée ou les couches cachées, d'approcher n'importe quelle fonction une fois que les bons poids ont été trouvés. L'élaboration des secondes règles de décision revient donc à ajuster les poids w de manière à faire coïncider, pour chaque exemple ou presque de la base d'apprentissage 9, le résultat de la décision par le réseau de neurones et le résultat, connu, de la classification. Quand l'étape 12 est mise en œuvre, l'ordinateur ajuste les poids de manière que le plus grand nombre d'événements de la base d'apprentissage - enrichie du nouvel événement - soit bien évalué par les secondes règles de décision.Neural networks allow, subject to choosing the number of neurons in the hidden layer or hidden layers, to approach any function once the correct weights have been found. The elaboration of the second decision rules therefore amounts to adjusting the weights w so that, for each or almost every example of the learning base 9, the result of the decision by the neural network and the result known, of the classification. When step 12 is implemented, the computer adjusts the weights so that the largest number of events in the learning base - enriched with the new event - is properly evaluated by the second decision rules.
D'autres genres de classificateurs numériques sont connus dans l'art : séparateurs linéaires, arbres de décision, SVM (machine à support de vecteurs ou séparateur à vaste marge) ; l'invention s'applique aussi à eux.Other types of numerical classifiers are known in the art: linear separators, decision trees, SVM (vector support machine or wide margin separator); the invention also applies to them.
Selon l'invention, on se préoccupe d'identifier la posture d'une personne à tout moment par télésurveillance, notamment à des fins médicales. La personne est équipée d'un capteur de mouvement d'un genre connu et pouvant comprendre un accéléromètre triaxial et un magnétomètre triaxial pour détecter l'orientation et le mouvement de la personne qui le porte d'après les directions du champ magnétique terrestre et de la gravité. Se référant à la figure 3, où la personne porteuse a la référence 15 et le capteur la référence 16, on voit que le capteur 16 est fixé sur le torse de la personne 15 et que les axes principaux de mesure sont l'axe antéro-postérieur AP dirigé vers l'avant, l'axe médio-latéral ML dirigé vers la droite et l'axe vertical VT dirigé vers le haut ; si besoin est, une procédure préliminaire de calibration est réalisée sur la personne 15 pour aligner les axes de mesure du capteur et les axes anatomiques de la personne 15, en déterminant une matrice de passage qui les relie. Cette matrice est supposée invariable, ce qui est vrai tant que le capteur 16 n'est pas déplacé sur la personne 15. De plus, des algorithmes de fusion d'information permettent de donner l'orientation du capteur 16 dans l'espace à partir de ses mesures en les exprimant par des rotations d'angles d'Euler ou des quaternions. On recourra notamment, dans l'exemple détaillé plus loin, à l'angle d'inclinaison de la personne dans le plan sagittal (vertical et antéro- postérieur) au moyen des mesures de 1 ' accéléromètre et à l'angle de lacet pour déterminer l'azimut (angle de l'axe antéro-postérieur avec une référence fixe, ici le Nord magnétique) avec le magnétomètre .According to the invention, there is concern to identify the posture of a person at any time by remote monitoring, especially for medical purposes. The person is equipped with a motion sensor of a known kind and may include a triaxial accelerometer and a triaxial magnetometer to detect the orientation and movement of the wearer according to the directions of the Earth's magnetic field and gravity. Referring to FIG. 3, where the carrier has the reference 15 and the sensor the reference 16, it is seen that the sensor 16 is attached to the torso of the person 15 and that the main measurement axes are the anterior axis. posterior AP directed towards the front, the medio-lateral axis ML directed to the right and the vertical axis VT directed upwards; if necessary, a preliminary calibration procedure is performed on the person 15 to align the measurement axes of the sensor and the anatomical axes of the person 15, by determining a passage matrix that connects them. This matrix is supposed to be invariable, which is true as long as the sensor 16 is not moved on the person 15. Moreover, information fusion algorithms make it possible to give the orientation of the sensor 16 in space from its measurements by expressing them by rotations of Euler angles or quaternions. In the example detailed below, the angle of inclination of the person in the sagittal plane (vertical and anteroposterior) using measurements of the accelerometer and at the yaw angle to determine the azimuth (angle of the anteroposterior axis with a fixed reference, here magnetic North) with the magnetometer.
L'invention est mise en œuvre pour distinguer entre certains genres d'activité de la personne 15 et certaines de ses postures. Dans le diagramme de la figure 4, exprimé en énergie d'activité en fonction du temps, on trouve successivement un état debout, une transition debout/assis, un état assis, une transition assis/debout et un état debout aux états 19 à 23. Les états de transition correspondent toujours à des activités fortes et à des pics d'énergie, et des états de position stable sont souvent plus longs et moins actifs, mais des exceptions existent, comme la course, pendant laquelle le porteur en position debout stable aura une grande énergie. De plus, l'énergie peut varier fortement pendant un même état. Une période de course 24 pendant le premier état debout 19 est ainsi représentée. Il n'est donc pas possible de déduire directement la succession des états d'un diagramme tel que celui de la figure 4, qui pourra toutefois servir à une division rationnelle en segments de durées inégales mais de caractéristiques homogènes. Dans l'exemple complet de procédé de classification qui est donné ci-après avec l'appui de la figure 6, les classes sont au nombre de neuf, dix ou onze : trois états stables (assis, debout et couché) , et six états de transfert d'un à un autre des états stables précédents (debout vers assis, assis vers debout, debout vers couché, couché vers debout, assis vers couché et couché vers assis) ; on peut y ajouter une nouvelle classe « inconnu », dans laquelle on verse les événements qui n'ont pas pu l'être dans une des classes précédentes, ou une classe "ARTEFACT" qui désigne les mouvements limités par deux postures semblables et ne correspondent pas à un événement défini . Diverses étapes sont entreprises. Dans un premier temps (étapes El à E5) , l'enregistrement est découpé en portions ou segments temporels selon un ensemble de plusieurs critères. On accède ainsi à une alternance de zones homogènes au sens des postures (appelées "O- segments") et de zones actives ("1- segments") qui représentent potentiellement des transferts posturaux. Chaque segment temporel désigne un événement dont on cherche à déterminer la classe. A l'issue de cette première phase, tous les segments temporels possèdent la classe INCONNUE.The invention is implemented to distinguish between certain kinds of activity of the person 15 and some of his postures. In the diagram of Figure 4, expressed as energy of activity as a function of time, there is successively a standing state, a standing / sitting transition, a sitting state, a sitting / standing transition and a standing state in states 19 to 23 Transition states always correspond to strong activities and energy peaks, and stable position states are often longer and less active, but exceptions exist, such as running, during which the wearer in a stable standing position will have great energy. In addition, the energy can vary greatly during the same state. A race period 24 during the first standing state 19 is thus shown. It is therefore not possible to directly deduce the succession of states from a diagram such as that of FIG. 4, which may, however, be used for a rational division into segments of unequal duration but of homogeneous characteristics. In the complete example of the method of classification which is given below with the support of FIG. 6, the classes are nine, ten or eleven: three stable states (sitting, standing and lying), and six states. transfer from one to another of the previous steady states (standing towards sitting, sitting towards standing, standing towards bed, lying towards standing, sitting down to bed and lying down towards sitting); we can add a new class "unknown", in which we pour the events that could not be in one of the previous classes, or a class "ARTEFACT" which designates the movements limited by two similar postures and do not correspond not to a defined event. Various stages are undertaken. In a first step (steps E1 to E5), the recording is divided into portions or segments according to a set of several criteria. This leads to an alternation of homogeneous zones in the sense of postures (called "O-segments") and active zones ("1- segments") which potentially represent postural transfers. Each temporal segment designates an event whose class is to be determined. At the end of this first phase, all time segments have the UNKNOWN class.
Deuxièmement (étapes E6 à ElO), une première classification est faite d'après les premières règles explicitement notifiées en cherchant à attribuer- et cela de manière la plus sûre possible - à certains événements (associés à des segments temporels respectifs) une classe de posture. Du fait du positionnement du capteur de mouvement au torse, on peut distinguer plus facilement les postures horizontales et verticales occupées par la personne. On cherche donc avant tout à distinguer les postures horizontales (COUCHE) des postures verticalesSecondly (steps E6 to E10), a first classification is made according to the first rules explicitly notified by seeking to assign - and in the safest possible way - to certain events (associated with respective time segments) a class of posture. . Due to the positioning of the movement sensor to the torso, it is easier to distinguish the horizontal and vertical postures occupied by the person. We therefore seek above all to distinguish horizontal postures (LAYER) from vertical postures
(ASSIS ou DEBOUT) selon un ensemble de plusieurs critères. Un point délicat reste le cas de postures fortement penchées en avant.(SITTING or STANDING) according to a set of several criteria. A delicate point remains the case of postures strongly bent forward.
Enfin, on détermine sur la base d'autres critères l'appartenance de certains segments du signal à faible variation d'activité (O-segments, auxquels on peut associer une posture stable) de longueur temporelle suffisante à la classe ASSISE ou DEBOUT, et de fait on détermine également sur la base d'une cohérence temporelle l'appartenance de certains segments du signal à forte variation d'activité (1- segments, auxquels on peut associer un transfert d'une posture stable à une autre, ou un mouvement dans une même posture) , à des transitions inter-postures et intra-postures (transferts) .Finally, it is determined on the basis of other criteria the membership of certain segments of the signal with a small variation of activity (O-segments, to which a stable posture can be associated) of sufficient length of time to the class ASSISTS or STANDING, and in fact, it is also determined on the basis of a temporal coherence the membership of certain segments of the signal with a strong variation of activity (1- segments, to which we can associate a transfer from one stable posture to another, or a movement in the same posture), to transitions between postures and intra-postures (transfers).
A l'issue de cette seconde phase, certains segments temporels possèdent une classe bien identifiée et d'autres possèdent encore la classe INCONNUE. Les premiers sont versés dans une base d'apprentissage par le système, et servent à définir des secondes règles de décision au moyen de leurs résultats de classification et de certaines de leurs caractéristiques.At the end of this second phase, some time segments have a well-identified class and others still have the UNKNOWN class. The former are put into a learning base by the system and are used to define second decision rules using their classification results and some of their characteristics.
Troisièmement (étape E12), la base d'apprentissage est mise en œuvre pour tenter de classer au mieux les événements demeurant toujours dans la classe inconnue. On décrira ci-dessous la façon dont la première partie du procédé est menée.Third (step E12), the learning base is implemented in an attempt to best classify the events still remaining in the unknown class. The manner in which the first part of the process is conducted will be described below.
Après avoir obtenu les signaux du capteur 16 (étape El de la figure 6), l'analyse est d'abord faite sur des données d'échantillonnage courtes, de l'ordre de la seconde (E2) ; on cherche à déterminer des zones de posture homogène sans essayer de déterminer cette posture.After obtaining the signals from the sensor 16 (step E1 of FIG. 6), the analysis is first made on short sampling data, of the order of one second (E2); we try to determine areas of homogeneous posture without trying to determine this posture.
Les critères de division des signaux en segments de longueurs inégales (E3) sont au nombre de deux et fondés sur l'index d'activité IA fourni par les signaux 3a (de l' accéléromètre triaxial) et sur les variations d'inclinaison du torse de la personne 15 dans le plan sagittal. Les paramètres correspondants sont calculés de la manière suivante. Pour le critère d'activité, la norme des signaux 3a de l' accéléromètre est représentative de l'énergie du mouvement en cours et donne un renseignement objectif sur l'activité physique du porteur. On calcule la valeur moyenne, pour chaque durée d'une seconde du signal de la quantité :The criteria for dividing the signals into unequal length segments (E3) are two and based on the activity index IA provided by the signals 3a (of the triaxial accelerometer) and on the variations of inclination of the torso of the person 15 in the sagittal plane. The corresponding parameters are calculated as follows. For the activity criterion, the signal standard 3a of the accelerometer is representative of the energy of the movement in progress and gives objective information on the physical activity of the wearer. The average value is calculated for each duration of one second of the signal of the quantity:
NHF[n] =4aHFΛP[nf +aHFML[nf +aHF[nf pour obtenir l'indice d'activitéN HF [n] = 4aHF ΛP [nf + aHF ML [nf + aHF [nf to obtain the activity index
où n est un indice, Fe une fréquence d'échantillonnage, FAP, FML et FVτ les valeurs mesurées des composantes du signal, F le signal, a l'accélération et H désigne une filtration passe-bande pour conserver les « hautes fréquences » (ici 0,5 à 10 Hz), représentatives de l'activité humaine, en supprimant la composante continue (accélération de la pesanteur) et le bruit. where n is an index, F e a sampling frequency, F AP , F ML and F V τ the measured values of the signal components, F the signal, at acceleration and H denotes a band-pass filtering to conserve the "High frequencies" (here 0.5 to 10 Hz), representative of human activity, in removing the DC component (acceleration of gravity) and noise.
L'indice d'activité IA basé sur le signal 3a est comparé à un seuil - matérialisé par la droite horizontale 25 de la figure 5, de valeur 0,04 - pour déterminer si une plage temporelle est associée à une phase active ou une phase au repos. Les valeurs de l'indice IA sont positives et généralement comprises entre 0 et 1. On peut aussi déterminer un index d'activité de l'activité en lacet du porteur. Pour diminuer la corrélation du signal 3m (du magnétomètre triaxial) avec le signal 3a, on propose de calculer un indice basé uniquement sur les variations temporelles de la composante ML (médio-latérale) du magnétomètre :The activity index IA based on the signal 3a is compared with a threshold - represented by the horizontal line 25 of FIG. 5, of value 0.04 - to determine whether a time range is associated with an active phase or a phase resting. The values of the index IA are positive and generally between 0 and 1. It is also possible to determine an index of activity of the yaw activity of the wearer. To reduce the correlation of the 3m signal (of the triaxial magnetometer) with the signal 3a, it is proposed to calculate an index based solely on the temporal variations of the ML (mediolateral) component of the magnetometer:
IM[n] = hML [n + \] - hML [n]IM [n] = h ML [n + \] - h ML [n]
Avec la valeur moyenne sur 1 seconde de la composante ML du magnétomètre :With the 1-second average value of the ML component of the magnetometer:
Pour le second critère, on utilise le signal à basse fréquence (sous 0,5 Hz) 3a deFor the second criterion, the low frequency signal (at 0.5 Hz) is used.
1' accéléromètre pour déterminer le tangage de la personne c'est-à-dire son inclinaison dans le plan sagittal.1 'accelerometer to determine the pitch of the person that is to say its inclination in the sagittal plane.
L' inclinaison dans le plan sagittal (pitch) est donnée trivialement par :The inclination in the sagittal plane (pitch) is trivially given by:
Pitch [n] =arcsin (aLFAP) , où, de façon analogue, a désigne l'accélération, L un filtrage passe-bas du signal, et F le signal. Un tangage négatif correspond à une personne penchée vers l'avant ; un tangage positif, à une personne penchée vers l'arrière.Pitch [n] = arcsin (aLF AP ), where, similarly, a designates the acceleration, L a low-pass filtering of the signal, and F the signal. A negative pitch is a person leaning forward; Positive pitch, to a person leaning backward.
Des seuils de variation de ces quantités d'activité et d'inclinaison du torse sont employés pour détecter les transferts de posture. Les portions d'échantillonnage consécutives de signaux sans variation atteignant ces seuils sont regroupées entre elles. On obtient ainsi des segments de durées inégales à partir de portions uniformes d'échantillonnage, et plus précisément avec une alternance de segments temporels de valeur 0, (O-segments) correspondant à des zones homogènes au sens de la posture (encore inconnue) et de segments temporels de courte durée de valeur 1 (1-segments) , correspondant à des zones avec un mouvement important qui peut être un transfert postural. La distinction entre ces deux catégories de segments est faite (E4). L'idée sous-jacente est qu'un transfert postural correspond à un certain niveau d'activité et une certaine variation d'inclinaison du torse .Thresholds of variation of these amounts of activity and inclination of the torso are used to detect posture transfers. Consecutive sampling portions of non-varying signals reaching these thresholds are grouped together. Segments of unequal duration are thus obtained from uniform sampling portions, and more precisely with an alternation of time segments of value 0, (O-segments) corresponding to zones homogeneous in the sense of the posture (still unknown) and short-term time segments of value 1 (1-segments), corresponding to areas with a large movement that may be a postural transfer. The distinction between these two categories of segments is made (E4). The underlying idea is that a postural transfer corresponds to a certain level of activity and a certain variation of inclination of the torso.
Les seuils utilisés lors de cette étape sont relativement critiques dans le sens où la répartition des données obtenues va conditionner la sensibilité de la classification de postures. Dans des cas défavorables, on peut obtenir un nombre faible de segments avec un même 0-segment qui peut contenir plusieurs postures différentes ou au contraire un nombre élevé de segments et des 1-segments peu spécifiques d'une transition posturale. Les deux critères ont été finalement appliqués de la façon suivante : un transfert de posture probable correspond à une variation minimum de 20 degrés pendant 3 secondes simultanée à une variation minimum de 0,08 (unités normalisées) pendant 3 secondes. Toute portion d'échantillonnage répondant à ces deux critères appartiendra donc à un 1- segment, les autres à un 0-segment.The thresholds used during this step are relatively critical in the sense that the distribution of the data obtained will condition the sensitivity of the classification of postures. In unfavorable cases, a small number of segments with the same 0-segment can be obtained which can contain several different postures or on the contrary a high number of segments and unspecific 1-segments of a postural transition. The two criteria were finally applied as follows: a probable posture transfer corresponds to a minimum variation of 20 degrees for 3 seconds simultaneous to a minimum variation of 0.08 (standardized units) for 3 seconds. Any sampling portion meeting these two criteria will therefore belong to one segment, the others to one segment.
Ces seuils sont suffisamment bas pour être sûrs de ne pas manquer un transfert postural. En contrepartie, on identifie ainsi de nombreux 1-segments qui ne sont pas des vrais transferts posturaux (artefacts) .These thresholds are low enough to make sure you do not miss a postural transfer. In return, we identify many 1-segments that are not true postural transfers (artifacts).
Dans une seconde passe (E5) , certains 1- segments peuvent être invalidés pour augmenter la spécificité et ainsi diminuer la sur-segmentation. Après différents essais, on a fait le choix d'invalider un 1-segment si le niveau d'activité moyen reste élevé de part et d'autre de ce 1-segment. En effet, on fera l'hypothèse ultérieurement qu'une posture ASSIS ou COUCHE est caractérisée par une faible activité, où IA et IM sont inférieurs à 0,04 et qu'une forte activité est relative à une position DEBOUT. On calcule donc sur chacun des 0-segments la moyenne de l'index d'activité IA. Si l'index d'activité est supérieur au seuil avant et après le transfert potentiel, alors on invalide le 1-segment.In a second pass (E5), some 1- segments can be disabled to increase specificity and thus reduce over-segmentation. After various tests, it was decided to invalidate a 1-segment if the average level of activity remains high on both sides of this 1-segment. Indeed, it will be assumed later that a SAT or LATE posture is characterized by a low activity, where IA and IM are less than 0.04 and a strong activity is relative to a STANDING position. The average of the activity index IA is thus calculated on each of the 0-segments. If the activity index is above the threshold before and after the potential transfer, then the 1-segment is invalidated.
On donne ci-après un exemple de mise en œuvre de l'arbre de décision que sont les premières règles de décision (E6-E10). Dans tous les critères suivants, les valeurs retenues sont des moyennes sur le segment considéré.The following is an example of implementation of the decision tree that are the first decision rules (E6-E10). In all criteria following values, the values used are averages for the segment under consideration.
Dans la fenêtre temporelle d'analyse de signaux, on recherche (E6) le premier 0-segment susceptible de représenter une posture horizontale (E7) .In the time window of signal analysis, we search (E6) the first 0-segment likely to represent a horizontal posture (E7).
Le critère retenu est accVT <thl) ou accMlJ >th3) , où ace est cette fois utilisé pour désigner l'accélération mesurée. Cela permet de détecter les cas où la personne est fortement penchée dans le plan sagittal (personne couchée sur le ventre/dos) ou dans le plan latéral (personne couchée sur le côté) .The criterion chosen is accVT <thl) or accMlJ> th3), where ace is this time used to designate the measured acceleration. This allows to detect cases where the person is strongly bent in the sagittal plane (person lying on the stomach / back) or in the lateral plane (person lying on the side).
On détectera ensuite le 0-segment suivant susceptible de représenter une posture verticale (E8). Le critère retenu est (accVT>th4). Tous les O-segments et 1-segments compris dans l'intervalle sont affectés à la classe COUCHE.We will then detect the next 0-segment likely to represent a vertical posture (E8). The criterion chosen is (accVT> th4). All O-segments and 1-segments within the range are assigned to the LAYER class.
Les seuils utilisés pour les accéléromètres et les classements obtenus quand ces inégalités sont observées sont donnés par le tableau 1.The thresholds used for the accelerometers and the rankings obtained when these inequalities are observed are given in Table 1.
Tableau 1Table 1
Une difficulté ici est de ne pas confondre une posture horizontale de type COUCHE avec le cas où la personne se penche fortement en avant. Un critère temporel (durée de la posture horizontale penchée en avant) est mis en œuvre dans ce cas pour détecter ces situations, et la posture de type COUCHE est supposée si un seuil de 300 secondes est atteint. A difficulty here is not to confuse a horizontal posture type LAYER with the case where the person leans strongly forward. A temporal criterion (duration of the horizontal posture bent forward) is implemented in this case to detect these situations, and the posture of the LAYER type is assumed if a threshold of 300 seconds is reached.
A l'issue de ces premières étapes, la classification HORIZONTAL (COUCHE) et VERTICAL (DEBOUT/ASSIS) est supposée réalisée.At the end of these first steps, the classification HORIZONTAL (LAYER) and VERTICAL (DEBOUT / ASSIS) is supposed to be carried out.
On s'intéresse ensuite à la classificationWe then focus on the classification
ASSIS/DEBOUT (E9) et à l'identification des transfertsSITTING / STANDING (E9) and identification of transfers
(ElO) en mettant au point un ensemble de règles de décision basées à la fois sur des critères basés sur 1' accéléromètre et sur le magnétomètre . On cherche de préférence à identifier les postures puis les transferts .(ElO) by developing a set of decision rules based on both accelerometer and magnetometer based criteria. We prefer to identify postures and transfers.
Après différents tests, les critères de décision suivants ont été retenus : Pour la classe DEBOUT, a) Le 0-segment doit avoir une durée temporelle supérieure à un temps donné (10 secondes par exemple) . b) On identifie les phases de marche par analyse du signal 3a filtré en hautes fréquences. Si leAfter various tests, the following decision criteria have been retained: For the STANDING class, a) The 0-segment must have a temporal duration greater than a given time (10 seconds for example). b) The phases of walking are identified by analysis of the signal 3a filtered at high frequencies. If the
0-segment contient une part non négligeable de phase de marche, l'ensemble du segment l'intervalle est classé DEBOUT. La marche est détectée par la présence d'un pic d'énergie important à 1 Hz environ. c) De même, si le niveau d'activité IA ou IM est supérieur à un seuil (0,04), on l'affecte à la classe DEBOUT.0-segment contains a significant part of the walking phase, the whole segment the range is classified STANDING. The step is detected by the presence of a large energy peak at about 1 Hz. c) Similarly, if the activity level IA or IM is greater than a threshold (0.04), it is assigned to the STANDARD class.
Il faut que les critères a et b, ou a et c, soient tous deux vérifiés.The criteria a and b, or a and c, must both be verified.
Pour la classe ASSIS, a) On suppose que le 0-segment doit avoir une durée temporelle supérieure à un temps donné (30 secondes par exemple) . b) Si le 0-segment correspond à une posture inclinée vers l'arrière (de 20 degrés au moins), on affecte le segment à la classe ASSIS. c) De même, si le niveau d'activité IA ou IM est inférieur à un seuil (0,02), on affecte le segment à la classe ASSIS.For the ASSIS class, a) It is assumed that the 0-segment must have a time duration greater than a given time (30 seconds for example). b) If the 0-segment corresponds to a posture inclined towards the back (of 20 degrees at least), one assigns the segment to the class ASSIS. c) Similarly, if the activity level IA or IM is below a threshold (0.02), the segment is assigned to the ASSIS class.
Il faut que les critères a et b, ou a et c, soient respectés.The criteria a and b, or a and c, must be respected.
Pour les 1-segments :For 1-segments:
Certains 1-segments sont déterminés de fait en mouvement intra-postural (artefact) ou inter- postural (transfert) . Cette affectation est déterminée suivant la nature des postures précédentes et suivantes, quand elles ont été déterminées.Certain 1-segments are determined in fact in intra-postural movement (artifact) or inter-postural (transfer). This assignment is determined by the nature of the preceding and following postures, when they have been determined.
Un 1-segment entre deux postures différentes est un transfert, un 1-segment entre deux postures semblables est un artefact et n'est pas classé .A 1-segment between two different postures is a transfer, a 1-segment between two similar postures is an artifact and is not classified.
Les segments alors classés sont versés par le système dans une base d'apprentissage qui recueille leurs résultats de classification et des seconds paramètres qui, mis en relation avec les résultats de classification, servent à élaborer des secondes règles de décision par le système (en ajustant les poids dans le cas d'un réseau de neurones) ; ces secondes règles de décision restent en général implicites, ou inconnues des opérateurs, qui ne les programment pas, et elles sont différentes des premières règles puisqu'elles font appel à des paramètres différents. De plus, les premières règles de décision font plutôt appel aux mesures d'accélération dans l'exemple considéré, alors que les secondes règles font plutôt appel aux mesures de magnétométrie . Il est à signaler que d'autres capteurs pourraient aussi servir utilement aux secondes règles de décision, comme des gyromètres pour mesurer les vitesses de rotation de la personne, notamment de lacet.The segments then classified are poured by the system into a learning base which collects their classification results and second parameters which, related to the results of the classification. classification, are used to develop second decision rules by the system (by adjusting the weights in the case of a neural network); these second decision rules generally remain implicit, or unknown to the operators, who do not program them, and they are different from the first rules since they call on different parameters. In addition, the first decision rules use the acceleration measurements in the example in question, whereas the second rules instead use magnetometry measurements. It should be noted that other sensors could also be useful for second decision rules, such as gyrometers to measure the speed of rotation of the person, including yaw.
Les secondes règles sont appliquées pour classer les événements restant en classe INCONNUE (E12). Les paramètres sur lesquels opère l'algorithme sont calculés classiquement sur les signaux acquis par le capteur 16 et sur les signaux intermédiaires (angle d'inclinaison, angle de lacet, index d'activité, ...) . Les paramètres calculés sont par exemple, pour chaque segment :The second rules are applied to classify the remaining events in UNKNOWN class (E12). The parameters on which the algorithm operates are conventionally calculated on the signals acquired by the sensor 16 and on the intermediate signals (tilt angle, yaw angle, activity index, etc.). The calculated parameters are, for example, for each segment:
• statistiques sur les signaux, • durée,• signal statistics, • duration,
• contenu fréquentiel (répartition des pics d'énergie au domaine fréquentiel),• frequency content (distribution of energy peaks in the frequency domain),
• voire le segment lui-même (signature) .• even the segment itself (signature).
A l'issue de cette phase, un certain nombre d'événements (0-segment ou l-segment) ne sont pas encore classés et restent en classe INCONNUE. Une idée de l'invention est d'utiliser l'ensemble ou une partie des événements déjà bien classés pour construire une base d'apprentissage automatique à passer à un algorithme d'apprentissage supervisé (EIl) .At the end of this phase, a number of events (0-segment or 1-segment) are not yet classified and remain in UNKNOWN class. An idea of the invention is to use all or some of the already well-classified events to build a machine learning base to move to a supervised learning algorithm (IS).
La base d'apprentissage est complétée à mesure au moyen des résultats des segments nouvellement identifiés. Les secondes règles de décision (poids dans le réseau de neurones) sont avantageusement mis à jour. L'ordinateur tenant la base d'apprentissage analyse donc chaque segment, déjà identifié ou non, de façon semblable d' après le second groupe de paramètres en utilisant la base d'apprentissage. Pour chacun des segments inconnus, il calcule des scores de similitude avec des éléments de chacune des classes, ou des distances calculées suivant des normes mathématiques usuelles dans un espace à dimensions multiples. Les paramètres considérés peuvent être, en ce qui concerne les statistiques des signaux, des valeurs moyennes, des énergies, des variances ; en ce qui concerne le segment lui-même, on recherche des similitudes avec des segments antérieurs dans leur ensemble ; cette recherche est faite essentiellement pour les 1-segments susceptibles de représenter des états transitoires en se fondant sur la répétition fréquente et presque exacte des mêmes gestes pour passer d'une posture à une autre. La signature du segment est une composante du signal qui reflète une fonction d'évolution de la posture. Un autre critère intéressant serait la reconnaissance d'une phase de repos de durée importante présentant un angle de lacet (azimut moyen considéré sur un segment) similaire à un azimut de référenceThe learning base is completed as a result of the results of the newly identified segments. The second decision rules (weight in the neural network) are advantageously updated. The computer holding the learning base therefore analyzes each segment, already identified or not, in a similar way according to the second group of parameters using the learning base. For each of the unknown segments, it calculates similarity scores with elements of each of the classes, or distances calculated according to usual mathematical norms in a space with multiple dimensions. The parameters considered can be, with regard to the statistics of the signals, average values, energies, variances; as far as the segment itself is concerned, similarities are sought with previous segments as a whole; this research is done essentially for the 1-segments likely to represent transient states based on the frequent and almost exact repetition of the same gestures to move from one posture to another. The signature of the segment is a component of the signal that reflects a function of evolution of the posture. Another interesting criterion would be the recognition of a significant rest phase with a yaw angle (average azimuth considered on a segment) similar to a reference azimuth
(correspondant à un siège d'orientation fixe dans la résidence du porteur) , donc de classe assis, en profitant ici encore de répétitions d'attitudes liées à des habitudes de la personne, indépendamment des signaux eux-mêmes ; ces exemples montrent aussi qu'un paramètre de classement sera souvent l'angle de lacet ou sa variation temporelle.(corresponding to a fixed orientation seat in the residence of the wearer), therefore sitting class, again taking advantage of repetitions of attitudes related to the habits of the person, regardless of the signals themselves; these examples also show that a ranking parameter will often be the yaw angle or its temporal variation.
Quand un nouveau segment a été versé dans la base d'apprentissage, les calculs suivants peuvent être faits aussi en référence à lui.When a new segment has been poured into the learning base, the following calculations can be made also with reference to it.
On donne maintenant certaines possibilités de généralisation. Les règles du premier groupe pourront être choisies parmi les suivantes, dans des réalisations plus complexes du procédé : reconnaissance d'une phase d'activité correspondant à une marche (accélération positive et assez régulière dans l'axe AP), donc de classe debout ;We now give some possibilities of generalization. The rules of the first group may be chosen from among the following, in more complex embodiments of the method: recognition of a phase of activity corresponding to a step (positive and fairly regular acceleration in the AP axis), therefore of standing class;
- reconnaissance d'une phase de repos puis, sans transition, d'une phase de marche (seule l'accélération dans l'axe AP changeant), donc classification de la phase de repos en classe debout ; - reconnaissance d'une phase de repos présentant un angle de tangage ou d'élévation, (autour de l'axe ML à partir de l'axe VT) fortement négatif correspondant à une personne assise inclinée vers l'arrière, donc de classe assis ; - reconnaissance d'une phase de repos de durée importante présentant un angle de lacet (rotation autour de l'axe VT) variant faiblement, donc de classe assis ; reconnaissance d'une phase d'activité présentant un angle de lacet variant fortement et un angle de tangage ou d'élévation de variation modérée, correspondant à un changement de direction du porteur, donc de classe debout ; reconnaissance d'une phase de forte activité de durée peu importante entre deux postures identiques donc de classe identique : on est en présence d'un mouvement intérieur à une même classe debout ou assis ; reconnaissance d'une phase de forte activité de durée peu importante entre deux postures différentes, donc correspondant à une transition, et classement en debout/assis ou assis/debout.- Recognition of a rest phase and, without transition, a phase of walking (only the acceleration in the axis AP changing), so classification of the rest phase in standing class; - recognition of a rest phase having a pitch angle or elevation, (around the axis ML from the VT axis) strongly negative corresponding to a seated person inclined backwards, so seated class ; - Recognition of a long rest phase with a yaw angle (rotation around the axis VT) varying slightly, therefore of seated class; recognition of an activity phase having a greatly varying yaw angle and a pitch angle or moderate variation of elevation, corresponding to a change of direction of the wearer, therefore of standing class; recognition of a phase of strong activity of little duration between two identical postures, therefore of identical class: one is in the presence of an interior movement in the same standing or sitting class; recognition of a phase of strong activity of little duration between two different postures, therefore corresponding to a transition, and ranking in standing / sitting or sitting / standing.
Ces renseignements sont donnés soit par les accéléromètres (pour le mouvement) , soit par les magnétomètres (pour les orientations) , soit par une combinaison des deux.This information is given either by the accelerometers (for the movement), by the magnetometers (for the orientations), or by a combination of the two.
Les paramètres utilisés pour les secondes règles de décision peuvent être ceux qui ont été utilisés pour appliquer les premières règles de classification (en les combinant autrement) ou, de façon plus typique et plus féconde, d'autres paramètres. Les secondes règles de classification sont déterminées et peuvent être amendées pour tendre à faire concorder les évaluations qu'elles donnent des états identifiés avec les évaluations obtenues avec les premières règles de classification pour les mêmes phases . Si les premières règles de décision sont associées à la production d'un indice de confiance du résultat de classement qu'elles donnent, les événements qui auront été classés à la première étape pourront être versés à la base d'apprentissage seulement si 1 ' indice de confiance a atteint une valeur supérieure à un seuil déterminé : des événements classés dès la première étape mais avec une sûreté insuffisante n'auront pas d'influence sur des secondes règles de décision.The parameters used for the second decision rules can be those used to apply the first classification rules (by combining them differently) or, more typically and more fruitfully, other parameters. The second classification rules are determined and can be amended to tend to match the evaluations they give of the identified states with the evaluations obtained with the first classification rules for the same phases. If the first decision rules are associated with the production of a confidence index of the ranking result that they give, the events that have been classified in the first step can be paid to the learning base only if the index has reached a value above a certain threshold: events classified in the first step but with insufficient safety will have no influence on second decision rules.
Le procédé de 1 ' invention se prête bien à un apprentissage supervisé des secondes règles de décision. Toutes les règles de décision sont alors définies par l'opérateur : les premières règles de décision pourront être celles dont l'application est la plus simple, et les secondes règles de décision celles qui nécessitent des calculs, qui interagissent entre elles ou qui tolèrent des exceptions ou ne sont pas connues parfaitement et pourront être amendées par la suite.The method of the invention lends itself well to supervised learning of the second decision rules. All the decision rules are then defined by the operator: the first decision rules can be those whose application is the simplest, and the second decision rules those which require calculations, which interact with each other or which tolerate exceptions or are not known perfectly and may be amended later.
Dans d'autres cas, il pourra être utile au contraire de corriger les premières règles de décision, quand elles donnent un résultat différent des secondes règles de décision ou qu'elles se contredisent : le résultat donné par les secondes règles de décision permettra d'identifier les premières règles de décision qui auront donné un résultat opposé ; ces règles pourront être amendées (quand elles dépendent d'un seuil par exemple) , minorées en leur attribuant une importance moins grande, ou même supprimées. La correction pourra être décidée d'après le nombre et l'indice de confiance des résultats, ou la fiabilité respective des règles.In other cases, it may be useful, on the contrary, to correct the first decision rules, when they give a result different from the second decision rules or when they contradict each other: the result given by the second decision rules will allow identify the first decision rules that will have given an opposite result; these rules may be amended (when they depend on a threshold for example), reduced by giving them less importance, or even deleted. The correction may be decided according to the number and the confidence index of the results, or the respective reliability of the rules.
Les secondes règles de décision peuvent elles-mêmes être contrôlées par des troisièmes règle de décision spécifiées par l'opérateur et servant à détecter des erreurs de classement des secondes règles de décision. Quand des erreurs seront détectées, les secondes règles de décision pourront être corrigées pour tendre à faire coïncider leur résultat de classement avec le résultat désiré. Il est encore possible de verser les événements concernés dans la base d'apprentissage avec les valeurs de leurs paramètres et le résultat corrigé par les troisièmes règles de décision. Un autre perfectionnement du procédé consisterait à supprimer les premières règles de décision ou seulement certaines d'entre elles, progressivement ou non, quand il est jugé que les secondes règles de décision ont atteint une fiabilité suffisante, notamment quand la base d'apprentissage a atteint une taille suffisante ou que les secondes règles de décision sont stabilisées à un état où elles classent tous les événements de façon fiable.The second decision rules can themselves be controlled by third decision rules specified by the operator and used to detect classification errors of the second decision rules. When errors are detected, the second decision rules can be corrected to tend to match their ranking result with the desired result. It is still possible to pour the events concerned into the learning base with the values of their parameters and the result corrected by the third decision rules. Another improvement of the method would be to delete the first decision rules or only some of them, gradually or not, when it is judged that the second decision rules have reached a sufficient reliability, especially when the learning base has reached a sufficient size or that the second decision rules are stabilized to a state where they classify all events reliably.
Pour tous ces perfectionnements où les règles de décision sont susceptibles d'évoluer, l'utilisation d'indices de confiance offre une aide non seulement en désignant des résultats douteux, mais en dévoilant les règles qui les donnent et sont donc moins utiles ou susceptibles d'être corrigées. For all these refinements where the decision rules are likely to evolve, the use of confidence indexes provides help not only by pointing out dubious results, but by revealing the rules that give them and are therefore less useful or likely to to be corrected.

Claims

REVENDICATIONS
1. Procédé d'identification de postures d'une personne, destiné à identifier des événements correspondant à une posture particulière ou à un changement de posture et associées à des classes respectives, comprenant les étapes suivantes :A method of identifying a person's postures, for identifying events corresponding to a particular posture or a change of posture and associated with respective classes, comprising the steps of:
- fixation d'un capteur sur la personne ;- fixing a sensor on the person;
- enregistrement d'au moins un signal du capteur pendant une fenêtre de temps ; extraction de paramètres de partitionnement à partir dudit signal ; division, à partir des paramètres de partitionnement, de la fenêtre temporelle en segments satisfaisant à un critère d'homogénéité de posture ou de changement de posture, et extraction, pour chacun des segments, d'un premier jeu de paramètres à partir dudit signal ; classement de chacun des segments dans une des classes d'événement associées auxdits événements ou dans une classe qui n'est pas associée à un événement, en appliquant des premières règles de décision à partir du premier jeu de paramètres associé aux segments ; - comprenant une opération de calibration destinée à créer une base d'apprentissage, comprenant les étapes suivantes pour chaque segment appartenant à une classe d'événement :recording at least one sensor signal during a time window; extracting partitioning parameters from said signal; dividing, from the partitioning parameters, the time window into segments satisfying a criterion of homogeneity of posture or change of posture, and extracting, for each of the segments, a first set of parameters from said signal; ranking each of the segments in one of the event classes associated with said events or in a class that is not associated with an event, applying first decision rules from the first set of parameters associated with the segments; - comprising a calibration operation for creating a learning base, comprising the following steps for each segment belonging to an event class:
- extraction d'un second jeu de paramètres à partir dudit signal ; ajout dans ladite base d'apprentissage d'une donnée répertoriant le second jeu de paramètres et la classe d'événement associés au segment considéré,extracting a second set of parameters from said signal; adding to said learning base data item listing the second set of parameters and the class of events associated with the segment in question,
- et utilisation de la base d'apprentissage pour classer des segments dudit enregistrement ou d'un autre enregistrement ultérieur qui n'ont pas été associés à un événement en appliquant des secondes règles de décision utilisant la base d'apprentissage à partir d'un second jeu de paramètres associé à ces segments.and using the learning base to classify segments of said record or other subsequent record that have not been associated with an event by applying second decision rules using the learning base from a second set of parameters associated with these segments.
2. Procédé d'identification de postures d'une personne selon la revendication 1, caractérisé en ce que le capteur (16) comprend un accélérateur triaxial et un magnétomètre triaxial.2. A method of identifying postures of a person according to claim 1, characterized in that the sensor (16) comprises a triaxial accelerator and a triaxial magnetometer.
3. Procédé d'identification de postures d'une personne selon la revendication 1 ou 2, caractérisé en ce que certains au moins des segments identifiés par les premières et les secondes règles de décision sont incorporés à la base d'apprentissage par leurs paramètres et les postures y associées.3. A method of identifying postures of a person according to claim 1 or 2, characterized in that at least some of the segments identified by the first and second decision rules are incorporated into the learning base by their parameters and the associated postures.
4. Procédé d'identification de postures d'une personne selon la revendication 1 à 3, caractérisé en ce qu' il comprend des étapes d'échantillonnage du signal en portions de durées uniformes et de regroupement de groupes des portions pour donner les segments. 4. A method of identifying postures of a person according to claim 1 to 3, characterized in that it comprises steps of sampling the signal in portions of uniform durations and grouping groups of portions to give the segments.
5. Procédé d'identification de postures d'une personne selon la revendication 4, caractérisé en ce que le regroupement des groupes des portions s'effectue d'après un critère de variation maximale de niveau d' activité de la personne et un critère de variation maximale d'une inclinaison de la personne.5. A method of identifying postures of a person according to claim 4, characterized in that the grouping of the groups of portions is carried out according to a criterion of maximum variation of activity level of the person and a criterion of maximum variation of an inclination of the person.
6. Procédé d'identification de postures d'une personne selon la revendication 4 ou 5, caractérisé en ce qu'il comporte une répartition des segments en deux catégories alternant.6. A method of identifying postures of a person according to claim 4 or 5, characterized in that it comprises a division of the segments into two alternating categories.
7. Procédé d'identification de postures d'une personne selon la revendication 1 à 6, caractérisé en ce que les premières règles de décision comprennent une étape de distinction entre des postures horizontales et des postures verticales d'après une mesure d' orientation d' accélération de gravité par le capteur .7. A method of identifying postures of a person according to claim 1 to 6, characterized in that the first decision rules comprise a step of distinction between horizontal postures and vertical postures according to a measurement of orientation of gravity acceleration by the sensor.
8. Procédé d'identification de postures d'une personne selon la revendication 7, caractérisé en ce que les premières règles de décision comprennent une étape de distinction entre une posture debout et une posture assise d'après, au moins, des critères de durée et de niveau d'activité.8. A method of identifying postures of a person according to claim 7, characterized in that the first decision rules comprise a step of distinction between a standing posture and a sitting posture according to, at least, duration criteria. and level of activity.
9. Procédé d'identification de postures d'une personne selon la revendication 7 ou 8, caractérisé en ce que les premières règles de décision comprennent une étape d'identification d'états transitoires immédiatement entre des paires d'états de postures différentes séparant lesdits états transitoires, et d'élimination d'états transitoires immédiatement entre des paires d'états de postures semblables.9. A method of identifying postures of a person according to claim 7 or 8, characterized in that the first decision rules comprise a step of identifying states. transients immediately between pairs of states of different postures separating said transient states, and transient state elimination immediately between pairs of states of similar postures.
10. Procédé d'identification de postures d'une personne selon l'une quelconque des revendication 1 à 9, caractérisé en ce que le second groupe de paramètres comprend, pour chacun des segments, des paramètres statistiques sur les signaux, une durée du segment, un contenu fréquentiel du segment.10. A method of identifying postures of a person according to any one of claims 1 to 9, characterized in that the second group of parameters comprises, for each of the segments, statistical parameters on the signals, a duration of the segment , a frequency content of the segment.
11. Procédé d'identification de postures d'une personne selon l'une quelconque des revendications 1 à 10, caractérisé en ce que le second groupe de paramètres comprend une signature de segments, c'est-à-dire au moins une composante du signal reflétant une fonction d'évolution de la posture.11. A method of identifying postures of a person according to any one of claims 1 to 10, characterized in that the second group of parameters comprises a segment signature, that is to say at least one component of the signal reflecting a function of evolution of the posture.
12. Procédé d'identification de postures d'une personne selon l'une quelconque des revendications 1 à 11, caractérisé en ce que les secondes règles de décision dépendent de scores de similitude ou de distance entre les segments à identifier et les segments versés dans la base d'apprentissage d'après les postures associées auxdits segments versés. 12. A method of identifying postures of a person according to any one of claims 1 to 11, characterized in that the second decision rules depend on similarity scores or distance between the segments to identify and the segments paid into the training base according to the postures associated with said paid segments.
13. Procédé d'identification de postures d'une personne selon l'une quelconque des revendications 1 à 12, caractérisé en ce que le capteur comprend des gyromètres et les secondes règles de décision comprenant une comparaison d'un azimut moyen dans les segments à un azimut de référence. 13. A method of identifying postures of a person according to any one of claims 1 to 12, characterized in that the sensor comprises gyrometers and the second decision rules comprising a comparison of a mean azimuth in the segments to a reference azimuth.
EP07704329A 2006-02-02 2007-02-02 Method for identifying a person's posture Withdrawn EP1979854A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0650376A FR2896896B1 (en) 2006-02-02 2006-02-02 METHOD FOR CLASSIFYING EVENTS OR STATEMENTS IN TWO STEPS
PCT/EP2007/051042 WO2007088205A1 (en) 2006-02-02 2007-02-02 Method for identifying a person's posture

Publications (1)

Publication Number Publication Date
EP1979854A1 true EP1979854A1 (en) 2008-10-15

Family

ID=37499564

Family Applications (1)

Application Number Title Priority Date Filing Date
EP07704329A Withdrawn EP1979854A1 (en) 2006-02-02 2007-02-02 Method for identifying a person's posture

Country Status (4)

Country Link
US (1) US9026477B2 (en)
EP (1) EP1979854A1 (en)
FR (1) FR2896896B1 (en)
WO (1) WO2007088205A1 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8491504B2 (en) * 2009-08-04 2013-07-23 University Of South Carolina Devices and methods for monitoring sit to stand transfers
EP2668945A1 (en) 2012-06-01 2013-12-04 Bayer Technology Services GmbH Genotype and phenotype-based medicinal formulations
FR3015072B1 (en) * 2013-12-18 2017-03-17 Movea METHOD FOR DETERMINING THE ORIENTATION OF A MOBILE TERMINAL-RELATED SENSOR MARK WITH SENSOR ASSEMBLY PROVIDED BY A USER AND COMPRISING AT LEAST ONE MOTION-MOVING MOTION SENSOR
CN104049752B (en) * 2014-06-04 2017-04-12 北京智谷睿拓技术服务有限公司 Interaction method based on human body and interaction device based on human body
EP3789830B1 (en) 2019-09-09 2024-04-03 The Swatch Group Research and Development Ltd Dial and method for manufacturing a dial for a watch

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005098739A1 (en) * 2004-04-08 2005-10-20 Mobileye Technologies Limited Pedestrian detection
US20060018516A1 (en) * 2004-07-22 2006-01-26 Masoud Osama T Monitoring activity using video information

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6834436B2 (en) * 2001-02-23 2004-12-28 Microstrain, Inc. Posture and body movement measuring system
FR2868281B1 (en) * 2004-03-30 2023-06-23 Commissariat Energie Atomique METHOD FOR DETERMINING THE MOVEMENTS OF A PERSON.
US7467061B2 (en) * 2004-05-14 2008-12-16 Canon Kabushiki Kaisha Information processing method and apparatus for finding position and orientation of targeted object
FR2886532B1 (en) 2005-06-07 2008-03-28 Commissariat Energie Atomique METHOD AND SYSTEM FOR DETECTING THE FALL OF A PERSON

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005098739A1 (en) * 2004-04-08 2005-10-20 Mobileye Technologies Limited Pedestrian detection
US20060018516A1 (en) * 2004-07-22 2006-01-26 Masoud Osama T Monitoring activity using video information

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of WO2007088205A1 *

Also Published As

Publication number Publication date
FR2896896A1 (en) 2007-08-03
US20090012921A1 (en) 2009-01-08
FR2896896B1 (en) 2009-09-25
US9026477B2 (en) 2015-05-05
WO2007088205A1 (en) 2007-08-09

Similar Documents

Publication Publication Date Title
EP2023268B1 (en) Method and device for recognising the position or movement of a device or living being
EP1979854A1 (en) Method for identifying a person&#39;s posture
EP0668570A1 (en) Image processing method for locally determining the center and half-length of contrasting objects on a background and apparatus to carry out the method
FR2943236A1 (en) METHOD FOR MONITORING A BIOLOGICAL PARAMETER OF A PERSON USING SENSORS
EP0960382B1 (en) Method for identifying in a pre-established catalogue stars detected by a star sensor
EP3958738A1 (en) Method and system for determining a value of an advanced biomechanical gait parameter
EP3552146B1 (en) Detection of nerves in a series of echographic images
CA3092784A1 (en) Computing device for detecting heart rhythm disorders
EP1721573B1 (en) Method for estimating the phase of movement of an object
EP1340103B1 (en) Method for detecting new objects in an illuminated scene
FR3007871A1 (en) METHOD OF REDUCING NOISE IN FLUOROSCOPIC IMAGE SEQUENCES
FR2967273A1 (en) SENSOR DETECTION DEVICE, DETECTION METHOD AND CORRESPONDING COMPUTER PROGRAM
FR2950451A1 (en) ALGORITHM FOR DETECTION OF CONTOUR POINTS IN AN IMAGE
WO2012079996A1 (en) Method of comparing images of irises by intelligent selection of textured zones
EP3841978B1 (en) Method and device for processing a heart rate signal
EP3700409B1 (en) Method and device for monitoring the fluorescence emitted at the surface of a biological tissue
EP1714112A1 (en) Method of sensing the motion of a solid, using an absolute measurement that is associated with a measurement calculated by double integration
FR2983055A1 (en) Method for detecting and estimating characteristic waves of cardiac events in ECG signal to monitor e.g. aged person in residence, involves utilizing positively polarized and negatively polarized filtered signals to detect waves
EP4150574A1 (en) Method for processing images
FR3097997A1 (en) Process for analyzing an individual&#39;s gait
WO2023012416A1 (en) Quantative analysis of fluctuations in biological tissues via multispectral photoacoustic imaging
WO2022238640A1 (en) Method for generating rare medical images for training deep-learning algorithms
FR3130061A1 (en) Simultaneous localization and mapping method integrating self-supervised temporal masking and machine learning model to generate such masking.
FR3113155A1 (en) A method of identifying a dental implant visible in an input image using at least one convolutional neural network.
CA3230088A1 (en) Method for matching a candidate image with a reference image

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20080718

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LI LT LU LV MC NL PL PT RO SE SI SK TR

17Q First examination report despatched

Effective date: 20081119

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: COMMISSARIAT A L'ENERGIE ATOMIQUE ET AUX ENERGIES

DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20200701