WO2017199597A1 - 生体情報処理装置、生体情報処理方法、及び情報処理装置 - Google Patents

生体情報処理装置、生体情報処理方法、及び情報処理装置 Download PDF

Info

Publication number
WO2017199597A1
WO2017199597A1 PCT/JP2017/013590 JP2017013590W WO2017199597A1 WO 2017199597 A1 WO2017199597 A1 WO 2017199597A1 JP 2017013590 W JP2017013590 W JP 2017013590W WO 2017199597 A1 WO2017199597 A1 WO 2017199597A1
Authority
WO
WIPO (PCT)
Prior art keywords
pulse wave
body motion
signal
unit
information processing
Prior art date
Application number
PCT/JP2017/013590
Other languages
English (en)
French (fr)
Inventor
石川 貴規
靖英 兵動
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2018518139A priority Critical patent/JP6813024B2/ja
Priority to US16/300,652 priority patent/US11311242B2/en
Publication of WO2017199597A1 publication Critical patent/WO2017199597A1/ja

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02416Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
    • A61B5/02427Details of sensor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02416Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/681Wristwatch-type devices
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • A61B5/7207Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal of noise induced by motion artifacts
    • A61B5/721Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal of noise induced by motion artifacts using a separate sensor to detect motion or using motion information derived from signals other than the physiological signal to be measured
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • A61B5/7207Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal of noise induced by motion artifacts
    • A61B5/7214Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal of noise induced by motion artifacts using signal cancellation, e.g. based on input of two identical physiological sensors spaced apart, or based on two signals derived from the same sensor, for different optical wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7221Determining signal validity, reliability or quality
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7246Details of waveform analysis using correlation, e.g. template matching or determination of similarity
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/725Details of waveform analysis using specific filters therefor, e.g. Kalman or adaptive filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/04Arrangements of multiple sensors of the same type

Definitions

  • the present technology relates to a biological information processing apparatus, a biological information processing method, and an information processing apparatus that output heartbeat information of a user.
  • PPG method Photoelectric volume pulse wave method
  • Patent Document 1 describes a pulse meter including a pulse wave sensor and a body motion sensor.
  • This pulse meter is provided with an adaptive filter that uses the pulse wave signal output from the pulse wave sensor as an observation signal and the body motion signal output from the body motion sensor as an input signal.
  • the predicted value of the body motion component calculated by the adaptive filter is subtracted from the pulse wave signal, and fast Fourier transform (FFT) processing is performed on the residual signal.
  • FFT fast Fourier transform
  • the component having the maximum level is extracted as a pulse wave component, and the pulse rate per minute is calculated. This makes it possible to accurately measure the pulse rate (paragraphs [0007] to [0012] in FIG. 1 of Patent Document 1).
  • an object of the present technology is to provide a biological information processing apparatus, a biological information processing method, and an information processing apparatus that enable highly accurate heart rate measurement.
  • a biological information processing apparatus includes a pulse wave sensor unit, a plurality of calculation units, and an output unit.
  • the pulse wave sensor unit outputs a pulse wave signal.
  • Each of the plurality of calculation units calculates heartbeat candidate information together with reliability based on the output pulse wave signal.
  • the output unit outputs heartbeat information based on the heartbeat candidate information calculated by each of the plurality of calculation units and its reliability.
  • heart rate candidate information is calculated together with reliability by each of a plurality of calculation units. Therefore, it is possible to output heartbeat information with high reliability based on such information. As a result, heartbeat measurement with high accuracy can be realized.
  • the biological information processing apparatus further includes a body motion sensor that outputs a body motion signal, and a noise reduction processing unit that separates body motion noise from the pulse wave signal output from the pulse wave sensor unit based on the body motion signal You may comprise.
  • each of the plurality of calculation units may calculate the heartbeat candidate information and its reliability based on the pulse wave signal from which the body motion noise is separated. Based on the pulse wave signal from which the body motion noise is separated, it is possible to calculate heartbeat candidate information with high accuracy. As a result, highly accurate heart rate measurement is realized.
  • the plurality of calculation units may include a first calculation unit that detects a peak position of the pulse wave signal and calculates an instantaneous heart rate based on the pulse wave signal from which the body motion noise is separated. . Since the instantaneous heart rate can be calculated, heart rate variability can be accurately measured.
  • the first calculation unit may calculate the reliability of the instantaneous heart rate based on a difference between a maximum value and a minimum value of the pulse wave signal. This makes it possible to calculate the reliability with high accuracy.
  • the plurality of calculation units include a second calculation unit that detects a period of the pulse wave signal by autocorrelation analysis based on the pulse wave signal from which the body motion noise is separated, and calculates a heart rate. Also good. It becomes possible to acquire a heart rate based on a heartbeat tendency by autocorrelation analysis.
  • the second calculation unit may calculate the reliability of the heart rate based on the autocorrelation value in the detected period. This makes it possible to calculate the reliability with high accuracy.
  • the pulse wave sensor unit may include a plurality of pulse wave sensors, and output any one of a plurality of pulse wave candidate signals generated by the plurality of pulse wave sensors as the pulse wave signal. This makes it possible to measure heartbeat with high accuracy.
  • the noise reduction processing unit includes a first adaptive filter to which the body motion signal filtered by a transfer function calculated by modeling the influence of body motion on blood flow is input as an input signal, A first error signal obtained by subtracting the output value of the first adaptive filter from the pulse wave signal output from the pulse wave sensor unit may be output. Thereby, body motion noise can be reduced with high accuracy.
  • the biological information processing apparatus further includes a generation unit that generates a reference signal for separating the body motion noise based on the plurality of pulse wave candidate signals generated by the plurality of pulse wave sensors. Also good.
  • the noise reduction processing unit includes a second adaptive filter to which the reference signal is input as an input signal, and a second subtracted output value of the second adaptive filter from the first error signal. The error signal may be output. Since the body motion noise is further separated from the first error signal, the body motion noise can be sufficiently reduced. As a result, highly accurate heart rate measurement is realized.
  • the plurality of pulse wave sensors may include a first pulse wave sensor that generates the pulse wave signal and a second pulse wave sensor that generates a reference pulse wave signal for generating the reference signal. .
  • a first pulse wave sensor that generates the pulse wave signal
  • a second pulse wave sensor that generates a reference pulse wave signal for generating the reference signal.
  • the first pulse wave sensor includes a first light emitting unit that emits light in a first wavelength region, and a first light receiving unit that detects reflected light of light in the first wavelength region. Also good.
  • the second pulse wave sensor includes a second light emitting unit that emits light in the second wavelength range longer than the first wavelength range, and reflected light of the light in the second wavelength range. You may have the 2nd light-receiving part to detect.
  • the biological information processing apparatus may further include a body motion analysis unit that detects a body motion change by analyzing the body motion signal and outputs the change as a first body motion analysis result.
  • the noise reduction processing unit may update the adaptive filter coefficient in the first adaptive filter based on the output first body motion analysis result.
  • the body motion analysis unit may detect a body motion change by analyzing the reference pulse wave signal and output the result as a second body motion analysis result.
  • the noise reduction processing unit may update the adaptive filter coefficient in the second adaptive filter based on the output second body motion analysis result.
  • the output unit may output the heartbeat candidate information having the highest reliability as the heartbeat information. This realizes highly accurate heart rate measurement.
  • the output unit may determine whether to execute fallback based on the reliability calculated by each of the plurality of calculation units. As a result, heart rate measurement can be continued while preventing generation of heart rate information with low reliability.
  • the output unit may determine whether or not to execute the fallback based on a reliability calculated together with a pulse wave signal from which body motion noise is separated. As a result, heart rate measurement can be continued while preventing generation of heart rate information with low reliability.
  • a biological information processing method includes generating a pulse wave signal using a pulse wave sensor.
  • Heart rate candidate information is calculated together with reliability based on the generated pulse wave signal by each of a plurality of calculation units.
  • Heart rate information is output based on the candidate heart rate information calculated by each of the plurality of calculation units and its reliability.
  • An information processing apparatus includes an acquisition unit, a plurality of calculation units, and an output unit.
  • the acquisition unit acquires a pulse wave signal.
  • Each of the plurality of calculation units calculates heartbeat candidate information together with reliability based on the acquired pulse wave signal.
  • the output unit outputs heartbeat information based on the heartbeat candidate information calculated by each of the plurality of calculation units and its reliability.
  • FIG. 1 is a schematic diagram illustrating a configuration example of a heartbeat measuring device according to an embodiment of the present technology.
  • the heart rate measuring apparatus 100 is a wristband type PPG type heart rate sensor, and is used by being worn on the wrist of a user.
  • the heartbeat measuring device 100 corresponds to a biological information processing device in the present embodiment.
  • the PPG method is a method for measuring a pulse wave by a change in blood flow volume.
  • light is emitted toward the skin from a light emitting unit such as an LED (Light Emitting Diode).
  • the irradiated light is absorbed, scattered, or reflected by blood and subcutaneous tissue existing under the skin of about several mm.
  • the amount of light returned from under the skin is measured by, for example, a light receiving unit such as a photodetector, thereby measuring a change in blood flow in the capillaries distributed under the skin.
  • the heartbeat measuring device 100 includes a wearing band 5 and a sensor main body 10.
  • the wearing band 5 is connected to the sensor main body 10 and contacts and holds the wrist of the user.
  • the specific configuration of the mounting band 5 is not limited.
  • the sensor body 10 has a display unit 11 on which the measured heart rate is displayed.
  • the display unit 11 is a display device using, for example, liquid crystal or EL (Electro-Luminescence).
  • a touch panel may be configured as the display unit 11 and a user operation may be input.
  • the sensor body 10 includes a first PPG sensor 12, a second PPG sensor 13, an acceleration sensor 14, and a controller 15.
  • the 1st and 2nd PPG sensors 12 and 13 are provided in the surface side which contacts a user's wrist.
  • the acceleration sensor 14 and the controller 15 are typically provided inside the sensor body 10.
  • the first PPG sensor 12 includes a first light emitting unit that emits green light in a green wavelength range (for example, about 500 nm to about 570 nm) as light in the first wavelength range toward the measurement site, and the skin of the measurement site. And a first light receiving unit that detects the amount of reflected green light returned from below (both not shown).
  • the first PPG sensor 12 is provided mainly for measuring blood flow changes.
  • the second PPG sensor 13 includes a second light emitting unit that emits red light in a red wavelength range (for example, about 620 nm to about 750 nm) toward the measurement site as light in the second wavelength range, and the skin of the measurement site. And a second light receiving unit that detects the amount of reflected light of red light returned from below (both not shown).
  • a red wavelength range for example, about 620 nm to about 750 nm
  • the long wavelength red light emitted from the second PPG sensor 13 reaches deeply under the skin and reaches the body tissue. Therefore, the red light emitted from the second PPG sensor is modulated in return light by deformation of the body tissue accompanying finger / wrist movement (bone movement), for example. Focusing on this point, in the present embodiment, the second PPG sensor 13 is provided to generate a reference signal having a high correlation with noise mainly due to finger / wrist movements.
  • the first and second PPG sensors 12 and 13 constitute a pulse wave sensor unit.
  • the first PPG sensor 12 functions as a first pulse wave sensor and generates a pulse wave signal.
  • the second PPG sensor 13 functions as a second pulse wave sensor, and generates the reference pulse wave signal for generating the reference signal described above.
  • the pulse wave signal and the reference pulse wave signal also correspond to pulse wave candidate signals.
  • the specific configurations of the first and second PPG sensors 12 and 13 are not limited, and may be appropriately designed.
  • the acceleration sensor 14 measures the acceleration in the three axes of XYZ of the measurement site where the heartbeat measuring device 100 is mounted.
  • the acceleration sensor 14 is provided to measure the periodic movement of the arm mainly during walking, jogging, running, and the like.
  • the acceleration sensor 14 functions as a body motion sensor, and the measured acceleration of each axis is output as a body motion signal.
  • the specific configuration of the acceleration sensor 14 is not limited. Further, as the body motion sensor, a three-axis gyro sensor or the like may be used instead of or in addition to the acceleration sensor 14.
  • the left-right direction of the sensor body 10 is set as the X-axis direction
  • the up-down direction is set as the Y-axis direction
  • a direction orthogonal to the X-axis direction and the Y-axis direction is set as the Z-axis direction.
  • the X-axis direction is regarded as the arterial blood flow direction of the measurement site
  • the Y-axis direction is regarded as the arterial radial direction. Of course, it is not limited to this.
  • the controller 15 controls the operation of each block included in the heartbeat measuring device 100.
  • the controller 15 has a hardware configuration necessary for a computer, such as a CPU and a memory (RAM, ROM). Various processes are executed when the CPU loads a program stored in the ROM or the like to the RAM and executes it.
  • a device such as PLD (Programmable Logic Device) such as FPGA (Field Programmable Gate Array) or other ASIC (Application Specific Integrated Circuit) may be used.
  • the functional block described below with reference to FIG. 2 and the like is realized by the CPU of the controller 15 executing the program according to the present embodiment.
  • These functional blocks and hardware such as the first PPG sensor 12 cooperate to execute the biometric information processing method according to the present embodiment. That is, the user's heartbeat information is generated based on the pulse wave signal output from the first PPG sensor 12.
  • dedicated hardware such as an IC (integrated circuit) may be used to implement the functional blocks shown in FIG.
  • FIG. 2 is a block diagram illustrating a functional configuration example of the controller 15.
  • PPG (green)”, “Acceleration”, and “PPG (green)” shown in FIG. 2 are a pulse wave signal from the first PPG sensor 12, a body motion signal from the acceleration sensor 14, and a second PPG sensor 13.
  • the controller 15 includes a bandpass filter 16a to 16c, a body motion analysis unit 20, a first noise reduction processing unit 30, a second noise reduction processing unit 40, a reference signal generation unit 50, a heart rate fluctuation detection unit 60, and a heart rate trend detection.
  • Unit 70 integration processing unit 80, and stabilization processing unit 90.
  • a heart rate is output as heart rate information as each block operates.
  • FIG. 3 is a flowchart illustrating an example of outputting heartbeat information.
  • band-pass filter processing is executed by the band-pass filters 16a to 16c (step 101).
  • the bandpass filters 16a and 16b extract fluctuation components accompanying pulsation and body tissue deformation from the output signals of the respective PPG sensors. Further, the band-pass filter 16b executes the offset and electrical noise removal due to gravitational acceleration.
  • the body motion intensity of the measurement site is analyzed by the body motion analysis unit 20 (step 102).
  • 4 and 5 are diagrams for explaining the concept of body motion analysis by the body motion analysis unit 20.
  • the body motion analysis unit 20 includes a norm value calculation unit 21, buffers 22a and 22b, maximum value filters 23a and 23b, and smoothing filters 24a and 24b.
  • the norm value calculation unit 21 calculates an acceleration norm from the triaxial acceleration signal that is a body motion signal.
  • the acceleration norm is output to the maximum value filter 23a via the buffer 22a, and the maximum value filter process is executed.
  • the body motion signal (norm value) subjected to the maximum value filter processing is output to the smoothing filter 24a, and the smoothing filter processing is executed. Detects changes in body movement when the body movement intensity and body movement frequency at the measurement site change by thresholding the difference between the body movement signal subjected to the maximum value filter processing and the body movement signal subjected to the smoothing filter processing. Is possible.
  • the vertical axis is the signal value
  • the horizontal axis is the time.
  • the vertical axis represents the state of body movement change (presence or absence of body movement change)
  • the horizontal axis represents time.
  • the upper part of FIG. 5 shows the body motion signal before the filter processing, the body motion signal after the smoothing filter processing, and the body motion signal after the maximum value filter processing.
  • body motion changes mainly arm movements
  • the body motion analysis unit 20 outputs the first body motion analysis result for the periodic movement of the arm and the second body motion analysis result for the non-periodic movement of the finger / wrist.
  • the smoothing filter for example, an FIR (Finite Impulse Response) filter or an IIR (Infinite Impulse Response) filter is used.
  • the light intensity setting values in the first and second PPG sensors 12 and 13 are output to the body motion analysis unit 20.
  • the reliability of the pulse wave signal and the reference pulse wave signal is calculated. For example, the reliability of the pulse wave signal and the reference pulse wave signal is low when the light amount of each light emitting unit is lower than a predetermined threshold or when the set value of the light amount is changed.
  • the calculation method of the reliability is not limited, and other methods may be adopted.
  • the first noise reduction processing unit 30 performs a process of reducing body movement noise (hereinafter referred to as arm movement noise) caused by arm movement (step 103).
  • arm movement noise body movement noise
  • the first noise reduction processing unit 30 is referred to as an arm motion noise reduction processing unit 30.
  • FIG. 6 is a block diagram illustrating a configuration example of the first noise reduction processing unit 30.
  • the first noise reduction processing unit 30 includes an adaptive filter 31 (first adaptive filter), an IIR filter 32, and a subtractor 33.
  • the input signal of the adaptive filter 31 is a body motion signal
  • the observation signal is a pulse wave signal output from the first PPG sensor 12.
  • the subtracter 33 subtracts the output value of the adaptive filter 31 from the pulse wave signal, and outputs a first error signal.
  • the first error signal corresponds to a pulse wave signal from which body movement noise (arm movement noise) is separated.
  • the adaptive filter coefficient of the adaptive filter 31 is updated by the adaptive algorithm 34 and the IIR filter 32 based on the first body motion analysis result.
  • the adaptive algorithm 34 is an NLMS algorithm
  • a parameter for determining an update amount of an adaptive filter coefficient called a step size for example, is controlled based on the first body motion analysis result.
  • the correlation between the input signal and the body motion noise is high.
  • the influence of body motion on the blood flow is modeled as a noise model 35, and a transfer function (FIR filter coefficient) of the body motion to the blood flow is calculated and recorded in advance.
  • the adaptive filter 31 receives the result of FIR filter processing of the body motion signal. That is, the body motion signal is not directly used as an input signal, but the FIR filter processing result is used as an input signal. As a result, the convergence time for obtaining the optimum coefficient when the body motion intensity and the body motion frequency change is improved.
  • the transfer function of the noise model 35 depends on the state of blood vessels and blood flow, there is an optimum coefficient for each user. Therefore, in the present embodiment, when the heartbeat measuring device 100 is used by the user, a process for obtaining a transfer function of body motion to the bloodstream as the noise model 35 is executed.
  • FIG. 7 is a flowchart showing an example of calculating the transfer function.
  • the first PPG sensor 12 is attached to the measurement site (step 201). Since there are individual differences in the amount of light returned due to the color of the skin at the measurement site, the light amount of the first light emitting unit of the first PPG sensor 12 is controlled so that the pulse wave signal is not saturated in a resting state (step S202). ).
  • the first noise reduction processing unit 30 executes system identification by the adaptive filter 31 using the input signal as a body motion signal due to impulse body motion and the output signal as a pulse wave signal (step S204).
  • step 205 It is determined whether or not the transfer function (FIR filter coefficient) has converged (step 205). If the transfer function has not converged (No in step 205), the process returns to step S203. If the transfer function has converged (Yes in step 205), the process is terminated.
  • FIR filter coefficient FIR filter coefficient
  • the transfer function (FIR filter coefficient) of body motion to the blood flow has been described as an example as the noise model 35, approximation by an Nth order polynomial is also conceivable as another embodiment.
  • the coefficient of the Nth order polynomial may be calculated using a least square method or the like.
  • the obtained adaptive filter coefficient is subjected to IIR filter processing by the IIR filter 32.
  • IIR filter processing For example, when the past value one sample before is set to 0 (zero) value and it is determined that the subject is in a resting state, the adaptive filter processing is turned off by turning on the IIR filter processing.
  • the feedback rate is set to 0.0 and the IIR filter process is turned off, so that the adaptive filter process is turned on. With this configuration, it is possible to smoothly switch the presence / absence of adaptive filter processing only by controlling the feedback rate of the IIR filter 32 according to the first body motion analysis result.
  • the convergence time of adaptive filter processing is improved even if there is a sudden change in body motion intensity and body motion frequency, so that a sufficient noise reduction effect can be obtained.
  • FIG. 8 is a block diagram illustrating a configuration example of the first noise reduction processing unit 30 when the acceleration sensor 14 is a triaxial acceleration sensor.
  • a transfer function for the blood flow of each component of triaxial acceleration is calculated in advance, and the noise reduction processing units 30X, 30Y, and 30Z for each acceleration component of XYZ may be cascaded.
  • the model coefficient, the X component of the body motion signal, the first body motion analysis result, and the pulse signal before the noise reduction processing are input to the noise reduction processing unit 30X.
  • the model coefficient, the Y component of the body motion signal, the first body motion analysis result, and the output (error signal) of the noise reduction processing unit 30X are input to the noise reduction processing unit 30Y.
  • the model coefficient, the Z component of the body motion signal, the first body motion analysis result, and the output (error signal) of the noise reduction processing unit 30Y are input to the noise reduction processing unit 30Z.
  • the output (error signal) of the noise reduction processing unit 30Z becomes the first error signal.
  • the reliability is calculated together with the first error signal. For example, by analyzing the time change of the adaptive filter coefficient, it is analyzed whether the arm motion noise reduction processing is functioning properly, and the reliability of the first error signal to be output is output as a parameter. For example, the sum of the absolute values of the time differences of the filter coefficients is calculated, and if the coefficient changes suddenly or exceeds the threshold, it is determined that the reliability is low or there is no reliability.
  • the method for calculating the reliability is not limited, and other methods may be used. Further, the reliability based on the light amount of the first PPG sensor 12 output from the body motion analysis unit 20 may be used as appropriate.
  • the reference signal generator 50 shown in FIG. 2 generates a reference signal for separating body movement noise (hereinafter referred to as finger / wrist movement noise) caused by finger / wrist movement (step 104). . It is preferable that the reference signal has a high correlation with finger / wrist movement noise.
  • a reference signal is generated based on the pulse wave signal from the first PPG sensor 12, the reference pulse wave signal from the second PPG sensor 13, and the body motion signal from the acceleration sensor 14.
  • the pulse wave signal and the reference pulse wave signal For example, principal component analysis is performed on each of the pulse wave signal and the reference pulse wave signal, and a noise signal is selected from the two generated signals. Since the body motion noise component is stronger than the signal component in the PPG method, the signal with higher power of the separated signal is a signal having a high correlation with finger / wrist motion noise. This signal is used as a reference signal.
  • the method for generating the reference signal is not limited, and a signal obtained by synthesizing the pulse wave signal and the reference pulse wave signal, a signal based only on the pulse wave reference signal, or the like may be used as the reference signal.
  • the pulse wave reference signal itself may be used as the reference signal.
  • the second noise reduction processing unit 40 executes finger / wrist movement noise reduction processing (step 105).
  • the second noise reduction processing unit 40 is described as a finger / wrist motion noise reduction processing unit 40.
  • FIG. 9 is a block diagram illustrating a configuration example of the second noise reduction processing unit 40.
  • the second noise reduction processing unit 40 includes an adaptive filter 41 (second adaptive filter), an IIR filter 42, and a subtractor 43.
  • the input signal of the adaptive filter 41 is a reference signal, and the observation signal is a first error signal (pulse wave signal) output from the first noise reduction processing unit 30.
  • the subtracter 43 subtracts the output value of the adaptive filter 41 from the first error signal and outputs a second error signal.
  • the second error signal corresponds to a pulse wave signal from which body movement noise (finger / wrist movement noise) is separated.
  • the adaptive filter coefficient of the adaptive filter 41 is updated based on the second body motion analysis result by the adaptive algorithm 44 and the IIR filter 42. Thereby, the convergence time for obtaining the optimum coefficient is improved, and it becomes possible to follow the change of the body motion frequency.
  • the obtained adaptive filter coefficient is IIR filtered by the IIR filter 42. Therefore, it is possible to smoothly switch the presence or absence of the adaptive filter processing only by controlling the feedback rate of the IIR filter 42 according to the second body motion analysis result.
  • the reliability is calculated together with the second error signal. For example, by analyzing the temporal change of the adaptive filter coefficient, it is analyzed whether the arm motion noise reduction process is functioning properly, and the reliability of the second error signal to be output is output as a parameter. For example, the sum of the absolute values of the time differences of the filter coefficients is calculated, and if the coefficient changes suddenly or exceeds the threshold, it is determined that the reliability is low or there is no reliability.
  • the method for calculating the reliability is not limited, and other methods may be provided. Further, the reliability based on the light amount of the second PPG sensor 13 output from the body motion analysis unit 20 may be used as appropriate.
  • heart rate variability and heart rate trend are detected (step 106).
  • the heart rate variability is detected by the heart rate variability detector 60 shown in FIG.
  • the heartbeat trend is detected by the heartbeat trend detector 70 shown in FIG.
  • FIG. 10 is a block diagram illustrating a configuration example of the heart rate variability detection unit 60.
  • the heartbeat fluctuation detection unit 60 includes a buffer 61, a peak detection unit 62, an instantaneous heart rate / reliability calculation unit 63, a resampling unit 64, and a post-processing filter unit 65.
  • the peak detection unit 62 detects the peak position due to pulsation from the pulse wave signal with reduced body movement noise. As shown in FIG. 10, the maximum value, minimum value, maximum value, and minimum value of the pulse wave signal are input to the peak detection unit 62 via the buffer 61.
  • the peak position detection by maximum value detection will be described.
  • the contact state of the first PPG sensor 12 may change due to body movement, and the pulse wave signal intensity may be modulated. At this time, if the peak is detected with a preset fixed threshold, the peak position due to pulsation may not be detected. There is also a possibility that a false peak due to body motion noise is erroneously detected as a peak due to pulsation.
  • the peak intensity threshold th is determined from the maximum value vmax and the minimum value vmin of the pulse wave signal in a certain analysis window as shown in the following equation so that the detection error as described above does not occur. To do.
  • the threshold value th of the peak intensity is adaptively controlled according to the intensity of the pulse wave signal, the peak position can be detected even if the pulse wave signal intensity is modulated.
  • any of the following processing examples is executed alone or in combination with a plurality of processing.
  • the convexity of the current maximum value specifically, the level difference is calculated from the immediately previous minimum value and maximum value, and the threshold value is determined.
  • the threshold value is adaptively controlled according to the first and / or second body motion analysis results.
  • the range in which the maximum value is detected is limited with the heart rate obtained by the heart rate trend detection unit 70 as the center of the search range.
  • the heart rate variability detection unit 60 and the heart rate trend detection unit 70 may be cascade-connected.
  • the instantaneous heart rate / reliability calculation unit 63 calculates the instantaneous heart rate and reliability.
  • the instantaneous heart rate means an instantaneous heart rate. For example, a value obtained by multiplying the reciprocal of the time interval of the peak position (maximum value position) by 60 (seconds) is calculated. By calculating the instantaneous heart rate, heart rate variability can be accurately measured in real time, for example, in heart rate training.
  • heart rate is the number of heart pulsations when blood is sent out to the whole body
  • pulse rate is the number of pulsations (pulses) generated in the artery. It is said that “heart rate” and “pulse rate” are almost the same as long as there is no arrhythmia or pulse defect.
  • the measurement result by the heartbeat measuring device 100 is described as heartbeat variability, heartbeat trend, instantaneous heart rate, and the like. Instead of this, it may be described as pulse fluctuation, pulse trend, instantaneous pulse rate, or the like.
  • the present technology can also be applied when the “pulse rate”, which is the pulsation of the artery at the measurement site, is treated as a parameter different from the “heart rate”.
  • the reliability is calculated based on the level difference between the maximum value and the minimum value, for example.
  • the reliability may be calculated by other methods.
  • the post-processing filter unit 65 After re-sampling to 1 Hz by the resampling unit 64, the post-processing filter unit 65 performs post-processing.
  • the post-processing filter unit 65 an IIR filter and a feedback rate calculation unit are configured, and the feedback rate of the IIR filter is appropriately controlled.
  • the first and second noise reduction processing units 30 and 40 and the peak detection unit 62 may not be able to remove noise, and an abnormal value may occur in the temporal change in instantaneous heart rate.
  • the time correlation of instantaneous heart rate is very high. Therefore, when the temporal change in the instantaneous heart rate is larger than a preset threshold value, the feedback rate of the IIR filter of the post-processing filter unit 65 is controlled to be large (for example, a value close to 1.0). Thereby, the past instantaneous heart rate can be extrapolated as it is, and erroneous detection can be corrected (reduced).
  • the feedback rate of the IIR filter is controlled to be a value smaller than 1.0, for example, about 0.5 during the user's exercise. As a result, the instantaneous heart rate can be stabilized.
  • FIG. 11 is a block diagram illustrating a configuration example of the heartbeat trend detection unit 70.
  • the heartbeat trend detection unit 70 includes buffers 71a and 71b, an autocorrelation analysis unit 72, a stabilization processing unit 73, a filter coefficient control unit 74, a trend detection unit 75, and a resampling unit 76.
  • the autocorrelation analysis unit 72 performs autocorrelation analysis for each sampling time with respect to the pulse wave signal with reduced body motion noise. Although there are various methods for calculating the autocorrelation function, in this embodiment, analysis using the normalized self-function is executed.
  • the stabilization processing unit 73 stabilizes the autocorrelation function by weighting and adding the past autocorrelation function held in the buffer 71b to the autocorrelation function at the current time.
  • the weighting parameter is determined from the acceleration signal (body motion signal) by the filter coefficient control unit 74.
  • the trend detector 75 detects a lag ⁇ in which the autocorrelation value continuously increases from the stabilized autocorrelation function, and calculates the period of the pulse wave signal as a heartbeat trend. Based on the heartbeat trend, the heart rate and its reliability are calculated. The heart rate is calculated based on the heart rate trend (period of the pulse wave signal) and is different from the instantaneous heart rate.
  • the reliability is calculated based on, for example, the normalized autocorrelation value at the specified position of the lag ⁇ , that is, the autocorrelation value in the detected period. The higher the autocorrelation value, the higher the reliability. The reliability may be calculated by other methods. After being resampled to 1 Hz by the resampling unit 76, the heart rate and its reliability are output.
  • the heartbeat fluctuation detection unit 60 and the heartbeat trend detection unit 70 correspond to a plurality of calculation units that calculate heartbeat candidate information together with reliability based on a pulse wave signal. These detection units can also be called heart rate estimators.
  • the instantaneous heart rate obtained by peak detection and the heart rate obtained by autocorrelation analysis each correspond to heartbeat candidate information.
  • the number of calculation units for calculating the heartbeat candidate information based on the pulse wave signal, the algorithm for calculation, and the like are not limited and may be set as appropriate.
  • the heartbeat candidate information the heart rate is typically calculated, but other information may be calculated.
  • the integration processing is performed by the integration processing unit 80 shown in FIG. 2 (step 107). Specifically, the heart rate information is output based on the instantaneous heart rate and heart rate output as the heart rate candidate information from each of the heart rate variability detection unit 60 and the heart rate trend detection unit 70, and the reliability of each. That is, the integrated processing unit 80 outputs final heart rate information from the output results of the plurality of heart rate estimators and their reliability.
  • the integrated processing unit 80 functions as an output unit in the present embodiment.
  • heartbeat candidate information with the highest reliability is output. That is, the reliability of the instantaneous heart rate is compared with the reliability of the heart rate based on the heart rate trend. The heart rate with the higher reliability is output as final heart rate information.
  • the reliability calculated by a plurality of heart rate estimators may be converted into a multidimensional vector, and the final heart rate information (heart rate) may be calculated by a discriminator configured by a neural network.
  • a neural network is configured, for example, the heart rate measured with an electrocardiograph or the like is used as correct data.
  • the multidimensional vector calculated by the multiple heart rate estimators is used as input data, and the coefficient of the neural network is calculated. It can be obtained by machine learning.
  • the integration processing unit 80 determines whether to execute fallback. For example, fallback is executed when the reliability of the instantaneous heart rate and the reliability of the heart rate based on the heart rate trend are both lower than a predetermined threshold. As fallback, for example, the immediately preceding heart rate is pre-held and output as final heart rate information. As a result, heart rate measurement can be continued while preventing the output of heart rate information with low reliability.
  • fallback is not limited.
  • the necessity of the fallback operation may be determined based on the reliability calculated by the first and second noise reduction processing units 30 and 40. For example, when the reliability calculated by the first and second noise reduction processing units 30 and 40 and the reliability calculated by the heartbeat fluctuation detection unit 60 and the heartbeat trend detection unit 70 are low in reliability. A fallback is performed. Or when the reliability calculated in the 1st and 2nd noise reduction process parts 30 and 40 is low, fallback is performed irrespective of the value of the reliability calculated by two heart rate estimators. Further, when the reliability calculated by the first and second noise reduction processing units 30 and 40 is high, fallback is executed even when the reliability calculated by the two heart rate estimators is low. The heartbeat candidate information with higher reliability is output. Such processing is also possible.
  • the adhesion between the first and second PPG sensors 12 and 13 and the human skin is lowered due to body movement, and external light / stray light is mixed to saturate the pulse wave signal.
  • the amount of return light may change due to a change in the shape of the arm due to body movement, and the pulse wave signal may be saturated.
  • the light amount of the light emitting element may be dynamically controlled so as to obtain an appropriate return light amount. If the pulse wave signal is not reliable or not as a result of controlling the amount of light, fallback may be performed. In addition, the necessity of the fallback operation may be determined based on the reliability calculated by the body motion analysis unit 20 or the autocorrelation analysis value calculated by the heartbeat trend detection unit 70.
  • the stabilization processing unit 90 stabilizes the heart rate output as final heart rate information. For example, false detection of the instantaneous heart rate due to the first and second noise reduction processing units 30 and 40 and body movement noise that could not be removed by peak detection is reduced.
  • the specific configuration of the stabilization processing unit 90 is not limited.
  • the heartbeat candidate information is calculated together with the reliability by each of the heartbeat fluctuation detection unit 60 and the heartbeat trend detection unit 70 functioning as a plurality of calculation units. Therefore, it is possible to finally output heartbeat information with high reliability based on such information. As a result, heartbeat measurement with high accuracy can be realized.
  • the peak detection by the heart rate variability detector 60 can detect the peak position due to pulsation, so that heart rate variability can be detected with high accuracy.
  • the autocorrelation analysis by the heartbeat trend detector 70 uses the periodicity of the pulse wave, it is difficult to accurately detect heartbeat fluctuations.
  • the possibility of erroneous detection of a peak due to residual noise as a peak position due to pulsation can be sufficiently suppressed, and noise resistance is very high.
  • a plurality of heart rate estimators having different characteristics are prepared, and final heart rate information is calculated based on each reliability. As a result, heart rate detection that compensates for each other's weak points is possible, and heart rate measurement with very high accuracy is realized compared to the case of using a single heart rate estimator.
  • the PPG heart rate sensor can measure a pulse wave signal with relatively high accuracy in a resting state, but body movement noise occurs in the observation signal when the measurement site moves.
  • causes of body movement noise in wristband type heart rate sensors include unwanted skin surface reflections due to changes in the contact state between the PPG sensor and the measurement site, and external light entering under the skin. Etc.
  • the adaptive filter described above is effective as a method for reducing body motion noise as described above.
  • the adaptive filter will be described again.
  • the adaptive filter is a method of automatically calculating a filter coefficient (W) that minimizes the error signal (e) power when an observation signal (d) and an input signal (X) are given. is there.
  • the observation signal is a pulse wave signal
  • noise mixed in the observation signal can be separated by referring to a signal having a high correlation with noise as an input signal.
  • arm movement noise is reduced by the first noise reduction processing unit 30, and finger / wrist movement noise is reduced by the second noise reduction processing unit 40. Therefore, it is possible to sufficiently reduce both the noise caused by the periodic movement of the arm typified by walking and running and the noise caused by the non-periodic movement such as the finger / wrist movement. As a result, it is possible to always measure heart rate variability in daily life with high accuracy.
  • a frequency analysis method is also known as a method for stably calculating the pulse rate.
  • the pulse wave signal after noise reduction processing is subjected to frequency analysis, and the frequency at which the spectrum intensity is maximum is determined as the pulse wave number.
  • the frequency analysis method still has a problem in the estimation accuracy of heart rate variability in a low heart rate region in principle.
  • heart rate fluctuations in a low heart rate region can be calculated with high accuracy.
  • the heartbeat measuring device 100 has been described as an embodiment of the biological information processing apparatus according to the present technology.
  • Embodiments of the biological information processing apparatus according to the present technology are not limited to this, and include any device including a pulse wave sensor.
  • various wearable devices such as a headband type, a neckband type, a belt type, etc.
  • an arbitrary portable information terminal PDA: Personal Digital Assistant
  • a smartphone or a tablet terminal an arbitrary electronic device such as a medical device, a game device, or a home appliance
  • a device or the like can be configured as a biological information processing apparatus according to the present technology.
  • a wearable device or a mobile device having only the function of the controller 15 shown in FIG. 1B may be configured as an information processing device according to the present technology.
  • an I / F (interface) connected to the pulse wave sensor functions as an acquisition unit that acquires a pulse wave signal.
  • the first PPG sensor 12 is provided for generating the pulse wave signal
  • the second PPG sensor 13 is provided for generating the reference pulse wave signal for generating the reference signal.
  • any one of the pulse wave candidate signals output from the first and second PPG sensors 12 and 13 may be appropriately selected and output as a pulse wave signal that is a heart rate calculation target.
  • the stronger pulse wave component is selected as the main signal, and the subsequent noise reduction processing is performed.
  • This is executed for this pulse wave candidate signal. That is, as the plurality of pulse wave sensors, a first pulse wave sensor that generates a pulse wave signal to be subjected to noise reduction processing may be determined in advance, or the first pulse wave may be selected from the plurality of pulse wave sensors. A sensor may be appropriately selected. By selecting the first pulse wave sensor each time, it is possible to select a signal having the strongest pulse wave component, thereby realizing highly accurate heart rate measurement.
  • this technique can also take the following structures.
  • a pulse wave sensor unit that outputs a pulse wave signal
  • a plurality of calculation units each calculating heartbeat candidate information together with reliability based on the output pulse wave signal
  • a biological information processing apparatus comprising: an output unit that outputs heartbeat information based on the candidate heartbeat information calculated by each of the plurality of calculation units and its reliability.
  • the biological information processing apparatus according to (1) further comprising: A body motion sensor that outputs a body motion signal; A noise reduction processing unit that separates body motion noise from the pulse wave signal output from the pulse wave sensor unit based on the body motion signal;
  • Each of the plurality of calculating units calculates the heartbeat candidate information and its reliability based on a pulse wave signal from which the body motion noise is separated.
  • the biological information processing apparatus includes a first calculation unit that detects a peak position of the pulse wave signal based on the pulse wave signal from which the body motion noise is separated, and calculates an instantaneous heart rate. .
  • the biological information processing apparatus includes a reliability of the instantaneous heart rate based on a difference between a maximum value and a minimum value of the pulse wave signal.
  • the biological information processing apparatus includes a second calculation unit that detects a period of the pulse wave signal by autocorrelation analysis based on the pulse wave signal from which the body motion noise is separated, and calculates a heart rate. Processing equipment.
  • the biological information processing apparatus calculates a reliability of the heart rate based on an autocorrelation value in the detected cycle.
  • the biological information processing apparatus includes a plurality of pulse wave sensors, and outputs any one of a plurality of pulse wave candidate signals generated by the plurality of pulse wave sensors as the pulse wave signal.
  • the biological information processing apparatus includes a first adaptive filter to which the body motion signal filtered by a transfer function calculated by modeling the influence of body motion on blood flow is input as an input signal, A biological information processing apparatus that outputs a first error signal obtained by subtracting an output value of the first adaptive filter from a pulse wave signal output from a pulse wave sensor unit.
  • the biological information processing apparatus Based on the plurality of pulse wave candidate signals generated by the plurality of pulse wave sensors, a generation unit that generates a reference signal for separating the body motion noise, The noise reduction processing unit includes a second adaptive filter to which the reference signal is input as an input signal, and a second error signal obtained by subtracting an output value of the second adaptive filter from the first error signal.
  • a biological information processing device that outputs (10) The biological information processing apparatus according to (9),
  • the plurality of pulse wave sensors include a first pulse wave sensor that generates the pulse wave signal and a second pulse wave sensor that generates a reference pulse wave signal for generating the reference signal. .
  • the biological information processing apparatus includes a first light emitting unit that emits light in a first wavelength range, and a first light receiving unit that detects reflected light of light in the first wavelength range, The second pulse wave sensor detects a reflected light of the second light emitting unit that emits light in a second wavelength range longer than the first wavelength range and the light in the second wavelength range.
  • a biological information processing apparatus having two light receiving units.
  • the biological information processing apparatus (13) The biological information processing apparatus according to (12), The body motion analysis unit detects a body motion change by analyzing the reference pulse wave signal, and outputs it as a second body motion analysis result, The noise reduction processing unit updates an adaptive filter coefficient in the second adaptive filter based on the output second body motion analysis result. (14) The biological information processing apparatus according to any one of (1) to (13), The output unit outputs the heartbeat candidate information having the highest reliability as the heartbeat information. (15) The biological information processing apparatus according to any one of (1) to (14), The output unit determines whether or not to execute fallback based on the reliability calculated by each of the plurality of calculation units. (16) The biological information processing apparatus according to (15), The output unit determines whether or not to execute the fallback based on a reliability calculated together with a pulse wave signal from which body motion noise is separated.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physiology (AREA)
  • Pathology (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Signal Processing (AREA)
  • Cardiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Psychiatry (AREA)
  • Pulmonology (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)

Abstract

本技術の一形態に係る生体情報処理装置は、脈波センサ部と、複数の算出部と、出力部とを具備する。前記脈波センサ部は、脈波信号を出力する。前記複数の算出部は、各々が前記出力された脈波信号に基づいて心拍候補情報を信頼度とともに算出する。前記出力部は、前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報を出力する。

Description

生体情報処理装置、生体情報処理方法、及び情報処理装置
 本技術は、ユーザの心拍情報を出力する生体情報処理装置、生体情報処理方法、及び情報処理装置に関する。
 近年、ヘルスケアやウェルネスのブームにともない、心拍トレーニング用として心拍センサを搭載した腕時計型やリストバンド型のデバイスが開発されている。これらの測定デバイスでは、光電容積脈波方式(Photoplethysmography:以後「PPG方式」と呼ぶ)が多く採用されている。
 特許文献1には、脈波センサと、体動センサとを備える脈拍計について記載されている。この脈拍計では、脈波センサから出力される脈波信号を観測信号とし、体動センサから出力される体動信号を入力信号とする適応フィルタが設けられる。脈波信号から適応フィルタにより算出される体動成分の予測値が減算され、その残差信号に対して高速フーリエ変換(FFT)処理が行われる。その周波数成分の中から最大レベルを有する成分が脈波成分として抽出され、1分間あたりの脈拍数が算出される。これにより正確な脈拍数の測定が図られている(特許文献1の明細書段落[0007]~[0012]図1等)。
特開平11-276448号公報
 このように精度の高い心拍測定を可能とする技術が求められている。例えば心拍トレーニング等においては、心拍の変動をリアルタイムで精度よく測定することが重要となる。
 以上のような事情に鑑み、本技術の目的は、精度の高い心拍測定を可能とする生体情報処理装置、生体情報処理方法、及び情報処理装置を提供することにある。
 上記目的を達成するため、本技術の一形態に係る生体情報処理装置は、脈波センサ部と、複数の算出部と、出力部とを具備する。
 前記脈波センサ部は、脈波信号を出力する。
 前記複数の算出部は、各々が前記出力された脈波信号に基づいて心拍候補情報を信頼度とともに算出する。
 前記出力部は、前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報を出力する。
 この生体情報処理装置では、複数の算出部の各々により、心拍候補情報が信頼度とともに算出される。従ってこれらの情報に基づいて、信頼度の高い心拍情報を出力することが可能となる。この結果、精度の高い心拍測定を実現することが可能となる。
 前記生体情報処理装置は、さらに、体動信号を出力する体動センサと、前記体動信号に基づいて前記脈波センサ部から出力された脈波信号から体動ノイズを分離するノイズ低減処理部とを具備してもよい。この場合、前記複数の算出部の各々は、前記体動ノイズが分離された脈波信号に基づいて、前記心拍候補情報とその信頼度とを算出してもよい。
 体動ノイズが分離された脈波信号に基づいて、精度の高い心拍候補情報を算出することが可能となる。この結果、精度の高い心拍測定が実現する。
 前記複数の算出部は、前記体動ノイズが分離された脈波信号に基づいて、前記脈波信号のピーク位置を検出し、瞬時心拍数を算出する第1の算出部を有してもよい。
 瞬時心拍数を算出可能であるので、心拍変動を精度よく測定することが可能となる。
 前記第1の算出部は、前記脈波信号の極大値と極小値との差に基づいて、前記瞬時心拍数の信頼度を算出してもよい。
 これにより精度よく信頼度を算出することが可能となる。
 前記複数の算出部は、前記体動ノイズが分離された脈波信号に基づいて、自己相関解析により前記脈波信号の周期を検出し、心拍数を算出する第2の算出部を有してもよい。
 自己相関解析により心拍傾向に基づいた心拍数を取得することが可能となる。
 前記第2の算出部は、前記検出された周期における自己相関値に基づいて、前記心拍数の信頼度を算出してもよい。
 これにより精度よく信頼度を算出することが可能となる。
 前記脈波センサ部は、複数の脈波センサを有し、前記複数の脈波センサにより生成される複数の脈波候補信号のいずれか1つを前記脈波信号として出力してもよい。
 これにより精度の高い心拍測定が可能となる。
 前記ノイズ低減処理部は、体動の血流への影響をモデル化して算出された伝達関数によってフィルタ処理された前記体動信号が入力信号として入力される第1の適応フィルタを有し、前記脈波センサ部から出力された脈波信号から前記第1の適応フィルタの出力値を減算した第1の誤差信号を出力してもよい。
 これにより体動ノイズを精度よく低減することができる。
 前記生体情報処理装置は、さらに、前記複数の脈波センサにより生成される前記複数の脈波候補信号に基づいて、前記体動ノイズを分離するための参照信号を生成する生成部を具備してもよい。この場合、前記ノイズ低減処理部は、前記参照信号が入力信号として入力される第2の適応フィルタを有し、前記第1の誤差信号から前記第2の適応フィルタの出力値を減算した第2の誤差信号を出力してもよい。
 第1の誤差信号からさらに体動ノイズが分離されるので、体動ノイズを十分に低減させることが可能となる。この結果、精度の高い心拍測定が実現する。
 前記複数の脈波センサは、前記脈波信号を生成する第1の脈波センサと、前記参照信号の生成用の参照脈波信号を生成する第2の脈波センサとを有してもよい。
 脈波信号を生成する第1の脈波信号に加えて、参照脈波信号を生成する第2の脈波センサを設けることで、体動ノイズの低減を高精度に実行することが可能となる。
 前記第1の脈波センサは、第1の波長域の光を出射する第1の発光部と、前記第1の波長域の光の反射光を検出する第1の受光部とを有してもよい。この場合、前記第2の脈波センサは、前記第1の波長域よりも長い第2の波長域の光を出射する第2の発光部と、前記第2の波長域の光の反射光を検出する第2の受光部とを有してもよい。
 互いに波長域の異なる光を出射する2つの脈波センサを用いることで、精度の高い心拍測定が可能となる。
 前記生体情報処理装置は、さらに、前記体動信号を解析することによって体動変化を検出し第1の体動解析結果として出力する体動解析部を具備してもよい。この場合、前記ノイズ低減処理部は、前記出力された第1の体動解析結果に基づいて、前記第1の適応フィルタにおける適応フィルタ係数を更新してもよい。
 第1の体動解析結果を利用することで、体動ノイズを精度よく低減させることができる。
 前記体動解析部は、前記参照脈波信号を解析することによって体動変化を検出し第2の体動解析結果として出力してもよい。この場合、前記ノイズ低減処理部は、前記出力された第2の体動解析結果に基づいて、前記第2の適応フィルタにおける適応フィルタ係数を更新してもよい。
 第2の体動解析結果を利用することで、体動ノイズを精度よく低減させることができる。
 前記出力部は、最も信頼度が高い前記心拍候補情報を、前記心拍情報として出力してもよい。
 これにより精度の高い心拍測定が実現する。
 前記出力部は、前記複数の算出部の各々が算出する信頼度に基づいて、フォールバックを実行するか否かを判定してもよい。
 これにより信頼度が低い心拍情報が生成されることを防止しつつ、心拍測定を継続することが可能となる。
 前記出力部は、体動ノイズが分離された脈波信号とともに算出される信頼度に基づいて、前記フォールバックを実行するか否かを判定してもよい。
 これにより信頼度が低い心拍情報が生成されることを防止しつつ、心拍測定を継続することが可能となる。
 本技術の一形態に係る生体情報処理方法は、脈波センサにより脈波信号を生成することを含む。
 複数の算出部の各々により前記生成された脈波信号に基づいて心拍候補情報が信頼度とともに算出される。
 前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報が出力される。
 本技術の一形態に係る情報処理装置は、取得部と、複数の算出部と、出力部とを具備する。
 前記取得部は、脈波信号を取得する。
 前記複数の算出部は、各々が前記取得された脈波信号に基づいて心拍候補情報を信頼度とともに算出する。
 前記出力部は、前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報を出力する。
 以上のように、本技術によれば、精度の高い心拍測定が可能となる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術の一実施形態に係る心拍測定装置の構成例を示す概略図である。 コントローラの機能的な構成例を示すブロック図である。 心拍情報の出力例を示すフローチャートである。 体動解析部による体動解析の概念を説明するための図である。 体動解析部による体動解析の概念を説明するための図である。 第1のノイズ低減処理部の構成例を示すブロック図である。 伝達関数の算出例を示すフローチャートである。 加速度センサが3軸加速度センサの場合の、第1のノイズ低減処理部の構成例を示すブロック図である。 第2のノイズ低減処理部の構成例を示すブロック図である。 心拍変動検出部の構成例を示すブロック図である。 心拍トレンド検出部の構成例を示すブロック図である。
 以下、本技術に係る実施形態を、図面を参照しながら説明する。
 [心拍測定装置の構成]
 図1は、本技術の一実施形態に係る心拍測定装置の構成例を示す概略図である。心拍測定装置100は、リストバンド型のPPG方式の心拍センサであり、ユーザの手首に装着されて使用される。心拍測定装置100は、本実施形態において、生体情報処理装置に相当する。
 PPG方式は、脈波を血流の容積変動によって測定する方式である。PPG方式では、例えばLED(Light Emitting Diode)等の発光部から皮膚に向けて光線を照射する。照射された光線は数mm程度の皮膚下に存在する血液および皮下組織で吸収、散乱、又は反射する。この際、皮膚下から戻ってきた光の量を例えばフォトディテクタ等の受光部で計測することで、皮膚下に分布する毛細血管の血流変化を計測する。
 図1に示すように心拍測定装置100は、装着バンド5と、センサ本体部10とを有する。装着バンド5は、センサ本体部10に接続され、ユーザの手首に接触してこれを保持する。装着バンド5の具体的な構成は限定されない。
 センサ本体部10は、測定された心拍数が表示される表示部11を有する。表示部11は、例えば液晶やEL(Electro-Luminescence)等を用いた表示デバイスである。表示部11としてタッチパネルが構成され、ユーザの操作が入力可能であってもよい。
 図1Bに模式的に示すように、センサ本体部10は、第1のPPGセンサ12、第2のPPGセンサ13、加速度センサ14、及びコントローラ15を有する。第1及び第2のPPGセンサ12及び13は、ユーザの手首に接触する面側に設けられる。加速度センサ14及びコントローラ15は、典型的には、センサ本体部10の内部に設けられる。
 第1のPPGセンサ12は、第1の波長域の光として、緑色波長域(例えば約500nm~約570nm)の緑色光を測定部位に向けて出射する第1の発光部と、測定部位の皮膚下から戻ってきた緑色光の反射光の光量を検出する第1の受光部とを有する(ともに図示省略)。第1のPPGセンサ12は、主に血流変化を計測するために設けられる。
 第2のPPGセンサ13は、第2の波長域の光として、赤色波長域(例えば約620nm~約750nm)の赤色光を測定部位に向けて出射する第2の発光部と、測定部位の皮膚下から戻ってきた赤色光の反射光の光量を検出する第2の受光部とを有する(ともに図示省略)。
 第2のPPGセンサ13から出射される長波長の赤色光は、皮膚下到達が深く体組織まで到達する。従って第2のPPGセンサから出射された赤色光は、例えば指・手首の動き(骨の動き)に伴う体組織の変形により戻り光が変調する。この点に着目して本実施形態では、第2のPPGセンサ13は、主に指・手首の動きによるノイズと相関が高い参照信号を生成するために設けられる。
 本実施形態では、第1及び第2のPPGセンサ12及び13により、脈波センサ部が構成される。第1のPPGセンサ12は、第1の脈波センサとして機能し、脈波信号を生成する。第2のPPGセンサ13は、第2の脈波センサとして機能し、上記した参照信号の生成用の参照脈波信号を生成する。また脈波信号及び参照脈波信号は、脈波候補信号にも相当する。第1及び第2のPPGセンサ12及び13の具体的な構成は限定されず、適宜設計されてよい。
 加速度センサ14は、心拍測定装置100が装着される測定部位のXYZの3軸における加速度を測定する。加速度センサ14は、主にウォーキング・ジョギング・ランニング等が行われる際の、腕の周期的な動きを計測するために設けられる。加速度センサ14は体動センサとして機能し、測定される各軸の加速度は体動信号として出力される。加速度センサ14の具体的な構成は限定されない。また体動センサとして、加速度センサ14に代えて、あるいは加えて3軸ジャイロセンサ等が用いられてもよい。
 図1Bに示すように、本実施形態では、センサ本体部10の左右方向がX軸方向として設定され、上下方向がY軸方向として設定される。またX軸方向及びY軸方向の各々に直交する方向(センサ本体部10の表面の垂線方向)がZ軸方向として設定される。またX軸方向が測定部位の動脈血流方向としてみなされ、Y軸方向が動脈半径方向としてみなされる。もちろんこれに限定される訳ではない。
 コントローラ15は、心拍測定装置100が有する各ブロックの動作を制御する。コントローラ15は、例えばCPUやメモリ(RAM、ROM)等のコンピュータに必要なハードウェア構成を有する。CPUがROM等に記憶されているプログラムをRAMにロードして実行することにより、種々の処理が実行される。コントローラ15として、例えばFPGA(Field Programmable Gate Array)等のPLD(Programmable Logic Device)、その他ASIC(Application Specific IntegratedCircuit)等のデバイスが用いられてもよい。
 本実施形態では、コントローラ15のCPUが本実施形態に係るプログラムを実行することで、図2等を参照して以下に説明する機能的なブロックが実現される。これら機能的なブロックと、第1のPPGセンサ12等のハードウェアとが協働することで、本実施形態に係る生体情報処理方法が実行される。すなわち第1のPPGセンサ12から出力される脈波信号に基づいて、ユーザの心拍情報が生成される。もちろん図2等に示す機能的なブロックを実現するために、IC(集積回路)等の専用のハードウェアが用いられてもよい。
 図2は、コントローラ15の機能的な構成例を示すブロック図である。図2に示す「PPG(緑)」「加速度」及び「PPG(緑)」は、第1のPPGセンサ12からの脈波信号、加速度センサ14からの体動信号、及び第2のPPGセンサ13からの参照脈波信号である。
 コントローラ15は、バンドパスフィルタ16a~16c、体動解析部20、第1のノイズ低減処理部30、第2のノイズ低減処理部40、参照信号生成部50、心拍変動検出部60、心拍トレンド検出部70、統合処理部80、及び安定化処理部90を有する。以下に説明するように、各ブロックが動作することで、心拍情報として心拍数が出力される。
 [心拍測定装置の動作]
 図3は、心拍情報の出力例を示すフローチャートである。まずバンドパスフィルタ16a~16cにより、バンドパスフィルタ処理が実行される(ステップ101)。バンドパスフィルタ16a及び16bにより、各PPGセンサの出力信号から脈動や体組織の変形に伴う変動成分が抽出される。またバンドパスフィルタ16bにより、重力加速度によるオフセット及び電気的ノイズの除去が実行される。
 体動解析部20により、測定部位の体動強度が解析される(ステップ102)。図4及び図5は、体動解析部20による体動解析の概念を説明するための図である。
 体動解析部20は、ノルム値算出部21と、バッファ22a及び22bと、最大値フィルタ23a及び23bと、平滑化フィルタ24a及び24bとを有する。加速度センサ14が3軸加速度センサである場合、ノルム値算出部21により、体動信号である3軸加速度信号から加速度ノルムが算出される。加速度ノルムは、バッファ22aを介して最大値フィルタ23aに出力され、最大値フィルタ処理が実行される。最大値フィルタ処理された体動信号(ノルム値)は、平滑化フィルタ24aに出力され、平滑化フィルタ処理が実行される。最大値フィルタ処理された体動信号と平滑化フィルタ処理された体動信号との差分が閾値処理されることで、測定部位の体動強度及び体動周波数が変化したときの体動変化を検出することが可能である。
 図5の上段において縦軸は信号値、横軸は時間である。図5の下段において縦軸は体動変化の状態(体動変化の有無)、横軸は時間である。図5の上段には、フィルタ処理前の体動信号と、平滑化フィルタ処理後の体動信号と、最大値フィルタ処理後の体動信号とが示されている。例えば図5の上段に示したような平滑化フィルタ処理後の体動信号と最大値フィルタ処理後の体動信号とから、図5の下段に示したように体動変化(主に腕の動き)の有無を検出することができる。
 第2のPPGセンサ13から出力される参照脈波信号についても同様に、最大値フィルタ23b及び平滑化フィルタ24bの各々の出力に基づいて、体動変化(主に指・手首の動き)の有無を検出することが可能である。以下「主に」という文言を省略する場合がある。
 このように体動解析部20により、腕の周期的な動きについての第1の体動解析結果と、指・手首の非周期の動きについての第2の体動解析結果が出力される。なお平滑化フィルタとしては、例えばFIR(Finite Impulse Response)フィルタやIIR(Infinite Impulse Response)フィルタ等が用いられる。
 また図2に示すように、第1及び第2のPPGセンサ12及び13における光量の設置値が体動解析部20に出力される。当該設定値に基づいて、脈波信号及び参照脈波信号の信頼度が算出される。例えば各発光部の光量が所定の閾値よりも低い場合や、光量の設定値が変化している場合には、脈波信号及び参照脈波信号の信頼度は低くなる。信頼度の算出方法は限定されず、その他の方法が採用されてもよい。
 第1のノイズ低減処理部30により、腕の動きに起因する体動ノイズ(以下、腕の動きノイズと記載する)の低減処理が実行される(ステップ103)。なお図中では、第1のノイズ低減処理部30のことを、腕の動きノイズ低減処理部30と記載している。
 図6は、第1のノイズ低減処理部30の構成例を示すブロック図である。第1のノイズ低減処理部30は、適応フィルタ31(第1の適応フィルタ)と、IIRフィルタ32と、減算器33とを有する。適応フィルタ31の入力信号は体動信号であり、観測信号は第1のPPGセンサ12から出力される脈波信号である。減算器33により、脈波信号から適応フィルタ31の出力値が減算され、第1の誤差信号が出力される。第1の誤差信号は、体動ノイズ(腕の動きノイズ)が分離された脈波信号に相当する。
 適応フィルタ31の適応フィルタ係数は、適応アルゴリズム34及びIIRフィルタ32により、第1の体動解析結果に基づいて更新される。例えば適応アルゴリズム34がNLMSアルゴリズムである場合、例えばステップサイズと呼ばれる適応フィルタ係数の更新量を決定するパラメータ等が、第1の体動解析結果に基づいて制御される。これにより最適な係数が求まる収束時間が向上され体動周波数の変化に追従可能となる。
 また適応フィルタ31において、観測信号に含まれる体動ノイズ(疑似信号)を分離するには、入力信号と体動ノイズとの相関が高い方が好ましい。本実施形態では図6に示すように、体動の血流への影響をモデル化してノイズモデル35とし、体動の血流への伝達関数(FIRフィルタ係数)があらかじめ算出されて記録されている。適応フィルタ31には、体動信号をFIRフィルタ処理した結果が入力される。すなわち体動信号をそのまま入力信号として利用するのではなく、FIRフィルタ処理結果が入力信号として利用される。この結果、体動強度及び体動周波数が変化したときの最適な係数が求まる収束時間が改善される。
 ノイズモデル35の伝達関数は血管や血流の状態などに依存するため、ユーザごとに最適な係数が存在する。従って本実施形態では、ユーザにより心拍測定装置100が使用される際に、ノイズモデル35として体動の血流への伝達関数を求める処理が実行される。
 図7は、伝達関数の算出例を示すフローチャートである。まず第1のPPGセンサ12が測定部位に装着される(ステップ201)。測定部位の皮膚の色等で戻り光量に個人差があるため、安静状態で脈波信号が飽和しないように、第1のPPGセンサ12の第1の発光部の光量が制御される(ステップS202)。
 ユーザに対して測定部位を動かすように促す。具体的には、測定部位に動脈血流方向(図1B参照)に対してインパルス的な体動を付与させ、脈波信号と体動信号とを計測する(ステップ203)。第1のノイズ低減処理部30により、入力信号をインパルス的な体動による体動信号とし、出力信号を脈波信号として、適応フィルタ31によるシステム同定が実行される(ステップS204)。
 伝達関数(FIRフィルタ係数)が収束したか否かが判定される(ステップ205)。伝達関数が収束していないと場合には(ステップ205のNo)、ステップS203に戻る。伝達関数が収束した場合(ステップ205のYes)、処理が終了される。
 なおノイズモデル35として体動の血流への伝達関数(FIRフィルタ係数)を例に説明したが、その他の実施形態としてN次多項式による近似も考えられる。例えば、最小2乗法などを用いてN次多項式の係数を算出すればよい。
 また求めた適応フィルタ係数は、IIRフィルタ32によりIIRフィルタ処理される。例えば1サンプル前の過去の値を0(ゼロ)値として、安静状態と判断された場合はIIRフィルタ処理がONされることで適応フィルタ処理がOFFにされる。運動時は帰還率を0.0に設定してIIRフィルタ処理がOFFにされることで適応フィルタ処理がONにされる。この構成により第1の体動解析結果に応じてIIRフィルタ32の帰還率を制御するだけで、適応フィルタ処理の有無を円滑に切り替えることが可能となる。
 以上の工夫により急激な体動強度および体動周波数の変化があっても適応フィルタ処理の収束時間が改善されるので、ノイズ低減効果が十分に得られる。
 図8は、加速度センサ14が3軸加速度センサの場合の、第1のノイズ低減処理部30の構成例を示すブロック図である。3軸加速度の各成分の血流に対する伝達関数をあらかじめ算出しておき、XYZの各加速度成分に対するノイズ低減処理部30X、30Y、30Zをカスケード接続した構成にすればよい。
 例えばノイズ低減処理部30Xには、モデル係数と、体動信号のX成分と、第1の体動解析結果と、ノイズ低減処理前の脈派信号とが入力される。ノイズ低減処理部30Yには、モデル係数と、体動信号のY成分と、第1の体動解析結果と、ノイズ低減処理部30Xの出力(誤差信号)とが入力される。ノイズ低減処理部30Zには、モデル係数と、体動信号のZ成分と、第1の体動解析結果と、ノイズ低減処理部30Yの出力(誤差信号)とが入力される。ノイズ低減処理部30Zの出力(誤差信号)が、第1の誤差信号となる。
 図2に示すように本実施形態では、第1の誤差信号とともにその信頼度が算出される。例えば適応フィルタ係数の時間変化を解析することで、腕の動きノイズ低減処理が適切に機能しているか解析され、出力される第1の誤差信号の信頼度がパラメータとして出力される。例えば各フィルタ係数の時間差分絶対値の総和を算出し、急激に係数変化が発生した場合や閾値以上の場合は信頼度が低いもしくは信頼度がないと判断される。信頼度の算出方法は限定されず、他の方法が用いられてもよい。また体動解析部20から出力される第1のPPGセンサ12の光量に基づく信頼度が適宜利用されてもよい。
 図2に示す参照信号生成部50により、指・手首の動きに起因する体動ノイズ(以下、指・手首の動きノイズと記載する)を分離するための参照信号が生成される(ステップ104)。参照信号は、指・手首の動きノイズと相関が高い方が好ましい。本実施形態では、第1のPPGセンサ12からの脈波信号、第2のPPGセンサ13からの参照脈波信号、及び加速度センサ14からの体動信号をもとに参照信号が生成される。
 例えば脈波信号及び参照脈波信号の各々に対して主成分分析が実行され、生成された2つの信号からノイズ信号が選択される。PPG方式では信号成分より体動ノイズ成分の方が強いので、分離された信号のパワーが強い方が、指・手首の動きノイズと相関の高い信号となる。当該信号が、参照信号として用いられる。その他、参照信号の生成方法は限定されず、脈波信号及び参照脈波信号を合成した信号や、脈波参照信号のみに基づく信号等が参照信号として用いられてもよい。また脈波参照信号自体が参照信号として用いられてもよい。
 第2のノイズ低減処理部40により、指・手首の動きノイズの低減処理が実行される(ステップ105)。なお図中では、第2のノイズ低減処理部40のことを、指・手首の動きノイズ低減処理部40と記載している。
 図9は、第2のノイズ低減処理部40の構成例を示すブロック図である。第2のノイズ低減処理部40は、適応フィルタ41(第2の適応フィルタ)と、IIRフィルタ42と、減算器43とを有する。適応フィルタ41の入力信号は参照信号であり、観測信号は第1のノイズ低減処理部30から出力される第1の誤差信号(脈波信号)である。減算器43により、第1の誤差信号から適応フィルタ41の出力値が減算され、第2の誤差信号が出力される。第2の誤差信号は、体動ノイズ(指・手首の動きノイズ)が分離された脈波信号に相当する。
 適応フィルタ41の適応フィルタ係数は、適応アルゴリズム44及びIIRフィルタ42により、第2の体動解析結果に基づいて更新される。これにより最適な係数が求まる収束時間が向上され体動周波数の変化に追従可能となる。
 また第1のノイズ低減処理部30と同様に、求めた適応フィルタ係数は、IIRフィルタ42によりIIRフィルタ処理される。従って第2の体動解析結果に応じてIIRフィルタ42の帰還率を制御するだけで、適応フィルタ処理の有無を円滑に切り替えることが可能となる。
 第2の誤差信号とともにその信頼度が算出される。例えば適応フィルタ係数の時間変化を解析することで、腕の動きノイズ低減処理が適切に機能しているか解析され、出力される第2の誤差信号の信頼度がパラメータとして出力される。例えば各フィルタ係数の時間差分絶対値の総和を算出し、急激に係数変化が発生した場合や閾値以上の場合は信頼度が低いもしくは信頼度がないと判断される。信頼度の算出方法は限定されず、他の方法が設けられてもよい。また体動解析部20から出力される第2のPPGセンサ13の光量に基づく信頼度が適宜利用されてもよい。
 第2のノイズ低減処理部40から出力された脈波信号(第2の誤差信号)に基づいて、心拍変動、及び心拍トレンドが検出される(ステップ106)。心拍変動は、図2に示す心拍変動検出部60により検出される。また心拍トレンドは、図2に示す心拍トレンド検出部70により検出される。
 図10は、心拍変動検出部60の構成例を示すブロック図である。心拍変動検出部60は、バッファ61と、ピーク検出部62と、瞬時心拍数/信頼度算出部63と、リサンプリング部64と、後処理フィルタ部65とを有する。
 本実施形態ではピーク検出部62により、体動ノイズが低減された脈波信号から脈動によるピーク位置が検出される。図10に示すようにピーク検出部62には、バッファ61を介して、脈波信号の最大値、最小値、極大値、及び極小値が入力される。以下、極大値検出によるピーク位置検出の実施例について説明する。
 体動により第1のPPGセンサ12の接触状態が変化し脈波信号強度が変調する場合がある。このときあらかじめ設定した固定閾値でピーク検出すると、脈動によるピーク位置が検出できない場合があり得る。また体動ノイズによる疑似ピークを脈動によるピークとして誤検出するおそれもある。
 本実施形態では、上記のような検出誤差が生じないように、以下の式に示すように、ある解析窓内の脈波信号の最大値vmaxと最小値vminとからピーク強度の閾値thを決定する。
 th=vmin+α・(vmax-vmin)
 0<α<1
 これにより、脈波信号の強度に応じてピーク強度の閾値thが適応的に制御されるので、脈波信号強度が変調してもピーク位置の検出が可能となる。
 なお上記のような閾値処理を実行した場合でも、周波数が低い体動ノイズの残留により、ピーク強度が強くても凸度が小さい極大値(ブロードな極大値)を、脈動によるピークとして誤検出してしまう可能性がある。
 そこで本実施形態では、下記の処理例のいずれかが単独で、あるいは複数の処理が組み合わされて実行される。
 直前の極小値と極大値から現在の極大値の凸度、具体的にはレベル差を算出し閾値判定する。
 体動で脈波強度が変調することを考慮し、第1及び/又は第2の体動解析結果に応じて上記閾値を適応的に制御する。
 心拍トレンド検出部70により求められた心拍数を探索範囲中心として、極大値を検出する範囲を限定する。この場合、心拍変動検出部60と心拍トレンド検出部70とが、カスケード接続されてもよい。
 例えば上記の処理を実行することで、第1及び第2のノイズ低減処理部30及び40でノイズ除去しきれなかった体動ノイズによる疑似ピークの誤検出を軽減することが可能となる。この結果、心拍変動検出部60による瞬時心拍数の精度が向上する。
 瞬時心拍数/信頼度算出部63により、瞬時心拍数及び信頼度が算出される。瞬時心拍数とは瞬間的な心拍数を意味し、例えばピーク位置(極大値の位置)の時間間隔の逆数に60(秒)を乗算した値が算出される。瞬時心拍数を算出することで、例えば心拍トレーニング等において、心拍変動をリアルタイムで精度よく測定することが可能となる。
 なお一般的には「心拍数」は全身に血液を送り出す際の心臓の拍動の回数であり、「脈拍数」は動脈に生じる脈動(脈拍)の回数である。不整脈や脈欠損等がない限り「心拍数」と「脈拍数」はほぼ同じといわれている。本開示では、心拍測定装置100による測定結果を心拍変動、心拍トレンド、瞬時心拍数等と記載している。これに代えて、脈拍変動、脈拍トレンド、瞬時脈拍数等と記載することも可能である。もちろん測定部位の動脈の脈動である「脈拍数」を「心拍数」とは異なるパラメータとして扱う場合等においても、本技術は適用可能である。
 信頼度は、例えば極大値と極小値のレベル差に基づいて算出される。ピークとして検出された極大値と、直前(又は直後)の極小値とのレベル差、すなわち極大値の凸度が大きいほど、高い信頼度が付される。他の方法により、信頼度が算出されてもよい。
 リサンプリング部64により1Hzにリサンプリングされた後、後処理フィルタ部65により、後処理が実行される。例えば後処理フィルタ部65として、IIRフィルタと帰還率算出部とが構成され、IIRフィルタの帰還率が適宜制御される。
 例えば第1及び第2のノイズ低減処理部30及び40とピーク検出部62とでノイズを除去しきれず、瞬時心拍数の時間変化に異常値が発生する場合がある。一般的に瞬時心拍数の時間相関は非常に高い。そこで瞬時心拍数の時間変化があらかじめ設定した閾値より大きい場合は、後処理フィルタ部65のIIRフィルタの帰還率が大きくなるように制御される(例えば1.0に近い値)。これにより過去の瞬時心拍数をそのまま外挿処理し誤検出を修正(軽減)することができる。また体動解析部20からの解析結果に基づいて、ユーザの運動中はIIRフィルタの帰還率が1.0より小さい値、例えば0.5程度となるように制御される。これにより瞬時心拍数を安定化させることが可能となる。
 図11は、心拍トレンド検出部70の構成例を示すブロック図である。心拍トレンド検出部70は、バッファ71a及び71bと、自己相関解析部72と、安定化処理部73と、フィルタ係数制御部74と、トレンド検出部75と、リサンプリング部76とを有する。
 自己相関解析部72は、体動ノイズが低減された脈波信号に対して、1サンプリング時刻毎に自己相関解析を実行する。自己相関関数の算出方法は様々あるが、本実施形態では、正規化自己関数を用いた解析が実行される。
 安定化処理部73は、現在時刻の自己相関関数に対して、バッファ71bに保持された過去の自己相関関数を重み付け加算することで、自己相関関数を安定化させる。重み付けパラメータは、フィルタ係数制御部74により、加速度信号(体動信号)から決定される。
 トレンド検出部75は、安定化した自己相関関数から連続的に自己相関値が高くなるラグτを検出し、脈波信号の周期を心拍トレンドとして算出する。当該心拍トレンドに基づいて、心拍数とその信頼度が算出される。なおこの心拍数は、心拍トレンド(脈波信号の周期)に基づいて算出されたものであり、瞬時心拍数とは異なる。
 信頼度は、例えば特定したラグτの位置における正規化自己相関値、すなわち検出された周期における自己相関値に基づいて算出される。自己相関値が高いほど、高い信頼度が付される。他の方法により信頼度が算出されてもよい。リサンプリング部76により1Hzにリサンプリングされた後、心拍数とその信頼度が出力される。
 心拍変動検出部60及び心拍トレンド検出部70は、本実施形態において、脈波信号に基づいて心拍候補情報を信頼度とともに算出する複数の算出部に相当する。またこれらの検出部は、心拍推定器と呼ぶこともできる。またピーク検出により求められる瞬時心拍数と、自己相関解析により求められる心拍数とは、それぞれ心拍候補情報に相当する。
 脈波信号に基づいて心拍候補情報を算出する算出部の数、算出のためのアルゴリズム等は限定されず適宜設定されてよい。また心拍候補情報としては、典型的には心拍数が算出されるが、他の情報が算出されてもよい。
 図2に示す統合処理部80により、統合処理が実行される(ステップ107)。具体的には、心拍変動検出部60及び心拍トレンド検出部70の各々から心拍候補情報として出力された瞬時心拍数及び心拍数と、その各々の信頼度とに基づいて心拍情報を出力する。すなわち統合処理部80により、複数の心拍推定器の出力結果とその信頼度から最終的な心拍数の情報が出力される。統合処理部80は、本実施形態において出力部として機能する。
 最終的な心拍情報の出力方法として、例えば最も信頼度が高い心拍候補情報が出力される。すなわち瞬時心拍数の信頼度と、心拍トレンドに基づく心拍数の信頼度とが比較される。そして信頼度が高い方の心拍数が、最終的な心拍情報として出力される。
 あるいは、複数の心拍推定器により算出された信頼度を多次元ベクトル化して、ニューラルネットワークで構成した判別器等により、最終的な心拍情報(心拍数)が算出されてもよい。ニューラルネットワークが構成される場合には、例えば心電計等で計測した心拍数が正解データとされる。そして同時に計測した複数の脈波信号(脈波信号及び参照脈波信号)と加速度信号(体動信号)から、複数の心拍推定器で算出した多次元ベクトルを入力データとして、ニューラルネットワークの係数を機械学習により求めればよい。
 また本実施形態では、統合処理部80により、フォールバックを実行するか否かが判定される。例えば瞬時心拍数の信頼度と、心拍トレンドに基づく心拍数の信頼度とが、いずれも所定の閾値よりも低い場合には、フォールバックが実行される。フォールバックとしては、例えば直前の心拍数が前置ホールドされ最終的な心拍情報として出力される。これにより信頼度が低い心拍情報が出力されることを防止しつつ、心拍測定を継続することが可能となる。なおフォールバックの具体的な動作は限定されない。
 また第1及び第2のノイズ低減処理部30及び40にて算出された信頼度に基づいて、フォールバック動作の要否が判定されてもよい。例えば第1及び第2のノイズ低減処理部30及び40にて算出された信頼度、及び、心拍変動検出部60及び心拍トレンド検出部70により算出された信頼度のいずれもが信頼度が低い場合には、フォールバックが実行される。あるいは第1及び第2のノイズ低減処理部30及び40にて算出された信頼度が低い場合には、2つの心拍推定器により算出された信頼度の値にかかわらずフォールバックが実行される。また第1及び第2のノイズ低減処理部30及び40にて算出された信頼度が高い場合には、2つの心拍推定器により算出された信頼度がともに低い場合であってもフォールバックは実行されず、信頼度が高い方の心拍候補情報が出力される。このような処理も可能である。
 体動により第1及び第2のPPGセンサ12及び13と人肌の密着性が低下して、外光・迷光が混入し脈波信号が飽和する場合がある。また体動による腕の形状変化で戻り光量が変化して、脈波信号が飽和する場合もある。このような場合を回避するために適切な戻り光量になるように発光素子(発光部)の光量が動的に制御されてもよい。光量が制御された結果、脈波信号の信頼性が低い又はない場合には、フォールバックが実行されてもよい。その他、体動解析部20により算出される信頼度や、心拍トレンド検出部70により算出される自己相関解析の値に基づいて、フォールバック動作の要否が判定されてもよい。
 安定化処理部90は、最終的な心拍情報として出力される心拍数を安定化させる。例えば、第1及び第2のノイズ低減処理部30及び40、及びピーク検出で除去できなかった体動ノイズによる瞬時心拍数の誤検出を低減する。安定化処理部90の具体的な構成等は限定されない。
 以上、本実施形態に係る心拍測定装置100では、複数の算出部として機能する心拍変動検出部60及び心拍トレンド検出部70の各々により、心拍候補情報が信頼度とともに算出される。従ってこれらの情報に基づいて、信頼度の高い心拍情報を最終的に出力することが可能となる。この結果、精度の高い心拍測定を実現することが可能となる。
 心拍変動検出部60によるピーク検出では脈動によるピーク位置を検出できるため高い精度で心拍変動を検出することができる。一方、心拍トレンド検出部70による自己相関解析では脈波の周期性を利用するため、心拍変動を精度よく検出することは難しい。しかしながら自己相関解析では、残留ノイズによるピークを脈動によるピーク位置として誤検出する可能性を十分に抑えることが可能であり、ノイズ耐性が非常に高い。このように特性の異なる複数の心拍推定器を準備し、各々の信頼度にもとづいて最終的な心拍情報を算出する。この結果、互いの弱点を補った心拍検出が可能となり、単一の心拍推定器を用いる場合と比較して、非常に精度の高い心拍測定が実現する。
 またPPG方式の心拍センサは、安静状態では比較的精度よく脈波信号を計測できるが、測定部位が動くと観測信号に体動ノイズが発生する。リストバンド型の心拍センサにおける体動ノイズの要因としては、PPGセンサと測定部位との接触状態の変化により、不要な皮膚表面反射が混入することや、皮膚下を伝わって外光が混入すること等が挙げられる。またPPGセンサと測定部位の接触状態が良好な場合でも、測定部位の動きによる血流変化で疑似信号が発生することや、指・手首の動き(骨の動き)に伴う皮膚下組織の変形による光吸収量の変動等が挙げられる。例えば上記の主要因の複合要因により脈波信号に疑似ピーク信号が混入すると、どのピークが脈動によるピーク信号なのか判別が困難となる。その結果、ピーク位置の時間差から瞬時心拍数を算出した場合に、誤った脈拍数を算出するといったことも懸念される。
 上記のような体動ノイズを低減する手法としては、上記でも説明した適応フィルタが有効である。改めて適応フィルタについて説明すると、適応フィルタとは観測信号(d)と入力信号(X)が与えられた時に誤差信号(e)パワーを最小化するフィルタ係数(W)を自動的に計算する手法である。観測信号を脈波信号とした場合、入力信号としてノイズと相関が高い信号を参照する事で観測信号に混入したノイズを分離することができる。
 本実施形態に係る心拍測定装置100では、第1のノイズ低減処理部30により腕の動きノイズが低減され、第2のノイズ低減処理部40により指・手首動きノイズが低減される。従って、歩行・走行に代表される腕の周期的動きによるノイズと、指・手首の動きといった非周期の動きによるノイズとの両方を十分に低減することが可能である。その結果、日常生活の心拍変動を高い精度で常時計測する事が可能である。
 脈拍数を安定的に算出する手法として周波数解析法も知られている。例えばノイズ低減処理後の脈波信号を周波数解析してスペクトル強度が最大となる周波数を脈波数として決定する。しかしながら周波数解析法では原理的に低心拍領域での心拍変動の推定精度に課題が残る。本実施形態に係る心拍測定装置100では、低心拍領域での心拍変動も高い精度で算出することが可能である。
 本実施形態では、本技術に係る生体情報処理装置の一実施形態として、心拍測定装置100について説明した。本技術に係る生体情報処理装置の実施形態としては、これに限定されず、脈波センサを備える任意の機器が含まれる。例えばヘッドバンド型、ネックバンド型、ベルト型等の種々のウェアラブル装置、スマートフォンやタブレット端末等の任意の携帯情報端末(PDA:Personal Digital Assistant)、医療機器、ゲーム機器、家電機器等の任意の電子機器等を、本技術に係る生体情報処理装置として構成することが可能である。
 また図1Bに示すコントローラ15の機能のみを有するウェアラブル装置やモバイル装置等が、本技術に係る情報処理装置として構成されてもよい。この場合、脈波センサと接続されるI/F(インタフェース)等が、脈波信号を取得する取得部として機能する。
 <その他の実施形態>
 本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。
 上記では、脈波信号を生成するために第1のPPGセンサ12が設けられ、参照信号の生成用の参照脈波信号を生成するために第2のPPGセンサ13が設けられた。これに代えて第1及び第2のPPGセンサ12及び13から出力される脈波候補信号のいずれか1つが適宜選択され、心拍数の算出対象となる脈波信号として出力されてもよい。
 例えば第1及び第2のPPGセンサ12及び13から出力される2つの脈波候補信号の戻り光量を揃えた時に、脈波成分の強い方が主信号として選択され、これ以降のノイズ低減処理はこの脈波候補信号を対象として実行される。すなわち複数の脈波センサとして、ノイズ低減処理の対象となる脈波信号を生成する第1の脈波センサが予め決定されていてもよいし、複数の脈波センサの中から第1の脈波センサが適宜選択されてもよい。第1の脈波センサをその都度選択することで、最も脈波成分が強い信号を選択することが可能となるので、精度の高い心拍測定が実現する。
 以上説明した本技術に係る特徴部分のうち、少なくとも2つの特徴部分を組み合わせることも可能である。すなわち各実施形態で説明した種々の特徴部分は、各実施形態の区別なく、任意に組み合わされてもよい。また上記で記載した種々の効果は、あくまで例示であって限定されるものではなく、また他の効果が発揮されてもよい。
 なお、本技術は以下のような構成も採ることができる。
(1)脈波信号を出力する脈波センサ部と、
 各々が前記出力された脈波信号に基づいて心拍候補情報を信頼度とともに算出する複数の算出部と、
 前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報を出力する出力部と
 を具備する生体情報処理装置。
(2)(1)に記載の生体情報処理装置であって、さらに、
 体動信号を出力する体動センサと、
 前記体動信号に基づいて前記脈波センサ部から出力された脈波信号から体動ノイズを分離するノイズ低減処理部と
 を具備し、
 前記複数の算出部の各々は、前記体動ノイズが分離された脈波信号に基づいて、前記心拍候補情報とその信頼度とを算出する
 生体情報処理装置。
(3)(2)に記載の生体情報処理装置であって、
 前記複数の算出部は、前記体動ノイズが分離された脈波信号に基づいて、前記脈波信号のピーク位置を検出し、瞬時心拍数を算出する第1の算出部を有する
 生体情報処理装置。
(4)(3)に記載の生体情報処理装置であって、
 前記第1の算出部は、前記脈波信号の極大値と極小値との差に基づいて、前記瞬時心拍数の信頼度を算出する
 生体情報処理装置。
(5)(3)又は(4)に記載の生体情報処理装置であって、
 前記複数の算出部は、前記体動ノイズが分離された脈波信号に基づいて、自己相関解析により前記脈波信号の周期を検出し、心拍数を算出する第2の算出部を有する
 生体情報処理装置。
(6)(5)に記載の生体情報処理装置であって、
 前記第2の算出部は、前記検出された周期における自己相関値に基づいて、前記心拍数の信頼度を算出する
 生体情報処理装置。
(7)(2)から(6)のうちいずれか1つに記載の生体情報処理装置であって、
 前記脈波センサ部は、複数の脈波センサを有し、前記複数の脈波センサにより生成される複数の脈波候補信号のいずれか1つを前記脈波信号として出力する
 生体情報処理装置。
(8)(7)に記載の生体情報処理装置であって、
 前記ノイズ低減処理部は、体動の血流への影響をモデル化して算出された伝達関数によってフィルタ処理された前記体動信号が入力信号として入力される第1の適応フィルタを有し、前記脈波センサ部から出力された脈波信号から前記第1の適応フィルタの出力値を減算した第1の誤差信号を出力する
 生体情報処理装置。
(9)(7)から(9)のうちいずれか1つに記載の生体情報処理装置であって、さらに、
 前記複数の脈波センサにより生成される前記複数の脈波候補信号に基づいて、前記体動ノイズを分離するための参照信号を生成する生成部を具備し、
 前記ノイズ低減処理部は、前記参照信号が入力信号として入力される第2の適応フィルタを有し、前記第1の誤差信号から前記第2の適応フィルタの出力値を減算した第2の誤差信号を出力する
 生体情報処理装置。
(10)(9)に記載の生体情報処理装置であって、
 前記複数の脈波センサは、前記脈波信号を生成する第1の脈波センサと、前記参照信号の生成用の参照脈波信号を生成する第2の脈波センサとを有する
 生体情報処理装置。
(11)(10)に記載の生体情報処理装置であって、
 前記第1の脈波センサは、第1の波長域の光を出射する第1の発光部と、前記第1の波長域の光の反射光を検出する第1の受光部とを有し、
 前記第2の脈波センサは、前記第1の波長域よりも長い第2の波長域の光を出射する第2の発光部と、前記第2の波長域の光の反射光を検出する第2の受光部とを有する
 生体情報処理装置。
(12)(10)又は(11)に記載の生体情報処理装置であって、さらに、
 前記体動信号を解析することによって体動変化を検出し第1の体動解析結果として出力する体動解析部を具備し、
 前記ノイズ低減処理部は、前記出力された第1の体動解析結果に基づいて、前記第1の適応フィルタにおける適応フィルタ係数を更新する
 生体情報処理装置。
(13)(12)に記載の生体情報処理装置であって、
 前記体動解析部は、前記参照脈波信号を解析することによって体動変化を検出し第2の体動解析結果として出力し、
 前記ノイズ低減処理部は、前記出力された第2の体動解析結果に基づいて、前記第2の適応フィルタにおける適応フィルタ係数を更新する
 生体情報処理装置。
(14)(1)から(13)のうちいずれか1つに記載の生体情報処理装置であって、
 前記出力部は、最も信頼度が高い前記心拍候補情報を、前記心拍情報として出力する
 生体情報処理装置。
(15)(1)から(14)のうちいずれか1つに記載の生体情報処理装置であって、
 前記出力部は、前記複数の算出部の各々が算出する信頼度に基づいて、フォールバックを実行するか否かを判定する
 生体情報処理装置。
(16)(15)に記載の生体情報処理装置であって、
 前記出力部は、体動ノイズが分離された脈波信号とともに算出される信頼度に基づいて、前記フォールバックを実行するか否かを判定する
 生体情報処理装置。
 10…センサ本体部
 12…第1のPPGセンサ
 13…第2のPPGセンサ
 14…加速度センサ
 15…コントローラ
 20…体動解析部
 30…第1のノイズ低減処理部
 31、41…適応フィルタ
 35…ノイズモデル
 40…第2のノイズ低減処理部
 50…参照信号生成部
 60…心拍変動検出部
 62…ピーク検出部
 63…信頼度算出部
 70…心拍トレンド検出部
 72…自己相関解析部
 75…トレンド検出部
 80…統合処理部
 100…心拍測定装置

Claims (18)

  1.  脈波信号を出力する脈波センサ部と、
     各々が前記出力された脈波信号に基づいて心拍候補情報を信頼度とともに算出する複数の算出部と、
     前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報を出力する出力部と
     を具備する生体情報処理装置。
  2.  請求項1に記載の生体情報処理装置であって、さらに、
     体動信号を出力する体動センサと、
     前記体動信号に基づいて前記脈波センサ部から出力された脈波信号から体動ノイズを分離するノイズ低減処理部と
     を具備し、
     前記複数の算出部の各々は、前記体動ノイズが分離された脈波信号に基づいて、前記心拍候補情報とその信頼度とを算出する
     生体情報処理装置。
  3.  請求項2に記載の生体情報処理装置であって、
     前記複数の算出部は、前記体動ノイズが分離された脈波信号に基づいて、前記脈波信号のピーク位置を検出し、瞬時心拍数を算出する第1の算出部を有する
     生体情報処理装置。
  4.  請求項3に記載の生体情報処理装置であって、
     前記第1の算出部は、前記脈波信号の極大値と極小値との差に基づいて、前記瞬時心拍数の信頼度を算出する
     生体情報処理装置。
  5.  請求項3に記載の生体情報処理装置であって、
     前記複数の算出部は、前記体動ノイズが分離された脈波信号に基づいて、自己相関解析により前記脈波信号の周期を検出し、心拍数を算出する第2の算出部を有する
     生体情報処理装置。
  6.  請求項5に記載の生体情報処理装置であって、
     前記第2の算出部は、前記検出された周期における自己相関値に基づいて、前記心拍数の信頼度を算出する
     生体情報処理装置。
  7.  請求項2に記載の生体情報処理装置であって、
     前記脈波センサ部は、複数の脈波センサを有し、前記複数の脈波センサにより生成される複数の脈波候補信号のいずれか1つを前記脈波信号として出力する
     生体情報処理装置。
  8.  請求項7に記載の生体情報処理装置であって、
     前記ノイズ低減処理部は、体動の血流への影響をモデル化して算出された伝達関数によってフィルタ処理された前記体動信号が入力信号として入力される第1の適応フィルタを有し、前記脈波センサ部から出力された脈波信号から前記第1の適応フィルタの出力値を減算した第1の誤差信号を出力する
     生体情報処理装置。
  9.  請求項8に記載の生体情報処理装置であって、さらに、
     前記複数の脈波センサにより生成される前記複数の脈波候補信号に基づいて、前記体動ノイズを分離するための参照信号を生成する生成部を具備し、
     前記ノイズ低減処理部は、前記参照信号が入力信号として入力される第2の適応フィルタを有し、前記第1の誤差信号から前記第2の適応フィルタの出力値を減算した第2の誤差信号を出力する
     生体情報処理装置。
  10.  請求項9に記載の生体情報処理装置であって、
     前記複数の脈波センサは、前記脈波信号を生成する第1の脈波センサと、前記参照信号の生成用の参照脈波信号を生成する第2の脈波センサとを有する
     生体情報処理装置。
  11.  請求項10に記載の生体情報処理装置であって、
     前記第1の脈波センサは、第1の波長域の光を出射する第1の発光部と、前記第1の波長域の光の反射光を検出する第1の受光部とを有し、
     前記第2の脈波センサは、前記第1の波長域よりも長い第2の波長域の光を出射する第2の発光部と、前記第2の波長域の光の反射光を検出する第2の受光部とを有する
     生体情報処理装置。
  12.  請求項10に記載の生体情報処理装置であって、さらに、
     前記体動信号を解析することによって体動変化を検出し第1の体動解析結果として出力する体動解析部を具備し、
     前記ノイズ低減処理部は、前記出力された第1の体動解析結果に基づいて、前記第1の適応フィルタにおける適応フィルタ係数を更新する
     生体情報処理装置。
  13.  請求項12に記載の生体情報処理装置であって、
     前記体動解析部は、前記参照脈波信号を解析することによって体動変化を検出し第2の体動解析結果として出力し、
     前記ノイズ低減処理部は、前記出力された第2の体動解析結果に基づいて、前記第2の適応フィルタにおける適応フィルタ係数を更新する
     生体情報処理装置。
  14.  請求項1に記載の生体情報処理装置であって、
     前記出力部は、最も信頼度が高い前記心拍候補情報を、前記心拍情報として出力する
     生体情報処理装置。
  15.  請求項1に記載の生体情報処理装置であって、
     前記出力部は、前記複数の算出部の各々が算出する信頼度に基づいて、フォールバックを実行するか否かを判定する
     生体情報処理装置。
  16.  請求項15に記載の生体情報処理装置であって、
     前記出力部は、体動ノイズが分離された脈波信号とともに算出される信頼度に基づいて、前記フォールバックを実行するか否かを判定する
     生体情報処理装置。
  17.  脈波センサにより脈波信号を生成し、
     複数の算出部の各々により前記生成された脈波信号に基づいて心拍候補情報を信頼度とともに算出し、
     前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報を出力する
     生体情報処理方法。
  18.  脈波信号を取得する取得部と、
     各々が前記取得された脈波信号に基づいて心拍候補情報を信頼度とともに算出する複数の算出部と、
     前記複数の算出部の各々により算出された前記心拍候補情報とその信頼度とに基づいて、心拍情報を出力する出力部と
     を具備する情報処理装置。
PCT/JP2017/013590 2016-05-20 2017-03-31 生体情報処理装置、生体情報処理方法、及び情報処理装置 WO2017199597A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018518139A JP6813024B2 (ja) 2016-05-20 2017-03-31 生体情報処理装置、生体情報処理方法、及び情報処理装置
US16/300,652 US11311242B2 (en) 2016-05-20 2017-03-31 Biological information processing apparatus, biological information processing method, and information processing apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-101094 2016-05-20
JP2016101094 2016-05-20

Publications (1)

Publication Number Publication Date
WO2017199597A1 true WO2017199597A1 (ja) 2017-11-23

Family

ID=60325851

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/013590 WO2017199597A1 (ja) 2016-05-20 2017-03-31 生体情報処理装置、生体情報処理方法、及び情報処理装置

Country Status (3)

Country Link
US (1) US11311242B2 (ja)
JP (1) JP6813024B2 (ja)
WO (1) WO2017199597A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020003910A1 (ja) * 2018-06-28 2020-01-02 株式会社村上開明堂 心拍検出装置、心拍検出方法及びプログラム
WO2020012807A1 (ja) * 2018-07-11 2020-01-16 ソニー株式会社 生体情報処理装置及び生体情報処理方法
WO2020017162A1 (ja) * 2018-07-17 2020-01-23 ソニー株式会社 生体情報処理装置、及び情報処理方法
CN111818845A (zh) * 2018-03-06 2020-10-23 日本电信电话株式会社 心率计算设备和方法
WO2021260783A1 (ja) * 2020-06-23 2021-12-30 日本電信電話株式会社 心拍数検知方法、装置およびプログラム
WO2022075036A1 (ja) * 2020-10-05 2022-04-14 ソニーグループ株式会社 生体情報取得装置、生体情報取得システム、及び生体情報取得方法
WO2022091933A1 (ja) * 2020-10-29 2022-05-05 ミネベアミツミ株式会社 心拍情報取得システム、及びベッドシステム
WO2023286313A1 (ja) 2021-07-15 2023-01-19 ソニーグループ株式会社 信号処理装置および方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10874305B2 (en) * 2018-01-15 2020-12-29 Microsoft Technology Licensing, Llc Sensor device
CN111481190A (zh) * 2020-04-02 2020-08-04 南京润楠医疗电子研究院有限公司 基于双路ppg信号的稳健心率测量方法和装置
CN113397497A (zh) * 2021-06-10 2021-09-17 维沃移动通信有限公司 信号处理方法、装置和电子设备
US20230038906A1 (en) * 2021-08-06 2023-02-09 Rockley Photonics Limited System and method for positioning a sensor on a subject
WO2024062919A1 (en) * 2022-09-21 2024-03-28 Sony Group Corporation Signal processing device, signal processing method, program, and learning device
CN116584911A (zh) * 2022-12-23 2023-08-15 北京津发科技股份有限公司 一种脉搏信号运动干扰的过滤方法、装置和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009039568A (ja) * 2008-11-21 2009-02-26 Nippon Telegr & Teleph Corp <Ntt> 生体情報計測装置
JP2013183845A (ja) * 2012-03-07 2013-09-19 Seiko Epson Corp 拍動検出装置、電子機器及びプログラム
JP2014057622A (ja) * 2012-09-14 2014-04-03 Casio Comput Co Ltd 波形データ処理装置、波形データ処理方法及びプログラム
JP2014236773A (ja) * 2013-06-06 2014-12-18 セイコーエプソン株式会社 生体情報処理装置および生体情報処理方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001526073A (ja) * 1997-12-22 2001-12-18 ビー・ティー・ジー・インターナショナル・リミテッド 光体積変動記録法におけるアーティファクト削減
JPH11276448A (ja) 1998-03-31 1999-10-12 Seiko Epson Corp 信号抽出装置および信号抽出方法
KR100462182B1 (ko) * 2002-04-15 2004-12-16 삼성전자주식회사 Ppg 기반의 심박 검출 장치 및 방법
US7993276B2 (en) * 2004-10-15 2011-08-09 Pulse Tracer, Inc. Motion cancellation of optical input signals for physiological pulse measurement
US20100145171A1 (en) * 2008-12-05 2010-06-10 Electronics And Telecommunications Research Institute Apparatus for measuring motion noise robust pulse wave and method thereof
BR112014005666A2 (pt) * 2011-09-16 2017-03-28 Koninklijke Philips Nv dispositivo portátil, método e sistema para determinar uma frequência cardíaca de uma pessoa; e produto de programa de computador
EP2823759A4 (en) 2012-03-07 2015-11-11 Seiko Epson Corp PULSE MONITOR AND PROGRAM THEREOF
US9717423B2 (en) * 2013-01-28 2017-08-01 Texas Instruments Incorporated Low-complexity sensor displacement tolerant pulse oximetry based heart rate measurement
WO2014196119A1 (ja) 2013-06-06 2014-12-11 セイコーエプソン株式会社 生体情報処理装置および生体情報処理方法
US9918666B2 (en) * 2014-01-13 2018-03-20 The Board Of Regents, The University Of Texas System Systems and methods for physiological signal enhancement and biometric extraction using non-invasive optical sensors
US20150313549A1 (en) * 2014-04-30 2015-11-05 Digio2 International Co., Ltd. Heart rate monitoring method and devcie with motion noise signal reduction
CN106413530B (zh) * 2014-05-28 2020-11-06 皇家飞利浦有限公司 使用多通道ppg信号的运动伪影降低
KR101915374B1 (ko) * 2014-07-23 2018-11-05 선전 구딕스 테크놀로지 컴퍼니, 리미티드 광학 맥박수 센서
EP3087916B1 (en) * 2015-04-28 2023-09-20 Nokia Technologies Oy Physiological measurement sensor
RU2680190C1 (ru) * 2015-09-28 2019-02-18 Конинклейке Филипс Н.В. Датчик показателей жизненно важных функций и способ измерения показателей жизненно важных функций пользователя
US20170164847A1 (en) * 2015-12-15 2017-06-15 Texas Instruments Incorporated Reducing Motion Induced Artifacts in Photoplethysmography (PPG) Signals
US10973422B2 (en) * 2016-01-22 2021-04-13 Fitbit, Inc. Photoplethysmography-based pulse wave analysis using a wearable device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009039568A (ja) * 2008-11-21 2009-02-26 Nippon Telegr & Teleph Corp <Ntt> 生体情報計測装置
JP2013183845A (ja) * 2012-03-07 2013-09-19 Seiko Epson Corp 拍動検出装置、電子機器及びプログラム
JP2014057622A (ja) * 2012-09-14 2014-04-03 Casio Comput Co Ltd 波形データ処理装置、波形データ処理方法及びプログラム
JP2014236773A (ja) * 2013-06-06 2014-12-18 セイコーエプソン株式会社 生体情報処理装置および生体情報処理方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111818845A (zh) * 2018-03-06 2020-10-23 日本电信电话株式会社 心率计算设备和方法
CN111818845B (zh) * 2018-03-06 2023-02-28 日本电信电话株式会社 心率计算设备和方法
WO2020003910A1 (ja) * 2018-06-28 2020-01-02 株式会社村上開明堂 心拍検出装置、心拍検出方法及びプログラム
JPWO2020003910A1 (ja) * 2018-06-28 2021-08-05 株式会社村上開明堂 心拍検出装置、心拍検出方法及びプログラム
WO2020012807A1 (ja) * 2018-07-11 2020-01-16 ソニー株式会社 生体情報処理装置及び生体情報処理方法
WO2020017162A1 (ja) * 2018-07-17 2020-01-23 ソニー株式会社 生体情報処理装置、及び情報処理方法
WO2021260783A1 (ja) * 2020-06-23 2021-12-30 日本電信電話株式会社 心拍数検知方法、装置およびプログラム
JPWO2021260783A1 (ja) * 2020-06-23 2021-12-30
JP7439924B2 (ja) 2020-06-23 2024-02-28 日本電信電話株式会社 心拍数検知方法、装置およびプログラム
WO2022075036A1 (ja) * 2020-10-05 2022-04-14 ソニーグループ株式会社 生体情報取得装置、生体情報取得システム、及び生体情報取得方法
WO2022091933A1 (ja) * 2020-10-29 2022-05-05 ミネベアミツミ株式会社 心拍情報取得システム、及びベッドシステム
WO2023286313A1 (ja) 2021-07-15 2023-01-19 ソニーグループ株式会社 信号処理装置および方法

Also Published As

Publication number Publication date
US11311242B2 (en) 2022-04-26
US20200305798A1 (en) 2020-10-01
JPWO2017199597A1 (ja) 2019-03-22
JP6813024B2 (ja) 2021-01-13

Similar Documents

Publication Publication Date Title
WO2017199597A1 (ja) 生体情報処理装置、生体情報処理方法、及び情報処理装置
US10849562B2 (en) Noise reduction processing circuit and method, and biological information processing device and method
JP6201469B2 (ja) 生体情報処理装置、生体情報処理方法
CN107949321B (zh) 时域干扰去除和改进的心率测量跟踪机理
US9801587B2 (en) Heart rate monitor with time varying linear filtering
JP6933220B2 (ja) 生体情報処理装置、生体情報処理方法及び情報処理装置
US10750982B2 (en) Oxygen saturation measuring apparatus and oxygen saturation measuring method thereof
CN107205640B (zh) 用于去除生理测量结果中的伪像的设备和方法
JP6115330B2 (ja) 生体情報測定装置、および生体情報測定方法
US20210100463A1 (en) Motion detection and cancellation using ambient light
CN109788920B (zh) 信息处理设备、信息处理方法以及程序
US20190008458A1 (en) Device and method for extracting heart rate information
EP3752048A1 (en) Monitoring device for monitoring a physiological parameter and methods thereof
KR20190011026A (ko) 혈압 측정 장치 및 방법
Ardalan et al. Motion noise cancelation in heartbeat sensing using accelerometer and adaptive filter
JP2013094222A (ja) うっ血判定装置、脈波測定装置及びうっ血判定方法
Hurnanen et al. Heartbeat detection using multidimensional cardiac motion signals and dynamic balancing
CN114652288A (zh) 一种非袖带式动态血压测量系统
JP2011212383A (ja) 生体情報処理装置
WO2020012807A1 (ja) 生体情報処理装置及び生体情報処理方法
TWI795219B (zh) 基於血流動力學分析且與氣血循環及深層睡眠相關的特定生理綜合症偵測方法及系統
Galvez et al. Nine degree of freedom motion estimation for wrist PPG heart rate measurements
JP5919742B2 (ja) 脈波信号処理装置、脈波測定装置およびプログラム

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2018518139

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17799031

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 17799031

Country of ref document: EP

Kind code of ref document: A1