WO2020136870A1 - 生体情報分析装置、生体情報分析方法、及び、生体情報分析システム - Google Patents

生体情報分析装置、生体情報分析方法、及び、生体情報分析システム Download PDF

Info

Publication number
WO2020136870A1
WO2020136870A1 PCT/JP2018/048457 JP2018048457W WO2020136870A1 WO 2020136870 A1 WO2020136870 A1 WO 2020136870A1 JP 2018048457 W JP2018048457 W JP 2018048457W WO 2020136870 A1 WO2020136870 A1 WO 2020136870A1
Authority
WO
WIPO (PCT)
Prior art keywords
swallowing
information
swallowing motion
sound
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2018/048457
Other languages
English (en)
French (fr)
Inventor
隆 金丸
中村 泰明
神鳥 明彦
寛彦 水口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maxell Ltd filed Critical Maxell Ltd
Priority to JP2020562269A priority Critical patent/JP7165209B2/ja
Priority to US17/418,153 priority patent/US12478315B2/en
Priority to PCT/JP2018/048457 priority patent/WO2020136870A1/ja
Priority to CN202410524592.0A priority patent/CN118340517A/zh
Priority to CN201880100497.0A priority patent/CN113226173B/zh
Publication of WO2020136870A1 publication Critical patent/WO2020136870A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/1107Measuring contraction of parts of the body, e.g. organ or muscle
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/42Detecting, measuring or recording for evaluating the gastrointestinal, the endocrine or the exocrine systems
    • A61B5/4205Evaluating swallowing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6822Neck
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7253Details of waveform analysis characterised by using transforms
    • A61B5/7257Details of waveform analysis characterised by using transforms using Fourier transforms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient; User input means
    • A61B5/742Details of notification to user or communication with user or patient; User input means using visual displays

Definitions

  • the present invention relates to a biometric information analysis device, a biometric information analysis method, and a biometric information analysis system.
  • Defective swallowing function which is the function of feeding the food bolus to be swallowed from the oral cavity to the stomach, is caused by deterioration of motor function due to aging and brain diseases.
  • dysphagia occurs, food lumps may be mixed into the bronchus and lungs, causing pneumonia and the like to develop high fever, and many elderly people with weak physical fitness are at risk of life. ..
  • Swallowing angiography Video fluoroscopic Examination of Swallowing: VF
  • VF is the most commonly used method to accurately evaluate and understand dysphagia.
  • VF is a test that may cause aspiration, suffocation, etc., and caution is required.
  • a large-scale X-ray fluoroscope is required, there are problems such as exposure to radiation, time constraints, and costs.
  • VE Video endoscopic Examination of Swallowing: VE
  • VE is easier than VF, but the subject has a feeling of discomfort such as inserting a fiber from the nasal cavity, and since a fiberscope device is required, it is not easy to measure and is sufficiently popularized.
  • the food bolus enters the pharynx and reaches the peak of swallowing, the pharyngeal wall closes and the space in the pharynx collapses, the view of the endoscope becomes unclear, and the swallowing organ moves most in a short time. There is also the problem that it cannot be observed.
  • Patent Document 1 aims to provide a biopsy device for easily inspecting a dysphagia and displaying the result.
  • the biopsy device is a lateral displacement of the subject's larynx at two locations. 2) of the laryngeal displacement generated based on the information obtained from the laryngeal displacement detecting means, the display means, and the laryngeal displacement detecting means for detecting the swallowing sound when the subject swallows.
  • a flexible holding tool for a biopsy device comprising: a waveform relating to displacement of a location; and processing means for instructing the display means to display the waveform relating to swallowing sound generated based on information obtained from the swallowing sound detecting means.
  • the sensor fixing part and the neck mounting part are independent of each other, and both of them are connected at one end and the other end is opened respectively.
  • Patent Document 1 distance information and sound information are combined to evaluate the presence or absence of dysphagia, which indicates whether the swallowing motion is normal or abnormal.
  • similar motions other than the swallowing motion are included. Therefore, the point of extracting the swallowing motion itself from the similar motion was not considered.
  • the present invention is a biological information analysis apparatus, which includes a swallowing motion estimation unit that analyzes distance information and sound information obtained by measuring movement and sound of the pharynx and estimates a user's motion, and a display. And a swallowing motion estimating unit outputs a first swallowing motion position estimated by analyzing distance information and a second swallowing motion position estimated by analyzing sound information, and the display unit: The distance information, the sound information, and the first swallowing motion position and the second swallowing motion position output by the swallowing motion estimation unit are displayed.
  • swallowing motion determination can be performed more accurately.
  • FIG. 2B is a perspective view of FIG. 2A.
  • FIG. 2B is a perspective view of FIG. 2A.
  • FIG. 1 is a functional block diagram of the biological information analysis system in this embodiment.
  • the biometric information analysis system includes a measurement unit 1 and a biometric information analysis apparatus 2.
  • the measuring unit 1 includes a flexible holding tool worn by a user for measurement, including a transmitting coil (larynx displacement detecting means) 101, a receiving coil (larynx displacement detecting means) 102, and a microphone 103.
  • the coil 101 and the receiving coil 102 function as a pair as a distance information acquisition unit that measures distance information of the laryngeal displacement, which is the movement of the laryngeal part associated with swallowing.
  • the transmitting coil 101 and the receiving coil 102 are connected to the inter-coil voltage detection unit 104, and the output voltage of the inter-coil voltage detection unit 104 is input to the measurement control unit 107.
  • the microphone 103 functions as a sound information acquisition unit that acquires sound information about the displacement of the larynx associated with swallowing. For example, in the case of a microphone using a piezo element (piezoelectric element), ambient sounds other than swallowing However, a condenser microphone may be used.
  • the microphone 103 is connected to the swallowing sound detection unit 105, receives power supply, and operates as a microphone.
  • the swallowing sound detection unit 105 outputs the swallowing sound as a voltage, and the output voltage is input to the measurement control unit 107.
  • the memory 106 is a non-volatile memory that records and holds information required by the measurement control unit 107, such as characteristic values unique to the measurement processing program and the hardware used in the measurement unit 1. For example, when the measurement unit 1 is powered on, it is used to load the measurement processing program from the memory 106 into the measurement control unit 107, and the function can be modified or added to the measurement unit 1 by rewriting the measurement processing program. Is.
  • the measurement control unit 107 includes, for example, an arithmetic processing device such as a CPU (Central Processing Unit) and a volatile memory, receives a signal from the operation unit 109 or a control signal from the biological information analyzer 2, and starts/stops the measurement. Or converting the voltage value input from the coil-to-coil voltage detection unit 104 and the voltage value input from the swallowing sound detection unit 105 into digital data, each of which is recorded once in the memory and read at a predetermined cycle, The data is formatted into a communication data format and output to the input/output unit 108.
  • the communication data format may be, for example, a unique packet format.
  • the input/output unit 108 is a communication interface that transmits and receives data to and from the biological information analyzer 2.
  • the communication method may be based on a general-purpose communication method. For example, a USB (Universal Serial Bus) cable is used, a TCP (Transmission Control Protocol)/IP (Internet Protocol) communication format using a network cable, or Bluetooth (registered trademark) is used.
  • the used wireless communication system or the like may be used.
  • the operation unit 109 is a user operation interface provided in the main body of the measurement unit 1, and buttons suitable for simple operations such as turning the power on/off and starting/stopping the measurement are appropriately arranged.
  • the inter-coil voltage detection unit 104, the swallowing sound detection unit 105, the memory 106, the measurement control unit 107, the input/output unit 108, and the operation unit 109 are provided in a measurement unit control unit that is separate from the flexible holder. ..
  • FIG. 2A and 2B are external views showing details of the flexible holder in this embodiment.
  • FIG. 2A is a front view
  • FIG. 2B is a perspective view.
  • the flexible holder is a structure in which the pair of sensor holding members 3a and 3b and the neck mounting member 5 are independent, and the neck mounting member 5 is the other end of the pair of sensor holding members 3a and 3b.
  • the neck mounting member 5 is the other end of the pair of sensor holding members 3a and 3b.
  • Sensor parts 4a and 4b are arranged at one ends of the pair of sensor holding members 3a and 3b, and the laryngeal displacement detecting means (for example, the transmitting coil 101 or the receiving coil 102) is arranged inside the sensor parts 4a and 4b.
  • the swallowing sound detecting means for example, the microphone 103
  • the pair of sensor holding members 3a and 3b are arranged inside the neck mounting member 5, and both ends of the neck mounting member and the other end of the sensor holding member are integrally coupled.
  • the sensor holding members 3a and 3b can be mounted without contacting the neck, and can follow the swallowing movement independently of the neck mounting member 5. Further, a transmitting coil 101 or a receiving coil 102 and a microphone 103 are arranged at one end of the pair of sensor holding members 3a and 3b.
  • the transmitting coil 101 and the receiving coil 102 have two coils. Are attached to one end of the pair of sensor holding members 3a and 3b so as to be arranged so as to easily face each other (close to the vertical direction of the neck surface), and the signal-to-noise (SN) ratio is high and detection is possible. ing. Therefore, the microphone 103 and the transmitting coil 101 or the receiving coil 102 can be arranged at positions substantially orthogonal to each other, and magnetic field noise generated from the microphone 103 is reduced from being mixed into the transmitting and/or receiving coil. be able to.
  • the corresponding positions of the transmitting coil and the receiving coil and the positions orthogonal to the microphones are not limited to the positions described, and may be positions where the SN ratio is sufficiently well detected.
  • neck pressing portions 10a and 10b are formed in a cylindrical or spherical shape.
  • the two holding portions and the two sensor portions provided at one end of the sensor holding member hold a total of four places to facilitate mounting regardless of the size of the neck.
  • the sensors incorporated in the sensor units 4a and 4b are connected to the inter-coil voltage detection unit 104 and the swallowing sound detection unit 105 shown in FIG. 1 of the measurement unit control unit (not shown) by wires 301a and 301b, respectively.
  • the measuring unit 1 repeatedly acquires and transfers the inter-coil voltage value and the swallowing sound voltage value at a predetermined sampling rate sufficient for detecting the swallowing operation from the start to the end of the measurement. For example, when the distance information is acquired at 100 Hz and the sound information is acquired at 4000 Hz, the measurement control unit 107 does not have one measurement result of the distance information and one measurement result of the sound information, for example, once every 1/100 second. Then, the packet data is aggregated and transmitted.
  • the biometric information analysis device 2 may be an electronic device including an arithmetic processing unit and a memory, such as a general personal computer, a tablet, or a smartphone, and FIG. 3 illustrates functional blocks necessary for detecting the swallowing motion of the biometric information analysis device 2. An example is shown. Each functional block repeatedly executes the following processing during measurement execution.
  • the transmission/reception unit 201 transmits/receives information (measurement data reception, control command transmission) to/from the measurement unit 1 in a data communication method/data format defined in advance.
  • the received measurement data is sent to the data separation unit 202.
  • the data separating unit 202 separates the inter-coil voltage information and the sound voltage information from the received data, converts the inter-coil voltage information into distance data, and sends the sound voltage information to the swallowing motion extracting unit 203 and the sound voltage information to the swallowing sound extracting unit 204. Send. Further, the separated distance data and sound voltage information are output to the data output unit 205.
  • the conversion from the voltage information between the coils to the distance data may be obtained from, for example, a general relational expression between the magnetic force and the distance in which the magnetic amount of the coil used is applied. The value and the voltage value at a predetermined distance may be recorded and corrected, which has the effect of enabling accurate distance data calculation.
  • the data transmission format from the measurement unit 1 to the biometric information analysis device 2 may be, for example, the inter-coil voltage information and the sound voltage information transmitted separately. If it is information, it is converted to distance information and output to the swallowing motion extraction unit 203. If the received data is sound voltage information, it is output to the swallowing sound extraction unit 204 as it is, and any data is output to the data output unit 205. It becomes processing to do.
  • the swallowing motion extracting unit 203 and the swallowing sound extracting unit 204 are swallowing motion estimating units that analyze the distance information and the sound information to estimate the user's motion. Hereinafter, each will be described in detail.
  • the swallowing motion extraction unit 203 performs estimation processing of whether or not to perform swallowing motion from the distance data illustrated in FIG. 4 during measurement, and outputs swallowing motion information to the swallowing motion analysis unit 206 when the swallowing motion position is detected. ..
  • the swallowing motion estimation process will be described with reference to FIGS. 4 and 5.
  • FIG. 5 shows an example of changes in the distance information during the swallowing operation.
  • the distance during swallowing movements shows movements according to the three phases of oral, pharyngeal, and esophageal movements, and the distance from the fixed position decreases, increases and decreases, and increases to return to the fixed position. , Behavior occurs. Therefore, it is necessary to detect the "W" shape from the obtained distance data.
  • step (hereinafter abbreviated as S) 401 the swallowing motion extracting unit 203 saves the input distance data in a temporary memory (not shown in the figure) and transitions to S402.
  • step (hereinafter abbreviated as S) 401 the swallowing motion extracting unit 203 saves the input distance data in a temporary memory (not shown in the figure) and transitions to S402.
  • the swallowing motion extracting unit 203 The partial data recorded in the memory in S401 is acquired, the smoothing process (noise removal) is performed, the result is recorded in the memory again, and the process proceeds to S403.
  • an average value of the latest measurement data for a predetermined number of times such as five times is calculated.
  • the swallowing motion extraction unit 203 investigates whether the smoothed data calculated in S402 has a maximum point or a minimum point, and transitions to S404. For example, when the latest 5 smoothed data are read and arranged in order from the most recent value, D[i]( 1 ⁇ i ⁇ 5) is expressed, D[3] is the maximum value and D[1 ] ⁇ D[2] ⁇ D[3] and D[3] ⁇ D[4]>D[5], D[3] is set as a maximum point and D[3] Is a minimum value, and if D[1]>D[2] ⁇ D[3] and D[3] ⁇ D[4] ⁇ D[5], then D[3] is regarded as a minimum point. To do.
  • the time and distance are recorded in the memory. Further, since the inflection point can be acquired from the increase/decrease of the first-order differential and second-order differential values of the smoothed data, the time and distance may be recorded in the memory.
  • the swallowing motion extraction unit 203 determines the swallowing motion based on the information on the maximum point, the minimum point, the inflection point, and the distance information at the start of measurement, which are obtained in S403, and transitions to S405. As illustrated in FIG.
  • the local maximum point and the minimum point existing within the above-mentioned defined range are characterized by the swallowing movement. You may choose as a point.
  • the swallowing motion extraction unit 203 records the feature amount of the swallowing motion in the memory when it is determined in S404 that the swallowing motion is present, and ends the process.
  • the feature amount is, for example, information on the time difference between the points, the time difference between T 1 and T 3 , the distance difference, and the like.
  • the time information of the swallowing motion the starting point and the ending point of the operation ((T 0 , D 0 ), (T 4 , D 4 ) in FIG. 5), and the time difference (difference between T 0 and T 1 in FIG. 5)
  • the difference between T 3 and T 4 ) and the distance difference may be included in the feature amount.
  • the minimum points are discriminated as (T 1 , D 1 ), (T 3 , D 3 ), but the former is a decreasing tendency or an inflection point that changes from horizontal to rising, and the latter is a decreasing tendency to increasing.
  • processing may be performed by detecting an inflection point that horizontally shifts.
  • the judgment value of the time difference or the distance difference described above may be recorded in advance in the memory by an individual.
  • a typical swallowing waveform (reference waveform) of an individual is recorded in advance, and the similarity with the reference waveform with respect to subsequent measurement results is evaluated by, for example, the similarity of general time series data such as a cross-correlation function.
  • a method of estimating the swallowing position by examining the detection algorithm may be used.
  • the swallowing sound extraction unit 204 performs the process illustrated in FIG. 6 on the input swallowing sound data, estimates whether or not the swallowing operation is performed, and outputs swallowing sound information when the swallowing operation is detected. (Record to memory) An example of the estimation process will be described below based on the sequence diagram shown in FIG.
  • the swallowing sound extraction unit 204 saves the input sound data in a temporary memory (not shown in the figure) and transitions to S602.
  • the swallowing sound extraction unit 204 acquires the data recorded in S601, performs the rectification process, saves the processing result in the memory, and transitions to S603.
  • the rectification process converts a negative value into a positive value.
  • the swallowing sound extraction unit 204 acquires the partial data recorded in the memory in S602, performs the smoothing process, records the processing result in the memory, and transitions to S604.
  • the smoothing process of the sound data the average value of the latest measurement data for a predetermined number of times such as 10 times is calculated. Increasing the amount of data to be smoothed has the effect of reducing the effect of minute noise, but at the same time it may reduce significant acoustic characteristics, so set an appropriate value according to the characteristics of the recording device. Just select it.
  • the swallowing sound extraction unit 204 acquires the partial data recorded in S601, performs a Fourier transform process, and saves the processing result in the memory. Further, the frequency value indicating the highest peak excluding the orthogonal component from the Fourier transform result is recorded in the memory and the process proceeds to S605.
  • the Fourier transform process may be performed on a predetermined latest recording data by a general method such as DFT (Discrete Fourier Transform) or FFT (Fast Fourier Transform).
  • the amount of data to be processed can be short and long, such as 100 milliseconds (100 samples when recording at 1000 Hz) and 500 milliseconds (500 samples when recording at 1000 Hz). By performing both, it is possible to obtain parameters with different characteristics.
  • the swallowing sound extraction unit 204 calculates autocorrelation information for the Fourier transform processing result recorded in S604, records the processing result in the memory, and transitions to S606.
  • the autocorrelation is a method generally used in data analysis of a time domain signal or the like in signal processing, but in this method, it is used for a Fourier transform processing result (discrete signal Xn).
  • the autocorrelation information includes, for example, lag values that take all the maximum points of the calculated autocorrelation value.
  • the swallowing sound extraction unit 204 performs 1/n octave analysis on the Fourier transform result obtained in S604, records the result in the memory, and transitions to S607.
  • the 1/n octave analysis is a general analysis method for acoustic data, and the data is divided into n frequency bands at a fixed ratio with 1 kHz as a reference, and the total value of the components included in each band is obtained.
  • n is increased, a narrower feature amount for each bandwidth can be obtained.
  • the sound data input to the swallowing sound extraction unit 204 has a sampling rate of 1000 Hz
  • the swallowing sound extraction unit 204 calculates the swallowing sound information, determines the operation from the feature amount included in the swallowing sound information, records the result in the memory, and transitions to S608.
  • FIG. 7 shows the result of Fourier transform of the sound information at the swallowing motion, the utterance motion, and the cough motion acquired at the sampling rate of 1000 Hz according to the time axis (horizontal axis) for each frequency band (vertical axis ) Shows a spectrumgram in which the intensities of) are continuously displayed. The intensity is highest in white, followed by black and gray. In each case, the part surrounded by a square frame is the time zone in which each operation is performed.
  • the swallowing movement tends to have a relatively high intensity in the low frequency region, and the speech movement tends to show periodical strength and weakness in the frequency direction, and the coughing movement is strong in a wide band from a low frequency to a high frequency in a short time. Shows a tendency for peaks to occur.
  • FIG. 8 shows a spectrumgram of sound information at the time of swallowing action, speech action, and coughing action acquired at a sampling rate of 4000 Hz, and a frame of implementation time zone of each action.
  • the higher the sampling rate the easier the swallowing action can be separated into the oral phase, the pharyngeal phase, and the esophageal phase (corresponding to the early, intermediate, and late stages in the frame). That is, as shown in FIG. 8, in the swallowing motion, the intensity of the low frequency region is high in the intermediate period corresponding to the pharyngeal period, and the relative proportion of high frequency components (for example, 1 kHz to 2 kHz) is the oral period and the esophageal period.
  • the coughing motion has a strong peak in a wide band up to about 500 Hz.
  • FIG. 9 shows an example of changes in sound pressure during swallowing.
  • the result of performing the rectification process on the input sound data is shown, in which the horizontal axis represents time and the vertical axis represents sound pressure.
  • the sound pressure during the swallowing motion is separated into three sound sections that apply to the three phases of the swallowing motion, the oral phase, the pharyngeal phase, and the esophageal phase.
  • the time zones Sw 1 , Sw 2 , and Sw 3 surrounded by the dotted lines in FIG. 9 respectively correspond to them, and there is a very short silent section between them. Therefore, when viewed as a time series, it is determined that the voiced sections sandwiching a short silent section are sounds generated from a series of operations. However, it is not always divided into three sections due to, for example, the influence of noise noise and the variety of swallowing motions. An example of a method of discriminating an operation based on these characteristics is shown below.
  • the smoothed sound pressure value obtained in S603 of FIG. 6 is smaller than a predetermined value, it is determined that no operation has been performed in this section.
  • the sound pressure value is larger than the predetermined value, it is considered that some operation is in progress, and the operation is discriminated using the feature amount obtained by the series of processes from S602 to S606.
  • the autocorrelation information includes lag information in a predetermined frequency range (for example, 80 to 200 Hz), and a certain lag value and another lag value have a nearly double relationship, the utterance operation is performed. Determine.
  • the autocorrelation information does not have such a relationship
  • the sound pressure value is larger than a predetermined value
  • the ratio of the data amount in the specific frequency region to the total data amount is higher than the predetermined value. If it is high, it is determined to be swallowing motion.
  • the total value of the calculation results in the low frequency region for example, 11 to 22 Hz, 22 to 44 Hz, 44 to 88 Hz
  • the determination may be made based on the ratio of the amount of data in the specific frequency band of the octave analysis result, and the method may be determined according to the sampling rate of the sound data to be recorded and the amount of data used for Fourier transform.
  • the series of operations is determined. Since the time-series data of the motion discrimination result is obtained by the above-described processing, for example, the motion having the largest number of discrimination times is set as the estimation result of the series of motions.
  • the estimation result may be the swallowing motion when the number of times that the swallowing motion is discriminated in the sequence of the motion discrimination results is included in a certain ratio or more and the data ratio in the high frequency region has a V-shaped tendency.
  • a short silent section considered in the swallowing operation as a series, and when the short silent section occurs three or more times, the time May be regarded as a series of operation completion.
  • the swallowing sound information includes, for example, the start time (T 0 in FIG. 9), the end time (T 4 in FIG. 9), the time at which the maximum peak occurs (T 2 in FIG. 9) and the peak value thereof (see FIG. 9). 9 P 2) or, (time and peak value of Sw 1) and the third section (Sw 3) ((T 1 in FIG. 9, P 1) a first section, (T 3, P 3) ) , etc. including. Further, a time difference (difference between T 0 and T 1 in FIG. 9, difference between T 1 and T 2 , difference between T 2 and T 3 , difference between T 3 and T 4 ) may be included in the feature amount. ..
  • the data output unit 205 plots both the distance data and the sound data in the form of a waveform on a display as a waveform and visually presents the measured data value during the measurement, or controls an audio output device such as a speaker to output the sound data. Is output without processing and is presented aurally. As a result, it is possible to obtain the effect of allowing the user wearing the device and a person (for example, a medical worker or a caregiver) near the user to grasp the progress of the measurement.
  • FIG. 10 shows an example of a screen display during the swallowing operation measurement by the data output unit 205.
  • this display example both the distance data and the sound data are displayed on one screen. By displaying in this way, it is possible to intuitively confirm the simultaneity of the distance and the sound.
  • the distance data is used as a reference scale (for example, “do”) for the distance value at the start of measurement
  • sounds of different scales when movement occurs For example, if the distance is reduced, the scale is lowered, and if the distance is extended, the scale is raised. According to this, it is possible to obtain the effect that the user or a person in the vicinity can detect the possibility that there is an abnormality due to the fact that the user has swallowed and hears a tone color different from usual, by relying only on auditory information. ..
  • the swallowing motion analysis unit 206 estimates the position of the swallowing motion from the swallowing motion information obtained from the swallowing motion extracting unit 203 and the swallowing sound information obtained from the swallowing sound extracting unit 204.
  • an estimation method for example, the case where the start/end time of the swallowing motion information and the start/end time of the swallowing sound information overlap each other is estimated as the swallowing position. If there is no swallowing motion information at a time when swallowing sound information is present, it may be estimated as a swallowing position even if it cannot be determined as a reliable swallowing position. On the contrary, when there is no swallowing sound information at the time when the swallowing motion information is present, it is not necessary to determine the swallowing position. This estimation method may be determined according to the accuracy of each determination of motion information and sound information.
  • the analysis result output unit 207 is instructed to output the result.
  • the analysis result output unit 207 displays the analysis result on a display unit which is a display device such as a display or a display screen of a tablet.
  • a display method for example, the estimation result of the swallowing motion position is displayed on the waveform information as shown in FIG. 11A, B, and C are diagrams showing an example of the swallowing motion position estimation result display screen in the present embodiment.
  • FIG. 11A is a display example in which a rectangle is superimposed on the distance waveform according to the start time/end time of the swallowing motion information, and a rectangle is superimposed on the voice waveform according to the start time/end time of the swallowing sound information. is there.
  • FIG. 11A is a display example in which a rectangle is superimposed on the distance waveform according to the start time/end time of the swallowing motion information, and a rectangle is superimposed on the voice waveform according to the start time/end time of the swallowing sound information. is there.
  • FIG. 11A is a display example in which a rectangle is superimposed on the
  • FIG. 11B is a display example in which rectangles spanning the distance waveform and the voice waveform are superimposed according to the start time and end time of the swallowing sound information.
  • FIG. 11C shows that the start time of the swallowing motion information and the start time of the swallowing sound information are earlier (the start time of the swallowing motion information in this example), the end time of the swallowing motion information and the end time of the swallowing sound information are later ( In the case of this example, it is a display example in which a rectangle extending over the distance waveform and the voice waveform is superimposed in accordance with the ending time of the swallowing sound information. In any of the display examples, there is an effect that it is possible to intuitively grasp the place of interest. In the case of FIG. 11A, the abnormality can be intuitively recognized from the degree of positional deviation between the rectangular position on the distance waveform and the rectangular position on the voice waveform.
  • the result display as shown in FIG. 12 is displayed.
  • the operation determination result is displayed together with the waveform information.
  • the solid line frame corresponds to the position corresponding to the swallowing motion and the swallowing sound
  • the broken line frame corresponds to the position corresponding to the utterance sound
  • the dotted line frame corresponds to the position corresponding to the cough sound.
  • the characteristic amount of the swallowing motion obtained by the processing shown in FIGS. 4 and 6 is displayed as a numerical value.
  • information on the start point M1, the first minimum point M2, the maximum point M3, the second minimum point M4, and the end point M5 of the swallowing motion (from (T 0 , D 0 in FIG. 5) to (T 4 , D 4 ) and the information of the first peak Ss, the second peak Sm, and the third peak Se of the swallowing sound information next to the voice waveform ((T 1 in FIG. 9, Information on distance and time corresponding to (T 3 , P 3 ) from P 1 ) is displayed.
  • each feature amount of the swallowing motion detected first is displayed when the result screen is displayed.
  • a different swallowing action position on the screen for example, clicking action with a mouse on a PC or tapping action on a tablet terminal
  • it can be displayed by switching to each feature amount of the corresponding swallowing action.
  • the user can check the characteristic quantities of all swallowing movements as necessary.
  • the average value of the characteristic quantities of the swallowing motions of a plurality of times may be displayed, which has an effect of representing the overall swallowing result of the user.
  • the time M3 (T 2 in FIG. 5) of the maximum value of the distance waveform of the swallowing motion information and the second peak Sm of the sound waveform are displayed.
  • Value (M3-Sm) with respect to the time (T 2 in FIG. 9) the time from the start to the end of the swallowing movement (M5-M1) (difference between T 4 and T 0 in FIG. 5), the first minimum The time (M4 ⁇ M2) from the value to the second minimum value (difference between T 3 and T 1 in FIG. 5) is also displayed.
  • the calculated values deviate from the previously stored healthy values by a predetermined value or more, the calculated values may be colored and displayed (for example, a red character string). This has the effect of making it possible to intuitively grasp the data to be noted.
  • the present embodiment it is possible to accurately detect the swallowing motion and perform a real-time quantitative evaluation by the user of this device or a person in the vicinity (for example, a medical staff or a caregiver). The effect is obtained.
  • the discrimination process of the swallowing action in the swallowing sound extraction unit 204 may be a method of extracting the parameters of the voice feature amount and then discriminating and analyzing the actions such as coughing, swallowing, utterance, and chewing.
  • each operation such as coughing and swallowing using learning data and each parameter (smoothed sound pressure value, peak frequency of Fourier transform processing data, data amount of each band of octave analysis result, 1/n octave)
  • the correlation coefficient with the ratio of the amount of data in each frequency region after analysis) is calculated in advance, and the probability (probability) of each operation is calculated from the calculation result of each parameter by periodic processing during measurement, and the This is a method of estimating that a highly probable operation should have been performed.
  • the analysis of the swallowing sound shown in FIG. 6 does not necessarily have to be performed in this order.
  • frequency analysis Frier transform, autocorrelation calculation, 1/n octave analysis
  • sound pressure analysis rectification and smoothing
  • the sound pressure analysis may be performed after the frequency analysis is performed first.
  • the processing may be terminated without performing the frequency analysis, which has the effect of reducing the calculation time and the amount of calculation. ..
  • swallowing motion determination can be performed more accurately.
  • the swallowing operation analysis unit 206 may calculate information for assisting the determination of the presence/absence of the swallowing disorder and output the result to the analysis result output unit 207.
  • FIG. 13 shows an example of a guideline that serves as a criterion for discriminating the degree of dysphagia. It is classified into 4 stages, including the normal state, and 10 stages in detail. Although such a degree judgment is performed by the doctor, it is possible to assist the judgment based on the quantitative data with the characteristic amounts of the swallowing motion information and the swallowing sound information calculated according to this embodiment and the calculation results using them. For example, the difference value between the maximum peak time (T 3 in FIG. 5) of the swallowing motion information, which is the detection result of the same swallowing motion, and the second peak time (T 3 in FIG.
  • the swallowing sound information is a predetermined healthy judgment value.
  • the possibility that the swallowing function is normal if it is smaller than a predetermined healthy judgment value, mild if it is smaller than a mild judgment value, and moderate if it is a mild judgment value or more is also shown on the screen.
  • the judgment may be made based on the number of values exceeding the normal judgment value among a plurality of calculation results. For example, the difference value between the maximum peak times and the time from the start to the end of the swallowing movement (of T 4 and T 0 in FIG. 5). Difference), and a time from the first minimum value to the second minimum value (difference between T 3 and T 1 in FIG. 5), it is determined whether or not each of the three values falls within a predetermined healthy judgment value.
  • a control signal is output from the analysis result output unit 207 to the measurement unit 1 via the transmission/reception unit 201.
  • the measurement state may be indicated. For example, it emits blue light during measurement, and when it detects a swallowing movement, depending on the result of the determination of the degree of abnormality in the swallowing movement (green for normal, yellow for mild, orange for moderate, orange for severe) (Red) emit light.
  • the degree of abnormality in the swallowing movement green for normal, yellow for mild, orange for moderate, orange for severe
  • the biological information analyzer 2 may have a recording function, for example,
  • the data received by the transmission/reception unit 201 is recorded in the recording medium in association with the information of the user and the information of the date and time when the measurement is performed.
  • the recording medium may be a non-volatile medium such as HDD (Hard Disc Drive) or SSD (Solid State Drive).
  • the biological information detecting device and the biological information detecting method described in the present embodiment are used for screening of a swallowing function
  • how many times the swallowing operation can be performed within a predetermined measurement time for example, 30 seconds.
  • a predetermined measurement time for example, 30 seconds.
  • the position estimation result of the swallowing motion and the evaluation result of the number of swallowing motions and normal/abnormal swallowing function may be displayed.
  • Whether or not the swallowing function is normal may be determined based on whether the swallowing operation has been performed a predetermined number of times (for example, 3 times) or more.
  • an average value of all swallowing motion times may be displayed, or any of the parameters included in the swallowing motion information and the swallowing sound information may be calculated and displayed as an average value or a variance value.
  • the dysphagia can be easily detected and the result can be displayed.
  • the present invention is not limited to the above-described embodiments, but includes various modifications.
  • the above-described embodiments have been described in detail in order to explain the present invention in an easy-to-understand manner, and are not necessarily limited to those having all the described configurations.
  • each of the above-mentioned configurations, functions, processing units, processing means, etc. may be realized in hardware by designing a part or all of them with, for example, an integrated circuit. It can also be realized by software that realizes those functions.
  • the program code is stored in a storage means such as a hard disk or a memory of a computer or a storage medium such as a CD-RW or a CD-R.
  • a processor included in the computer may read and execute the program code stored in the storage unit or the storage medium.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Physiology (AREA)
  • Endocrinology (AREA)
  • Gastroenterology & Hepatology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

嚥下動作判定をより正確に行うことが可能な生体情報分析装置、生体情報分析方法、及び、生体情報分析システムを得ることを目的とする。 そのために、生体情報分析装置であって、咽頭部の動きと音を計測した距離情報と音情報を分析してユーザの動作を推定する嚥下動作推定部と、表示部を有し、嚥下動作推定部は、距離情報を分析して推定した第1の嚥下動作位置と、音情報を分析して推定した第2の嚥下動作位置とを出力し、表示部は、距離情報と、音情報と、嚥下動作推定部の出力する第1の嚥下動作位置と第2の嚥下動作位置を表示するように構成する。

Description

生体情報分析装置、生体情報分析方法、及び、生体情報分析システム
 本発明は、生体情報分析装置、生体情報分析方法、及び、生体情報分析システムに関するものである。
 飲み込み対象である食塊を口腔から胃に送り込む機能である嚥下機能の障害は、高齢化や脳疾患などによる運動機能の低下などによって引き起こされる。嚥下障害が生じると、気管支や肺などへ食塊が混入し、肺炎などが引き起こされ高熱を発症することもあり、体力の弱っている高齢者においては生命の危険にさらされるケースが多く認められる。
 嚥下障害を正確に評価および把握できる方法としては、嚥下造影(Video fluoroscopic Examination of Swallowing: VF)が最も一般的に使用されている。しかし、VFは誤嚥や窒息などの可能性を有する検査であり、注意が必要である。また、大型装置であるX線透視装置が必要なために、被爆の問題、時間的制約の問題、費用の問題などが発生する。
 また、他の方法として、ファイバースコープを用いた内視鏡による嚥下内視鏡検査(Video endoscopic Examination of Swallowing: VE)がある。VEはVFに比べると手軽ではあるが、鼻腔からファイバーを挿入するなどの違和感が被検者にあり、また、ファイバースコープの装置が必要なため手軽に測定できるものではなく、十分に普及するには至っていない。さらに、食塊が咽頭に入り嚥下の最高潮に達した時には咽頭壁が閉鎖し咽頭中の空間がつぶれ、内視鏡の視界が不明瞭になり嚥下器官が短時間に最も移動する時間帯は観察できないという問題もある。
 上記のVFやVEの問題点を解決する手法として、簡便で患者に負担をかけることなく、かつ、的確に嚥下障害を検知する方法が提案されてきている。
 例えば特許文献1には、嚥下障害を簡便に検査してその結果を表示する生体検査装置を提供することを目的とし、生体検査装置は、被検者の喉頭部における横方向の2箇所の変位を検出する喉頭部変位検出手段と、被検者が嚥下するときの嚥下音を検出する嚥下音検出手段と、表示手段と、喉頭部変位検出手段から得た情報に基づき生成した喉頭部の2箇所の変位に関する波形、および、嚥下音検出手段から得た情報に基づき生成した嚥下音に関する波形の表示を行うように表示手段に指示する処理手段とを備え、生体検査装置の可撓性保持具は、センサ固定部と首装着部とで独立の構成とし、これら両者を一端部で結合し、他端部をそれぞれ開放する構造とする、点が開示されている。
特開2009-213592号公報
 特許文献1では距離情報と音情報を組み合わせて嚥下動作が正常か異常かの嚥下障害の有無を評価しているが、実際の計測現場においては嚥下動作以外の類似の動作が含まれる。そのため、類似の動作から嚥下動作そのものを抽出する点について考慮されていなかった。
 本発明は、その一例を挙げるならば、生体情報分析装置であって、咽頭部の動きと音を計測した距離情報と音情報を分析してユーザの動作を推定する嚥下動作推定部と、表示部を有し、嚥下動作推定部は、距離情報を分析して推定した第1の嚥下動作位置と、音情報を分析して推定した第2の嚥下動作位置とを出力し、表示部は、距離情報と、音情報と、嚥下動作推定部の出力する第1の嚥下動作位置と第2の嚥下動作位置を表示するように構成する。
 本発明によれば、嚥下動作判定をより正確に行うことが出来る。
実施例における生体情報分析システムの機能ブロック図である。 実施例における可撓性保持具の外観図である。 図2Aの斜視図である。 実施例における生体情報分析装置の機能ブロック図である。 実施例における嚥下運動抽出部の処理フローチャートである。 実施例における嚥下動作時の距離情報の変化の一例を示す図である。 実施例における嚥下音抽出部の処理フローチャートである。 実施例におけるサンプリングレート1000Hzで取得した嚥下動作、発話動作、咳動作時の音情報のスペクトルグラムである。 実施例におけるサンプリングレート4000Hzで取得した嚥下動作、発話動作、咳動作時の音情報のスペクトルグラムである。 実施例における嚥下動作時の音圧の変化の一例を示す図である。 実施例におけるデータ出力部による嚥下動作計測中の画面表示の一例である。 実施例における嚥下動作位置推定結果表示画面の一例を示す図である。 実施例における嚥下動作位置推定結果表示画面の一例を示す図である。 実施例における嚥下動作位置推定結果表示画面の一例を示す図である。 実施例における嚥下動作位置推定結果表示画面の一例であり、波形情報と合わせて動作判別結果を表示している図である。 実施例における嚥下機能弁別手法を説明する嚥下機能分類表である。 実施例における嚥下回数推定結果表示画面の一例を示す図である。
 以下、本発明の実施例について図面を用いて説明する。なお、全図を通じて同一の構成に対しては同一の符号を付して重複する説明を省略する。
 図1は本実施例における生体情報分析システムの機能ブロック図である。図1に示すように、本実施例における生体情報分析システムは、計測部1と生体情報分析装置2とから構成される。
 計測部1は、ユーザが計測に際して装着する可撓性保持具に、発信用コイル(喉頭部変位検出手段)101、受信用コイル(喉頭部変位検出手段)102およびマイクロフォン103が具備され、発信用コイル101と受信用コイル102は一対で嚥下に伴う喉頭部の動きである喉頭部変位の距離情報を計測する距離情報取得部として機能する。発信用コイル101と受信用コイル102はコイル間電圧検出部104に接続され、コイル間電圧検出部104の出力電圧は計測制御部107に入力される。マイクロフォン103(嚥下音検出手段)は、嚥下に伴う喉頭部変位の音情報を取得する音情報取得部として機能し、例えばピエゾ素子(圧電素子)を用いたマイクロフォンであれば嚥下以外の周囲の音を拾いにくくて好ましいが、コンデンサー型マイクロフォンであってもよい。マイクロフォン103は嚥下音検出部105に接続され、電源供給などを受けてマイクロフォンとして動作する。嚥下音検出部105からは嚥下音が電圧として出力され、出力電圧は計測制御部107に入力される。
 メモリ106は、例えば計測処理プログラムや計測部1内で使用されるハードウェアに固有な特性値といった、計測制御部107で必要とする情報を記録・保持する不揮発性メモリである。例えば計測部1の電源が入れられた際に、計測制御部107へメモリ106より計測処理プログラムをロードするなどで用いられ、計測処理プログラムを書き換えれば、計測部1に機能の改変や追加が可能である。
 計測制御部107は、例えばCPU(Central Processing Unit)のような演算処理デバイスや揮発性メモリを含み、操作部109からの信号ないし生体情報分析装置2からの制御信号を受けて計測の開始・終了を制御したり、コイル間電圧検出部104から入力される電圧値、および嚥下音検出部105から入力される電圧値をデジタルデータへ変換し、それぞれ一度メモリに記録し、所定の周期で読み出し、通信データ形式に整形して入出力部108へ出力する。なお通信データ形式は例えば独自のパケット形式などで良い。
 入出力部108は、生体情報分析装置2とのデータ送受信を行う通信インタフェースである。通信方法は汎用の通信方式に基づけばよく、例えばUSB(Universal Serial Bus)ケーブルを用いたり、ネットワークケーブルを用いたTCP(Transmission Control Protocol)/IP(Internet Protocol)通信形式、Bluetooth(登録商標)を用いた無線通信方式等を用いてよい。
 操作部109は計測部1の本体に具備される使用者の操作インタフェースであり、電源のOn/Offや計測開始・終了といった簡便な操作に適したボタンが適宜配置される。
 なお、コイル間電圧検出部104、嚥下音検出部105、メモリ106、計測制御部107、入出力部108、操作部109は、可撓性保持具とは別体の計測部制御ユニットに備えられる。
 図2A、2Bは本実施例における可撓性保持具の詳細を示す外観図である。ただし図2Aは正面図、図2Bは斜視図である。図2A、2Bにおいて、可撓性保持具は、一対のセンサ保持部材3a、3bと首装着部材5とで独立の構造体とし、首装着部材5が一対のセンサ保持部材3a、3bの他端をそれぞれ保持するように一体結合され該他端間が開放されて被検者の喉頭部に装着保持される構造とする。
 一対のセンサ保持部材3a、3bの一端にはセンサ部4a、4bが配置されており、このセンサ部4a、4b内部には喉頭部変位検出手段(例えば、発信用コイル101または受信用コイル102)と嚥下音検出手段(例えば、マイクロフォン103)とが固定されており、センサ保持部材3a、3bの他端部が首装着部材5の両端部と一体となって甲状軟骨などの動きに追従して動く開放の構成とする。また首装着部材5の内側に前記一対のセンサ保持部材3a、3bは配置され、首装着部材の両端とセンサ保持部材の他端とが一体結合されている。センサ保持部材3a,3bは首に接触せずに装着でき、首装着部材5とは独立に嚥下の動きに追随できる構成とする。さらに一対のセンサ保持部材3a,3bの一端には、発信用コイル101又は受信用コイル102とマイクロフォン103とが配置してある。
 本実施例では、発信用コイル101で生じた磁場を受信用コイル102で検出して電磁誘導の法則により距離に応じた電流を計測するため、発信用コイル101と受信用コイル102は2つのコイルが対向しやすい(首表面の鉛直方向に近い)向きに配置されるように一対のセンサ保持部材3a,3bの一端に装着してあり、信号対ノイズ(SN)比が高く検出が可能となっている。そのため、マイクロフォン103と発信用コイル101又は受信用コイル102とはほぼ直交する位置に配置することができ、マイクロフォン103から発生する磁場ノイズが発信用及び/又は受信用コイルへ混入するのを低減することができる。ただし、これらの発信用コイルと受信用コイルの対応の位置やマイクとの直交の位置については記載の配置に限定されるものではなく、SN比が十分よく検出される位置であればよい。
 さらに前記首装着部材5の両端部である2箇所の末端部(首の裏側の位置になる部位)には、首への押さえ部10a、10bが円筒・球状などの形状で形成されている。この2箇所の押さえ部と前記センサ保持部材の一端に設けられた2箇所のセンサ部との合計4箇所の押さえによって首の大きさに関係なく装着が容易となっている。
 また、センサ部4a、4bに内蔵されたセンサは配線301aと301bによって、図示しない計測部制御ユニットの、図1に示すコイル間電圧検出部104と嚥下音検出部105にそれぞれ接続されている。
 この構成により、計測部1は計測開始から終了まで、嚥下動作の検出に十分な所定のサンプリングレートでコイル間電圧値と嚥下音電圧値を取得、転送を繰り返す。例えば、距離情報を100Hz、音情報を4000Hzで取得する場合、計測制御部107は100分の1秒に1回、距離情報の計測結果1サンプルと音情報の計測結果40サンプルを、例えば1つないし複数のパケットデータに集約して送信する。
 生体情報分析装置2は、一般的なパソコンやタブレット、スマートフォンなど、演算処理ユニットやメモリを含む電子機器であってよく、図3に生体情報分析装置2の嚥下動作の検出に必要な機能ブロックの一例を示す。各機能ブロックは計測実行中に繰り返し以下に示す処理を実行する。
 図3において、送受信部201は、計測部1と予め規定されたデータ通信方式・データフォーマットで情報の送受信(計測データの受信、制御コマンドの送信)を行う。受信した計測データはデータ分離部202へ送付する。
 データ分離部202は、受信データからコイル間電圧情報と音電圧情報を分離し、コイル間電圧情報を距離データへと変換して嚥下運動抽出部203へ、音電圧情報を嚥下音抽出部204へ送信する。また、分離した距離データおよび音電圧情報をデータ出力部205に出力する。なお、コイル間電圧情報から距離データへの変換は、例えば使用するコイルの磁気量を当てはめた一般的な磁気力と距離の関係式から求めて良いが、予めコイル間距離が0の時の電圧値と所定の距離の時の電圧値を記録しておき、補正するなどしても良く、補正により正確な距離データの算出を可能にする効果がある。
 なお、計測部1から生体情報分析装置2へのデータ送信時のフォーマットは例えばコイル間電圧情報と音電圧情報とを別送するのでも良く、その場合、データ分離部202では受信データがコイル間電圧情報であれば、距離情報へ変換して嚥下運動抽出部203へ出力し、受信データが音電圧情報であれば、そのまま嚥下音抽出部204へ出力し、いずれのデータもデータ出力部205へ出力する処理となる。
 嚥下運動抽出部203及び嚥下音抽出部204は、距離情報及び音情報を分析してユーザの動作を推定する嚥下動作推定部である。以下、それぞれについて、詳細説明する。
 嚥下運動抽出部203は、計測中に図4に例示する距離データから嚥下動作の実施有無の推定処理を行い、嚥下動作位置を検出した場合には嚥下運動情報を嚥下動作分析部206に出力する。以下、図4および図5に基づいて嚥下運動の推定処理について説明する。なお図5は嚥下動作時の距離情報の変化の一例を示している。典型的には嚥下動作時の距離が嚥下動作の口腔期、咽頭期、食道期の3相に応じた動きが現れ、定位置からの距離の減少、増加と減少、定位置に戻るように増加、という挙動が生じる。従って、この“W”字型を得られた距離データの中から検出する処理が必要となる。
 図4において、ステップ(以降Sと略記)401では嚥下運動抽出部203は入力された距離データを一時メモリ(図には未記載)に保存しS402に遷移する、S402では嚥下運動抽出部203はS401でメモリに記録した一部データを取得して平滑化処理(ノイズ除去)を行い、その結果を再度メモリに記録してS403に遷移する。平滑化処理は例えば5回分といった所定の回数分の最新の計測データの平均値を算出する。
 S403では嚥下運動抽出部203はS402で算出した平滑化データが極大点もしくは極小点が存在するかを調査してS404へ遷移する。例えば最新5回分の平滑化データを読み出し、これを最近の値から順に並べたものをD[i]( 1≦i≦5)と表現したときに、D[3]が最大値、D[1]<D[2]≦D[3]、かつ、D[3]≧D[4]>D[5]の関係が成立する場合、D[3]を極大点とし、また、D[3]が最小値、D[1]>D[2]≧D[3]、かつ、D[3]≦D[4]<D[5]の関係が成立する場合にD[3]を極小点とする。極大点もしくは極小点が得られたら、その時刻と距離をメモリに記録する。また平滑化データの1階微分、2階微分した値の増減から変曲点が取得できるので、その時刻と距離をメモリに記録しても良い。
 S404では嚥下運動抽出部203はS403で得られる極大点、極小点、および変曲点の情報と計測開始時の距離情報とから嚥下動作の判定を行いS405へ遷移する。図5に例示するように距離波形から極大/極小点情報(時間、距離)=(T、D)、(T、D)、(T、D)が得られ、例えば各点の時間差分(TとTの差、TとTの差)が予め定められた範囲内で、かつ距離差分(DとDの差、DとDの差)が予め定められた所定の値よりも大きい場合にこの時間帯の動作が嚥下運動であると判断する。また、変曲点情報も参照して図5に示す嚥下動作の開始点(T0、D0)、終了点(T、D)を求める。なおW字型の動きの探索方法として嚥下運動の距離最大点から直近の小規模な極小点、極大点を無視し、前記定められた範囲内に存在する極大点、極小点を嚥下運動の特徴点として選択するようにして良い。
 S405では嚥下運動抽出部203はS404で嚥下動作があると判断された場合に嚥下運動の特徴量をメモリに記録して処理を終了する。特徴量は例えば上記各点の時間差分の情報や、TとTの時間差、上記距離差分、等である。嚥下運動の時間情報として動作の開始点および終了点(図5の(T、D)、(T、D))、また、時間差分(図5のTとTの差、TとTの差)や距離差分(図5のDとDの差、DとDの差)を特徴量に含めて良い。
 個人の体型の特性や可撓性保持具の装着位置や装着具合により、図5に示すような顕著なW字型にならない場合もありえるため、上記嚥下動作の判別方法を変化に適応させても良い。例えば、上記説明では極小点を(T、D)、(T、D)と判別したが、これを前者は減少傾向ないし水平から上昇に転じる変曲点、後者を減少から増加傾向ないし水平に転じる変曲点の検出することで処理しても良い。また、例えば個人により上述した時間差分や距離差分の判定値を予めメモリに記録しておくのでもよい。また、例えば個人の典型的な嚥下波形(参照波形)を予め記録しておき、その後の計測結果に対して参照波形との類似性を、例えば相互相関関数といった一般的な時系列データの類似度検出アルゴリズムに照らして調べることで、嚥下位置を推定するといった方法でも良い。
 嚥下音抽出部204は、入力される嚥下音データに対して、図6に例示する処理を実施して嚥下動作の実施有無の推定を行い、嚥下動作を検出した場合には嚥下音情報を出力(メモリへ記録)する。以下図6に示すシーケンス図に基づいて推定処理の一例を説明する。
 図6において、S601では、嚥下音抽出部204は入力された音データを一時メモリ(図には未記載)に保存しS602へ遷移する。S602では嚥下音抽出部204はS601で記録したデータを取得して整流処理を行い、その処理結果をメモリに保存してS603へ遷移する。入力データは、例えば16ビット幅のデータとして受信した場合は最小値=-32768から最大値=32767といったように、通常正負両方の値を含んでいる。整流処理とは負の値を正の値に変換する。
 S603では、嚥下音抽出部204はS602でメモリに記録した一部データを取得して平滑化処理を行い、その処理結果をメモリに記録してS604へ遷移する。音データの平滑化処理では、例えば10回分といった所定の回数分の最新の計測データの平均値を算出する。平滑化の対象とするデータ量を増やせば微小なノイズの影響を低減する効果があるが、同時に有意な音響的特徴も低減する可能性があるため、録音デバイスの性質に応じて適当な値を選択すればよい。
 S604では、嚥下音抽出部204はS601で記録した一部データを取得してフーリエ変換処理を行い、処理結果をメモリに保存する。また、フーリエ変換結果から直行成分を除く最も高いピークを示す周波数値をメモリに記録してS605へ遷移する。フーリエ変換処理は、所定の最新の記録データに対して例えばDFT(Discrete Fourier Transform)やFFT(Fast Fourier Transform)といった一般的な方法で行うのでよい。また、処理対象とするデータ量を例えば100ミリ秒分(1000Hzで記録している場合100サンプル)と500ミリ秒分(1000Hzで記録している場合500サンプル)といったように短時間と長時間の両方について実施することで、異なる特徴のパラメータを取得することが可能である。
 S605では、嚥下音抽出部204はS604で記録したフーリエ変換処理結果に対して自己相関情報を算出し、処理結果をメモリに記録してS606へ遷移する。自己相関とは信号処理において時間領域信号等のデータ解析にて一般的に用いる手法であるが、本手法ではフーリエ変換処理結果(離散信号Xn)に対して使用する。ラグ(周波数差)jにおける自己相関値R(j) =ΣnXnXn-jを求めることとし、例えば、フーリエ変換処理結果のピークが120Hz、180Hz、240Hz、…と周期的に表れる場合、自己相関を算出するとラグが60Hz、120Hzの自己相関値が高くなる。自己相関情報には、例えば算出した自己相関値の、すべての極大点を取るラグ値を含む。
 S606では、嚥下音抽出部204はS604で得られたフーリエ変換結果に対して1/nオクターブ解析を行い、結果をメモリに記録してS607へ遷移する。1/nオクターブ解析は音響データの一般的分析手法であり、1kHzを基準として一定の比率でn個の周波数帯域にデータを分割し、各帯域内に含まれる成分の合計値を求める。n=1の場合、帯域(オクターブバンド)を例えば11~22Hz、22~44Hz、44~88Hz、88~177Hz、177~354Hz、354Hz~707Hz、…と分割する。nを大きくすればより狭い帯域幅毎の特徴量が得られる。例えば嚥下音抽出部204に入力される音データがサンプリングレート1000Hzである時、フーリエ変換によって500Hzまでの優位な周波数変換データが得られ、n=1の場合には上述した帯域毎のデータ含有量が計算できるが、最後の354Hz~707Hzは半分の帯域のデータ量になることから、帯域毎のデータ量を公平に評価するために、例えばそれ以外の帯域の合算結果を2で割るようにしてもよい。
 S607では、嚥下音抽出部204は嚥下音情報を算出し、また嚥下音情報が含む特徴量から動作の判別を行い、結果をメモリに記録してS608へ遷移する。
 動作の判別に関連して、図7には、サンプリングレート1000Hzで取得した嚥下動作、発話動作、咳動作時の音情報をフーリエ変換した結果を時間軸(横軸)に従って各周波数帯(縦軸)の強度を連続的に表示したスペクトルグラムを示す。強度は、白抜きが最も高く、続いて、黒、グレーの順で示している。いずれも四角い枠で囲んだ部分が各動作を実施した時間帯である。例えば嚥下動作は比較的低周波領域の強度が高い傾向を示し、発話動作では周波数方向に周期的に強弱が現れる傾向を示し、咳動作は短時間の間で低周波から高周波まで幅広い帯域に強いピークが生じる傾向を示す。
 また、図8にはサンプリングレート4000Hzで取得した嚥下動作、発話動作、咳動作時の音情報のスペクトルグラム、および各動作の実施時間帯の枠を示す。サンプリングレートが高くなれば嚥下動作は、口腔期、咽頭期、食道期、(枠内の初期、中間期、後期に対応)、の分離が容易になる。すなわち、図8に示すように、嚥下動作においては、咽頭期に相当する中間期に低周波領域の強度が高く、また、高周波成分(例えば1kHz~2kHz)の相対的割合が口腔期、食道期に相当する初期、後期に高く、中間期に低くなる傾向を示す。発話動作では図7と比較してさらに多くの周期的な強弱が見られる。咳動作は図7同様に500Hz程度まで幅広い帯域の強いピークが生じている。
 また、図9には嚥下動作時の音圧の変化の一例を示す。図9では入力された音データに整流処理を行った結果を表しており横軸に時間、縦軸に音圧をプロットしている。典型的には嚥下動作時の音圧は嚥下動作の口腔期、咽頭期、食道期の3相に当てはまる3つの有音区間に分離される。それぞれ図9の点線で囲んだ時間帯Sw、Sw、Swがそれらに相当しており、それらの間にはごく短時間の無音区間が存在する。そのため時系列としてみた場合に短時間の無音区間を挟んでの有音区間を一連の動作から生じた音であると判定する。ただし、例えばノイズ音の影響や嚥下動作の多様性などから必ずしも3つの区間に分かれるわけではない。これらの特性を踏まえた動作の判別方法例を以下に示す。
 図6のS603で求めた平滑化された音圧値が所定の値よりも小さい場合、この区間は何も動作が行われなかったと判別する。所定よりも大きな音圧値であった場合、何らかの動作が進行中とみなしてS602からS606までの一連の処理によって得られた特徴量を用いて動作の判別を行う。例えば、自己相関情報に所定の周波数範囲(例えば80~200Hz)のラグ情報が含まれており、あるラグ値と別のラグ値とがほぼ2倍の関係性を持つ場合に発話動作であると判別する。また、自己相関情報にそのような関係性がない場合に音圧値が所定の値より大きな場合を咳動作と判別し、特定周波数領域のデータ量の全データ量に対する割合が所定の値よりも高い場合を嚥下動作と判別する。例えば上述したオクターブ分析結果のうち、低周波領域(例えば、11~22Hz、22~44Hz、44~88Hz)の算出結果の合算値が全体のデータ量の50%以上になるかどうかで判別する。同様にオクターブ分析結果の特定の周波数帯域のデータ量の割合によって判別すればよく、その方法は記録する音データのサンプリングレートやフーリエ変換に用いられるデータ量に応じて定めて良い。
 いずれの特徴も持たない場合、嚥下、咳、発話のいずれにも当てはまらない、それ以外の動作と判別する。判別結果はメモリに記録する。
 所定の時間以上、継続してある動作が行われている状態、すなわち平滑化された音圧が所定の値よりも大きい状態が継続している状態、を経た後に、所定の時間何も動作が行われない状態が続いた時に、ある一連の動作が完了したと判断し、この一連の動作に対する分析を行う。例えば入力音が例えば4000Hzといった十分に大きなサンプリングレートの場合には、高周波領域(例えば、1kHz~2kHz)のデータ割合の推移を求め、V字の傾向があるかを調査する。また例えば一定時間内の低周波領域の割合の平均値を算出する。これらの解析情報から一連の動作が何であったかを判別する。上述した処理によって動作判別結果の時系列データが得られているので、例えば最も判別回数の多かった動作を一連の動作の推定結果とする。あるいは、前記動作判別結果の配列中で嚥下動作と判別した回数が一定割合以上含まれ、かつ、高周波領域のデータ割合のV字傾向がある場合に推定結果を嚥下動作とするとしても良い。なお、一連の動作完了の判断においては、図9の説明の通り、嚥下動作で考えられる短時間の無音区間は一連とみなしてよく、短時間の無音区間が3回以上発生した場合にその時点で一連の動作完了とみなすなどしても良い。
 S608では嚥下音抽出部204はS607で直近の一連の動作が嚥下動作であると判別した場合に、嚥下音情報をメモリに記録して処理を終了する。嚥下音情報には例えば前記一連の動作の開始時刻(図9のT0)、終了時刻(図9のT)、最大ピークが生じた時刻(図9のT)とそのピーク値(図9のP)や、第一の区間(Sw)および第三の区間(Sw)の時刻とピーク値(図9の(T、P)、(T、P))などを含む。また、時間差分(図9のTとTの差、TとTの差、TとTの差、TとTの差)を特徴量に含めたりしても良い。
 データ出力部205は計測中の計測データ値について、距離データと音データの両方をディスプレイ上に波形としてグラフにプロットして視覚的に提示する、あるいは例えばスピーカといった音声出力デバイスを制御し、音データを加工せずに出力して聴覚的に提示する。これによってデバイスを装着した使用者、および使用者の近傍にいる者(例えば医療従事者や介助者など)に計測の進行状況を把握させることを可能とする効果が得られる。
 図10に、データ出力部205による嚥下動作計測中の画面表示の一例を示す。この表示例では距離データと音データの両方を一画面に表示するインタフェースとしている。このように表示することにより距離と音の同時性を直感的に確認可能とする効果が得られる。
 なお、データ出力部205における距離データの表示方法の別の例として、距離データを計測開始時の距離値を基準の音階(例えば”ド”)として、動きがあった際に異なる音階の音を(例えば距離が縮まれば音階を低くし、距離が延びれば音階を高くする)出力しても良い。これによれば使用者もしくは近傍にいる者が、嚥下動作があったことと、普段と異なる音色を聞くことで異常がある可能性に、聴覚情報だけを頼りに検知可能となる効果が得られる。
 嚥下動作分析部206は、嚥下運動抽出部203から得られる嚥下運動情報と、嚥下音抽出部204から得られる嚥下音情報とから、嚥下動作の位置推定を行う。推定方法として例えば嚥下運動情報の開始・終了時刻と嚥下音情報の開始・終了時刻に重なりがある場合を嚥下位置と推定する。嚥下音情報のある時刻に嚥下運動情報がない場合、確実な嚥下位置とは断定できなくとも嚥下位置と推定しても良い。あるいはその逆に嚥下動作情報のある時刻に嚥下音情報がないといった場合は嚥下位置と判断しなくても良い。この推定方法については運動情報と音情報の各々の判定の確度によって決定しても良い。嚥下動作分析部206が嚥下動作の位置の推定を確定したら、分析結果出力部207に結果出力の指示をする。
 分析結果出力部207は、例えばディスプレイやタブレットの表示画面といった表示デバイスである表示部に分析結果を表示する。表示方法として例えば図10に示したような波形情報に嚥下動作位置の推定結果を重畳し表示する。図11A、B、Cは、本実施例における嚥下動作位置推定結果表示画面の一例を示す図である。図11Aは、距離波形に対して嚥下運動情報の開始時刻・終了時刻に合わせて矩形を重畳し、音声波形に対して嚥下音情報の開始時刻・終了時刻に合わせて矩形を重畳する表示例である。図11Bは、嚥下音情報の開始時刻・終了時刻に合わせて距離波形と音声波形に跨った矩形を重畳する表示例である。図11Cは、嚥下運動情報の開始時刻と嚥下音情報の開始時刻の早い方(この例の場合嚥下運動情報の開始時刻)と嚥下運動情報の終了時刻と嚥下音情報の終了時刻の遅い方(この例の場合嚥下音情報の終了時刻)に合わせて、距離波形と音声波形に跨った矩形を重畳する表示例である。いずれの表示例にしても着目すべき場所を直感的に把握可能とする効果がある。図11Aの場合、距離波形上の矩形位置と音声波形上の矩形位置との位置ズレの程度から異常を直感的に認識できる。
 また、所定の時間の計測が終了した際に、図12に示すような結果表示を行う。図12は、波形情報と合わせて動作判別結果を表示している。例えば嚥下運動と嚥下音の相当位置に実線の枠、発話音の相当位置に破線の枠、咳の音の相当位置に点線の枠といったように、嚥下動作、発話動作、咳動作に対して夫々異なる線の枠をつけて示すことで、より的確に嚥下動作の位置を示す効果が得られる。なお、枠の色を異ならせてもよい。
 また、図4および図6に示した処理によって得られた嚥下動作の特徴量を数値として表示する。距離波形の隣に嚥下動作の開始点M1、第一の極小点M2、極大点M3、第二の極小点M4、終了点M5の情報(図5の(T、D)から(T、D)に相当する距離と時間の情報)を、また、音声波形の隣に嚥下音情報の第一ピークSs、第二ピークSm、第三ピークSeの情報(図9の(T、P)から(T、P)に相当する距離と時間の情報)を表示する。これによって波形からでは確認しづらい定量値を画面上で確認する効果が得られる。なお図12では計測時間の間に計3回の嚥下動作があるように複数回の嚥下動作情報がある場合、結果画面表示時には最初に検出した嚥下動作の各特徴量を表示する。例えば使用者が画面上で異なる嚥下動作位置を選択(例えばパソコンであればマウスによるクリック動作、タブレット端末であればタップ動作)した場合に該当の嚥下動作の各特徴量に切り替えて表示することで、使用者はすべての嚥下動作の特徴量を必要に応じて確認可能である。また例えば、結果画面表示時には複数回の嚥下動作の特徴量の平均値を表示するのでも良く、これにより使用者の総合的な嚥下の結果を表す効果が有る。
 さらに、嚥下動作の良好度を評価する情報を表示しても良く、図12では例えば嚥下動作情報の距離波形の極大値の時刻M3(図5のT)と音波形の第二のピークSmの時刻(図9のT)との差分値(M3-Sm)や、嚥下運動開始から終了までの時間(M5-M1)(図5のTとTの差分)、第一の極小値から第二の極小値までの時間(M4-M2)(図5のTとTの差分)を合わせて表示している。これらの計算値が、予め保存されている健常値から所定の値以上外れている場合に、その計算値を色付けして表示(例えば赤い文字列)するようにしても良い。これにより直感的に注目すべきデータを把握可能とする効果が有る。
 以上のように本実施例によれば、嚥下動作を的確に検知して、本装置の使用者や近傍にいる人(例えば医療従事者や介助者)がリアルタイムに定量評価することを可能とする効果が得られる。
 なお、嚥下音抽出部204における嚥下動作の弁別処理については、音声特徴量のパラメータを抽出したのち、判別分析により、咳、嚥下、発話、咀嚼、といった動作を弁別する手法でもよい。これには例えば、予め学習データを用い咳や嚥下等の各動作と各パラメータ(平滑化した音圧値、フーリエ変換処理データのピーク周波数、オクターブ解析結果の帯域毎のデータ量、1/nオクターブ分析後の各周波領域のデータ量の割合)との相関係数を求めておき、計測実施中に周期的処理で各パラメータを算出結果より、各動作の可能性(確率)を算出し、最も可能性の高い動作が行われたはずとの推定を行う方法である。
 また、図6に示した嚥下音の分析は必ずしもこの順番で行う必要はなく、例えば周波数的分析(フーリエ変換、自己相関算出、1/nオクターブ分析)と音圧的分析(整流および平滑化)を並列で行ってもよく、あるいは周波数的分析を先に行ってから音圧的分析を行っても良い。また音圧的分析を実施した時点で音圧値が十分に小さい場合には周波数的解析を実施せずに終了するなどしても良く、これにより計算時間や計算量を低減する効果が得られる。
 以上のように、本実施例によれば、嚥下動作判定をより正確に行うことが出来る。
 また、嚥下動作分析部206は嚥下障がいの有無・程度の判別を補助する情報を算出して、その結果を分析結果出力部207で出力するようにしても良い。図13は嚥下機能障害の程度弁別の基準となる指針の一例を示す。正常状態を含めて大きく4段階、細かくは10段階に分類される。このような程度判断は医師が実施するが、本実施例に従い算出される嚥下運動情報と嚥下音情報の特徴量やそれらを用いた計算結果で定量データに基づく判断の補助を可能にする。例えば同一の嚥下動作の検知結果である嚥下運動情報の最大ピーク時刻(図5におけるT)と嚥下音情報の第二のピーク時刻(図9におけるT)の差分値が所定の健常判断値より小さければ嚥下機能は正常、所定の健常判断値以上、軽症判断値より小さければ軽症、軽症判断値以上であれば中等症、といった可能性を画面上に合わせて示す。また複数の計算結果のうち健常判断値を超える値の個数によって判断してもよく、例えば上記最大ピーク時刻の差分値と、嚥下運動開始から終了までの時間(図5のTとTの差分)、第一の極小値から第二の極小値までの時間(図5のTとTの差分)との3つの値の夫々について、所定の健常判断値に収まるかを判定し、全てが健常であれば正常の可能性が高く、いずれか1つが健常判断値に収まらない場合は軽症の可能性が高く、2つが治まらない場合は中等症の可能性が高い、といった結果を画面上に合わせて示す。また、特徴量には個人間差があるため、例えばある個人の過去の計測履歴と比較して、値の変化が所定の割合以上に大きければ軽症といった判断を行うことでもよく、これによれば個人毎の特徴に合わせた評価を可能とする効果がある。また、嚥下機能の正常度の弁別を行うことで、嚥下障がいの傾向を早期発見する効果が得られる。
 また、図2に示した首装着部材5に例えばLEDライトのような発光表示部を具備することで、分析結果出力部207から送受信部201を介して、計測部1に対して制御信号を出力し、計測状態を示しても良い。例えば計測中は青色で発光し、嚥下動作を検出した際には、嚥下動作の異常度の判別結果に応じて(正常状態なら緑色、軽症状態なら黄色、中等症状態ならオレンジ色、重症状態なら赤色)発光させる。これにより使用者から離れた位置から状態をリアルタイムに把握可能とする効果が得られる。
 また、上述した一連の分析処理はデータ計測中に実施することで、リアルタイムに分析結果を使用者らに提示することが可能であるが、生体情報分析装置2は記録機能を持ち合わせてよく、例えば送受信部201で受信したデータを使用者の情報と計測を実行した日時の情報等と紐づけて記録媒体に記録する。記録媒体としてはHDD(Hard Disc Drive)やSSD(Solid State Drive)などの不揮発性の媒体であればよい。不揮発性媒体に保存された過去の記録済み計測データを読み出して、上記の一連の分析処理を適用すれば、過去の計測結果に遡って分析結果を提示することが可能であり、また、過去の計測データと現在の計測データの嚥下機能を比較検証可能とする効果が得られる。
 また、本実施例で説明した生体情報検出装置および生体情報検出方法を、嚥下機能のスクリーニングに用いるユースケースとして、所定の計測時間(例えば30秒)内に、嚥下動作が何回実施できるかを計測する場合は、計測結果の表示方法として図14に示すように嚥下動作の位置推定結果と同時に嚥下動作の回数と嚥下機能の正常・異常との評価結果を表示してもよい。嚥下機能が正常かどうかは、嚥下動作の実施回数が所定の回数(例えば3回)以上行われたかで決定するので良い。また合わせて例えば全嚥下動作の時間の平均値を表示するなど、嚥下動作情報や嚥下音情報が含むパラメータのいずれかを平均値や分散値を算出して表示するなどしてもよい。これにより嚥下動作の回数の評価と同時に各嚥下動作の質や安定性を定量的に評価可能とする効果が得られる。
 以上のように、本実施例によれば、嚥下障害を簡便に検出してその結果を表示することができる。
 なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために構成を詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、それらの機能を実現するソフトウェアによっても実現できる。さらに、それらの機能を実現するソフトウェアのプログラムコードを、ネットワークを介して配信することによって、それをコンピュータのハードディスクやメモリ等の記憶手段又はCD-RW、CD-R等の記憶媒体に格納し、コンピュータが備えるプロセッサが当該記憶手段や当該記憶媒体に格納されたプログラムコードを読み出して実行するようにしてもよい。
 1:計測部、2:生体情報分析装置、3a、3b:センサ保持部材、4a、4b:センサ部、5:首装着部材、10a、10b:首への押さえ部、101:発信用コイル、102:受信用コイル、103:マイクロフォン、104:コイル間電圧検出部、105:嚥下音検出部、106:メモリ、107:計測制御部、108:入出力部、109:操作部、201:送受信部、202:データ分離部、203:嚥下運動抽出部、204:嚥下音抽出部、205:データ出力部、206:嚥下動作分析部、207:分析結果出力部

Claims (15)

  1. 咽頭部の動きと音を計測した距離情報と音情報を分析してユーザの動作を推定する嚥下動作推定部と、
    表示部を有し、
    前記嚥下動作推定部は、前記距離情報を分析して推定した第1の嚥下動作位置と、前記音情報を分析して推定した第2の嚥下動作位置とを出力し、
    前記表示部は、前記距離情報と、前記音情報と、前記嚥下動作推定部の出力する前記第1の嚥下動作位置と前記第2の嚥下動作位置を表示することを特徴とする生体情報分析装置。
  2. 請求項1に記載の生体情報分析装置であって、
    前記嚥下動作推定部は、前記第1の嚥下動作位置と前記第2の嚥下動作位置との時間情報が重複する位置を嚥下動作位置と推定し、
    前記表示部は、前記距離情報と、前記音情報と、前記推定した嚥下動作位置を表示することを特徴とする生体情報分析装置。
  3. 請求項1に記載の生体情報分析装置であって、
    前記嚥下動作推定部は、前記距離情報の中から少なくとも所定の時間内に所定の量以上の距離の増加と減少の両方の事象が含まれている点を前記第1の嚥下動作位置と推定することを特徴とする生体情報分析装置。
  4. 請求項1に記載の生体情報分析装置であって、
    前記嚥下動作推定部は、前記音情報の中から少なくとも周波数情報が所定の低周波領域のデータ量が一定割合以上である時間帯と、その前後に所定の高周波領域のデータ量が一定割合以上である時間帯とが含まれる点を前記第2の嚥下動作位置と推定することを特徴とする生体情報分析装置。
  5. 請求項1に記載の生体情報分析装置であって、
    前記距離情報の嚥下動作時間内の変位量のピークと前記音情報の音圧変化量のピークの時間の一致度によって正しく嚥下が行われたことを判定し、前記表示部に判定結果を表示することを特徴とする生体情報分析装置。
  6. 咽頭部の動きと音を計測した距離情報と音情報を分析してユーザの動作を推定する嚥下動作推定ステップと、
    表示ステップを有し、
    前記嚥下動作推定ステップは、前記距離情報を分析して推定した第1の嚥下動作位置と、前記音情報を分析して推定した第2の嚥下動作位置とを出力し、
    前記表示ステップは、前記距離情報と、前記音情報と、前記嚥下動作推定ステップで出力した前記第1の嚥下動作位置と前記第2の嚥下動作位置を表示することを特徴とする生体情報分析方法。
  7. 請求項6に記載の生体情報分析方法であって、
    前記嚥下動作推定ステップは、前記第1の嚥下動作位置と前記第2の嚥下動作位置との時間情報が重複する位置を嚥下動作位置と推定するステップを有し、
    前記表示ステップは、前記距離情報と、前記音情報と、前記推定した嚥下動作位置を表示することを特徴とする生体情報分析方法。
  8. 請求項6に記載の生体情報分析方法であって、
    前記嚥下動作推定ステップは、前記距離情報の中から少なくとも所定の時間内に所定の量以上の距離の増加と減少の両方の事象が含まれている点を前記第1の嚥下動作位置と推定することを特徴とする生体情報分析方法。
  9. 請求項6に記載の生体情報分析方法であって、
    前記嚥下動作推定ステップは、前記音情報の中から少なくとも周波数情報が所定の低周波領域のデータ量が一定割合以上である時間帯と、その前後に所定の高周波領域のデータ量が一定割合以上である時間帯とが含まれる点を前記第2の嚥下動作位置と推定することを特徴とする生体情報分析方法。
  10. 請求項6に記載の生体情報分析方法であって、
    前記距離情報の嚥下動作時間内の変位量のピークと前期音情報の音圧変化量のピークの時間の一致度によって正しく嚥下が行われたことを判定するステップと、
    前記表示ステップは、前記判定の結果を表示することを特徴とする生体情報分析方法。
  11. 計測部と生体情報分析装置を有する生体情報分析システムであって、
    前記計測部は、咽頭部の動きを計測し距離情報を取得する距離情報取得部と、咽頭部の動きに対応する音を計測し音情報を取得する音情報取得部とを有し、
    前記生体情報分析装置は、前記計測部の距離情報取得部と音情報取得部から得られた前記距離情報と前記音情報を分析してユーザの動作を推定する嚥下動作推定部と、表示部を有し、
    前記嚥下動作推定部は、前記距離情報を分析して推定した第1の嚥下動作位置と、前記音情報を分析して推定した第2の嚥下動作位置とを出力し、
    前記表示部は、前記距離情報と、前記音情報と、前記嚥下動作推定部の出力する前記第1の嚥下動作位置と前記第2の嚥下動作位置を表示することを特徴とする生体情報分析システム。
  12. 請求項11に記載の生体情報分析システムであって、
    前記嚥下動作推定部は、前記第1の嚥下動作位置と前記第2の嚥下動作位置との時間情報が重複する位置を嚥下動作位置と推定し、
    前記表示部は、前記距離情報と、前記音情報と、前記推定した嚥下動作位置を表示することを特徴とする生体情報分析システム。
  13. 請求項11に記載の生体情報分析システムであって、
    前記嚥下動作推定部は、前記距離情報の中から少なくとも所定の時間内に所定の量以上の距離の増加と減少の両方の事象が含まれている点を前記第1の嚥下動作位置と推定することを特徴とする生体情報分析システム。
  14. 請求項11に記載の生体情報分析システムであって、
    前記嚥下動作推定部は、前記音情報の中から少なくとも周波数情報が所定の低周波領域のデータ量が一定割合以上である時間帯と、その前後に所定の高周波領域のデータ量が一定割合以上である時間帯とが含まれる点を前記第2の嚥下動作位置と推定することを特徴とする生体情報分析システム。
  15. 請求項11に記載の生体情報分析システムであって、
    前記距離情報の嚥下動作時間内の変位量のピークと前期音情報の音圧変化量のピークの時間の一致度によって正しく嚥下が行われたことを判定し、前記表示部に判定結果を表示することを特徴とする生体情報分析システム。
PCT/JP2018/048457 2018-12-28 2018-12-28 生体情報分析装置、生体情報分析方法、及び、生体情報分析システム Ceased WO2020136870A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2020562269A JP7165209B2 (ja) 2018-12-28 2018-12-28 生体情報分析装置、生体情報分析方法、及び、生体情報分析システム
US17/418,153 US12478315B2 (en) 2018-12-28 2018-12-28 Biological information analysis device, biological information analysis method, and biological information analysis system
PCT/JP2018/048457 WO2020136870A1 (ja) 2018-12-28 2018-12-28 生体情報分析装置、生体情報分析方法、及び、生体情報分析システム
CN202410524592.0A CN118340517A (zh) 2018-12-28 2018-12-28 生物体信息分析装置、生物体信息分析方法、以及生物体信息分析系统
CN201880100497.0A CN113226173B (zh) 2018-12-28 2018-12-28 生物体信息分析装置、生物体信息分析方法、以及生物体信息分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/048457 WO2020136870A1 (ja) 2018-12-28 2018-12-28 生体情報分析装置、生体情報分析方法、及び、生体情報分析システム

Publications (1)

Publication Number Publication Date
WO2020136870A1 true WO2020136870A1 (ja) 2020-07-02

Family

ID=71127837

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/048457 Ceased WO2020136870A1 (ja) 2018-12-28 2018-12-28 生体情報分析装置、生体情報分析方法、及び、生体情報分析システム

Country Status (4)

Country Link
US (1) US12478315B2 (ja)
JP (1) JP7165209B2 (ja)
CN (2) CN113226173B (ja)
WO (1) WO2020136870A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP1662391S (ja) * 2019-11-21 2020-06-29
JP7709413B2 (ja) * 2022-07-14 2025-07-16 パラマウントベッド株式会社 データ処理装置、介護支援システム、及び、データ処理方法
CN119576139B (zh) * 2025-02-08 2025-07-15 荣耀终端股份有限公司 热量摄入信息的检测方法、电子设备及系统
CN120713764A (zh) * 2025-08-15 2025-09-30 温州医科大学附属第一医院 一种用于放射性口腔黏膜炎的温控注食器及相关方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008301895A (ja) * 2007-06-05 2008-12-18 Hitachi Ltd 生体検査装置
JP2009213592A (ja) * 2008-03-10 2009-09-24 Hitachi Computer Peripherals Co Ltd 生体検査装置
JP2012200300A (ja) * 2011-03-24 2012-10-22 Mie Prefecture 嚥下運動測定システム
JP2016185209A (ja) * 2015-03-27 2016-10-27 Necソリューションイノベータ株式会社 嚥下検出装置、嚥下検出方法およびプログラム
JP2017038840A (ja) * 2015-08-21 2017-02-23 住友電気工業株式会社 嚥下運動モニタリングセンサ
WO2017033228A1 (ja) * 2015-08-21 2017-03-02 住友電気工業株式会社 嚥下運動モニタリングセンサ
JP2018130199A (ja) * 2017-02-14 2018-08-23 学校法人昭和大学 嚥下検出装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4727253B2 (ja) * 2004-08-05 2011-07-20 サッポロビール株式会社 連続嚥下運動測定装置及び連続嚥下運動測定方法
JP4011071B2 (ja) 2005-03-25 2007-11-21 中央電子株式会社 嚥下音解析システム
JP5489846B2 (ja) 2010-04-30 2014-05-14 三栄源エフ・エフ・アイ株式会社 易嚥下性組成物の評価または選別方法
JP5952536B2 (ja) 2011-07-12 2016-07-13 国立大学法人 筑波大学 嚥下機能データ測定装置及び嚥下機能データ測定システム及び嚥下機能データ測定方法
TW201408261A (zh) * 2012-08-31 2014-03-01 Jian-Zhang Xu 肌無力症吞嚥困難鑑別裝置
EP3284407B1 (en) * 2013-08-26 2018-12-05 Hyogo College Of Medicine Swallowing estimation device, information terminal device, and program
WO2017002901A1 (ja) * 2015-06-30 2017-01-05 学校法人兵庫医科大学 嚥下障害検査装置、嚥下障害検査方法、嚥下障害治療装置および刺激電流設定方法
WO2018180778A1 (ja) 2017-03-29 2018-10-04 株式会社村田製作所 嚥下センサ

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008301895A (ja) * 2007-06-05 2008-12-18 Hitachi Ltd 生体検査装置
JP2009213592A (ja) * 2008-03-10 2009-09-24 Hitachi Computer Peripherals Co Ltd 生体検査装置
JP2012200300A (ja) * 2011-03-24 2012-10-22 Mie Prefecture 嚥下運動測定システム
JP2016185209A (ja) * 2015-03-27 2016-10-27 Necソリューションイノベータ株式会社 嚥下検出装置、嚥下検出方法およびプログラム
JP2017038840A (ja) * 2015-08-21 2017-02-23 住友電気工業株式会社 嚥下運動モニタリングセンサ
WO2017033228A1 (ja) * 2015-08-21 2017-03-02 住友電気工業株式会社 嚥下運動モニタリングセンサ
JP2018130199A (ja) * 2017-02-14 2018-08-23 学校法人昭和大学 嚥下検出装置

Also Published As

Publication number Publication date
JPWO2020136870A1 (ja) 2021-10-14
CN113226173A (zh) 2021-08-06
JP7165209B2 (ja) 2022-11-02
CN113226173B (zh) 2024-05-14
US20220054078A1 (en) 2022-02-24
US12478315B2 (en) 2025-11-25
CN118340517A (zh) 2024-07-16

Similar Documents

Publication Publication Date Title
US20260069161A1 (en) Managing respiratory conditions based on sounds of the respiratory system
JP5952536B2 (ja) 嚥下機能データ測定装置及び嚥下機能データ測定システム及び嚥下機能データ測定方法
JP5055502B2 (ja) 生体検査装置
JP5977255B2 (ja) 嚥下障害検出装置及びその作動方法
CN109273085B (zh) 病理呼吸音库的建立方法、呼吸疾病的检测系统及处理呼吸音的方法
JP5093537B2 (ja) 音情報判定支援方法、音情報判定方法、音情報判定支援装置、音情報判定装置、音情報判定支援システム及びプログラム
TWI533843B (zh) 吞嚥推定裝置
JP7165209B2 (ja) 生体情報分析装置、生体情報分析方法、及び、生体情報分析システム
JP4011071B2 (ja) 嚥下音解析システム
JPWO2010044162A1 (ja) 無呼吸検出プログラムおよび無呼吸検出装置
CN113329683A (zh) 用于筛查吞咽受损的方法和装置
JP6742620B2 (ja) 嚥下診断装置およびプログラム
Ang et al. Characterization and cross-comparison of digital stethoscopes for telehealth remote patient auscultation
JP2019051129A (ja) 嚥下機能解析システム及びプログラム
JP2012205693A (ja) 呼吸音解析装置、呼吸音解析方法、および呼吸音解析プログラム
JP2020529234A (ja) 嚥下障害分類モデルの信号品質を判定するための方法及びデバイス
JP6727595B1 (ja) 嚥下能力評価システム、嚥下能力評価方法及び嚥下能力評価プログラム
KR101144948B1 (ko) Egg를 이용한 음정교정장치
Jayatilake et al. Swallowscope: A smartphone based device for the assessment of swallowing ability
US20240099685A1 (en) Detection of diseases and viruses by ultrasonic frequency
CN121015220A (zh) 一种穿戴式肠鸣音监测系统
CN114828742A (zh) 控制装置、控制系统以及控制方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18944563

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020562269

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18944563

Country of ref document: EP

Kind code of ref document: A1

WWG Wipo information: grant in national office

Ref document number: 17418153

Country of ref document: US