JP2019170540A - Biometric measurement device and program - Google Patents

Biometric measurement device and program Download PDF

Info

Publication number
JP2019170540A
JP2019170540A JP2018060732A JP2018060732A JP2019170540A JP 2019170540 A JP2019170540 A JP 2019170540A JP 2018060732 A JP2018060732 A JP 2018060732A JP 2018060732 A JP2018060732 A JP 2018060732A JP 2019170540 A JP2019170540 A JP 2019170540A
Authority
JP
Japan
Prior art keywords
measurement
light
biological signal
period
measurement condition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018060732A
Other languages
Japanese (ja)
Inventor
古川 仁
Hitoshi Furukawa
仁 古川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2018060732A priority Critical patent/JP2019170540A/en
Priority to CN201910231521.0A priority patent/CN110301888A/en
Priority to US16/364,261 priority patent/US20190298192A1/en
Publication of JP2019170540A publication Critical patent/JP2019170540A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)

Abstract

To provide a technology to switch a measurement condition during measurement.SOLUTION: A measurement device includes: a spectral sensor including spectral means for dispersing a reflection light from a living body at a measurement position or a transmission light that has transmitted the living body at the measurement position according to the wavelength, and light reception means that includes a plurality of pixels, each of the plurality of pixels receiving a light including a predetermined wavelength dispersed by the spectral means; generation means for generating a biological signal from a light reception result of a predetermined pixel of the light reception means; first determination means for determining a cycle of the biological signal; detection means for detecting a feature amount of the biological signal; setting means for setting a living body measurement condition to the spectral sensor; second determination means for determining whether or not the measurement condition needs to be changed on the basis of the biological signal; and third determination means for, when it is determined that a change in the measurement condition is needed in a first cycle of the biological signal, determining whether or not a change in the measurement condition is possible in a period from the detection of the feature amount by the detection means in the first cycle to a time point when the first cycle ends.SELECTED DRAWING: Figure 1

Description

本発明は、生体の測定装置及びプログラムに関する。   The present invention relates to a biological measurement apparatus and program.

生体の一部に光を照射し、生体からの反射光量又は透過光量を検出して、生体情報を検出する測定装置が知られている。生体情報とは、例えば、脈拍数や血管の硬化度合いといった、生体が発する種々の生理学的・解剖学的情報である。例えば、脈拍数は、血管内の血液移動に伴う反射又は透過光量の変動を示す脈波信号に基づき検出することができる。また、例えば、血管の硬化度合いは、脈波信号を2回微分した加速度脈波信号(以下、単に、加速度信号と呼ぶ。)の特徴点に基づいて検出することができる。   2. Description of the Related Art There are known measuring apparatuses that detect biological information by irradiating a part of a living body with light and detecting the amount of reflected light or transmitted light from the living body. The biological information is, for example, various physiological / anatomical information emitted by the living body, such as the pulse rate and the degree of vascular hardening. For example, the pulse rate can be detected based on a pulse wave signal indicating fluctuations in the amount of reflected or transmitted light accompanying blood movement in the blood vessel. For example, the degree of hardening of the blood vessel can be detected based on a feature point of an acceleration pulse wave signal (hereinafter simply referred to as an acceleration signal) obtained by differentiating the pulse wave signal twice.

特許文献1は、生体情報の測定装置の一例である脈波測定装置を開示している。特許文献1によると、脈波測定装置は、指尖部に対して光束を照射し、その反射光量の時間的な変動から脈波を検出している。生体情報の検出において、測定開始後に生体の測定状態が変化すると、測定精度が低下し得る。そのため、特許文献2は、測定中に生体の測定状態が変化すると、発光パルスの発光時間や発光間隔といった測定条件を切り替える構成を開示している。また、特許文献3は、受光部が検出した検出信号の特徴点のタイミングに基づいて、受光部の動作モードを切り替えることにより、測定装置の消費電力を削減する構成を開示している。   Patent Document 1 discloses a pulse wave measurement device that is an example of a biological information measurement device. According to Patent Document 1, the pulse wave measuring device irradiates a fingertip with a light beam, and detects a pulse wave from a temporal variation in the amount of reflected light. In the detection of biological information, if the measurement state of the living body changes after the start of measurement, the measurement accuracy may decrease. Therefore, Patent Document 2 discloses a configuration in which measurement conditions such as a light emission time and a light emission interval are switched when a measurement state of a living body changes during measurement. Patent Document 3 discloses a configuration that reduces the power consumption of the measuring device by switching the operation mode of the light receiving unit based on the timing of the feature point of the detection signal detected by the light receiving unit.

特開2004−000467号公報Japanese Patent Laid-Open No. 2004-046767 特開2010−004972号公報JP 2010-004972 A 特開2017−108905号公報JP 2017-108905 A

生体情報の検出中に測定条件を切り替えると、受光部が検出する検出信号が変化し、この検出信号の変化により、検出信号から生体情報を検出することが難しくなる。一方、測定条件の切替のために測定を中断すると、連続した生体情報の検出が途切れてしまい、さらに、生体情報の検出時間が長くなる。特許文献2は、測定条件を切り替えることを開示しているが、それに伴う検出信号の変動の影響を回避する構成を開示してはいない。特許文献3は、消費電力の削減を目的とし、生体の測定状態の変化に応じて測定条件を切り替えるものでなく、かつ、この切り替えに起因する検出信号の変動の影響を回避する構成を開示してはいない。   When the measurement condition is switched during the detection of the biological information, the detection signal detected by the light receiving unit changes, and it becomes difficult to detect the biological information from the detection signal due to the change in the detection signal. On the other hand, if measurement is interrupted to switch measurement conditions, detection of continuous biological information is interrupted, and the detection time of biological information becomes longer. Patent Document 2 discloses switching measurement conditions, but does not disclose a configuration that avoids the influence of detection signal fluctuations associated therewith. Patent Document 3 discloses a configuration that aims to reduce power consumption, does not switch measurement conditions according to changes in the measurement state of a living body, and avoids the influence of fluctuations in detection signals caused by this switching. Not.

本発明は、測定中に測定条件を切り替えるための技術を提供するものである。   The present invention provides a technique for switching measurement conditions during measurement.

本発明の一態様によると、測定装置は、測定位置に向けて光を射出する光源と、前記測定位置にある生体からの反射光、又は、前記測定位置にある生体を透過した透過光を波長に応じて分光する分光手段と、複数の画素を有し、前記複数の画素の各画素は、前記分光手段が分光した所定の波長を含む光を受光する受光手段と、を含む分光センサと、前記受光手段の所定画素の受光結果から生体信号を生成する生成手段と、前記生体信号の周期を判定する第1判定手段と、前記生体信号の特徴量を検出する検出手段と、前記生体の測定条件を前記分光センサに設定する設定手段と、前記生体信号に基づき前記測定条件の変更が必要か否かを判定する第2判定手段と、前記生体信号の第1周期において前記測定条件の変更が必要であると前記第2判定手段が判定すると、前記第1周期において前記検出手段が前記特徴量を検出してから前記第1周期の終了時刻までの期間内で前記測定条件の変更が可能であるかを判定する第3判定手段と、を備えていることを特徴とする。   According to one aspect of the present invention, the measuring device uses a light source that emits light toward the measurement position, reflected light from the living body at the measurement position, or transmitted light that has passed through the living body at the measurement position. A spectroscopic sensor including a spectroscopic means for performing spectroscopic analysis according to the above, and a plurality of pixels, and each pixel of the plurality of pixels includes a light receiving means for receiving light including a predetermined wavelength spectrally separated by the spectroscopic means, A generation unit that generates a biological signal from a light reception result of a predetermined pixel of the light receiving unit, a first determination unit that determines a cycle of the biological signal, a detection unit that detects a feature amount of the biological signal, and a measurement of the biological body A setting means for setting a condition in the spectroscopic sensor, a second determination means for determining whether or not the measurement condition needs to be changed based on the biological signal, and a change in the measurement condition in the first period of the biological signal. Said second if necessary When the determination means determines, a third determination is made as to whether or not the measurement condition can be changed within a period from when the detection means detects the feature amount in the first cycle to an end time of the first cycle. And a determination unit.

本発明によると、測定中に測定条件を切り替えることができる。   According to the present invention, measurement conditions can be switched during measurement.

一実施形態による測定装置の機能ブロック図。The functional block diagram of the measuring device by one Embodiment. 一実施形態による測定装置の構成図。The block diagram of the measuring device by one Embodiment. 一実施形態による白色光源のスペクトルとラインセンサの構成を示す図。The figure which shows the spectrum of the white light source by one Embodiment, and the structure of a line sensor. 一実施形態による生体情報の検出処理のフローチャート。The flowchart of the detection process of the biometric information by one Embodiment. 一実施形態による生体信号及び加速度信号並びに特徴点を示す図。The figure which shows the biomedical signal and acceleration signal by one Embodiment, and a feature point. 一実施形態による測定条件の変更処理のフローチャート。The flowchart of the change process of the measurement conditions by one Embodiment. 一実施形態による測定条件の変更処理の説明図。Explanatory drawing of the change process of the measurement conditions by one Embodiment. 一実施形態による測定条件の変更処理のフローチャート。The flowchart of the change process of the measurement conditions by one Embodiment. 一実施形態による測定条件の変更処理の説明図。Explanatory drawing of the change process of the measurement conditions by one Embodiment. 一実施形態による測定装置の外観を示す図。The figure which shows the external appearance of the measuring apparatus by one Embodiment.

以下、本発明の例示的な実施形態について図面を参照して説明する。なお、以下の実施形態は例示であり、本発明を実施形態の内容に限定するものではない。また、以下の各図においては、実施形態の説明に必要ではない構成要素については図から省略する。   Hereinafter, exemplary embodiments of the present invention will be described with reference to the drawings. In addition, the following embodiment is an illustration and does not limit this invention to the content of embodiment. In the following drawings, components that are not necessary for the description of the embodiments are omitted from the drawings.

<第一実施形態>
図10は、本実施形態による測定装置1の斜視図である。なお、図10(A)は、シャッタ部材102が開口部500を覆った状態を示し、図10(B)は、シャッタ部材102が退避位置に移動されて開口部500が露出した状態を示している。なお、開口部500は、ハウジング110内部への異物の落下を防止する透明カバー400で覆われている。ハウジング110には、図10のX方向に沿った溝状のガイドレール116が設けられている。また、ガイド部材103のガイド部131は、このガイドレール116にはめ込まれている。これにより、ガイド部材103及びシャッタ部材102は、X方向において、ガイドレール116が設けられた範囲内で移動可能な様になっている。なお、ガイド部材103のガイド部131には、ハウジング110内においてバネが取り付けられている。そして、このバネの力により、ガイド部材103に外部から力を加えない状態において、ガイド部材103は、図10(A)の位置で止まる様になっている。ユーザが生体情報を測定する際、ユーザは、指によりガイド部材103の指受け部320をX方向に押し込み、ガイド部材103及びシャッタ部材102をX方向にスライドさせる。ガイド部材103及びシャッタ部材102をガイドレール116で制限される位置まで指で押し込むと、指の先端部分が開口部500を覆う状態となる様に、測定装置1は構成されている。この状態において、ハウジング110の内部から、白色光源21(図2)は、開口部500を介して指に光を照射し、ハウジング110の内部のラインセンサ24(図2)は、その反射光を受光する。
<First embodiment>
FIG. 10 is a perspective view of the measuring apparatus 1 according to the present embodiment. 10A shows a state where the shutter member 102 covers the opening 500, and FIG. 10B shows a state where the shutter 500 is moved to the retracted position and the opening 500 is exposed. Yes. The opening 500 is covered with a transparent cover 400 that prevents foreign matter from falling into the housing 110. The housing 110 is provided with a groove-shaped guide rail 116 along the X direction in FIG. Further, the guide portion 131 of the guide member 103 is fitted into the guide rail 116. As a result, the guide member 103 and the shutter member 102 can move within the range in which the guide rail 116 is provided in the X direction. A spring is attached to the guide portion 131 of the guide member 103 in the housing 110. The guide member 103 stops at the position shown in FIG. 10A in a state in which no force is applied to the guide member 103 from the outside by the spring force. When the user measures biometric information, the user pushes the finger receiving portion 320 of the guide member 103 in the X direction with a finger, and slides the guide member 103 and the shutter member 102 in the X direction. The measuring apparatus 1 is configured such that when the guide member 103 and the shutter member 102 are pushed by a finger to a position limited by the guide rail 116, the tip portion of the finger covers the opening 500. In this state, the white light source 21 (FIG. 2) irradiates the finger with light from the inside of the housing 110 through the opening 500, and the line sensor 24 (FIG. 2) inside the housing 110 transmits the reflected light. Receive light.

また、ハウジング110には、軸受部119により回転可能に保持される押圧部材105と押圧バネ151が設けられている。押圧バネ151は、押圧部材105に対して、開口部500に向かう力を加える。また、押圧部材105には押圧リブ152が設けられ、シャッタ部材102には被押圧リブ123が設けられる。図10(A)の状態では、押圧リブ152が被押圧リブ123に当接し、これにより、シャッタ部材102はハウジング110の上面に対し付勢される。また、シャッタ部材102の開口部500側の面には、白色基準板が設けられる。この白色基準板は、ハウジング110内部の白色光源21やラインセンサ24等のキャリブレーションに使用される。シャッタ部材102は、キャリブレーション時にハウジング110から開口部500を介して外部に光が漏れることを防止する。また、押圧部材105は、測定時、測定対象の指先を開口部500の位置で安定させる役割も有する。   The housing 110 is provided with a pressing member 105 and a pressing spring 151 that are rotatably held by the bearing portion 119. The pressing spring 151 applies a force toward the opening 500 to the pressing member 105. The pressing member 105 is provided with a pressing rib 152, and the shutter member 102 is provided with a pressed rib 123. In the state of FIG. 10A, the pressing rib 152 contacts the pressed rib 123, and thereby the shutter member 102 is urged against the upper surface of the housing 110. A white reference plate is provided on the surface of the shutter member 102 on the opening 500 side. The white reference plate is used for calibration of the white light source 21 and the line sensor 24 inside the housing 110. The shutter member 102 prevents light from leaking from the housing 110 through the opening 500 during calibration. The pressing member 105 also has a role of stabilizing the measurement target fingertip at the position of the opening 500 at the time of measurement.

図2は、測定装置1のハウジング110内に配置されるハードウェアの構成図である。CPU50は、測定装置1の全体を制御する制御部である。CPU50は、ROM51に格納されたプログラムに基づいて後述する各種制御を実行する。なお、CPU50は、各種制御を実行する際に使用するデータや、一時的に記憶する必要があるデータをRAM52に記憶する。CPU50は、バス53を介して、ROM51と、RAM52と、I/Oポート54と、AD変換回路55と、外部通信回路56と通信できる。光源駆動回路60は、白色光源21の発光を制御する。また、CPU50は、I/Oポート54を介して、光源駆動回路60を制御することで、白色光源21の発光強度を制御することができる。さらに、CPU50は、I/Oポート54を介して、ラインセンサ24の電荷蓄積時間の設定を行うことができる。ラインセンサ24は、後述する様に、白色光源21が射出した光の反射光を集光レンズ22及び回折格子23を介して受光し、受光量に応じた電圧をAD変換回路55に出力する。そして、CPU50は、AD変換回路55を介して、ラインセンサ24が出力する受光量に応じた電圧を取得する。さらに、CPU50は、外部通信回路56を介して外部機器30と通信可能な様に構成される。なお、集光レンズ22、回折格子23及びラインセンサ24は、分光測色計(分光センサ)を構成している。或いは、白色光源21、集光レンズ22、回折格子23及びラインセンサ24は、分光センサを構成している。   FIG. 2 is a configuration diagram of hardware arranged in the housing 110 of the measuring apparatus 1. The CPU 50 is a control unit that controls the entire measurement apparatus 1. The CPU 50 executes various controls described later based on the program stored in the ROM 51. The CPU 50 stores in the RAM 52 data used when executing various controls and data that needs to be temporarily stored. The CPU 50 can communicate with the ROM 51, the RAM 52, the I / O port 54, the AD conversion circuit 55, and the external communication circuit 56 via the bus 53. The light source drive circuit 60 controls the light emission of the white light source 21. Further, the CPU 50 can control the light emission intensity of the white light source 21 by controlling the light source driving circuit 60 via the I / O port 54. Further, the CPU 50 can set the charge accumulation time of the line sensor 24 via the I / O port 54. As will be described later, the line sensor 24 receives the reflected light of the light emitted from the white light source 21 via the condenser lens 22 and the diffraction grating 23, and outputs a voltage corresponding to the amount of received light to the AD conversion circuit 55. Then, the CPU 50 acquires a voltage corresponding to the amount of received light output from the line sensor 24 via the AD conversion circuit 55. Further, the CPU 50 is configured to be able to communicate with the external device 30 via the external communication circuit 56. The condenser lens 22, the diffraction grating 23, and the line sensor 24 constitute a spectrocolorimeter (spectral sensor). Alternatively, the white light source 21, the condensing lens 22, the diffraction grating 23, and the line sensor 24 constitute a spectroscopic sensor.

図1は、本実施形態における測定装置1の動作を説明するためのブロック図である。CPU50は、ROM51に格納されたプログラムを実行することで、I/Oポート54、光源駆動回路60、AD変換回路55、外部通信回路56、ROM51及びRAM52と協働して図1の制御部10として機能する。発光制御部11は、CPU50及び光源駆動回路60に対応し、白色光源21の発光強度を調整し、かつ、白色光源21の発光を制御する。白色光源21は、可視光全体にわたる発光波長分布を有する。白色光源21としては、例えば、タングステン光や白色LED、RGB(レッド、グリーン、ブルー)の3色LED等を使用可能である。本実施形態において白色光源21は、青色光を発光するLED素子を、黄色の蛍光材を混合した樹脂でパッケージングした白色LEDであるものとする。図3(A)は、本実施形態で用いる白色光源21の波長別の相対強度(輝度)を示している。波長450nm付近のピークは青色LEDの発光スペクトルであり、600nm付近のピークは黄色蛍光体のスペクトルである。このスペクトルは蛍光材がLED素子からの光を受けて蛍光したときに発生される光によるものである。   FIG. 1 is a block diagram for explaining the operation of the measuring apparatus 1 in the present embodiment. The CPU 50 executes the program stored in the ROM 51 to cooperate with the I / O port 54, the light source driving circuit 60, the AD conversion circuit 55, the external communication circuit 56, the ROM 51, and the RAM 52, and the control unit 10 in FIG. Function as. The light emission control unit 11 corresponds to the CPU 50 and the light source drive circuit 60, adjusts the light emission intensity of the white light source 21, and controls the light emission of the white light source 21. The white light source 21 has a light emission wavelength distribution over the entire visible light. As the white light source 21, for example, tungsten light, white LED, RGB (red, green, blue) three-color LED, or the like can be used. In the present embodiment, the white light source 21 is a white LED obtained by packaging an LED element that emits blue light with a resin mixed with a yellow fluorescent material. FIG. 3A shows the relative intensity (luminance) for each wavelength of the white light source 21 used in the present embodiment. The peak near the wavelength of 450 nm is the emission spectrum of the blue LED, and the peak near 600 nm is the spectrum of the yellow phosphor. This spectrum is due to the light generated when the fluorescent material receives light from the LED element and fluoresces.

図1に示す様に、白色光源21が射出する光70は、ハウジング110の開口部500を、その法線方向に対して約45度の角度で通過して測定位置にある測定対象90である指先を照射する。そして、この照射光は、測定対象90の光吸収特性に応じた散乱光71となる。散乱光71の一部は、集光レンズ22により平行光72に変換され、回折格子23に90度の入射角で入射する。回折格子23は、入射光を波長に応じて分光する。分光された分散光73は、ラインセンサ24の各画素に入射する。ラインセンサ24の各画素は、入射した分散光73の受光量に応じた電圧を受光量検出部12に出力する。図3(B)は、ラインセンサ24の模式図である。本実施形態によるラインセンサ24は、波長約400nmから約700nmの可視光を5nm単位で検出するために必要な60画素を有する。本実施形態では、ラインセンサ24の1番の画素が約400nm、60番の画素が約700nmの波長を含む光を検出する様に、測定装置1は調整して組み立てられている。受光量検出部12は、CPU50、AD変換回路55及びI/Oポート54に対応する。実際には、AD変換回路55は、ラインセンサ24が出力する各画素の電圧をそれぞれ、例えば、12ビットのデジタル値に変換し、CPU50は、この各画素の受光量を示すデジタル値をAD変換回路55から取得する。本実施形態のラインセンサ24は、電荷蓄積型であり、所定の蓄積時間に入射した分散光の光量に応じて、画素ごとに電圧信号を出力する。ラインセンサ24での蓄積時間は、受光量検出部12、より詳しくは、CPU50がI/Oポート54を介してラインセンサ24に設定する。   As shown in FIG. 1, the light 70 emitted from the white light source 21 passes through the opening 500 of the housing 110 at an angle of about 45 degrees with respect to the normal direction, and is the measurement object 90 at the measurement position. Irradiate the fingertip. This irradiation light becomes scattered light 71 corresponding to the light absorption characteristics of the measurement object 90. A part of the scattered light 71 is converted into parallel light 72 by the condenser lens 22 and enters the diffraction grating 23 at an incident angle of 90 degrees. The diffraction grating 23 separates incident light according to the wavelength. The dispersed light 73 dispersed is incident on each pixel of the line sensor 24. Each pixel of the line sensor 24 outputs a voltage corresponding to the received light amount of the incident dispersed light 73 to the received light amount detection unit 12. FIG. 3B is a schematic diagram of the line sensor 24. The line sensor 24 according to the present embodiment has 60 pixels necessary for detecting visible light having a wavelength of about 400 nm to about 700 nm in units of 5 nm. In the present embodiment, the measuring device 1 is adjusted and assembled so that the first pixel of the line sensor 24 detects light including a wavelength of about 400 nm and the # 60 pixel of about 700 nm. The received light amount detection unit 12 corresponds to the CPU 50, the AD conversion circuit 55, and the I / O port 54. In practice, the AD conversion circuit 55 converts the voltage of each pixel output from the line sensor 24 into, for example, a 12-bit digital value, and the CPU 50 performs AD conversion on the digital value indicating the amount of light received by each pixel. Obtained from the circuit 55. The line sensor 24 of the present embodiment is a charge storage type, and outputs a voltage signal for each pixel according to the amount of dispersed light incident during a predetermined storage time. The accumulation time in the line sensor 24 is set in the line sensor 24 via the I / O port 54 by the received light amount detection unit 12, more specifically, the CPU 50.

生体信号生成部13は、所定画素の受光結果、つまり、受光量を示す値に基づき生体信号を生成する。本実施形態では、生体の指先を測定対象90とし、約590nmの波長を含む光を検知する38番の画素の受光量に基づき生体信号を生成する。この生体信号は、指尖容積脈波信号としても参照される。生体信号の生成に使用する約590nmの波長は、血液中のヘモグロビンでの吸光量が比較的大きい波長である。   The biological signal generation unit 13 generates a biological signal based on a light reception result of a predetermined pixel, that is, a value indicating the amount of received light. In the present embodiment, a living body fingertip is used as a measurement target 90, and a living body signal is generated based on the amount of light received by a 38th pixel that detects light including a wavelength of about 590 nm. This biological signal is also referred to as a fingertip volume pulse wave signal. The wavelength of about 590 nm used for the generation of the biological signal is a wavelength at which the amount of light absorbed by hemoglobin in blood is relatively large.

外部通信部17は、外部通信回路56に対応し、外部機器30と通信を行う。外部機器30は、測定装置1に測定開始及び測定終了の指示を行う。また、測定装置1は、生体信号や、生体信号を複数回微分した信号や、生体信号の周期Cや、生体信号の特徴点等を外部機器30に送信する。なお、外部機器30は、生体信号の周期Cから脈拍の値を算出することができる。さらに、外部機器30は、各特徴点及びその値に基づき血管の硬化度合いを判定することができる。外部機器30は、例えば、パーソナルコンピュータやタブレット端末である。なお、外部機器30との通信は、有線であっても無線であっても良い。条件変更部14については後述する。   The external communication unit 17 corresponds to the external communication circuit 56 and communicates with the external device 30. The external device 30 instructs the measurement apparatus 1 to start measurement and end measurement. In addition, the measuring apparatus 1 transmits a biological signal, a signal obtained by differentiating the biological signal multiple times, a period C of the biological signal, a feature point of the biological signal, and the like to the external device 30. The external device 30 can calculate the pulse value from the cycle C of the biological signal. Furthermore, the external device 30 can determine the degree of hardening of the blood vessel based on each feature point and its value. The external device 30 is, for example, a personal computer or a tablet terminal. The communication with the external device 30 may be wired or wireless. The condition changing unit 14 will be described later.

図4は、生体情報の検出処理のフローチャートである。測定装置1は、外部機器30から測定開始指示を受信すると、S100で、測定条件を決定する。なお、測定条件は、例えば、白色光源21の発光強度や、ラインセンサ24の電荷蓄積時間(受光時間)である。例えば、発光制御部11は、白色光源21を所定の発光強度で発光させ、受光量検出部12は、生体信号の生成に使用する38番の画素の受光量を所定期間検出する。そして、制御部10は、所定期間で検出した受光量の最大値がAD変換回路55により検出可能な電圧範囲の最大値付近となる様に、白色光源21の発光強度及び/又はラインセンサ24の電荷蓄積時間を決定し、これを測定条件とする。なお所定期間は、生成する生体信号である指尖容積脈波信号の1周期以上とし、例えば、2秒とすることができる。なお、S100で測定条件を決定するための白色光源21の発光強度については予め決めておく。そして、制御部10は、この発光強度と、38番の画素の受光量の最大値に基づき、使用する白色光源21の発光強度及び/又はラインセンサ24の電荷蓄積時間を計算により求める。なお、白色光源21の発光強度及び/又はラインセンサ24の電荷蓄積時間を所定期間毎に変化させながら、受光量の最大値が適切となる白色光源21の発光強度及び/又はラインセンサ24の電荷蓄積時間を求める構成であっても良い。制御部10は、決定した測定条件を発光制御部11及び受光量検出部12にS101で設定する。これにより、発光制御部11は、S100で決定した発光強度で白色光源21を発光させる。また、受光量検出部12は、S100で決定した電荷蓄積時間をラインセンサ24に設定する。   FIG. 4 is a flowchart of the biometric information detection process. When the measurement apparatus 1 receives a measurement start instruction from the external device 30, the measurement apparatus 1 determines measurement conditions in S100. The measurement conditions are, for example, the light emission intensity of the white light source 21 and the charge accumulation time (light reception time) of the line sensor 24. For example, the light emission control unit 11 causes the white light source 21 to emit light with a predetermined light emission intensity, and the light reception amount detection unit 12 detects the light reception amount of the 38th pixel used for generating a biological signal for a predetermined period. Then, the control unit 10 determines the light emission intensity of the white light source 21 and / or the line sensor 24 so that the maximum value of the received light amount detected in the predetermined period is near the maximum value of the voltage range detectable by the AD conversion circuit 55. The charge accumulation time is determined and used as a measurement condition. The predetermined period may be one period or more of the fingertip volume pulse wave signal, which is a biological signal to be generated, and may be, for example, 2 seconds. Note that the emission intensity of the white light source 21 for determining the measurement conditions in S100 is determined in advance. The control unit 10 calculates the light emission intensity of the white light source 21 and / or the charge accumulation time of the line sensor 24 based on the light emission intensity and the maximum value of the amount of light received by the 38th pixel. It should be noted that while changing the light emission intensity of the white light source 21 and / or the charge accumulation time of the line sensor 24 for each predetermined period, the light emission intensity of the white light source 21 and / or the charge of the line sensor 24 at which the maximum value of the amount of received light is appropriate. The structure which calculates | requires accumulation | storage time may be sufficient. The control unit 10 sets the determined measurement conditions in the light emission control unit 11 and the received light amount detection unit 12 in S101. Thereby, the light emission control part 11 makes the white light source 21 light-emit with the light emission intensity determined by S100. The received light amount detection unit 12 sets the charge accumulation time determined in S100 in the line sensor 24.

生体信号生成部13は、38番の画素の各タイミングの受光量に基づき生体信号を生成し、周期算出部15及び特徴算出部16に生体信号を出力する。なお、生体信号生成部13は、38番の画素の各タイミングの受光量をそのまま時系列で示すことで生体信号を生成することができる。また、生体信号生成部13は、38番の画素の各タイミングの受光量を所定数毎に区切り、所定数の平均値を求め、この平均値を時系列で示すことで生体信号を生成することができる。また、生体信号生成部13は、38番の画素の所定数のタイミングの受光量の移動平均により生体信号を生成することができる。また、各タイミングの受光量又はその平均値を時系列で示す信号に対してフィルタ処理を行い、フィルタ処理後の信号を生体信号とすることができる。周期算出部15及び特徴算出部16は、S102で生体信号を検知する。そして、周期算出部15は、S103で、生体信号の周期Cを生体信号の極値に基づき判定する。周期算出部15は、例えば、生体信号の局所的最小値の時間間隔に基づき生体信号の周期Cを判定する。図5(A)は、生体信号と、生体信号の周期C(C1〜C4の4回分)の検出例を示している。また、周期算出部15は、生体信号を2回微分した加速度信号の局所的最大値の時間間隔に基づき生体信号の周期を判定することもできる。図5(B)は、加速度信号と、加速度信号の局所的最大値の時間間隔から判定される生体信号の周期C(C'1〜C'4の4回分)の検出例を示している。   The biological signal generation unit 13 generates a biological signal based on the amount of light received at each timing of the 38th pixel, and outputs the biological signal to the period calculation unit 15 and the feature calculation unit 16. The biological signal generation unit 13 can generate a biological signal by directly indicating the received light amount at each timing of the 38th pixel in time series. Further, the biological signal generation unit 13 generates a biological signal by dividing the amount of light received at each timing of the 38th pixel into a predetermined number, obtaining an average value of the predetermined number, and indicating the average value in time series. Can do. In addition, the biological signal generation unit 13 can generate a biological signal based on a moving average of the amount of received light at a predetermined number of times of the 38th pixel. In addition, it is possible to perform a filter process on a signal indicating the amount of light received at each timing or an average value thereof in time series, and use the signal after the filter process as a biological signal. The period calculation unit 15 and the feature calculation unit 16 detect a biological signal in S102. In step S103, the cycle calculation unit 15 determines the cycle C of the biological signal based on the extreme value of the biological signal. For example, the period calculation unit 15 determines the period C of the biological signal based on the time interval of the local minimum value of the biological signal. FIG. 5A shows a detection example of a biological signal and a period C (four times of C1 to C4) of the biological signal. Moreover, the period calculation part 15 can also determine the period of a biological signal based on the time interval of the local maximum value of the acceleration signal which differentiated the biological signal twice. FIG. 5B shows a detection example of the period C (four times of C′1 to C′4) of the biological signal determined from the time interval between the acceleration signal and the local maximum value of the acceleration signal.

また、特徴算出部16は、S104で、生体信号の特徴点及びその値を算出する。本実施形態においては、生体信号の周期Cの開始タイミングを基点として、生体信号を2回微分した加速度信号の局所的最大値及び局所的最小値の最初の5つを特徴点とする。なお、生体信号の周期Cの開始タイミングは、生体信号の局所的最小値のタイミングとする。図5(C)は、5つの特徴点a、b、c、d及びeの一例をしている。なお、特徴算出部16は、生体信号を4回微分した信号の局所的最大値及び局所的最小値を特徴点とすることもできる。より一般的には、特徴算出部16は、生体信号を1回以上微分した微分信号の変化点の情報を特徴量とすることができる。また、特徴点とする数は、4に限定されず、他の数であっても良い。外部通信部17は、S105で、生体信号と、加速度信号と、生体信号の周期Cと、特徴点及びその値と、を外部機器30に出力する。制御部10は、S106で、外部機器30から測定終了指示を受信したかを判定し、測定終了指示を受信するまで、S102から処理を繰り返す。   In step S104, the feature calculation unit 16 calculates feature points and values of the biological signal. In the present embodiment, the first five of the local maximum value and the local minimum value of the acceleration signal obtained by differentiating the biological signal twice with the start timing of the period C of the biological signal as a base point are feature points. Note that the start timing of the cycle C of the biological signal is the timing of the local minimum value of the biological signal. FIG. 5C shows an example of five feature points a, b, c, d, and e. The feature calculation unit 16 can also use the local maximum value and the local minimum value of the signal obtained by differentiating the biological signal four times as the feature points. More generally, the feature calculation unit 16 can use, as the feature amount, information on a change point of the differential signal obtained by differentiating the biological signal once or more. Further, the number of feature points is not limited to 4, and may be other numbers. In step S <b> 105, the external communication unit 17 outputs the biological signal, the acceleration signal, the period C of the biological signal, the feature point, and its value to the external device 30. In S106, the control unit 10 determines whether a measurement end instruction is received from the external device 30, and repeats the process from S102 until the measurement end instruction is received.

図6は、図4のS102からS105の処理を繰り返している間に行う、測定条件の変更処理のフローチャートである。S200で、条件変更部14は、周期算出部15が、生体信号の周期Cを算出するまで待機する。図7(A)は、タイミングTaにおいて、周期算出部15が、生体信号の周期C1の終わりを検知した状態を示している。本実施形態において、周期算出部15は、生体信号の振幅が所定時間以上連続して上昇することを検出することで、生体信号の局所的最小値を検出している。つまり、周期算出部15は、生体信号の周期C1の終了時間(局所的最小値となった時刻)を事後的に検出する。   FIG. 6 is a flowchart of measurement condition change processing performed while the processing from S102 to S105 in FIG. 4 is repeated. In S200, the condition changing unit 14 waits until the cycle calculating unit 15 calculates the cycle C of the biological signal. FIG. 7A shows a state in which the cycle calculation unit 15 detects the end of the cycle C1 of the biological signal at the timing Ta. In the present embodiment, the period calculation unit 15 detects the local minimum value of the biological signal by detecting that the amplitude of the biological signal continuously increases for a predetermined time or more. That is, the period calculation unit 15 detects the end time (the time when the local minimum value is reached) of the period C1 of the biological signal afterwards.

タイミングTaで生体信号の1つ前の周期の終了を検出すると、条件変更部14は、S201で、現在の周期C(図7(A)の周期C2)での特徴算出部16による特徴点算出の終了まで待機する。図7(A)には、特徴点の算出が終了したタイミングをタイミングTbとして示している。特徴点の算出が完了すると、条件変更部14は、S202で、現在の周期C2の開始タイミングから生体信号の特徴点の算出終了までの時間を特徴点算出期間Pとして算出する。特徴点算出期間Pは、周期C1の終了タイミング(周期C2の開始タイミング)からタイミングTbまでの期間となる。条件変更部14は、S203で、測定条件の変更の必要性を判定する。例えば、条件変更部14は、現在の周期の特徴点算出期間Pにおける生体信号のピーク値Mを求め、ピーク値Mが所定範囲内の値ではない場合、測定条件の変更が必要と判断する。例えば、AD変換回路55が12ビットの分解能であるとすると、所定範囲は、AD変換回路55で検出可能な最大値付近である3800〜4000とすることができる。   When detecting the end of the previous cycle of the biological signal at the timing Ta, the condition changing unit 14 calculates the feature point by the feature calculating unit 16 in the current cycle C (cycle C2 in FIG. 7A) in S201. Wait until the end of. In FIG. 7A, the timing when the calculation of the feature points is completed is shown as timing Tb. When the calculation of the feature points is completed, the condition changing unit 14 calculates the time from the start timing of the current period C2 to the end of the calculation of the feature points of the biological signal as the feature point calculation period P in S202. The feature point calculation period P is a period from the end timing of the cycle C1 (start timing of the cycle C2) to the timing Tb. The condition changing unit 14 determines the necessity of changing the measurement conditions in S203. For example, the condition changing unit 14 obtains the peak value M of the biological signal in the feature point calculation period P of the current cycle, and determines that the measurement condition needs to be changed when the peak value M is not within a predetermined range. For example, if the AD conversion circuit 55 has a 12-bit resolution, the predetermined range can be 3800 to 4000, which is near the maximum value that can be detected by the AD conversion circuit 55.

条件変更部14は、測定条件の変更が必要ではないと判断すると、S207で、生体情報の測定が終了したかを判定し、終了していなければS200から処理を繰り返す。一方、測定条件の変更が必要と判断すると、条件変更部14は、S204で、測定条件の変更が可能であるかを判断する。本実施形態において、条件変更部14は、現在の周期C2の終了時刻を予測時刻CXとして推定し、予測時刻CXまでに測定条件の変更が完了する場合、測定条件の変更が可能と判定する。一方、予測時刻CXまでに測定条件の変更が完了しない場合、条件変更部14は、測定条件の変更が不可能と判定する。本実施形態においては、予測時刻CXを、周期C2の開始タイミングから1つ前の周期C1に対応する期間だけ後の時刻とする。なお、1つ前の周期Cではなく、過去複数回の周期Cの平均値を用いて予測時刻CXを算出する構成とすることもできる。なお、生体信号の周期は変動するため、条件変更部14は、生体信号の変動量である変動マージンZを予測時刻CXの算出に使用することができる。この場合、条件変更部14は、周期C2の開始タイミングから1つ前の周期、或いは、過去複数回の周期の平均値だけ後の時刻より、変動マージンZだけ早い時刻を予測時刻CXとする。なお、変動マージンZの値は、予め、ROM51に格納されている。本例では、変動マージンZを100ミリ秒としている。   If the condition changing unit 14 determines that the measurement condition does not need to be changed, the condition changing unit 14 determines in step S207 whether the measurement of the biometric information is completed. If not completed, the process is repeated from step S200. On the other hand, if it is determined that the measurement condition needs to be changed, the condition changing unit 14 determines whether the measurement condition can be changed in S204. In the present embodiment, the condition changing unit 14 estimates the end time of the current cycle C2 as the predicted time CX, and determines that the measurement condition can be changed when the change of the measurement condition is completed by the predicted time CX. On the other hand, when the change of the measurement condition is not completed by the predicted time CX, the condition changing unit 14 determines that the change of the measurement condition is impossible. In the present embodiment, the predicted time CX is set to a time after a period corresponding to the cycle C1 immediately before the start timing of the cycle C2. In addition, it can also be set as the structure which calculates the estimated time CX using the average value of several past periods C instead of the last period C. FIG. Since the cycle of the biological signal varies, the condition changing unit 14 can use the variation margin Z, which is the variation amount of the biological signal, for calculating the predicted time CX. In this case, the condition changing unit 14 sets the time earlier by the variation margin Z as the predicted time CX than the time one cycle before the start timing of the cycle C2 or the time after the average value of the past plural cycles. Note that the value of the fluctuation margin Z is stored in the ROM 51 in advance. In this example, the fluctuation margin Z is set to 100 milliseconds.

条件変更部14は、特徴点算出期間Pと、測定条件の変更に必要な変更時間Dと、の合計値S1を求め、周期C2の開始タイミングから合計値S1だけ後の時刻を完了時刻CPとする。そして、条件変更部14は、予測時刻CXよりも完了時刻CPが遅いと測定条件の変更が不可であると判定し、そうでなければ測定条件の変更が可能であると判定する。言い換えると、条件変更部14は、特徴量の算出が完了したタイミングTbから予測時刻CXまでの期間内に測定条件の変更が完了するかを、当該期間と変更時間Dとを比較することで判定する。つまり、条件変更部14は、当該期間が変更時間Dより短いと測定条件の変更が不可であると判定し、そうでなければ測定条件の変更が可能であると判定する。ここで、変更時間Dとは、測定条件を変更してから、生体信号が安定し、よって、生体信号に基づき周期及び特徴点を判定できるようになるまでの時間である。例えば、白色光源21の発光強度を変更する場合には、発光強度の安定待ち時間が変更時間Dには含まれる。また、受光量検出部12がローパスフィルタ等のフィルタ回路を有する場合にはフィルタの時定数に基づく時間が変更時間Dに含まれる。さらに、生体信号生成部13が、時系列のデジタル値の移動平均処理等により生体信号を生成する場合には、平均処理に要する時間が変更時間Dには含まれる。本実施形態では、測定中は、白色光源21の発光強度のみを変更し、生体信号生成部13は、時系列のデジタル値を移動平均処理して生体信号を生成しているものとする。この場合、発光強度の安定待ち時間を20ミリ秒とし、移動平均処理に要する時間を80ミリ秒とし、変更時間Dを、その合計である100ミリ秒とすることができる。   The condition changing unit 14 obtains the total value S1 of the feature point calculation period P and the change time D necessary for changing the measurement condition, and sets the time after the total value S1 as the completion time CP from the start timing of the period C2. To do. Then, the condition changing unit 14 determines that the measurement condition cannot be changed if the completion time CP is later than the predicted time CX, and otherwise determines that the measurement condition can be changed. In other words, the condition changing unit 14 determines whether the change of the measurement condition is completed within the period from the timing Tb when the calculation of the feature amount is completed to the predicted time CX by comparing the period and the change time D. To do. That is, the condition changing unit 14 determines that the measurement condition cannot be changed if the period is shorter than the change time D, and otherwise determines that the measurement condition can be changed. Here, the change time D is the time from when the measurement condition is changed until the biological signal is stabilized, and thus the period and feature point can be determined based on the biological signal. For example, when changing the light emission intensity of the white light source 21, the light emission intensity stabilization wait time is included in the change time D. When the received light amount detection unit 12 has a filter circuit such as a low-pass filter, the time based on the time constant of the filter is included in the change time D. Further, when the biological signal generation unit 13 generates a biological signal by moving average processing of time-series digital values, the time required for the average processing is included in the change time D. In the present embodiment, it is assumed that only the light emission intensity of the white light source 21 is changed during measurement, and the biological signal generation unit 13 generates a biological signal by moving and averaging time-series digital values. In this case, the stabilization wait time of the light emission intensity can be set to 20 milliseconds, the time required for the moving average process can be set to 80 milliseconds, and the change time D can be set to 100 milliseconds, which is the sum of them.

なお、生体信号の局所的最小値の検出のため、局所的最小値となる前の生体信号の振幅の減少を所定期間だけ検出する必要がある場合、条件変更部14は、この所定期間を検知時間Yとして合計値S1の算出に考慮することができる。この場合、条件変更部14は、特徴点算出期間Pと、変更時間Dと、検知時間Yとの合計値S1を求めて完了時刻CPを判定する。つまり、条件変更部14は、特徴量の算出が完了したタイミングTbから予測時刻CXまでの期間が変更時間Dと検知時間Yとの和より短いと測定条件の変更が不可であると判定し、そうでなければ測定条件の変更が可能であると判定する。   In addition, in order to detect the local minimum value of the biological signal, when it is necessary to detect a decrease in the amplitude of the biological signal before the local minimum value is reached for a predetermined period, the condition changing unit 14 detects the predetermined period. The time Y can be taken into account in calculating the total value S1. In this case, the condition changing unit 14 determines the completion time CP by obtaining a total value S1 of the feature point calculation period P, the change time D, and the detection time Y. That is, the condition changing unit 14 determines that the measurement condition cannot be changed if the period from the timing Tb at which the calculation of the feature amount is completed to the predicted time CX is shorter than the sum of the change time D and the detection time Y, Otherwise, it is determined that the measurement conditions can be changed.

図6に戻り、S204で測定条件の変更が可能と判断すると、条件変更部14は、S205で特徴点算出期間Pの生体信号の最大値Mの値に基づいて、新しい測定条件を算出する。本例において測定中は、白色光源21の発光強度を変更し、ラインセンサ24の電荷蓄積時間は一定とする。測定条件の決定方法は、図4のS100で説明したのと同様であり、再度の説明は省略する。条件変更部14は、S206で、決定した測定条件に変更する。図7(B)は、タイミングTbで測定条件を変更した場合における、生体信号の例を示している。図7(C)は、タイミングTbで測定条件を変更した場合における、加速度信号の例を示している。条件変更部14は、外部機器30から測定終了指示を受信するまで、S200からの処理を繰り返し行う。   Returning to FIG. 6, if it is determined in S204 that the measurement condition can be changed, the condition changing unit 14 calculates a new measurement condition based on the value of the maximum value M of the biological signal in the feature point calculation period P in S205. During measurement in this example, the emission intensity of the white light source 21 is changed, and the charge accumulation time of the line sensor 24 is constant. The method for determining the measurement conditions is the same as that described in S100 of FIG. 4 and will not be described again. The condition changing unit 14 changes the measurement conditions determined in S206. FIG. 7B shows an example of a biological signal when the measurement condition is changed at the timing Tb. FIG. 7C shows an example of the acceleration signal when the measurement condition is changed at the timing Tb. The condition changing unit 14 repeats the processing from S200 until receiving a measurement end instruction from the external device 30.

例えば、開口部500の透明カバー400に測定対象90である指を押し付ける力や、透明カバー400と測定対象90との接触状態は、測定中に変化し得る。この場合、測定開始時に決定した測定条件が、状態変化後の測定対象90に対して適切ではなくなることがあり得る。このため、本実施形態では、測定中において必要に応じて測定条件を変更する。ここで、本実施形態では、生体信号のある周期において特徴点を算出してから、次の周期の開始までに、測定条件を変更可能であるか否かを判定する。そして、次の周期の開始までに、測定条件を変更可能であると、測定条件を変更する。つまり、生体信号のうち、生体情報の検出に使用しない信号期間において測定条件の変更が可能である場合に測定条件を変更する。この構成により、測定対象90の状態が変化した場合においても、生体信号の特徴点及び周期の算出を中断することなく、測定条件を変更することが可能となる。   For example, the force of pressing the finger that is the measurement target 90 against the transparent cover 400 of the opening 500 and the contact state between the transparent cover 400 and the measurement target 90 can change during the measurement. In this case, the measurement conditions determined at the start of measurement may not be appropriate for the measurement object 90 after the state change. For this reason, in this embodiment, measurement conditions are changed as needed during measurement. Here, in the present embodiment, it is determined whether the measurement condition can be changed after the feature point is calculated in a certain cycle of the biological signal and before the start of the next cycle. If the measurement condition can be changed by the start of the next cycle, the measurement condition is changed. That is, the measurement condition is changed when the measurement condition can be changed in a signal period that is not used for detection of biological information in the biological signal. With this configuration, even when the state of the measurement target 90 changes, the measurement conditions can be changed without interrupting the calculation of the feature points and period of the biological signal.

なお、例えば、図6のS204でNoであることは測定条件の変更が必要と判定したにも拘わらず測定条件の変更ができないことに相当する。したがって、所定回数だけ連続して図6のS204の処理がNoであると、強制的に測定条件を変更する構成とすることもできる。この場合、1つの周期における特徴点の算出が中断されることになるが、測定条件が適切ではないことに起因する生体信号の検出精度の劣化を抑えることができる。   For example, No in S204 in FIG. 6 corresponds to the fact that the measurement condition cannot be changed even though it is determined that the measurement condition needs to be changed. Therefore, if the process of S204 in FIG. 6 is No for a predetermined number of times, the measurement condition can be forcibly changed. In this case, calculation of feature points in one cycle is interrupted, but deterioration in detection accuracy of a biological signal due to inappropriate measurement conditions can be suppressed.

<第二実施形態>
続いて、第二実施形態について第一実施形態との相違点を中心に説明する。第一実施形態では、図6のS205で変更後の測定条件を決定し、S206で、決定した測定条件に変更していた。本実施形態では、測定条件の変更量に制限を設ける。図8は、本実施形態による測定条件の変更処理のフローチャートである。S300〜S303までの処理は、図6のS200〜S203までの処理と同様であり、その説明は省略する。
<Second embodiment>
Next, the second embodiment will be described focusing on the differences from the first embodiment. In the first embodiment, the changed measurement condition is determined in S205 of FIG. 6, and changed to the determined measurement condition in S206. In the present embodiment, there is a limit on the amount of change in measurement conditions. FIG. 8 is a flowchart of the measurement condition changing process according to the present embodiment. The processing from S300 to S303 is the same as the processing from S200 to S203 in FIG.

S303で測定条件の変更が必要であると判定すると、条件変更部14は、S304で、現在の周期が終了するまでに測定条件の変更が完了するかを判定する。本実施形態においても、第一実施形態と同様に、条件変更部14は、予測時刻CXを求め、現在時刻から変更時間Dだけ後の時刻を完了時刻CPとする。そして、条件変更部14は、予測時刻CXよりも完了時刻CPが遅いと測定条件の変更が不可であると判定し、そうでなければ測定条件の変更が可能であると判定する。S304で測定条件の変更が可能と判断すると、条件変更部14は、S305で、新しい測定条件を決定する。新しい測定条件の決定方法は、第一実施形態と同様である。続いて、条件変更部14は、S306で、測定条件の変更量を決定する。例えば、白色光源21の発光強度を変更する場合、条件変更部14は、変更量の上限を変更前の強度に対する割合で求める。例えば、割合を0.5%とすることできる。そして、条件変更部14は、S305で決定した測定条件に変更するための変更量が、この上限を超えていると、この上限を変更量とする。一方、S305で決定した測定条件に変更するための変更量が上限を超えてないと、S306で決定する変更量は、S305で決定した測定条件に変更するための変更量になる。なお、変更量の上限は、割合ではなく、その絶対値で規定することもできる。なお、変更量の上限値又は上限値を決定するためのパラメータは、予めROM51に格納されている。   If it is determined that the measurement condition needs to be changed in S303, the condition changing unit 14 determines whether the change of the measurement condition is completed by the end of the current cycle in S304. Also in the present embodiment, as in the first embodiment, the condition changing unit 14 obtains the predicted time CX, and sets the time after the change time D from the current time as the completion time CP. The condition changing unit 14 determines that the measurement condition cannot be changed if the completion time CP is later than the predicted time CX, and otherwise determines that the measurement condition can be changed. If it is determined that the measurement condition can be changed in S304, the condition changing unit 14 determines a new measurement condition in S305. The method for determining new measurement conditions is the same as in the first embodiment. Subsequently, the condition changing unit 14 determines the change amount of the measurement condition in S306. For example, when changing the light emission intensity of the white light source 21, the condition changing unit 14 obtains the upper limit of the change amount as a ratio with respect to the intensity before the change. For example, the ratio can be 0.5%. Then, if the change amount for changing to the measurement condition determined in S305 exceeds the upper limit, the condition changing unit 14 sets the upper limit as the change amount. On the other hand, if the change amount for changing to the measurement condition determined in S305 does not exceed the upper limit, the change amount determined in S306 becomes the change amount for changing to the measurement condition determined in S305. It should be noted that the upper limit of the change amount can be defined not by the ratio but by its absolute value. Note that the upper limit value of the change amount or a parameter for determining the upper limit value is stored in the ROM 51 in advance.

条件変更部14は、S307において、S306で決定した変更量だけ測定条件を変更する。そして、条件変更部14は、S308で、変更後の測定条件がS305で決定した測定条件であるかを判定する。変更後の測定条件がS305で決定した測定条件であると、条件変更部14は、S309で、生体情報の測定が終了したかを判定する。一方、変更後の測定条件がS305で決定した測定条件に達していないと、条件変更部14は、S304から処理を繰り返す。なお、S304から処理を繰り返す場合、条件変更部14は、次のS304での判定において、完了時刻CPを算出する基準となる現在時刻を、S307で測定条件を変更したタイミングより所定時間Wだけ後のタイミングとする。なお、所定時間Wは、変更時間Dと同じとすることができる。つまり、条件変更部14は、生体信号の1周期内で複数回、測定条件を変更する場合、測定条件の変更を行うタイミングの間隔として、所定時間Wを確保する。これは、前回の測定条件の変更後、生体信号が安定してから次の測定条件の変更を行う様にするためである。   In S307, the condition changing unit 14 changes the measurement condition by the change amount determined in S306. In step S308, the condition changing unit 14 determines whether the changed measurement condition is the measurement condition determined in step S305. If the measurement condition after the change is the measurement condition determined in S305, the condition changing unit 14 determines in S309 whether the measurement of the biological information is completed. On the other hand, if the changed measurement condition does not reach the measurement condition determined in S305, the condition changing unit 14 repeats the process from S304. When the process is repeated from S304, the condition changing unit 14 determines that the current time, which is a reference for calculating the completion time CP in the determination in the next S304, is a predetermined time W after the timing at which the measurement condition is changed in S307. The timing of The predetermined time W can be the same as the change time D. That is, when changing the measurement condition a plurality of times within one cycle of the biological signal, the condition changing unit 14 secures the predetermined time W as the timing interval for changing the measurement condition. This is to change the next measurement condition after the biological signal is stabilized after the previous change of the measurement condition.

図9(A)は、タイミングTbで特徴点の算出後、タイミングTcまでの間に複数回、測定条件の変更を行っている様子を示している。時間的に隣接する測定条件の変更タイミング間の間隔は、上述した様に所定時間Wである。図9(B)は、生体信号の2つの周期それぞれにおいて、タイミングTbからTcまでの期間に測定条件を変更した場合における、生体信号の例を示している。図9(C)は、生体信号の2つの周期それぞれにおいて、タイミングTbからTcまでの間に複数回、測定条件を変更した場合における、加速度信号の例を示している。   FIG. 9A shows a state in which the measurement condition is changed a plurality of times after the calculation of the feature point at the timing Tb and before the timing Tc. The interval between the change timings of the measurement conditions adjacent in time is the predetermined time W as described above. FIG. 9B shows an example of the biological signal when the measurement conditions are changed in the period from the timing Tb to Tc in each of the two cycles of the biological signal. FIG. 9C shows an example of an acceleration signal when the measurement condition is changed a plurality of times between timing Tb and Tc in each of the two periods of the biological signal.

以上、本実施形態では、測定条件の変更量に上限を設けることで、測定条件の変更に対する生体信号や加速度信号の変化を抑えることができる。例えば、生体信号として容積脈波信号を検知し、外部機器30に加速信号を表示しながら測定する場合、加速度信号の特徴点でない箇所における不要な信号変化を低減することができる。また、加速度信号の局所的最大値の間隔から脈拍数を算出する場合、測定条件の変更に起因する加速度信号の変化により脈拍数を誤検知する可能性を低減させることができる。   As described above, in this embodiment, by providing an upper limit for the change amount of the measurement condition, it is possible to suppress changes in the biological signal and the acceleration signal with respect to the change in the measurement condition. For example, when a volume pulse wave signal is detected as a biological signal and measurement is performed while displaying an acceleration signal on the external device 30, an unnecessary signal change at a location that is not a feature point of the acceleration signal can be reduced. Further, when the pulse rate is calculated from the interval between the local maximum values of the acceleration signal, it is possible to reduce the possibility that the pulse rate is erroneously detected due to a change in the acceleration signal resulting from the change of the measurement condition.

なお、上記各実施形態では、測定中に変更する測定条件を白色光源21の発光強度のみとしていた。しかしながら、白色光源21の発光強度に加えて、或いは、代えて、ラインセンサ24の電荷蓄積時間を変更することもできる。さらに、ラインセンサ24の受光感度(ゲイン)を切り替えられる場合、ラインセンサ24の受光感度(ゲイン)を測定条件として変更することもできる。   In each of the above embodiments, the measurement condition to be changed during measurement is only the emission intensity of the white light source 21. However, in addition to or instead of the light emission intensity of the white light source 21, the charge accumulation time of the line sensor 24 can be changed. Furthermore, when the light receiving sensitivity (gain) of the line sensor 24 can be switched, the light receiving sensitivity (gain) of the line sensor 24 can be changed as a measurement condition.

[その他の実施形態]
なお、上記実施形態において、測定装置1のラインセンサ24は、測定対象90からの反射光を受光するものであったが、透過光を受光する構成とすることもできる。また、本発明の測定装置1の外観や、機械的構造は、図10に示すものに限定されない。
[Other Embodiments]
In the above embodiment, the line sensor 24 of the measuring apparatus 1 receives reflected light from the measurement object 90, but may be configured to receive transmitted light. Moreover, the external appearance and mechanical structure of the measuring apparatus 1 of this invention are not limited to what is shown in FIG.

本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。   The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

21:白色光源、22:回折格子、24:ラインセンサ、13:生体信号生成部、15:周期判定部、16:特徴量算出部、14:条件変更部、   21: white light source, 22: diffraction grating, 24: line sensor, 13: biological signal generation unit, 15: period determination unit, 16: feature amount calculation unit, 14: condition change unit,

Claims (17)

測定位置に向けて光を射出する光源と、前記測定位置にある生体からの反射光、又は、前記測定位置にある生体を透過した透過光を波長に応じて分光する分光手段と、複数の画素を有し、前記複数の画素の各画素は、前記分光手段が分光した所定の波長を含む光を受光する受光手段と、を含む分光センサと、
前記受光手段の所定画素の受光結果から生体信号を生成する生成手段と、
前記生体信号の周期を判定する第1判定手段と、
前記生体信号の特徴量を検出する検出手段と、
前記生体の測定条件を前記分光センサに設定する設定手段と、
前記生体信号に基づき前記測定条件の変更が必要か否かを判定する第2判定手段と、
前記生体信号の第1周期において前記測定条件の変更が必要であると前記第2判定手段が判定すると、前記第1周期において前記検出手段が前記特徴量を検出してから前記第1周期の終了時刻までの期間内で前記測定条件の変更が可能であるかを判定する第3判定手段と、
を備えていることを特徴とする測定装置。
A light source that emits light toward the measurement position, a spectroscopic unit that splits reflected light from the living body at the measurement position or transmitted light that has passed through the living body at the measurement position, and a plurality of pixels Each of the plurality of pixels includes a light receiving means for receiving light including a predetermined wavelength dispersed by the light separating means, and a spectral sensor including:
Generating means for generating a biological signal from a light reception result of a predetermined pixel of the light receiving means;
First determination means for determining a cycle of the biological signal;
Detecting means for detecting a feature amount of the biological signal;
Setting means for setting the measurement condition of the living body in the spectroscopic sensor;
Second determination means for determining whether the measurement condition needs to be changed based on the biological signal;
When the second determination unit determines that the measurement condition needs to be changed in the first cycle of the biological signal, the detection unit detects the feature amount in the first cycle, and then the first cycle ends. Third determination means for determining whether the measurement condition can be changed within a period until time;
A measuring apparatus comprising:
前記第3判定手段は、前記第1周期より前の1つ以上の第2周期に基づき前記第1周期の終了時刻を推定することを特徴とする請求項1に記載の測定装置。   The measurement apparatus according to claim 1, wherein the third determination unit estimates an end time of the first period based on one or more second periods before the first period. 前記第3判定手段は、前記生体信号の周期の変動量にさらに基づき前記第1周期の終了時刻を推定することを特徴とする請求項2に記載の測定装置。   The measurement apparatus according to claim 2, wherein the third determination unit estimates an end time of the first period based further on a variation amount of the period of the biological signal. 前記第3判定手段は、前記測定条件の変更に要する時間と、前記第1周期において前記検出手段が前記特徴量を検出してから前記第1周期の終了時刻までの期間と、を比較することで、前記測定条件の変更が可能であるかを判定することを特徴とする請求項1から3のいずれか1項に記載の測定装置。   The third determination unit compares the time required for changing the measurement condition with a period from when the detection unit detects the feature amount to the end time of the first cycle in the first cycle. 4. The measurement apparatus according to claim 1, wherein it is determined whether the measurement condition can be changed. 前記第1判定手段は、前記生体信号の極値に基づき前記生体信号の周期を判定し、
前記第3判定手段は、前記測定条件の変更に要する時間と前記第1判定手段が前記生体信号の極値を検出するために必要な所定の時間との和を求め、前記和と前記第1周期において前記検出手段が前記特徴量を検出してから前記第1周期の終了時刻までの期間とを比較することで、前記測定条件の変更が可能であるかを判定することを特徴とする請求項1から3のいずれか1項に記載の測定装置。
The first determination means determines a cycle of the biological signal based on an extreme value of the biological signal,
The third determination means obtains a sum of a time required for changing the measurement condition and a predetermined time required for the first determination means to detect an extreme value of the biological signal, and the sum and the first It is determined whether the measurement condition can be changed by comparing a period from the detection of the feature amount by the detection period to a time until the end time of the first period. Item 4. The measuring device according to any one of Items 1 to 3.
前記第2判定手段は、前記生体信号の周期のピーク値に基づき当該周期において前記測定条件の変更が必要か否かを判定することを特徴とする請求項1から5のいずれか1項に記載の測定装置。   The said 2nd determination means determines whether the change of the said measurement conditions is required in the said period based on the peak value of the period of the said biomedical signal, The any one of Claim 1 to 5 characterized by the above-mentioned. Measuring device. 前記第2判定手段は、前記生体信号の周期のピーク値が所定範囲内にないと、当該周期において前記測定条件の変更が必要と判定することを特徴とする請求項6に記載の測定装置。   The measurement apparatus according to claim 6, wherein the second determination unit determines that the measurement condition needs to be changed in the period when the peak value of the period of the biological signal is not within a predetermined range. 前記第2判定手段が前記第1周期のピーク値に基づき前記測定条件の変更が必要であると判定すると、前記設定手段は、当該ピーク値に基づき変更後の測定条件を判定することを特徴とする請求項7に記載の測定装置。   When the second determination unit determines that the measurement condition needs to be changed based on the peak value of the first period, the setting unit determines the measurement condition after the change based on the peak value. The measuring apparatus according to claim 7. 前記第1周期において前記測定条件の変更が可能であると前記第3判定手段が判定すると、前記設定手段は、前記変更後の測定条件に変更することを特徴とする請求項8に記載の測定装置。   9. The measurement according to claim 8, wherein when the third determination unit determines that the measurement condition can be changed in the first period, the setting unit changes the measurement condition after the change. apparatus. 前記設定手段は、前記測定条件の変更量の上限値を求めるパラメータを有し、
前記第1周期において前記測定条件の変更が可能であると前記第3判定手段が判定すると、前記設定手段は、前記変更後の測定条件に変更するための変更量が前記上限値を超えているかを判定し、前記変更後の測定条件に変更するための変更量が前記上限値を超えていると、前記上限値だけ前記測定条件を変更することを特徴とする請求項8に記載の測定装置。
The setting means has a parameter for obtaining an upper limit value of the change amount of the measurement condition,
When the third determination unit determines that the measurement condition can be changed in the first period, the setting unit determines whether the change amount for changing to the measurement condition after the change exceeds the upper limit value. The measurement apparatus according to claim 8, wherein when the change amount for changing to the changed measurement condition exceeds the upper limit value, the measurement condition is changed by the upper limit value. .
前記設定手段が、前記上限値だけ前記測定条件を変更した場合、前記第3判定手段は、前記第1周期において前記測定条件のさらなる変更が可能であるかを判定することを特徴とする請求項10に記載の測定装置。   The third determination unit determines whether or not the measurement condition can be further changed in the first period when the setting unit changes the measurement condition by the upper limit value. 10. The measuring device according to 10. 前記測定条件は、前記光源の発光強度、前記受光手段の受光時間及び前記受光手段の受光感度の少なくとも1つを含むことを特徴とする請求項1から11のいずれか1項に記載の測定装置。   The measurement apparatus according to claim 1, wherein the measurement condition includes at least one of light emission intensity of the light source, light reception time of the light receiving unit, and light reception sensitivity of the light receiving unit. . 前記生体信号は、脈波信号であることを特徴とする請求項1から12のいずれか1項に記載の測定装置。   The measurement apparatus according to claim 1, wherein the biological signal is a pulse wave signal. 前記検出手段は、前記脈波信号を1回以上微分した信号の変化点の情報を前記特徴量とすることを特徴とする請求項13に記載の測定装置。   14. The measuring apparatus according to claim 13, wherein the detection unit uses information of a change point of a signal obtained by differentiating the pulse wave signal at least once as the feature amount. 前記検出手段は、前記脈波信号を2回、又は、4回微分した微分信号を求め、前記脈波信号の極値のタイミングから所定数の前記微分信号の極値を前記特徴量とすることを特徴とする請求項13又は14に記載の測定装置。   The detection means obtains a differential signal obtained by differentiating the pulse wave signal twice or four times, and uses a predetermined number of extreme values of the differential signal as the feature amount from the timing of the extreme value of the pulse wave signal. The measuring apparatus according to claim 13 or 14, characterized in that: 測定位置に向けて光を射出する光源と、前記測定位置にある生体からの反射光、又は、前記測定位置にある生体を透過した透過光を波長に応じて分光する分光手段と、複数の画素を有し、前記複数の画素の各画素は、前記分光手段が分光した所定の波長を含む光を受光する受光手段と、を含む分光センサと、
前記受光手段の所定画素の受光結果から生体信号を生成する生成手段と、
前記生体信号の特徴量を検出する検出手段と、
前記生体の測定条件を前記分光センサに設定する設定手段と、
を備え、
前記設定手段は、前記生体信号の周期において前記検出手段が前記特徴量を検出してから該周期の終了時刻までの期間内で、前記生体の測定条件を設定することを特徴とする測定装置。
A light source that emits light toward the measurement position, a spectroscopic unit that splits reflected light from the living body at the measurement position or transmitted light that has passed through the living body at the measurement position, and a plurality of pixels Each of the plurality of pixels includes a light receiving means for receiving light including a predetermined wavelength dispersed by the light separating means, and a spectral sensor including:
Generating means for generating a biological signal from a light reception result of a predetermined pixel of the light receiving means;
Detecting means for detecting a feature amount of the biological signal;
Setting means for setting the measurement condition of the living body in the spectroscopic sensor;
With
The measuring device is characterized in that the measuring condition of the living body is set within a period from when the detecting means detects the feature amount to the end time of the cycle in the cycle of the biological signal.
測定位置に向けて光を射出する光源と、前記測定位置にある生体からの反射光、又は、前記測定位置にある生体を透過した透過光を波長に応じて分光する分光手段と、複数の画素を有し、前記複数の画素の各画素は、前記分光手段が分光した所定の波長を含む光を受光する受光手段と、を含む分光センサと、
1つ以上のプロセッサーと、
を有する測定装置の前記1つ以上のプロセッサーで実行されると、
前記測定装置に、
前記生体の測定条件を前記分光センサに設定することと、
前記受光手段の所定画素の受光結果から生体信号を生成することと、
前記生体信号の周期を判定することと、
前記生体信号の特徴量を検出することと、
前記測定条件の変更が必要か否かを判定し、前記生体信号の第1周期において前記測定条件の変更が必要であると判定すると、前記第1周期において前記特徴量を検出してから前記第1周期の終了時刻までの期間内で前記測定条件の変更が可能であるかを判定することと、
を実行させることを特徴とするプログラム。
A light source that emits light toward the measurement position, a spectroscopic unit that splits reflected light from the living body at the measurement position or transmitted light that has passed through the living body at the measurement position, and a plurality of pixels Each of the plurality of pixels includes a light receiving means for receiving light including a predetermined wavelength dispersed by the light separating means, and a spectral sensor including:
One or more processors;
When executed on the one or more processors of the measuring device having
In the measuring device,
Setting the measurement conditions of the living body in the spectroscopic sensor;
Generating a biological signal from the light reception result of the predetermined pixel of the light receiving means;
Determining the period of the biological signal;
Detecting a feature quantity of the biological signal;
It is determined whether or not the measurement condition needs to be changed, and if it is determined that the measurement condition needs to be changed in the first period of the biological signal, the feature amount is detected in the first period and then the first amount is detected. Determining whether the measurement condition can be changed within a period up to an end time of one cycle;
A program characterized by having executed.
JP2018060732A 2018-03-27 2018-03-27 Biometric measurement device and program Pending JP2019170540A (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018060732A JP2019170540A (en) 2018-03-27 2018-03-27 Biometric measurement device and program
CN201910231521.0A CN110301888A (en) 2018-03-27 2019-03-26 Measuring device and computer readable storage medium
US16/364,261 US20190298192A1 (en) 2018-03-27 2019-03-26 Living body measurement apparatus and computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018060732A JP2019170540A (en) 2018-03-27 2018-03-27 Biometric measurement device and program

Publications (1)

Publication Number Publication Date
JP2019170540A true JP2019170540A (en) 2019-10-10

Family

ID=68168351

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018060732A Pending JP2019170540A (en) 2018-03-27 2018-03-27 Biometric measurement device and program

Country Status (1)

Country Link
JP (1) JP2019170540A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021054276A1 (en) 2019-09-19 2021-03-25 株式会社小糸製作所 Infrared lighting unit system for vehicle, infrared sensor system for vehicle, and lighting unit with built-in infrared sensor and lighting unit with built-in optical sensor for vehicle
WO2024085168A1 (en) * 2022-10-20 2024-04-25 富士フイルム株式会社 Blood flow measurement device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6564088B1 (en) * 2000-01-21 2003-05-13 University Of Massachusetts Probe for localized tissue spectroscopy
JP2010004972A (en) * 2008-06-25 2010-01-14 Fujitsu Ltd Photoelectric pulse wave measuring apparatus and program
JP2012183139A (en) * 2011-03-04 2012-09-27 Seiko Epson Corp Measuring device
WO2016067556A1 (en) * 2014-10-29 2016-05-06 日本電気株式会社 Biometric authentication apparatus and biometric authentication method
JP2017108905A (en) * 2015-12-16 2017-06-22 セイコーエプソン株式会社 Biological information detection device and control method for biological information detection device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6564088B1 (en) * 2000-01-21 2003-05-13 University Of Massachusetts Probe for localized tissue spectroscopy
JP2010004972A (en) * 2008-06-25 2010-01-14 Fujitsu Ltd Photoelectric pulse wave measuring apparatus and program
JP2012183139A (en) * 2011-03-04 2012-09-27 Seiko Epson Corp Measuring device
WO2016067556A1 (en) * 2014-10-29 2016-05-06 日本電気株式会社 Biometric authentication apparatus and biometric authentication method
JP2017108905A (en) * 2015-12-16 2017-06-22 セイコーエプソン株式会社 Biological information detection device and control method for biological information detection device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021054276A1 (en) 2019-09-19 2021-03-25 株式会社小糸製作所 Infrared lighting unit system for vehicle, infrared sensor system for vehicle, and lighting unit with built-in infrared sensor and lighting unit with built-in optical sensor for vehicle
WO2024085168A1 (en) * 2022-10-20 2024-04-25 富士フイルム株式会社 Blood flow measurement device

Similar Documents

Publication Publication Date Title
JP7299726B2 (en) Skin color measuring device and program
KR102487058B1 (en) Apparatus and method for measuring bio-information
US20170135617A1 (en) Optoelectronic modules operable to distinguish between signals indicative of reflections from an object of interest and signals indicative of a spurious reflection
US20160320486A1 (en) Range imaging apparatus and range imaging method
CN109717844B (en) Biological information measuring apparatus and its housing, and biological information measuring method
US10063785B2 (en) Colorimetry method, colorimetry device, spectral measurement method, spectral measurement device and electronic apparatus
US11553851B2 (en) Method for detecting biometric information by using spatial light modulator, electronic device, and storage medium
JP2013525923A (en) Laser scanning projector for interactive screen applications
KR20190081051A (en) Apparatus for measuring biological signal and operating method thereof
US10548491B2 (en) Photoplethysmography apparatus
EP3505911B1 (en) Optical sensor, and apparatus and method for measuring absorbance using the same
JP2019170540A (en) Biometric measurement device and program
KR20160023489A (en) Gesture detection device and detecting method of gesture using the same
JP2016146784A (en) Plant growth indicator measuring apparatus and method for the same
JP2020511637A (en) How to determine the operating conditions of a laser-based particle detector
US11538846B2 (en) Display, electronic device having the display, and method of estimating bio-information using the electronic device
JP7129189B2 (en) Biological measuring device and program
KR20190035234A (en) Apparatus for estimating biological component and operating method thereof
CN111067502A (en) Apparatus and method for estimating biological information
CN111356913B (en) Surface property inspection device and recording medium
KR20190014383A (en) Spectrum measurement apparatus and method, calibration method of spectrum measurement apparatus
EP3489642B1 (en) Spectrometer, method of controlling output gain of spectrometer, and apparatus and method for measuring bio-information
KR20190065089A (en) Apparatus and method for measuring bio-information
JP4728609B2 (en) Optical displacement meter
US10660552B2 (en) Detection device and detection method

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20210103

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210113

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210319

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220322

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220922