JP2011250915A - Posture recognition device - Google Patents

Posture recognition device Download PDF

Info

Publication number
JP2011250915A
JP2011250915A JP2010125515A JP2010125515A JP2011250915A JP 2011250915 A JP2011250915 A JP 2011250915A JP 2010125515 A JP2010125515 A JP 2010125515A JP 2010125515 A JP2010125515 A JP 2010125515A JP 2011250915 A JP2011250915 A JP 2011250915A
Authority
JP
Japan
Prior art keywords
posture
user
sitting
acceleration sensor
recognition device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010125515A
Other languages
Japanese (ja)
Inventor
Akihiro Okazaki
昭広 岡崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2010125515A priority Critical patent/JP2011250915A/en
Publication of JP2011250915A publication Critical patent/JP2011250915A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a posture recognition device by which a sitting posture of a user can be recognized.SOLUTION: The posture recognition device is built in a pedometer 1 worn on the waist of a user 10. Output signals of an acceleration sensor 2 commonly used as the pedometer 1 are input to a calculation processor 5. When the calculation processor 5 recognizes by output signals of the acceleration sensor 2 that the user 10 sits, the posture recognition device recognizes a sitting posture of the user 10 on the basis of signals output from the acceleration sensor 2 in a preset period. During a long time when the user 10 is wearing the pedometer 1 on, sensing and recognition of sitting postures useful for health even when the user sits except a time of walking or running are made.

Description

この発明は、使用者が着用して使用され、加速度センサを用いて使用者の姿勢を認識する姿勢認識装置に関し、特に、使用者が座っているときの姿勢を認識する姿勢認識装置に関する。   The present invention relates to a posture recognition device that is worn and used by a user and recognizes the posture of the user using an acceleration sensor, and more particularly to a posture recognition device that recognizes the posture when the user is sitting.

従来、加速度センサを内蔵し、加速度センサを用いて人間の行動などを認識する装置,システムが提案されている。   2. Description of the Related Art Conventionally, an apparatus and a system that incorporate an acceleration sensor and recognize human behavior using the acceleration sensor have been proposed.

特許文献1(特開昭62−106742号公報)では、使用者の身に付けた加速度センサの波形を分析して、立つ、座る、歩く、走る等の人間の動作状態を認識する装置が記載されている。   Patent Document 1 (Japanese Patent Application Laid-Open No. Sho 62-106742) describes a device that analyzes the waveform of an acceleration sensor worn by a user and recognizes a human motion state such as standing, sitting, walking, and running. Has been.

また、特許文献2(特開平10−024026号公報)では、使用者に携帯され、加速度センサに加えてジャイロセンサを用い、歩く、座る、食事をする、会議をするなどの使用者の大雑把な行動の認識が可能である装置が記載されている。   In Patent Document 2 (Japanese Patent Laid-Open No. 10-024026), a gyro sensor is used in addition to an acceleration sensor, and a rough outline of the user such as walking, sitting, eating, and meeting is used. An apparatus capable of recognizing behavior is described.

また、特許文献3(特開平10−113343号公報)は、人間の色々な行動,活動状況を認識可能なシステムであり、加速度センサを利用することが記載されている。   Patent Document 3 (Japanese Patent Laid-Open No. 10-113343) is a system capable of recognizing various human behaviors and activities, and describes using an acceleration sensor.

しかし、上述の特許文献1〜3に記載の技術では、使用者の着座姿勢を認識することはできていない。   However, the techniques described in Patent Documents 1 to 3 described above cannot recognize the user's sitting posture.

特開昭62−106742号公報Japanese Patent Laid-Open No. 62-106742 特開平10−024026号公報Japanese Patent Laid-Open No. 10-024026 特開平10−113343号公報JP-A-10-113343

そこで、この発明の課題は、使用者の着座姿勢を認識できる姿勢認識装置を提供することにあり、さらには、使用者の悪い着座姿勢を認識したときに使用者に報知できる姿勢認識装置を提供することにある。   Accordingly, an object of the present invention is to provide a posture recognition device capable of recognizing the user's sitting posture, and further to provide a posture recognition device capable of notifying the user when a bad sitting posture of the user is recognized. There is to do.

上記課題を解決するため、この発明の姿勢認識装置は、使用者の身体に装着される加速度センサと、
上記加速度センサの出力信号に基づいて上記使用者が座っているか否かを判別する判別部と、
上記判別部が上記使用者が座っていると判別した場合に上記加速度センサの出力信号に基づいて上記使用者の着座姿勢を認識して評価する認識評価部とを備えたことを特徴としている。
In order to solve the above problems, an attitude recognition device of the present invention includes an acceleration sensor that is worn on a user's body,
A determination unit for determining whether the user is sitting based on an output signal of the acceleration sensor;
And a recognition evaluation unit that recognizes and evaluates the sitting posture of the user based on an output signal of the acceleration sensor when the determination unit determines that the user is sitting.

この発明の姿勢認識装置によれば、使用者の身体に装着される加速度センサの出力信号に基づいて上記判別部は上記使用者が座っているか否かを判別し、上記認識評価部は、上記判別部が上記使用者が座っていると判別した場合に上記加速度センサの出力信号に基づいて上記使用者の着座姿勢を認識できる。   According to the posture recognition device of the present invention, the determination unit determines whether or not the user is sitting based on an output signal of an acceleration sensor worn on the user's body, and the recognition evaluation unit When the determination unit determines that the user is sitting, the sitting posture of the user can be recognized based on the output signal of the acceleration sensor.

なお、上記加速度センサは、例えば使用者の腰部に装着され、使用者の腰回りの姿勢の傾きを検出する。また、上記加速度センサは、一例として3軸加速度センサが採用される。   The acceleration sensor is mounted, for example, on the user's waist, and detects the inclination of the posture around the user's waist. Further, as the acceleration sensor, a triaxial acceleration sensor is employed as an example.

また、一実施形態の姿勢認識装置では、上記認識評価部は、
上記加速度センサの出力信号が入力されると共に上記加速度センサからの出力信号に基づいて上記使用者の着座姿勢を認識できるように予め学習させたニューラルネットワークを有する。
Further, in the posture recognition device according to one embodiment, the recognition evaluation unit includes:
A neural network trained in advance so that the user's sitting posture can be recognized based on an output signal from the acceleration sensor and an output signal from the acceleration sensor.

この実施形態によれば、上記認識評価部は、ニューラルネットワークを用いて使用者の着座姿勢の複雑,高度な認識が可能になる。   According to this embodiment, the recognition evaluation unit can perform complex and advanced recognition of the user's sitting posture using a neural network.

また、一実施形態の姿勢認識装置では、上記ニューラルネットワークに予め学習させる着座姿勢は、健康に悪い影響を及ぼす複数の異なる悪い着座姿勢を含んでおり、
上記認識評価部は、
上記ニューラルネットワークにより認識した上記使用者の着座姿勢が上記悪い着座姿勢であるときに、この悪い着座姿勢が使用者の健康に及ぼす悪影響を表す情報を上記使用者に報知する報知部を有する。
Further, in the posture recognition device of one embodiment, the sitting posture that the neural network learns in advance includes a plurality of different bad sitting postures that adversely affect health,
The recognition evaluation unit
When the user's sitting posture recognized by the neural network is the bad sitting posture, the information processing unit has a notifying unit for notifying the user of information representing an adverse effect of the bad sitting posture on the user's health.

この実施形態によれば、上記認識評価部が、上記ニューラルネットワークにより認識した上記使用者の着座姿勢が上記悪い着座姿勢であるときに、上記報知部によって、上記悪い着座姿勢が使用者の健康に及ぼす悪影響を表す情報を上記使用者に報知できる。   According to this embodiment, when the user's seating posture recognized by the neural network is the bad seating posture, the notification unit causes the bad seating posture to be healthy for the user. The user can be notified of information indicating the adverse effect.

また、一実施形態の姿勢認識装置では、上記認識評価部は、
予め定められた期間において、上記加速度センサの出力信号の予め設定された時間毎の複数の平均値を求め、この複数の平均値に基づいて上記使用者の着座姿勢を認識する。
Further, in the posture recognition device according to one embodiment, the recognition evaluation unit includes:
In a predetermined period, a plurality of average values for each preset time of the output signal of the acceleration sensor are obtained, and the seating posture of the user is recognized based on the plurality of average values.

この実施形態によれば、上記認識評価部は、上記加速度センサの出力信号の複数の平均値を求めることで、着座姿勢の認識に使うデータを増やして使用者の着座姿勢に関する複雑,高度な認識が可能になる。   According to this embodiment, the recognition evaluation unit obtains a plurality of average values of the output signals of the acceleration sensor, thereby increasing the data used for the recognition of the sitting posture, and the complicated and advanced recognition regarding the user's sitting posture. Is possible.

また、一実施形態の姿勢認識装置では、上記認識評価部は、
現在時刻から予め定めた設定時間以上前の時刻から現在時刻までの期間において、上記加速度センサの出力信号の予め設定された上記検出時間毎の複数の平均値を求め、この複数の平均値に基づいて上記使用者の着座姿勢を認識する。
Further, in the posture recognition device according to one embodiment, the recognition evaluation unit includes:
A plurality of average values for each detection time set in advance of the output signal of the acceleration sensor are obtained in a period from a time that is a predetermined time or more before the current time to the current time, and based on the plurality of average values To recognize the user's sitting posture.

この実施形態によれば、上記認識評価部は、上記加速度センサの出力信号の複数の上記平均値を、現在時刻から予め定めた設定時間以上前の時刻から現在時刻までの期間において求めることで、着座姿勢の認識に使うデータを増やして使用者の着座姿勢に関する複雑,高度な認識が可能になる。   According to this embodiment, the recognition evaluation unit obtains the plurality of average values of the output signals of the acceleration sensor in a period from a time before a preset time to a current time from a current time, By increasing the data used for the recognition of the sitting posture, it becomes possible to recognize complex and advanced recognition of the user's sitting posture.

また、一実施形態の姿勢認識装置では、上記設定時間は10秒間または60秒間であり、上記検出時間は1秒間である。   In one embodiment, the set time is 10 seconds or 60 seconds, and the detection time is 1 second.

この実施形態によれば、上記認識評価部は、上記加速度センサの出力信号の複数の上記平均値を、1秒毎に現在時刻から10秒間または60秒間以上前の時刻から現在時刻までの期間において求めることが、使用者の着座姿勢を求める上で人体の特性上好ましいことが判明した。   According to this embodiment, the recognition evaluation unit calculates a plurality of the average values of the output signals of the acceleration sensor every second for 10 seconds from the current time or for a period from the time before 60 seconds to the current time. It has been found that the determination is preferable in terms of the characteristics of the human body in determining the seating posture of the user.

また、一実施形態の歩数計は、上記姿勢認識装置を備えた。   Moreover, the pedometer of one Embodiment was provided with the said attitude | position recognition apparatus.

この歩数計によれば、使用者が歩数計を装着している長い時間の中で、歩いている時や走っている時以外の着座時にも健康に係わる有益な着座姿勢のセンシングと認識を行うことができる。また、上記加速度センサを上記歩数計の加速度センサと兼用とすることで、歩数計の構成要素としての加速度センサを利用して、使用者が座っているときの姿勢を認識できる。   This pedometer senses and recognizes a useful sitting posture related to health even when the user is seated while walking or running, during the long time the user is wearing the pedometer. be able to. Further, by using the acceleration sensor also as the acceleration sensor of the pedometer, the posture when the user is sitting can be recognized using the acceleration sensor as a component of the pedometer.

また、一実施形態の活動量計は、上記姿勢認識装置を備えた。   Moreover, the active mass meter of one Embodiment was provided with the said attitude | position recognition apparatus.

この活動量計によれば、使用者が活動量計を装着している長い時間の中で、歩いている時や走っている時以外の着座時にも健康に係わる有益な着座姿勢のセンシングと認識を行うことができる。また、上記加速度センサを上記活動量計の加速度センサと兼用とすることで、活動量計の構成要素としての加速度センサを利用して、使用者が座っているときの姿勢を認識できる。   According to this activity meter, sensing and recognition of a useful sitting posture related to health even when sitting other than when walking or running, while the user is wearing the activity meter. It can be performed. Further, by using the acceleration sensor also as the acceleration sensor of the activity meter, the posture when the user is sitting can be recognized using the acceleration sensor as a component of the activity meter.

すなわち、使用者があまり活動していなく、歩数計や活動量計があまり役立たない状況の中にも、健康に関心を持つ人にとって有益な検知すべき情報として着座姿勢が存在する。例えば、長時間座っているときの姿勢の良し悪しは、使用者の現在や将来における体のゆがみを知る上で参考になる。   That is, even in a situation where the user is not very active and the pedometer or activity meter is not very useful, there is a sitting posture as information to be detected that is useful for those who are interested in health. For example, good or bad posture when sitting for a long time is useful for knowing the user's current and future body distortions.

現在、加速度センサを主なセンシング手段とした歩数計や、消費カロリー,運動の大きさや活動量を見ることができる活動量計は多く存在する。こういったもののユーザーの中には運動不足を問題視している向きも多く、実際に歩いたり走ったりしている時間は少ないと推測できるが、例えば、仕事がデスクワークの人の場合、健康のために活動量計を、折角身に着けていても、装置がその機能を発揮するのは通勤時に歩く僅かな時間だけということもあり得る。このようなケースでは、本実施形態が有用になる。   Currently, there are many pedometers that use acceleration sensors as the main sensing means, and activity meters that allow you to see the calories burned, the size of exercise, and the amount of activity. There are many people who think that lack of exercise is a problem among these users, and it can be inferred that there is little time actually walking or running, but for example, if the work is a desk work person, Therefore, even if the activity meter is worn, the device may perform its function only for a short time walking during commuting. In such a case, the present embodiment is useful.

この発明の姿勢認識装置によれば、判別部により、使用者の身体に装着される加速度センサの出力信号に基づいて上記使用者が座っているか否かを判別し、使用者が座っていると判別部が判別した場合に認識評価部により加速度センサの出力信号に基づいて使用者の着座姿勢を認識できる。   According to the posture recognition device of the present invention, the determination unit determines whether or not the user is sitting based on the output signal of the acceleration sensor attached to the user's body, and when the user is sitting When the determination unit determines, the recognition evaluation unit can recognize the user's sitting posture based on the output signal of the acceleration sensor.

この発明の姿勢認識装置の実施形態が組み込まれた歩数計の正面、側面、分解側面を左方から右方へ順に示す模式図である。It is a schematic diagram which shows the front of the pedometer with which embodiment of the attitude | position recognition apparatus of this invention was integrated, the side surface, and the decomposition | disassembly side surface in order from the left. 上記歩数計の分解模式図である。It is a decomposition | disassembly schematic diagram of the said pedometer. 上記歩数計を腰(ベルト)に装着した使用者を模式的に示す図である。It is a figure which shows typically the user who mounted | wore the waist (belt) with the said pedometer. 上記実施形態が備えるニューラルネットワークの模式図である。It is a schematic diagram of the neural network with which the said embodiment is provided. 上記歩数計を装着した使用者が良い姿勢で座っている様子を示す模式図である。It is a schematic diagram which shows a mode that the user wearing the said pedometer is sitting in a good posture. 上記使用者が悪い姿勢の一例で座っている様子を示す模式図である。It is a schematic diagram which shows a mode that the said user is sitting with an example of a bad attitude | position. 上記使用者が悪い姿勢の他の例で座っている様子を示す模式図である。It is a schematic diagram which shows a mode that the said user is sitting in the other example of a bad attitude | position. 上記ニューラルネットワークの出力層n1〜n7と動作状態(着座姿勢の種類)との対応表を示す図である。It is a figure which shows the corresponding | compatible table | surface with the output layers n1-n7 of the said neural network, and an operation state (type of sitting posture). 上記ニューラルネットワークの学習フローチャートおよび姿勢認識フローチャートを示す図である。It is a figure which shows the learning flowchart and attitude | position recognition flowchart of the said neural network.

以下、この発明を図示の実施の形態により詳細に説明する。   Hereinafter, the present invention will be described in detail with reference to the illustrated embodiments.

図1Aは、この発明の姿勢認識装置の実施形態が組み込まれている歩数計1の正面、側面、分解側面を左方から右方へ順に示している。また、図1Bは、状態表示用のディスプレイ3が取り付けられた歩数計1の前面パネル1Aと、本体基板1Bと、ディスプレイ3,本体基板1Bの電源としての充電池(二次電池)6と、裏蓋1Cを示す模式図である。また、図1Cは、歩数計1を腰(ベルト)に装着した使用者10を模式的に示している。   FIG. 1A shows the front, side, and exploded side of a pedometer 1 in which an embodiment of the posture recognition device of the present invention is incorporated in order from left to right. 1B shows a front panel 1A of the pedometer 1 to which a display 3 for displaying the state is attached, a main body substrate 1B, a display 3, and a rechargeable battery (secondary battery) 6 as a power source for the main body substrate 1B. It is a schematic diagram which shows the back cover 1C. FIG. 1C schematically shows the user 10 wearing the pedometer 1 on his / her waist (belt).

図1Aに示すように、本体基板1Bおよび充電池6は、前面パネル1Aと裏蓋1Cの間に収容される。図1Bに示すように、本体基板1Bには、加速度センサ2と演算処理部5と無線通信機能部4とスピーカ15が実装されている。ディスプレイ3およびスピーカ15は、報知部を構成している。加速度センサ2は、X軸,Y軸,Z軸の3軸方向の加速度を±2Gの範囲で検知可能な3軸加速度センサとした。また、演算処理部5はマイクロコンピュータ等で構成され、後述するニューラルネットワーク20およびメモリ5Aを含んでいる。加速度センサ2の出力信号は演算処理部5に入力される。演算処理部5は、判別部および認識評価部を構成している。すなわち、加速度センサ2と演算処理部5が本実施形態の姿勢認識装置を構成しており、加速度センサ2は歩数計1の歩数を計測するための加速度センサと共用している。   As shown in FIG. 1A, the main body substrate 1B and the rechargeable battery 6 are accommodated between the front panel 1A and the back cover 1C. As shown in FIG. 1B, an acceleration sensor 2, an arithmetic processing unit 5, a wireless communication function unit 4, and a speaker 15 are mounted on the main board 1B. The display 3 and the speaker 15 constitute a notification unit. The acceleration sensor 2 is a three-axis acceleration sensor that can detect the acceleration in the triaxial directions of the X axis, the Y axis, and the Z axis within a range of ± 2G. The arithmetic processing unit 5 is composed of a microcomputer or the like, and includes a neural network 20 and a memory 5A described later. The output signal of the acceleration sensor 2 is input to the arithmetic processing unit 5. The arithmetic processing unit 5 constitutes a discrimination unit and a recognition evaluation unit. That is, the acceleration sensor 2 and the arithmetic processing unit 5 constitute the posture recognition device of the present embodiment, and the acceleration sensor 2 is shared with the acceleration sensor for measuring the number of steps of the pedometer 1.

また、無線通信機能部4は、携帯電話,パソコン等と歩数計1との間で無線通信のためのものである。この歩数計1は、無線通信機能部4によりブルートゥース(Bluetooth)で携帯電話と接続されているものとする。   The wireless communication function unit 4 is for wireless communication between the mobile phone, the personal computer, etc. and the pedometer 1. It is assumed that the pedometer 1 is connected to a mobile phone by the wireless communication function unit 4 via Bluetooth.

図1Cに示すように、使用者10は、歩数計1を腰の横側、概ねベルトの高さに取り付けて使用する。使用者10は、歩数計1を前述の位置に着用し、日中の生活を行う。使用者10の歩行中は、歩数計1は歩数計として機能し、使用者10の歩数や歩数に応じた標準的な表示カロリー等をディスプレイ3に表示する。   As shown in FIG. 1C, the user 10 uses the pedometer 1 attached to the side of the waist, generally at the height of the belt. The user 10 wears the pedometer 1 at the above-described position and lives in the daytime. While the user 10 is walking, the pedometer 1 functions as a pedometer, and displays standard display calories and the like corresponding to the number of steps of the user 10 and the number of steps.

一方、使用者10が椅子などに座った場合、演算処理部5は、加速度センサ2から入力された出力信号に基づいて使用者10が座ったことを認識する。ここで、使用者10の着座動作や立ち上がり動作には、それぞれの動作に応じた加速度センサ2の出力のパターンがある。したがって、使用者10が座ったことの認識は様々な方法で可能である。例えば、加速度センサ2の出力信号から、演算処理部5が上下方向に大きな加速度が発生した後で、かつ長時間に渡って歩数が増加しないことを検出した場合などは高い確率で使用者10が座っていると判定できる。また、演算処理部5は、後述するニューラルネットワーク20によるパターンマッチングを用いて、歩数カウントのバックグラウンドで着座,立ち上がりに相当する動きを認識することも可能である。ここで、後述するニューラルネットワーク20は、着座姿勢の判定のためのもので、加速度センサ2から入力される1秒毎のデータを60秒前まで遡って判定するという時定数の大きいシステムになっているが、着座動作,立ち上がり動作等の定常的でない動作を認識する場合は、例えば、加速度センサ2から入力される100ms(ミリ秒)毎のデータを5秒前まで遡って判定するなど、時定数を小さくして動作の認識を行う。   On the other hand, when the user 10 sits on a chair or the like, the arithmetic processing unit 5 recognizes that the user 10 is sitting based on an output signal input from the acceleration sensor 2. Here, the seating operation and the rising operation of the user 10 include output patterns of the acceleration sensor 2 corresponding to each operation. Therefore, recognition that the user 10 sat down is possible by various methods. For example, when the arithmetic processing unit 5 detects that the number of steps does not increase over a long time from the output signal of the acceleration sensor 2, the user 10 has a high probability. You can determine that you are sitting. The arithmetic processing unit 5 can also recognize movement corresponding to sitting and rising in the background of the step count by using pattern matching by the neural network 20 described later. Here, the neural network 20, which will be described later, is for determining the sitting posture, and is a system with a large time constant in which data per second input from the acceleration sensor 2 is determined retroactively 60 seconds before. However, when recognizing non-stationary movements such as a sitting movement and a rising movement, the time constant is determined by, for example, determining data every 100 ms (milliseconds) input from the acceleration sensor 2 up to 5 seconds before. Recognize the motion with a small.

使用者10が椅子などに座って、演算処理部5が加速度センサ2からの出力信号に基づいて、使用者10が座った状態になったと判断すると、歩数計1に組み込まれた姿勢認識装置は、着座姿勢検知モードへ移行する。この着座姿勢検知モードでは、上記認識評価部をなす演算処理部5は、加速度センサ2が出力する出力信号の1秒間における平均を平均値Aとし、この平均値Aの1分間における平均値(以下、平均値Bと言う)、上記平均値Aの1分間における分散、上記平均値Aのゼロクロス回数を利用して、使用者10の着座姿勢を認識する。   When the user 10 sits on a chair or the like and the arithmetic processing unit 5 determines that the user 10 is in a sitting state based on an output signal from the acceleration sensor 2, the posture recognition device incorporated in the pedometer 1 is Then, transition to the sitting posture detection mode. In this sitting posture detection mode, the arithmetic processing unit 5 that constitutes the recognition and evaluation unit sets the average value A for one second of the output signal output from the acceleration sensor 2 as an average value A, and the average value for one minute (hereinafter referred to as the average value A). , The average value B), the dispersion of the average value A over 1 minute, and the number of zero crossings of the average value A are used to recognize the sitting posture of the user 10.

例えば、図3Aに示すように、座った使用者10が良い姿勢を取っている場合について説明する。この場合、加速度センサ2の出力信号の平均値Bは、加速度センサ2の3軸のXYZ直交座標系から見た重力方向を表す値になる。図3Aに示す良い姿勢の場合、上記姿勢認識装置の加速度センサ2のZ軸が上を向いている。このため、上記姿勢認識装置の加速度センサ2は、出力信号として、−Z方向に1G相当の値を出力することになる。また、使用者10が図3Aに示すような良い姿勢を取っているときには、加速度センサ2の出力信号の平均値Aの1分間における分散,および平均値Aのゼロクロス回数については、小さくなる傾向がある。   For example, as shown in FIG. 3A, a case where the user 10 sitting is in a good posture will be described. In this case, the average value B of the output signal of the acceleration sensor 2 is a value representing the direction of gravity as viewed from the three-axis XYZ orthogonal coordinate system of the acceleration sensor 2. In the case of the good posture shown in FIG. 3A, the Z axis of the acceleration sensor 2 of the posture recognition device is facing upward. For this reason, the acceleration sensor 2 of the posture recognition device outputs a value equivalent to 1G in the −Z direction as an output signal. Further, when the user 10 takes a good posture as shown in FIG. 3A, the dispersion of the average value A of the output signal of the acceleration sensor 2 in one minute and the number of zero crossings of the average value A tend to be small. is there.

一方、座った使用者10が、図3Bに示す悪い姿勢を取っている場合は、重力の方向が−Z方向から大きくずれるので、加速度センサ2の出力信号の平均値Bは、−Z方向から大きくずれた方向に1G相当の値となる。図3Bに示す悪い姿勢の場合、加速度センサ2の出力信号の平均値Aの1分間における分散,および平均値Aのゼロクロス回数については、悪い姿勢ではあるがあまり大きくならない傾向がある。   On the other hand, when the sitting user 10 takes the bad posture shown in FIG. 3B, the direction of gravity is greatly deviated from the −Z direction, so the average value B of the output signal of the acceleration sensor 2 is from the −Z direction. It becomes a value equivalent to 1G in the direction greatly deviated. In the case of the bad posture shown in FIG. 3B, the dispersion of the average value A of the output signal of the acceleration sensor 2 in one minute and the number of zero crossings of the average value A tend to be not so large although they are in a bad posture.

また、座った使用者51が、図3Cに示す悪い姿勢を取っている場合は、重力の方向が図3Aに示す良い姿勢の場合の−Z方向と図3Bに示す悪い姿勢の場合の−Z方向との中間程度の方向になる。この図3Cの悪い姿勢では、加速度センサ2の出力信号の平均値Bは、図3Cの−Z方向からずれた方向に1G相当の値となるが図3Bの悪い姿勢に比べると−Z方向からのずれは小さくなる。図3Bに示す悪い姿勢は、背筋が丸まった姿勢になっているので、内臓,骨格,肩や首の筋肉などに大きな負担がある。よって、使用者10の姿勢が落ち着かない傾向があり、結果として、平均値Aの1分間における分散,および平均値Aのゼロクロスは大きくなる。   In addition, when the sitting user 51 takes the bad posture shown in FIG. 3C, the -Z direction in the case of the good posture shown in FIG. 3A and the -Z in the case of the bad posture shown in FIG. 3B. The direction is about the middle of the direction. In the bad posture of FIG. 3C, the average value B of the output signal of the acceleration sensor 2 becomes a value equivalent to 1G in a direction shifted from the −Z direction of FIG. 3C, but from the −Z direction as compared with the bad posture of FIG. 3B. The shift is small. The bad posture shown in FIG. 3B is a posture in which the back muscles are rounded, and therefore there is a great burden on the internal organs, the skeleton, the muscles of the shoulders and the neck. Therefore, the posture of the user 10 tends not to settle down. As a result, the variance of the average value A in one minute and the zero cross of the average value A become large.

このように、良い姿勢,悪い姿勢については、加速度センサ2の出力信号の平均値Aの平均値Bと平均値Aの分散,ゼロクロスを併用することにより判別が可能である。図3A,図3B,図3Cに一例を示した姿勢以外の良い姿勢,悪い姿勢についても、それぞれ、加速度センサ2の出力信号の平均値Bと分散,ゼロクロスの値を見ると微妙な違いがある。このため、図3A〜図3Cの一例で説明したような簡単な場合分けではなく、より高度なパターン認識,判別法を用いれば上記微妙な違いによる着座姿勢の区別,認識が可能である。この実施形態の姿勢認識装置は、このようなより高度な判別を図2に示すニューラルネットワーク20を用いて行う。   As described above, the good posture and the bad posture can be discriminated by using both the average value B of the average value A of the output signal of the acceleration sensor 2, the variance of the average value A, and the zero cross. 3A, FIG. 3B, and FIG. 3C, there are subtle differences in the good and bad postures other than those shown in the examples as seen in the average value B, variance, and zero cross value of the output signal of the acceleration sensor 2, respectively. . For this reason, it is not a simple case classification as described in the example of FIG. 3A to FIG. 3C, and if a more advanced pattern recognition / discrimination method is used, the sitting posture can be distinguished and recognized by the above-mentioned subtle differences. The posture recognition apparatus according to this embodiment performs such more advanced determination using the neural network 20 shown in FIG.

加速度センサ2が出力する使用者の動き(姿勢)に応じた出力値は、演算処理部5に渡されて適切に信号処理が行われ、演算処理部5に設定されたニューラルネットワーク20に渡される。   The output value corresponding to the user's movement (posture) output from the acceleration sensor 2 is passed to the arithmetic processing unit 5 for appropriate signal processing, and passed to the neural network 20 set in the arithmetic processing unit 5. .

ニューラルネットワーク20は、予め、加速度センサ2の出力の値から良い姿勢,悪い姿勢の代表的な例を認識できるよう調整(学習)されており、入力信号が投入されると、「良い姿勢」、「腹筋が衰える姿勢」、「腰に悪い姿勢」などの各姿勢に対応する適切な応答を返す。   The neural network 20 has been adjusted (learned) in advance to recognize a typical example of a good posture and a bad posture from the output value of the acceleration sensor 2. When an input signal is input, the “good posture”, Returns an appropriate response corresponding to each posture such as “posture in which the abdominal muscles weaken”, “poor posture in the lower back”.

ニューラルネットワーク20によって認識した結果(着座姿勢)は、現在の着座姿勢の状態としてディスプレイ3に表示される。また、この認識した着座姿勢は、無線通信機能部4から無線を通じて携帯電話や、無線接続が確立されたパソコンの画面上にも表示可能である。   The result (sitting posture) recognized by the neural network 20 is displayed on the display 3 as the current sitting posture state. The recognized sitting posture can also be displayed from the wireless communication function unit 4 on the screen of a cellular phone or a personal computer with which wireless connection is established.

併せて、ニューラルネットワーク20によって認識した姿勢が引き起こす健康,美容面でのメリット,デメリットなどについてのデータベースを携帯電話やパソコン側に持たせることにより、「今の姿勢を取り続けると腰に悪い」、「肩こりを引き起こす」、「頭痛が生じる恐れがある」というような有意義な情報を使用者にフィードバックすることもできる。   At the same time, by providing the mobile phone or personal computer with a database on the health, beauty benefits, disadvantages, etc. caused by the posture recognized by the neural network 20, "it is bad for the waist if you keep the current posture", " Significant information such as “causes stiff shoulders” and “may cause headaches” can be fed back to the user.

次に、この実施形態の姿勢認識装置による認識の具体的な処理について説明する。動作状態の認識を行う時刻をt1とし、その時刻t1から60秒前の時刻をt0とする。加速度センサ2は1秒間に100サンプルの加速度を測定して、この1秒間に100サンプルの加速度を表す出力信号を演算処理部5に出力する。演算処理部5では、この100サンプルの加速度データを用いて、1秒毎のX方向,Y方向,Z方向の加速度の平均値(平均値A)を計算している。   Next, specific processing of recognition by the posture recognition device of this embodiment will be described. The time at which the operating state is recognized is t1, and the time 60 seconds before the time t1 is t0. The acceleration sensor 2 measures the acceleration of 100 samples per second and outputs an output signal representing the acceleration of 100 samples to the arithmetic processing unit 5 per second. The arithmetic processing unit 5 uses the 100 samples of acceleration data to calculate an average value (average value A) of accelerations in the X, Y, and Z directions every second.

演算処理部5は、時刻t0から時刻t1までの60秒間に、X方向,Y方向,Z方向の加速度の平均値Aを1秒周期で計算し、この3種類の平均値Aは、演算処理部5に内蔵されたメモリに現時点(時刻t1)の1秒前から60秒前(時刻t0)までの値が(3方向×60個)保持されている。   The arithmetic processing unit 5 calculates an average value A of accelerations in the X direction, the Y direction, and the Z direction in a period of 1 second for 60 seconds from time t0 to time t1, and these three kinds of average values A are calculated. In the memory built in the unit 5, values from 1 second before the current time (time t1) to 60 seconds before (time t0) (3 directions × 60) are held.

演算処理部5では、時刻t0〜時刻t1間の平均値Aのログを利用して、さらに、X方向,Y方向,Z方向それぞれの方向の平均値Aの上記60秒間における平均値(平均値B)を作成し、それぞれ、平均値X1,Y1,Z1とする。また、上記平均値Aを元に、同区間(t0〜t1)の標準偏差も求め、それぞれ、標準偏差X2,Y2,Z2とする。   The arithmetic processing unit 5 uses the log of the average value A between time t0 and time t1, and further calculates the average value (average value) of the average value A in the X direction, the Y direction, and the Z direction for 60 seconds. B) is created, and the average values are X1, Y1, and Z1, respectively. Further, based on the average value A, standard deviations in the same section (t0 to t1) are also obtained and are set as standard deviations X2, Y2, and Z2, respectively.

次に、演算処理部5では、時刻t0〜t1間におけるX,Y,Z方向の各方向の加速度の平均値Aの最大値と最小値を探索し、その最大値と最小値の差をそれぞれX3,Y3,Z3とする。また、演算処理部5では、同区間(t0〜t1)において、X,Y,Z方向の各方向の加速度の平均値Aのゼロクロス回数もカウントし、そのゼロクロス回数をそれぞれX4,Y4,Z4とする。   Next, the arithmetic processing unit 5 searches for the maximum value and the minimum value of the average value A of the acceleration in each direction in the X, Y, and Z directions between the times t0 and t1, and calculates the difference between the maximum value and the minimum value, respectively. Let X3, Y3, Z3. The arithmetic processing unit 5 also counts the number of zero crossings of the average value A of acceleration in each direction in the X, Y, and Z directions in the same section (t0 to t1), and the zero crossing times are X4, Y4, and Z4, respectively. To do.

加速度センサ2による実際の測定自体は、10ms(ミリ秒)周期で行っているが、上記平均値X1,Y1,Z1、標準偏差X2,Y2,Z2、最大値と最小値の差X3,Y3,Z3、ゼロクロス回数X4,Y4,Z4の計算は平均値Aを利用して60秒前の時刻t0から現時刻t1まで1秒周期で実施している。例えば、X軸,Y軸,Z軸の各方向の加速度の平均値B(X1,Y1,Z1)としては、X軸,Y軸,Z軸のうちの一つの軸方向について、現時点(t1)から現時点(t1)の60秒前(t0)までの60サンプルの平均値Aから計算された平均値Bが1秒毎に生成される、ということになる。   Actual measurement by the acceleration sensor 2 itself is performed at a cycle of 10 ms (milliseconds), but the average values X1, Y1, Z1, standard deviations X2, Y2, Z2, and the difference between the maximum value and the minimum value X3, Y3, The calculation of Z3 and the number of zero crossings X4, Y4, and Z4 is carried out using the average value A from the time t0 60 seconds before to the current time t1 in a cycle of 1 second. For example, the average value B (X1, Y1, Z1) of acceleration in each direction of the X axis, Y axis, and Z axis is the current time (t1) in one of the X axis, Y axis, and Z axis. That is, an average value B calculated from an average value A of 60 samples from the current time (t1) to 60 seconds before (t0) is generated every second.

なお、この実施形態の一例では、時刻t0から時刻t1の時間を60秒間としたが、時刻t0から時刻t1の時間は60秒間に限らないのは勿論で、例えば、40秒間、30秒間、10秒間、5秒間等に設定してもよく、他の所望の時間に設定できる。また、この実施形態の一例では、上記加速度の平均値Aを求める周期は1秒周期にしたが、上記加速度の平均値Aを求める周期は1秒周期に限らないのは勿論で、3秒間、2秒間、0.5秒間等に設定してもよく、他の所望の時間に設定できる。また、上記加速度の平均値Aを求める期間は、現在時刻から或る時間だけ前の或る期間に設定してもよい。   In the example of this embodiment, the time from the time t0 to the time t1 is set to 60 seconds. However, the time from the time t0 to the time t1 is not limited to 60 seconds. It may be set to 5 seconds, for example, or may be set to other desired time. Further, in the example of this embodiment, the cycle for obtaining the average value A of the acceleration is a 1-second cycle. However, the cycle for obtaining the average value A of the acceleration is not limited to the 1-second cycle, and for 3 seconds, It may be set to 2 seconds, 0.5 seconds, etc., and can be set to other desired times. Further, the period for obtaining the average value A of the acceleration may be set to a certain period before a certain time from the current time.

そして、演算処理部5では、これら計12個のデータ(X1,Y1,Z1、X2,Y2,Z2、X3,Y3,Z3、X4,Y4,Z4)を、図2に示すニューラルネットワーク20の12個の入力層i1〜i12に入力する。その結果として、使用者10がどの様な動作状態(姿勢)にあるかを出力層n1〜n7から取得する。上記加速度の平均値X1,Y1,Z1は入力層i1,i2,i3に入力され、標準偏差X2,Y2,Z2は入力層i4,i5,i6に入力される。また、最大値と最小値の差X3,Y3,Z3は入力層i7,i8,i9に入力され、ゼロクロス回数X4,Y4,Z4は入力層i10,i11,i12に入力される。   Then, in the arithmetic processing unit 5, the total 12 pieces of data (X1, Y1, Z1, X2, Y2, Z2, X3, Y3, Z3, X4, Y4, Z4) are converted into 12 of the neural network 20 shown in FIG. Input to the input layers i1 to i12. As a result, the operating state (posture) of the user 10 is acquired from the output layers n1 to n7. The average acceleration values X1, Y1, and Z1 are input to the input layers i1, i2, and i3, and the standard deviations X2, Y2, and Z2 are input to the input layers i4, i5, and i6. Differences X3, Y3, and Z3 between the maximum value and the minimum value are input to the input layers i7, i8, and i9, and the number of zero crossings X4, Y4, and Z4 are input to the input layers i10, i11, and i12.

ここで、判別対象の動作状態として7種類の姿勢がニューラルネットワーク20に予め学習されているものとする。このニューラルネットワーク7は、12個の入力層i1〜i12と、7個の中間層m1〜m7と、7個の出力層n1〜n7の3層とで構成されており、BP(バックプロパゲーション)法と呼ばれるアルゴリズムで学習している。このBP法を用いる手法においては、予め、入力の組(ここでは、X1〜X4,Y1〜Y4,Z1〜Z4の12種類の値)と、それに対応する適切な動作状態(着座姿勢)とのセットを大量に用意し、これを使って学習を行っている。具体的には、使用者が、予め座って、良い姿勢,悪い姿勢を取ったときの加速度データX1〜X4,Y1〜Y4,Z1〜Z4に相当するデータを開発者または試験用のスタッフ等を対象にして測定しておき、これを学習に用いる。   Here, it is assumed that seven types of postures are learned in advance in the neural network 20 as the operation states to be discriminated. This neural network 7 is composed of 12 input layers i1 to i12, 7 intermediate layers m1 to m7, and 7 output layers n1 to n7, and BP (back propagation). Learning with an algorithm called law. In the method using the BP method, a set of inputs (here, 12 types of values of X1 to X4, Y1 to Y4, Z1 to Z4) and an appropriate operation state (sitting posture) corresponding to the set are input. A large number of sets are prepared and used for learning. Specifically, the data corresponding to the acceleration data X1 to X4, Y1 to Y4, and Z1 to Z4 when the user sits in advance and takes a good posture or a bad posture is provided to a developer or a test staff. Measure the target and use it for learning.

図4は、ニューラルネットワーク20の出力層n1〜n7と動作状態(着座姿勢の種類)との関係を示す対応表である。何種類かの姿勢(図4では出力層n1〜n7の個数7から7種類の姿勢)について、対応する12個の加速度データX1〜X4,Y1〜Y4,Z1〜Z4を取得し、その12個の加速度データX1〜Z4を用いて、ニューラルネットワーク7に学習させる。すると、加速度データX1〜Z4を入力層i1〜i12に入れた際に、判定結果が出力層n1〜n7に出力される。出力層n1〜n7は、それぞれ、図4に示す表のように互いに異なる1つの着座姿勢に対応しており、12個の入力層i1〜i12に入力される12個の加速度データX1〜Z4によって、0から1までの値を取る。例えば、加速度センサ2の出力から前述の処理によって生成された、ニューラルネットワーク20の入力層i1〜i12への入力(X1〜Z4)の結果、出力層n1の値が1に近く、その他の出力層n2〜n7の値が0に近い場合、入力(X1〜Z4)の基になったその時の使用者10の姿勢は、出力層n1に対応する姿勢、すなわち「腰に悪い姿勢」であると判断する。   FIG. 4 is a correspondence table showing the relationship between the output layers n1 to n7 of the neural network 20 and the operation state (type of sitting posture). Twelve acceleration data X1 to X4, Y1 to Y4, and Z1 to Z4 corresponding to several types of postures (7 to 7 types of postures in the output layers n1 to n7 in FIG. 4) are acquired, and 12 of them are acquired. The neural network 7 is made to learn using the acceleration data X1 to Z4. Then, when the acceleration data X1 to Z4 are input to the input layers i1 to i12, the determination results are output to the output layers n1 to n7. Each of the output layers n1 to n7 corresponds to one sitting posture different from each other as shown in the table of FIG. 4, and is based on 12 pieces of acceleration data X1 to Z4 input to the 12 input layers i1 to i12. , Takes values from 0 to 1. For example, as a result of inputs (X1 to Z4) to the input layers i1 to i12 of the neural network 20 generated from the output of the acceleration sensor 2 by the above-described process, the value of the output layer n1 is close to 1, and the other output layers When the values of n2 to n7 are close to 0, it is determined that the posture of the user 10 that is the basis of the input (X1 to Z4) is the posture corresponding to the output layer n1, that is, the “poor posture for waist”. To do.

ニューラルネットワーク20の学習は、学習用に測定したデータを用い、PC(パーソナルコンピュータ)等で学習のためのアルゴリズムを実行することによって行う。大まかな流れは、図5に示す学習フローチャートの通りとする。   Learning of the neural network 20 is performed by executing an algorithm for learning on a PC (personal computer) or the like using data measured for learning. The general flow is the same as the learning flowchart shown in FIG.

すなわち、まず、ステップS1で、判別したい複数の着座姿勢に対応する加速度データを実測して取得する。この判別したい複数の着座姿勢とは、例えば、図4に示されるような、「腰に悪い姿勢」,「左右のバランスが悪い姿勢」,「良い姿勢」,「内臓に悪い姿勢」,「腹筋が衰える姿勢」,「肩こりを引き起こす姿勢」,「頭痛を引き起こす姿勢」である。そして、使用者10が、これらの姿勢でいる場合に加速度センサ2が出力する加速度データが演算処理部5に入力される。   That is, first, in step S1, acceleration data corresponding to a plurality of sitting postures to be discriminated are actually measured and acquired. The plurality of sitting postures to be determined are, for example, as shown in FIG. 4, “Poor posture on hips”, “Poor posture on right and left balance”, “Good posture”, “Poor posture on internal organs”, “Abdominal muscles” Are postures that cause weakness, postures that cause stiff shoulders, and postures that cause headaches. Then, the acceleration data output from the acceleration sensor 2 when the user 10 is in these postures is input to the arithmetic processing unit 5.

次に、ステップS2に進み、演算処理部5は、上記加速度データから上述の平均値X1,Y1,Z1、標準偏差X2,Y2,Z2、最大値と最小値の差X3,Y3,Z3、ゼロクロス回数X4,Y4,Z4等を含む教師データを算出する。   Next, in step S2, the arithmetic processing unit 5 calculates the above average values X1, Y1, Z1, standard deviations X2, Y2, Z2, the difference between the maximum value and the minimum value X3, Y3, Z3, zero crossing from the acceleration data. Teacher data including the number of times X4, Y4, Z4, etc. is calculated.

次に、ステップS3に進み、上記教師データを用いてニューラルネットワーク20に学習させる。次に、ステップS4に進み、上記学習により姿勢判別のための数式を得る。次に、ステップS5に進み、上記姿勢判別のための数式を演算処理部5に組み込む。   In step S3, the neural network 20 is trained using the teacher data. Next, it progresses to step S4 and the numerical formula for attitude | position discrimination | determination is obtained by the said learning. Next, the process proceeds to step S5, and the mathematical expression for posture determination is incorporated into the arithmetic processing unit 5.

図5の学習フローチャートによる学習の結果、学習が完了したニューラルネットワーク20と等価な計算式が得られる。この計算式を演算処理部5に組み込むことにより、この姿勢認識装置が組み込まれた歩数計1を使って、リアルタイムな姿勢の判定結果を使用者10にフィードバックすることができる。   As a result of learning according to the learning flowchart of FIG. 5, a calculation formula equivalent to the neural network 20 that has completed learning is obtained. By incorporating this calculation formula into the arithmetic processing unit 5, a real-time posture determination result can be fed back to the user 10 using the pedometer 1 in which the posture recognition device is incorporated.

演算処理部5による着座姿勢の判定は、使用者10が歩数計1を装着して活動している時間のうち、座っている(着席している)と判定されている間はリアルタイムで常時行う。この姿勢の判定の大まかな流れは、図5に示す認識フローチャートの通りである。   The determination of the sitting posture by the arithmetic processing unit 5 is always performed in real time while it is determined that the user 10 is sitting (sitting) during the time when the user 10 is wearing the pedometer 1 and is active. . The general flow of the posture determination is as shown in the recognition flowchart of FIG.

まず、ステップS11で、演算処理部5は、1秒周期で上記X方向,Y方向,Z方向の加速度の平均値Aを計算する。次に、ステップS12で、演算処理部5は、姿勢認識を行う時刻t1の60秒前t0からの時刻t1の1秒前までの1秒毎の平均値Aから、60個×3方向の平均値X1,Y1,Z1と標準偏差X2,Y2,Z2と最大値と最小値の差X3,Y3,Z3とゼロクロス回数X4,Y4,Z4を算出する。   First, in step S11, the arithmetic processing unit 5 calculates an average value A of accelerations in the X direction, the Y direction, and the Z direction at a cycle of 1 second. Next, in step S12, the arithmetic processing unit 5 calculates the average of 60 pieces × 3 directions from the average value A every second from t0 60 seconds before time t1 to 1 second before time t1 when posture recognition is performed. Values X1, Y1, and Z1, standard deviations X2, Y2, and Z2, differences between maximum and minimum values, X3, Y3, and Z3, and the number of zero crossings X4, Y4, and Z4 are calculated.

次に、ステップS13で、演算処理部5は、算出した平均値X1,Y1,Z1と標準偏差X2,Y2,Z2と最大値と最小値の差X3,Y3,Z3とゼロクロス回数X4,Y4,Z4をニューラルネットワーク20の入力層i1〜i12に入力する。すると、ステップS14で、ニューラルネットワーク20の出力層n1〜n7から前述の図4の対応表に示されるような7種類の着座姿勢に関する出力データが得られる。そして、ステップS15で、各出力層n1〜n7からの出力データから姿勢認識を行う時刻t1での使用者10の着座姿勢を判定し、ステップS16で、時刻t1での使用者10の着座姿勢の判定結果をディスプレイ3に表示する。また、上記判定結果は、無線通信機能部4により携帯電話やパソコンにログ保存する。   Next, in step S13, the arithmetic processing unit 5 calculates the calculated average values X1, Y1, Z1, standard deviations X2, Y2, Z2, the difference between the maximum value and the minimum value X3, Y3, Z3, and the number of zero crossings X4, Y4, Z4 is input to the input layers i1 to i12 of the neural network 20. Then, in step S14, output data relating to seven types of sitting postures as shown in the correspondence table of FIG. 4 is obtained from the output layers n1 to n7 of the neural network 20. In step S15, the sitting posture of the user 10 at time t1 when posture recognition is determined from the output data from each of the output layers n1 to n7. In step S16, the sitting posture of the user 10 at time t1 is determined. The determination result is displayed on the display 3. The determination result is stored in a log in a mobile phone or a personal computer by the wireless communication function unit 4.

この認識フローチャートのステップS11からステップS16のフローは、1秒周期で行われる。これによって、1秒毎に使用者10の着座姿勢を認識し、リアルタイムで認識結果を使用者10、あるいは、認識結果を利用する外部のシステム(例えば、健康維持目的とした携帯電話向けアプリケーション等)にフィードバックすることができる。また、着座姿勢が悪いことを使用者10にフィードバックする際には、この姿勢認識装置が組み込まれた歩数計1の本体に内蔵したスピーカ15を用い、警告音を発するなどして使用者10に自覚を促すアクションを行う。   The flow from step S11 to step S16 in this recognition flowchart is performed at a cycle of 1 second. As a result, the sitting posture of the user 10 is recognized every second, and the recognition result is recognized in real time by the user 10 or an external system using the recognition result (for example, an application for a mobile phone for the purpose of maintaining health). Can provide feedback. Further, when feeding back to the user 10 that the sitting posture is bad, the speaker 15 built in the main body of the pedometer 1 in which the posture recognition device is incorporated is used to give the user 10 a warning sound. Take action to promote awareness.

このように、加速度センサ2の出力の一定の時間区間における平均値,標準偏差,最大値と最小値との差,ゼロクロス回数を算出し、使用者10の着座姿勢の認識に使うデータを仮想的に増やし、この複数のパラメータを入力数の多いニューラルネットワーク20への入力として同時に認識している。これにより、ハードウェアは簡単でも、ソフトウェア的には仮想的に多数のデータから高度なアルゴリズムを用いて使用者10の着座姿勢を判定している状況になり、結果として使用者10の姿勢に関する複雑,高度な認識が可能になる。認識アルゴリズムに多くの情報を同時に処理できるニューラルネットワーク20を利用し、加速度センサ2の一定時間区間における出力から生成されたこれらのパラメータを併用して判別することによって、腰回りの姿勢が傾いているかというような簡単な認識だけでなく、例えば、上述のような「内臓に悪い姿勢を取っていないか」という複雑な内容の認識が可能になる。   In this way, the average value, standard deviation, difference between the maximum and minimum values, and the number of zero crossings in a certain time interval of the output of the acceleration sensor 2 are calculated, and the data used to recognize the seating posture of the user 10 is virtually The plurality of parameters are simultaneously recognized as inputs to the neural network 20 having a large number of inputs. As a result, even though the hardware is simple, the situation in which the sitting posture of the user 10 is determined using a high-level algorithm from a large number of data virtually in terms of software results, and as a result, the complexity of the posture of the user 10 is complicated. Therefore, advanced recognition is possible. Whether the posture around the waist is tilted by using the neural network 20 that can process a large amount of information at the same time as the recognition algorithm and discriminating these parameters generated from the output of the acceleration sensor 2 in a certain time interval. In addition to simple recognition as described above, for example, it is possible to recognize complex contents such as “whether the internal organs have a bad posture” as described above.

このように、本実施形態の姿勢認識装置は歩数計1に組み込まれており、歩数計1の構成要素(加速度センサ2,ディスプレイ3等)を使って使用者10が座っている状態の姿勢を推定し、悪い姿勢を検知した場合は携帯電話やPC(パーソナルコンピュータ)、あるいは歩数計1のディスプレイ3やスピーカ15を通じて使用者10に警告や指示を与えることができる。   As described above, the posture recognition device according to the present embodiment is incorporated in the pedometer 1, and the posture of the user 10 sitting using the components (acceleration sensor 2, display 3, etc.) of the pedometer 1 is determined. If the estimated posture is detected, a warning or an instruction can be given to the user 10 through a mobile phone, a PC (personal computer), or the display 3 or speaker 15 of the pedometer 1.

したがって、本実施形態の姿勢認識装置によれば、複数のセンサを使うことなく、シンプルなハードウェアでの高度な姿勢の認識が可能になり、体の様々なところにセンサを取り付ける必要もないので、歩数計のようなシンプルな装置において姿勢の検知が可能になる。よって、使用者10が歩数計1を装着している長い時間の中で、歩いている時や走っている時以外の着座時にも健康に係わる着座姿勢の有益なセンシングと認識を行い、使用者へ健康に関するフィードバックを行うことができる。つまり、常時身につけて使用する歩数計において、あまり役に立っていない「座っている時間」に、使用者の健康に役立つ情報をフィードバックできるようになり、歩数計を常時身に付ける意義が向上する。   Therefore, according to the posture recognition device of the present embodiment, it is possible to recognize advanced posture with simple hardware without using a plurality of sensors, and it is not necessary to attach sensors to various parts of the body. The posture can be detected in a simple device such as a pedometer. Therefore, in the long time that the user 10 is wearing the pedometer 1, the user 10 can perform useful sensing and recognition of the sitting posture related to health even when sitting other than when walking or running. Can provide feedback on health. In other words, in a pedometer that is always worn and used, information useful for the user's health can be fed back during “sitting time” that is not very useful, and the significance of wearing the pedometer constantly improves.

尚、上記実施形態の姿勢認識装置は、歩数計に組み込んだが活動量計に組み込んでもよく、さらには、他の装置に組み込まずに姿勢認識装置単体としてもよい。また、上記実施形態では、歩数計1と共に使用者の腰に装着したが、この発明の姿勢認識装置を装着する箇所は使用者の腰以外の足,腕,背中,腹,胸,頭,肩等であってもよい。   The posture recognition device of the above embodiment may be incorporated in the activity meter, although it is incorporated in the pedometer, and may be a single posture recognition device without being incorporated in another device. In the above embodiment, the pedometer 1 is worn on the user's waist, but the posture recognition device of the present invention is worn on the legs, arms, back, abdomen, chest, head, shoulders other than the user's waist. Etc.

1 歩数計
1A 前面パネル
1B 本体基板
1C 裏蓋
2 加速度センサ
3 ディスプレイ
4 無線通信機能部
5 演算処理部
5A メモリ
6 充電池
10 使用者
15 スピーカ
20 ニューラルネットワーク
DESCRIPTION OF SYMBOLS 1 Pedometer 1A Front panel 1B Main board 1C Back cover 2 Acceleration sensor 3 Display 4 Wireless communication function part 5 Arithmetic processing part 5A Memory 6 Rechargeable battery 10 User 15 Speaker 20 Neural network

Claims (8)

使用者の身体に装着される加速度センサと、
上記加速度センサの出力信号に基づいて上記使用者が座っているか否かを判別する判別部と、
上記判別部が上記使用者が座っていると判別した場合に上記加速度センサの出力信号に基づいて上記使用者の着座姿勢を認識して評価する認識評価部とを備えたことを特徴とする姿勢認識装置。
An acceleration sensor worn on the user's body;
A determination unit for determining whether the user is sitting based on an output signal of the acceleration sensor;
A posture comprising: a recognition evaluation unit for recognizing and evaluating the sitting posture of the user based on an output signal of the acceleration sensor when the determination unit determines that the user is sitting; Recognition device.
請求項1に記載の姿勢認識装置において、
上記認識評価部は、
上記加速度センサの出力信号が入力されると共に上記加速度センサからの出力信号に基づいて上記使用者の着座姿勢を認識できるように予め学習させたニューラルネットワークを有することを特徴とする姿勢認識装置。
The posture recognition device according to claim 1,
The recognition evaluation unit
A posture recognition apparatus comprising: a neural network that has been trained in advance so that the user's sitting posture can be recognized based on an output signal from the acceleration sensor and an output signal from the acceleration sensor.
請求項2に記載の姿勢認識装置において、
上記ニューラルネットワークに予め学習させる着座姿勢は、健康に悪い影響を及ぼす複数の異なる悪い着座姿勢を含んでおり、
上記認識評価部は、
上記ニューラルネットワークにより認識した上記使用者の着座姿勢が上記悪い着座姿勢であるときに、この悪い着座姿勢が使用者の健康に及ぼす悪影響を表す情報を上記使用者に報知する報知部を有することを特徴とする姿勢認識装置。
The posture recognition apparatus according to claim 2,
The sitting posture that the neural network learns in advance includes a plurality of different bad sitting postures that adversely affect health,
The recognition evaluation unit
When the user's sitting posture recognized by the neural network is the bad sitting posture, the information processing device has a notifying unit for notifying the user of information indicating an adverse effect of the bad sitting posture on the user's health. Characteristic posture recognition device.
請求項1から3のいずれか1つに記載の姿勢認識装置において、
上記認識評価部は、
予め定められた期間において、上記加速度センサの出力信号の予め設定された検出時間毎の複数の平均値を求め、この複数の平均値に基づいて上記使用者の着座姿勢を認識することを特徴とする姿勢認識装置。
In the posture recognition device according to any one of claims 1 to 3,
The recognition evaluation unit
In a predetermined period, a plurality of average values for each detection time set in advance of the output signal of the acceleration sensor are obtained, and the seating posture of the user is recognized based on the plurality of average values. Posture recognition device.
請求項1から4のいずれか1つに記載の姿勢認識装置において、
上記認識評価部は、
現在時刻から予め定めた設定時間以上前の時刻から現在時刻までの期間において、上記加速度センサの出力信号の予め設定された上記検出時間毎の複数の平均値を求め、この複数の平均値に基づいて上記使用者の着座姿勢を認識することを特徴とする姿勢認識装置。
In the posture recognition device according to any one of claims 1 to 4,
The recognition evaluation unit
A plurality of average values for each detection time set in advance of the output signal of the acceleration sensor are obtained in a period from a time that is a predetermined time or more before the current time to the current time, and based on the plurality of average values A posture recognition device characterized by recognizing the sitting posture of the user.
請求項5に記載の姿勢認識装置において、
上記設定時間は10秒間または60秒間であり、上記検出時間は1秒間であることを特徴とする姿勢認識装置。
In the posture recognition device according to claim 5,
The posture recognition apparatus characterized in that the set time is 10 seconds or 60 seconds, and the detection time is 1 second.
請求項1から6のいずれか1つに記載の姿勢認識装置を備えたことを特徴とする歩数計。   A pedometer comprising the posture recognition device according to any one of claims 1 to 6. 請求項1から6のいずれか1つに記載の姿勢認識装置を備えたことを特徴とする活動量計。   An activity meter comprising the posture recognition device according to any one of claims 1 to 6.
JP2010125515A 2010-06-01 2010-06-01 Posture recognition device Pending JP2011250915A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010125515A JP2011250915A (en) 2010-06-01 2010-06-01 Posture recognition device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010125515A JP2011250915A (en) 2010-06-01 2010-06-01 Posture recognition device

Publications (1)

Publication Number Publication Date
JP2011250915A true JP2011250915A (en) 2011-12-15

Family

ID=45415386

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010125515A Pending JP2011250915A (en) 2010-06-01 2010-06-01 Posture recognition device

Country Status (1)

Country Link
JP (1) JP2011250915A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014153835A (en) * 2013-02-06 2014-08-25 Ricoh Co Ltd Tap control device, tap control method, and program
JP2017107411A (en) * 2015-12-10 2017-06-15 株式会社堀場製作所 Driving recorder, program for driving recorder, and travel management system
JP2017531532A (en) * 2014-10-21 2017-10-26 ローゼンブラッド,ケニース,ローレンス Posture improvement apparatus, system and method
KR101842345B1 (en) * 2016-01-14 2018-03-27 건국대학교 산학협력단 Posture correction assist apparatus and method for operating posture correction assist apparatus
KR20180065476A (en) * 2016-12-08 2018-06-18 연세대학교 산학협력단 Method and apparatus for monitoring posture of users
CN108549834A (en) * 2018-03-08 2018-09-18 佛山市顺德区中山大学研究院 A kind of human body sitting posture recognition methods and its system based on flexible sensor
CN109243562A (en) * 2018-09-03 2019-01-18 陈怡� A kind of image makings method for improving based on Elman artificial neural network and genetic algorithms

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014153835A (en) * 2013-02-06 2014-08-25 Ricoh Co Ltd Tap control device, tap control method, and program
JP2017531532A (en) * 2014-10-21 2017-10-26 ローゼンブラッド,ケニース,ローレンス Posture improvement apparatus, system and method
JP2017107411A (en) * 2015-12-10 2017-06-15 株式会社堀場製作所 Driving recorder, program for driving recorder, and travel management system
KR101842345B1 (en) * 2016-01-14 2018-03-27 건국대학교 산학협력단 Posture correction assist apparatus and method for operating posture correction assist apparatus
KR20180065476A (en) * 2016-12-08 2018-06-18 연세대학교 산학협력단 Method and apparatus for monitoring posture of users
KR101880273B1 (en) 2016-12-08 2018-07-23 연세대학교 산학협력단 Method and apparatus for monitoring posture of users
CN108549834A (en) * 2018-03-08 2018-09-18 佛山市顺德区中山大学研究院 A kind of human body sitting posture recognition methods and its system based on flexible sensor
CN109243562A (en) * 2018-09-03 2019-01-18 陈怡� A kind of image makings method for improving based on Elman artificial neural network and genetic algorithms

Similar Documents

Publication Publication Date Title
JP2011250915A (en) Posture recognition device
JP5321002B2 (en) Body motion balance detection device, body motion balance detection program, body motion balance detection method
JP5504810B2 (en) Walking posture determination device, control program, and control method
TWI669681B (en) Electronic calculatiing apparatus, system, and method for providing body posture health information
CN104436596B (en) Device and motion support method are supported in motion
Velloso et al. Qualitative activity recognition of weight lifting exercises
JP5896240B2 (en) Exercise support device, exercise support method, and exercise support program
US9662072B2 (en) Exercise information detecting apparatus, exercise information detecting method, and computer-readable storage medium having exercise information detection program stored thereon
US20180264320A1 (en) System and method for automatic location detection for wearable sensors
CN107072543A (en) Posture apparatus for correcting, system and method
KR101989368B1 (en) smart exercise equipment, system method thereof
US20170215769A1 (en) Apparatus and a method for detecting the posture of the anatomy of a person
KR101974902B1 (en) smart exercise equipment, system method thereof
TW201842432A (en) Method, electronic apparatus and recording medium for automatically configuring sensors
KR20200080628A (en) A Posture Coaching System and Method for Weight Training by Motion Pattern
JP2011224122A (en) Behavior recognition device
KR102453304B1 (en) A system that provides virtual reality content for dementia prevention and self-diagnosis
CN111700624A (en) Mode recognition method and system for detecting motion gesture of smart bracelet
JP2020519381A (en) System and method for observing human performance
JP6241488B2 (en) Exercise support device, exercise support method, and exercise support program
KR101665773B1 (en) Clothes attachable type posture correction system
Wai et al. iBEST: Intelligent balance assessment and stability training system using smartphone
JP2009106374A (en) Display system for gait information
CN107708561A (en) Index equipment leading out, wearable device and portable set
US11564854B2 (en) Wheelchair pressure ulcer risk management coaching system and methodology