JP6381252B2 - Moving motion analysis apparatus and program - Google Patents

Moving motion analysis apparatus and program Download PDF

Info

Publication number
JP6381252B2
JP6381252B2 JP2014071134A JP2014071134A JP6381252B2 JP 6381252 B2 JP6381252 B2 JP 6381252B2 JP 2014071134 A JP2014071134 A JP 2014071134A JP 2014071134 A JP2014071134 A JP 2014071134A JP 6381252 B2 JP6381252 B2 JP 6381252B2
Authority
JP
Japan
Prior art keywords
time
acceleration
data
interest
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014071134A
Other languages
Japanese (ja)
Other versions
JP2015192694A (en
Inventor
裕輔 長谷川
裕輔 長谷川
康太郎 山浦
康太郎 山浦
ラジェンドラ マヨラン
ラジェンドラ マヨラン
祐次郎 矢崎
祐次郎 矢崎
知広 根岸
知広 根岸
Original Assignee
株式会社早稲田エルダリーヘルス事業団
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社早稲田エルダリーヘルス事業団 filed Critical 株式会社早稲田エルダリーヘルス事業団
Priority to JP2014071134A priority Critical patent/JP6381252B2/en
Publication of JP2015192694A publication Critical patent/JP2015192694A/en
Application granted granted Critical
Publication of JP6381252B2 publication Critical patent/JP6381252B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、加速度センサ(sensor)を用いて人の歩行などの移動運動を評価するための技術に関する。   The present invention relates to a technique for evaluating a moving motion such as walking of a person using an acceleration sensor.

従来、医療施設や介護施設等において、歩行障害を持つ患者に対するリハビリテーション(rehabilitation)が行われている。   Conventionally, rehabilitation for patients with gait disorders has been performed in medical facilities, nursing homes, and the like.

このリハビリテーションでは、一般的に、患者に適した歩行訓練プログラム(program)を作成したり、患者の回復レベル(level)を把握したりするために、理学療法士などの指導員が、患者の歩行運動を繰り返し評価する。   In this rehabilitation, an instructor, such as a physical therapist, generally uses a patient's gait exercises to create a gait training program suitable for the patient and to understand the patient's recovery level. Is repeatedly evaluated.

一方、近年においては、加速度センサを用いて人の歩行中に生じる加速度を測定し、その測定結果を用いて歩行運動の評価を行う試みが成されている(例えば、特許文献1,要約等参照)。   On the other hand, in recent years, an attempt has been made to measure acceleration generated during walking of a person using an acceleration sensor and to evaluate walking motion using the measurement result (see, for example, Patent Document 1, Abstract, etc.). ).

特開2013−059489号公報JP 2013-059489 A

一般的に、理学療法士などの指導員が患者の歩行運動を評価する場合、指導員は患者の歩行運動を目視で観察し主観的に評価する。そのため、評価結果が指導員の癖や習熟度、評価の時期などの違いによってばらつく傾向にあり、客観的な評価が難しい。   Generally, when an instructor such as a physical therapist evaluates a patient's walking motion, the instructor visually observes the patient's walking motion and evaluates it subjectively. For this reason, the evaluation results tend to vary depending on differences in the instructor's habits, proficiency level, evaluation timing, etc., making it difficult to objectively evaluate.

また、加速度センサを用いた既存の歩行評価技術においても、歩行運動の客観的な評価を可能にする技術は未だ確立されていない。特に、人の移動運動の中で関心が持たれる動作について加速度の情報を注意深く観察することは評価に有用であると考えられるが、そのような観察を効率よく行う方法は、未だ確立されていない。   Further, even in the existing walking evaluation technology using an acceleration sensor, a technology that enables objective evaluation of walking motion has not been established yet. In particular, careful observation of acceleration information about movements of interest in human movement is considered useful for evaluation, but no method has yet been established to efficiently perform such observations. .

例えば、加速度センサを用いた定量評価導入後も、指導員は、これまでと同様に、患者の歩行中には患者の傍らに付き、目視での評価や歩行介助に集中する必要があると考えられている。そのため、収集した加速度データは、リアルタイムで確認することはあまりなく、歩行終了後に確認することが一般的であると考えられる。一方、歩行運動の定量評価を最大化する上で、目視での評価と加速度データの解析結果とを、同じ時間軸上で同期させることは必要であるが、歩行終了後に両者を同期させることは容易ではない。   For example, after introduction of quantitative evaluation using an acceleration sensor, it is considered that the instructor needs to concentrate on visual evaluation and walking assistance during the walking of the patient, as in the past. ing. For this reason, the collected acceleration data is rarely confirmed in real time, and it is generally considered to be confirmed after the end of walking. On the other hand, in order to maximize the quantitative evaluation of walking motion, it is necessary to synchronize the visual evaluation and the analysis result of acceleration data on the same time axis, but it is necessary to synchronize both after the end of walking. It's not easy.

このような事情により、人の歩行などの移動運動における客観的かつ効率的な評価を可能にする技術が望まれている。   Under such circumstances, there is a demand for a technique that enables an objective and efficient evaluation in a moving motion such as walking of a person.

第1の観点の発明は、
人に取り付けられた加速度センサを用いて、前記人の移動運動中の各時刻における加速度を表す加速度データを収集する収集手段と、
前記加速度データが収集される前記人の移動運動中に、所望のタイミングに対応する時刻を関心時刻として記憶する記憶手段と、
前記収集された加速度データを所定の表示形態にて表示するとともに、前記関心時刻及び/または該関心時刻の周辺時刻における前記加速度データの表示上の位置を表示するよう、表示部を制御する表示制御手段と、を備えた移動運動解析装置を提供する。
The invention of the first aspect
Collecting means for collecting acceleration data representing acceleration at each time during the movement of the person using an acceleration sensor attached to the person;
Storage means for storing a time corresponding to a desired timing as a time of interest during the movement of the person from which the acceleration data is collected;
Display control for controlling the display unit to display the collected acceleration data in a predetermined display form and to display the position of the acceleration data at the time of interest and / or the time around the time of interest. And a mobile motion analysis apparatus comprising the means.

第2の観点の発明は、
前記表示制御手段が、前記関心時刻における加速度データの表示上の位置を表示するよう、前記表示部を制御する、上記第1の観点の移動運動解析装置を提供する。
The invention of the second aspect is
The mobile motion analysis apparatus according to the first aspect is provided, wherein the display control unit controls the display unit so as to display a position on the display of acceleration data at the time of interest.

第3の観点の発明は、
前記表示制御手段が、前記加速度データが収集される前記人の移動運動中の期間のうち前記関心時刻を含む一部の時間帯における加速度データの表示上の範囲を表示するよう、前記表示部を制御する、上記第1の観点の移動運動解析装置を提供する。
The invention of the third aspect is
The display unit is configured to display a display range of acceleration data in a part of a time period including the time of interest in a period during the movement of the person from which the acceleration data is collected. A moving motion analysis apparatus according to the first aspect for controlling is provided.

第4の観点の発明は、
前記時間帯が、前記人の所定の歩数分に相当する時間幅を有する、上記第3の観点の移動運動解析装置を提供する。
The invention of the fourth aspect is
The mobile motion analysis apparatus according to the third aspect, wherein the time zone has a time width corresponding to a predetermined number of steps of the person.

第5の観点の発明は、
前記記憶手段が、前記加速度データが収集される前記人の移動運動中に、操作者による所定の操作に応答して、該操作が成された時刻と実質的に同じ時刻を前記関心時刻として記憶する、上記第1の観点から第4の観点のいずれか一つの観点の移動運動解析装置を提供する。
The invention of the fifth aspect is
In response to a predetermined operation by the operator during the movement of the person from which the acceleration data is collected, the storage means stores a time substantially the same as the time at which the operation was performed as the time of interest. The mobile motion analysis apparatus according to any one of the first to fourth aspects is provided.

第6の観点の発明は、
前記記憶手段が、複数種類の操作と複数種類の関心時刻とを対応付けておき、前記操作者により行われた操作の種類に対応付けされた種類の関心時刻を記憶し、
前記表示制御手段が、前記関心時刻及び/または該関心時刻の周辺時刻における加速度データの表示上の位置と、該関心時刻の種類とを表示するよう、前記表示部を制御する、上記第5の観点の移動運動解析装置を提供する。
The invention of the sixth aspect is
The storage means associates a plurality of types of operations with a plurality of types of interest times, stores the types of interest times associated with the types of operations performed by the operator,
The display control means controls the display unit to display the position on the display of acceleration data at the time of interest and / or the time around the time of interest and the type of the time of interest. Provided is a moving motion analysis apparatus of a viewpoint.

第7の観点の発明は、
前記記憶手段が、前記収集された加速度データのうち一部が予め定められた条件を満たす場合に、該一部の加速度データが表す加速度が発生した時刻を前記関心時刻として記憶する、上記第1の観点から第4の観点のいずれか一つの観点の移動運動解析装置を提供する。
The invention of the seventh aspect
The storage means stores, as the time of interest, a time at which an acceleration represented by a part of the acceleration data occurs when a part of the collected acceleration data satisfies a predetermined condition. A moving motion analysis apparatus according to any one of the fourth aspects is provided.

第8の観点の発明は、
前記記憶手段が、前記加速度データが表す加速度が所定の閾値を超えるタイミングの時刻を前記関心時刻として記憶する、上記第7の観点の移動運動解析装置を提供する。
The invention of the eighth aspect
The mobile motion analysis apparatus according to the seventh aspect, in which the storage unit stores, as the time of interest, a time at which an acceleration represented by the acceleration data exceeds a predetermined threshold value.

第9の観点の発明は、
前記所定の閾値が、過去に収集された前記人の加速度データに基づいて設定される、上記第8の観点の移動運動解析装置を提供する。
The invention of the ninth aspect is
The mobile motion analysis apparatus according to the eighth aspect, in which the predetermined threshold is set based on the acceleration data of the person collected in the past.

第10の観点の発明は、
前記記憶手段が、前記加速度データが表す加速度の部分波形が所定の波形に近似する場合に、該部分波形が発生した時刻を前記関心時刻として記憶する、上記第7の観点の移動運動解析装置を提供する。
The invention of the tenth aspect is
The mobile motion analysis apparatus according to the seventh aspect, wherein the storage means stores, when the partial waveform of acceleration represented by the acceleration data approximates a predetermined waveform, the time when the partial waveform is generated as the time of interest. provide.

第11の観点の発明は、
前記所定の波形が、過去に収集された前記人の加速度データに基づいて設定される、上記第10の観点の移動運動解析装置を提供する。
The invention of the eleventh aspect is
The mobile motion analysis apparatus according to the tenth aspect is provided, wherein the predetermined waveform is set based on the acceleration data of the person collected in the past.

第12の観点の発明は、
前記加速度データが収集される前記人の移動運動中の期間における前記人の動画を録画する録画手段をさらに備えており、
前記表示制御手段が、前記加速度データが収集される前記人の移動運動中の期間のうち前記関心時刻を含む一部の時間帯に録画された部分的な動画を表示するよう、前記表示部を制御する、上記第1の観点から第11の観点のいずれか一つの観点の移動運動解析装置を提供する。
The invention of the twelfth aspect is
A recording means for recording the moving image of the person in a period during the movement of the person from which the acceleration data is collected;
The display unit is configured to display a partial moving image recorded in a part of a time zone including the time of interest in a period during the movement of the person from which the acceleration data is collected. A mobile motion analysis apparatus according to any one of the first to eleventh aspects to be controlled is provided.

第13の観点の発明は、
前記表示制御手段が、前記動画の再生時刻と同じ時刻における加速度データの表示上の位置を表示するよう、前記表示部を制御する、上記第12の観点の移動運動解析装置を提供する。
The invention of the thirteenth aspect is
The mobile motion analysis apparatus according to the twelfth aspect, wherein the display control unit controls the display unit so as to display a position on the display of acceleration data at the same time as the playback time of the moving image.

第14の観点の発明は、
前記表示制御手段は、前記加速度の時間変化を表すグラフを表示するよう、前記表示部を制御する、上記第1の観点から第13の観点のいずれか一つの観点の移動運動解析装置を提供する。
The invention of the fourteenth aspect is
The display control means provides the mobile motion analysis device according to any one of the first to thirteenth aspects, wherein the display unit is controlled to display a graph representing a time change of the acceleration. .

第15の観点の発明は、
前記特定手段が、互いに異なる第1方向及び第2方向の加速度について加速度データを特定し、
前記表示制御手段は、同一時刻における前記第1方向及び第2方向の加速度のヒストグラムを表すマップを表示するよう、前記表示部を制御する、上記第1の観点から第13の観点のいずれか一つの観点の移動運動解析装置を提供する。
The invention of the fifteenth aspect is
The specifying means specifies acceleration data for accelerations in different first and second directions;
The display control means controls the display unit to display a map representing a histogram of accelerations in the first direction and the second direction at the same time. Any one of the first to thirteenth aspects. Provided is a moving motion analysis apparatus of three viewpoints.

第16の観点の発明は、
前記特定手段が、互いに異なる第1方向及び第2方向の加速度について加速度データを特定し、
前記表示制御手段は、同一時刻における前記第1方向及び第2方向の加速度の軌跡を表すマップを表示するよう、前記表示部を制御する、上記第1の観点から第13の観点のいずれか一つの観点の移動運動解析装置を提供する。
The invention of the sixteenth aspect is
The specifying means specifies acceleration data for accelerations in different first and second directions;
The display control means controls the display unit so as to display a map representing a locus of acceleration in the first direction and the second direction at the same time. Any one of the first to thirteenth aspects. Provided is a moving motion analysis apparatus of three viewpoints.

第17の観点の発明は、
前記移動運動が、歩行である、上記第1の観点から第16の観点のいずれか一つの観点の移動運動解析装置を提供する。
The invention of the seventeenth aspect is
The mobile motion analysis device according to any one of the first to sixteenth aspects is provided, wherein the mobile motion is walking.

第18の観点の発明は、
人に取り付けられた加速度センサを用いて、前記人の移動運動中の各時刻における加速度を表す加速度データを収集する収集ステップと、
前記加速度データが収集される前記人の移動運動中に、所望のタイミングに対応する時刻を関心時刻として記憶する記憶ステップと、
前記収集された加速度データを所定の表示形態にて表示するとともに、前記関心時刻及び/または該関心時刻の周辺時刻における加速度データの表示上の位置を表示するよう、表示部を制御する表示制御ステップと、を備えた移動運動解析方法を提供する。
The invention of the eighteenth aspect is
Collecting acceleration data representing acceleration at each time during the movement of the person using an acceleration sensor attached to the person;
A storage step of storing a time corresponding to a desired timing as a time of interest during the movement of the person from which the acceleration data is collected;
A display control step for controlling the display unit to display the collected acceleration data in a predetermined display form and to display a position on the display of acceleration data at the time of interest and / or a time around the time of interest. And a moving motion analysis method comprising:

第19の観点の発明は、
人に取り付けられた加速度センサと、
前記加速度センサを用いて、前記人の移動運動中の各時刻における加速度を表す加速度データを収集する収集手段と、
前記加速度データが収集される前記人の移動運動中に、所望のタイミングに対応する時刻を関心時刻として記憶する記憶手段と、
前記収集された加速度データを所定の表示形態にて表示するとともに、前記関心時刻及び/または該関心時刻の周辺時刻における加速度データの表示上の位置を表示するよう、表示部を制御する表示制御手段と、を備えた移動運動解析システムを提供する。
The invention of the nineteenth aspect is
An acceleration sensor attached to a person,
Collecting means for collecting acceleration data representing acceleration at each time during the movement of the person using the acceleration sensor;
Storage means for storing a time corresponding to a desired timing as a time of interest during the movement of the person from which the acceleration data is collected;
Display control means for controlling the display unit to display the collected acceleration data in a predetermined display form and to display a position on the display of the acceleration data at the time of interest and / or a time around the time of interest. And a moving motion analysis system comprising:

第20の観点の発明は、
コンピュータを、上記第1の観点から第17の観点のいずれか一つの観点の移動運動解析装置として機能させるためのプログラムを提供する。
The invention of the twentieth aspect is
A program for causing a computer to function as the mobile motion analysis apparatus according to any one of the first to seventeenth aspects is provided.

ここで、「加速度データの表示上の位置を表示する」とは、その位置が操作者にとって認識できるような形態で表示することを意味し、例えば、その位置を指し示すマークを表示したり、その位置を他の位置と異なる色彩や模様で表示したりすることを含む。また、「加速度データの表示上の範囲を表示する」とは、その範囲が操作者にとって認識できるような形態で表示することを意味し、例えば、その範囲を指し示すマークを表示したり、その範囲を他の範囲と異なる色彩や模様で表示したりすることを含む。また、「関心時刻の種類」を表示するとは、関心時刻における加速度データの表示上の位置や範囲を表示する際に、その関心時刻の種類を表す情報を対応付けて表示したり、その関心時刻の種類に応じた色彩、模様、形状等で表示したりすることを含む。   Here, “displaying the position on the display of acceleration data” means displaying in such a form that the position can be recognized by the operator, for example, displaying a mark indicating the position, This includes displaying the position in a different color or pattern from the other positions. Further, “displaying the range on the display of acceleration data” means displaying the range in a form that can be recognized by the operator. For example, a mark indicating the range is displayed, or the range is displayed. Display in a different color or pattern from other ranges. In addition, “type of interest time” is displayed when information on the type of interest time is displayed in association with the position or range on the display of acceleration data at the interest time. Display with a color, pattern, shape, or the like corresponding to the type.

上記観点の発明によれば、人の移動運動の客観的かつ効率的な評価を可能にする。   According to the invention of the above aspect, it is possible to objectively and efficiently evaluate a person's movement.

歩行解析システムの構成を概略的に示す図である。It is a figure showing roughly composition of a walk analysis system. 第一実施形態に係る加速度センサモジュール及び歩行解析装置のハードウェアの構成を示す図である。It is a figure which shows the structure of the hardware of the acceleration sensor module and walk analysis apparatus which concern on 1st embodiment. 第一実施形態に係る加速度センサモジュール及び歩行解析装置の機能的な構成を示す機能ブロック図である。It is a functional block diagram which shows the functional structure of the acceleration sensor module and walking analysis apparatus which concern on 1st embodiment. 加速度データ解析部の機能的な構成を示す機能ブロック図である。It is a functional block diagram which shows the functional structure of an acceleration data analysis part. 第一実施形態に係る歩行解析システムにおける処理の流れを示すフロー図である。It is a flowchart which shows the flow of a process in the walk analysis system which concerns on 1st embodiment. 第一実施形態に係るデータ取得用画面の表示例を示す図である。It is a figure which shows the example of a display of the screen for data acquisition which concerns on 1st embodiment. 第一実施形態に係るデータ解析用画面の表示例(その1)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 1st embodiment (the 1). 第一実施形態に係るデータ解析用画面の表示例(その2)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 1st embodiment (the 2). 第一実施形態に係るデータ解析用画面の表示例(その3)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 1st embodiment (the 3). 第一実施形態に係るデータ解析用画面の表示例(その4)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 1st embodiment (the 4). 第一実施形態に係るデータ解析用画面の表示例(その5)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 1st embodiment (the 5). 第一実施形態に係るデータ解析用画面の表示例(その6)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 1st embodiment (the 6). 第二実施形態に係る加速度センサモジュール2及び歩行解析装置3のハードウェアの構成を示す図である。It is a figure which shows the structure of the hardware of the acceleration sensor module 2 and the walk analysis apparatus 3 which concern on 2nd embodiment. 第二実施形態に係る加速度センサモジュール2及び歩行解析装置3の機能的な構成を示す機能ブロック図である。It is a functional block diagram which shows the functional structure of the acceleration sensor module 2 and the walk analysis apparatus 3 which concern on 2nd embodiment. 第二実施形態に係る歩行解析システム1における処理の流れを示すフロー図である。It is a flowchart which shows the flow of a process in the walk analysis system 1 which concerns on 2nd embodiment. 第二実施形態に係るデータ取得用画面の表示例を示す図である。It is a figure which shows the example of a display of the screen for data acquisition which concerns on 2nd embodiment. 第二実施形態に係るデータ解析用画面の表示例(その1)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 2nd embodiment (the 1). 第二実施形態に係るデータ解析用画面の表示例(その2)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 2nd embodiment (the 2). 第二実施形態に係るデータ解析用画面の表示例(その3)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 2nd embodiment (the 3). 第二実施形態に係るデータ解析用画面の表示例(その4)を示す図である。It is a figure which shows the example of a display of the screen for data analysis which concerns on 2nd embodiment (the 4). 第一実施形態における本変形例の歩行解析システム1における処理の流れの一例を示すフロー図である。It is a flowchart which shows an example of the flow of a process in the walk analysis system 1 of this modification in 1st embodiment. タイムスタンプ自動入力条件の設定例を説明するための図である。It is a figure for demonstrating the example of a setting of time stamp automatic input conditions.

以下、発明の実施形態について説明する。なお、これにより発明は限定されない。   Embodiments of the invention will be described below. The invention is not limited thereby.

図1は、歩行解析システム(system)1の構成を概略的に示す図である。なお、歩行解析システム1は、発明における移動運動解析システムの一例である。   FIG. 1 is a diagram schematically showing a configuration of a gait analysis system (system) 1. The gait analysis system 1 is an example of the movement analysis system in the invention.

歩行解析システム1は、図1に示すように、加速度センサモジュール(sensor module)2と、歩行解析装置3とを有している。加速度センサモジュール2は、患者10の背面の腰部中央等に、粘着パッド(pad)やバンド(band)等により装着される。歩行解析装置3は、操作者11が携帯したり操作したりして使用される。なお、歩行解析装置3は、発明における移動運動解析装置の一例である。   The walking analysis system 1 includes an acceleration sensor module 2 and a walking analysis device 3 as shown in FIG. The acceleration sensor module 2 is attached to the center of the lower back of the patient 10 using an adhesive pad or a band. The walking analysis device 3 is used by the operator 11 to carry or operate. The walking analysis device 3 is an example of the mobile motion analysis device in the invention.

(第一実施形態)
図2は、第一実施形態に係る加速度センサモジュール2及び歩行解析装置3のハードウェア(hardware)の構成を示す図である。
(First embodiment)
FIG. 2 is a diagram illustrating a hardware configuration of the acceleration sensor module 2 and the gait analyzer 3 according to the first embodiment.

図2に示すように、加速度センサモジュール2は、プロセッサ(processor)21と、加速度センサ22と、メモリ(memory)23と、通信I/F(interface)24と、バッテリ(battery)25とを有している。歩行解析装置3は、例えば、スマートフォン(smart phone)、タブレット型コンピュータ(tablet computer)、ノートパソコン(note PC)などのコンピュータ端末であり、プロセッサ31と、ディスプレイ(display)32と、操作部33と、メモリ34と、通信I/F35と、バッテリ36とを有している。本例では、歩行解析装置3はスマートフォンである。なお、プロセッサ21及びプロセッサ31は、それぞれ、単一のプロセッサに限定されず、複数のプロセッサである場合も考えられる。   As shown in FIG. 2, the acceleration sensor module 2 includes a processor 21, an acceleration sensor 22, a memory 23, a communication I / F (interface) 24, and a battery 25. doing. The gait analysis device 3 is a computer terminal such as a smart phone, a tablet computer, or a notebook PC, and includes a processor 31, a display 32, an operation unit 33, and the like. , A memory 34, a communication I / F 35, and a battery 36. In this example, the walking analysis device 3 is a smartphone. Note that the processor 21 and the processor 31 are not limited to a single processor, but may be a plurality of processors.

図3は、第一実施形態に係る加速度センサモジュール2及び歩行解析装置3の機能的な構成を示す機能ブロック(block)図である。   FIG. 3 is a functional block diagram showing functional configurations of the acceleration sensor module 2 and the walking analysis device 3 according to the first embodiment.

加速度センサモジュール2は、図3に示すように、加速度センサ部201と、サンプリング(sampling)部202と、送信部203とを有している。なお、サンプリング部202及び送信部203は、プロセッサ21がメモリ23に記憶されている所定のプログラム(program)を読み出して実行することにより実現される。   As shown in FIG. 3, the acceleration sensor module 2 includes an acceleration sensor unit 201, a sampling unit 202, and a transmission unit 203. The sampling unit 202 and the transmission unit 203 are realized by the processor 21 reading out and executing a predetermined program stored in the memory 23.

加速度センサ部201は、センサ本体を基準とした3次元直交座標系におけるx,y,zの各軸方向の加速度成分について、その加速度成分に応じたアナログ(analog)信号をほぼリアルタイム(real time)に出力する。   The acceleration sensor unit 201 outputs an analog signal corresponding to the acceleration component in almost real time with respect to the acceleration component in each of the x, y, and z axes in the three-dimensional orthogonal coordinate system based on the sensor body. Output to.

サンプリング部202は、そのアナログ信号を所定のサンプリング周波数でサンプリングしてデジタル(digital)の加速度データに変換する。サンプリング周波数は、例えば128Hzである。サンプリング部202は、例えば、1g(重力加速度)=9.8m/s2=加速度データ値128となるスケール(scale)で、加速度データを出力する。なお、ここでは、加速度成分の正負は、右側寄り、前側寄り、上側寄りをそれぞれ正とする。 The sampling unit 202 samples the analog signal at a predetermined sampling frequency and converts it into digital acceleration data. The sampling frequency is, for example, 128 Hz. The sampling unit 202 outputs acceleration data at a scale where, for example, 1 g (gravitational acceleration) = 9.8 m / s 2 = acceleration data value 128. Here, the positive and negative acceleration components are positive on the right side, on the front side, and on the upper side.

送信部203は、サンプリングされた各時刻における加速度成分を表す加速度データをほぼリアルタイムにて無線で送信する。   The transmission unit 203 wirelessly transmits the acceleration data representing the sampled acceleration component at each time in almost real time.

なお、本例では、加速度センサモジュール2は、センサ本体のx軸方向、y軸方向及びz軸方向が、それぞれ、患者10のRL(Right-Left)方向、AP(Anterior-Posterior)方向及びSI(Superior-Inferior)方向と一致するように取り付けられる。RL方向、AP方向及びSI方向は、それぞれサジタル(sagittal)方向、コロナル(coronal)方向及びアキシャル(axial)方向とも言う。また、本例では、加速度センサモジュール2の姿勢(傾き、向き)は、患者10の歩行中において変化しないものと仮定する。   In this example, in the acceleration sensor module 2, the x-axis direction, the y-axis direction, and the z-axis direction of the sensor body are the RL (Right-Left) direction, AP (Anterior-Posterior) direction, and SI of the patient 10, respectively. (Superior-Inferior) It is attached to match the direction. The RL direction, the AP direction, and the SI direction are also referred to as a sagittal direction, a coronal direction, and an axial direction, respectively. In this example, it is assumed that the posture (inclination and orientation) of the acceleration sensor module 2 does not change during walking of the patient 10.

歩行解析装置3は、図3に示すように、操作部301と、ディスプレイ部302と、患者情報受付部303と、受信部304と、加速度データ取得制御部305と、タイムスタンプ(time stamp)入力制御部306と、データ解析部307と、時計部308と、表示制御部309と、記憶部310と、統括制御部311とを有している。患者情報受付部303、加速度データ取得制御部305、タイムスタンプ入力制御部306、データ解析部307、時計部308、表示制御部309、及び統括制御部311は、プロセッサ31がメモリ34に記憶されている所定のプログラムを読み出して実行することにより実現される。なお、加速度データ取得制御部305は、発明における収集手段の一例である。また、タイムスタンプ入力制御部306は、発明における記憶手段の一例である。また、データ解析部307及び表示制御部309は、発明における表示制御手段の一例である。   As shown in FIG. 3, the gait analysis device 3 includes an operation unit 301, a display unit 302, a patient information reception unit 303, a reception unit 304, an acceleration data acquisition control unit 305, and a time stamp input. A control unit 306, a data analysis unit 307, a clock unit 308, a display control unit 309, a storage unit 310, and an overall control unit 311 are included. The patient information reception unit 303, the acceleration data acquisition control unit 305, the time stamp input control unit 306, the data analysis unit 307, the clock unit 308, the display control unit 309, and the overall control unit 311 are stored in the memory 34 in the processor 31. This is realized by reading and executing a predetermined program. The acceleration data acquisition control unit 305 is an example of a collecting unit in the invention. The time stamp input control unit 306 is an example of a storage unit in the invention. The data analysis unit 307 and the display control unit 309 are examples of display control means in the invention.

操作部301は、操作者11の操作を受け付ける。操作部301は、例えば、タッチパネル(touch panel)、タッチパッド(touch pad)、キーボード(keyboard)、マウス(mouse)などにより構成されている。なお、操作者11は、例えば、医師や理学療法士などの指導員である。   The operation unit 301 receives an operation of the operator 11. The operation unit 301 includes, for example, a touch panel, a touch pad, a keyboard, a mouse, and the like. The operator 11 is an instructor such as a doctor or a physical therapist, for example.

ディスプレイ部302は、画像を表示する。ディスプレイ部302は、例えば、液晶パネル、有機ELパネルなどにより構成されている。   The display unit 302 displays an image. The display unit 302 is configured by, for example, a liquid crystal panel, an organic EL panel, or the like.

時計部308は、時計機能を有しており、時刻を表す情報を出力する。なお、時刻は、あるタイミングを基準とした相対的なものであってもよい。   The clock unit 308 has a clock function and outputs information representing time. The time may be relative to a certain timing.

患者情報受付部303は、患者情報の入力を受け付け、入力された患者情報を記憶部312に記憶させる。   The patient information accepting unit 303 accepts input of patient information and causes the storage unit 312 to store the input patient information.

受信部304は、加速度センサモジュール2の送信部203から送信された加速度データを無線で受信する。なお、送信部203と受信部304との無線通信には、例えば、ブルートゥース(Bluetooth(登録商標))等の規格を用いることができる。   The reception unit 304 wirelessly receives the acceleration data transmitted from the transmission unit 203 of the acceleration sensor module 2. Note that standards such as Bluetooth (registered trademark) can be used for wireless communication between the transmission unit 203 and the reception unit 304, for example.

加速度データ取得制御部305は、患者10の加速度データを取得するよう受信部304及び記憶部312を制御する。加速度データ取得制御部305は、データ収集開始から終了までの各時刻における加速度データを収集する。加速度データには、そのデータが取得された時刻情報が付帯される。時刻は、時計部308の出力に基づいて特定される。   The acceleration data acquisition control unit 305 controls the reception unit 304 and the storage unit 312 to acquire the acceleration data of the patient 10. The acceleration data acquisition control unit 305 collects acceleration data at each time from the start to the end of data collection. The acceleration data is accompanied by time information when the data was acquired. The time is specified based on the output of the clock unit 308.

タイムスタンプ入力制御部306は、データ収集中に操作者11の所望のタイミングでタイムスタンプの入力を受け付ける制御をする。ここで、タイムスタンプの入力とは、いわゆる打刻のことである。本例の場合、操作者11は、データ収集期間中に、所定の操作を行う。タイムスタンプ入力制御部306は、その操作に応答して、その操作が成された時刻を、関心時刻tiとして記憶する。タイムスタンプの入力は、データ収集中であれば、何回でも受け付ける。時刻は、時計部308の出力に基づいて特定される。   The time stamp input control unit 306 performs control to accept time stamp input at a timing desired by the operator 11 during data collection. Here, the input of the time stamp is a so-called stamping. In the case of this example, the operator 11 performs a predetermined operation during the data collection period. In response to the operation, the time stamp input control unit 306 stores the time when the operation is performed as the interest time ti. The time stamp can be input any number of times as long as data is being collected. The time is specified based on the output of the clock unit 308.

データ解析部307は、収集された加速度データの解析を行って、その解析結果を出力する。本例では、この際、入力されたタイムスタンプが表す関心時刻tiと、加速度データの取得時刻とのマッチングを行って、関心時刻ti及びその周辺時刻に取得された加速度データを特定する。データ解析部307の詳細については後述する。   The data analysis unit 307 analyzes the collected acceleration data and outputs the analysis result. In this example, at this time, the interest time ti represented by the input time stamp is matched with the acquisition time of the acceleration data, and the acceleration data acquired at the interest time ti and the surrounding time are specified. Details of the data analysis unit 307 will be described later.

表示制御部309は、ディスプレイ部302の画面に、収集された加速度データを所定の表示形態にて表示するとともに、入力されたタイムスタンプが表す関心時刻ti及びその周辺時刻の少なくとも一方における加速度データの表示上の位置を認識可能に表示するよう、ディスプレイ部302を制御する。本例では、加速度データの解析結果が表示される。   The display control unit 309 displays the collected acceleration data on the screen of the display unit 302 in a predetermined display form, and displays acceleration data at least one of the interest time ti and the surrounding time represented by the input time stamp. The display unit 302 is controlled so that the position on the display is recognizable. In this example, the analysis result of acceleration data is displayed.

記憶部310は、入力された患者情報、収集された加速度データ、タイムスタンプが表す関心時刻ti、加速度データの解析結果などを記憶する。なお、これらの情報は、必要に応じて、歩行解析装置3にLAN(Local Area Network)やインターネット(internet)を介して接続されたデータベース(database)41や外付けの記憶媒体42等に保存される。記憶媒体42としては、例えば、DVD−ROM、メモリカード(memory card)などが含まれる。   The storage unit 310 stores input patient information, collected acceleration data, a time of interest ti represented by a time stamp, an analysis result of acceleration data, and the like. These pieces of information are stored in a database 41 connected to the gait analysis device 3 via a LAN (Local Area Network) or the Internet (Internet), an external storage medium 42, or the like as necessary. The Examples of the storage medium 42 include a DVD-ROM and a memory card.

統括制御部311は、歩行解析装置3を構成する各部を統括的に制御する。本例では、統括制御部311は、一機能として、操作者11の操作に応じて歩行解析装置3の動作モードの切替え制御を行う。   The overall control unit 311 comprehensively controls each unit constituting the walking analysis apparatus 3. In this example, the overall control unit 311 performs switching control of the operation mode of the gait analysis device 3 according to the operation of the operator 11 as one function.

ここで、データ解析部307の詳細について説明する。加速度データ解析部307は、収集された加速度データに対して解析処理を行い、その解析結果を出力する。解析処理は、複数用意されている。加速度データ解析部307は、操作者11によって指定された解析処理を実行する。本例では、実行する解析処理として、収集された加速度データを基に各時刻における所定方向の加速度成分を特定し、その加速度成分の時間変化を表す加速度波形グラフや、同時刻に取得された2方向の加速度成分による2次元マップなどを表すデータを生成する。この際、これらのグラフや2次元マップにおいて、入力されたタイムスタンプが表す関心時刻tiやその時刻における加速度データの表示上の位置を指し示すマークを表すデータも生成する。   Here, details of the data analysis unit 307 will be described. The acceleration data analysis unit 307 performs analysis processing on the collected acceleration data and outputs the analysis result. A plurality of analysis processes are prepared. The acceleration data analysis unit 307 executes analysis processing specified by the operator 11. In this example, as an analysis process to be executed, an acceleration component in a predetermined direction at each time is specified based on the collected acceleration data, and an acceleration waveform graph showing a time change of the acceleration component or 2 acquired at the same time. Data representing a two-dimensional map or the like based on a direction acceleration component is generated. At this time, in these graphs and two-dimensional maps, data representing the time of interest ti represented by the input time stamp and the mark indicating the display position of the acceleration data at that time are also generated.

図4は、加速度データ解析部307の機能的な構成を示す機能ブロック図である。データ解析部307は、上記の機能を実現させるため、図4に示すように、加速度成分特定部71と、関心時刻マッチング処理部72と、グラフ・マップ生成部73とを有している。   FIG. 4 is a functional block diagram showing a functional configuration of the acceleration data analysis unit 307. The data analysis unit 307 includes an acceleration component specifying unit 71, a time-of-interest matching processing unit 72, and a graph / map generation unit 73, as shown in FIG.

加速度成分特定部71は、収集された加速度データに基づいて、データ収集期間の各サンプリング時刻における患者10の左右方向、前後方向及び上下方向の加速度成分ax,ay,azをそれぞれ特定する。本例では、これらの加速度成分ax,ay,azは、重力加速度gの成分を除去して、患者10の純粋な運動により生じた加速度成分として算出し特定することを想定する。ただし、より簡便に、重力加速度gの成分を含む形で特定してもよい。また、左右方向、前後方向及び上下方向は、それぞれ、水平左右方向、水平進行方向及び鉛直方向を想定する。ただし、より簡便に、加速度センサモジュール2のセンサ本体を基準としたx軸方向、y軸方向及びz軸方向としてもよい。 The acceleration component specifying unit 71 specifies acceleration components a x , a y , a z in the left-right direction, the front-rear direction, and the vertical direction of the patient 10 at each sampling time of the data collection period based on the collected acceleration data. . In this example, it is assumed that these acceleration components a x , a y , and a z are calculated and specified as acceleration components generated by pure motion of the patient 10 by removing the gravitational acceleration g component. However, it may be specified more simply in a form including the component of gravitational acceleration g. Further, the horizontal direction, the front-rear direction, and the vertical direction are assumed to be a horizontal left-right direction, a horizontal traveling direction, and a vertical direction, respectively. However, the x-axis direction, the y-axis direction, and the z-axis direction based on the sensor body of the acceleration sensor module 2 may be more simply used.

関心時刻マッチング処理部72は、入力されたタイムスタンプが表す関心時刻tiと、加速度データの取得時刻とのマッチングを行い、関心時刻tiと、その関心時刻tiに取得された加速度データとを対応付けする。   The interest time matching processing unit 72 matches the interest time ti represented by the input time stamp with the acquisition time of the acceleration data, and associates the interest time ti with the acceleration data acquired at the interest time ti. To do.

グラフ・マップ生成部73は、特定された各方向の加速度成分について、その時間変化を表す加速度波形グラフG1のデータを生成する。また、グラフ・マップ生成部73は、各同時刻に取得された2方向の加速度成分をプロットして表される2次元マップのデータを生成する。2次元マップとしては、例えば、左右方向の加速度成分axと前後方向の加速度成分ayとを2軸とする2次元座標系において、各時刻における当該2方向の加速度成分をプロットしてその軌跡を描いた2次元軌跡マップM1を考えることができる。また例えば、同2次元座標系において、各時刻における当該2方向の加速度成分をプロットし座標ごとにそのプロットの頻度を表す2次元ヒストグラムマップM2を考えることができる。さらに、グラフ・マップ生成部73は、上記の加速度波形グラフG1、2次元軌跡マップM1、2次元ヒストグラムM2において、入力されたタイムスタンプごとに、そのタイムスタンプが表す関心時刻tiにおける加速度データの表示上の位置を指し示すタイムスタンプマークTiのデータを生成する。   The graph / map generator 73 generates data of an acceleration waveform graph G1 representing the temporal change of the specified acceleration component in each direction. In addition, the graph / map generator 73 generates two-dimensional map data represented by plotting acceleration components in two directions acquired at the same time. As a two-dimensional map, for example, in a two-dimensional coordinate system having two axes of a lateral acceleration component ax and a longitudinal acceleration component ay, the acceleration component in the two directions at each time is plotted and the locus is drawn. A two-dimensional trajectory map M1 can be considered. Further, for example, in the same two-dimensional coordinate system, a two-dimensional histogram map M2 can be considered in which acceleration components in the two directions at each time are plotted and the frequency of the plot is shown for each coordinate. Further, the graph / map generator 73 displays the acceleration data at the time of interest ti represented by the time stamp for each input time stamp in the acceleration waveform graph G1, the two-dimensional trajectory map M1, and the two-dimensional histogram M2. Data of a time stamp mark Ti indicating the upper position is generated.

これより、第一実施形態に係る歩行解析システム1における処理の流れについて説明する。   Hereafter, the flow of processing in the walking analysis system 1 according to the first embodiment will be described.

図5は、第一実施形態に係る歩行解析システム1における処理の流れを示すフロー(flow)図である。   FIG. 5 is a flow diagram showing a processing flow in the walking analysis system 1 according to the first embodiment.

ステップ(step)S0では、準備段階として、加速度センサモジュール2を患者10の腰部に取り付ける。   In step S0, the acceleration sensor module 2 is attached to the waist of the patient 10 as a preparation stage.

ステップS1では、患者情報の入力を受け付ける。   In step S1, patient information input is accepted.

具体的には、操作者11が、歩行解析装置3の操作部301を操作して、患者10の患者情報を直接入力する。患者情報受付部303は、その直接入力された患者情報を記憶部312に記憶させる。患者情報には、例えば、患者のID番号、氏名、年齢、性別、生年月日などが含まれる。なお、後述する患者10の加速度データやこの加速度データの解析結果などは、この患者情報と対応付けて記憶部312に記憶される。   Specifically, the operator 11 operates the operation unit 301 of the gait analyzer 3 and directly inputs patient information of the patient 10. The patient information receiving unit 303 stores the directly input patient information in the storage unit 312. The patient information includes, for example, the patient ID number, name, age, sex, date of birth, and the like. It should be noted that acceleration data of the patient 10 to be described later, an analysis result of the acceleration data, and the like are stored in the storage unit 312 in association with the patient information.

ステップS2では、動作モードとしてデータ取得モードを選択する。   In step S2, the data acquisition mode is selected as the operation mode.

具体的には、操作者11が、動作モードとしてデータ取得モードを選択する操作を行う。統括制御部311は、その操作に応じて、動作モードをデータ取得モードにする。加速度データ取得制御部305は、受信部304に加速度データの受信を開始させる。そして、表示制御部310はディスプレイ部302にデータ取得用画面を表示させる。   Specifically, the operator 11 performs an operation of selecting the data acquisition mode as the operation mode. The overall control unit 311 sets the operation mode to the data acquisition mode according to the operation. The acceleration data acquisition control unit 305 causes the receiving unit 304 to start receiving acceleration data. Then, the display control unit 310 causes the display unit 302 to display a data acquisition screen.

図6は、第一実施形態に係るデータ取得用画面の表示例を示す図である。   FIG. 6 is a diagram illustrating a display example of the data acquisition screen according to the first embodiment.

ここでは、ディスプレイ部302に、図6に示すようなデータ取得用画面N11を表示させる。データ取得用画面N11には、加速度波形表示ウィンドウW1と、データ収集開始/終了ボタンB1と、タイムスタンプボタンB2とが含まれる。   Here, the data acquisition screen N11 as shown in FIG. The data acquisition screen N11 includes an acceleration waveform display window W1, a data collection start / end button B1, and a time stamp button B2.

加速度波形表示ウィンドウW1には、受信部304により受信された加速度データを基に特定された左右、前後及び上下の3方向の加速度成分が表示される。加速度データ取得制御部305は、データ収集中か否かに関係なく、受信した加速度データが表す加速度成分を、このウィンドウ内にほぼリアルタイムで表示させる。   The acceleration waveform display window W1 displays acceleration components in three directions, left, right, front, back, and top, which are specified based on the acceleration data received by the receiving unit 304. The acceleration data acquisition control unit 305 displays the acceleration component represented by the received acceleration data in this window almost in real time regardless of whether data is being collected or not.

データ収集開始/終了ボタンB1は、操作者11がデータ収集開始及び終了を指示する際に用いるボタンである。加速度データ取得制御部305は、データ収集が行われていないときにこのボタンがタップされたことを認識すると、それに応答してデータ収集を開始する。また、加速度データ取得制御部305は、データ収集中にこのボタンがタップされたことを認識すると、それに応答してデータ収集を終了する。   The data collection start / end button B1 is a button used when the operator 11 instructs the start and end of data collection. When the acceleration data acquisition control unit 305 recognizes that this button has been tapped when data collection is not being performed, it starts data collection in response thereto. In addition, when the acceleration data acquisition control unit 305 recognizes that this button has been tapped during data collection, it ends data collection in response thereto.

タイムスタンプボタンB2は、操作者11がタイムスタンプの入力を指示する際に用いるボタンである。タイムスタンプ入力制御部306は、データ収集中にこのボタンがタップされたことを認識すると、その都度、そのときの時刻を関心時刻tiとして記憶する。   The time stamp button B2 is a button used when the operator 11 instructs to input a time stamp. When the time stamp input control unit 306 recognizes that this button has been tapped during data collection, the time stamp input control unit 306 stores the time at that time as the interest time ti.

ステップS3では、加速度データの収集を開始する。   In step S3, acceleration data collection is started.

具体的には、操作者11は、データ収集開始/終了ボタンB1をタップする。加速度データ取得制御部305は、この操作に応答して、受信された加速度データを記憶部312に記憶させる処理を開始する。次に、操作者11は、患者10に患者自身の標準的な歩行速度でしばらく歩行してもらう。歩行は、通常、距離にして5m〜20m程度、時間にして20秒〜3分程度、歩数にして10歩〜40歩程度である。加速度センサモジュール2のサンプリング部202は、加速度センサ部201の出力に基づいて、患者10の歩行中におけるx軸方向、y軸方向、z軸方向それぞれの加速度成分Ax,Ay,Azをサンプリングして計測する。加速度センサモジュール2の送信部203は、計測された加速度成分を表す加速度データをほぼリアルタイムで送信する。この間、受信部304は、送信部203から送信された加速度データを順次受信し、記憶部312は、その受信された加速度データをそのときの時刻と対応付けて記憶する。 Specifically, the operator 11 taps the data collection start / end button B1. In response to this operation, the acceleration data acquisition control unit 305 starts processing for storing the received acceleration data in the storage unit 312. Next, the operator 11 causes the patient 10 to walk for a while at the patient's own standard walking speed. Walking is usually about 5 to 20 m in distance, about 20 seconds to 3 minutes in time, and about 10 to 40 steps in number of steps. Based on the output of the acceleration sensor unit 201, the sampling unit 202 of the acceleration sensor module 2 calculates acceleration components A x , A y , and A z in the x-axis direction, the y-axis direction, and the z-axis direction during walking of the patient 10. Sampling and measuring. The transmission unit 203 of the acceleration sensor module 2 transmits acceleration data representing the measured acceleration component almost in real time. During this time, the receiving unit 304 sequentially receives the acceleration data transmitted from the transmitting unit 203, and the storage unit 312 stores the received acceleration data in association with the time at that time.

ステップS4では、タイムスタンプの入力を受け付ける。   In step S4, input of a time stamp is accepted.

具体的には、タイムスタンプ入力制御部306が、データ収集中に、タイムスタンプボタンB2がタップされたことを認識すると、その都度、そのときの時刻を関心時刻tiとして記憶部312に記憶させる。例えば、操作者11は、患者10が気になる動作を行ったときに、後にそのときの加速度波形等を容易に見つけることができるよう、このボタンをタップして、タイムスタンプを入力する。なお、タイムスタンプ入力制御部306は、タイムスタンプが入力されたときに、そのことを報知するための信号音や振動等を発するようにするとよい。これにより、操作者11は、ディスプレイ部等を見ることなく、タイムスタンプの入力が確実に行われたことを確認することができる。   Specifically, when the time stamp input control unit 306 recognizes that the time stamp button B2 is tapped during data collection, the time stamp input unit 306 stores the time at that time in the storage unit 312 as the time of interest ti. For example, the operator 11 taps this button and inputs a time stamp so that an acceleration waveform at that time can be easily found later when the patient 10 performs an action that the patient 10 cares about. Note that when the time stamp is input, the time stamp input control unit 306 may emit a signal sound or vibration for notifying that. Thereby, the operator 11 can confirm that the input of the time stamp has been performed reliably without looking at the display unit or the like.

ステップS5では、加速度データの収集を終了する。   In step S5, the collection of acceleration data is terminated.

具体的には、操作者11は、患者10に歩行を終了してもらう。次に、操作者11は、データ収集開始/終了ボタンB1をタップする。加速度データ取得制御部305は、この操作に応答して、加速度データを記憶部312に記憶させる処理を終了する。   Specifically, the operator 11 has the patient 10 finish walking. Next, the operator 11 taps the data collection start / end button B1. In response to this operation, the acceleration data acquisition control unit 305 ends the process of storing the acceleration data in the storage unit 312.

ステップS6では、動作モードとしてデータ解析モードを選択する。   In step S6, the data analysis mode is selected as the operation mode.

具体的には、操作者11が、動作モードとしてデータ解析モードを選択する操作を行う。統括制御部311は、その操作に応じて、動作モードをデータ解析モードにする。加速度データ取得制御部305は、受信部304に加速度データの受信を終了させる。   Specifically, the operator 11 performs an operation of selecting the data analysis mode as the operation mode. The overall control unit 311 sets the operation mode to the data analysis mode according to the operation. The acceleration data acquisition control unit 305 causes the receiving unit 304 to finish receiving the acceleration data.

ステップS7では、各サンプリング時刻における患者10の左右方向、前後方向及び上下方向の加速度成分ax,ay,azをそれぞれ特定する。 In step S7, acceleration components a x , a y , and a z in the left-right direction, the front-rear direction, and the vertical direction of the patient 10 at each sampling time are specified.

具体的には、加速度成分特定部71が、収集された加速度データに基づいて、データ収集期間の各サンプリング時刻における患者10の左右方向、前後方向及び上下方向の加速度成分をそれぞれ特定する。   Specifically, the acceleration component specifying unit 71 specifies acceleration components in the left-right direction, the front-rear direction, and the up-down direction of the patient 10 at each sampling time of the data collection period based on the collected acceleration data.

ステップS8では、入力されたタイムスタンプが表す関心時刻tiとデータ取得時刻とのマッチングを行い、関心時刻マッチング処理部72が、入力されたタイムスタンプが表す関心時刻tiと加速度データの取得時刻とのマッチングを行い、関心時刻tiとその関心時刻tiに取得された加速度データとを対応付けする。   In step S8, the interest time ti represented by the input time stamp is matched with the data acquisition time, and the interest time matching processing unit 72 calculates the interest time ti represented by the input time stamp and the acceleration data acquisition time. Matching is performed to associate the interest time ti with the acceleration data acquired at the interest time ti.

ステップS9では、グラフ・マップ等を生成する。   In step S9, a graph / map or the like is generated.

具体的には、グラフ・マップ生成部73が、特定された各方向の加速度成分について、その時間変化を表す加速度波形グラフG1のデータを生成する。また、グラフ・マップ生成部73は、各同時刻に取得された2方向の加速度成分をプロットして表される2次元マップのデータを生成する。本例では、この2次元マップとして、2次元ヒストグラムマップM1と2次元軌跡マップM2とを考える。2次元ヒストグラムマップM1は、例えば、所定の2方向の加速度成分、例えば、左右方向の加速度成分ax及び前後方向の加速度成分ayを2軸とする2次元座標系において、各時刻での2方向の加速度成分をプロットして、座標ごとのプロットの頻度を表すマップである。2次元軌跡マップM2は、例えば、同2次元座標系において、各時刻でのその2方向の加速度成分をプロットして、プロット点の軌跡を描いたマップである。さらに、グラフ・マップ生成部73は、上記のグラフG1、2次元ヒストグラムマップM1、2次元軌跡マップM2において、入力されたタイムスタンプごとに、そのタイムスタンプが表す関心時刻tiにおける加速度データ(加速度成分)の表示上の位置を指し示すタイムスタンプマークTiのデータを生成する。   Specifically, the graph / map generation unit 73 generates data of an acceleration waveform graph G1 representing the temporal change of the specified acceleration component in each direction. In addition, the graph / map generator 73 generates two-dimensional map data represented by plotting acceleration components in two directions acquired at the same time. In this example, a two-dimensional histogram map M1 and a two-dimensional trajectory map M2 are considered as the two-dimensional map. The two-dimensional histogram map M1 is, for example, a two-dimensional coordinate system having two axes of predetermined two-direction acceleration components, for example, a left-right acceleration component ax and a front-rear acceleration component ay. It is a map which plots an acceleration component and represents the frequency of the plot for every coordinate. The two-dimensional trajectory map M2 is, for example, a map in which the trajectory of plotted points is plotted by plotting acceleration components in the two directions at each time in the same two-dimensional coordinate system. Further, the graph / map generator 73 generates acceleration data (acceleration component) at the time of interest ti represented by the time stamp for each input time stamp in the graph G1, the two-dimensional histogram map M1, and the two-dimensional trajectory map M2. ) Of the time stamp mark Ti indicating the position on the display.

ステップS10では、生成されたグラフ・マップを表示する。   In step S10, the generated graph map is displayed.

具体的には、表示制御部310が、ディスプレイ部302にデータ解析用画面を表示させる。   Specifically, the display control unit 310 causes the display unit 302 to display a data analysis screen.

図7〜12は、第一実施形態に係るデータ解析用画面の表示例を示す図である。   7 to 12 are diagrams illustrating display examples of the data analysis screen according to the first embodiment.

ここでは、ディスプレイ部302に、図7〜12に示すようなデータ解析用画面N12を表示させる。データ解析用画面N12には、加速度波形グラフG1、2次元ヒストグラムマップM1、2次元軌跡マップM2、タイムスタンプマークTiなどが含まれる。データ解析用画面は、複数のページを使って表示される。なお、図7〜12は、データ収集中にタイムスタンプが間隔を置いて2回入力された場合の例である。   Here, a data analysis screen N12 as shown in FIGS. The data analysis screen N12 includes an acceleration waveform graph G1, a two-dimensional histogram map M1, a two-dimensional trajectory map M2, a time stamp mark Ti, and the like. The data analysis screen is displayed using a plurality of pages. 7 to 12 are examples in the case where the time stamp is input twice at intervals during data collection.

データ解析用画面N12の1ページ目には、図7に示すように、加速度波形表示ウィンドウW1が表示される。加速度波形表示ウィンドウW1は、データ収集期間のうち少なくとも一部に相当する時間帯について、左右、前後及び上下の3方向の加速度成分の時間変化を表す加速度波形グラフG1を表示する。加速度波形グラフG1上には、1回目のタイムスタンプが入力された時刻を指し示す第1のタイムスタンプマークT1と、2回目のタイムスタンプが入力された時刻を指し示す第2のタイムスタンプマークT2とが、その時刻とともに表示されている。なお、ここで表示される時刻は、加速度データ収集開始からの経過時間に変換されている。始めは、加速度波形グラフG1は、データ収集期間全体について表示されている。この状態において、操作者11が加速度波形グラフG1上で所望の場所をタップすると、タップした場所の周辺のグラフが時間軸方向に拡大されて表示される。また、タイムスタンプマークをタップして選択すると、そのタイムスタンプマークの周辺のグラフだけが切り出され、時間軸方向に拡大されて表示される。例えば、第1のタイムスタンプマークT1をタップすると、図8に示すように、第1のタイムスタンプマークT1の周辺のグラフが拡大表示される。操作者11がタッチパネル上でグラフをスワイプすると、表示されるグラフの時間帯TBがシフトし、グラフはスワイプした方向に流れる。データ解析用画面N12の1ページ目が表示されているときに操作者11がタッチパネル上でグラフ以外の場所を左方向にスワイプすると、画面は次の2ページ目に移行する。   On the first page of the data analysis screen N12, an acceleration waveform display window W1 is displayed as shown in FIG. The acceleration waveform display window W1 displays an acceleration waveform graph G1 representing temporal changes in acceleration components in the left, right, front, rear, and upper and lower directions for a time zone corresponding to at least a part of the data collection period. On the acceleration waveform graph G1, there are a first time stamp mark T1 indicating the time when the first time stamp is input and a second time stamp mark T2 indicating the time when the second time stamp is input. , Is displayed along with the time. The time displayed here is converted into an elapsed time from the start of acceleration data collection. Initially, the acceleration waveform graph G1 is displayed for the entire data collection period. In this state, when the operator 11 taps a desired location on the acceleration waveform graph G1, a graph around the tapped location is enlarged and displayed in the time axis direction. When a time stamp mark is selected by tapping, only the graph around the time stamp mark is cut out and displayed enlarged in the time axis direction. For example, when the first time stamp mark T1 is tapped, a graph around the first time stamp mark T1 is enlarged as shown in FIG. When the operator 11 swipes the graph on the touch panel, the time zone TB of the displayed graph is shifted, and the graph flows in the swipe direction. When the first page of the data analysis screen N12 is displayed, if the operator 11 swipes a place other than a graph to the left on the touch panel, the screen moves to the next second page.

データ解析用画面N12の2ページ目には、図9に示すように、2次元ヒストグラムマップM1が表示される。2次元ヒストグラムマップM1上には、1回目のタイムスタンプが入力された時刻における加速度データの表示上の位置を指し示す第1のタイムスタンプマークT1と、2回目のタイムスタンプが入力された時刻における加速度データの表示上の位置を指し示す第2のタイムスタンプマークT2とが、その時刻とともに表示されている。始めは、2次元ヒストグラムマップM1のみが表示されている。この状態において、操作者11がタイムスタンプマークをタップすると、タップされたタイムスタンプマークに対応する関心時刻tiの周辺の時間帯における部分的な加速度波形グラフG1′が追加表示される。例えば、2次元ヒストグラムマップM1における第1のスタンプマークT1をタップすると、図10に示すように、第1のタイムスタンプマークに対応する関心時刻t1の周辺の時間帯における部分的な加速度波形グラフG1′が表示される。この時間帯は、例えば、関心時刻t1を中心に±2〜10秒程度、または関心時刻t1を中心に±2〜10歩程度に相当する時間幅を有する。時間幅を歩数で規定すれば、患者10の歩行速度に関係なく観察範囲として適当な範囲を選択して切り出すことができる。なお歩数は、加速度波形のピークを数えるなどして計数することが可能である。データ解析用画面N12の2ページ目が表示されているときに、操作者11がタッチパネル上で左方向にスワイプすると、画面は次の3ページ目に移行する。右方向にスワイプすると1ページ目に戻る。   On the second page of the data analysis screen N12, a two-dimensional histogram map M1 is displayed as shown in FIG. On the two-dimensional histogram map M1, the first time stamp mark T1 indicating the position on the display of acceleration data at the time when the first time stamp is input, and the acceleration at the time when the second time stamp is input. A second time stamp mark T2 indicating the position on the data display is displayed together with the time. Initially, only the two-dimensional histogram map M1 is displayed. In this state, when the operator 11 taps the time stamp mark, a partial acceleration waveform graph G1 ′ in the time zone around the time of interest ti corresponding to the tapped time stamp mark is additionally displayed. For example, when the first stamp mark T1 in the two-dimensional histogram map M1 is tapped, as shown in FIG. 10, a partial acceleration waveform graph G1 in the time zone around the time of interest t1 corresponding to the first time stamp mark. 'Is displayed. This time zone has a time width corresponding to, for example, about ± 2 to 10 seconds with respect to the interest time t1, or about ± 2 to 10 steps with respect to the interest time t1. If the time width is defined by the number of steps, an appropriate range can be selected and cut out as an observation range regardless of the walking speed of the patient 10. The number of steps can be counted by counting the peak of the acceleration waveform. If the operator 11 swipes left on the touch panel while the second page of the data analysis screen N12 is displayed, the screen moves to the next third page. Swipe right to go back to the first page.

データ解析用画面N12の3ページ目には、図11に示すように、2次元軌跡マップM2が表示される。2次元軌跡マップM2上には、1回目のタイムスタンプが入力された時刻における加速度データの表示上の位置を指し示す第1のタイムスタンプマークT1と、2回目のタイムスタンプが入力された時刻における加速度データの表示上の位置を指し示す第2のタイムスタンプマークT2とが、その時刻とともに表示されている。始めは、2次元軌跡マップM2のみが表示されている。この状態において、操作者11がタイムスタンプマークをタップすると、タップされたタイムスタンプマークに対応する関心時刻tiの周辺の時間帯における部分的な加速度波形グラフG1′が追加表示される。例えば、2次元軌跡マップM2における第1のスタンプマークT1をタップすると、図12に示すように、第1のタイムスタンプマークに対応する関心時刻tiの周辺の時間帯における部分的な加速度波形グラフG1′が表示される。なお、2次元軌跡マップM2上では、この時間帯に対応する部分的な軌跡について、線の色や太さを変えて強調表示される。   On the third page of the data analysis screen N12, a two-dimensional trajectory map M2 is displayed as shown in FIG. On the two-dimensional trajectory map M2, the first time stamp mark T1 indicating the position on the display of acceleration data at the time when the first time stamp is input, and the acceleration at the time when the second time stamp is input. A second time stamp mark T2 indicating the position on the data display is displayed together with the time. Initially, only the two-dimensional trajectory map M2 is displayed. In this state, when the operator 11 taps the time stamp mark, a partial acceleration waveform graph G1 ′ in the time zone around the time of interest ti corresponding to the tapped time stamp mark is additionally displayed. For example, when the first stamp mark T1 in the two-dimensional trajectory map M2 is tapped, as shown in FIG. 12, a partial acceleration waveform graph G1 in the time zone around the time of interest ti corresponding to the first time stamp mark. 'Is displayed. On the two-dimensional trajectory map M2, the partial trajectory corresponding to this time zone is highlighted with the line color and thickness changed.

2次元軌跡マップM2上には、上記の時間帯における注目時刻Aに対応する加速度成分のプロット位置に、第1のプロットマークP1が表示される。部分的な加速度波形グラフG1′上には、左右、前後及び上下の加速度成分の波形それぞれについて、同じ注目時刻Aに対応する加速度成分のプロット位置に、第2〜第4のプロットマークP2〜P4が表示される。部分的な加速度波形グラフG1′上には、さらに注目時刻Aを指し示すカーソルCが表示される。操作者11は、そのカーソルCを手動または自動で移動させることができ、これに応じて注目時刻Aを変化させることができる。第1〜第4のプロットマークP1〜P4は、この注目時刻Aの変化に連動して移動する。   On the two-dimensional trajectory map M2, a first plot mark P1 is displayed at the plot position of the acceleration component corresponding to the attention time A in the above time zone. On the partial acceleration waveform graph G1 ′, the second to fourth plot marks P2 to P4 are located at the acceleration component plot positions corresponding to the same time of interest A for each of the left, right, front and rear acceleration component waveforms. Is displayed. On the partial acceleration waveform graph G1 ′, a cursor C indicating the attention time A is further displayed. The operator 11 can move the cursor C manually or automatically, and can change the attention time A accordingly. The first to fourth plot marks P1 to P4 move in conjunction with the change in the attention time A.

このような第一実施形態によれば、加速度データ収集中に操作者11が関心を持った所望の関心時刻tiをタイムスタンプの入力により記憶させ、患者10の加速度波形グラフG1や2次元マップM1,M2などの解析結果においてその関心時刻tiに取得された加速度成分に対応した位置を指し示すので、目視での評価と加速度データの解析結果とを、同じ時間軸上で容易に同期させることができる。これにより、例えば、操作者11は、加速度データ収集中には目視に集中し、患者10の気になる動作があった場合にタイムスタンプを入力することで、歩行終了後に、目視評価と加速度データの解析結果とを時間軸上で容易に同期させることができる。また、操作者11は、関心が持たれる患者10の動作に係る加速度の情報・解析結果を検索なしに確認することができる。また、目視評価と加速度データの解析結果との相乗効果を一層高めて、質の高いリハビリテーションプランの作成を可能にする。総じて、患者10の歩行運動における客観的かつ効率的な評価が可能になる。   According to such a first embodiment, a desired interest time ti in which the operator 11 is interested during acceleration data collection is stored by inputting a time stamp, and the acceleration waveform graph G1 or two-dimensional map M1 of the patient 10 is stored. , M2 and the like indicate the position corresponding to the acceleration component acquired at the time of interest ti, so that the visual evaluation and the analysis result of the acceleration data can be easily synchronized on the same time axis. . Thereby, for example, the operator 11 concentrates on visual observation while collecting acceleration data, and inputs a time stamp when there is an action of interest of the patient 10, so that the visual evaluation and acceleration data are completed after walking. The analysis result can be easily synchronized on the time axis. Further, the operator 11 can confirm the information and analysis results of the acceleration related to the motion of the patient 10 who is interested without searching. Moreover, the synergistic effect between the visual evaluation and the analysis result of the acceleration data is further enhanced to enable the creation of a high-quality rehabilitation plan. Overall, an objective and efficient evaluation in the walking motion of the patient 10 becomes possible.

また、第一実施形態によれば、患者10の加速度の2次元マップにおいて関心時刻tiに取得された加速度成分に対応した位置と、その加速度成分が得られたときの加速度波形とをを対応付けて表示させるので、患者10の関心が持たれる動作について多面的に評価することができる。   Further, according to the first embodiment, the position corresponding to the acceleration component acquired at the time of interest ti in the two-dimensional map of the acceleration of the patient 10 is associated with the acceleration waveform when the acceleration component is obtained. Therefore, it is possible to evaluate the actions that the patient 10 is interested in from various aspects.

また、第一実施形態によれば、患者10の加速度の2次元軌跡マップM2において関心時刻tiの周辺の注目時刻に取得された加速度成分のプロットマークP1と、加速度波形グラフG1において同注目時刻に取得された加速度成分のプロットマークP2〜P4とを連動して表示させるので、関心時刻tiの周辺で患者10がどのような動作を行っていたかを容易に想像することができる。   Further, according to the first embodiment, the acceleration component plot mark P1 acquired at the attention time around the time of interest ti in the two-dimensional trajectory map M2 of the patient 10 acceleration and the acceleration waveform graph G1 at the same attention time. Since the acquired acceleration component plot marks P <b> 2 to P <b> 4 are displayed in conjunction with each other, it is possible to easily imagine what operation the patient 10 was performing around the time of interest ti.

(第二実施形態)
図13は、第二実施形態に係る加速度センサモジュール2及び歩行解析装置3のハードウェアの構成を示す図である。第一実施形態と異なる点は、歩行解析装置3がカメラ37をさらに有している点である。カメラ37は、例えば、スマートフォンに内蔵されているデジタルカメラである。
(Second embodiment)
FIG. 13 is a diagram illustrating a hardware configuration of the acceleration sensor module 2 and the walking analysis device 3 according to the second embodiment. The difference from the first embodiment is that the walking analysis device 3 further includes a camera 37. The camera 37 is, for example, a digital camera built in a smartphone.

図14は、第二実施形態に係る加速度センサモジュール2及び歩行解析装置3の機能的な構成を示す機能ブロック図である。第一実施形態と異なる点は、歩行解析装置3が、撮像部312と動画データ取得制御部313とをさらに有している点である。なお、撮像部312及び動画データ取得制御部313は、発明における録画手段の一例である。   FIG. 14 is a functional block diagram illustrating functional configurations of the acceleration sensor module 2 and the walking analysis device 3 according to the second embodiment. The difference from the first embodiment is that the walking analysis device 3 further includes an imaging unit 312 and a moving image data acquisition control unit 313. The imaging unit 312 and the moving image data acquisition control unit 313 are an example of a recording unit in the invention.

撮像部312は、被写体、ここでは患者10を撮像して、その画像データあるいは動画データを出力する。   The imaging unit 312 images the subject, here the patient 10, and outputs the image data or moving image data.

動画データ取得制御部313は、加速度データの収集に同期して、歩行している患者10の動画データを取得するよう撮像部312を制御する。動画データ取得制御部313は、データ収集開始から終了までの各時刻におけるフレームデータ(動画を構成する画像データ)を収集する。フレームデータとは、動画を構成する画像データのことを意味する。フレームデータには、そのデータが取得された時刻情報が付帯される。時刻は、時計部308の出力に基づいて特定される。   The moving image data acquisition control unit 313 controls the imaging unit 312 to acquire moving image data of the walking patient 10 in synchronization with the collection of acceleration data. The moving image data acquisition control unit 313 collects frame data (image data constituting the moving image) at each time from the start to the end of data collection. Frame data means image data constituting a moving image. The frame data is accompanied by time information when the data was acquired. The time is specified based on the output of the clock unit 308.

データ解析部307は、特に関心時刻マッチング処理部72により、入力されたタイムスタンプが表す関心時刻tiと、加速度データ及びフレームデータの取得時刻とのマッチングを行って、関心時刻tiと同時刻に取得された加速度データ及びフレームデータを特定する。そして、加速度データの解析結果にその特定情報を反映させるとともに、動画データにもその特定情報を反映させる。   In particular, the data analysis unit 307 performs matching between the interest time ti represented by the input time stamp and the acquisition time of the acceleration data and the frame data by the interest time matching processing unit 72, and obtains it at the same time as the interest time ti. Specified acceleration data and frame data are specified. Then, the specific information is reflected in the analysis result of the acceleration data, and the specific information is reflected in the moving image data.

表示制御部310は、加速度データの解析結果と動画データが表す動画とを表示するようディスプレイ部302を制御する。   The display control unit 310 controls the display unit 302 to display the analysis result of the acceleration data and the moving image represented by the moving image data.

記憶部312は、入力された患者情報、収集された加速度データ、タイムスタンプが表す関心時刻ti、加速度データのグラフ・マップなどの解析結果に加え、動画データを記憶する。   The storage unit 312 stores moving image data in addition to analysis results such as input patient information, collected acceleration data, a time of interest ti represented by a time stamp, and a graph / map of acceleration data.

これより、第二実施形態に係る歩行解析システム1における処理の流れについて説明する。   Hereafter, the flow of processing in the walking analysis system 1 according to the second embodiment will be described.

図15は、第二実施形態に係る歩行解析システム1における処理の流れを示すフロー図である。   FIG. 15 is a flowchart showing the flow of processing in the walking analysis system 1 according to the second embodiment.

ステップA0では、準備段階として、加速度センサモジュール2を患者10の腰部に取り付ける。   In step A0, the acceleration sensor module 2 is attached to the waist of the patient 10 as a preparation stage.

ステップA1では、患者情報の入力を受け付ける。   In step A1, patient information input is accepted.

ステップA2では、動作モードとしてデータ取得モードを選択する。ここで、表示制御部310はディスプレイ部302にデータ取得用画面を表示させる。   In step A2, the data acquisition mode is selected as the operation mode. Here, the display control unit 310 causes the display unit 302 to display a data acquisition screen.

図16は、第二実施形態に係るデータ取得用画面の表示例を示す図である。   FIG. 16 is a diagram illustrating a display example of the data acquisition screen according to the second embodiment.

ここでは、ディスプレイ部302に、図16に示すようなデータ取得用画面N21を表示させる。データ取得用画面N21には、加速度波形表示ウィンドウW1と、動画表示ウィンドウW2と、データ収集開始/終了ボタンB1と、タイムスタンプボタンB2とが含まれる。   Here, a data acquisition screen N 21 as shown in FIG. 16 is displayed on the display unit 302. The data acquisition screen N21 includes an acceleration waveform display window W1, a moving image display window W2, a data collection start / end button B1, and a time stamp button B2.

動画表示ウィンドウW2は、撮像部37により出力されたフレームデータに基づく動画またはフレーム画像を表示する。動画データ取得制御部308は、データ収集中か否かに関係なく、撮像部37より出力されたフレームデータが表す動画F1またはフレーム画像f1をこのウィンドウ内にほぼリアルタイムで表示される。   The moving image display window W2 displays a moving image or a frame image based on the frame data output by the imaging unit 37. The moving image data acquisition control unit 308 displays the moving image F1 or the frame image f1 represented by the frame data output from the imaging unit 37 in this window almost in real time regardless of whether data is being collected.

加速度波形表示ウィンドウW1、データ収集開始/終了ボタンB1、及びタイムスタンプボタンB2は、第一実施形態の場合と同様の機能を有する。   The acceleration waveform display window W1, the data collection start / end button B1, and the time stamp button B2 have the same functions as in the first embodiment.

ステップA3では、加速度データ及び動画データの収集を開始する。   In step A3, collection of acceleration data and moving image data is started.

具体的には、まず、操作者11は、患者10を撮像することができるよう撮像部37の向きを患者10に合わせる。次に、操作者11は、データ収集開始/終了ボタンB1をタップする。加速度データ取得制御部305は、この操作に応答して、受信部304にて受信された加速度データを記憶部312に記憶させる処理を開始する。また、動画データ取得制御部308は、この操作に応答して、撮像部37から出力されたフレームデータを記憶部312に記憶させる処理を開始する。次に、操作者11は、患者10に、患者自身の標準的な歩行速度でしばらく歩行してもらう。記憶部312は、加速度データ及びフレームデータをそれらが得られた時刻と対応付けて記憶する。   Specifically, first, the operator 11 aligns the orientation of the imaging unit 37 with the patient 10 so that the patient 10 can be imaged. Next, the operator 11 taps the data collection start / end button B1. In response to this operation, the acceleration data acquisition control unit 305 starts processing for storing the acceleration data received by the receiving unit 304 in the storage unit 312. Further, in response to this operation, the moving image data acquisition control unit 308 starts processing for storing the frame data output from the imaging unit 37 in the storage unit 312. Next, the operator 11 causes the patient 10 to walk for a while at the patient's own standard walking speed. The storage unit 312 stores the acceleration data and the frame data in association with the time when they are obtained.

ステップA4では、タイムスタンプの入力を受け付ける。   In step A4, input of a time stamp is accepted.

具体的には、タイムスタンプ入力制御部306が、データの収集中に、操作者11によりタイムスタンプボタンB2がタップされたことを認識すると、そのときの時刻を関心時刻tiとして記憶部312に記憶させる。   Specifically, when the time stamp input control unit 306 recognizes that the time stamp button B2 has been tapped by the operator 11 during data collection, the time at that time is stored in the storage unit 312 as the interest time ti. Let

ステップA5では、加速度データ及び動画データの収集を終了する。   In step A5, the collection of acceleration data and moving image data is terminated.

具体的には、操作者11は、患者10に歩行を止めてもらう。次に、操作者11は、データ収集開始/終了ボタンB1をタップする。加速度データ取得制御部305は、この操作に応答して、加速度データを記憶部312に記憶させる処理を終了する。また、動画データ取得制御部308は、この操作に応答して、フレームデータを記憶部312に記憶させる処理を終了する。   Specifically, the operator 11 has the patient 10 stop walking. Next, the operator 11 taps the data collection start / end button B1. In response to this operation, the acceleration data acquisition control unit 305 ends the process of storing the acceleration data in the storage unit 312. Further, in response to this operation, the moving image data acquisition control unit 308 ends the process of storing the frame data in the storage unit 312.

ステップA6では、動作モードとしてデータ解析モードを選択する。   In step A6, the data analysis mode is selected as the operation mode.

具体的には、操作者11が、動作モードとしてデータ解析モードを選択する操作を行う。統括制御部311が、その操作に応じて、動作モードを解析モードにする。加速度データ取得制御部305は、受信部304に加速度データの受信を終了させる。また、動画データ取得制御部308は、撮像部313にフレームデータの出力を終了させる。   Specifically, the operator 11 performs an operation of selecting the data analysis mode as the operation mode. The overall control unit 311 sets the operation mode to the analysis mode according to the operation. The acceleration data acquisition control unit 305 causes the receiving unit 304 to finish receiving the acceleration data. In addition, the moving image data acquisition control unit 308 causes the imaging unit 313 to finish outputting the frame data.

ステップA7では、収集された加速度データに基づいて、各サンプリング時刻における患者10の左右方向、前後方向及び上下方向の加速度成分ax,ay,azをそれぞれ特定する。 In Step A7, based on the collected acceleration data, acceleration components a x , a y , and a z in the left-right direction, the front-rear direction, and the vertical direction of the patient 10 at each sampling time are specified.

ステップA8では、関心時刻マッチング処理部72が、入力されたタイムスタンプが表す関心時刻tiと、加速度データ及びフレームデータの取得時刻とのマッチングを行う。そして、関心時刻tiと、その関心時刻tiに取得された加速度データ及びフレームデータとを対応付けする。   In step A8, the interested time matching processing unit 72 performs matching between the interested time ti represented by the input time stamp and the acquisition time of acceleration data and frame data. Then, the interest time ti is associated with the acceleration data and the frame data acquired at the interest time ti.

ステップA9では、グラフ・マップ等を生成する。   In step A9, a graph / map is generated.

具体的には、グラフ・マップ生成部73が、加速度波形グラフG1、2次元ヒストグラムマップM1、2次元軌跡マップM2のデータを生成する。さらに、グラフ・マップ生成部73は、上記の加速度波形グラフG1、2次元ヒストグラムマップM1、2次元軌跡マップM2において、入力されたタイムスタンプごとに、そのタイムスタンプが表す関心時刻tiにおける加速度データの表示上の位置を指し示すタイムスタンプマークTiのデータを生成する。また、グラフ・マップ生成部73は、収集した動画データに基づく動画F1のコントロールバーのデータを生成する。コントロールバーCBには、再生/停止ボタンと、時間軸t及び再生時刻tpを表す時間軸スライダーバーSBとを含んでいる。グラフ・マップ生成部73は、その時間軸スライダーバーSBにおいて、入力されたタイムスタンプごとに、そのタイムスタンプが表す関心時刻tiの位置を指し示すタイムスタンプマークTiのデータを生成する。   Specifically, the graph / map generator 73 generates data of the acceleration waveform graph G1, the two-dimensional histogram map M1, and the two-dimensional trajectory map M2. Further, the graph / map generation unit 73, for each of the input time stamps in the acceleration waveform graph G1, the two-dimensional histogram map M1, and the two-dimensional trajectory map M2, the acceleration data at the time of interest ti represented by the time stamp. Data of the time stamp mark Ti indicating the position on the display is generated. In addition, the graph / map generation unit 73 generates control bar data of the moving image F1 based on the collected moving image data. The control bar CB includes a playback / stop button and a time axis slider bar SB representing the time axis t and the playback time tp. In the time axis slider bar SB, the graph / map generation unit 73 generates data of a time stamp mark Ti indicating the position of the time of interest ti represented by the time stamp for each time stamp input.

ステップA10では、生成されたグラフ・マップや録画された動画を表示する。   In step A10, the generated graph / map and the recorded moving image are displayed.

具体的には、表示制御部310が、ディスプレイ部302にデータ解析用画面を表示させる。   Specifically, the display control unit 310 causes the display unit 302 to display a data analysis screen.

図17〜20は、第二実施形態に係るデータ解析用画面の表示例を示す図である。   17 to 20 are diagrams illustrating display examples of a data analysis screen according to the second embodiment.

ここでは、ディスプレイ部302に、図17〜20に示すようなデータ解析用画面N22を表示させる。データ解析用画面N22には、加速度波形グラフG1、2次元ヒストグラムマップM1、2次元軌跡マップM2、動画F1、コントロールバーCB、タイムスタンプマークTiなどが含まれる。データ解析用画面N22は、複数のページを使って表示される。なお、図17〜20は、データ収集中にタイムスタンプが間隔を置いて2回入力された場合の例である。   In this case, the data analysis screen N22 as shown in FIGS. The data analysis screen N22 includes an acceleration waveform graph G1, a two-dimensional histogram map M1, a two-dimensional trajectory map M2, a moving image F1, a control bar CB, a time stamp mark Ti, and the like. The data analysis screen N22 is displayed using a plurality of pages. FIGS. 17 to 20 are examples when the time stamp is input twice at intervals during data collection.

データ解析用画面N22の1ページ目には、図17に示すように、加速度波形表示ウィンドウW1と、動画表示ウィンドウW2と、コントロールバーCBとが表示される。加速度波形表示ウィンドウW1は、データ収集期間のうち少なくとも一部に相当する時間帯TBについて、左右、前後及び上下の3方向の加速度波形グラフG1を表示する。動画表示ウィンドウW2は、同じ時間帯TBについて、収集された動画データに基づく患者10の動画F1を表示する。コントロールバーCBは、動画F1の再生/停止ボタンB3と、時間帯TBの時間軸とその中での再生時刻tpとを表す時間軸スライダーバーSBとを含んでいる。   On the first page of the data analysis screen N22, as shown in FIG. 17, an acceleration waveform display window W1, a moving image display window W2, and a control bar CB are displayed. The acceleration waveform display window W1 displays an acceleration waveform graph G1 in three directions of left and right, front and rear, and up and down for a time zone TB corresponding to at least a part of the data collection period. The moving image display window W2 displays the moving image F1 of the patient 10 based on the collected moving image data for the same time zone TB. The control bar CB includes a playback / stop button B3 for the moving image F1, and a time axis slider bar SB representing the time axis of the time zone TB and the playback time tp therein.

加速度波形グラフG1には、1回目のタイムスタンプが入力された時刻における加速度データの表示上の位置を指し示す第1のタイムスタンプマークT1と、2回目のタイムスタンプが入力された時刻における加速度データの表示上の位置を指し示す第2のタイムスタンプマークT2とが、その時刻とともに付されている。ここで表示される時刻は、加速度データ及びフレームデータの収集を開始してからの経過時間に変換されている。   In the acceleration waveform graph G1, the first time stamp mark T1 indicating the position on the display of the acceleration data at the time when the first time stamp is input, and the acceleration data at the time when the second time stamp is input. A second time stamp mark T2 indicating the position on the display is attached together with the time. The time displayed here is converted into an elapsed time since the start of collection of acceleration data and frame data.

動画表示ウィンドウW2には、再生時刻tpに対応するフレーム画像が表示される。加速度波形グラフG1上には、3方向の加速度成分の波形それぞれについて、同じ再生時刻tpに対応する加速度成分のプロット位置に第2〜第4のプロットマークP2〜P4が表示される。加速度波形グラフG1上には、さらに再生時刻tpの位置を指し示すカーソルCが表示される。操作者11は、再生/停止ボタンB3を押して動画F1を再生/停止させたり、時間軸スライダーバーSBのスライダーをドラッグして移動させることにより動画F1を手送り再生させたりすることができる。動画F1のフレーム画像と、第1〜第4のプロットマークP1〜P4の位置とは、この再生時刻tpの変化に連動して更新される。動画F1が再生されると、カーソルCもスライダーに合わせて移動し、第1〜第4のプロットマークP1〜P4は加速度波形を表す線に沿って移動する。   In the moving image display window W2, a frame image corresponding to the reproduction time tp is displayed. On the acceleration waveform graph G1, second to fourth plot marks P2 to P4 are displayed at the acceleration component plot positions corresponding to the same reproduction time tp for the waveforms of the acceleration components in the three directions. On the acceleration waveform graph G1, a cursor C indicating the position of the reproduction time tp is further displayed. The operator 11 can play / stop the moving image F1 by pressing the play / stop button B3, or manually move and play the moving image F1 by dragging and moving the slider of the time axis slider bar SB. The frame image of the moving image F1 and the positions of the first to fourth plot marks P1 to P4 are updated in conjunction with the change in the reproduction time tp. When the moving image F1 is reproduced, the cursor C also moves in accordance with the slider, and the first to fourth plot marks P1 to P4 move along a line representing the acceleration waveform.

加速度波形グラフG1は、始め、データ収集期間全体について表示されている。この状態において、操作者11が加速度波形グラフG1上で所望の場所をタップすると、時間軸スライダーバーSBが表す時間帯TBが、タップした場所の周辺の時間帯に変更される。その結果、加速度波形グラフG1は、タップされた場所の周辺の部分的な加速度波形グラフG1′が時間軸方向に拡大されて表示される。例えば、第1のタイムスタンプマークT1の近傍をタップすると、図18に示すように、時間軸スライダーバーの時間帯が、第1のタイムスタンプマークT1に対応する関心時刻t1を中心とした所定の時間幅の時間帯に変更される。この時間帯は、例えば、関心時刻t1を中心に±2〜10秒程度、または関心時刻t1を中心に±2〜10歩程度に相当する時間幅を有する。時間帯が変更されたことにより、第1のタイムスタンプマークT1の周辺のグラフが拡大表示される。1ページ目が表示されているときに操作者11がタッチパネル上の加速度波形表示ウィンドウW1や動画表示ウィンドウW2以外の場所で左方向にスワイプすると、画面は次の2ページ目に移行する。   The acceleration waveform graph G1 is initially displayed for the entire data collection period. In this state, when the operator 11 taps a desired location on the acceleration waveform graph G1, the time zone TB represented by the time axis slider bar SB is changed to a time zone around the tapped location. As a result, the acceleration waveform graph G1 is displayed with the partial acceleration waveform graph G1 ′ around the tapped location enlarged in the time axis direction. For example, when the vicinity of the first time stamp mark T1 is tapped, as shown in FIG. 18, the time zone of the time axis slider bar is a predetermined center around the time of interest t1 corresponding to the first time stamp mark T1. The time zone is changed. This time zone has a time width corresponding to, for example, about ± 2 to 10 seconds with respect to the interest time t1, or about ± 2 to 10 steps with respect to the interest time t1. By changing the time zone, the graph around the first time stamp mark T1 is enlarged and displayed. If the operator 11 swipes leftward at a place other than the acceleration waveform display window W1 or the moving image display window W2 on the touch panel while the first page is displayed, the screen moves to the next second page.

データ解析用画面N22の2ページ目には、図19に示すように、2次元ヒストグラムマップM1が表示される。2次元ヒストグラムマップM1には、1回目のタイムスタンプに対応した第1のタイムスタンプマークT1と、2回目のタイムスタンプに対応した第2のタイムスタンプマークT2とが、その時刻ととも表示されている。始めは、2次元ヒストグラムマップM1のみが表示されている。この状態において、操作者11がタイムスタンプマークをタップすると、動画表示ウィンドウW2及びコントロールバーCBが追加表示される。この動画表示ウィンドウW2は、コントロールバーCBにおける操作に応じて、タップされたタイムスタンプマークに対応する関心時刻tiの周辺の時間帯TBにおける部分的な動画F1′を表示する。例えば、2次元ヒストグラムマップM1における第1のスタンプマークT1をタップすると、図19に示すように、動画表示ウィンドウW2が開き、コントロールバーCBが表示される。そして、このコントロールバーCBにおける操作に応じて、第1のタイムスタンプマークに対応する関心時刻t1の周辺の時間帯TBにおける部分的な動画F1′が表示される。また、コントロールバーCBに含まれている時間軸スライダーバーSBには、1回目のタイムスタンプが表す関心時刻t1の位置に、第1のタイムスタンプマークT1が付される。操作者11は、これらの表示を見ることで、1回目のタイムスタンプを入力した時間周辺で、患者10がどのような歩行動作を行っていたかを確認することができる。   On the second page of the data analysis screen N22, a two-dimensional histogram map M1 is displayed as shown in FIG. In the two-dimensional histogram map M1, a first time stamp mark T1 corresponding to the first time stamp and a second time stamp mark T2 corresponding to the second time stamp are displayed together with the time. Yes. Initially, only the two-dimensional histogram map M1 is displayed. In this state, when the operator 11 taps the time stamp mark, the moving image display window W2 and the control bar CB are additionally displayed. The moving image display window W2 displays a partial moving image F1 ′ in the time zone TB around the time of interest ti corresponding to the tapped time stamp mark in response to an operation on the control bar CB. For example, when the first stamp mark T1 in the two-dimensional histogram map M1 is tapped, the moving image display window W2 is opened and the control bar CB is displayed as shown in FIG. Then, according to the operation on the control bar CB, a partial moving image F1 ′ in the time zone TB around the time of interest t1 corresponding to the first time stamp mark is displayed. Further, the time axis slider bar SB included in the control bar CB is provided with the first time stamp mark T1 at the position of the interest time t1 represented by the first time stamp. The operator 11 can confirm what kind of walking motion the patient 10 was performing around the time when the first time stamp was input by looking at these displays.

データ解析用画面N22の2ページ目が表示されているときに操作者11がタッチパネル上で左方向にスワイプすると、画面は次の3ページ目に移行する。右方向にスワイプすると1ページ目に戻る。   If the operator 11 swipes left on the touch panel while the second page of the data analysis screen N22 is displayed, the screen moves to the next third page. Swipe right to go back to the first page.

データ解析用画面N22の3ページ目には、図20に示すように、2次元軌跡マップM2が表示される。2次元軌跡マップM2には、1回目のタイムスタンプに対応した第1のタイムスタンプマークT1と、2回目のタイムスタンプに対応した第2のタイムスタンプマークT2とが、その時刻とともに付されている。始めは、2次元軌跡マップM2のみが表示されている。この状態において、操作者11がタイムスタンプマークをタップすると、動画表示ウィンドウW2及びコントロールバーCBが追加表示される。この動画表示ウィンドウW2は、コントロールバーCBにおける操作に応じて、タップされたタイムスタンプマークに対応する関心時刻tiの周辺の時間帯TBにおける部分的な動画を表示する。例えば、2次元軌跡マップM2における第1のタイムスタンプマークT1をタップすると、図20に示すように、動画表示ウィンドウW2が開き、コントロールバーCBが表示される。そして、コントロールバーCBにおける操作に応じて、1回目のタイムスタンプが表す関心時刻t1の周辺の時間帯TBにおける部分的な動画F1′が表示される。時間軸スライダーバーSBには、1回目のタイムスタンプが表す関心時刻t1の位置に、第1のタイムスタンプマークT1が付される。操作者11は、これらの表示を見ることで、1回目のタイムスタンプを入力した時間周辺で、患者10がどのような歩行動作を行っていたかを確認することができる。   On the third page of the data analysis screen N22, a two-dimensional trajectory map M2 is displayed as shown in FIG. In the two-dimensional trajectory map M2, a first time stamp mark T1 corresponding to the first time stamp and a second time stamp mark T2 corresponding to the second time stamp are attached together with the time. . Initially, only the two-dimensional trajectory map M2 is displayed. In this state, when the operator 11 taps the time stamp mark, the moving image display window W2 and the control bar CB are additionally displayed. The moving image display window W2 displays a partial moving image in the time zone TB around the time of interest ti corresponding to the tapped time stamp mark in response to an operation on the control bar CB. For example, when the first time stamp mark T1 in the two-dimensional trajectory map M2 is tapped, the moving image display window W2 is opened and the control bar CB is displayed as shown in FIG. Then, in accordance with the operation on the control bar CB, a partial moving image F1 ′ in the time zone TB around the time of interest t1 represented by the first time stamp is displayed. A first time stamp mark T1 is attached to the time axis slider bar SB at the position of the time of interest t1 represented by the first time stamp. The operator 11 can confirm what kind of walking motion the patient 10 was performing around the time when the first time stamp was input by looking at these displays.

このような第二実施形態によれば、タイムスタンプを加速度の解析結果と動画との両方に関連付けすることができる。これにより、操作者11は、タイムスタンプが表す関心時刻tiの周辺の時間帯における患者10の歩行を、加速度だけでなく動画でも確認することができ、注目する患者10の動作について実際の動きをより具体的に高い精度で把握することができる。また、これにより、操作者11は、撮影した動画をすべて再生して確認することなく、関心のある部分の動画のみを再生して観察することができる。つまり、操作者11は、タイムスタンプが表す関心時刻付近の加速度及び動画に容易に辿り着くことができ、歩行評価のワークフローを改善することができる。   According to the second embodiment, the time stamp can be associated with both the acceleration analysis result and the moving image. As a result, the operator 11 can confirm the walking of the patient 10 in the time zone around the time of interest ti represented by the time stamp not only with acceleration but also with a moving image, and the actual movement of the attention of the patient 10 can be confirmed. More specifically, it can be grasped with high accuracy. Accordingly, the operator 11 can reproduce and observe only the moving image of the portion of interest without reproducing and confirming all the captured moving images. That is, the operator 11 can easily reach the acceleration and the moving image near the time of interest represented by the time stamp, and can improve the walking evaluation workflow.

また、加速度の2次元マップから、タイムスタンプマークを選択する操作だけで、そのような部分的な動画を切り出して見ることができ、操作性がよい。   Further, such a partial moving image can be cut out and viewed only by an operation of selecting a time stamp mark from a two-dimensional map of acceleration, and the operability is good.

(第1変形例)
第一及び第二実施形態において、タイムスタンプの入力は、所望の条件を事前に設定することにより、自動で行うようにしてもよい。
(First modification)
In the first and second embodiments, the time stamp may be input automatically by setting a desired condition in advance.

タイムスタンプを自動で入力するときの条件としては、例えば、次のようなものが考えられる。(1)指定値を超える大きさの加速度が検出された、(2)特定の加速度変化パターンが検出された、(3)前回の歩行評価時あるいは過去の平均化速度分布を逸脱する加速度が検出された、など。   As conditions for automatically inputting the time stamp, for example, the following can be considered. (1) Acceleration exceeding the specified value was detected, (2) A specific acceleration change pattern was detected, (3) Acceleration deviating from the previous averaged velocity distribution at the time of the previous gait evaluation , Etc.

タイムスタンプ入力制御部306は、例えば、加速度データの収集中に、所定の値や波形を表す加速度データの取得に応答して、その時刻を表すタイムスタンプの入力を行うよう制御する。また例えば、加速度データの収集後に、収集された加速度データに基づいて所定の値や波形を表す加速度データが取得された時刻を探索し、その時刻を表すタイムスタンプの入力を遡って行うよう制御する。   For example, the time stamp input control unit 306 controls to input a time stamp representing the time in response to acquisition of acceleration data representing a predetermined value or waveform during collection of acceleration data. Further, for example, after collecting acceleration data, a search is performed for a time when acceleration data representing a predetermined value or waveform is acquired based on the collected acceleration data, and control is performed so as to retroactively input a time stamp representing the time. .

図21は、第一実施形態における本変形例の歩行解析システム1における処理の流れの一例を示すフロー図である。   FIG. 21 is a flowchart showing an example of a processing flow in the walking analysis system 1 of the present modification example in the first embodiment.

タイムスタンプ入力制御部306は、例えば、図21に示すフローの中のステップA3など、加速度データの収集を開始する前において、操作者11による操作に応じてタイムスタンプ自動入力条件を設定する。   The time stamp input control unit 306 sets automatic time stamp input conditions according to the operation by the operator 11 before starting the collection of acceleration data, for example, step A3 in the flow shown in FIG.

図22は、タイムスタンプ自動入力条件の設定例を説明するための図である。タイムスタンプ自動入力条件の設定は、数値入力のほか、図22に示すように、過去データ上で関心領域を設定する方法による行うこともできる。操作者11は、例えば、図22に示すように、過去に得られた加速度の2次元マップ上において所定の円領域を加速度関心領域ROIとして決定する。タイムスタンプ入力制御部306は、この加速度関心領域ROIの枠を超えるような加速度が得られたとき、すなわち、所定の2方向の加速度成分の合成が所定レベルを超えるときに、タイムスタンプを自動で入力する。加速度関心領域ROIは、例えば、2次元マップ上の描画されたエリアをほとんど含むように設定することができる。この場合、患者10の体の揺れが過去の最大揺れよりも大きくなるような場合に、そのタイミングでタイムスタンプを入力するといったことができるようになる。   FIG. 22 is a diagram for explaining an example of setting a time stamp automatic input condition. The time stamp automatic input condition can be set by a method of setting a region of interest on past data as shown in FIG. For example, as shown in FIG. 22, the operator 11 determines a predetermined circular region as an acceleration region of interest ROI on a two-dimensional map of acceleration obtained in the past. The time stamp input control unit 306 automatically sets the time stamp when an acceleration exceeding the frame of the acceleration region of interest ROI is obtained, that is, when the composition of acceleration components in two predetermined directions exceeds a predetermined level. input. The acceleration region of interest ROI can be set so as to include almost the drawn area on the two-dimensional map, for example. In this case, when the shaking of the body of the patient 10 is larger than the past maximum shaking, a time stamp can be input at that timing.

タイムスタンプ入力制御部306は、例えば、図21に示すフローの中のステップA5など、加速度データの収集中において、加速度関心領域ROIの枠を超えるような加速度が発生したとき、タイムスタンプを自動で入力する。   The time stamp input control unit 306 automatically sets the time stamp when acceleration exceeding the frame of the acceleration region of interest ROI occurs during collection of acceleration data, for example, step A5 in the flow shown in FIG. input.

なお、このタイムスタンプの自動入力は、手動入力と併用してもよい。   This time stamp automatic input may be used together with manual input.

このような第1変形例によれば、患者10が特定の動作を行ったときに自動でタイムスタンプを入力することができ、タイムスタンプの入力を補助したりタイムスタンプの入力操作を省いたりして、操作者11の負担を軽減することができる。   According to the first modified example, the time stamp can be automatically input when the patient 10 performs a specific operation, and the time stamp input operation can be omitted or the time stamp input operation can be omitted. Thus, the burden on the operator 11 can be reduced.

なお、タイムスタンプ入力制御部306は、タイムスタンプが自動で入力されたときに、そのことを報知するための音や振動等を発するようにするとよい。これにより、操作者11は、収集中の加速度データに基づいて目視評価で着目すべきタイミングをリアルタイムに知らせることが可能になる。   Note that when the time stamp is automatically input, the time stamp input control unit 306 may emit a sound, vibration, or the like for notifying that. Thereby, the operator 11 can notify in real time the timing to which attention should be paid in the visual evaluation based on the acceleration data being collected.

また、過去データを参照してタイムスタンプ自動入力条件を設定する場合には、過去に見られた特定の動作と類似した動作のデータや、過去の動作と比較してより大きい動作のデータなどを抽出することができ、患者10の改善レベルなどの経時変化を容易に評価することができる。   In addition, when setting automatic time stamp input conditions with reference to past data, operation data similar to a specific operation seen in the past, data of a larger operation compared to past operations, etc. It is possible to extract and change with time such as the improvement level of the patient 10 can be easily evaluated.

(第2変形例)
第一及び第二実施形態において、タイムスタンプは複数種類用意しておき、これらを使い分けるようにしてもよい。手動入力の場合には、例えば、受け付ける操作を複数種類用意しておき、操作者11により行われた操作の種類に応じて、入力するタイムスタンプの種類を変える。複数種類の操作としては、例えば、タップ、ロングタップ、スワイプなどのほか、複数種類のボタン(ハード及びソフト)のうちいずれかのボタンを押す操作などを考えることができる。自動入力の場合には、例えば、タイムスタンプ自動入力条件を複数設定できるようにしておき、その条件に応じて入力するタイムスタンプの種類を変える。タイムスタンプの各種類の意味は、例えば、体軸ぶれや左右のぐらつきなど、関心の種類と対応付けたり、強い関心や弱い関心など、関心の程度と対応付けたりすることが考えられる。
(Second modification)
In the first and second embodiments, a plurality of types of time stamps may be prepared and used separately. In the case of manual input, for example, a plurality of types of operations to be accepted are prepared, and the type of time stamp to be input is changed according to the type of operation performed by the operator 11. As a plurality of types of operations, for example, taps, long taps, swipes, etc., and operations of pressing any one of a plurality of types of buttons (hardware and software) can be considered. In the case of automatic input, for example, a plurality of time stamp automatic input conditions can be set, and the type of time stamp to be input is changed according to the conditions. The meaning of each type of time stamp may be associated with the type of interest, such as body shake or left / right wobble, or with the degree of interest, such as strong interest or weak interest.

このような第2変形例によれば、関心の種類や程度などに応じてタイムスタンプを使い分けることができ、より効率的な歩行評価が期待できる。特に、タイムスタンプの入力を複数回行った場合でも、それぞれのタイムスタンプの入力理由を容易に理解することができる。   According to such a 2nd modification, a time stamp can be used properly according to the kind and grade of interest, etc., and more efficient walk evaluation can be expected. In particular, even when the time stamp is input a plurality of times, the reason for inputting each time stamp can be easily understood.

(第3変形例)
第一及び第二実施形態において、タイムスタンプの入力方法としては、ディスプレイ部302に表示されたボタンを擬似的に押す操作に限定されない。例えば、ディスプレイ部302上に搭載された操作部301としてのタッチパネル上の不特定の場所で手指を使ってタップやスワイプをする操作に応答して、タイムスタンプを入力する方法を採用してもよい。また例えば、押しボタンスイッチ(不図示)と歩行解析装置3とを有線または無線で接続し、操作者11がこの押しボタンスイッチを押す操作に応答して、タイムスタンプを入力する方法を採用してもよい。ディスプレイ部302を使用した上記の方法を用いる場合において、タイムスタンプを複数種類用意するときには、例えば、タイムスタンプの種類別にボタンを表示させたり、タップの回数やスワイプの方向に応じてタイムスタンプの種類を変えたりしてもよい。
(Third Modification)
In the first and second embodiments, the time stamp input method is not limited to an operation of pushing a button displayed on the display unit 302 in a pseudo manner. For example, a method of inputting a time stamp in response to an operation of tapping or swiping with a finger at an unspecified place on the touch panel as the operation unit 301 mounted on the display unit 302 may be adopted. . Further, for example, a method is adopted in which a push button switch (not shown) and the gait analyzer 3 are connected by wire or wireless, and the operator 11 inputs a time stamp in response to an operation of pressing the push button switch. Also good. In the case of using the above method using the display unit 302, when preparing a plurality of types of time stamps, for example, a button is displayed for each type of time stamp, or the type of time stamp depending on the number of taps and the direction of swipe May be changed.

このような第3変形例によれば、より良好な操作性が期待できる。   According to such a third modification, better operability can be expected.

(第4変形例)
第一及び第二実施形態において、グラフ・マップ生成部73は、タイムスタンプが表す関心時刻tiを含む所定の時間帯に収集された加速度データに対応した位置または範囲を指し示すマークを生成し、表示制御部310は、加速度のグラフ・マップにおいて当該マークを付して表示するよう制御してもよい。あるいは、表示制御手部310は、加速度のグラフ・マップにおいて、当該時間帯に収集された加速度データに対応した範囲の領域を、他の領域とは色や模様を変えるなどして強調表示するよう制御してもよい。
(Fourth modification)
In the first and second embodiments, the graph / map generator 73 generates and displays a mark indicating a position or range corresponding to acceleration data collected in a predetermined time zone including the time of interest ti represented by the time stamp. The control unit 310 may perform control so that the mark is displayed in the acceleration graph / map. Alternatively, the display control unit 310 highlights an area in a range corresponding to the acceleration data collected in the time zone in the acceleration graph / map by changing a color or a pattern from other areas. You may control.

このような第4変形例によれば、人為的あるいは機械的タイムラグにより、タイムスタンプの入力されるタイミングが真の関心時刻からずれてしまった場合でも、操作者11はその範囲から真の関心時刻に取得された加速度データの位置を効率よく見つけて観察することができる。   According to the fourth modified example, even if the timing at which the time stamp is input is deviated from the true time of interest due to an artificial or mechanical time lag, the operator 11 can move from the range to the true time of interest. It is possible to efficiently find and observe the position of the acceleration data acquired.

なお、発明は、上記実施形態に限定されず、その趣旨を逸脱しない範囲において種々の変更が可能である。   The invention is not limited to the above-described embodiment, and various modifications can be made without departing from the spirit of the invention.

例えば、上記実施形態では、加速度データの解析結果として、加速度の時間変化を表すグラフや同時刻における2方向の加速度成分のプロットにより得られる2次元マップを想定しているが、加速度データの解析結果はこれらに限定されない。   For example, in the above embodiment, the analysis result of the acceleration data is assumed to be a graph representing the time change of acceleration or a two-dimensional map obtained by plotting acceleration components in two directions at the same time. Is not limited to these.

また例えば、上記実施形態は、発明を人の歩行運動に適用した例であるが、発明を人のその他の移動運動、例えば人の走行運動などにも適用することができる。   Further, for example, the above embodiment is an example in which the invention is applied to a walking motion of a person, but the invention can also be applied to other movement movements of a person, for example, a running movement of a person.

また例えば、上記実施形態は、上述したように人に取り付けられた加速度センサから得られた加速度データを解析する移動運動解析装置であるが、コンピュータをこのような装置として機能させるためのプログラムもまた発明の実施形態の一つである。   Further, for example, the above embodiment is a mobile motion analysis device that analyzes acceleration data obtained from an acceleration sensor attached to a person as described above, but a program for causing a computer to function as such a device is also used. It is one of the embodiments of the invention.

1 歩行解析システム
10 患者
11 操作者
2 加速度センサモジュール
21 プロセッサ
22 加速度センサ
23 メモリ
24 通信I/F
25 バッテリ
201 加速度センサ部
202 サンプリング部
203 送信部
3 歩行解析装置
31 プロセッサ
32 ディスプレイ
33 操作部
34 メモリ
35 通信I/F
36 バッテリ
37 カメラ
301 操作部
302 ディスプレイ部
303 患者情報受付部
304 受信部
305 加速度データ取得制御部
306 タイムスタンプ入力制御部
307 データ解析部
308 時計部
309 表示制御部
310 記憶部
311 統括制御部
312 撮像部
313 動画データ取得制御部
41 データベース
42 記憶媒体
71 加速度成分特定部
72 関心時刻マッチング処理部
73 グラフ・マップ生成部

1 Gait Analysis System 10 Patient 11 Operator 2 Acceleration Sensor Module 21 Processor 22 Acceleration Sensor 23 Memory 24 Communication I / F
25 Battery 201 Acceleration sensor unit 202 Sampling unit 203 Transmitting unit 3 Walking analysis device 31 Processor 32 Display 33 Operation unit 34 Memory 35 Communication I / F
36 battery 37 camera 301 operation unit 302 display unit 303 patient information reception unit 304 reception unit 305 acceleration data acquisition control unit 306 time stamp input control unit 307 data analysis unit 308 clock unit 309 display control unit 310 storage unit 311 overall control unit 312 Unit 313 Movie Data Acquisition Control Unit 41 Database 42 Storage Medium 71 Acceleration Component Specification Unit 72 Interest Time Matching Processing Unit 73 Graph / Map Generation Unit

Claims (3)

人に取り付けられた加速度センサを用いて、前記人の移動運動中の各時刻における加速度を表す加速度データを収集する収集手段と、
前記加速度データが収集される前記人の移動運動中に、所望のタイミングに対応する時刻を関心時刻として記憶する記憶手段と、
前記収集された加速度データを所定の表示形態にて表示するとともに、前記関心時刻及び/または該関心時刻の周辺時刻における前記加速度データの表示上の位置を表示するよう、表示部を制御する表示制御手段と、を備え、
前記記憶手段は、前記収集された加速度データのうち一部が予め定められた条件を満たす場合に、該一部の加速度データが表す加速度が発生した時刻を前記関心時刻として記憶し、
前記記憶手段は、前記加速度データが表す加速度の部分波形が所定の波形に近似する場合に、該部分波形が発生した時刻を前記関心時刻として記憶する、
移動運動解析装置。
Collecting means for collecting acceleration data representing acceleration at each time during the movement of the person using an acceleration sensor attached to the person;
Storage means for storing a time corresponding to a desired timing as a time of interest during the movement of the person from which the acceleration data is collected;
Display control for controlling the display unit to display the collected acceleration data in a predetermined display form and to display the position of the acceleration data at the time of interest and / or the time around the time of interest. Means, and
The storage means stores, as the time of interest, a time at which an acceleration represented by a part of the acceleration data occurs when a part of the collected acceleration data satisfies a predetermined condition,
When the partial waveform of acceleration represented by the acceleration data approximates a predetermined waveform, the storage means stores the time when the partial waveform is generated as the time of interest.
Mobile motion analysis device.
前記所定の波形は、過去に収集された前記人の加速度データに基づいて設定される、請求項に記載の移動運動解析装置。 The mobile motion analysis apparatus according to claim 1 , wherein the predetermined waveform is set based on acceleration data of the person collected in the past. コンピュータを、請求項1から請求項2のいずれか一項に記載の移動運動解析装置として機能させるためのプログラム。   A program for causing a computer to function as the mobile motion analysis apparatus according to any one of claims 1 to 2.
JP2014071134A 2014-03-31 2014-03-31 Moving motion analysis apparatus and program Active JP6381252B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014071134A JP6381252B2 (en) 2014-03-31 2014-03-31 Moving motion analysis apparatus and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014071134A JP6381252B2 (en) 2014-03-31 2014-03-31 Moving motion analysis apparatus and program

Publications (2)

Publication Number Publication Date
JP2015192694A JP2015192694A (en) 2015-11-05
JP6381252B2 true JP6381252B2 (en) 2018-08-29

Family

ID=54432336

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014071134A Active JP6381252B2 (en) 2014-03-31 2014-03-31 Moving motion analysis apparatus and program

Country Status (1)

Country Link
JP (1) JP6381252B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6776600B2 (en) * 2016-04-25 2020-10-28 株式会社リコー Image display system, information processing device, and program
JP7268462B2 (en) * 2019-04-19 2023-05-08 コニカミノルタ株式会社 Biological information measuring device, information processing device, biological information analysis system, biological information analysis method and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04326483A (en) * 1991-04-26 1992-11-16 Toshiba Corp Device for displaying and monitoring process
US20080146968A1 (en) * 2006-12-14 2008-06-19 Masuo Hanawaka Gait analysis system
US10702174B2 (en) * 2007-06-27 2020-07-07 Integra Lifesciences Corporation Medical monitor user interface

Also Published As

Publication number Publication date
JP2015192694A (en) 2015-11-05

Similar Documents

Publication Publication Date Title
JP6332830B2 (en) Exercise support system, exercise support method, and exercise support program
JP5896240B2 (en) Exercise support device, exercise support method, and exercise support program
JP6381918B2 (en) Motion information processing device
JP2015061579A (en) Motion information processing apparatus
CN103077633A (en) Three-dimensional virtual training system and method
CN104379056A (en) System for the acquisition and analysis of muscle activity and operation method thereof
JP2015116288A (en) Exercise information display system, exercise information display method, and exercise information display program
JP2022500801A (en) Devices, methods, and programs for determining a user&#39;s cognitive status on a mobile device.
TW201337815A (en) Method and device for electronic fitting
JP6243731B2 (en) Mobile motion state display device, method and system, and program
CN112642133B (en) Rehabilitation training system based on virtual reality
CN111290572A (en) Driving device and driving method based on EOG signal and head posture
CN109844600A (en) Information processing equipment, information processing method and program
JP6241488B2 (en) Exercise support device, exercise support method, and exercise support program
JP6381252B2 (en) Moving motion analysis apparatus and program
JP7307447B2 (en) MOTION CAPTURE SYSTEM, MOTION CAPTURE PROGRAM AND MOTION CAPTURE METHOD
Cimorelli et al. Portable in-clinic video-based gait analysis: validation study on prosthetic users
JP2018085575A (en) Image processing apparatus, analysis system, image processing method, and program
JP6375597B2 (en) Network system, server, program, and training support method
JP6243732B2 (en) Mobile motion state display device, method and system, and program
JP2000138927A (en) Image comparative display device
CN114832349B (en) Yuanzhou swimming teaching auxiliary system and use method thereof
JP6259301B2 (en) Moving motion analysis apparatus, method and system, and program
JP2005230068A (en) Method and device for supporting exercise
JP6552875B2 (en) Moving motion analysis apparatus, method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170920

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171017

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20171213

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20180223

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180702

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180731

R150 Certificate of patent or registration of utility model

Ref document number: 6381252

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250