JP2019187878A - 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置 - Google Patents

歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置 Download PDF

Info

Publication number
JP2019187878A
JP2019187878A JP2018084952A JP2018084952A JP2019187878A JP 2019187878 A JP2019187878 A JP 2019187878A JP 2018084952 A JP2018084952 A JP 2018084952A JP 2018084952 A JP2018084952 A JP 2018084952A JP 2019187878 A JP2019187878 A JP 2019187878A
Authority
JP
Japan
Prior art keywords
measurement
walking mode
data
pedestrian
walking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018084952A
Other languages
English (en)
Other versions
JP6509406B1 (ja
Inventor
大輔 福井
Daisuke Fukui
大輔 福井
恵木 正史
Masashi Egi
正史 恵木
弘充 中川
Hiromitsu Nakagawa
弘充 中川
田中 毅
Takeshi Tanaka
毅 田中
賢稔 三宅
Masatoshi Miyake
賢稔 三宅
貴司 小野
Takashi Ono
貴司 小野
伸也 堀越
Shinya Horikoshi
伸也 堀越
野口 稔
Minoru Noguchi
稔 野口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi High Tech Corp
Original Assignee
Hitachi High Technologies Corp
Hitachi High Tech Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi High Technologies Corp, Hitachi High Tech Corp filed Critical Hitachi High Technologies Corp
Priority to JP2018084952A priority Critical patent/JP6509406B1/ja
Priority to EP19792057.2A priority patent/EP3785629A4/en
Priority to CN201980025909.3A priority patent/CN111989040A/zh
Priority to PCT/JP2019/016215 priority patent/WO2019208312A1/ja
Priority to US17/049,357 priority patent/US20210244317A1/en
Application granted granted Critical
Publication of JP6509406B1 publication Critical patent/JP6509406B1/ja
Publication of JP2019187878A publication Critical patent/JP2019187878A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/112Gait analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1121Determining geometric values, e.g. centre of rotation or angular range of movement
    • A61B5/1122Determining geometric values, e.g. centre of rotation or angular range of movement of movement trajectories
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7435Displaying user selection data, e.g. icons in a graphical user interface
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/744Displaying an avatar, e.g. an animated cartoon character
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/50Systems of measurement based on relative movement of target
    • G01S13/58Velocity or trajectory determination systems; Sense-of-movement determination systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/08Elderly
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30241Trajectory

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Artificial Intelligence (AREA)
  • Physiology (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Mathematical Physics (AREA)
  • Evolutionary Computation (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Fuzzy Systems (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)

Abstract

【課題】利用者の歩行態様を分析とともに分かりやすく表示可能とする歩行態様表示方法、歩行態様表示システム、歩行態様分析装置を提供する。【解決手段】歩行者の計測と歩行者と比較対照する参照歩行者の計測とを選択し、歩行者の1歩行分の歩行をアニメーションとして表示する第1の歩行モデル604を表示し、参照歩行者の1歩行分の歩行をアニメーションとして表示する第2の歩行モデル603を表示し、歩行者の計測に係る所定の特徴量データの大きさと参照歩行者の計測に係る所定の特徴量データの大きさとを比較可能に表示する(607)。【選択図】図6A

Description

本発明は、歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置に関する。
人が自分の身体を自由に動かすには、骨、関節、筋肉や神経で構成される運動器が正常に機能する必要がある。ロコモティブシンドローム(運動器症候群、「ロコモ」)は運動器のいずれかあるいは複数に障害が起こり、立つ、歩く、走る、座るといった移動機能が低下している状態をいう。このような移動機能の低下が進行すると日常生活にも支障が生じるようになる。入院治療が必要になるような運動器障害は50歳以降に多発しているといわれており、高齢での運動器障害は支援や介護が必要になるリスクにつながる。運動器障害は徐々に進行するため、ロコモの予防、早期の発見、適切な対処の必要性が認識されている。
特許文献1は、歩行者の歩行状態を把握可能な歩行状態表示システムについて開示する。本システムでは対象者に歩行動作計測装置を取り付けて歩行させ、対象者の歩行状態を示す指標を求めて表示する。指標としては、歩行状態を示す歩幅、歩行周期、重心の変動状態、足部高さ、ひざ高さなどが例示されている。
特開2012−65723号公報
人の移動機能の低下は歩行障害として表れる。このため、ロコモの早期発見、改善を進める人の歩行状態を把握し、対象者に分かりやすく伝えることが有効と考えられる。特許文献1では、求めた指標を歩行動作パターンとして、現状の対象者の歩行動作パターンと予め規定された最適な歩行動作パターンとを比較表示したり、指標を時系列的にグラフ表示したりすることが記載されているが、具体的にどのように表示するかについては記載されていない。
本発明の目的は、歩行者の歩行態様を分析とともに分かりやすく表示可能とし、さらに改善方法を提示可能にすることにより、ロコモの予防、早期の発見、適切な対処につなげることである。
本発明の一実施態様である、歩行者の歩行態様を表示する歩行態様表示方法は、複数の被計測者の歩行について、計測ごとに、被計測者の計測点の3次元空間の軌跡を示す骨格データと、骨格データにおける被計測者の1歩行を定義するピッチデータと、被計測者の1歩行分の骨格データから算出される特徴量データとをあらかじめ記憶し、複数の被計測者のうち、表示画面に表示させる歩行者の計測と歩行者と比較対照する参照歩行者の計測とを選択し、歩行者の計測に係る骨格データ及びピッチデータに基づき、歩行者の1歩行分の歩行をアニメーションとして表示する第1の歩行モデルを表示し、参照歩行者の計測に係る骨格データ及びピッチデータに基づき、参照歩行者の1歩行分の歩行をアニメーションとして表示する第2の歩行モデルを表示し、歩行者の計測に係る所定の特徴量データの大きさと参照歩行者の計測に係る所定の特徴量データの大きさとを比較可能に表示する。
その他の課題と新規な特徴は、本明細書の記述および添付図面から明らかになるであろう。
歩行者の歩行態様を分析とともに分かりやすく表示可能とする。
歩行態様表示システムのハードウェア構成である。 歩行態様表示システムのソフトウェア構成である。 歩行の計測及び歩行態様分析モデルの作成、更新フローを示す図である。 ドメイン知識の登録フローを示す図である。 利用者の歩行態様を表示するフローである。 歩行態様の表示画面の例である。 歩行態様の表示画面の例である。 表示画面を表示させる全体フローである。 歩行モデルの表示フローである。 特徴量の表示フローである。 歩行態様度の表示フローである。 ドメイン知識の表示フローである。 ドメイン知識データのデータ構造である。 計測メタデータのデータ構造である。 骨格データのデータ構造である。 ピッチデータのデータ構造である。 特徴量データのデータ構造である。 特徴量の例示である。 特徴量説明データのデータ構造である。 分析モデルのデータ構造である。
図1に歩行態様表示システム1のハードウェア構成を示す。歩行態様表示システム1は、被計測者に対する歩行の計測とその計測結果より歩行態様分析モデルの作成を行う歩行態様分析システム110と、利用者の歩行態様を歩行態様分析装置による分析とともに表示する歩行態様表示端末120とを有し、歩行態様分析システム110の歩行態様分析装置100と歩行態様表示端末120とはネットワーク130により接続されている。
歩行態様分析装置100は、CPU(Central Processing Unit)101、入力I/F(Interface)102、出力I/F103、メモリ104、ストレージ105、通信I/F106、I/Oポート107を備え、それらは内部バス108により結合され、汎用計算機として実現可能なものである。入力I/F102は、キーボードやマウス等の入力装置に接続され、また出力I/F103は、ディスプレイやプリンタに接続され、オペレータに対するGUI(Graphical User Interface)を実現する。通信I/F106はネットワーク130と接続するためのインタフェースである。ストレージ105は通常、HDDやROM、フラッシュメモリなどの不揮発性メモリで構成され、歩行態様表示システム1が実行するプログラムやプログラムが処理対象とするデータ等を記憶する。メモリ104はRAM(Random Access Memory)で構成され、CPU101の命令により、プログラムやプログラムの実行に必要なデータ等を一時的に記憶する。CPU101は、ストレージ105からメモリ104にロードしたプログラムを実行する。
歩行態様分析装置100はI/Oポート107を介してセンサ111と接続され、歩行態様分析システム110を構成する。歩行態様分析装置100は、センサ111に対してセンシングデータの収集命令を出し、センサ111はこれに応じて被計測者の歩行についてセンシングを行い、計測結果を歩行態様分析装置100に送信する。本実施例では、センサ111としてTOF(Time of Flight)方式による距離センサを用いる例を説明する。センサ111は、被計測者の歩行態様を捉えるため、被計測者の歩行中における身体の計測点(関節等)の3次元空間における動き(軌跡)を計測する。距離センサは、3次元空間における計測点の座標を直接的に求めることができる利点を有している。なお、センサ111は距離センサに限定されるものではない。例えば、センサ111をビデオカメラとし、ビデオカメラにより歩行中の計測者を撮影した映像から画像解析を行ってもよいし、加速度センサ、角度センサ、ジャイロセンサのようなセンサを用いてもよい。複数種類のセンサを用いることも可能である。センサ111自体が計測点の3次元空間の軌跡を出力するものであってもよく、センサ111の計測結果あるいは撮影結果から歩行態様分析装置100が計測点の3次元空間の軌跡を算出するように構成してもよい。
歩行態様表示端末120は、利用者の歩行態様を歩行態様分析装置100による分析とともに表示する。歩行態様表示端末120は、CPU121、メモリ122、通信I/F123、入力I/F124、出力I/F125を備え、それらは内部バス126により結合され、タブレットやスマートフォンとして実現可能なものである。歩行態様表示端末120の各構成要素は歩行態様分析装置100の相当する構成要素と同等である。
図2は歩行態様表示システム1のソフトウェア構成であり、システム1において実行されるプログラムとその関係を示している。オペレータプログラム210は、歩行を計測し、その計測結果より歩行態様分析モデルの作成、更新を行うためのGUIを実現する機能を有する。データ可視化プログラム220は、利用者の歩行態様を分かりやすく表示する機能を有する。骨格データ抽出プログラム230は、オペレータプログラム210の骨格データ抽出呼出部212により起動され、センサ111からのセンシングデータより骨格データを抽出する機能を有する。特徴量算出プログラム240は、オペレータプログラム210の特徴量算出呼出部213により起動され、骨格データから被計測者の歩行態様を分析するための特徴量を算出する機能を有する。データ分析プログラム250は、特徴量から利用者の歩行態様を分析する歩行態様分析モデルの作成、更新を行う機能、計測データや分析モデルをデータベースに格納させる機能、データ可視化プログラム220により分析データを表示する際に、歩行態様の表示に必要なデータ取得や歩行態様分析モデルに基づく利用者の歩行態様の評価を行う機能を有する。データベースプログラム260は、歩行態様表示システム1に必要な計測データや分析モデルを、ストレージ105に格納し、管理する機能を有する。なお、オペレータプログラム210、骨格データ抽出プログラム230、特徴量算出プログラム240、データ分析プログラム250、データベースプログラム260は歩行態様分析装置100にて実行されるプログラムであり、データ可視化プログラム220は歩行態様表示端末120で実行されるプログラムである。
図3を用いて、歩行態様分析装置100が実行する、歩行の計測及びその計測結果より歩行態様分析モデルを作成、更新するフローについて説明する。被計測者310はオペレータ320に計測を依頼し(S01)、オペレータ320は、被計測者310の計測メタデータをシステムに入力し、計測を開始するよう、オペレータプログラム210のユーザ入出力処理部211に対して指示する(S02)。計測メタデータのデータ構造を図13に示す。
計測メタデータ335は計測ごとに作成される(S10)。計測メタデータは、データを一意に特定するための計測ID1301、センサ111による計測結果を格納する計測ファイル名1302、被計測者310に関する基礎データ1303〜1305を含む。基礎データは、歩行態様分析モデルの学習を行う際の学習データの母集団の決定、または歩行態様分析モデルの変数の一部として用いられる。基礎データとしては例えば、年齢1303、性別1304、歩行態様1305といった項目が挙げられる。
骨格データ抽出呼出部212(オペレータプログラム210)が、骨格データ抽出プログラム230を起動し、計測が開始される(S03)。骨格データ抽出処理部231は、被計測者の歩行を計測し(S04)、骨格データ331を出力する(S05)。本実施例では、骨格データ抽出プログラム230がオンラインでセンサ111からセンシングデータを取得することを想定しているが、センサ111で取得したセンシングデータをオフラインで装置に入力することも可能である。骨格データ331のデータ構造を図14に示す。
骨格データ331は、被計測者の計測点の3次元空間の軌跡であり、縦軸に時間(タイムスタンプ)1401、横軸に各計測点の(X,Y,Z)座標1402が格納されている。計測点には、歩行態様に影響する関節等が設定される。骨格データ331は、後述するように、被計測者の歩行に関する特徴量の抽出に用いられる。このため、被計測者個々の体格に依存する相違を捨象するため、例えば、歩行中を通じて振れの少ない身体中の計測点を、歩行中常に原点として相対化した相対座標として格納することが望ましい。
骨格データ抽出プログラム230は、骨格データ331を抽出すると、計測が終了した旨をオペレータプログラム210に返す。これを受けて、特徴量算出呼出部213(オペレータプログラム210)が、特徴量算出プログラム240を起動する(S06)。まず、骨格データ取得部241は、骨格データ331を取得する(S07)。次に、ピッチデータ抽出処理部242は、骨格データ331よりピッチデータを抽出する(S08)。ピッチデータ332のデータ構造を図15に示す。
ピッチデータ332は、骨格データ331における被計測者の1歩行を定義する。図15の例では、計測ID1301により指定される骨格データは、ピッチ開始1501に規定される時間からピッチ終了1502に規定される時間までが1歩行であることを意味している。1歩行は例えば、歩行者が歩行中に右足のかかとを地面につけてから、再び右足のかかとが地面から離れるまでとして定義することができ、センシングデータより「右足のかかとが着地した時間」、「右足のかかとが地面から離れた時間」を検出し、それぞれをピッチ開始時刻、ピッチ終了時刻として、ピッチデータ332に登録する。
続いて、特徴量算出処理部243は、1歩行分の骨格データ331から特徴量データを算出する(S08)。算出する特徴量は、図16Bに示すように、あらかじめシステムにおいて定められている。特徴量は、歩行中における被計測者の関節や軸の動き、相関であって、骨格データ331から算出される。特徴量データ333のデータ構造を図16Aに示す。計測ID1301毎に、算出した特徴量1601が格納される。なお、後述するように計測した歩行態様を表示する際、特徴量の内容を被計測者にも理解できるように表示する。このため、システムで算出する特徴量を定義するのにあわせて、利用者に特徴量の内容を説明するために特徴量説明データ334を格納している。特徴量説明データ334のデータ構造を図17に示す。特徴量説明データ334は、特徴量を一意に特定する特徴量ID1701、特徴量IDで特定される特徴量の名称である特徴量名称1702、特徴量の内容を説明する特徴量説明1703を含む。
1回の計測により得られる、計測メタデータ335、骨格データ331、ピッチデータ332、特徴量データ333は、オペレータプログラム210のデータ永続化呼出部214よりデータ分析プログラム250に対して、データベースに格納するよう依頼される(S11)。
データ分析プログラム250のデータ分析処理部256は、データベースに蓄積された被計測者の歩行データを学習データとして用い、歩行態様分析モデルの学習を行い(S12)、分析モデル336を作成または更新する(S13)。分析モデル336のデータ構造を図18に示す。分析モデル336は、モデルを一意に特定するモデルID1801、モデルの分析タイプ1802、目的変数1803、モデルデータ1804を含む。例えば、本例のモデルID「1」の歩行態様分析モデルは、歩行態様「健常歩行」に該当する程度(「歩行態様度」という)を算出するロジスティック回帰分析モデルであって、その判定プログラムが「Binary Data 1」であることを意味している。なお、ここでは分析モデルとして教師有り学習モデルを使用するが、特定のモデルに限定されるものではない。
データ分析プログラムのデータ永続化処理部251は、オペレータプログラム210より依頼された計測メタデータ335、骨格データ331、ピッチデータ332、特徴量データ333、及びデータ分析処理部256が作成または更新した分析モデル336をデータベースプログラム260に保存、管理するよう依頼し(S14)、データベースプログラム260がそれを実行する。
このように、歩行態様分析装置100は分析モデル336を有し、これを用いてシステムの利用者の歩行態様の分析を行う。本実施例のシステムでは、分析した歩行態様を分かりやすく表示し、あるいは歩行態様を改善するためのアドバイスを行う。
図4を用いて、利用者の歩行態様に対してアドバイスを行うため、システムにドメイン知識を登録するフローについて説明する。データベースへの登録フローは歩行態様分析モデルの作成、更新フローの場合と同様であるため、詳細な説明は省略する。なお、上述した特徴量説明データ334の登録フローも図4と同じフローでシステムに登録される。
ドメイン知識とは、利用者の歩行態様を特徴づける特徴量に関する専門知識である。ドメイン知識データ401のデータ構造を図12に示す。ドメイン知識データ401は、ドメイン知識を一意に特定する知識ID1201、知識分野1202、特徴量ID1701、条件1203、知識1204を含む。知識分野1202は、ドメイン知識が何の専門分野に関わる知識であるかを示す。特徴量ID1701はドメイン知識がどの特徴量についての専門知識であるかを示し、当該特徴量が条件1203に示される条件である場合における専門知識1204が登録されている。例えば、知識ID「2」では、フィットネス分野の知識であって、左手首の左右方向の動きの速さが10以上20未満の場合はトレーニングAを受けることを勧める、ことが登録されている。知識ID「3」では、医療分野の知識であって、左手首の上下方向の動きの速さが20以上の場合は検査を受けることを勧める、ことが登録されている。知識1204の内容は、特徴量データが所定の条件にあるときに、利用者へ伝達することが望ましい注意、警告、アドバイス等であり、その内容は特に限定されない。
図5を用いて、利用者の歩行をセンシングして、利用者の歩行態様を歩行態様分析装置100により分析し、利用者の歩行態様を表示するフローについて説明する。まずは、利用者315の歩行を歩行態様分析システム110により計測する。図3に関して説明したフローと同様に利用者315の歩行についての特徴量データ333を算出する。なお、この場合は利用者315の歩行態様は未知であるので、計測メタデータ335に歩行態様の情報はない。図5は利用者315の特徴量データが算出され、データベースに登録された後に、利用者の歩行態様を表示するフローを示している。この例では、オペレータ320が歩行態様表示端末120を操作する例を示しているが、利用者315が直接操作するようにしてもよい。
オペレータ320は歩行態様表示端末120に対して、利用者315の歩行態様を表示装置に表示させるため、データ可視化プログラム220を起動させる(S31)。プログラムの起動や表示させる内容についての指示入力、端末(ディスプレイ)への表示はユーザ入出力処理部221(図2参照)によって実行される。データ可視化プログラム220は利用者の歩行態様を表示するために歩行態様分析装置100に対して、表示用データを要求する(S32)。表示用データの要求を受けて、データ分析プログラム250はデータベースプログラム260を通じて可視化に必要なデータを取得する(S33)。なお、必要なデータは既にデータベースに格納されている。すなわち、利用者315に関する計測メタデータ335、骨格データ331、特徴量データ333、ピッチデータ332及び、歩行形態を分析する分析モデル336、特徴量説明データ334、ドメイン知識データ401である。その後、データ分析プログラム250は、取得したデータを表示するために必要な加工及び分析モデルを用いた歩行態様度データの算出等を実行する(S34)。データ分析プログラム250はこれら表示に必要なデータを歩行態様表示端末120に送信する(S35)。歩行態様表示端末120は受信した表示用データを用いて利用者315の歩行態様を表示する。オペレータ320はその結果を利用者315にフィードバックする(S36)。
図6A、図6Bは、歩行態様表示端末120により表示される利用者の歩行態様の表示画面の例である。表示画面600は2名の歩行者の歩行態様を表示するようにされている。複数の歩行態様を一目で比較可能にすることで、利用者に自己の歩行態様の課題を理解しやすくするためである。比較対象とする歩行者(参照歩行者という)は、歩行態様の異なる他者であってもよいし、自己の過去の歩行態様であってもよい。
表示画面600の構成について説明する。歩行者データ1が参照歩行者、歩行者データ2が利用者に係るものとする。第1選択欄601、第2選択欄602においてそれぞれ参照歩行者の計測ID、利用者の計測IDを選択することにより、参照歩行者及び利用者の歩行態様を表示させる。
歩行モデル603、604は、歩行者の歩行をアニメーションとして表示するものである。歩行者を示すスケルトンモデルによる1歩行の動きを繰り返し表示する。本例のスケルトンモデルでは、歩行者の身体を模したスケルトンモデルに計測点が丸で示されている。歩行モデル603、歩行モデル604はそれぞれ参照歩行者、利用者の歩行を表す。
歩行態様度605、606は、歩行態様分析モデルを用いて歩行者の歩行を分析した歩行態様度を表示するものである。歩行態様度605は参照歩行者の歩行態様度である。この値は、図18に示す分析モデルにおけるモデルID1を用いて分析することにより得ることができる。歩行態様度606は利用者の歩行態様度である。同様にモデルID1による分析に加えて、老人歩きを分析する分析モデルを用いて分析することで歩行態様度606を表示することができる。
表示画面600の下部には特徴量表示欄607と特徴量説明欄608が設けられている。特徴量表示欄607は算出された特徴量のうち、利用者の歩行態様を特徴づける特徴量が表示される。本例では、参照歩行者と利用者の歩行態様に係る特徴量を比較しやすいように、棒グラフにより表されている。特徴量説明欄608には、特徴量表示欄607に表示されている内容の説明が表示される。図6Aの場合は、利用者の歩行態様を特徴づける特徴量として、参照歩行者と利用者との間で差の割合が大きな特徴量を示しているので、その説明が表示されている。例えば、差の割合が大きな特徴量から順に所定数選択する。また、特徴量表示欄607に表示されている特徴量の名称またはグラフをクリック、あるいはタッチすることにより、オペレータが特定の特徴量について選択することができるようになっている。
図6Bは、図6Aの画面表示において、オペレータが2番目の特徴量「首のZ軸と背骨のZ軸の速度の相互相関関数のピーク強度」を選択した場合の表示画面を示している。このとき、以下のように表示が変化する。
(1)特徴量表示欄607では選択した特徴量611が他の特徴量とは視覚的に識別可能に表示される。
(2)選択した特徴量611についての特徴量説明が、特徴量説明欄608に表示される。
(3)歩行モデル603、604のそれぞれに、選択した特徴量611を算出するのに使用される計測点612,613が識別可能に表示される。
(4)選択した特徴量611についてドメイン知識が存在する場合には、対応するドメイン知識614が表示される。
図7〜図11を用いて、表示画面600を表示させるフローについて説明する。図7は表示画面を表示する全体フローである。オペレータ320は、ブラウザ(データ可視化プログラム)220に対して、結果表示要求を行う(S41)。結果表示要求には、端末120のURLや、表示画面に表示させる参照歩行者、利用者の計測IDの選択等を含む。ピッチ抽出済骨格データ取得要求(S42)は歩行モデル603、604の表示に関する。特徴量データ取得要求(S44)は特徴量表示欄607、特徴量説明欄608の表示に関する。歩行態様度データ取得要求(S46)は歩行態様度605、606の表示に関する。ドメイン知識データ取得要求(S48)は、選択した特徴量611に関するドメイン知識614の表示に関する。
図8を用いて、表示画面600への歩行モデルの表示フローについて説明する。骨格データ表示処理部222(データ可視化プログラム220、図2参照)は骨格データ取得処理部252(データ分析プログラム)にピッチ抽出済骨格データ取得要求を出す(S42)。骨格データ取得処理部252はデータベースプログラム260を介して、選択された計測IDに係る骨格データ(図14参照)及びピッチデータ(図15参照)を取得する(S51,S52)。取得した骨格データ、ピッチデータから、1歩行分の骨格データ(ピッチ抽出済骨格データ)を抽出する(S53)。ピッチ抽出済骨格データは、骨格データ取得処理部252から骨格データ表示処理部222に送信され、骨格データ表示処理部222は当該データに基づき、アニメーション化して歩行モデルとして表示する(S43)。
図9を用いて、表示画面600への特徴量の表示フローについて説明する。特徴量データ表示処理部223は特徴量データ取得処理部253に特徴量データ取得要求を出す(S44)。特徴量データ取得処理部253はデータベースプログラム260を介して、選択された計測IDに係る特徴量データ(図16A参照)を取得する(S61)。特徴量は、歩行者の歩行態様を正確に分析することを意図しているため膨大な種類を有する。このため、歩行者の歩行態様の特徴に密接にかかわる特徴量を選択して表示する必要がある。図6Aの例では、選択した2つの計測IDにおける差の割合の大きさを基準に表示する特徴量を選択するようにしている。このように、特徴量データ取得処理部253は、表示対象とする特徴量をあらかじめ定めた所定の基準で抽出する(S62)。また、特徴量データ取得処理部253はデータベースプログラム260を介して、特徴量説明データ(図17参照)を取得し(S63)、表示対象として抽出した特徴量データに対応する特徴量データ説明を抽出する(S64)。表示対象として抽出された特徴量データと特徴量説明データは、特徴量データ取得処理部253から特徴量データ表示処理部223に送信され、特徴量データ表示処理部223は当該データに基づき、棒グラフ等を作成して表示する(S45)。
図10を用いて、表示画面600への歩行態様度の表示フローについて説明する。歩行態様度表示処理部225は歩行態様定量化処理部255に歩行態様度データ取得要求を出す(S46)。歩行態様定量化処理部255はデータベースプログラム260を介して、歩行態様分析モデル(図18参照)、及び選択された計測IDに係る特徴量データを取得する(S71)。取得した特徴量データを各分析モデルに適用し、各分析モデルに基づく歩行態様度データを算出する(S73)。歩行態様度データは、歩行態様定量化処理部255から歩行態様度表示処理部225に送信され、歩行態様度表示処理部225は当該データに基づき、歩行態様度データを表示する(S47)。表示方法は特に限定されないが、歩行態様が健常歩行でなく、何らかの異常が見られる場合には、図6Aに示すように歩行態様度に高い値が算出された分析モデルの目的変数である歩行態様(図6Aの場合は「老人歩き」)をあわせて表示することが望ましい。例えば、取得した特徴量データを分析モデル336に格納されている全ての分析モデルに適用し、このとき最も大きな値となる歩行態様度を表示するようにすればよい。
図11を用いて、表示画面600へのドメイン知識の表示フローについて説明する。ドメイン知識表示処理部224はドメイン知識取得処理部254にドメイン知識データ取得要求を出す(S48)。ドメイン知識取得処理部254はデータベースプログラム260を介して、ドメイン知識データ(図12参照)を取得する(S81)。取得したドメイン知識データは、ドメイン知識取得処理部254からドメイン知識表示処理部224に送信され、ドメイン知識表示処理部224は当該データに基づき、ドメイン知識を表示する(S49)。ドメイン知識取得処理部254が送付するドメイン知識は歩行態様分析装置100に格納されているドメイン知識をすべて送付してもよいし、表示対象とする特徴量に関係するドメイン知識を抽出して送付するようにしてもよい。
以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、これに限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能なものである。例えば、表示画面600が表示する特徴量として、歩行態様度に高い値が算出された分析モデルにおいて、高い重み付けがなされている特徴量を選択して表示するようにしてもよい。その場合、オペレータ320のブラウザ220への指示入力をインタラクティブに実行可能として、表示する特徴量を切り換えられるようにしてもよい。例えば、表示画面600に対して特徴量の選択欄を設け、選択肢として「参照歩行者との差の割合の大きな特徴量」、「歩行態様度分析に寄与の大きな特徴量」等を選択可能にすることで、利用者315は複数の観点から自己の歩行態様を認識することが可能になる。
1:歩行態様表示システム、100:歩行態様分析装置、101:CPU、102:入力I/F、103:出力I/F、104:メモリ、105:ストレージ、106:通信I/F、107:I/Oポート、108:内部バス、110:歩行態様分析システム、111:センサ、120:歩行態様表示端末、121:CPU、122:メモリ、123:通信I/F、124:入力I/F、125:出力I/F、126:内部バス、130:ネットワーク、210:オペレータプログラム、220:データ可視化プログラム、230:骨格データ抽出プログラム、240:特徴量算出プログラム、250:データ分析プログラム。

Claims (16)

  1. 歩行者の歩行態様を表示する歩行態様表示方法であって、
    複数の被計測者の歩行について、計測ごとに、被計測者の計測点の3次元空間の軌跡を示す骨格データと、骨格データにおける被計測者の1歩行を定義するピッチデータと、被計測者の1歩行分の骨格データから算出される特徴量データとをあらかじめ記憶し、
    前記複数の被計測者のうち、表示画面に表示させる歩行者の計測と前記歩行者と比較対照する参照歩行者の計測とを選択し、
    前記歩行者の計測に係る骨格データ及びピッチデータに基づき、前記歩行者の1歩行分の歩行をアニメーションとして表示する第1の歩行モデルを表示し、
    前記参照歩行者の計測に係る骨格データ及びピッチデータに基づき、前記参照歩行者の1歩行分の歩行をアニメーションとして表示する第2の歩行モデルを表示し、
    前記歩行者の計測に係る所定の特徴量データの大きさと前記参照歩行者の計測に係る所定の特徴量データの大きさとを比較可能に表示する歩行態様表示方法。
  2. 請求項1において、
    前記表示画面に表示される所定の特徴量データは、前記歩行者の計測に係る特徴量データの大きさと前記参照歩行者の計測に係る特徴量データの大きさとの差の割合が大きな特徴量データから選択される歩行態様表示方法。
  3. 請求項1において、
    被計測者の1歩行分の骨格データから算出される特徴量データの内容を説明する特徴量説明データをあらかじめ記憶し、
    前記表示画面に表示される所定の特徴量データのいずれかが選択されると、前記特徴量説明データより、前記選択された特徴量データの説明を表示し、前記選択された特徴量データの算出に用いられる計測点を前記第1の歩行モデル及び前記第2の歩行モデルに表示する歩行態様表示方法。
  4. 請求項3において、
    被計測者の1歩行分の骨格データから算出される特徴量データに関する専門知識であるドメイン知識データをあらかじめ記憶し、
    前記ドメイン知識データに前記選択された特徴量データに関する専門知識が存在する場合には、当該専門知識を前記表示画面に表示する歩行態様表示方法。
  5. 請求項1において、
    特徴量データから所定の歩行態様に該当する程度を示す歩行態様度を算出する歩行態様分析モデルをあらかじめ記憶し、
    歩行態様分析モデルに前記歩行者の計測に係る特徴量データを適用して前記歩行者の計測に係る第1の歩行態様度を算出し、
    歩行態様分析モデルに前記参照歩行者の計測に係る特徴量データを適用して前記参照歩行者の計測に係る第2の歩行態様度を算出し、
    前記第1の歩行態様度及び前記第2の歩行態様度を前記表示画面に表示する歩行態様表示方法。
  6. 請求項5において、
    複数の歩行態様分析モデルに前記歩行者の計測に係る特徴量データを適用して算出された最も大きな歩行態様度を、前記第1の歩行態様度として表示する歩行態様表示方法。
  7. 請求項6において、
    前記表示画面に表示される所定の特徴量データは、前記第1の歩行態様度の算出に係る歩行態様分析モデルにおいて寄与の大きな特徴量データから選択される歩行態様表示方法。
  8. 請求項5において、
    前記歩行態様分析モデルは、前記複数の被計測者の計測に係る特徴量データを学習データとして作成または更新される教師有り学習モデルである歩行態様表示方法。
  9. 歩行態様分析装置と、前記歩行態様分析装置とネットワークを介して接続される歩行態様表示端末とを有する歩行態様表示システムであって、
    前記歩行態様分析装置は、第1のプロセッサと、第1のメモリと、ストレージと、前記第1のメモリに読み込まれ、前記第1のプロセッサにより実行されるデータ分析プログラムとを有し、
    前記歩行態様表示端末は、第2のプロセッサと、第2のメモリと、前記第2のメモリに読み込まれ、前記第2のプロセッサにより実行されるデータ可視化プログラムとを有し、
    前記歩行態様分析装置の前記ストレージは、複数の被計測者の歩行について、計測ごとに、被計測者の計測点の3次元空間の軌跡を示す骨格データと、骨格データにおける被計測者の1歩行を定義するピッチデータと、被計測者の1歩行分の骨格データから算出される特徴量データとをあらかじめ記憶し、
    前記歩行態様表示端末の前記データ可視化プログラムは、
    前記複数の被計測者のうち、表示画面に表示させる歩行者の計測と前記歩行者と比較対照する参照歩行者の計測との選択を受ける入出力処理部と、
    前記歩行者及び前記参照歩行者の1歩行分の歩行をアニメーションとして表示する歩行モデルを表示する骨格データ表示処理部と、
    前記歩行者の計測に係る所定の特徴量データの大きさと前記参照歩行者の計測に係る所定の特徴量データの大きさとを比較可能に表示する特徴量データ表示処理部とを有しており、
    前記歩行態様分析装置の前記データ分析プログラムは、
    前記ストレージより前記歩行者の計測及び前記参照歩行者の計測に係る1歩行分の骨格データを抽出して、前記骨格データ表示処理部に送信する骨格データ取得処理部と、
    前記ストレージより前記歩行者の計測及び前記参照歩行者の計測に係る前記所定の特徴量データを抽出して、前記特徴量データ表示処理部に送信する特徴量データ取得処理部とを有する歩行態様表示システム。
  10. 請求項9において、
    前記特徴量データ取得処理部は、前記歩行者の計測に係る特徴量データの大きさと前記参照歩行者の計測に係る特徴量データの大きさとの差の割合が大きな特徴量データから選択する歩行態様表示システム。
  11. 請求項9において、
    前記歩行態様分析装置の前記ストレージは、特徴量データから所定の歩行態様に該当する程度を示す歩行態様度を算出する歩行態様分析モデルをあらかじめ記憶し、
    前記歩行態様表示端末の前記データ可視化プログラムは、前記歩行者の計測及び前記参照歩行者の計測に係る歩行態様度を表示する歩行態様度表示処理部を有し、
    前記歩行態様分析装置の前記データ分析プログラムは、前記ストレージより抽出した前記歩行者の計測及び前記参照歩行者の計測に係る特徴量データを歩行態様分析モデルに適用して前記歩行者の計測及び前記参照歩行者の計測に係る歩行態様度を算出し、前記歩行態様度表示処理部に送信する歩行態様定量化処理部を有する歩行態様表示システム。
  12. 請求項11において、
    前記歩行態様定量化処理部は、複数の歩行態様分析モデルに前記歩行者の計測に係る特徴量データを適用して算出された最も大きな歩行態様度を、前記歩行者の計測に係る歩行態様度として前記歩行態様度表示処理部に送信する歩行態様表示システム。
  13. 歩行態様表示端末とネットワークを介して接続される歩行態様分析装置であって、
    プロセッサと、
    メモリと、
    ストレージと、
    前記メモリに読み込まれ、前記プロセッサにより実行されるデータ分析プログラムとを有し、
    前記ストレージは、複数の被計測者の歩行について、計測ごとに、被計測者の計測点の3次元空間の軌跡を示す骨格データと、骨格データにおける被計測者の1歩行を定義するピッチデータと、被計測者の1歩行分の骨格データから算出される特徴量データとをあらかじめ記憶し、
    前記データ分析プログラムは、
    前記歩行態様表示端末に歩行者及び前記歩行者と比較対照する参照歩行者の1歩行分の歩行をアニメーションとして表示させるため、前記ストレージより前記歩行者の計測及び前記参照歩行者の計測に係る1歩行分の骨格データを抽出する骨格データ取得処理部と、
    前記歩行態様表示端末に前記歩行者の計測に係る所定の特徴量データの大きさと前記参照歩行者の計測に係る所定の特徴量データの大きさとを比較可能に表示させるため、前記ストレージより前記歩行者の計測及び前記参照歩行者の計測に係る前記所定の特徴量データを抽出する特徴量データ取得処理部とを有する歩行態様分析装置。
  14. 請求項13において、
    前記特徴量データ取得処理部は、前記歩行者の計測に係る特徴量データの大きさと前記参照歩行者の計測に係る特徴量データの大きさとの差の割合が大きな特徴量データから選択する歩行態様分析装置。
  15. 請求項13において、
    前記ストレージは、特徴量データから所定の歩行態様に該当する程度を示す歩行態様度を算出する歩行態様分析モデルをあらかじめ記憶し、
    前記データ分析プログラムは、前記歩行態様表示端末に前記歩行者の計測及び前記参照歩行者の計測に係る歩行態様度を表示させるため、前記ストレージより抽出した前記歩行者の計測及び前記参照歩行者の計測に係る特徴量データを歩行態様分析モデルに適用して前記歩行者の計測及び前記参照歩行者の計測に係る歩行態様度を算出する歩行態様定量化処理部を有する歩行態様分析装置。
  16. 請求項15において、
    前記歩行態様定量化処理部は、複数の歩行態様分析モデルに前記歩行者の計測に係る特徴量データを適用して算出された最も大きな歩行態様度を、前記歩行者の計測に係る歩行態様度とする歩行態様分析装置。
JP2018084952A 2018-04-26 2018-04-26 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置 Active JP6509406B1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2018084952A JP6509406B1 (ja) 2018-04-26 2018-04-26 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置
EP19792057.2A EP3785629A4 (en) 2018-04-26 2019-04-15 WALKWAY INDICATION METHOD, WALKWAY INDICATION SYSTEM AND WALKWAY ANALYSIS DEVICE
CN201980025909.3A CN111989040A (zh) 2018-04-26 2019-04-15 行走形态显示方法、行走形态显示系统以及行走形态分析装置
PCT/JP2019/016215 WO2019208312A1 (ja) 2018-04-26 2019-04-15 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置
US17/049,357 US20210244317A1 (en) 2018-04-26 2019-04-15 Walking mode display method, walking mode display system and walking mode analyzer

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018084952A JP6509406B1 (ja) 2018-04-26 2018-04-26 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置

Publications (2)

Publication Number Publication Date
JP6509406B1 JP6509406B1 (ja) 2019-05-08
JP2019187878A true JP2019187878A (ja) 2019-10-31

Family

ID=66429926

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018084952A Active JP6509406B1 (ja) 2018-04-26 2018-04-26 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置

Country Status (5)

Country Link
US (1) US20210244317A1 (ja)
EP (1) EP3785629A4 (ja)
JP (1) JP6509406B1 (ja)
CN (1) CN111989040A (ja)
WO (1) WO2019208312A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7484293B2 (ja) 2020-03-25 2024-05-16 カシオ計算機株式会社 アニメーション生成装置、アニメーション生成方法及びプログラム

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7255392B2 (ja) * 2019-06-27 2023-04-11 トヨタ自動車株式会社 リハビリ支援システム、推定装置、学習装置、方法、プログラム、及び学習済みモデル
JP7344096B2 (ja) * 2019-11-19 2023-09-13 日本放送協会 触覚メタデータ生成装置、映像触覚連動システム、及びプログラム
WO2024069911A1 (ja) * 2022-09-30 2024-04-04 三菱電機株式会社 姿態改善支援システム、処理装置、姿態改善支援方法、及び処理方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10113343A (ja) * 1996-07-03 1998-05-06 Hitachi Ltd 動作及び行動の認識方法及び装置及びシステム
JP2012065723A (ja) * 2010-09-21 2012-04-05 Dainippon Printing Co Ltd 歩行状態表示システム等
JP2013188294A (ja) * 2012-03-13 2013-09-26 Casio Computer Co Ltd 運動情報生成システム、運動情報生成プログラムおよび運動情報生成方法
JP2014124448A (ja) * 2012-12-27 2014-07-07 Casio Comput Co Ltd 運動情報表示システムおよび運動情報表示方法、運動情報表示プログラム
JP2015061579A (ja) * 2013-07-01 2015-04-02 株式会社東芝 動作情報処理装置
JP2015116288A (ja) * 2013-12-18 2015-06-25 カシオ計算機株式会社 運動情報表示システムおよび運動情報表示方法、運動情報表示プログラム
JP2016112108A (ja) * 2014-12-12 2016-06-23 カシオ計算機株式会社 運動情報表示システム及び運動情報表示方法、運動情報表示プログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7366645B2 (en) * 2002-05-06 2008-04-29 Jezekiel Ben-Arie Method of recognition of human motion, vector sequences and speech
KR100786703B1 (ko) * 2004-07-24 2007-12-21 삼성전자주식회사 가속도 센서를 이용한 운동량 측정장치 및 방법
JP5628560B2 (ja) * 2010-06-02 2014-11-19 富士通株式会社 携帯電子機器、歩行軌跡算出プログラム及び歩行姿勢診断方法
JP5586050B2 (ja) * 2010-06-18 2014-09-10 国立大学法人東北大学 歩行解析システム
CN102824177B (zh) * 2012-07-25 2014-11-26 王哲龙 一种三维人体步态定量分析系统和方法
JP2015011480A (ja) * 2013-06-27 2015-01-19 カシオ計算機株式会社 画像生成装置、画像生成方法及びプログラム
JP2015058096A (ja) * 2013-09-18 2015-03-30 カシオ計算機株式会社 運動支援装置及び運動支援方法、運動支援プログラム
CN103519822B (zh) * 2013-10-15 2017-02-15 广州市章和电气设备有限公司 一种三维步态分析仪
JP5888309B2 (ja) * 2013-10-31 2016-03-22 カシオ計算機株式会社 トレーニング支援装置およびシステム、フォーム解析装置および方法、ならびにプログラム
JP2015112392A (ja) * 2013-12-13 2015-06-22 カシオ計算機株式会社 運動情報表示システムおよび運動情報表示方法、運動情報表示プログラム
JP6565369B2 (ja) * 2015-06-22 2019-08-28 カシオ計算機株式会社 運動支援装置及び運動支援方法、運動支援プログラム
JP2017080199A (ja) * 2015-10-29 2017-05-18 キヤノンマーケティングジャパン株式会社 情報処理装置、情報処理方法、プログラム
US20180247644A1 (en) * 2017-02-27 2018-08-30 Intel Corporation Queueing spoken dialogue output

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10113343A (ja) * 1996-07-03 1998-05-06 Hitachi Ltd 動作及び行動の認識方法及び装置及びシステム
JP2012065723A (ja) * 2010-09-21 2012-04-05 Dainippon Printing Co Ltd 歩行状態表示システム等
JP2013188294A (ja) * 2012-03-13 2013-09-26 Casio Computer Co Ltd 運動情報生成システム、運動情報生成プログラムおよび運動情報生成方法
JP2014124448A (ja) * 2012-12-27 2014-07-07 Casio Comput Co Ltd 運動情報表示システムおよび運動情報表示方法、運動情報表示プログラム
JP2015061579A (ja) * 2013-07-01 2015-04-02 株式会社東芝 動作情報処理装置
JP2015116288A (ja) * 2013-12-18 2015-06-25 カシオ計算機株式会社 運動情報表示システムおよび運動情報表示方法、運動情報表示プログラム
JP2016112108A (ja) * 2014-12-12 2016-06-23 カシオ計算機株式会社 運動情報表示システム及び運動情報表示方法、運動情報表示プログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7484293B2 (ja) 2020-03-25 2024-05-16 カシオ計算機株式会社 アニメーション生成装置、アニメーション生成方法及びプログラム

Also Published As

Publication number Publication date
EP3785629A4 (en) 2022-03-30
WO2019208312A1 (ja) 2019-10-31
CN111989040A (zh) 2020-11-24
JP6509406B1 (ja) 2019-05-08
EP3785629A1 (en) 2021-03-03
US20210244317A1 (en) 2021-08-12

Similar Documents

Publication Publication Date Title
WO2019208312A1 (ja) 歩行態様表示方法、歩行態様表示システム及び歩行態様分析装置
US20210059565A1 (en) Gait-based assessment of neurodegeneration
KR102292683B1 (ko) 보행 환경 인식 방법 및 장치
Dikovski et al. Evaluation of different feature sets for gait recognition using skeletal data from Kinect
KR102128267B1 (ko) 제자리 걸음 특성 정보를 이용한 보행 능력 예측 방법 및 시스템
CN112970074A (zh) 身体活动量化和监测
US11403882B2 (en) Scoring metric for physical activity performance and tracking
US11547324B2 (en) System and method for human motion detection and tracking
JP2022065241A (ja) 運動可視化システムおよび運動可視化方法
US11497962B2 (en) System and method for human motion detection and tracking
CN117392746A (zh) 康复训练评估辅助方法、装置、计算机设备和存储介质
KR102128268B1 (ko) 발 특성 정보를 이용한 보행 능력 예측 방법 및 시스템
Pandit et al. Abnormal gait detection by classifying inertial sensor data using transfer learning
Soltaninejad et al. Body movement monitoring for Parkinson’s disease patients using a smart sensor based non-invasive technique
CN110327054A (zh) 一种基于加速度和角速度传感器的步态分析方法及装置
JP5918381B2 (ja) 足圧分布計測システムおよび情報処理装置
KR101963624B1 (ko) 무릎의 운동 능력 평가 시스템 및 방법
Prasetyo Gait Analysis Parameter Study Using Xbox Kinect Aimed at Medical Rehabilitation Tool
JP6486200B2 (ja) 移動運動解析装置及びシステム並びにプログラム
Budzyńska et al. Verification of Selected Gait Parameters Derived from Inertial Sensors Using Simple Smartphone Based Optical System
CN112753056B (zh) 用于身体部位的体育训练的系统和方法
JP7180496B2 (ja) 患者検索支援プログラム、患者検索支援システム、及び、患者検索支援方法
WO2023127010A1 (ja) 移動能力推定装置、移動能力推定システム、移動能力推定方法、および記録媒体
WO2022038664A1 (ja) 計算装置、歩容計測システム、計算方法、およびプログラム記録媒体
JP7261342B1 (ja) 情報処理装置、方法、プログラム、およびシステム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181220

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20181220

TRDD Decision of grant or rejection written
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190222

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190305

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190402

R150 Certificate of patent or registration of utility model

Ref document number: 6509406

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350