JP2017217275A - Rehabilitation support control apparatus and computer program - Google Patents

Rehabilitation support control apparatus and computer program Download PDF

Info

Publication number
JP2017217275A
JP2017217275A JP2016114890A JP2016114890A JP2017217275A JP 2017217275 A JP2017217275 A JP 2017217275A JP 2016114890 A JP2016114890 A JP 2016114890A JP 2016114890 A JP2016114890 A JP 2016114890A JP 2017217275 A JP2017217275 A JP 2017217275A
Authority
JP
Japan
Prior art keywords
foot
parameter
rehabilitation
display
hand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016114890A
Other languages
Japanese (ja)
Other versions
JP6625486B2 (en
JP2017217275A5 (en
Inventor
栄太 平井
Eita Hirai
栄太 平井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Paramount Bed Co Ltd
Original Assignee
Paramount Bed Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Paramount Bed Co Ltd filed Critical Paramount Bed Co Ltd
Priority to JP2016114890A priority Critical patent/JP6625486B2/en
Publication of JP2017217275A publication Critical patent/JP2017217275A/en
Publication of JP2017217275A5 publication Critical patent/JP2017217275A5/ja
Application granted granted Critical
Publication of JP6625486B2 publication Critical patent/JP6625486B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To support rehabilitation actively performed by an object person of rehabilitation for moving legs.SOLUTION: In a rehabilitation support control apparatus comprising a display control unit for displaying a target image on an output device on the basis of a leg display parameter, the leg display parameter can be changed with the function restoration of the legs of the target person.SELECTED DRAWING: Figure 2

Description

本発明は、リハビリテーションを支援する技術に関する。   The present invention relates to a technique for supporting rehabilitation.

従来、タッチパネル上にリハビリテーション用の画像を表示し、画像に対応してリハビリテーションを受ける対象者が触れた位置を検出することによってリハビリテーションを評価する技術がある(例えば特許文献1参照)。   Conventionally, there is a technique for evaluating rehabilitation by displaying an image for rehabilitation on a touch panel and detecting a position touched by a subject subject to rehabilitation corresponding to the image (see, for example, Patent Document 1).

特開2013−172897号公報JP 2013-172897 A

一般的に、足を移動させるリハビリテーションは、リハビリテーションの対象者にとって単調で退屈な内容のものや対象者の状態にかかわらず一律に設定された内容のものが多い。そのため、対象者にとって足を移動させるリハビリテーションが苦痛となる場合があり、対象者が足を移動させるリハビリテーションをやめてしまう場合もある。   In general, there are many rehabilitations for moving a foot that are monotonous and boring for rehabilitation subjects, and that are uniformly set regardless of the state of the subject. Therefore, the rehabilitation for moving the foot may be painful for the subject, and the rehabilitation for moving the foot may be stopped by the subject.

上記事情に鑑み、本発明は、足を移動させるリハビリテーションの対象者が能動的にリハビリテーションを行うことを支援することを可能とする技術の提供を目的としている。   In view of the above circumstances, an object of the present invention is to provide a technique that enables a rehabilitation target person who moves a foot to actively support rehabilitation.

本発明の一態様は、足を移動させるリハビリテーションの対象者が足を移動させるときに足の移動先となるまたは足が触れてはならない所定の目標画像の表示に用いられる足用表示パラメータに基づいて、出力装置に前記目標画像を表示させる表示制御部を備えるリハビリテーション支援制御装置において、前記対象者の足の機能回復に伴い前記足用表示パラメータを変更可能とするリハビリテーション支援制御装置である。   One aspect of the present invention is based on a foot display parameter used for displaying a predetermined target image that is a foot movement destination or a foot must not touch when a rehabilitation subject who moves the foot moves the foot. Then, in the rehabilitation support control device including a display control unit that displays the target image on the output device, the rehabilitation support control device enables the display parameter for the foot to be changed with the recovery of the function of the foot of the subject.

本発明の一態様は、上記のリハビリテーション支援制御装置であって、前記表示制御部は、前記対象者の足の移動距離に係る前記足用表示パラメータである足用距離パラメータ、前記対象者の足の移動時間に係る前記足用表示パラメータである足用時間パラメータ、及び前記対象者の足の移動方向に係る前記足用表示パラメータである足用ベクトルパラメータ、のうちの少なくとも1つに基づいて、前記出力装置に前記目標画像を表示させる。   One aspect of the present invention is the above-described rehabilitation support control device, wherein the display control unit includes a foot distance parameter that is a display parameter for the foot related to a moving distance of the foot of the subject, and the foot of the subject. Based on at least one of the foot time parameter that is the foot display parameter related to the moving time of the foot and the foot vector parameter that is the foot display parameter related to the moving direction of the foot of the subject, The target image is displayed on the output device.

本発明の一態様は、上記のリハビリテーション支援制御装置は、前記出力装置と位置取得手段とをさらに備える。   In one aspect of the present invention, the rehabilitation support control device further includes the output device and a position acquisition unit.

本発明の一態様は、足を移動させるリハビリテーションの対象者が足を移動させるときに足の移動先となるまたは足が触れてはならない所定の目標画像の表示に用いられる足用表示パラメータに基づいて、出力装置に前記目標画像を表示させる表示制御部を備えるリハビリテーション支援制御装置において、前記対象者の足の機能回復に伴い前記足用表示パラメータを変更可能とするリハビリテーション支援制御装置としてコンピュータを機能させるためのコンピュータプログラムである。   One aspect of the present invention is based on a foot display parameter used for displaying a predetermined target image that is a foot movement destination or a foot must not touch when a rehabilitation subject who moves the foot moves the foot. In the rehabilitation support control device including a display control unit that displays the target image on the output device, the computer functions as a rehabilitation support control device that can change the display parameter for the foot with the recovery of the function of the foot of the subject. It is a computer program for making it happen.

本発明により、足を移動させるリハビリテーションの対象者が能動的にリハビリテーションを行うことを支援することが可能となる。   According to the present invention, it is possible to assist a rehabilitation target person who moves his / her foot actively performing rehabilitation.

本発明の一実施形態に係るリハビリテーション支援システム1のシステム構成を示す斜視図である。1 is a perspective view showing a system configuration of a rehabilitation support system 1 according to an embodiment of the present invention. リハビリテーション支援システム1に備わるリハビリテーション支援制御装置300の機能構成例を示す概略ブロック図である。It is a schematic block diagram which shows the function structural example of the rehabilitation assistance control apparatus 300 with which the rehabilitation assistance system 1 is equipped. リハビリテーション支援制御装置300による第一動作領域を説明するための斜視図である。FIG. 5 is a perspective view for explaining a first operation region by the rehabilitation support control device 300. リハビリテーション支援システム1における画像の表示の例を示す平面図である。It is a top view which shows the example of a display of the image in the rehabilitation assistance system. リハビリテーション支援制御装置300による第二動作領域を説明するための斜視図である。FIG. 10 is a perspective view for explaining a second operation region by the rehabilitation support control device 300. リハビリテーション支援システム1における画像の表示の例を示す平面図である。It is a top view which shows the example of a display of the image in the rehabilitation assistance system. リハビリテーション支援制御装置300による動作領域の判定処理の一例を示すフローチャートである。5 is a flowchart illustrating an example of a motion region determination process performed by the rehabilitation support control device 300. リハビリテーション支援制御装置300が手の移動目標となる目標画像を映し出す例を示す斜視図である。It is a perspective view which shows the example which the rehabilitation assistance control apparatus 300 displays the target image used as the movement target of a hand. リハビリテーション支援制御装置300が手の外乱を映し出す例を示す図である。It is a figure which shows the example in which the rehabilitation assistance control apparatus 300 projects a disturbance of a hand. 足用表示パラメータ設定部347がステップの値を設定する例を示す図である。It is a figure which shows the example which the display parameter setting part for 347 sets the value of a step. リハビリテーション支援制御装置300が、対象者EPが歩行する際の回避目標となる目標画像を映し出す例を示す斜視図である。It is a perspective view which shows the example which the rehabilitation assistance control apparatus 300 projects the target image used as the avoidance target at the time of the subject person EP walking. リハビリテーション支援制御装置300が、対象者EPが歩行する際の外乱を映し出す例を示す斜視図である。It is a perspective view which shows the example in which the rehabilitation assistance control apparatus 300 projects the disturbance at the time of object person EP walking. リハビリテーション支援制御装置300による、対象者EPの認識処理の一例を示すフローチャートである。It is a flowchart which shows an example of the recognition process of object person EP by the rehabilitation assistance control apparatus 300. リハビリテーション支援システム1を用いたリハビリテーションにおけるパラメータ設定の一例を示すフローチャートである。It is a flowchart which shows an example of the parameter setting in the rehabilitation using the rehabilitation assistance system 1. リハビリテーション支援制御装置300が手の回避目標となる目標画像を映し出す例を示す斜視図である。It is a perspective view which shows the example which the rehabilitation assistance control apparatus 300 projects the target image used as the avoidance target of a hand. リハビリテーション支援システム1のシステム構成の変形例を示す斜視図である。It is a perspective view which shows the modification of the system configuration | structure of the rehabilitation assistance system 1. FIG.

図1は、本発明の一実施形態に係るリハビリテーション支援システム1のシステム構成を示す斜視図である。リハビリテーション支援システム1は、リハビリテーションの対象者(以下「対象者」という。)に対して、リハビリテーションの実施を支援するシステムである。リハビリテーション支援システム1は、センサ100(位置取得手段の一例)、出力装置200及びリハビリテーション支援制御装置300を備える。   FIG. 1 is a perspective view showing a system configuration of a rehabilitation support system 1 according to an embodiment of the present invention. The rehabilitation support system 1 is a system that supports the implementation of rehabilitation for a rehabilitation target person (hereinafter referred to as “target person”). The rehabilitation support system 1 includes a sensor 100 (an example of a position acquisition unit), an output device 200, and a rehabilitation support control device 300.

センサ100は、同センサ100の検出範囲800内(図1の破線で囲った範囲)で対象者EPを検出する。
センサ100は、例えば、画像センサ、赤外線センサ、レーザセンサ、サーモセンサなど、対象者EPにマーカを装着することなく対象者EPの動きが検出できるセンサである。本実施形態では、このようなセンサの例として、センサ100に、距離センサと画像センサを組み込んだKinect(登録商標)を用いた場合を例に説明を行う。
センサ100は、例えば、画像センサ(不図示)を備える。前記画像センサは、(1)自らの正面方向をリアルタイムに撮像し、連続した複数枚の2次元画像(フレーム画像)を取得する動画カメラとしての機能と、(2)センサ100から、前記2次元画像(フレーム画像)内の各位置に対応する実際の位置までの距離の情報(距離情報を表示した画像)を取得する距離センサ(デプスセンサ)としての機能と、を有している。前記距離センサが有する機能により、対象者EPを撮像した画像と、当該画像に撮像された対象者EPの体の各部位の3次元空間における座標情報である距離画像情報とを取得する。センサ100が検出する3次元空間とは、図1に示すXYZ直交座標系によって示される空間である。
対象者EPの体の各部位とは、対象者EPの動作を認識するために検出することが求められる体の部位である。具体的には、対象者EPの体の各部位とは、例えば、対象者EPの頭、肩、腕、手、腰、足及び各関節部等の位置である。
センサ100は、検出した結果を示す情報(以下「検出結果情報」という。)をリハビリテーション支援制御装置300に出力する。検出結果情報とは、例えば、対象者EPの体の一部の位置情報である。
なお、センサ100は、対象者EPにマーカを装着し、そのマーカの検出により対象者EPを検出するセンサであっても構わない。
The sensor 100 detects the subject person EP within the detection range 800 of the sensor 100 (a range surrounded by a broken line in FIG. 1).
The sensor 100 is a sensor that can detect the movement of the subject EP without attaching a marker to the subject EP, such as an image sensor, an infrared sensor, a laser sensor, or a thermo sensor. In this embodiment, as an example of such a sensor, a case where Kinect (registered trademark) incorporating a distance sensor and an image sensor is used as the sensor 100 will be described as an example.
The sensor 100 includes, for example, an image sensor (not shown). The image sensor includes (1) a function as a moving image camera that captures the front direction of itself in real time and acquires a plurality of continuous two-dimensional images (frame images), and (2) the two-dimensional And a function as a distance sensor (depth sensor) that acquires distance information (an image displaying distance information) to an actual position corresponding to each position in the image (frame image). With the function of the distance sensor, an image obtained by capturing the subject EP and distance image information that is coordinate information in the three-dimensional space of each part of the body of the subject EP captured by the image are acquired. The three-dimensional space detected by the sensor 100 is a space indicated by the XYZ orthogonal coordinate system shown in FIG.
Each part of the body of the subject EP is a part of the body that is required to be detected in order to recognize the motion of the subject EP. Specifically, each part of the body of the subject EP is, for example, the position of the head, shoulder, arm, hand, waist, foot, each joint, and the like of the subject EP.
The sensor 100 outputs information indicating the detection result (hereinafter referred to as “detection result information”) to the rehabilitation support control device 300. The detection result information is, for example, position information of a part of the body of the subject person EP.
Note that the sensor 100 may be a sensor that attaches a marker to the subject person EP and detects the subject person EP by detecting the marker.

出力装置200は、対象者EPに対して行われるリハビリテーションに関する画像を出力する。出力装置200は、例えば、プロジェクタ等の画像投影装置である。出力装置200は、リハビリテーションを支援する画像を投影して、出力領域900に表示する。出力画像の例としては、対象者EPの体の一部の位置の移動履歴、及び、対象者EPの体の一部の移動目標位置を含む画像を挙げることができる。例えば、歩行のリハビリテーションの場合、出力装置200が対象者EPの足の位置の移動履歴、及び、対象者EPが足を動かして移動させる目標位置のうちいずれか一方又は両方を表示するようにしてもよい。また、手の移動のリハビリテーションの場合であれば、出力装置200が、対象者EPの手の位置の移動履歴、及び、対象者EPが手を動かして移動させる目標位置のうちいずれか一方又は両方を表示するようにしてもよい。以下の説明では、対象者EPの体の一部の位置の移動履歴を示す画像を履歴画像と称する。また、対象者EPの体の一部の移動目標位置を示す画像を目標画像と称する。
例えば、足跡が表示されて対象者がその足跡の表示上に足を移動させるリハビリテーションの場合、足跡が目標画像である。また、例えば、横断歩道が表示されてその横断歩道を横断する際に近づいて来る自動車をよけるリハビリテーションの場合、表示された自動車が目標画像である。また、例えば、手の形をした移動先が表示されて手をその位置に移動させるリハビリテーションの場合、手の移動先を示す表示が目標画像である。また、例えば、リンゴの形状をした表示の表示位置に手を移動させるリハビリテーションの場合、表示されたリンゴが目標画像である。また、例えば、炎の形状をした表示が表示され、表示された炎に手が触れないように手を移動させるリハビリテーションの場合、表示された炎が目標画像である。なお、目標画像は、大きさ、表示位置、形状など、実行されるリハビリテーションに応じてさまざまに変化するものであってよい。
The output device 200 outputs an image related to rehabilitation performed on the subject EP. The output device 200 is an image projection device such as a projector, for example. The output device 200 projects an image that supports rehabilitation and displays it in the output area 900. Examples of the output image may include an image including a movement history of a part of the body of the subject EP and a movement target position of a part of the body of the subject EP. For example, in the case of walking rehabilitation, the output device 200 displays one or both of the movement history of the position of the foot of the subject EP and the target position that the subject EP moves by moving the foot. Also good. Further, in the case of hand movement rehabilitation, the output device 200 either or both of the movement history of the position of the hand of the subject EP and the target position that the subject EP moves and moves the hand. May be displayed. In the following description, an image indicating a movement history of a part of the body of the subject EP is referred to as a history image. In addition, an image showing a movement target position of a part of the body of the subject person EP is called a target image.
For example, in the case of rehabilitation in which a footprint is displayed and the subject moves his / her foot on the footprint display, the footprint is the target image. Further, for example, in the case of rehabilitation to avoid a car approaching when a pedestrian crossing is displayed and crosses the pedestrian crossing, the displayed car is the target image. Further, for example, in the case of rehabilitation in which a movement destination in the shape of a hand is displayed and the hand is moved to that position, a display indicating the movement destination of the hand is the target image. For example, in the case of rehabilitation in which a hand is moved to the display position of an apple-shaped display, the displayed apple is the target image. Further, for example, in the case of rehabilitation in which a display in the shape of a flame is displayed and the hand is moved so as not to touch the displayed flame, the displayed flame is the target image. Note that the target image may change variously depending on the rehabilitation to be performed, such as the size, the display position, and the shape.

リハビリテーション支援制御装置300は、情報処理装置を用いて構成される。すなわち、リハビリテーション支援制御装置300は、バスで接続されたCPU(Central Processor Unit)、メモリ及び補助記憶装置を備える。リハビリテーション支援制御装置300は、リハビリテーション支援プログラムを実行することによって動作する。   The rehabilitation support control device 300 is configured using an information processing device. That is, the rehabilitation support control device 300 includes a CPU (Central Processor Unit), a memory, and an auxiliary storage device connected by a bus. The rehabilitation support control device 300 operates by executing a rehabilitation support program.

センサ100等は、脚部310によって支持される。脚部310は、上下方向に伸縮可能であり、センサ100、出力装置200の高さ位置を調整することができる。これにより、センサ100による検出範囲の広さを調整することが可能である。また、出力装置200が投影装置の場合、出力領域900の広さを調整することが可能である。また、脚部310は、キャスター311、312、313、314を備えている。キャスター311〜314は転動可能であるため、手押しなどすることにより、リハビリテーション支援システム1を、フロア上で自由に移動させることができる。   The sensor 100 and the like are supported by the leg portion 310. The leg portion 310 can be expanded and contracted in the vertical direction, and the height positions of the sensor 100 and the output device 200 can be adjusted. Thereby, the width of the detection range by the sensor 100 can be adjusted. Further, when the output device 200 is a projection device, the width of the output region 900 can be adjusted. The leg portion 310 includes casters 311, 312, 313, and 314. Since the casters 311 to 314 can roll, the rehabilitation support system 1 can be freely moved on the floor by pushing the casters.

図2は、リハビリテーション支援システム1に備わるリハビリテーション支援制御装置300の機能構成例を示す概略ブロック図である。リハビリテーション支援制御装置300は、入力部31、出力部32、記憶部33、制御部34、操作部35及び表示部36を備える。
入力部31は、外部からの情報を入力するインタフェースである。例えば、入力部31は、センサ100から検出結果を示す情報(検出結果情報)を取得する。
出力部32は、制御部34によって生成された画像を出力装置200に対して出力するインタフェースである。
FIG. 2 is a schematic block diagram illustrating a functional configuration example of the rehabilitation support control device 300 provided in the rehabilitation support system 1. The rehabilitation support control device 300 includes an input unit 31, an output unit 32, a storage unit 33, a control unit 34, an operation unit 35, and a display unit 36.
The input unit 31 is an interface for inputting information from the outside. For example, the input unit 31 acquires information (detection result information) indicating a detection result from the sensor 100.
The output unit 32 is an interface that outputs an image generated by the control unit 34 to the output device 200.

記憶部33は、磁気ハードディスク装置や半導体記憶装置等の記憶装置を用いて構成される。記憶部33は、キャリブレーション情報記憶部331、判定条件情報記憶部332、検出履歴情報記憶部333、パラメータ情報記憶部334、プログラム情報記憶部335として機能する。   The storage unit 33 is configured using a storage device such as a magnetic hard disk device or a semiconductor storage device. The storage unit 33 functions as a calibration information storage unit 331, a determination condition information storage unit 332, a detection history information storage unit 333, a parameter information storage unit 334, and a program information storage unit 335.

キャリブレーション情報記憶部331は、キャリブレーション情報を記憶する。キャリブレーション情報は、センサ100の検出結果を示す座標の座標系と、出力装置200が投影する画像面の座標系とを対応付ける情報である。従って、リハビリテーション支援制御装置300におけるキャリブレーションは、センサ100による検出範囲800と、出力装置200による画像の出力領域900との位置関係を把握し、両者に共通の座標系を設定する処理である。なお、センサ100が検出できる検出範囲は、図示する検出範囲800より広くてもよい。本実施形態における検出範囲800とは、出力領域900上で行われる対象者EPの動作において、対象者EPの検出目的とする体の一部の位置情報を取得するのに必要な検出範囲のことである。なお、出力領域900上とは、出力領域900で規定される平面の領域だけではなく、その領域において、出力領域900を基準とする所定高さまでの空間も含む。   The calibration information storage unit 331 stores calibration information. The calibration information is information that associates the coordinate system of the coordinates indicating the detection result of the sensor 100 with the coordinate system of the image plane projected by the output device 200. Therefore, the calibration in the rehabilitation support control apparatus 300 is a process of grasping the positional relationship between the detection range 800 by the sensor 100 and the image output area 900 by the output apparatus 200 and setting a common coordinate system for both. The detection range that can be detected by the sensor 100 may be wider than the detection range 800 illustrated. The detection range 800 in the present embodiment is a detection range necessary for acquiring position information of a part of the body targeted for detection of the subject EP in the operation of the subject EP performed on the output area 900. It is. The term “on the output area 900” includes not only a plane area defined by the output area 900 but also a space up to a predetermined height with reference to the output area 900 in that area.

キャリブレーション情報は、例えば事前にキャリブレーションを実施することによって得てもよい。
より具体的には、例えば出力装置200がキャリブレーション用のマーカ画像を、画像面(画像の出力領域900)の四隅など、複数箇所に投影する。リハビリテーション支援制御装置300は、出力装置200の座標系における座標を既知である。
The calibration information may be obtained, for example, by performing calibration in advance.
More specifically, for example, the output device 200 projects the calibration marker image at a plurality of locations such as four corners of the image plane (image output area 900). The rehabilitation support control device 300 has known coordinates in the coordinate system of the output device 200.

出力装置200がマーカ画像を投影すると、センサ100は、各マーカ画像の位置を、センサ100の座標系(センサ100が検出位置を示すのに用いる座標系)における座標にてリハビリテーション支援制御装置300へ出力する。これにより、リハビリテーション支援制御装置300(制御部34)は、各マーカの位置を、センサ100の座標系における座標、及び、出力装置200の座標系における座標の両方で取得する。また、リハビリテーション支援制御装置300(制御部34)は、四隅等に投影されたマーカ画像により、出力装置200の座標系における出力領域900の範囲を示す座標を把握する。これにより、後述する目標決定部345は、出力領域900における出力装置200の座標系における目標位置を計算することができる。   When the output device 200 projects a marker image, the sensor 100 sends the position of each marker image to the rehabilitation support control device 300 using coordinates in the coordinate system of the sensor 100 (the coordinate system used by the sensor 100 to indicate the detection position). Output. Thereby, the rehabilitation assistance control apparatus 300 (control part 34) acquires the position of each marker by both the coordinate in the coordinate system of the sensor 100, and the coordinate in the coordinate system of the output device 200. FIG. Further, the rehabilitation support control device 300 (the control unit 34) grasps coordinates indicating the range of the output region 900 in the coordinate system of the output device 200 based on the marker images projected on the four corners and the like. Thereby, the target determination unit 345 described later can calculate a target position in the coordinate system of the output device 200 in the output region 900.

リハビリテーション支援制御装置300(制御部34)は、得られた座標に基づいて、センサ100の座標系を補正するための情報をキャリブレーション情報として取得する。センサ100が座標系調整機能を有している場合、リハビリテーション支援制御装置300(制御部34)は、この機能を利用してセンサ100の座標系を出力装置200の座標系に合わせるためのキャリブレーション情報を生成する。あるいは、出力装置200が座標系調整機能を有している場合、リハビリテーション支援制御装置300(制御部34)が、この機能を利用して出力装置200の座標系をセンサ100の座標系に合わせるためのキャリブレーション情報を生成するようにしてもよい。   The rehabilitation support control apparatus 300 (control unit 34) acquires information for correcting the coordinate system of the sensor 100 as calibration information based on the obtained coordinates. When the sensor 100 has a coordinate system adjustment function, the rehabilitation support control device 300 (control unit 34) uses this function to perform calibration for matching the coordinate system of the sensor 100 with the coordinate system of the output device 200. Generate information. Alternatively, when the output device 200 has a coordinate system adjustment function, the rehabilitation support control device 300 (the control unit 34) uses this function to match the coordinate system of the output device 200 with the coordinate system of the sensor 100. The calibration information may be generated.

床面が光を散乱させてマーカ画像がぼやける場合など、センサ100によるマーカ画像の検出が困難な場合は、マーカ画像を用いた位置検出の代わりに理学療法士等の操作者が手動で位置検出を行うようにしてもよい。出力装置200が出力領域900の全体に画像を投影している状態で、センサ100が画像センサで投影画像全体を含む領域を撮像する。リハビリテーション支援制御装置300は、センサ100による撮像画像を表示画面に表示する。そして、リハビリテーション支援システム1の操作者は、モニタ画面に表示されている出力領域900の四隅の各々をタッチ操作にて指定する。
モニタ画面に表示されている画像は、センサ100が撮像した画像なので、操作者が指定した位置をセンサ100の座標系における座標で取得し得る。リハビリテーション支援制御装置300(制御部34)は、この座標と、出力装置200の座標系における出力領域900の四隅の座標とに基づいて、キャリブレーション情報を取得する。なお、高さ方向の座標として、フロアの座標を用いる。
あるいは、理学療法士等が、例えばコーンなど物理的なマーカを画像面の四隅位置に置くようにしてもよい。この場合、センサ100は、置かれたマーカを検出し、各マーカの座標を出力する。
When it is difficult to detect the marker image by the sensor 100, for example, when the marker image is blurred because the floor surface scatters light, an operator such as a physical therapist manually detects the position instead of the position detection using the marker image. May be performed. In a state where the output device 200 projects an image on the entire output area 900, the sensor 100 captures an area including the entire projected image with the image sensor. The rehabilitation support control device 300 displays the image captured by the sensor 100 on the display screen. Then, the operator of the rehabilitation support system 1 designates each of the four corners of the output area 900 displayed on the monitor screen by a touch operation.
Since the image displayed on the monitor screen is an image captured by the sensor 100, the position specified by the operator can be acquired by coordinates in the coordinate system of the sensor 100. The rehabilitation support control device 300 (control unit 34) acquires calibration information based on the coordinates and the coordinates of the four corners of the output region 900 in the coordinate system of the output device 200. Note that the coordinates of the floor are used as the coordinates in the height direction.
Alternatively, a physical therapist or the like may place physical markers such as cones at the four corner positions of the image plane. In this case, the sensor 100 detects the placed marker and outputs the coordinates of each marker.

出力装置200が床面に画像を投影する場合、リハビリテーション支援システム1の初回使用時にキャリブレーションを行えば、2回目の使用時以降はキャリブレーションを行う必要が無い。センサ100と床面との位置関係、及び、出力装置200と床面との位置関係のいずれも変わらないため、初回使用時に得られたキャリブレーション情報を2回目以降の使用時にも使用できるためである。   When the output device 200 projects an image on the floor surface, if calibration is performed when the rehabilitation support system 1 is used for the first time, it is not necessary to perform calibration after the second use. Since neither the positional relationship between the sensor 100 and the floor surface nor the positional relationship between the output device 200 and the floor surface changes, the calibration information obtained at the first use can be used at the second and subsequent uses. is there.

判定条件情報記憶部332は、動作領域を判定するための条件を記憶する。動作領域については後述する。
検出履歴情報記憶部333は、認識部341が認識した対象者EPの体の一部に関する位置情報(検出結果情報)の履歴を記憶する。例えば、歩行のリハビリテーションを行う場合、検出履歴情報記憶部333は、対象者EPの足の位置の検出結果情報の履歴を記憶する。また、手の移動のリハビリテーションを行う場合、検出履歴情報記憶部333は、対象者EPの手の位置の検出結果情報の履歴を記憶する。
The determination condition information storage unit 332 stores conditions for determining the operation area. The operation area will be described later.
The detection history information storage unit 333 stores a history of position information (detection result information) regarding a part of the body of the subject person EP recognized by the recognition unit 341. For example, when walking rehabilitation is performed, the detection history information storage unit 333 stores a history of detection result information on the position of the foot of the subject EP. When performing rehabilitation of hand movement, the detection history information storage unit 333 stores a history of detection result information on the position of the hand of the subject EP.

パラメータ情報記憶部334は、後述する足用表示パラメータ設定部347が設定した足用表示パラメータ、後述する手用表示パラメータ設定部348が設定した手用表示パラメータ、後述する外乱用表示パラメータ設定部349が設定した外乱用表示パラメータを記憶する。
プログラム情報記憶部335は、リハビリテーション支援プログラムを記憶する。
The parameter information storage unit 334 includes a foot display parameter set by a foot display parameter setting unit 347 described later, a hand display parameter set by a hand display parameter setting unit 348 described later, and a disturbance display parameter setting unit 349 described later. The disturbance display parameter set by is stored.
The program information storage unit 335 stores a rehabilitation support program.

制御部34は、CPUを用いて構成される。制御部34は、リハビリテーション支援プログラムを実行することによって、認識部341、表示制御部342、動作領域判定部343、記録部344、目標決定部345、評価部346、足用表示パラメータ設定部347、手用表示パラメータ設定部348、外乱用表示パラメータ設定部349として機能する。   The control unit 34 is configured using a CPU. The control unit 34 executes a rehabilitation support program to recognize a recognition unit 341, a display control unit 342, a motion region determination unit 343, a recording unit 344, a target determination unit 345, an evaluation unit 346, a foot display parameter setting unit 347, It functions as a manual display parameter setting unit 348 and a disturbance display parameter setting unit 349.

認識部341は、入力部31が取得した検出結果情報を取得し、検出結果情報が示す対象物を認識する。例えば、認識部341は、検出結果情報に基づいて、検出範囲800に存在する人、テーブル、床、壁等を認識する。例えば、Kinect(登録商標)を用いると、対象者EPの人体上の複数の部位の位置を認識することができる。例えば、認識部341は、テーブル上の長尺状の検出対象の先端部を認識すると、その先端部の単位時間ごとの位置情報を検出する。認識部341は、センサ100が時々刻々と検出したこれらの特徴点の位置情報により、対象者EPの体の一部の位置の動きを認識する。例えば、長尺状の対象物を検出した場合、認識部341は、その対象物の先端の位置の動きを認識する。当該先端の位置の動きは、例えば、対象者EPの手の位置として扱ってもよい。また、認識部341は、検出結果情報が示す対象物の形状と人の骨格モデルとの比較を行って対象物が人と認識できる場合、各部位の位置を認識する機能を有していてもよい。この機能によれば、認識部341は、人体の各部位の位置情報を、その部位に対応付けて認識することができる。例えば、対象者EPがセンサ100の前で直立する。すると、認識部341は、その状態で検出された検出結果情報と人の骨格モデルとの比較を行い、対象物が人の形状をしていることから対象物は人であると認識する。さらに、認識部341は、例えば、左のつま先とその位置情報、右のかかととその位置情報、左右の手首とそれぞれの位置情報というように、各部位の位置情報をそれぞれの部位に対応付けて認識する。骨格モデルによる各部位の位置を認識する機能(以下「骨格トラッキング機能」という。)を用いると、認識部341は、対象者EPの各部位の位置の動きを認識することができる。このように認識部341は、検出結果情報に含まれる所定の形状をした対象物の所定の位置をトラッキングすることにより、又は、骨格トラッキング機能により、対象者EPの体の一部の位置およびその動きを認識する。また、Kinect(登録商標)を用いると、検出範囲800に存在する物の座標情報(検出範囲800に存在する物の所定間隔ごとの座標情報を含む点群データ)を得ることができる。認識部341は、検出結果情報(点群データ)を分析し、所定の広さ以上の面積を有し、Z座標の値が変化しない面(要するに、Z座標の値がほぼ一定の点群の集合)を、壁、フロア、テーブル等との平面として認識する。また、認識部341は、検出結果情報のうち、どのデータが、後述する動作領域判定部343が判定した動作領域に関連する対象者EPの体の一部(検出対象部位)の検出データであるかを認識し、そのデータ(検出対象情報)を選択する。   The recognition unit 341 acquires the detection result information acquired by the input unit 31, and recognizes the object indicated by the detection result information. For example, the recognition unit 341 recognizes a person, a table, a floor, a wall, or the like existing in the detection range 800 based on the detection result information. For example, when Kinect (registered trademark) is used, the positions of a plurality of parts on the human body of the subject EP can be recognized. For example, when the recognizing unit 341 recognizes a long tip of a long detection target on the table, the recognizing unit 341 detects position information of the tip at every unit time. The recognition unit 341 recognizes the movement of the position of a part of the body of the subject EP based on the position information of these feature points detected by the sensor 100 every moment. For example, when a long object is detected, the recognition unit 341 recognizes the movement of the position of the tip of the object. The movement of the position of the tip may be handled as the position of the hand of the subject EP, for example. In addition, the recognition unit 341 has a function of recognizing the position of each part when the object can be recognized as a person by comparing the shape of the object indicated by the detection result information with the human skeleton model. Good. According to this function, the recognition unit 341 can recognize the position information of each part of the human body in association with the part. For example, the subject person EP stands upright in front of the sensor 100. Then, the recognition unit 341 compares the detection result information detected in this state with a human skeleton model, and recognizes that the target is a person because the target has a human shape. Furthermore, the recognizing unit 341 associates position information of each part with each part, such as left toe and its position information, right heel and its position information, and left and right wrists and respective position information. recognize. When the function of recognizing the position of each part based on the skeleton model (hereinafter referred to as “skeleton tracking function”) is used, the recognition unit 341 can recognize the movement of the position of each part of the subject EP. In this way, the recognition unit 341 tracks the predetermined position of the object having the predetermined shape included in the detection result information, or uses the skeleton tracking function to detect the position of the body part of the target person EP and the position thereof. Recognize movement. Further, when Kinect (registered trademark) is used, coordinate information of an object existing in the detection range 800 (point cloud data including coordinate information for each predetermined interval of the object existing in the detection range 800) can be obtained. The recognizing unit 341 analyzes the detection result information (point cloud data), and has a surface that has an area larger than a predetermined area and the Z coordinate value does not change (in short, a point cloud having a substantially constant Z coordinate value). Is recognized as a plane with walls, floors, tables, etc. Further, the recognition unit 341 is detection data of a part (detection target part) of the body of the subject person EP related to the motion region determined by the motion region determination unit 343 described later, among the detection result information. And the data (detection target information) is selected.

ここで、動作領域とは、対象者EPのリハビリテーションの目的とする動作が行われる領域のことである。より具体的には、リハビリテーションによって回復することを目的とする動作に強く関連する部位が動作する空間内の所定の領域のことである。また、例えば、動作領域とは、対象者EPがリハビリテーションにおいてその部位を近接させる領域である。また、例えば、動作領域とは、対象者EPのリハビリテーションにおいて、その動作の目標(到達点)となる位置を含む領域である。また、動作領域とは、対象者EPがリハビリテーション中に目的とする動作を行う場所である。動作領域の具体例として、2次元領域の場合では、フロア、テーブル等を挙げることができる。例えば、フロアであれば、リハビリテーションによって回復することを目的とする動作に強く関連する部位は足であり、テーブルの場合の当該部位は手である。また、対象者EPは、歩行動作のリハビリテーションにおいて足をフロアに近接させ、手の移動のリハビリテーションにおいては手をテーブルに近接させる。また、例えば、歩行動作のリハビリテーションにおいてフロアは、歩行動作の到達点となる位置(目標画像の表示位置)を含む領域であり、テーブルは手の移動のリハビリテーションにおける手の到達点となる位置(目標画像の表示位置)を含む領域である。また、フロア、テーブルはそれぞれ、歩行動作のリハビリテーション、手の移動のリハビリテーション中に目的となる動作を行う場所である。なお、動作領域が3次元である場合の具体例としては、テーブル上のテーブル表面を基準とする所定高さの範囲の空間(以下「3次元動作領域」という)を挙げることができる。例えば、出力装置200は、テーブルに「10cm」を意味する目標画像を表示する。例えば、テーブル上のある位置に「10cm」と表示してもよい。これは、テーブルの当該目標画像が表示された位置の真上の空間の、テーブル表面を基準とする高さ10cmの位置が、手の到達点となる位置であることを意味する目標画像である。この目標画像が示す位置は、当該3次元動作領域に含まれている。この例の場合も、例えば、3次元動作領域は、リハビリテーションによって回復することを目的とする動作に強く関連する部位(手)が動作する領域である。また、3次元動作領域は、手の移動のリハビリテーションにおいて、手を近接させる領域である。また、3次元動作領域は、手の移動の到達点となる位置(目標画像が示す位置)を含む領域である。また、3次元動作領域は、対象者EPが手の移動のリハビリテーション中に目的とする動作を行う場所である。なお、動作領域が3次元である場合の他の例として、出力領域900上の空間を挙げることができる。例えば、動作領域が出力領域900上の空間の場合、この空間に目標画像を投影し、対象者EPがその目標画像を手で触れる等のリハビリテーションを行ってもよい。   Here, the motion region is a region where a motion intended for the rehabilitation of the subject EP is performed. More specifically, it is a predetermined area in a space where a part that is strongly related to an action intended to recover by rehabilitation operates. In addition, for example, the motion region is a region where the subject EP brings the part close thereto in rehabilitation. In addition, for example, the motion region is a region including a position that is a target (reaching point) of the motion in the rehabilitation of the subject EP. In addition, the motion area is a place where the target person EP performs a target motion during rehabilitation. As a specific example of the motion area, in the case of a two-dimensional area, a floor, a table, and the like can be given. For example, in the case of a floor, a part that is strongly related to an action intended to recover by rehabilitation is a foot, and in the case of a table, the part is a hand. In addition, the subject EP brings his / her feet close to the floor in the rehabilitation of walking motion, and brings his / her hand close to the table in the rehabilitation of hand movement. In addition, for example, in the rehabilitation of walking motion, the floor is an area including the position that becomes the arrival point of the walking motion (display position of the target image), and the table is the position that becomes the arrival point of the hand in the rehabilitation of hand movement (target (Display position of image). Further, the floor and the table are places where the target motion is performed during rehabilitation of walking motion and rehabilitation of hand movement, respectively. A specific example of the case where the motion area is three-dimensional includes a space having a predetermined height with respect to the table surface on the table (hereinafter referred to as “three-dimensional motion area”). For example, the output device 200 displays a target image meaning “10 cm” on the table. For example, “10 cm” may be displayed at a certain position on the table. This is a target image that means that the position of 10 cm in height with respect to the table surface in the space immediately above the position where the target image of the table is displayed is the position where the hand reaches. . The position indicated by the target image is included in the three-dimensional motion area. Also in this example, for example, the three-dimensional motion region is a region in which a part (hand) that is strongly related to a motion intended to recover by rehabilitation operates. Further, the three-dimensional motion region is a region in which the hand is brought close to the hand movement rehabilitation. The three-dimensional motion area is an area including a position (a position indicated by the target image) that is a reaching point of hand movement. In addition, the three-dimensional motion region is a place where the target person EP performs a target motion during hand movement rehabilitation. As another example of the case where the motion area is three-dimensional, a space on the output area 900 can be given. For example, when the motion area is a space on the output area 900, rehabilitation such as projecting a target image into this space and touching the target EP with the hand may be performed.

表示制御部342は、出力装置200が出力する画像を生成する。例えば、表示制御部342は、動作領域に表示して対象者EPの動作を誘導する目標画像、リハビリテーションの評価結果の情報を含む画像、リハビリテーション中に行った対象者EPの検出対象部位の動作の軌跡を示す画像などを生成する。   The display control unit 342 generates an image output from the output device 200. For example, the display control unit 342 displays a target image that is displayed in the motion region and guides the motion of the subject EP, an image that includes information on the evaluation result of the rehabilitation, and a motion of the detection target portion of the subject EP performed during the rehabilitation. An image showing a locus is generated.

動作領域判定部343は、認識部341による認識結果に基づいて動作領域を判定する。後述するように、動作領域の判定方法は、様々であってよい。動作領域判定部343は、所定の判定条件に基づいて、例えば、動作領域がフロアであると判定する。また、例えば、動作領域判定部343は、動作領域がテーブルであると判定する。   The motion region determination unit 343 determines the motion region based on the recognition result by the recognition unit 341. As will be described later, there are various methods for determining the motion region. The motion area determination unit 343 determines, for example, that the motion area is a floor based on a predetermined determination condition. Further, for example, the motion area determination unit 343 determines that the motion area is a table.

動作領域判定部343は、動作領域を判定すると、対象者EPの動作領域に関連する検出対象となる部位(検出対象部位)を決定する。検出対象部位とは、リハビリテーションの目的とする動作に関係が深い体の一部である。例えば、動作領域判定部343は、動作領域をフロアであると判定した場合、対象者EPの足首を検出対象部位として決定する。あるいは、動作領域判定部343は、対象者EPのつま先を検出対象部位として決定してもよい。また、例えば、動作領域判定部343は、動作領域をテーブルであると判定した場合、対象者EPの手の甲を検出対象部位として決定する。あるいは、動作領域判定部343は、対象者EPの指先を検出対象部位として決定してもよい。   When the motion region determination unit 343 determines the motion region, the motion region determination unit 343 determines a portion (detection target portion) that is a detection target related to the motion region of the subject EP. The part to be detected is a part of the body that is deeply related to the movement intended for rehabilitation. For example, when the motion region determination unit 343 determines that the motion region is a floor, the motion region determination unit 343 determines the ankle of the subject EP as a detection target part. Alternatively, the motion region determination unit 343 may determine the toe of the subject person EP as the detection target part. For example, when the motion region determination unit 343 determines that the motion region is a table, the motion region determination unit 343 determines the back of the hand of the subject person EP as a detection target part. Alternatively, the motion region determination unit 343 may determine the fingertip of the subject person EP as the detection target part.

なお、動作領域に関連する検出対象部位は、予め記憶部33に設定されており、動作領域判定部343は、その情報と自らが判定した動作領域とに基づいて検出対象部位を決定する。検出対象部位には、例えば、リハビリテーションの目標とする動作において、動作範囲が大きい部位が設定されていてもよい。例えば、歩行動作のリハビリテーションであれば、動作範囲が大きい部位は、対象者EPの足(足首、つま先、踵など)である。移動のリハビリテーションであれば、動作範囲が大きい部位は、対象者EPの手(手首、指先、手の甲など)である。   The detection target part related to the motion region is set in the storage unit 33 in advance, and the motion region determination unit 343 determines the detection target part based on the information and the motion region determined by itself. For example, in the operation targeted for rehabilitation, a region having a large operation range may be set as the detection target region. For example, in the case of rehabilitation of walking motion, the part having a large motion range is the foot (ankle, toe, heel, etc.) of the subject EP. In the case of rehabilitation of movement, the part having a large movement range is the hand (wrist, fingertip, back of hand, etc.) of the subject EP.

あるいは、検出対象部位には、表示制御部342が生成する目標画像の表示位置に近接する部位が設定されていてもよい。例えば、歩行動作のリハビリテーションの場合、本実施形態では、対象者EPが歩行動作において足を踏み出すべき位置に足型などを模した目標画像を表示するが、この場合、目標画像の表示位置に近接する部位とは、対象者EPの足(足首、つま先、踵など)である。また、手の移動のリハビリテーションの場合、対象者EPがタッチすべき位置に目標画像を表示するが、この場合、目標画像の表示位置に近接する部位とは、対象者EPの手(手首、指先、手の甲など)である。   Alternatively, a part close to the display position of the target image generated by the display control unit 342 may be set as the detection target part. For example, in the case of rehabilitation of walking motion, in this embodiment, a target image imitating a foot shape or the like is displayed at a position where the subject EP should step on the walking motion. In this case, the target image is close to the display position of the target image. The part to be performed is the foot (ankle, toe, heel, etc.) of the subject EP. In the case of hand movement rehabilitation, the target image is displayed at a position to be touched by the target person EP. In this case, the part close to the display position of the target image is the hand (wrist, fingertip) of the target person EP. , Back of the hand, etc.).

なお、認識部341は、検出結果情報に含まれる動作領域判定部343が決定した検出対象部位のデータ(体の一部の位置情報)を、記録部344を介して、検出履歴情報記憶部333に記録する。
記録部344は、検出結果情報を検出履歴情報記憶部333に書き込んで記録する。
The recognizing unit 341 uses the recording unit 344 to detect the detection target part data (positional information of a part of the body) determined by the motion region determining unit 343 included in the detection result information, via the recording unit 344. To record.
The recording unit 344 writes and records the detection result information in the detection history information storage unit 333.

目標決定部345は、認識部341が認識する対象者EPの体の一部(検出対象部位)の位置に基づいて対象者EPの体の一部の目標位置を決定する。例えば、歩行のリハビリテーションの場合、目標決定部345は、対象者EPの現在の足の位置、及び、対象者EPの足の位置の履歴のうち少なくともいずれかに基づいて、対象者EPの足の移動目標位置を決定する。特に、目標決定部345が、対象者EPの足の位置の履歴に基づいて対象者EPの進行方向を判定し、判定した進行方向に応じて移動目標位置を決定するようにしてもよい。あるいは、目標決定部345が、対象者EPの足の向きに基づいて対象者EPの進行方向を判定し、判定した進行方向に応じて移動目標位置を決定するようにしてもよい。あるいは、目標決定部345が、対象者EPの進行方向にかかわらず、例えばランダムな向きに、或いは所定のゴールの位置に向けて、移動目標位置を決定するようにしてもよい。   The target determination unit 345 determines a target position of a part of the body of the subject person EP based on the position of a part of the body (detection target part) of the subject person EP recognized by the recognition unit 341. For example, in the case of walking rehabilitation, the target determination unit 345 determines the foot of the subject person EP based on at least one of the current foot position of the subject person EP and the foot position history of the subject person EP. Determine the movement target position. In particular, the target determination unit 345 may determine the traveling direction of the subject person EP based on the foot position history of the subject person EP, and may determine the movement target position according to the determined traveling direction. Alternatively, the target determination unit 345 may determine the traveling direction of the subject person EP based on the direction of the foot of the subject person EP, and may determine the movement target position according to the determined traveling direction. Alternatively, the target determination unit 345 may determine the movement target position, for example, in a random direction or toward a predetermined goal position regardless of the traveling direction of the subject person EP.

目標決定部345が、対象者EPの体の検出対象部位の移動量を算出し、算出した移動量に基づいて移動目標位置を決定するようにしてもよい。例えば、認識部341が対象者EPの足の位置を認識する場合、目標決定部345は、対象者EPの足の位置の履歴に基づいて対象者EPの歩幅を算出する。そして、目標決定部345は、対象者EPの足の現在位置から歩幅分だけ移動した位置に移動目標位置を設定する。対象者EPの歩幅は、対象者EPの足の移動量を示しており、対象者EPの体の検出対象部位の移動量の例に該当する。
認識部341が対象者EPの足の位置の動きを認識する場合、目標決定部345が、対象者EPの足が動いた間隔を歩幅として検出するようにしてもよい。あるいは、認識部341が、対象者EPが床面に足をついた位置を認識する場合、目標決定部345が、対象者EPが床面に足をついた位置から次に足をついた位置までの間隔を歩幅として検出するようにしてもよい。
The target determination unit 345 may calculate the movement amount of the detection target part of the body of the subject EP and determine the movement target position based on the calculated movement amount. For example, when the recognition unit 341 recognizes the position of the foot of the subject person EP, the target determination unit 345 calculates the stride of the subject person EP based on the history of the foot position of the subject person EP. Then, the target determination unit 345 sets the movement target position at a position moved by the stride from the current position of the foot of the subject person EP. The stride length of the subject person EP indicates the amount of movement of the leg of the subject person EP, and corresponds to an example of the amount of movement of the detection target part of the body of the subject person EP.
When the recognition unit 341 recognizes the movement of the position of the foot of the subject person EP, the target determination unit 345 may detect the interval at which the foot of the subject person EP has moved as the stride. Alternatively, when the recognition unit 341 recognizes the position where the subject person EP has his / her foot on the floor surface, the target determination unit 345 has the position where the subject person EP has next to his / her foot from the floor surface. The interval up to may be detected as the stride.

評価部346は、対象者EPの体の検出対象部位の位置と移動目標位置との位置関係を評価する。例えば、評価部346は、認識部341が認識した対象者EPの体の部位の位置と、目標決定部345が決定した移動目標位置との距離を算出する。そして、評価部346は、算出した距離が所定の閾値以下か否かを判定する。対象者EPの体の検出対象部位と移動目標位置との距離が閾値以下であると判定した場合、評価部346は、目標位置到達と評価する。一方、対象者EPの体の検出対象部位と移動目標位置との距離が閾値より大きいと判定した場合、評価部346は、目標位置不到達と評価する。   The evaluation unit 346 evaluates the positional relationship between the position of the detection target part of the body of the subject person EP and the movement target position. For example, the evaluation unit 346 calculates the distance between the position of the body part of the subject person EP recognized by the recognition unit 341 and the movement target position determined by the target determination unit 345. Then, the evaluation unit 346 determines whether or not the calculated distance is equal to or less than a predetermined threshold value. When it is determined that the distance between the detection target part of the body of the subject person EP and the movement target position is equal to or less than the threshold value, the evaluation unit 346 evaluates that the target position has been reached. On the other hand, when it is determined that the distance between the detection target part of the body of the subject person EP and the movement target position is larger than the threshold value, the evaluation unit 346 evaluates that the target position has not been reached.

評価部346が用いる距離の閾値は、複数の対象者EPに共通に予め設定された定数であってもよい。あるいは、評価部346が、対象者EPの歩幅の10分の1を閾値に設定するなど対象者EP毎に閾値を設定するようにしてもよい。また、評価部346が用いる距離の閾値は、複数種類のリハビリテーションに共通に設定されていてもよいし、リハビリテーションの種類毎に設定されていてもよい。また閾値の大きさは、手を移動させるリハビリテーションよりも足を移動させるリハビリテーションの方が大きくなるよう設定されていてもよい。   The distance threshold used by the evaluation unit 346 may be a constant set in advance for a plurality of target persons EP. Or you may make it the evaluation part 346 set a threshold value for every object person EP, such as setting 1/10 of the stride of object person EP as a threshold value. Moreover, the threshold value of the distance used by the evaluation unit 346 may be set in common for a plurality of types of rehabilitation, or may be set for each type of rehabilitation. Moreover, the magnitude | size of a threshold value may be set so that the direction of the rehabilitation which moves a leg | foot may become larger than the rehabilitation which moves a hand.

また、評価部346が、対象者EPの体の一部の位置(検出対象部位)と移動目標位置との相対的な位置関係を評価する段階数は、上述した目標位置到達又は目標位置不到達の2段階に限らず、3段階以上の多段階であってもよい。例えば、評価部346が、目標位置到達か否かの判定閾値に加えてさらに目標位置不到達の場合のずれの大小の判定閾値を用いて、目標位置到達、ずれ小、ずれ大の3段階で評価を行うようにしてもよい。   The number of stages at which the evaluation unit 346 evaluates the relative positional relationship between the position of a part of the body of the subject EP (detection target part) and the movement target position is the target position arrival or target position non-reaching described above. It is not limited to these two stages, and may be a multi-stage having three or more stages. For example, the evaluation unit 346 uses, in addition to the determination threshold value for determining whether or not the target position has been reached, further the determination threshold value for the shift when the target position is not reached, in three stages: target position arrival, small shift, and large shift An evaluation may be performed.

また、評価部346が対象者EPの体の検出対象部位の位置と移動目標位置との位置関係を評価する方法は、閾値を用いる方法のみに限らない。例えば、評価部346が、対象者EPの体の検出対象部位の位置と移動目標位置との重なりの有無を判定し、重なり有りと判定した場合に目標位置到達と評価するようにしてもよい。
さらに、例えば歩行のリハビリテーションの場合、目標決定部345が、移動目標位置を面積のある範囲にて床面上に決定し、認識部341が、対象者EPの足の位置を、対象者EPの足の形状の範囲にて認識するようにしてもよい。そして、評価部346が、移動目標位置として決定されている範囲と、対象者EPの足の位置として検出された範囲との重なりの有無を判定するようにしてもよい。
Moreover, the method by which the evaluation unit 346 evaluates the positional relationship between the position of the detection target part of the body of the subject EP and the movement target position is not limited to a method using a threshold value. For example, the evaluation unit 346 may determine whether or not there is an overlap between the position of the detection target part of the body of the subject EP and the movement target position, and may determine that the target position has been reached when it is determined that there is an overlap.
Further, for example, in the case of walking rehabilitation, the target determination unit 345 determines the movement target position on the floor within a certain area, and the recognition unit 341 determines the position of the foot of the subject EP. You may make it recognize in the range of the shape of a leg | foot. Then, the evaluation unit 346 may determine whether or not there is an overlap between the range determined as the movement target position and the range detected as the position of the foot of the subject EP.

足用表示パラメータ設定部347は、歩行などの足を移動させるリハビリテーションにおいて、足用表示パラメータを設定する。足用表示パラメータは、対象者EPが足を移動させるときの目標画像の表示に用いられるパラメータである。
手用表示パラメータ設定部348は、手を動かすリハビリテーションにおいて、手用表示パラメータを設定する。手用表示パラメータは、対象者EPが手を動かすときの目標画像の表示に用いられるパラメータである。
外乱用表示パラメータ設定部349は、外乱用表示パラメータを設定する。外乱用表示パラメータは、リハビリテーションの対象者EPが足または手を所定の目標画像まで移動させるときに、対象者EPが足または手を目標画像まで移動させる妨げとなる外乱の表示に用いられるパラメータである。または、外乱用表示パラメータは、リハビリテーションの対象者EPが足または手を回避目標となる目標画像から回避させるときに、対象者EPが足または手を目標画像から回避させる妨げとなる外乱の表示に用いられるパラメータである。
例えば、足跡が表示されて対象者がその足跡の表示上に足を移動させるリハビリテーションにおいて、足を移動させている最中に自動車が近づいて来て足の移動を妨げる場合、表示された自動車が外乱である。また、例えば、リンゴの形状をした表示の表示位置に手を移動させるリハビリテーションにおいて、表示されたリンゴの位置に手を移動させている最中に炎が表示されて手の移動を妨げる場合、表示された炎が外乱である。なお、外乱は、大きさ、表示位置、形状など、実行されるリハビリテーションに応じてさまざまに変化するものであってよい。また、足を移動させるリハビリテーションにおいて、対象者が自動車を避けながら横断歩道を渡る際に、横断歩道に穴が表示され自動車を避けることを妨げる場合、表示された穴が外乱である。また、手を移動させるリハビリテーションにおいて、手を炎に触れないように移動させる際に、手に触れたくない手の移動範囲を制限するゴキブリなどが表示される場合、表示されたゴキブリが外乱である。
The foot display parameter setting unit 347 sets foot display parameters in rehabilitation for moving a foot such as walking. The foot display parameter is a parameter used for displaying the target image when the subject EP moves his / her foot.
The hand display parameter setting unit 348 sets hand display parameters in rehabilitation for moving a hand. The hand display parameter is a parameter used for displaying the target image when the subject EP moves his / her hand.
The disturbance display parameter setting unit 349 sets a disturbance display parameter. The disturbance display parameter is a parameter used for displaying a disturbance that prevents the subject EP from moving the foot or hand to the target image when the subject EP of rehabilitation moves the foot or hand to the predetermined target image. is there. Alternatively, the disturbance display parameter is used to display a disturbance that prevents the target EP from avoiding the foot or hand from the target image when the target EP of the rehabilitation avoids the foot or hand from the target image. The parameter used.
For example, in a rehabilitation in which a footprint is displayed and the subject moves his / her foot on the footprint display, if the vehicle approaches and obstructs the movement of the foot while moving the foot, the displayed vehicle is It is a disturbance. Also, for example, in rehabilitation where the hand is moved to the display position of the apple-shaped display, when a flame is displayed while moving the hand to the displayed apple position, Flame is a disturbance. The disturbance may vary in various ways depending on the rehabilitation to be performed, such as the size, the display position, and the shape. In addition, in the rehabilitation for moving a foot, when a subject crosses a pedestrian crossing while avoiding a car, if the hole is displayed on the pedestrian crossing to prevent the car from being avoided, the displayed hole is a disturbance. In addition, in the rehabilitation to move the hand, when moving the hand without touching the flame, if the cockroach that restricts the movement range of the hand that you do not want to touch is displayed, the displayed cockroach is a disturbance .

操作部35は、キーボード、ポインティングデバイス(マウス、タブレット等)、ボタン、タッチパネル等の既存の入力装置を用いて構成される。操作部35は、理学療法士等の指示をリハビリテーション支援制御装置300に入力する際に理学療法士等によって操作される。操作部35は、入力装置をリハビリテーション支援制御装置300に接続するためのインタフェースであってもよい。この場合、操作部35は、入力装置において理学療法士等の入力に応じ生成された入力信号をリハビリテーション支援制御装置300に入力する。操作部35は、表示部36と一体のタッチパネルとして構成されてもよい。   The operation unit 35 is configured using an existing input device such as a keyboard, a pointing device (such as a mouse or a tablet), a button, or a touch panel. The operation unit 35 is operated by a physical therapist or the like when inputting an instruction from the physical therapist or the like to the rehabilitation support control device 300. The operation unit 35 may be an interface for connecting the input device to the rehabilitation support control device 300. In this case, the operation unit 35 inputs an input signal generated in response to an input from a physical therapist or the like in the input device to the rehabilitation support control device 300. The operation unit 35 may be configured as a touch panel integrated with the display unit 36.

表示部36は、CRT(Cathode Ray Tube)ディスプレイ、液晶ディスプレイ、有機EL(Electro Luminescence)ディスプレイ等の画像表示装置である。表示部36は、画像や文字を表示する。表示部36は、画像表示装置をリハビリテーション支援制御装置300に接続するためのインタフェースであってもよい。この場合、表示部36は、画像や文字を表示するための映像信号を生成し、自身に接続されている画像表示装置に映像信号を出力する。   The display unit 36 is an image display device such as a CRT (Cathode Ray Tube) display, a liquid crystal display, or an organic EL (Electro Luminescence) display. The display unit 36 displays images and characters. The display unit 36 may be an interface for connecting the image display device to the rehabilitation support control device 300. In this case, the display unit 36 generates a video signal for displaying images and characters, and outputs the video signal to an image display device connected to the display unit 36.

図3は、リハビリテーション支援制御装置300による第一動作領域を説明するための斜視図である。
図3は、対象者EPがテーブルT(第一動作領域)上で手の移動のリハビリテーションを行っている様子を示している。出力装置200は、テーブルTに目標画像M1を投影している。対象者EPは、出力装置200が出力領域900に出力する目標画像M1に基づいて、手の移動に関するリハビリテーションを行う。
センサ100は、対象者EPが検出範囲800内において手を移動する際の対象者EPの体の一部の位置を検出し、検出結果情報を所定の時間毎にリハビリテーション支援制御装置300に出力する。
FIG. 3 is a perspective view for explaining a first operation region by the rehabilitation support control device 300.
FIG. 3 shows a state in which the subject EP is performing rehabilitation of hand movement on the table T (first motion region). The output device 200 projects the target image M1 on the table T. The subject EP performs rehabilitation related to hand movement based on the target image M1 output to the output area 900 by the output device 200.
The sensor 100 detects the position of a part of the body of the subject EP when the subject EP moves the hand within the detection range 800, and outputs detection result information to the rehabilitation support control device 300 at predetermined time intervals. .

図4は、リハビリテーション支援システム1における画像の表示例を示す平面図である。図4では、リハビリテーション支援システム1を用いて手の移動のリハビリテーションを行う場合の画像の例を示している。図4の例では、出力装置200の画像の投影によって、机上の投影面(出力領域900)に画像が表示されている。具体的には、目標位置の履歴を示す目標画像M111a、M111b、M112a及びM112bと、対象者EPの手の位置の履歴画像M121a及びM121bと、対象者EPの現在の手の位置を示す画像M131a及びM131bと、次の目標位置を示す目標画像M141a及びM141bとが、それぞれ手の形の画像で示されている。図4では、符号の「a」は右手を示し、「b」は左手を示す。例えば、目標画像M111aは、右手の目標位置の履歴を示す。目標画像M111bは、左手の目標位置の履歴を示す。   FIG. 4 is a plan view showing a display example of an image in the rehabilitation support system 1. FIG. 4 shows an example of an image when hand movement rehabilitation is performed using the rehabilitation support system 1. In the example of FIG. 4, the image is displayed on the projection surface (output region 900) on the desk by projecting the image of the output device 200. Specifically, target images M111a, M111b, M112a and M112b indicating the history of the target position, history images M121a and M121b of the position of the hand of the subject EP, and an image M131a indicating the current hand position of the subject EP. And M131b and target images M141a and M141b indicating the next target position are shown as hand-shaped images, respectively. In FIG. 4, the symbol “a” indicates the right hand and “b” indicates the left hand. For example, the target image M111a shows the history of the target position of the right hand. The target image M111b shows the history of the target position of the left hand.

但し、リハビリテーション支援システム1におけるこれらの画像は、体の検出対象部位の形状の画像に限らない。例えば、出力装置200が、右手の目標位置を赤丸で表示し、左手の目標位置を青丸で表示するなど、体の検出対象部位の形状の画像に代えて丸印を表示するようにしてもよい。   However, these images in the rehabilitation support system 1 are not limited to images of the shape of the body detection target part. For example, the output device 200 may display a circle instead of the image of the shape of the detection target part of the body, such as displaying the target position of the right hand as a red circle and displaying the target position of the left hand as a blue circle. Good.

このように、表示制御部342が、出力装置200を制御してテーブルTに目標画像および履歴画像を表示させることで、対象者EPが、直感的に自分が目標に対して手を移動させた実績を把握できる。   In this way, the display control unit 342 controls the output device 200 to display the target image and the history image on the table T, so that the subject EP intuitively moves his / her hand relative to the target. Track record.

図5は、リハビリテーション支援制御装置300による第二動作領域を説明するための斜視図である。
図5は、対象者EPがフロアFL(第二動作領域)上で歩行動作のリハビリテーションを行っている様子を示している。出力装置200は、フロアFLに目標画像M2〜M5を投影している。対象者EPは、出力装置200が出力領域900に出力する目標画像M2〜M5に基づいて、歩行動作のリハビリテーションを行う。例えば、対象者EPは、目標画像M2〜M5に示されるスタート位置から目標位置まで歩行するリハビリテーションを行う。センサ100は、対象者EPが検出範囲800内において対象者EPの足の位置を検出し、検出結果情報を所定の時間毎にリハビリテーション支援制御装置300に出力する。
FIG. 5 is a perspective view for explaining a second operation region by the rehabilitation support control device 300.
FIG. 5 shows a state in which the subject EP is performing rehabilitation of walking motion on the floor FL (second motion region). The output device 200 projects target images M2 to M5 on the floor FL. The subject EP performs rehabilitation of walking motion based on the target images M2 to M5 output from the output device 200 to the output area 900. For example, the subject person EP performs rehabilitation to walk from the start position shown in the target images M2 to M5 to the target position. The sensor 100 detects the position of the foot of the subject EP within the detection range 800, and outputs the detection result information to the rehabilitation support control device 300 every predetermined time.

図6は、リハビリテーション支援システム1における画像の表示の例を示す平面図である。
図6は、リハビリテーション支援システム1における画像の表示の、もう1つの例を示す図である。図6では、リハビリテーション支援システム1を用いて歩行のリハビリテーションを行う場合の画像の例を示している。図6の例では、出力装置の画像の投影によって、床上の投影面(出力領域900)に画像が表示されている。具体的には、目標位置の履歴を示す目標画像M211〜M214と、対象者EPの足の位置の履歴画像M221〜M223と、対象者EPの現在の足の位置を示す画像M231と、次の目標位置を示す目標画像M241とが、それぞれ足の形の画像で示されている。
FIG. 6 is a plan view showing an example of image display in the rehabilitation support system 1.
FIG. 6 is a diagram illustrating another example of image display in the rehabilitation support system 1. In FIG. 6, the example of the image in the case of performing rehabilitation of a walk using the rehabilitation assistance system 1 is shown. In the example of FIG. 6, the image is displayed on the projection surface (output area 900) on the floor by projecting the image of the output device. Specifically, target images M211 to M214 indicating the history of the target position, history images M221 to M223 of the foot position of the subject person EP, an image M231 showing the current foot position of the subject person EP, A target image M241 indicating the target position is shown as a foot-shaped image.

図4の例では、右手、左手それぞれの目標位置が表示されていたのに対し、図6の例では、左足の次の目標画像M241が示されているものの、右足の次の目標画像は示されていない。手の移動では、右手と左手とを同時に動かし得るのに対し、歩行では右足と左足とを交互に動かすからである。なお、本実施形態のリハビリテーション支援システム1によれば、足の動作のリハビリテーションとして、歩行(左右の足を交互に踏み出す動作)だけではなく、片足だけを連続して移動させたり、「けんけんぱ」のように両足を同時に移動させたりする足の動作を訓練することも可能である。その場合、出力装置200は、それぞれの足の動作に応じた目標画像、履歴画像を出力領域900に出力する。
なお、図4を参照して説明したのと同様、出力装置200が表示する画像は、足の形の画像に限らない。例えば、出力装置200が、右足の目標位置を赤丸で表示し、左足の目標位置を青丸で表示するなど、足の形の画像に代えて丸印を表示するようにしてもよい。また上記の実施形態とは逆に、左右の足の目標画像を片方ずつ表示するのではなく、常に先行して左右の足の目標画像を共に表示するようにしてもよい。また現在の足の位置画像と過去の足の位置の履歴画像で異なる表示とすることも可能である。例えば現在の足の位置画像は円、方形などの図形で表示し、過去の左右の足の履歴画像は「足あと」の図形で表示してもよい。
In the example of FIG. 4, the target positions of the right hand and the left hand are displayed. In the example of FIG. 6, the next target image M241 of the left foot is shown, but the next target image of the right foot is shown. It has not been. This is because the right hand and the left hand can be moved simultaneously in hand movement, whereas the right and left legs are alternately moved in walking. According to the rehabilitation support system 1 of the present embodiment, as a rehabilitation of the motion of the foot, not only walking (the motion of stepping on the left and right feet alternately), but also moving only one foot continuously, “Kenkopa” It is also possible to train the movement of the foot that moves both feet at the same time. In this case, the output device 200 outputs a target image and a history image corresponding to each foot motion to the output area 900.
Note that, as described with reference to FIG. 4, the image displayed by the output device 200 is not limited to a foot-shaped image. For example, the output device 200 may display a circle instead of the foot-shaped image, such as displaying the target position of the right foot with a red circle and displaying the target position of the left foot with a blue circle. In contrast to the above embodiment, the left and right foot target images are not displayed one by one, but the left and right foot target images may always be displayed together. It is also possible to display differently between the current foot position image and the past foot position history image. For example, the current foot position image may be displayed as a graphic such as a circle or a rectangle, and the past left and right foot history images may be displayed as a “footstep” graphic.

このように、表示制御部342が、出力装置200を制御してフロアFLに目標画像および履歴画像を表示させることで、対象者EPが、直感的に自分が目標に対して足を移動させた実績を把握できる。   In this manner, the display control unit 342 controls the output device 200 to display the target image and the history image on the floor FL, so that the subject EP intuitively moves his / her foot relative to the target. Track record.

次に図7を用いて、対象者のリハビリテーション検出対象情報の検出および記録処理の流れについて説明する。
図7は、リハビリテーション支援制御装置300による動作領域の判定処理の一例を示すフローチャートである。
まず、理学療法士又は作業療法士がこれから行おうとするリハビリテーション内容に応じて、対象者EPがリハビリテーションを行う環境にリハビリテーション支援システム1を移動させる。また、脚部310の高さを適切に調節する。次に、対象者EPが、検出範囲800で、これから行うリハビリテーション内容に応じた姿勢を取る。例えば、テーブル上での腕のリハビリテーションを行う場合であれば、対象者EPは椅子に座ってテーブル上に手を置く姿勢を取る。また、例えば、歩行動作のリハビリテーションを行う場合、対象者EPは起立した姿勢を取る。対象者EPがこれらの姿勢を取ると、理学療法士等がリハビリテーション支援制御装置300に準備開始指示情報を入力する。操作部35は、その準備開始指示情報を取得する(ステップS10)。なお、理学療法士等がリハビリテーション支援制御装置300に準備開始指示情報を入力した後に、対象者EPが、検出範囲800で、これから行うリハビリテーション内容に応じた姿勢を取っても良い。
Next, the flow of the detection and recording process of the rehabilitation detection target information of the subject will be described with reference to FIG.
FIG. 7 is a flowchart illustrating an example of a motion region determination process performed by the rehabilitation support control device 300.
First, the rehabilitation support system 1 is moved to an environment where the subject person EP performs rehabilitation according to the rehabilitation content that the physical therapist or occupational therapist intends to perform. Moreover, the height of the leg part 310 is adjusted appropriately. Next, the subject person EP takes a posture corresponding to the content of rehabilitation to be performed in the detection range 800. For example, in the case of performing arm rehabilitation on a table, the subject EP takes a posture of sitting on a chair and placing a hand on the table. Further, for example, when performing rehabilitation of walking motion, the subject EP takes a standing posture. When the subject person EP takes these postures, a physical therapist or the like inputs preparation start instruction information to the rehabilitation support control device 300. The operation unit 35 acquires the preparation start instruction information (step S10). In addition, after a physical therapist or the like inputs preparation start instruction information to the rehabilitation support control device 300, the subject EP may take an attitude corresponding to the content of rehabilitation to be performed in the detection range 800.

すると、センサ100が検出を開始し、入力部31は、検出結果情報を取得する(ステップS11)。入力部31は、検出結果情報を制御部34へ出力する。制御部34では、認識部341が検出結果情報を取得し、対象者EPの動作を認識する。あるいは、認識部341は、検出範囲800に存在するテーブル、フロア等を認識する。認識部341は、認識結果を動作領域判定部343へ出力する。   Then, the sensor 100 starts detection, and the input unit 31 acquires detection result information (step S11). The input unit 31 outputs detection result information to the control unit 34. In the control unit 34, the recognition unit 341 acquires the detection result information and recognizes the operation of the subject person EP. Alternatively, the recognizing unit 341 recognizes a table, floor, etc. existing in the detection range 800. The recognition unit 341 outputs the recognition result to the motion region determination unit 343.

次に動作領域判定部343は、図3、図5を用いて説明した方法によって動作領域を判定する(ステップS12)。例えば、動作領域判定部343は、認識部341による認識結果が、対象者EPの全身を認識したことを示していれば、動作領域はフロアFLであると判定してもよい。また、例えば、動作領域判定部343は、認識結果がテーブルTの存在を示していれば、動作領域はテーブルTであると判定してもよい。動作領域判定部343は、この他にも、上述した様々な判定方法を用いて動作領域の判定を行うことができる。次に動作領域判定部343は、動作領域はフロアFLかどうかを判定する(ステップS13)。動作領域がフロアFLの場合(ステップS13;Yes)、動作領域判定部343は、検出対象部位を対象者EPの足(例えば、足首又はつま先)に設定する(ステップS17)。動作領域判定部343が、検出対象部位を対象者EPの足に設定すると、次に足用表示パラメータ設定部347は、足を移動させるリハビリテーションにおける足用表示パラメータを設定する(ステップS18)。足用表示パラメータは、対象者EPが足を移動させるときの目標画像の表示に用いられるパラメータである。   Next, the motion region determination unit 343 determines the motion region by the method described with reference to FIGS. 3 and 5 (step S12). For example, the motion region determination unit 343 may determine that the motion region is the floor FL if the recognition result by the recognition unit 341 indicates that the whole body of the subject person EP is recognized. For example, the motion region determination unit 343 may determine that the motion region is the table T if the recognition result indicates the presence of the table T. In addition to this, the motion region determination unit 343 can determine the motion region using the various determination methods described above. Next, the motion area determination unit 343 determines whether the motion area is the floor FL (step S13). When the motion region is the floor FL (step S13; Yes), the motion region determination unit 343 sets the detection target part to the foot (for example, ankle or toe) of the subject EP (step S17). When the motion region determination unit 343 sets the detection target part to the foot of the subject EP, the foot display parameter setting unit 347 next sets the foot display parameter in the rehabilitation for moving the foot (step S18). The foot display parameter is a parameter used for displaying the target image when the subject EP moves his / her foot.

足用表示パラメータには、例えば、足用距離パラメータ、足用時間パラメータ、足用ベクトルパラメータなどが含まれる。足用距離パラメータには、例えば、目標画像が示す歩幅を決定するために用いられるパラメータ(図10に示すステップの値)、目標画像が示すスタンス(歩隔を含む)を決定するために用いられるパラメータ(図10に示す歩隔)などが含まれている。スタンスとは、対象者の前方(例えば体の前面や顔面が向く方向や進行予定の方向)に伸びる2本の平行線であって対象者の2つの脚の所定部位(例えば踵や親指の先端)をそれぞれ通る平行線の距離を表す。また、足用時間パラメータには、例えば、目標画像が表示されリハビリテーションが行われる総時間を示すパラメータ、現在表示されている目標画像が表示されてから目標画像が表示される次のタイミングまでの時間を示すパラメータなどが含まれている。また、足用ベクトルパラメータには、例えば、現在表示されている目標画像を基準とした次のタイミングに表示される目標画像の表示方向を決定するために用いられるパラメータなどが含まれる。足用表示パラメータ設定部347は、指定された足用距離パラメータ、足用時間パラメータ、足用ベクトルパラメータなどをパラメータ情報記憶部334に記録する。これらのパラメータを設定することにより、例えば、図6に例示したような足型の目標画像を対象者EPのリハビリテーションの内容に応じて表示することができる。   The foot display parameters include, for example, foot distance parameters, foot time parameters, foot vector parameters, and the like. For the foot distance parameter, for example, a parameter (step value shown in FIG. 10) used to determine the stride indicated by the target image and a stance (including a step) indicated by the target image are used. Parameters (steps shown in FIG. 10) and the like are included. A stance is two parallel lines that extend in front of the subject (for example, the front or face of the body or the direction in which the subject is scheduled to travel), and a predetermined part of the subject's two legs (eg, the tip of a heel or thumb) ) Represents the distance of the parallel lines passing through each of them. The foot time parameter includes, for example, a parameter indicating the total time during which the target image is displayed and rehabilitation is performed, and the time from when the currently displayed target image is displayed until the next timing at which the target image is displayed. The parameter which shows is included. In addition, the foot vector parameters include, for example, parameters used for determining the display direction of the target image displayed at the next timing with reference to the currently displayed target image. The foot display parameter setting unit 347 records the specified foot distance parameter, foot time parameter, foot vector parameter, and the like in the parameter information storage unit 334. By setting these parameters, for example, a foot-shaped target image as illustrated in FIG. 6 can be displayed according to the content of the rehabilitation of the subject EP.

この他にも、例えば、足用表示パラメータ設定部347は、目標画像が、対象者EPが歩行するときの回避目標となるリハビリテーションの場合に、操作部35から入力された情報に応じて、足用表示パラメータを設定する。目標画像が、対象者EPが歩行するときの回避目標となるリハビリテーションとは、例えば、図11に示すように、リハビリテーション支援制御装置300が、対象者EPが横断歩道を歩行するときに回避目標となる自動車の形状をした目標画像を映し出し、対象者EPが目標画像を回避するリハビリテーションである。
なお、足用表示パラメータの設定及び足用表示パラメータを用いた表示制御部342による表示について、後に詳細に述べる。
なお、足用表示パラメータを設定するための表示は、リハビリテーション支援制御装置300の表示部36に表示されるものである。
In addition to this, for example, when the target image is a rehabilitation that is an avoidance target when the target person EP walks, the foot display parameter setting unit 347 determines whether the foot image is displayed in accordance with information input from the operation unit 35. Set display parameters. For example, as shown in FIG. 11, the rehabilitation support control device 300 is an avoidance target when the target person EP walks on a pedestrian crossing. In this rehabilitation, a target image in the shape of a car is projected and the target person EP avoids the target image.
The setting of the foot display parameters and the display by the display control unit 342 using the foot display parameters will be described in detail later.
The display for setting the foot display parameter is displayed on the display unit 36 of the rehabilitation support control device 300.

足用表示パラメータ設定部347が足用表示パラメータを設定すると、次に外乱用表示パラメータ設定部349は、足の外乱用表示パラメータを設定する(ステップS19)。例えば、リハビリテーション支援制御装置300が専用アプリケーションを実行し、理学療法士等がリハビリテーション支援制御装置300に対して種々の情報を入力する。外乱用表示パラメータ設定部349は、目標画像が、対象者EPが歩行するときの足の移動目標となるリハビリテーションの場合に、リハビリテーション支援制御装置300に入力された情報に応じて、外乱用表示パラメータを設定する。
外乱用表示パラメータは、例えば、図12で示したように、リハビリテーション支援制御装置300が、対象者EPが横断歩道を歩行するときに、リハビリテーションの対象者EPが足を所定の目標画像まで移動させる妨げとなる自動車の形状をした外乱を画像として映し出すために用いられるパラメータである。
When the foot display parameter setting unit 347 sets the foot display parameter, the disturbance display parameter setting unit 349 next sets the foot disturbance display parameter (step S19). For example, the rehabilitation support control device 300 executes a dedicated application, and a physical therapist or the like inputs various information to the rehabilitation support control device 300. The disturbance display parameter setting unit 349 displays a disturbance display parameter according to information input to the rehabilitation support control device 300 when the target image is rehabilitation that is a target for moving the foot when the subject EP walks. Set.
For example, as shown in FIG. 12, when the rehabilitation support control device 300 walks the crossing crosswalk, the rehabilitation support control device 300 causes the rehabilitation target EP to move the foot to a predetermined target image. It is a parameter used to project a disturbance in the shape of a hindering automobile as an image.

足の外乱用表示パラメータには、例えば、外乱用距離パラメータ、外乱用時間パラメータ、外乱用ベクトルパラメータなどが含まれる。外乱用距離パラメータには、例えば、現在表示されている外乱から次のタイミングに表示される外乱までの距離を決定するために用いられるパラメータなどが含まれる。また、外乱用時間パラメータには、例えば、現在表示されている外乱が現在と異なる位置に表示されるまでの時間を示すパラメータなどが含まれる。また、外乱用ベクトルパラメータには、例えば、現在表示されている外乱を基準とした次のタイミングに表示される外乱の表示方向を決定するために用いられるパラメータが含まれる。外乱用表示パラメータ設定部349は、指定された外乱用距離パラメータ、外乱用時間パラメータ、外乱用ベクトルパラメータなどをパラメータ情報記憶部334に記録する。   The foot disturbance display parameters include, for example, a disturbance distance parameter, a disturbance time parameter, a disturbance vector parameter, and the like. The distance parameter for disturbance includes, for example, a parameter used for determining the distance from the currently displayed disturbance to the disturbance displayed at the next timing. Further, the disturbance time parameter includes, for example, a parameter indicating a time until the currently displayed disturbance is displayed at a position different from the current position. Further, the disturbance vector parameters include, for example, parameters used for determining the display direction of the disturbance displayed at the next timing based on the currently displayed disturbance. The disturbance display parameter setting unit 349 records the specified disturbance distance parameter, disturbance time parameter, disturbance vector parameter, and the like in the parameter information storage unit 334.

一方、動作領域がフロアFLではない場合(ステップS13;No)。動作領域判定部343は、検出対象部位を手(例えば、手の甲又は指先)に設定する(ステップS14)。動作領域判定部343は、検出対象部位の情報を認識部341へ出力する。また、動作領域判定部343は、動作領域を、表示制御部342へ出力する。動作領域判定部343が、検出対象部位を対象者EPの手に設定すると、次に手用表示パラメータ設定部348は、手用表示パラメータを設定する(ステップS15)。例えば、リハビリテーション支援制御装置300が専用アプリケーションを実行し、作業療法士等がリハビリテーション支援制御装置300に対して種々の情報を入力する。手用表示パラメータ設定部348は、目標画像が、対象者EPが手を動かすときの手の移動目標となるリハビリテーションの場合に、リハビリテーション支援制御装置300から入力された情報に応じて、手用表示パラメータを設定する。
目標画像が、対象者EPが手を動かすときの手の移動目標となるリハビリテーションとは、例えば、図8に示すように、リハビリテーション支援制御装置300が、対象者EPが手を動かすときの手の移動目標となるリンゴの形状をした目標画像を映し出し、対象者EPが目標画像の位置に手を移動させるリハビリテーションである。
On the other hand, when the operation region is not the floor FL (step S13; No). The motion region determination unit 343 sets the detection target part to the hand (for example, the back of the hand or the fingertip) (step S14). The motion region determination unit 343 outputs information on the detection target part to the recognition unit 341. In addition, the motion region determination unit 343 outputs the motion region to the display control unit 342. When the motion region determination unit 343 sets the detection target part in the hand of the subject EP, the hand display parameter setting unit 348 next sets the hand display parameter (step S15). For example, the rehabilitation support control device 300 executes a dedicated application, and an occupational therapist or the like inputs various information to the rehabilitation support control device 300. The hand display parameter setting unit 348 displays the hand image according to the information input from the rehabilitation support control device 300 when the target image is a rehabilitation that is a movement target of the hand when the subject EP moves the hand. Set the parameters.
For example, as shown in FIG. 8, the rehabilitation support control device 300 is a rehabilitation support control device 300 that moves the hand when the target person EP moves the hand. This is a rehabilitation in which a target image in the shape of an apple serving as a moving target is projected and the subject EP moves his hand to the position of the target image.

手用表示パラメータには、例えば、手用位置パラメータ、手用時間パラメータ、手用ベクトルパラメータなどが含まれる。手用位置パラメータには、例えば、目標画像が表示されるエリアを決定するために用いられるパラメータなどが含まれる。手用時間パラメータには、現在表示されている目標画像が現在と異なる位置に表示されるまでの時間を示す時間パラメータなどが含まれる。手用ベクトルパラメータには、現在表示されている目標画像を基準とした次のタイミングに表示される目標画像の表示方向を決定するために用いられるパラメータなどが含まれる。手用表示パラメータ設定部348は、指定された手用距離パラメータ、手用時間パラメータ、手用ベクトルパラメータなどをパラメータ情報記憶部334に記録する。これらのパラメータを設定することにより、例えば、図4に例示したような目標画像を、対象者EPのリハビリテーションの内容に応じて表示することができる。   The hand display parameters include, for example, hand position parameters, hand time parameters, hand vector parameters, and the like. The hand position parameter includes, for example, a parameter used for determining an area where the target image is displayed. The manual time parameter includes a time parameter indicating a time until the currently displayed target image is displayed at a position different from the current one. The hand vector parameters include parameters used for determining the display direction of the target image displayed at the next timing with reference to the currently displayed target image. The hand display parameter setting unit 348 records the designated hand distance parameter, hand time parameter, hand vector parameter, and the like in the parameter information storage unit 334. By setting these parameters, for example, the target image illustrated in FIG. 4 can be displayed according to the content of the rehabilitation of the subject person EP.

手用表示パラメータ設定部348が手用表示パラメータを設定すると、外乱用表示パラメータ設定部349は、手の外乱用表示パラメータを設定する(ステップS16)。
例えば、リハビリテーション支援制御装置300が専用アプリケーションを実行し、作業療法士等がリハビリテーション支援制御装置300に対して種々の情報を入力する。外乱用表示パラメータ設定部349は、目標画像が、対象者EPが手を動かすときの手の移動目標となるリハビリテーションの場合に、リハビリテーション支援制御装置300に入力された情報に応じて、外乱用表示パラメータを設定する。
手の外乱用表示パラメータは、例えば、図9に示すように、リハビリテーション支援制御装置300が、対象者EPが選択したキャラクターである目標画像の位置に手を動かすときに、手の移動の妨げとなる選択してはいけないキャラクターである外乱を画像として映し出すために用いられるパラメータである。
なお、手用表示パラメータの設定及び手用表示パラメータを用いた表示制御部342による表示について、後に詳細に述べる。
なお、手用表示パラメータを設定するための表示は、リハビリテーション支援制御装置300の表示部36に表示されるものである。
When the hand display parameter setting unit 348 sets the hand display parameter, the disturbance display parameter setting unit 349 sets the hand disturbance display parameter (step S16).
For example, the rehabilitation support control device 300 executes a dedicated application, and an occupational therapist or the like inputs various information to the rehabilitation support control device 300. The disturbance display parameter setting unit 349 displays the disturbance display according to the information input to the rehabilitation support control device 300 when the target image is rehabilitation that is a movement target of the hand when the subject EP moves the hand. Set the parameters.
For example, as shown in FIG. 9, when the rehabilitation support control apparatus 300 moves the hand to the position of the target image that is the character selected by the subject EP, the hand disturbance display parameter is This is a parameter used to project a disturbance that is a character that should not be selected as an image.
The setting of the manual display parameter and the display by the display control unit 342 using the manual display parameter will be described in detail later.
The display for setting the manual display parameter is displayed on the display unit 36 of the rehabilitation support control device 300.

手の外乱用表示パラメータには、例えば、外乱用距離パラメータ、外乱用時間パラメータ、外乱用ベクトルパラメータなどが含まれる。外乱用距離パラメータには、例えば、現在表示されている外乱から次のタイミングに表示される外乱までの距離を決定するために用いられるパラメータなどが含まれる。また、外乱用時間パラメータには、例えば、現在表示されている外乱が現在と異なる位置に表示されるまでの時間を示すパラメータなどが含まれる。また、外乱用ベクトルパラメータには、例えば、現在表示されている外乱を基準とした次のタイミングに表示される外乱の表示方向を決定するために用いられるパラメータが含まれる。外乱用表示パラメータ設定部349は、指定された外乱用距離パラメータ、外乱用時間パラメータ、外乱用ベクトルパラメータなどをパラメータ情報記憶部334に記録する。以上で実際のリハビリテーションの準備処理が完了する。次に対象者EPが、準備処理において判定した動作領域でのリハビリテーションを開始する。   The hand disturbance display parameters include, for example, a disturbance distance parameter, a disturbance time parameter, a disturbance vector parameter, and the like. The distance parameter for disturbance includes, for example, a parameter used for determining the distance from the currently displayed disturbance to the disturbance displayed at the next timing. Further, the disturbance time parameter includes, for example, a parameter indicating a time until the currently displayed disturbance is displayed at a position different from the current position. Further, the disturbance vector parameters include, for example, parameters used for determining the display direction of the disturbance displayed at the next timing based on the currently displayed disturbance. The disturbance display parameter setting unit 349 records the specified disturbance distance parameter, disturbance time parameter, disturbance vector parameter, and the like in the parameter information storage unit 334. This completes the actual rehabilitation preparation process. Next, the subject person EP starts rehabilitation in the motion region determined in the preparation process.

次に図13を用いて、リハビリテーション中の対象者EPの認識処理について説明する。
図13は、リハビリテーション支援制御装置300による対象者EPの認識処理の一例を示すフローチャートである。
リハビリテーションを行う対象者EPが検出範囲800に入ってリハビリテーションを開始する。また、理学療法士等は、対象者EPの氏名、性別、身長等と共に、リハビリーション開始指示情報をリハビリテーション支援制御装置300に入力する。すると、操作部35がリハビリテーション開始指示情報を取得する(ステップS20)。次に、表示制御部342は、動作領域に応じた目標画像を生成する。例えば、動作領域がフロアFLの場合、表示制御部342は、足型を表示した目標画像を生成する。また、目標決定部345は、その目標画像を表示する位置の座標情報を計算する。目標画像を表示する位置は、ステップS18で設定した足用表示パラメータに応じて変化させてもよい。また、動作領域がテーブルの場合、表示制御部342は、対象者EPが手でタッチする対象となるターゲットを表示した目標画像を生成する。また、目標決定部345は、その表示位置の座標情報を計算する。出力部32は、これらの情報(目標画像と表示位置)を取得し、出力装置200に出力指示を行う。出力装置200は、出力部32の指示に従って、表示制御部342が生成した目標画像を出力領域900に表示する(ステップS21)。このように、出力装置200が動作領域に目標画像を表示すると、対象者EPは、その表示位置に検出対象部位に関連する体の部位を移動させる動作を行う。例えば、足型の目標画像が表示された場合、対象者EPは、足型が表示された位置に足を移動させる。また、例えば、テーブル上にターゲットの目標画像が表示された場合、対象者EPは、目標画像が表示された位置に手を移動させ、テーブルにタッチする。
センサ100は、対象者EPの動作を検出し続け、リハビリテーション支援制御装置300へ出力する。リハビリテーション支援制御装置300では、入力部31が検出結果情報を取得し(ステップS22)、検出結果情報を、制御部34へ出力する。
Next, the recognition process of the subject person EP during the rehabilitation will be described with reference to FIG.
FIG. 13 is a flowchart illustrating an example of recognition processing of the subject person EP by the rehabilitation support control device 300.
The subject EP to be rehabilitated enters the detection range 800 and starts rehabilitation. In addition, the physical therapist or the like inputs rehabilitation start instruction information to the rehabilitation support control device 300 together with the name, gender, height, and the like of the subject EP. Then, the operation part 35 acquires rehabilitation start instruction information (step S20). Next, the display control unit 342 generates a target image corresponding to the operation area. For example, when the operation area is the floor FL, the display control unit 342 generates a target image displaying a foot shape. In addition, the target determination unit 345 calculates coordinate information of a position where the target image is displayed. The position for displaying the target image may be changed according to the foot display parameter set in step S18. When the operation area is a table, the display control unit 342 generates a target image that displays a target to be touched by the subject person EP by hand. Further, the target determining unit 345 calculates coordinate information of the display position. The output unit 32 acquires the information (target image and display position) and instructs the output device 200 to output the information. The output device 200 displays the target image generated by the display control unit 342 in the output area 900 according to the instruction of the output unit 32 (step S21). Thus, when the output device 200 displays the target image in the operation area, the subject person EP performs an operation of moving the body part related to the detection target part to the display position. For example, when a foot-shaped target image is displayed, the subject EP moves the foot to the position where the foot shape is displayed. For example, when the target image of the target is displayed on the table, the target person EP moves the hand to the position where the target image is displayed and touches the table.
The sensor 100 continues to detect the motion of the subject EP and outputs it to the rehabilitation support control device 300. In the rehabilitation support control apparatus 300, the input unit 31 acquires detection result information (step S22), and outputs the detection result information to the control unit 34.

制御部34では、認識部341が検出結果情報を取得する。認識部341は、検出結果情報を取得すると、その中から検出対象部位のデータを選択する。例えば、Kinect(登録商標)を利用した場合、認識部341は、検出結果情報として、対象者EPの複数の部位についての位置情報を取得する。認識部341は、その中から、動作領域判定部343が決定した検出対象部位の位置情報を選択する。例えば、動作領域判定部343が決定した検出対象部位が足(動作領域がフロア)の場合、認識部341は、検出結果情報の中から足(例えば、足首)の位置情報を選択する。また、例えば、動作領域判定部343が決定した検出対象部位が手(動作領域がテーブル)の場合、認識部341は、検出結果情報の中から手(例えば、手の甲)の位置情報を選択する。認識部341は、選択した検出対象部位とその位置情報を記録部344へ出力する。記録部344は、検出対象部位の検出結果情報を検出履歴情報記憶部333へ記録する(ステップS23)。このように、認識部341は、検出結果情報に対象者EPの動作に関する全身のデータが含まれている場合でも、検出結果情報に含まれるデータのうち、どのデータが動作領域に関連する検出対象部位のデータであるかを認識し、そのデータを選択する。そして、記録部344は、選択された検出対象部位の検出結果情報(位置情報)だけを記録する。   In the control unit 34, the recognition unit 341 acquires detection result information. When the recognition unit 341 acquires the detection result information, the recognition unit 341 selects data of the detection target part from the information. For example, when Kinect (registered trademark) is used, the recognition unit 341 acquires position information about a plurality of parts of the subject person EP as detection result information. The recognition unit 341 selects position information of the detection target part determined by the motion region determination unit 343 from the recognition unit 341. For example, when the detection target part determined by the motion region determination unit 343 is a foot (the motion region is a floor), the recognition unit 341 selects position information of the foot (for example, ankle) from the detection result information. Further, for example, when the detection target part determined by the motion region determination unit 343 is a hand (motion region is a table), the recognition unit 341 selects position information of the hand (for example, the back of the hand) from the detection result information. The recognition unit 341 outputs the selected detection target part and its position information to the recording unit 344. The recording unit 344 records the detection result information of the detection target part in the detection history information storage unit 333 (step S23). As described above, the recognition unit 341 can detect which data among the data included in the detection result information is related to the motion region even if the detection result information includes the whole body data related to the motion of the subject EP. Recognize whether it is part data and select that data. Then, the recording unit 344 records only the detection result information (position information) of the selected detection target part.

次に、表示制御部342は、履歴画像を生成し出力部32へ出力する。出力装置200は、出力部32の指示に従って、履歴画像を出力領域900に表示する(ステップS24)。
次に、制御部34は、検出処理を終了するかどうかを判定する(ステップS25)。例えば、理学療法士等がリハビリテーション終了指示情報を入力した場合、制御部34は、操作部35を介してその情報を取得し、検出処理を終了すると判定する。また、対象者EPが検出範囲800の外に出てしまった場合や対象者EPの手が検出範囲800の外に出てしまった場合、あるいは、予め設定されたリハビリテーションの実施時間が経過した場合にも、制御部34は、検出処理を終了すると判定する。
終了しないと判定した場合(ステップS25;No)、ステップS21からの処理を繰り返す。
終了すると判定した場合(ステップS25;Yes)、制御部34は、目標画像の生成処理や検出対象部位のデータを記録する処理を終了する。なお、表示制御部342は、検出履歴情報記憶部333に記録された対象者EPの検出対象部位のデータ(検出対象情報)から、今回のリハビリテーションにおける対象者EPの動作結果(例えば、検出対象部位が動いた軌跡)を表示する画像を生成し、出力装置200がこの画像を表示してもよい。
Next, the display control unit 342 generates a history image and outputs it to the output unit 32. The output device 200 displays the history image in the output area 900 according to the instruction of the output unit 32 (step S24).
Next, the control unit 34 determines whether or not to end the detection process (step S25). For example, when a physical therapist or the like inputs rehabilitation end instruction information, the control unit 34 acquires the information via the operation unit 35 and determines to end the detection process. Also, when the subject EP has gone out of the detection range 800, when the hand of the subject EP has gone out of the detection range 800, or when a preset rehabilitation time has elapsed In addition, the control unit 34 determines to end the detection process.
When it determines with not complete | finishing (step S25; No), the process from step S21 is repeated.
When it determines with complete | finishing (step S25; Yes), the control part 34 complete | finishes the production | generation process of a target image, and the process which records the data of a detection target part. Note that the display control unit 342 determines the operation result (for example, the detection target part) of the subject EP in the current rehabilitation from the data (detection target information) of the detection target part of the subject EP recorded in the detection history information storage unit 333. An image that displays the trajectory of the movement) may be generated, and the output device 200 may display this image.

次に図14を用いて、リハビリテーション中にパラメータ設定を行う処理について説明する。
図14は、リハビリテーション支援システム1を用いたリハビリテーションにおけるパラメータ設定の一例を示すフローチャートである。
まず、リハビリテーションの実施前に理学療法士等が、対象者EPについてのパラメータ(足用表示パラメータ等)を設定する(ステップS30)。具体的には、理学療法士等が、リハビリテーション支援制御装置300に設けられた表示画面(表示部36)を参照して、各種パラメータをリハビリテーション支援制御装置300に入力する。次に理学療法士等が、リハビリテーション支援制御装置300に準備開始指示情報を入力し、リハビリテーションを実施する(ステップS31)。上記のとおり、リハビリテーション支援制御装置300の動作領域判定部343は、動作領域を判定して検出対象部位の設定を行う。動作領域がフロアFLの場合、足用表示パラメータ設定部347が、ステップS30で入力された足用表示パラメータの設定を行う。また、外乱用表示パラメータ設定部349が、ステップS30で入力された足の外乱用表示パラメータの設定を行う。一方、動作領域がテーブルTの場合、手用表示パラメータ設定部348が、ステップS30で入力された手用表示パラメータを設定し、外乱用表示パラメータ設定部349が、ステップS30で入力された手の外乱用表示パラメータの設定を行う。足用表示パラメータ設定部347等によるパラメータの設定が終了すると、表示制御部342が、動作領域に応じて目標画像等を生成し、出力装置200がそれらの画像を表示する。対象者EPは、表示された目標画像に基づいてリハビリテーションを行う。予め定められた一連のリハビリテーション・プログラムが終了すると、表示制御部342が、リハビリテーション結果を含む画像を生成し、出力装置200がリハビリテーション結果を表示する(ステップS32)。リハビリテーション結果とは、例えば、評価部346によるリハビリテーション・プログラムを通した評価結果の実績値である。リハビリテーション結果は、例えば、目標画像の全表示数に対して評価部346が目標位置到達と評価した回数の割合として表示されてもよい。
Next, processing for setting parameters during rehabilitation will be described with reference to FIG.
FIG. 14 is a flowchart illustrating an example of parameter setting in rehabilitation using the rehabilitation support system 1.
First, before the rehabilitation is performed, a physical therapist or the like sets parameters (such as foot display parameters) for the subject EP (step S30). Specifically, a physical therapist or the like inputs various parameters to the rehabilitation support control device 300 with reference to a display screen (display unit 36) provided in the rehabilitation support control device 300. Next, a physical therapist etc. inputs preparation start instruction information to the rehabilitation support control apparatus 300, and implements rehabilitation (step S31). As described above, the motion region determination unit 343 of the rehabilitation support control device 300 determines the motion region and sets the detection target part. When the operation area is the floor FL, the foot display parameter setting unit 347 sets the foot display parameter input in step S30. Also, the disturbance display parameter setting unit 349 sets the foot disturbance display parameter input in step S30. On the other hand, when the operation area is the table T, the hand display parameter setting unit 348 sets the hand display parameter input in step S30, and the disturbance display parameter setting unit 349 sets the hand display parameter input in step S30. Set the disturbance display parameters. When the parameter setting by the foot display parameter setting unit 347 and the like is completed, the display control unit 342 generates a target image or the like according to the operation area, and the output device 200 displays these images. The subject person EP performs rehabilitation based on the displayed target image. When a series of predetermined rehabilitation programs are completed, the display control unit 342 generates an image including the rehabilitation result, and the output device 200 displays the rehabilitation result (step S32). The rehabilitation result is, for example, the actual value of the evaluation result through the rehabilitation program by the evaluation unit 346. The rehabilitation result may be displayed, for example, as a ratio of the number of times that the evaluation unit 346 evaluates that the target position has been reached with respect to the total display number of target images.

次に理学療法士等が、リハビリを続けるかどうかを判断する。例えば、理学療法士等は、予め定められた時間分だけリハビリテーションを行ったかどうかでリハビリテーションを続けるかどうかを判断してもよい。あるいは、理学療法士等は、対象者EPの疲れ具合やリハビリテーション結果が示す達成具合に基づいてリハビリテーションを続けるかどうかを判断してもよい。リハビリテーションを続けないと判断した場合(ステップS33;No)、フローチャートを終了する。   Next, a physical therapist determines whether to continue rehabilitation. For example, a physical therapist or the like may determine whether or not to continue the rehabilitation based on whether or not the rehabilitation is performed for a predetermined time. Alternatively, the physical therapist or the like may determine whether or not to continue the rehabilitation based on the degree of fatigue of the subject EP and the achievement level indicated by the rehabilitation result. When it is determined that the rehabilitation is not continued (step S33; No), the flowchart is ended.

リハビリテーションを続けると判断した場合(ステップS33;Yes)、理学療法士等は、パラメータ設定の見直しが必要かどうかを判断する(ステップS34)。例えば、対象者EPのリハビリテーション結果が予想を上回る場合、理学療法士等は、より難易度の高い動作を要求するようなパラメータ設定にするよう見直しが必要であると判断する。又は、対象者EPの手の移動や足の移動が予想通りであって、再度、同じ難易度の手や足の移動を訓練した方が良いと思われるような場合、理学療法士等は、パラメータ設定の見直しは必要ないと判断する。パラメータ設定の見直しが必要ないと判断した場合(ステップS34;No)、理学療法士等は、リハビリテーション支援制御装置300に開始指示情報を入力し、ステップS31からの処理を繰り返す。なお、同じ対象者EPに対して同じ動作領域でのリハビリテーションの実施を繰り返す場合、動作領域判定部343による動作領域の判定処理を省略してもよい。
パラメータ設定の見直しが必要と判断した場合(ステップS34;Yes)、理学療法士等は、新しいパラメータを検討する(ステップS35)。例えば、今回のリハビリテーション結果が良好だった場合、理学療法士等は、より難易度の高い動作を要求するようなパラメータを検討する。あるいは、今回のリハビリテーション結果が良好ではなかった場合、理学療法士等は、難易度の低い動作を要求するようなパラメータを検討する。パラメータを検討し終えると、理学療法士等は、その新しいパラメータを設定し(ステップS30)、ステップS31からの処理を繰り返す。本実施形態のリハビリテーション支援システム1によれば、パラメータを任意に設定することができるので、対象者EPは、体調や能力に応じたリハビリテーションを実施することができる。なお上記の説明においては、リハビリテーション支援制御装置300に設けられた表示画面(表示部36)を参照してパラメータ入力・設定を実行したが、出力装置200から出力されたパラメータ設定画面を参照して、フロアやテーブル上に表示された設定画面上で各種パラメータ入力・設定を実行してもよい。
When it is determined that the rehabilitation is continued (step S33; Yes), the physical therapist determines whether it is necessary to review the parameter setting (step S34). For example, when the rehabilitation result of the subject person EP exceeds the expectation, the physical therapist determines that it is necessary to review the parameter setting so as to require a more difficult operation. Or, if the subject's EP's movement of the hand or foot is as expected and it seems that it is better to train the movement of the hand or foot of the same difficulty again, the physical therapist, Judge that the parameter settings need not be reviewed. When it is determined that the parameter setting needs not be reviewed (step S34; No), the physical therapist or the like inputs start instruction information to the rehabilitation support control device 300, and repeats the processing from step S31. In addition, when performing rehabilitation in the same motion region for the same subject EP, the motion region determination processing by the motion region determination unit 343 may be omitted.
When it is determined that the parameter setting needs to be reviewed (step S34; Yes), the physical therapist examines a new parameter (step S35). For example, when the rehabilitation result this time is good, the physical therapist examines parameters that require a more difficult movement. Alternatively, if the current rehabilitation result is not good, a physical therapist or the like examines a parameter that requires an operation with low difficulty. When the parameters are examined, the physical therapist or the like sets the new parameters (step S30) and repeats the processing from step S31. According to the rehabilitation support system 1 of the present embodiment, the parameters can be arbitrarily set, so that the subject EP can perform rehabilitation according to physical condition and ability. In the above description, the parameter input / setting is executed with reference to the display screen (display unit 36) provided in the rehabilitation support control device 300, but the parameter setting screen output from the output device 200 is referred to. Various parameters may be input and set on a setting screen displayed on the floor or table.

本実施形態によれば、理学療法士が行うフロアFLでのリハビリテーション及び作業療法士が行うテーブルTでのリハビリテーションにおける対象者EPの動作情報(本実施形態の検出対象情報)の記録を、1台のリハビリテーション支援システム1で行うことができる。例えば、歩行動作のリハビリテーションを行う場所と手の移動のリハビリテーションを行うテーブルTとが離れた位置に存在しても、リハビリテーション支援システム1を移動させて、それぞれの位置で対象者EPの動作を検出し、動作情報を記録することができる。また、手の移動のリハビリテーションを、歩行動作のリハビリテーションを行う場所にテーブルTを設置して行うような場合、リハビリテーションの前に動作領域判定部343に動作領域を判定させるだけで、歩行動作のリハビリテーションを検出するモードと手の移動のリハビリテーションを検出するモードとを切り替えることができる。従って、リハビリテーションの種類ごとにリハビリテーション支援制御装置を導入する必要が無い。また、複数のリハビリテーション支援制御装置を導入した場合、各装置が出力する対象者EPに関するデータのデータ構造は異なることが一般的である。データ構造が異なると、例えば、ある対象者EPのリハビリテーション履歴を解析するような場合、データの扱いが複雑になり大変である。本実施形態では、対象者EPに関して記録するデータは、両手又は両足の一つの部位の位置情報であり、共通のデータ構造で記録、処理することができる。そのため、記録したデータの解析処理等を共通化することができ、データの扱いが容易になる。また、対象者EPがどのような動作をしようとも、リハビリテーションの目的とする動作に関連した部位の左右一対のデータに絞って認識処理及び記録処理を行うので、処理を高速化、簡素化することができる。また、一般的なモーションキャプチャでは、対象者EPの動作を検出するために、対象者EPはマーカを装着する必要があり手間がかかるといった問題があるが、本実施形態のリハビリテーション支援システム1であれば、対象者EPはマーカを装着する必要が無く、簡単に対象者EPの動作を検出することができる。   According to the present embodiment, one record of the motion information (detection target information of the present embodiment) of the subject person EP in the rehabilitation on the floor FL performed by the physical therapist and the rehabilitation on the table T performed by the occupational therapist The rehabilitation support system 1 can be used. For example, even if the place where the rehabilitation for walking motion is performed and the table T for performing the rehabilitation of hand movement exist at different positions, the rehabilitation support system 1 is moved to detect the motion of the subject EP at each position. The operation information can be recorded. In addition, when rehabilitation of hand movement is performed by installing a table T at a place where rehabilitation of walking motion is performed, rehabilitation of walking motion can be performed only by causing the motion region determination unit 343 to determine the motion region before rehabilitation. And a mode for detecting rehabilitation of hand movement can be switched. Therefore, it is not necessary to introduce a rehabilitation support control device for each type of rehabilitation. In addition, when a plurality of rehabilitation support control devices are introduced, the data structure of the data related to the subject person EP output by each device is generally different. If the data structure is different, for example, when analyzing the rehabilitation history of a certain subject EP, handling of the data becomes complicated and difficult. In the present embodiment, data to be recorded regarding the subject person EP is position information of one part of both hands or both feet, and can be recorded and processed with a common data structure. Therefore, it is possible to share the analysis processing of recorded data and the like, and the handling of data becomes easy. In addition, no matter what action the subject person EP performs, the recognition process and the recording process are limited to the pair of left and right data of the part related to the action intended for rehabilitation, so the process can be speeded up and simplified. Can do. Further, in general motion capture, there is a problem that the subject EP needs to wear a marker in order to detect the motion of the subject EP, which is troublesome. However, the rehabilitation support system 1 according to the present embodiment may be used. In this case, the subject person EP does not need to wear a marker and can easily detect the action of the subject person EP.

リハビリテーション支援制御装置300は、足の機能の回復に伴い足用表示パラメータを変更可能にする装置である。また、リハビリテーション支援制御装置300は、手の機能の回復に伴い手用表示パラメータを変更可能にする装置である。具体的には、対象者EPの足の機能の回復に伴って対象者EPの状態に適した足用表示パラメータが設定され、設定された足用表示パラメータを用いた表示制御部342による表示が行われる。また、対象者EPの手の機能の回復に伴って対象者EPの状態に適した手用表示パラメータが設定され、設定された手用表示パラメータを用いた表示制御部342による表示が行われる。以下、これらの設定及び表示について、詳しく説明する。   The rehabilitation support control device 300 is a device that makes it possible to change the foot display parameters as the foot function is restored. In addition, the rehabilitation support control device 300 is a device that makes it possible to change hand display parameters as the hand function is restored. Specifically, a foot display parameter suitable for the state of the subject EP is set as the foot function of the subject EP is restored, and display by the display control unit 342 using the set foot display parameter is performed. Done. Further, with the recovery of the hand function of the subject person EP, hand display parameters suitable for the state of the subject person EP are set, and display is performed by the display control unit 342 using the set hand display parameters. Hereinafter, these settings and display will be described in detail.

(足用表示パラメータ設定、手用表示パラメータ設定の詳細)
足用表示パラメータ設定部347は、足用距離パラメータ設定部、足用時間パラメータ設定部、足用ベクトルパラメータ設定部、足用位置パラメータ設定部、足用移動数パラメータ設定部、足用タイミングパラメータ設定部及び足用速度パラメータ設定部を備える。
(Details of foot display parameter setting and hand display parameter setting)
The foot display parameter setting unit 347 includes a foot distance parameter setting unit, a foot time parameter setting unit, a foot vector parameter setting unit, a foot position parameter setting unit, a foot movement number parameter setting unit, and a foot timing parameter setting. And a foot speed parameter setting unit.

足用距離パラメータ設定部は、足用距離パラメータを設定する。足用距離パラメータは、対象者EPの足の移動距離に係る足用表示パラメータの1つである。   The foot distance parameter setting unit sets a foot distance parameter. The foot distance parameter is one of the foot display parameters related to the movement distance of the foot of the subject EP.

足用時間パラメータ設定部は、足用時間パラメータを設定する。足用時間パラメータは、対象者EPの足の移動時間に係る足用表示パラメータの1つである。   The foot time parameter setting unit sets a foot time parameter. The foot time parameter is one of the foot display parameters related to the movement time of the foot of the subject EP.

足用ベクトルパラメータ設定部は、足用ベクトルパラメータを設定する。足用ベクトルパラメータは、対象者EPの足の移動方向に係る足用表示パラメータの1つである。   The foot vector parameter setting unit sets foot vector parameters. The foot vector parameter is one of the foot display parameters related to the moving direction of the foot of the subject EP.

足用位置パラメータ設定部は、足用位置パラメータを設定する。足用位置パラメータは、対象者EPの足の移動位置に係る足用表示パラメータの1つである。   The foot position parameter setting unit sets foot position parameters. The foot position parameter is one of the foot display parameters related to the movement position of the foot of the subject EP.

足用移動数パラメータ設定部は、足用移動数パラメータを設定する。足用移動数パラメータは、対象者EPの足の移動数に係る足用表示パラメータの1つである。   The foot movement number parameter setting unit sets a foot movement number parameter. The foot movement number parameter is one of the foot display parameters related to the number of foot movements of the subject EP.

足用タイミングパラメータ設定部は、足用タイミングパラメータを設定する。足用タイミングパラメータは、対象者EPの足の移動タイミングに係る足用表示パラメータの1つである。足用タイミングパラメータは、足用時間パラメータと同様に時間軸に沿って設定するパラメータである。   The foot timing parameter setting unit sets foot timing parameters. The foot timing parameter is one of the foot display parameters related to the movement timing of the foot of the subject EP. The foot timing parameter is a parameter set along the time axis similarly to the foot time parameter.

足用速度パラメータ設定部は、足用速度パラメータを設定する。足用速度パラメータは、対象者EPの足の移動速度に係る足用表示パラメータの1つである。足用速度パラメータは、足用時間パラメータと足用距離パラメータとを組み合わせ、距離を時間で除算して移動速度を算出し、設定するパラメータである。   The foot speed parameter setting unit sets a foot speed parameter. The foot speed parameter is one of the foot display parameters related to the moving speed of the foot of the subject EP. The foot speed parameter is a parameter that is set by calculating the moving speed by combining the foot time parameter and the foot distance parameter and dividing the distance by time.

手用表示パラメータ設定部348は、手を動かすリハビリテーションにおいて、手用表示パラメータを設定する。手用表示パラメータは、対象者EPが手を動かすときの目標画像の表示に用いられるパラメータである。   The hand display parameter setting unit 348 sets hand display parameters in rehabilitation for moving a hand. The hand display parameter is a parameter used for displaying the target image when the subject EP moves his / her hand.

手用表示パラメータ設定部348は、手用距離パラメータ設定部、手用ベクトルパラメータ設定部、手用時間パラメータ設定部、手用タイミングパラメータ設定部、手用位置パラメータ設定部、手用移動数パラメータ設定部及び手用速度パラメータ設定部を備える。   The manual display parameter setting unit 348 includes a manual distance parameter setting unit, a manual vector parameter setting unit, a manual time parameter setting unit, a manual timing parameter setting unit, a manual position parameter setting unit, and a manual movement number parameter setting. And a manual speed parameter setting unit.

手用位置パラメータ設定部は、手用位置パラメータを設定する。手用位置パラメータは、対象者EPの手の移動位置に係る手用表示パラメータの1つである。   The hand position parameter setting unit sets hand position parameters. The hand position parameter is one of hand display parameters related to the hand movement position of the subject EP.

手用時間パラメータ設定部は、手用時間パラメータを設定する。手用時間パラメータは、対象者EPの手の移動時間に係る手用表示パラメータの1つである。   The manual time parameter setting unit sets a manual time parameter. The hand time parameter is one of hand display parameters related to the movement time of the hand of the subject EP.

手用ベクトルパラメータ設定部は、手用ベクトルパラメータを設定する。手用ベクトルパラメータは、対象者EPの手の移動方向に係る手用表示パラメータの1つである。   The hand vector parameter setting unit sets hand vector parameters. The hand vector parameter is one of hand display parameters related to the moving direction of the hand of the subject EP.

手用距離パラメータ設定部は、手用距離パラメータを設定する。手用距離パラメータは、対象者EPの手の移動距離に係る手用表示パラメータの1つである。   The manual distance parameter setting unit sets a manual distance parameter. The hand distance parameter is one of hand display parameters related to the hand movement distance of the subject EP.

手用移動数パラメータ設定部は、手用移動数パラメータを設定する。手用移動数パラメータは、対象者EPの手の移動数に係る手用表示パラメータの1つである。   The manual movement number parameter setting unit sets a manual movement number parameter. The hand movement number parameter is one of the hand display parameters related to the number of hand movements of the subject EP.

手用タイミングパラメータ設定部は、手用タイミングパラメータを設定する。手用タイミングパラメータは、対象者EPの手の移動タイミングに係る手用表示パラメータの1つである。手用タイミングパラメータは、手用時間パラメータと同様に時間軸に沿って設定するパラメータである。   The manual timing parameter setting unit sets a manual timing parameter. The hand timing parameter is one of hand display parameters related to the hand movement timing of the subject EP. The manual timing parameter is a parameter set along the time axis in the same manner as the manual time parameter.

手用速度パラメータ設定部は、手用速度パラメータを設定する。手用速度パラメータは、対象者EPの手の移動速度に係る足用表示パラメータの1つである。手用速度パラメータは、手用時間パラメータと手用距離パラメータとを組み合わせ、距離を時間で除算して移動速度を算出し、設定するパラメータである。   The manual speed parameter setting unit sets a manual speed parameter. The hand speed parameter is one of the foot display parameters related to the moving speed of the hand of the subject EP. The manual speed parameter is a parameter that is set by calculating the moving speed by combining the manual time parameter and the manual distance parameter and dividing the distance by time.

(足用表示パラメータを用いた表示制御部による表示)
(足を目標画像の位置に移動させる場合)
足用表示パラメータ設定部347は、目標画像が、対象者EPが足を移動させるときの足の移動目標となるリハビリテーションの場合に、操作部35から入力された情報に応じて、足用表示パラメータを設定する。
目標画像が、対象者EPが足を移動させるときの足の移動目標となるリハビリテーションとは、例えば、図5で示したように、表示制御部342が、対象者EPが足を移動させるときの足の移動目標となる足の形状をした目標画像を映し出し、対象者EPが目標画像の位置に足の移動のリハビリテーションである。
(Display by display control unit using foot display parameters)
(When moving your foot to the target image)
The foot display parameter setting unit 347 is configured to display a foot display parameter according to information input from the operation unit 35 when the target image is rehabilitation to be a foot movement target when the subject EP moves the foot. Set.
For example, as shown in FIG. 5, the target image is a rehabilitation that becomes a movement target of the foot when the subject EP moves the foot. For example, the display control unit 342 moves the foot when the subject EP moves the foot. A target image in the shape of a foot, which is a target for moving the foot, is projected, and the subject EP is a rehabilitation for moving the foot to the position of the target image.

具体的には、足用表示パラメータ設定部347の足用距離パラメータ設定部は、足用距離パラメータを設定する。
より具体的には、足用距離パラメータ設定部は、目標画像が示す歩幅を決定するために用いられる足用距離パラメータ(図10で示したステップの値)を指定し、指定した足用距離パラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用距離パラメータを用いて、リハビリテーションにおける歩幅を示す目標画像を出力装置200に表示させることができる。
また、より具体的には、足用距離パラメータ設定部は、目標画像が示す左右の足のスタンスを決定するために用いられる足用距離パラメータ(図10で示した歩隔)を指定し、指定した足用距離パラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用距離パラメータを用いて、リハビリテーションにおける左右の足のスタンスを示す目標画像、を出力装置200に表示させることができる。
また、より具体的には、足用距離パラメータ設定部は、目標画像が表示される距離の範囲を決定するために用いられる足用距離パラメータを指定し、指定した足用距離パラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用距離パラメータを用いて、リハビリテーションにおいて設定した距離の範囲内で目標画像を出力装置200に表示させることができる。
Specifically, the foot distance parameter setting unit of the foot display parameter setting unit 347 sets the foot distance parameter.
More specifically, the foot distance parameter setting unit designates a foot distance parameter (step value shown in FIG. 10) used for determining the stride indicated by the target image, and designates the designated foot distance parameter. Is written in the parameter information storage unit 334.
Thereby, the display control part 342 can display the target image which shows the stride in rehabilitation on the output device 200 using the foot distance parameter.
More specifically, the foot distance parameter setting unit designates and designates a foot distance parameter (step shown in FIG. 10) used to determine the left and right foot stances indicated by the target image. The foot distance parameter is written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image indicating the left and right foot stances in the rehabilitation on the output device 200 using the foot distance parameter.
More specifically, the foot distance parameter setting unit designates a foot distance parameter used to determine a range of distance in which the target image is displayed, and stores the designated foot distance parameter as parameter information. Part 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 within the range of the distance set in the rehabilitation using the foot distance parameter.

表示制御部342が上述のように足用距離パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、足のスタンスが狭くなるほど支持基底面が狭くなりリハビリテーションの難易度が高くなり、また、足の移動距離が長すぎても不安定になりリハビリテーションの難易度が高くなる。このように難易度を変えることで、対象者は、自分の難易度に合ったリハビリテーションを受けることができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot distance parameter as described above, so that the support base surface becomes narrower as the foot stance becomes narrower, and the rehabilitation difficulty becomes higher. Moreover, even if the movement distance of the foot is too long, it becomes unstable and the difficulty of rehabilitation increases. By changing the difficulty level in this way, the target person can receive rehabilitation suitable for his / her difficulty level.

また、具体的には、足用表示パラメータ設定部347の足用時間パラメータ設定部は、足用時間パラメータを設定する。
より具体的には、足用時間パラメータ設定部は、目標画像が表示されてから所定時間内に対象者EPの足が目標画像の位置に移動されないときに目標画像の表示を停止させると判定するために用いられる所定時間を示す足用時間パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用時間パラメータを用いて、リハビリテーションにおける目標画像の表示時間の間、目標画像を出力装置200に表示させることができる。
また、より具体的には、足用時間パラメータ設定部は、目標画像が表示されリハビリテーションが行われる総時間を示す足用時間パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用時間パラメータを用いて、リハビリテーションの総時間の間、目標画像を出力装置200に表示させることができる。
また、より具体的には、足用時間パラメータ設定部は、現在表示されている目標画像が表示されてから次の目標画像が表示される次のタイミングまでの時間を示す足用表示パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用時間パラメータを用いて、リハビリテーションにおいて次の表示タイミングに次の目標画像を出力装置200に表示させることができる。
Specifically, the foot time parameter setting unit of the foot display parameter setting unit 347 sets the foot time parameter.
More specifically, the foot time parameter setting unit determines to stop displaying the target image when the foot of the subject EP is not moved to the position of the target image within a predetermined time after the target image is displayed. The foot time parameter indicating the predetermined time used for the purpose is designated and written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 during the display time of the target image in the rehabilitation using the foot time parameter.
More specifically, the foot time parameter setting unit designates a foot time parameter indicating the total time during which the target image is displayed and rehabilitation is performed, and is written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 during the total time of rehabilitation using the foot time parameter.
More specifically, the foot time parameter setting unit designates a foot display parameter indicating a time from when the currently displayed target image is displayed until the next timing when the next target image is displayed. To the parameter information storage unit 334.
Accordingly, the display control unit 342 can cause the output device 200 to display the next target image at the next display timing in the rehabilitation using the foot time parameter.

表示制御部342が上述のように足用時間パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、「すくみ足」などの足を上手に出せない疾患の対象者EPに、足を出す時間間隔やタイミングなどを知らせることができる。そのため、対象者EPは、リハビリテーションにおいて、足の出しやすい時間間隔やタイミングなどを習得することができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot time parameter as described above, so that the subject EP having a disease such as “shrinking foot” cannot be put out well. You can inform the time interval, timing, etc. Therefore, the subject person EP can learn the time interval and the timing that are easy to put out in the rehabilitation.

また、具体的には、足用表示パラメータ設定部347の足用ベクトルパラメータ設定部は、足用ベクトルパラメータを設定する。
より具体的には、足用ベクトルパラメータ設定部は、現在表示されている目標画像を基準とした次のタイミングに表示される次の目標画像の表示方向を決定するために用いられる足用ベクトルパラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用ベクトルパラメータを用いて、リハビリテーションにおいて直線的に足を移動させるか曲線的に足を移動させるかを示す目標画像を出力装置200に表示させることができる。
また、より具体的には、足用ベクトルパラメータ設定部は、目標画像が示す右足の踵からつま先に向かう方向と、左足の踵からつま先に向かう方向と、を決定するために用いられる足用ベクトルパラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用ベクトルパラメータを用いて、リハビリテーションにおける目標画像の左右の足の向きを同一にするか異なる向きにするかを示す目標画像を出力装置200に表示させることができる。
Specifically, the foot vector parameter setting unit of the foot display parameter setting unit 347 sets the foot vector parameter.
More specifically, the foot vector parameter setting unit is used to determine the display direction of the next target image to be displayed at the next timing with reference to the currently displayed target image. Is written to the parameter information storage unit 334.
Accordingly, the display control unit 342 can display a target image indicating whether the foot is moved linearly or curvedly in the rehabilitation on the output device 200 using the foot vector parameter.
More specifically, the foot vector parameter setting unit is used to determine a direction from the right foot heel to the toe indicated by the target image and a direction from the left foot heel to the toe. A parameter is designated and written to the parameter information storage unit 334.
Accordingly, the display control unit 342 can cause the output device 200 to display a target image indicating whether the left and right feet of the target image in the rehabilitation have the same orientation or different orientations using the foot vector parameter. it can.

表示制御部342が上述のように足用ベクトルパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、左右にふらつく対象者EPに直線的に足を移動させるための指示を出すことできる。そのため、対象者EPは、より明確に直線的に移動するリハビリテーションを実施することができる。
また、表示制御部342が上述のように足用ベクトルパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、直線的な移動を行える対象者EPが、今度は曲線的な移動を行うなど、より難易度の高いリハビリテーションを行うことができる。したがって、対象者EPは、日常生活の足の移動に近いリハビリテーションを実施することができる。
The display control unit 342 uses the foot vector parameters as described above to display the target image in the rehabilitation on the output device 200, thereby giving an instruction to move the foot linearly to the subject EP that fluctuates left and right. it can. Therefore, the subject EP can perform rehabilitation that moves more clearly and linearly.
In addition, the display control unit 342 displays the target image in the rehabilitation on the output device 200 using the foot vector parameters as described above, so that the subject EP that can perform a linear movement is now moved in a curved line. Rehabilitation with a higher degree of difficulty can be performed. Therefore, the subject EP can perform rehabilitation that is close to the movement of the feet in daily life.

また、具体的には、足用表示パラメータ設定部347の足用位置パラメータ設定部は、足用位置パラメータを設定してもよい。
より具体的には、足用位置パラメータ設定部は、目標画像が表示されるエリアを決定するために用いられる足用位置パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用位置パラメータを用いて、リハビリテーションにおいて表示されるエリアが制限された目標画像を出力装置200に表示させることができる。
Specifically, the foot position parameter setting unit of the foot display parameter setting unit 347 may set the foot position parameter.
More specifically, the foot position parameter setting unit designates a foot position parameter used to determine an area in which the target image is displayed and writes the foot position parameter in the parameter information storage unit 334.
Accordingly, the display control unit 342 can cause the output device 200 to display the target image in which the area displayed in the rehabilitation is limited using the foot position parameter.

表示制御部342が上述のように足用位置パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、セラピスト(治療士、療法士)がかわっても、正しいパラメータ設定が可能となる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot position parameter as described above, so that correct parameter setting is possible even if the therapist (therapist or therapist) changes. .

また、具体的には、足用表示パラメータ設定部347の足用タイミングパラメータ設定部は、足用タイミングパラメータを設定してもよい。
より具体的には、足用タイミングパラメータ設定部は、連続した右足の移動目標または連続した左足の移動目標を示す目標画像が表示されるタイミングを決定するために用いられる足用タイミングパラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用タイミングパラメータを用いて、リハビリテーションにおいて、目標画像を左右同時に表示されるか、左右交互に表示されるか、右または左を連続して表示されるか、更には、横方向に移動するサイドステップを誘導する位置に表示させるか、また、足を交差させて移動するクロスステップを誘導する位置に表示させるかの何れかで出力装置200に表示させることができる。
Specifically, the foot timing parameter setting unit of the foot display parameter setting unit 347 may set the foot timing parameter.
More specifically, the foot timing parameter setting unit specifies foot timing parameters used to determine the timing at which a target image indicating a continuous right foot movement target or a continuous left foot movement target is displayed. To the parameter information storage unit 334.
Thereby, the display control unit 342 uses the foot timing parameter to display the target image at the same time on the left and right, alternately on the left and right, or display the right or left continuously in rehabilitation, Furthermore, it is possible to display on the output device 200 either by displaying the side step that moves in the lateral direction at the position to guide or by displaying the cross step that moves by crossing the legs at the position to guide. it can.

表示制御部342が上述のように足用移動数パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、持久力が無い対象者EP等に安全な回数の範囲でリハビリテーションを行うことができる。
また、表示制御部342が上述のように足用移動数パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、日常生活を想定して、トイレまで10歩などという具体的な自宅復帰を想定したリハビリテーションが可能となる。
The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot movement number parameter as described above, thereby performing rehabilitation within a safe number of times for the subject EP who does not have endurance. Can do.
In addition, the display control unit 342 displays the target image in the rehabilitation on the output device 200 using the foot movement number parameter as described above, thereby assuming a specific home such as 10 steps to the toilet assuming daily life. Rehabilitation assuming return is possible.

また、具体的には、足用表示パラメータ設定部347の足用タイミングパラメータ設定部は、足用タイミングパラメータを設定してもよい。
より具体的には、足用タイミングパラメータ設定部は、連続した右足の移動目標または連続した左足の移動目標を示す目標画像が表示されるタイミングを決定するために用いられる足用タイミングパラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用タイミングパラメータを用いて、リハビリテーションにおいて、目標画像を左右同時に表示されるか、左右交互に表示されるか、右または左を連続して表示されるかの何れかで出力装置200に表示させることができる。
Specifically, the foot timing parameter setting unit of the foot display parameter setting unit 347 may set the foot timing parameter.
More specifically, the foot timing parameter setting unit specifies foot timing parameters used to determine the timing at which a target image indicating a continuous right foot movement target or a continuous left foot movement target is displayed. To the parameter information storage unit 334.
Thereby, the display control unit 342 uses the foot timing parameter to determine whether the target image is displayed on the left and right simultaneously, alternately on the left and right, or displayed on the right or left continuously in the rehabilitation. Either can be displayed on the output device 200.

表示制御部342が上述のように足用タイミングパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、左右の足を交互に移動させるだけではなく、右足または左足を複数回、連続して移動させるリハビリテーションを行うことができる。そのため、対象者EPは、足の移動が困難にならないように予防のリハビリテーションとして足の移動を行うことができる。   As described above, the display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot timing parameter, so that not only the left and right feet are moved alternately, but the right foot or the left foot is continuously moved multiple times. Rehabilitation to move. Therefore, the subject person EP can move the foot as preventive rehabilitation so that the movement of the foot does not become difficult.

また、具体的には、足用表示パラメータ設定部347の足用速度パラメータ設定部は、足用速度パラメータを設定してもよい。
より具体的には、足用速度パラメータ設定部は、右足の移動目標または左足の移動目標を示す目標画像が表示され単位時間当たりに目標画像の表示位置が変化する変化率を決定するために用いられる足用速度パラメータを指定し、パラメータ情報記憶部334に書き込む。
例えば、足用速度パラメータを指定することにより、指定した足の移動速度を満足する距離と時間との複数の組み合わせの中からランダムに組み合わせが選択され、足用速度パラメータと共に、選択された距離と時間のそれぞれに対応する足用距離パラメータと足用時間パラメータとが、パラメータ情報記憶部334に書き込まれる。
これにより、表示制御部342は、足用速度パラメータを用いて、リハビリテーションにおいて、足用距離パラメータや足用時間パラメータを用いた場合と同様に目標画像を出力装置200に表示させることができる。
Specifically, the foot speed parameter setting unit of the foot display parameter setting unit 347 may set a foot speed parameter.
More specifically, the foot speed parameter setting unit is used to determine the rate of change in which the target image indicating the moving target of the right foot or the moving target of the left foot is displayed and the display position of the target image changes per unit time. The foot speed parameter to be specified is designated and written to the parameter information storage unit 334.
For example, by specifying a foot speed parameter, a combination is randomly selected from a plurality of combinations of distance and time satisfying the specified foot moving speed, and the selected distance and the foot speed parameter are selected. A foot distance parameter and a foot time parameter corresponding to each of the times are written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 using the foot speed parameter in the same manner as in the case of using the foot distance parameter or the foot time parameter in the rehabilitation.

(足を目標画像に触れない位置に移動させる場合)
また、例えば、足用表示パラメータ設定部347は、目標画像が、対象者EPが足を移動させるときの回避目標となるリハビリテーションを行う場合に、操作部35から入力された情報に応じて、足用表示パラメータを設定する。
目標画像が、対象者EPが足を移動させるときの回避目標となるリハビリテーションとは、例えば、図11で示したように、表示制御部342が、対象者EPが横断歩道を足を移動させるときに回避目標となる自動車の形状をした目標画像を映し出し、対象者EPが目標画像を回避するリハビリテーションである。
(When moving the foot to a position where it does not touch the target image)
In addition, for example, the foot display parameter setting unit 347 determines whether or not the target image performs rehabilitation that is an avoidance target when the target person EP moves his / her foot according to information input from the operation unit 35. Set display parameters.
For example, as shown in FIG. 11, the target image is a rehabilitation that is an avoidance target when the subject person EP moves his / her foot. In this rehabilitation, a target image in the shape of an automobile that is an avoidance target is displayed, and the subject EP avoids the target image.

対象者EPは、このリハビリテーションにより、日常生活において車が来た際に避ける等の練習を安全に実施することができる。このリハビリテーションは、表示制御部342がこれまでのリハビリテーションでは表示したことのない内容の画像を映し出すことで可能となる。   Through this rehabilitation, the subject person EP can safely perform exercises such as avoidance when a car arrives in daily life. This rehabilitation is made possible by the display control unit 342 displaying an image having contents that have not been displayed in the past rehabilitation.

具体的には、足用表示パラメータ設定部347の足用距離パラメータ設定部は、足用距離パラメータを設定する。
より具体的には、足用距離パラメータ設定部は、現在表示されている目標画像から次のタイミングに表示される目標画像までの距離を決定するために用いられる足用距離パラメータを指定し、指定した足用距離パラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用距離パラメータを用いて、リハビリテーションにおいて各タイミングについて設定された距離で同一目標画像を出力装置200に表示させることができる。
また、より具体的には、足用距離パラメータ設定部は、現在表示されている目標画像から次のタイミングに表示される目標画像と異なる目標画像までの距離を決定するために用いられる足用距離パラメータを指定し、指定した足用距離パラメータをパラメータ情報記憶部334に書き込む。
また、より具体的には、足用距離パラメータ設定部は、目標画像が表示される距離の範囲を決定するために用いられる足用距離パラメータを指定し、指定した足用距離パラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用距離パラメータを用いて、リハビリテーションにおいて設定した距離の範囲内で目標画像を出力装置200に表示させることができる。
これにより、表示制御部342は、足用距離パラメータを用いて、リハビリテーションにおいて各タイミングについて設定された距離で異なる目標画像を出力装置200に表示させることができる。
Specifically, the foot distance parameter setting unit of the foot display parameter setting unit 347 sets the foot distance parameter.
More specifically, the foot distance parameter setting unit designates and designates a foot distance parameter used to determine the distance from the currently displayed target image to the target image displayed at the next timing. The foot distance parameter is written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the same target image on the output device 200 at the distance set for each timing in the rehabilitation using the foot distance parameter.
More specifically, the foot distance parameter setting unit is used for determining a distance from the currently displayed target image to a target image different from the target image displayed at the next timing. A parameter is designated, and the designated foot distance parameter is written in the parameter information storage unit 334.
More specifically, the foot distance parameter setting unit designates a foot distance parameter used to determine a range of distance in which the target image is displayed, and stores the designated foot distance parameter as parameter information. Part 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 within the range of the distance set in the rehabilitation using the foot distance parameter.
As a result, the display control unit 342 can cause the output device 200 to display different target images at the distances set for each timing in the rehabilitation using the foot distance parameter.

表示制御部342が上述のように足用距離パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、対象者EP毎の身体能力に応じた適切なパラメータを設定することができる。
また、表示制御部342が上述のように足用距離パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、同一の対象者EPであっても前回よりも距離の遠い設定を行うなどの難易度を上げることで、チャレンジを目的としたリハビリテーションを行うこともできる。
The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot distance parameter as described above, whereby an appropriate parameter corresponding to the physical ability for each subject EP can be set.
Further, the display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot distance parameter as described above, so that even the same target person EP sets farther than the previous time. Rehabilitation for the purpose of challenge can be performed by increasing the difficulty level.

また、具体的には、足用表示パラメータ設定部347の足用時間パラメータ設定部は、足用時間パラメータを設定する。
より具体的には、足用時間パラメータ設定部は、現在表示されている目標画像が現在と異なる位置に表示されるまでの時間を示す足用時間パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用時間パラメータを用いて、リハビリテーションにおいて、設定された移動と停止の時間で目標画像を出力装置200に表示させることができる。
また、より具体的には、足用時間パラメータ設定部は、目標画像が表示されリハビリテーションが行われる総時間を示す足用時間パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用時間パラメータを用いて、リハビリテーションの総時間の間、目標画像を出力装置200に表示させることができる。
また、より具体的には、足用時間パラメータ設定部は、現在表示されている目標画像の表示が終了してから新たな目標画像が表示されるまでの時間を示す足用時間パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用時間パラメータを用いて、リハビリテーションにおいて設定された目標画像を回避してからの経過時間に新たな目標画像を出力装置200に表示させることができる。
Specifically, the foot time parameter setting unit of the foot display parameter setting unit 347 sets the foot time parameter.
More specifically, the foot time parameter setting unit designates a foot time parameter indicating the time until the currently displayed target image is displayed at a position different from the current image, and writes the foot time parameter in the parameter information storage unit 334. .
Accordingly, the display control unit 342 can display the target image on the output device 200 during the rehabilitation using the foot time parameter with the set movement and stop times.
More specifically, the foot time parameter setting unit designates a foot time parameter indicating the total time during which the target image is displayed and rehabilitation is performed, and is written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 during the total time of rehabilitation using the foot time parameter.
More specifically, the foot time parameter setting unit designates a foot time parameter indicating a time from when the currently displayed target image is displayed until a new target image is displayed. To the parameter information storage unit 334.
Accordingly, the display control unit 342 can cause the output device 200 to display a new target image at an elapsed time after avoiding the target image set in the rehabilitation using the foot time parameter.

表示制御部342が上述のように足用時間パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、時間差を大きく表示して、例えば対象者EPの歩行時に、次の目標が出るまでは止まっていることを求めたり、空中で足を止めたりするなどのリハビリテーションが可能となる。そのため、対象者EPは、自分のタイミングで移動しないという練習が可能となり、とっさの行動練習等に役立つリハビリテーションを受けることができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot time parameter as described above, thereby displaying a large time difference. For example, when the subject EP walks, the next target is obtained. Rehabilitation such as seeking to stop or stopping in the air is possible. Therefore, the target person EP can practice not to move at his own timing, and can receive rehabilitation useful for quick action practice.

また、具体的には、足用表示パラメータ設定部347の足用ベクトルパラメータ設定部は、足用ベクトルパラメータを設定する。
より具体的には、足用ベクトルパラメータ設定部は、現在表示されている目標画像を基準とした次のタイミングに表示される目標画像の表示方向を決定するために用いられる足用ベクトルパラメータを指定し、指定した足用ベクトルパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用ベクトルパラメータを用いて、リハビリテーションにおいて移動する方向を示す目標画像を出力装置200に表示させることができる。
Specifically, the foot vector parameter setting unit of the foot display parameter setting unit 347 sets the foot vector parameter.
More specifically, the foot vector parameter setting unit specifies a foot vector parameter used to determine the display direction of the target image displayed at the next timing based on the currently displayed target image. The designated foot vector parameter is written into the parameter information storage unit 334.
Thereby, the display control part 342 can display the target image which shows the direction which moves in rehabilitation on the output device 200 using the foot vector parameter.

表示制御部342が上述のように足用ベクトルパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、対象者EPに集中して行わせたい動作方向を設定することができる。そのため、対象者EPは、質の高いリハビリテーションを受けることが可能となる。   As described above, the display control unit 342 uses the foot vector parameters to display the target image in the rehabilitation on the output device 200, so that it is possible to set an operation direction to be concentrated on the subject person EP. Therefore, the subject person EP can receive high-quality rehabilitation.

また、具体的には、足用表示パラメータ設定部347の足用位置パラメータ設定部は、足用位置パラメータを設定してもよい。
より具体的には、足用位置パラメータ設定部は、目標画像が表示されるエリアを決定するために用いられる足用位置パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用位置パラメータを用いて、リハビリテーションにおいて設定されたエリアに制限して目標画像を出力装置200に表示させることができる。
Specifically, the foot position parameter setting unit of the foot display parameter setting unit 347 may set the foot position parameter.
More specifically, the foot position parameter setting unit designates a foot position parameter used to determine an area in which the target image is displayed and writes the foot position parameter in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 by using the foot position parameter while limiting to the area set in the rehabilitation.

表示制御部342が上述のように足用位置パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、対象者EPの移動可能な範囲を絞ることができる。そのため、リハビリテーションにより、対象者EPの移動可能な範囲を対象者EPの現状の最大範囲以上に適切に設定することで身体能力を適度に引き出すことができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the foot position parameter as described above, thereby narrowing the range in which the subject EP can move. Therefore, the physical ability can be appropriately extracted by appropriately setting the movable range of the subject person EP to be greater than or equal to the current maximum range of the subject person EP by rehabilitation.

また、具体的には、足用表示パラメータ設定部347の足用移動数パラメータ設定部は、足用移動数パラメータを設定してもよい。
より具体的には、足用移動数パラメータ設定部は、判定内容の異なる目標画像が表示される回数を決定するために用いられる足用位置パラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用位置パラメータを用いて、リハビリテーションにおいて判定内容の異なる目標画像を設定された回数出力装置200に表示させることができる。
Specifically, the foot movement number parameter setting unit of the foot display parameter setting unit 347 may set a foot movement number parameter.
More specifically, the foot movement number parameter setting unit designates a foot position parameter used to determine the number of times target images having different determination contents are displayed, and writes the foot position parameter to the parameter information storage unit 334.
Thereby, the display control part 342 can display the target image from which the determination content differs in rehabilitation on the set output device 200 using the foot position parameter.

また、具体的には、足用表示パラメータ設定部347の足用タイミングパラメータ設定部は、足用タイミングパラメータを設定してもよい。
より具体的には、足用タイミングパラメータ設定部は、異なる移動方向を示す異なる目標画像が表示されるタイミングを決定するために用いられる足用タイミングパラメータを指定し、パラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、足用タイミングパラメータを用いて、リハビリテーションにおいて異なる移動方向を示す異なる目標画像を、移動方向毎の表示する割合(頻度)を変化させて出力装置200に表示させることができる。
Specifically, the foot timing parameter setting unit of the foot display parameter setting unit 347 may set the foot timing parameter.
More specifically, the foot timing parameter setting unit designates a foot timing parameter used to determine the timing at which different target images indicating different movement directions are displayed, and writes the foot timing parameter in the parameter information storage unit 334.
Accordingly, the display control unit 342 causes the output device 200 to display different target images indicating different movement directions in the rehabilitation by changing the ratio (frequency) of display for each movement direction using the foot timing parameter. Can do.

表示制御部342が上述のように足用タイミングパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、対象者EPに、左右違う足の動きを意図的に行わせることができる。そのため、対象者EPは、リハビリテーションによって、通常の左右交互に足を移動させる歩行とは異なる足の移動を練習させることができる。   The display control unit 342 displays the target image in the rehabilitation on the output device 200 using the foot timing parameter as described above, thereby allowing the subject EP to intentionally perform different foot movements. Therefore, subject EP can practice the movement of a foot different from the walk which moves a foot alternately by right and left by rehabilitation.

また、具体的には、足用表示パラメータ設定部347の足用速度パラメータ設定部は、足用速度パラメータを設定してもよい。
より具体的には、足用速度パラメータ設定部が、右足の移動目標または左足の移動目標を示す目標画像を表示させる際の、単位時間当たりに目標画像の表示位置を変化させる変化率を決定するために用いられる足用速度パラメータを指定し、パラメータ情報記憶部334に書き込む。
例えば、足用速度パラメータを指定することにより、指定した足の移動速度を満足する距離と時間との複数の組み合わせの中からランダムに組み合わせが選択され、足用速度パラメータと共に、選択された距離と時間のそれぞれに対応する足用距離パラメータと足用時間パラメータとが、パラメータ情報記憶部334に書き込まれる。
これにより、表示制御部342は、足用速度パラメータを用いて、リハビリテーションにおいて、足用距離パラメータや足用時間パラメータを用いた場合と同様に、目標画像を出力装置200に表示させることができる。
Specifically, the foot speed parameter setting unit of the foot display parameter setting unit 347 may set a foot speed parameter.
More specifically, the foot speed parameter setting unit determines the rate of change for changing the display position of the target image per unit time when displaying the target image indicating the movement target of the right foot or the movement target of the left foot. The foot speed parameter used for this purpose is designated and written in the parameter information storage unit 334.
For example, by specifying a foot speed parameter, a combination is randomly selected from a plurality of combinations of distance and time satisfying the specified foot moving speed, and the selected distance and the foot speed parameter are selected. A foot distance parameter and a foot time parameter corresponding to each of the times are written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 using the foot speed parameter, similarly to the case where the foot distance parameter or the foot time parameter is used in the rehabilitation.

(手用表示パラメータを用いた表示制御部による表示)
(手を目標画像の位置に移動させる場合)
手用表示パラメータ設定部348は、目標画像が、対象者EPが手を動かすときの手の移動目標となるリハビリテーションの場合に、操作部35から入力された情報に応じて、手用表示パラメータを設定する。
目標画像が、対象者EPが手を動かすときの手の移動目標となるリハビリテーションとは、例えば、図8で示したように、表示制御部342が、対象者EPが手を動かすときの手の移動目標となるリンゴの形状をした目標画像を映し出し、対象者EPが目標画像の位置に手を移動させるリハビリテーションである。
(Display by display controller using manual display parameters)
(When moving your hand to the target image)
The hand display parameter setting unit 348 sets the hand display parameter according to the information input from the operation unit 35 when the target image is a rehabilitation that is a movement target of the hand when the subject EP moves the hand. Set.
The rehabilitation in which the target image is a movement target of the hand when the subject EP moves the hand is, for example, as shown in FIG. 8, the display control unit 342 moves the hand when the subject EP moves the hand. This is a rehabilitation in which a target image in the shape of an apple serving as a moving target is projected and the subject EP moves his hand to the position of the target image.

今までのリハビリテーションでは、手の移動目標が不明確であり、単調な動作が多かった。しかしながら、リハビリテーション支援制御装置300によるリハビリテーションでは、手の移動目標が明確になる。そのため、対象者EPが主体的に(能動的)手を移動させることができる。   In the past rehabilitation, the movement target of the hand was unclear, and there were many monotonous movements. However, in the rehabilitation performed by the rehabilitation support control device 300, the hand movement target becomes clear. Therefore, the target person EP can move the hand actively (actively).

具体的には、手用表示パラメータ設定部348の手用位置パラメータ設定部は、手用位置パラメータを設定する。
より具体的には、手用位置パラメータ設定部は、目標画像が表示されるエリアを決定するために用いられる手用位置パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用位置パラメータを用いて、リハビリテーションにおいて設定されたエリアに限定して目標画像を出力装置200に表示させることができる。
Specifically, the hand position parameter setting unit of the hand display parameter setting unit 348 sets the hand position parameter.
More specifically, the hand position parameter setting unit specifies a hand position parameter used to determine an area in which the target image is displayed, and writes the specified parameter in the parameter information storage unit 334.
Thereby, the display control unit 342 can display the target image on the output device 200 by using the hand position parameter only in the area set in the rehabilitation.

表示制御部342が上述のように手用位置パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、手を移動させるのに苦手な領域に限定して繰り返しリハビリテーションを行うことができる。そのため、対象者EPは、効果の高い手の移動のリハビリテーションを受けることができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the hand position parameter as described above, so that the rehabilitation can be repeatedly performed only in a region where it is difficult to move the hand. . Therefore, the target person EP can receive rehabilitation of hand movement with high effect.

また、具体的には、手用表示パラメータ設定部348の手用時間パラメータ設定部は、手用時間パラメータを設定する。
より具体的には、手用時間パラメータ設定部は、目標画像が表示されてから所定時間内に対象者EPの手が目標画像の位置に移動されないときに目標画像の表示を停止すると判定するために用いられる所定時間を示す手用時間パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用時間パラメータを用いて、リハビリテーションにおいて設定された表示時間で目標画像を出力装置200に表示させることができる。
また、より具体的には、手用時間パラメータ設定部は、目標画像が表示されリハビリテーションが行われる総時間を示す手用時間パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用時間パラメータを用いて、リハビリテーションの総時間の間、目標画像を出力装置200に表示させることができる。
また、より具体的には、手用時間パラメータ設定部は、現在表示されている目標画像が表示されてから目標画像が表示される次のタイミングまでの時間を示す手用表示パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用時間パラメータを用いて、リハビリテーションにおいて設定された次の表示タイミングに目標画像を出力装置200に表示させることができる。
Specifically, the manual time parameter setting unit of the manual display parameter setting unit 348 sets the manual time parameter.
More specifically, the manual time parameter setting unit determines to stop displaying the target image when the hand of the subject EP is not moved to the position of the target image within a predetermined time after the target image is displayed. A manual time parameter indicating a predetermined time used in the above is designated, and the designated parameter is written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 for the display time set in the rehabilitation using the manual time parameter.
More specifically, the manual time parameter setting unit specifies a manual time parameter indicating the total time during which the target image is displayed and rehabilitation is performed, and the specified parameter is written in the parameter information storage unit 334.
Thereby, the display control part 342 can display a target image on the output device 200 during the total time of rehabilitation using a manual time parameter.
More specifically, the manual time parameter setting unit specifies a manual display parameter indicating a time from when the currently displayed target image is displayed until the next timing when the target image is displayed, The designated parameter is written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 at the next display timing set in the rehabilitation using the manual time parameter.

表示制御部342が上述のように手用距離パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、対象者EPに時間制限を意識させ、対象者EPの能力を最大限に引き出すことが可能となる。   The display control unit 342 displays the target image in the rehabilitation on the output device 200 using the manual distance parameter as described above, thereby making the subject EP aware of the time limit and maximizing the ability of the subject EP. It becomes possible.

また、具体的には、手用表示パラメータ設定部348の手用ベクトルパラメータ設定部は、手用ベクトルパラメータを設定する。
より具体的には、手用ベクトルパラメータ設定部は、現在表示されている目標画像を基準とした次のタイミングに表示される次の目標画像の表示方向を決定するために用いられる手用ベクトルパラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用ベクトルパラメータを用いて、リハビリテーションにおいて手の前後方向に表示されるか手の左右方向に表示されるかの何れかで目標画像を出力装置200に表示させることができる。
また、より具体的には、手用ベクトルパラメータ設定部は、目標画像が示す右手の向かう方向と、左手の向かう方向と、を決定するために用いられる手用ベクトルパラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用ベクトルパラメータを用いて、リハビリテーションにおける目標画像の左右の手の移動方向を同一にするか異なる向きにするかの何れかで目標画像を出力装置200に表示させることができる。
Specifically, the hand vector parameter setting unit of the hand display parameter setting unit 348 sets the hand vector parameter.
More specifically, the hand vector parameter setting unit is a hand vector parameter used to determine the display direction of the next target image displayed at the next timing with reference to the currently displayed target image. And the specified parameter is written into the parameter information storage unit 334.
As a result, the display control unit 342 causes the output device 200 to display the target image using either the hand front-rear direction or the hand left-right direction during rehabilitation using the hand vector parameter. be able to.
More specifically, the hand vector parameter setting unit specifies a hand vector parameter used to determine the direction toward the right hand and the direction toward the left hand indicated by the target image, and specifies the specified parameter. Is written in the parameter information storage unit 334.
As a result, the display control unit 342 displays the target image on the output device 200 by using the hand vector parameter in accordance with whether the movement direction of the left and right hands of the target image in the rehabilitation is the same or different. Can be made.

表示制御部342が上述のように手用ベクトルパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、対象者EPの苦手な方向を集中的にリハビリテーションすることができる。対象者EPによって手の動かす方向は異なるが、こうすることにより集中的にリハビリテーションを行うことができ、対象者EPは質の高い治療を受けることができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the hand vector parameters as described above, so that the direction in which the subject EP is not good can be intensively rehabilitated. Although the direction in which the hand is moved differs depending on the subject EP, this makes it possible to perform intensive rehabilitation, and the subject EP can receive high-quality treatment.

また、具体的には、手用表示パラメータ設定部348の手用距離パラメータ設定部は、手用距離パラメータを設定してもよい。
より具体的には、手用距離パラメータ設定部は、目標画像が表示される距離の間隔を決定するために用いられる手用距離パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用距離パラメータを用いて、リハビリテーションにおいて設定された距離で同一目標画像を出力装置200に表示させることができる。また、これにより、表示制御部342は、手用距離パラメータを用いて、リハビリテーションにおいて設定された距離で異なる目標画像を出力装置200に表示させることができる。
また、より具体的には、手用距離パラメータ設定部は、目標画像が表示される距離の範囲を決定するために用いられる手用距離パラメータを指定し、指定した手用距離パラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用距離パラメータを用いて、リハビリテーションにおいて設定した距離の範囲内で目標画像を出力装置200に表示させることができる。
Specifically, the hand distance parameter setting unit of the hand display parameter setting unit 348 may set a hand distance parameter.
More specifically, the hand distance parameter setting unit designates a hand distance parameter used to determine the distance interval at which the target image is displayed, and writes the designated parameter in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the same target image on the output device 200 at the distance set in the rehabilitation using the manual distance parameter. Thereby, the display control unit 342 can cause the output device 200 to display different target images at the distance set in the rehabilitation using the manual distance parameter.
More specifically, the hand distance parameter setting unit designates a hand distance parameter used to determine a range of distance in which the target image is displayed, and stores the designated hand distance parameter in parameter information. Part 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 within the distance range set in the rehabilitation using the manual distance parameter.

表示制御部342が上述のように手用距離パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、リハビリテーションにおいて対象者EPの伸ばす手の距離を変えることができる。対象者EPによって伸ばすことのできる手の距離は異なり、同一の対象者EPであってもリハビリテーションを繰り返すことにより、伸ばすことのできる手の距離が長くなる。リハビリテーションでの「目標設定」は少し届かない場所へアプローチすることであるため、リハビリテーションにおいて伸ばす手の距離を変えられることは有用である。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the hand distance parameter as described above, thereby changing the distance of the hand that the subject EP extends in the rehabilitation. The distance of the hand that can be extended differs depending on the subject EP, and the distance of the hand that can be extended becomes longer by repeating the rehabilitation even for the same subject EP. Since “target setting” in rehabilitation is to approach a place that does not reach a little, it is useful to be able to change the distance of the hand that is extended in rehabilitation.

また、具体的には、手用表示パラメータ設定部348の手用移動数パラメータ設定部は、手用移動数パラメータを設定してもよい。
より具体的には、手用移動数パラメータ設定部は、判定内容の異なる目標画像が表示される回数を決定するために用いられる手用移動数パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用移動数パラメータを用いて、リハビリテーションにおいて判定内容の異なる目標画像を設定された回数、出力装置200に表示させることができる。
Specifically, the manual movement number parameter setting unit of the manual display parameter setting unit 348 may set the manual movement number parameter.
More specifically, the manual movement number parameter setting unit designates a manual movement number parameter used to determine the number of times target images having different determination contents are displayed, and the designated parameter is a parameter information storage unit. Write to 334.
Accordingly, the display control unit 342 can display the target image having different determination contents in the rehabilitation on the output device 200 using the manual movement number parameter.

表示制御部342が上述のように手用移動数パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、持久力が無い対象者EPや、動作制限がある対象者EPも回数制限を与えることができる。そのため、対象者EPは、安全にリハビリテーションを受けることができる。また、対象者EPに移動回数を数えさせ、記憶させるなどのより複雑なリハビリテーションを行うことができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the manual movement number parameter as described above, so that the target EP having no endurance and the target EP having the motion limitation are also limited in number of times. Can be given. Therefore, the subject person EP can receive rehabilitation safely. Further, it is possible to perform more complicated rehabilitation such as causing the subject person EP to count and memorize the number of movements.

また、具体的には、手用表示パラメータ設定部348の手用タイミングパラメータ設定部は、手用タイミングパラメータを設定してもよい。
より具体的には、手用タイミングパラメータ設定部は、連続した右手の移動目標または連続した左手の移動目標を示す目標画像が表示されるタイミングを決定するために用いられる手用タイミングパラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用タイミングパラメータを用いて、リハビリテーションにおいて左右交互に表示させるか、又は、右または左を連続して表示させるかの何れかで目標画像を出力装置200に表示させることができる。
Specifically, the manual timing parameter setting unit of the manual display parameter setting unit 348 may set the manual timing parameter.
More specifically, the hand timing parameter setting unit specifies a hand timing parameter used to determine the timing at which a target image indicating a continuous right hand movement target or a continuous left hand movement target is displayed. The designated parameter is written in the parameter information storage unit 334.
As a result, the display control unit 342 displays the target image on the output device 200 by using the manual timing parameter to display the left and right alternately in the rehabilitation, or to display the right or left continuously. Can be made.

表示制御部342が上述のように手用距離パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、左右交互に手を移動させるなどのマルチタスクの難易度が高いリハビリテーションを行うことができる。対象者EPは、自分のレベルに合った難易度を選択してリハビリテーションを行うことができ、また、左右交互などのさまざまな難易度を選択できるため、何度もリハビリテーションを行っている対象者EPであってもパターンを記憶してしまうことを防ぐことができる。   The display control unit 342 uses the hand distance parameter as described above to display the target image in the rehabilitation on the output device 200, thereby performing rehabilitation with a high degree of multitasking difficulty such as moving the hand alternately left and right. Can do. Target EPs can select the difficulty level that suits their level and perform rehabilitation, and can select various levels of difficulty such as left and right alternates. Even so, it is possible to prevent the pattern from being stored.

また、具体的には、手用表示パラメータ設定部348の手用速度パラメータ設定部は、手用速度パラメータを設定してもよい。
より具体的には、手用速度パラメータ設定部は、右手の移動目標または左手の移動目標を示す目標画像を表示させる際、単位時間当たりに目標画像の表示位置を変化させる変化率を決定するために用いられる手用速度パラメータを指定し、パラメータ情報記憶部334に書き込む。
例えば、手用速度パラメータを指定することにより、指定した手の移動速度を満足する距離と時間との複数の組み合わせの中からランダムに組み合わせが選択され、手用速度パラメータと共に、選択された距離と時間のそれぞれに対応する手用距離パラメータと手用時間パラメータとが、パラメータ情報記憶部334に書き込まれる。
これにより、表示制御部342は、手用速度パラメータを用いて、リハビリテーションにおいて、手用距離パラメータや手用時間パラメータを用いた場合と同様に、目標画像を出力装置200に表示させることができる。
Specifically, the manual speed parameter setting unit of the manual display parameter setting unit 348 may set the manual speed parameter.
More specifically, the manual speed parameter setting unit determines a change rate for changing the display position of the target image per unit time when displaying the target image indicating the movement target of the right hand or the movement target of the left hand. The hand speed parameter used in the above is designated and written in the parameter information storage unit 334.
For example, by specifying the hand speed parameter, a combination is randomly selected from a plurality of combinations of distance and time that satisfy the specified hand movement speed, and the selected distance and the hand speed parameter are selected. The manual distance parameter and the manual time parameter corresponding to each time are written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 using the manual speed parameter, similarly to the case where the manual distance parameter or the manual time parameter is used in rehabilitation.

(手を目標画像に触れない位置に移動させる場合)
また、例えば、手用表示パラメータ設定部348は、目標画像が、対象者EPが手を移動させるときの回避目標となるリハビリテーションを行う場合に、操作部35から入力された情報に応じて、手用表示パラメータを設定する。
目標画像が、対象者EPが手を動かすときの回避目標となるリハビリテーションとは、例えば、図15に示すように、表示制御部342が、対象者EPが手を動かすときに回避目標となる炎の形状をした目標画像を映し出し、対象者EPが目標画像を回避するリハビリテーションである。
(When moving the hand to a position that does not touch the target image)
Further, for example, the hand display parameter setting unit 348 determines whether the target image is a hand according to information input from the operation unit 35 when performing rehabilitation that is an avoidance target when the target person EP moves the hand. Set display parameters.
For example, as shown in FIG. 15, the rehabilitation whose target image is an avoidance target when the target person EP moves his / her hand is a flame that becomes an avoidance target when the target person EP moves his / her hand. This is a rehabilitation in which a target image having the shape is projected and the target person EP avoids the target image.

対象者EPは、このリハビリテーションにより、日常生活において手を火から避ける等の練習を安全に実施することができる。このリハビリテーションは、認知機能が低下し、「火」を危険と認識できない対象者EPに対しても、安全な状態で実施することができる。   By this rehabilitation, the subject person EP can safely practice such as avoiding hands from fire in daily life. This rehabilitation can be performed in a safe state even for a subject EP whose cognitive function is reduced and “fire” cannot be recognized as dangerous.

具体的には、手用表示パラメータ設定部348の手用位置パラメータ設定部は、手用位置パラメータを設定する。
より具体的には、手用位置パラメータ設定部は、目標画像が表示されるエリアを決定するために用いられる手用位置パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用位置パラメータを用いて、リハビリテーションにおいて設定されたエリアに制限された目標画像を出力装置200に表示させることができる。
Specifically, the hand position parameter setting unit of the hand display parameter setting unit 348 sets the hand position parameter.
More specifically, the hand position parameter setting unit specifies a hand position parameter used to determine an area in which the target image is displayed, and writes the specified parameter in the parameter information storage unit 334.
Thereby, the display control unit 342 can display the target image limited to the area set in the rehabilitation on the output device 200 using the hand position parameter.

表示制御部342が上述のように手用位置パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、片麻痺等で手の届く範囲が限定される対象者EPに対して、範囲を限定してリハビリテーションを行うことができる。
また、表示制御部342が上述のように手用位置パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、片麻痺等で手の届く範囲が限定される対象者EPに対して、チャレンジとして、少し届かない範囲に手を出させる練習も行うことが可能となる。
The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the hand position parameter as described above. Rehabilitation can be performed with limited.
In addition, the display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the hand position parameter as described above, so that the target EP that has a limited reach due to hemiplegia is limited. As a challenge, you can also practice putting your hands out of reach.

また、具体的には、手用表示パラメータ設定部348の手用時間パラメータ設定部は、手用時間パラメータを設定する。
より具体的には、手用時間パラメータ設定部は、現在表示されている前記目標画像が現在と異なる位置に表示されるまでの時間を示す前記手用時間パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用時間パラメータを用いて、リハビリテーションにおいて設定された移動と停止の時間を示す目標画像を出力装置200に表示させることができる。
また、より具体的には、手用時間パラメータ設定部は、目標画像が表示されリハビリテーションが行われる総時間を示す手用時間パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用時間パラメータを用いて、リハビリテーションの総時間の間、目標画像を出力装置200に表示させることができる。
また、より具体的には、手用時間パラメータ設定部は、現在表示されている目標画像が表示されてから目標画像が表示される次のタイミングまでの時間を示す手用時間パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用時間パラメータを用いて、リハビリテーションにおいて目標画像を回避してから設定された時間が経過すると、新たな目標画像を出力装置200に表示させることができる。
Specifically, the manual time parameter setting unit of the manual display parameter setting unit 348 sets the manual time parameter.
More specifically, the manual time parameter setting unit specifies the manual time parameter indicating a time until the currently displayed target image is displayed at a position different from the current position, and the specified parameter is set as the parameter. Write to the information storage unit 334.
Thereby, the display control part 342 can display the target image which shows the movement and stop time set in rehabilitation on the output device 200 using a manual time parameter.
More specifically, the manual time parameter setting unit specifies a manual time parameter indicating the total time during which the target image is displayed and rehabilitation is performed, and the specified parameter is written in the parameter information storage unit 334.
Thereby, the display control part 342 can display a target image on the output device 200 during the total time of rehabilitation using a manual time parameter.
More specifically, the manual time parameter setting unit designates a manual time parameter indicating a time from when the currently displayed target image is displayed until the next timing when the target image is displayed, The designated parameter is written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can cause the output device 200 to display a new target image when a set time has elapsed after avoiding the target image in the rehabilitation using the manual time parameter.

表示制御部342が上述のように手用時間パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、対象者EPの手を移動と停止のように変化させることができる。そのため、さまざまな組合せの手の移動の練習が可能となり、対象者EPは、さまざまな内容のリハビリテーションを受けることができる。   The display control unit 342 displays the target image in the rehabilitation on the output device 200 using the manual time parameter as described above, so that the hand of the subject EP can be changed like moving and stopping. Therefore, it is possible to practice hand movements of various combinations, and the subject EP can receive rehabilitation of various contents.

また、具体的には、手用表示パラメータ設定部348の手用ベクトルパラメータ設定部は、手用ベクトルパラメータを設定する。
より具体的には、手用ベクトルパラメータ設定部は、現在表示されている目標画像を基準とした次のタイミングに表示される目標画像の表示方向を決定するために用いられる手用ベクトルパラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用ベクトルパラメータを用いて、リハビリテーションにおいて手の前後方向に表示されるか手の左右方向に表示されるかの何れかの目標画像を出力装置200に表示させることができる。
Specifically, the hand vector parameter setting unit of the hand display parameter setting unit 348 sets the hand vector parameter.
More specifically, the hand vector parameter setting unit specifies a hand vector parameter used to determine the display direction of the target image displayed at the next timing with reference to the currently displayed target image. Then, the designated parameter is written into the parameter information storage unit 334.
Accordingly, the display control unit 342 causes the output device 200 to display a target image that is displayed in the front-rear direction of the hand or the left-right direction of the hand in the rehabilitation using the hand vector parameter. be able to.

表示制御部342が上述のように手用ベクトルパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、集中的に実施したい方向の練習が可能となる。そのため、対象者EPは効果的なリハビリテーションを受けることができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the hand vector parameters as described above, so that it is possible to practice in the direction to be concentrated. Therefore, the subject EP can receive effective rehabilitation.

また、具体的には、手用表示パラメータ設定部348の手用距離パラメータ設定部は、手用距離パラメータを設定してもよい。
より具体的には、手用距離パラメータ設定部は、目標画像が表示される距離の間隔を決定するために用いられる手用距離パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用距離パラメータを用いて、リハビリテーションにおいて設定した距離で同一目標画像を出力装置200に表示させることができる。また、これにより、表示制御部342は、手用距離パラメータを用いて、リハビリテーションにおいて設定した距離で異なる目標画像を出力装置200に表示させることができる。
また、より具体的には、手用距離パラメータ設定部は、目標画像が表示される距離の範囲を決定するために用いられる手用距離パラメータを指定し、指定した手用距離パラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用距離パラメータを用いて、リハビリテーションにおいて設定した距離の範囲内で目標画像を出力装置200に表示させることができる。
Specifically, the hand distance parameter setting unit of the hand display parameter setting unit 348 may set a hand distance parameter.
More specifically, the hand distance parameter setting unit designates a hand distance parameter used to determine the distance interval at which the target image is displayed, and writes the designated parameter in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the same target image on the output device 200 at the distance set in the rehabilitation using the manual distance parameter. Accordingly, the display control unit 342 can cause the output device 200 to display different target images at the distance set in the rehabilitation using the manual distance parameter.
More specifically, the hand distance parameter setting unit designates a hand distance parameter used to determine a range of distance in which the target image is displayed, and stores the designated hand distance parameter in parameter information. Part 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 within the distance range set in the rehabilitation using the manual distance parameter.

また、具体的には、手用表示パラメータ設定部348の手用移動数パラメータ設定部は、手用移動数パラメータを設定してもよい。
より具体的には、手用移動数パラメータ設定部は、判定内容の異なる目標画像が表示される回数を決定するために用いられる手用移動数パラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用移動数パラメータを用いて、リハビリテーションにおいて判定内容の異なる目標画像を設定された回数出力装置200に表示させることができる。
Specifically, the manual movement number parameter setting unit of the manual display parameter setting unit 348 may set the manual movement number parameter.
More specifically, the manual movement number parameter setting unit designates a manual movement number parameter used to determine the number of times target images having different determination contents are displayed, and the designated parameter is a parameter information storage unit. Write to 334.
Thereby, the display control part 342 can display the target image in which the determination contents differ in the rehabilitation on the set number of times output device 200 using the manual movement number parameter.

表示制御部342が上述のように手用移動数パラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、持久力が無い対象者EPや、動作制限がある対象者EPも回数制限を与えることができる。そのため、対象者EPは、安全にリハビリテーションを受けることができる。また、対象者EPに移動回数を数えさせ、記憶させるなどのより複雑なリハビリテーションを行うことができる。   The display control unit 342 causes the output device 200 to display the target image in the rehabilitation using the manual movement number parameter as described above, so that the target EP having no endurance and the target EP having the motion limitation are also limited in number of times. Can be given. Therefore, the subject person EP can receive rehabilitation safely. Further, it is possible to perform more complicated rehabilitation such as causing the subject person EP to count and memorize the number of movements.

また、具体的には、手用表示パラメータ設定部348の手用タイミングパラメータ設定部は、手用タイミングパラメータを設定してもよい。
より具体的には、手用タイミングパラメータ設定部は、異なる移動方向を示す異なる目標画像が表示されるタイミングを決定するために用いられる手用タイミングパラメータを指定し、指定したパラメータをパラメータ情報記憶部334に書き込む。
これにより、表示制御部342は、手用タイミングパラメータを用いて、リハビリテーションにおいて、左右同時に表示させるか、交互左右交互に表示させるか、右または左を連続して表示させるかの何れかの目標画像を出力装置200に表示させることができる。
Specifically, the manual timing parameter setting unit of the manual display parameter setting unit 348 may set the manual timing parameter.
More specifically, the manual timing parameter setting unit specifies a manual timing parameter used for determining the timing at which different target images indicating different movement directions are displayed, and the specified parameter is used as a parameter information storage unit. Write to 334.
Accordingly, the display control unit 342 uses the manual timing parameter, and in the rehabilitation, the target image is displayed either at the same time on the left and right, alternately on the left and right, or displayed on the right or left continuously. Can be displayed on the output device 200.

表示制御部342が上述のように手用タイミングパラメータを用いてリハビリテーションにおける目標画像を出力装置200に表示させることにより、「ミラーリング」と呼ばれる左右対称に手の移動のリハビリテーションの練習が可能となる。そのため、左右交互の「マルチタスク」と合わせて効果的なさまざまなバリエーションを実施することができる。   The display control unit 342 displays the target image in the rehabilitation on the output device 200 using the hand timing parameter as described above, so that the hand movement rehabilitation practice called “mirroring” can be performed symmetrically. Therefore, it is possible to implement various effective variations in combination with left and right alternating “multitasking”.

また、具体的には、手用表示パラメータ設定部348の手用速度パラメータ設定部は、手用速度パラメータを設定してもよい。
より具体的には、手用速度パラメータ設定部は、右手の移動目標または左手の移動目標を示す目標画像が表示され単位時間当たりに目標画像の表示位置が変化する変化率を決定するために用いられる手用速度パラメータを指定し、パラメータ情報記憶部334に書き込む。
例えば、手用速度パラメータを指定することにより、指定した手の移動速度を満足する距離と時間との複数の組み合わせの中からランダムに組み合わせが選択され、手用速度パラメータと共に、選択された距離と時間のそれぞれに対応する手用距離パラメータと手用時間パラメータとが、パラメータ情報記憶部334に書き込まれる。
これにより、表示制御部342は、手用速度パラメータを用いて、リハビリテーションにおいて、手用距離パラメータや手用時間パラメータを用いた場合と同様に目標画像を出力装置200に表示させることができる。
Specifically, the manual speed parameter setting unit of the manual display parameter setting unit 348 may set the manual speed parameter.
More specifically, the manual speed parameter setting unit is used to determine a rate of change in which the target image indicating the moving target of the right hand or the moving target of the left hand is displayed and the display position of the target image changes per unit time. The hand speed parameter to be specified is designated and written to the parameter information storage unit 334.
For example, by specifying the hand speed parameter, a combination is randomly selected from a plurality of combinations of distance and time that satisfy the specified hand movement speed, and the selected distance and the hand speed parameter are selected. The manual distance parameter and the manual time parameter corresponding to each time are written in the parameter information storage unit 334.
Accordingly, the display control unit 342 can display the target image on the output device 200 using the manual speed parameter in the same manner as when the manual distance parameter or the manual time parameter is used in rehabilitation.

なお、本発明の実施形態における足用移動数パラメータ、手用移動数パラメータのそれぞれが示す回数は、任意の数であってよい。例えば、足用移動数パラメータ、手用移動数パラメータのそれぞれが示す回数は、プログラムにより出現をループさせて無限大とするものであってもよい。   Note that the number of times indicated by each of the foot movement number parameter and the hand movement number parameter in the embodiment of the present invention may be any number. For example, the number of times indicated by the foot movement number parameter and the hand movement number parameter may be made infinite by looping the appearance by the program.

なお、本発明の実施形態において、足用表示パラメータは、足用距離パラメータ、足用時間パラメータ、足用ベクトルパラメータの3つが設定されるものとして説明した。しかしながら、本発明の実施形態における足用表示パラメータは、足用距離パラメータ、足用時間パラメータ、足用ベクトルパラメータの3つを設定するものに限定しない。
例えば、本発明の実施形態における足用表示パラメータは、足用距離パラメータのみを設定するものであってもよく、任意の数のパラメータを設定するものであってよい。
In the embodiment of the present invention, it has been described that the foot display parameters are set as the foot distance parameter, the foot time parameter, and the foot vector parameter. However, the foot display parameters in the embodiment of the present invention are not limited to those for setting the foot distance parameter, the foot time parameter, and the foot vector parameter.
For example, the foot display parameter in the embodiment of the present invention may set only the foot distance parameter, or may set an arbitrary number of parameters.

なお、本発明の実施形態において、手用表示パラメータは、手用位置パラメータ、手用時間パラメータ、手用ベクトルパラメータの3つが設定されるものとして説明した。しかしながら、本発明の実施形態における手用表示パラメータは、手用位置パラメータ、手用時間パラメータ、手用ベクトルパラメータの3つを設定するものに限定しない。
例えば、本発明の実施形態における手用表示パラメータは、手用位置パラメータのみを設定するものであってもよく、任意の数のパラメータを設定するものであってよい。
In the embodiment of the present invention, three hand display parameters are set as a hand position parameter, a hand time parameter, and a hand vector parameter. However, the hand display parameters in the embodiment of the present invention are not limited to those for setting three hand position parameters, hand time parameters, and hand vector parameters.
For example, the hand display parameter in the embodiment of the present invention may set only the hand position parameter, or may set an arbitrary number of parameters.

なお、本発明の実施形態において、外乱用表示パラメータは、外乱用位置パラメータ、手用時間パラメータ、外乱用ベクトルパラメータの3つが設定されるものとして説明した。しかしながら、本発明の実施形態における外乱用表示パラメータは、外乱用位置パラメータ、外乱用時間パラメータ、外乱用ベクトルパラメータの3つを設定するものに限定しない。
例えば、本発明の実施形態における外乱用表示パラメータは、外乱用位置パラメータのみを設定するものであってもよく、任意の数のパラメータを設定するものであってよい。
In the embodiment of the present invention, it has been described that three display parameters for disturbance are set: a disturbance position parameter, a manual time parameter, and a disturbance vector parameter. However, the display parameters for disturbance in the embodiment of the present invention are not limited to those for setting three parameters, a disturbance position parameter, a disturbance time parameter, and a disturbance vector parameter.
For example, the display parameter for disturbance in the embodiment of the present invention may set only the position parameter for disturbance, or may set an arbitrary number of parameters.

なお、本発明の実施形態において、足用表示パラメータ、手用表示パラメータ、外乱用表示パラメータのそれぞれは、リハビリテーション支援制御装置300を用いてリハビリテーションを開始する際に設定するものとして説明した。しかしながら、本発明の実施形態における足用表示パラメータ、手用表示パラメータ、外乱用表示パラメータのそれぞれは、リハビリテーションを開始する際に設定するものに限定しない。例えば、足用表示パラメータ、手用表示パラメータ、外乱用表示パラメータのそれぞれは、1度設定したパラメータを対象者EPと対応付けてパラメータ情報記憶部334に記憶し、リハビリテーションを行う際に、対象者EPに対応付けられている足用表示パラメータ、手用表示パラメータ、外乱用表示パラメータを読み出すものであってもよい。
このように、パラメータ情報記憶部334が足用表示パラメータ、手用表示パラメータ、外乱用表示パラメータを記憶することにより、リハビリテーションを担当する療法士等が変更された場合であっても、同様のリハビリテーションを再現することができる。そのため、対象者EPは、同様のリハビリテーションを継続して受けることができ、担当する療法士等が改めて対象者EPにあった設定を見つけ出し設定する必要がなく療法士等の負担が低減する。
In the embodiment of the present invention, each of the foot display parameter, the hand display parameter, and the disturbance display parameter has been described as being set when rehabilitation is started using the rehabilitation support control device 300. However, each of the foot display parameter, the hand display parameter, and the disturbance display parameter in the embodiment of the present invention is not limited to those set when starting rehabilitation. For example, each of the foot display parameter, the hand display parameter, and the disturbance display parameter is stored in the parameter information storage unit 334 in association with the target person EP in association with the target person EP, and when the rehabilitation is performed, the target person The foot display parameter, the hand display parameter, and the disturbance display parameter associated with the EP may be read out.
As described above, the parameter information storage unit 334 stores the foot display parameter, the hand display parameter, and the disturbance display parameter, so that the same rehabilitation can be performed even when the therapist in charge of rehabilitation is changed. Can be reproduced. Therefore, the subject person EP can continue to receive the same rehabilitation, and it is not necessary for the therapist in charge to find and set the setting for the subject person EP again, thereby reducing the burden on the therapist.

以上のように、本実施形態によるリハビリテーション支援制御装置300は、表示制御部342を備える。表示制御部342は、リハビリテーションの対象者が足を移動させるときに所定の目標画像の表示に用いられる足用表示パラメータに基づいて、出力装置200に目標画像を表示させる。
こうすることで、リハビリテーション支援制御装置300は、足用表示パラメータにより対象者の状態に適した位置や時間間隔などで目標画像を表示することができる。そのため、対象者に効果的なリハビリテーションを行うことができ、リハビリテーションの効果を対象者が実感することができる。また、足用表示パラメータによりリハビリテーションの難易度が変わるためゲーム性を持たせることができる。その結果、リハビリテーションの対象者が能動的にリハビリテーションを行うことを支援することができる。
As described above, the rehabilitation support control device 300 according to the present embodiment includes the display control unit 342. The display control unit 342 causes the output device 200 to display the target image based on the foot display parameters used for displaying the predetermined target image when the rehabilitation target moves the foot.
By doing so, the rehabilitation support control apparatus 300 can display the target image at a position or time interval suitable for the state of the subject by the foot display parameter. Therefore, effective rehabilitation can be performed on the subject, and the subject can realize the effect of rehabilitation. In addition, since the difficulty level of rehabilitation varies depending on the foot display parameters, it is possible to provide game characteristics. As a result, it is possible to assist the rehabilitation target person actively performing rehabilitation.

(変形例)
図16は、リハビリテーション支援システム1のシステム構成の変形例を示す斜視図である。
リハビリテーション支援制御装置300は、複数の装置に機能を分けて実装されてもよい。例えば、入力部31及び認識部341は画像認識装置として他の装置に実装されてもよい。例えば、認識部341はセンサ100に設けられてもよい。
また、出力装置200は、画像投影装置に代えて、画像を表示する画像表示装置を用いて構成されてもよい。この場合、図16に示すように出力装置200は、上述の説明において画像投影装置が映像を投影した面(投影面)に相当する面に表示面を有したディスプレイ装置として構成される。画像表示装置の具体例として、液晶ディスプレイ装置、有機EL(Electro Luminescence)ディスプレイ装置、タッチパネル式ディスプレイ装置等がある。例えば、テーブルの表面にディスプレイ装置を組み込んで、このディスプレイ装置の表示画面に対象者EPがタッチするマークを表示するようにしてもよい。この場合も、リハビリテーション支援制御装置300(制御部34)は、例えば、ディスプレイ装置に表示されたマーカ画像を目印にしてキャリブレーションを実施する。
(Modification)
FIG. 16 is a perspective view showing a modified example of the system configuration of the rehabilitation support system 1.
The rehabilitation support control device 300 may be implemented by dividing functions into a plurality of devices. For example, the input unit 31 and the recognition unit 341 may be mounted on another device as an image recognition device. For example, the recognition unit 341 may be provided in the sensor 100.
Further, the output device 200 may be configured using an image display device that displays an image instead of the image projection device. In this case, as illustrated in FIG. 16, the output device 200 is configured as a display device having a display surface on a surface corresponding to a surface (projection surface) onto which an image projection device projects an image in the above description. Specific examples of the image display device include a liquid crystal display device, an organic EL (Electro Luminescence) display device, and a touch panel display device. For example, a display device may be incorporated on the surface of the table, and a mark touched by the subject EP may be displayed on the display screen of the display device. Also in this case, the rehabilitation support control device 300 (the control unit 34) performs calibration using, for example, a marker image displayed on the display device as a mark.

上述した各装置が備える各機能の全て又は一部は、ASIC(Application Specific Integrated Circuit)やPLD(Programmable Logic Device)やFPGA(Field Programmable Gate Array)等のハードウェアを用いて実現されてもよい。上述した各装置が実行するプログラムは、コンピュータ読み取り可能な記録媒体に記録されてもよい。コンピュータ読み取り可能な記録媒体とは、例えばフレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置である。各プログラムは、電気通信回線を介して送信されてもよい。   All or some of the functions of each device described above may be realized by using hardware such as an application specific integrated circuit (ASIC), a programmable logic device (PLD), or a field programmable gate array (FPGA). The program executed by each device described above may be recorded on a computer-readable recording medium. The computer-readable recording medium is, for example, a portable medium such as a flexible disk, a magneto-optical disk, a ROM, a CD-ROM, or a storage device such as a hard disk built in the computer system. Each program may be transmitted via a telecommunication line.

1…リハビリテーション支援システム,31…入力部,32…出力部,33…記憶部,34…制御部,35…操作部,36…表示部,100…センサ,200…出力装置,300…リハビリテーション支援制御装置,310…脚部,311,312,313,314…キャスター,331…キャリブレーション情報記憶部,332…判定条件情報記憶部,333…検出履歴情報記憶部,334…パラメータ情報記憶部,335…プログラム情報記憶部,341…認識部,342…表示制御部,343…動作領域判定部,344…記録部,345…目標決定部,346…評価部,347…足用表示パラメータ設定部,348…手用表示パラメータ設定部,349…外乱用表示パラメータ設定部,800…検出範囲,900…出力領域,901…端点 DESCRIPTION OF SYMBOLS 1 ... Rehabilitation support system, 31 ... Input part, 32 ... Output part, 33 ... Memory | storage part, 34 ... Control part, 35 ... Operation part, 36 ... Display part, 100 ... Sensor, 200 ... Output device, 300 ... Rehabilitation support control Device: 310 ... Leg part, 311, 312, 313, 314 ... Caster, 331 ... Calibration information storage part, 332 ... Determination condition information storage part, 333 ... Detection history information storage part, 334 ... Parameter information storage part, 335 ... Program information storage unit, 341 ... recognition unit, 342 ... display control unit, 343 ... motion area determination unit, 344 ... recording unit, 345 ... target determination unit, 346 ... evaluation unit, 347 ... foot display parameter setting unit, 348 ... Manual display parameter setting unit, 349 ... Disturbance display parameter setting unit, 800 ... Detection range, 900 ... Output region, 901 ... Point

Claims (4)

足用表示パラメータに基づいて、出力装置に前記目標画像を表示させる表示制御部を備えるリハビリテーション支援制御装置において、
前記対象者の足の機能回復に伴い前記足用表示パラメータを変更可能とするリハビリテーション支援制御装置。
In a rehabilitation support control device including a display control unit that displays the target image on an output device based on a foot display parameter,
A rehabilitation support control device capable of changing the display parameter for the foot with the recovery of the function of the foot of the subject.
前記表示制御部は、
前記対象者の足の移動距離に係る前記足用表示パラメータである足用距離パラメータ、前記対象者の足の移動時間に係る前記足用表示パラメータである足用時間パラメータ、及び前記対象者の足の移動方向に係る前記足用表示パラメータである足用ベクトルパラメータ、のうちの少なくとも1つに基づいて、前記出力装置に前記目標画像を表示させる、
請求項1に記載のリハビリテーション支援制御装置。
The display control unit
The foot distance parameter which is the foot display parameter related to the movement distance of the subject's foot, the foot time parameter which is the foot display parameter related to the movement time of the subject's foot, and the subject's foot Displaying the target image on the output device based on at least one of the foot vector parameters which are the foot display parameters related to the movement direction of
The rehabilitation support control apparatus according to claim 1.
前記出力装置と位置取得手段とをさらに備える、
請求項1または請求項2に記載のリハビリテーション支援制御装置。
Further comprising the output device and position acquisition means;
The rehabilitation support control device according to claim 1 or 2.
足用表示パラメータに基づいて、出力装置に前記目標画像を表示させる表示制御部を備えるリハビリテーション支援制御装置において、
前記対象者の足の機能回復に伴い前記足用表示パラメータを変更可能とするリハビリテーション支援制御装置としてコンピュータを機能させるためのコンピュータプログラム。
In a rehabilitation support control device including a display control unit that displays the target image on an output device based on a foot display parameter,
A computer program for causing a computer to function as a rehabilitation support control device that can change the display parameter for the foot with the recovery of the function of the foot of the subject.
JP2016114890A 2016-06-08 2016-06-08 Rehabilitation support control device and computer program Active JP6625486B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016114890A JP6625486B2 (en) 2016-06-08 2016-06-08 Rehabilitation support control device and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016114890A JP6625486B2 (en) 2016-06-08 2016-06-08 Rehabilitation support control device and computer program

Publications (3)

Publication Number Publication Date
JP2017217275A true JP2017217275A (en) 2017-12-14
JP2017217275A5 JP2017217275A5 (en) 2019-01-10
JP6625486B2 JP6625486B2 (en) 2019-12-25

Family

ID=60658830

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016114890A Active JP6625486B2 (en) 2016-06-08 2016-06-08 Rehabilitation support control device and computer program

Country Status (1)

Country Link
JP (1) JP6625486B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018011727A (en) * 2016-07-20 2018-01-25 株式会社カムイ電子 Rehabilitation system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004016752A (en) * 2002-06-20 2004-01-22 Konami Sports Life Corp Exercise assisting device and program used for exercise assisting device
JP2006204730A (en) * 2005-01-31 2006-08-10 Kyushu Institute Of Technology Walking training supporting apparatus
JP2009213782A (en) * 2008-03-12 2009-09-24 Xing Inc Exercise supporting device, exercise supporting system, exercise supporting method and computer program
JP2013103010A (en) * 2011-11-15 2013-05-30 Sony Corp Image processing device, image processing method, and program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004016752A (en) * 2002-06-20 2004-01-22 Konami Sports Life Corp Exercise assisting device and program used for exercise assisting device
JP2006204730A (en) * 2005-01-31 2006-08-10 Kyushu Institute Of Technology Walking training supporting apparatus
JP2009213782A (en) * 2008-03-12 2009-09-24 Xing Inc Exercise supporting device, exercise supporting system, exercise supporting method and computer program
JP2013103010A (en) * 2011-11-15 2013-05-30 Sony Corp Image processing device, image processing method, and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018011727A (en) * 2016-07-20 2018-01-25 株式会社カムイ電子 Rehabilitation system

Also Published As

Publication number Publication date
JP6625486B2 (en) 2019-12-25

Similar Documents

Publication Publication Date Title
CN109219426B (en) Rehabilitation training assistance control device and computer-readable recording medium
JP6045139B2 (en) VIDEO GENERATION DEVICE, VIDEO GENERATION METHOD, AND PROGRAM
US9110557B2 (en) System and method for tracking and mapping an object to a target
JP6771996B2 (en) Systems and methods for real-time interactive operation of the user interface
JP2007143748A (en) Image recognition device, fitness aid device, fitness aid system, fitness aid method, control program and readable recording medium
US20140258192A1 (en) Apparatus for training recognition capability using robot and method for same
US11027195B2 (en) Information processing apparatus, information processing method, and program
KR102088335B1 (en) Mixed reality-based learning game providing system that can simultaneously learn and exercise
JP6694333B2 (en) Rehabilitation support control device and computer program
JP2018050989A (en) Rehabilitation support device
JP2024020292A (en) Operation request system, operation request method, and operation request program
US11801010B2 (en) Walking sense presentation device and presentation method
JP6744139B2 (en) Rehabilitation support control device and computer program
JP6441417B2 (en) Rehabilitation support system and computer program
JP6625486B2 (en) Rehabilitation support control device and computer program
JP6706649B2 (en) Rehabilitation support device
US20040059264A1 (en) Footprint analyzer
JP6623122B2 (en) Rehabilitation support control device and computer program
JP2019024579A (en) Rehabilitation support system, rehabilitation support method, and program
JP6430441B2 (en) Rehabilitation support system and computer program
JP6694491B2 (en) Rehabilitation support system and computer program
JP2017217276A (en) Rehabilitation support control apparatus and computer program
JP6270115B2 (en) Exercise support system and exercise support program
CN113223344B (en) Big data-based professional teaching display system for art design
JP2019024580A (en) Rehabilitation support system, rehabilitation support method, and program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181120

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181120

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20190424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190820

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190821

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191008

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191028

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191125

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191127

R150 Certificate of patent or registration of utility model

Ref document number: 6625486

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250