JP2024020292A - 動作要求システム、動作要求方法および動作要求プログラム - Google Patents

動作要求システム、動作要求方法および動作要求プログラム Download PDF

Info

Publication number
JP2024020292A
JP2024020292A JP2023188786A JP2023188786A JP2024020292A JP 2024020292 A JP2024020292 A JP 2024020292A JP 2023188786 A JP2023188786 A JP 2023188786A JP 2023188786 A JP2023188786 A JP 2023188786A JP 2024020292 A JP2024020292 A JP 2024020292A
Authority
JP
Japan
Prior art keywords
user
target object
head
display
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023188786A
Other languages
English (en)
Inventor
正彦 原
Masahiko Hara
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Medivr Inc
Original Assignee
Medivr Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019000904A external-priority patent/JP6531338B1/ja
Application filed by Medivr Inc filed Critical Medivr Inc
Priority to JP2023188786A priority Critical patent/JP2024020292A/ja
Publication of JP2024020292A publication Critical patent/JP2024020292A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M21/02—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/04—Display arrangements
    • G01S7/06—Cathode-ray tube displays or other two dimensional or three-dimensional displays
    • G01S7/10—Providing two-dimensional and co-ordinated display of distance and direction
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
    • A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2209/00—Ancillary equipment
    • A61M2209/08—Supports for equipment
    • A61M2209/088—Supports for equipment on the body
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/41—Medical
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0693—Calibration of display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Anesthesiology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Psychology (AREA)
  • Biomedical Technology (AREA)
  • Pain & Pain Management (AREA)
  • Hematology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Veterinary Medicine (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Optics & Photonics (AREA)
  • Rehabilitation Tools (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

Figure 2024020292000001
【課題】オペレータにとって使い勝手の良い動作要求システムを提供すること。
【解決手段】要求するユーザ動作の目標となる目標オブジェクトを仮想空間内に出現させ、ユーザが装着したヘッドマウントディスプレイに表示させる表示制御部と、前記目標オブジェクトの設定操作を受け付ける操作部と、を備えたシステムであって、前記操作部は、前記ヘッドマウントディスプレイに表示されている画像を表示するユーザ視野領域と、前記目標オブジェクトの属性を設定するパラメータ設定領域と、前記目標オブジェクトに対するユーザ動作のスコアを表示するスコア表示領域と、を含むオペレータ向けの操作画面を表示させる。
【選択図】 図１

Description

本発明は、動作要求システム、動作要求方法および動作要求プログラムに関する。
上記技術分野において、特許文献１には、脳卒中等による片麻痺患者に対して行なわれるリハビリテーションを支援するシステムが開示されている。
特開２０１５－２２８９５７号公報
Nichols S, Patel H: Health and safety implications of virtual reality: a review of empirical evidence. Appl Ergon 2002;33:251-271
しかしながら、上記文献に記載の技術では、オペレータにとって使い勝手良いシステムになっていなかった。
本発明の目的は、上述の課題を解決する技術を提供することにある。
上記目的を達成するため、本発明に係るシステムは、
要求するユーザ動作の目標となる目標オブジェクトを仮想空間内に出現させ、ユーザが装着したヘッドマウントディスプレイに表示させる表示制御部と、
前記目標オブジェクトの設定操作を受け付ける操作部と、
を備えた動作要求システムであって、
前記操作部は、
前記ヘッドマウントディスプレイに表示されている画像を表示するユーザ視野領域と、
前記目標オブジェクトの属性を設定するパラメータ設定領域と、
前記目標オブジェクトに対するユーザ動作のスコアを表示するスコア表示領域と、
を含むオペレータ向けの操作画面を表示させる動作要求システムである。
上記目的を達成するため、本発明に係る方法は、
表示制御部が、要求するユーザ動作の目標となる目標オブジェクトを仮想空間内に出現させ、ユーザが装着したヘッドマウントディスプレイに表示させる表示制御ステップと、
操作部が、前記目標オブジェクトの設定操作を受け付ける操作ステップと、
を含む動作要求方法であって、
前記操作ステップでは、
前記ヘッドマウントディスプレイに表示されている画像を表示するユーザ視野領域と、
前記目標オブジェクトの属性を設定するパラメータ設定領域と、
前記目標オブジェクトに対するユーザ動作のスコアを表示するスコア表示領域と、
を含むオペレータ向けの操作画面を表示させる動作要求方法である。
上記目的を達成するため、本発明に係るプログラムは、
要求するユーザ動作の目標となる目標オブジェクトを仮想空間内に出現させ、ユーザが装着したヘッドマウントディスプレイに表示させる表示制御ステップと、
前記目標オブジェクトの設定操作を受け付ける操作ステップと、
をコンピュータに実行させる動作要求プログラムであって、
前記操作ステップでは、
前記ヘッドマウントディスプレイに表示されている画像を表示するユーザ視野領域と、
前記目標オブジェクトの属性を設定するパラメータ設定領域と、
前記目標オブジェクトに対するユーザ動作のスコアを表示するスコア表示領域と、
を含むオペレータ向けの操作画面を表示させる動作要求プログラムである。
本発明によれば、オペレータにとって使い勝手の良い動作要求システムを提供することができる。
本発明の第１実施形態に係るリハビリテーション支援システムの構成を示すブロック図である。 第２実施形態に係るリハビリテーション支援システムの構成を示すブロック図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの表示画面例を示す図である。 第２実施形態に係るリハビリテーション支援システムの処理の流れを示すフローチャートである。 第２実施形態に係るリハビリテーション支援システムの他の表示画面例を示す図である。 第３実施形態に係るリハビリテーション支援システムの操作画面例を示す図である。 第３実施形態に係るリハビリテーション支援システムの他の操作画面例を示す図である。 第３実施形態に係るリハビリテーション支援システムのさらに他の操作画面例を示す図である。
以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素はあくまで例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。
［第１実施形態］
本発明の第１実施形態としてのリハビリテーション支援システム１００について、図１を用いて説明する。リハビリテーション支援システム１００は、ユーザ１１０に対して行われるリハビリテーションを支援するシステムである。
図１に示すように、リハビリテーション支援システム１００は、検出部１０１、表示制御部１０２、１０３を含む。
検出部１０１は、ヘッドマウントディスプレイ１１１を装着したユーザ１１０の頭の向きを検出する。
表示制御部１０２は、ユーザ１１０に視認させるリハビリテーション用の目標オブジェクト１２２を仮想空間内に生成し、検出部１０１で検出したユーザ１１０の頭の向きに応じて、ヘッドマウントディスプレイ１１１に表示させる。表示制御部１０３は、目標オブジェクト１２２の位置を報知するための報知画像１３１をヘッドマウントディスプレイ１１１に表示させる。
本実施形態によれば、報知画像を画面に表示することで、次に得られるであろう内耳情報の変化をあらかじめ視覚情報から予測させて、sensory conflictを防ぐことができる。
［第２実施形態］
本発明の第２実施形態に係るリハビリテーション支援システム２００について、図２を用いて説明する。図２は、本実施形態に係るリハビリテーション支援システム２００の構成を説明するための図である。
図２に示すように、リハビリテーション支援システム２００は、リハビリテーション支援装置２１０と、２つのベースステーション２３１、２３２と、ヘッドマウントディスプレイ２３３と、２つのコントローラ２３４、２３５とを備える。ユーザ２２０は、椅子２２１に座りながら、ヘッドマウントディスプレイ２３３の表示に合わせて、上半身をねじったり、手を伸ばしたりすることでリハビリテーション動作を行なう。本実施形態では、椅子に座って行なうリハビリテーションを前提に説明するが、本発明はこれに限定されるものではない。
２つのベースステーション２３１、２３２は、ヘッドマウントディスプレイ２３３の動きおよびコントローラ２３４、２３５の動きを検知して、リハビリテーション支援装置２１０に送る。リハビリテーション支援装置２１０は、ユーザ２２０のリハビリテーション動作を評価しつつ、ヘッドマウントディスプレイ２３３の表示制御を行なう。
なお、ヘッドマウントディスプレイ２３３としては、非透過タイプでも、ビデオシースルータイプでも、オプティカルシースルータイプでも構わない。
本実施形態では、ユーザの手の位置を検出するためのセンサの一例として、ユーザ２２０が手に持つコントローラ２３４、２３５や、ベースステーション２３１、２３２を示しているが、本発明はこれに限定されるものではない。画像処理によりユーザの手の位置を検出するためのカメラ（深度センサを含む）、温度によりユーザの手の位置を検出するためのセンサ、ユーザの腕に装着させる腕時計型のウェアラブル端末などや、モーションキャプチャなども、本発明のセンサの概念に含まれる。
リハビリテーション支援装置２１０は、動作検出部２１１と表示制御部２１２、２１３と評価部２１４と更新部２１５、タスクセットデータベース２１６と操作部２１７とを備える。
動作検出部２１１は、ユーザ２２０が手に持つコントローラ２３４、２３５の位置をベースステーション２３１、２３２を介して取得し、ユーザ２２０の手の位置の変化によりユーザ２２０のリハビリテーション動作を検出する。
表示制御部２１２は、検出したリハビリテーション動作に応じて動くアバターオブジェクト２４１と、リハビリテーション動作の目標を示す目標オブジェクト２４２と、を仮想空間内に生成する。そして、それらのアバターオブジェクト２４１および目標オブジェクト２４２の画像を、動作検出部２１１が検出したヘッドマウントディスプレイ２３３の向きおよび位置に応じて、表示画面２４０に表示させる。アバターオブジェクト２４１および目標オブジェクト２４２の画像は、背景画像２４３に重畳表示される。ここでは、アバターオブジェクト２４１は、コントローラ２３４、２３５と同じ形状をしているがこれに限定されるものではない。アバターオブジェクト２４１は、コントローラ２３４、２３５の動きに合わせて表示画面２４０中を動く。アバターオブジェクト２４１に表示されている通り、コントローラ２３４、２３５にはボタンが用意されており、各種設定操作など可能に構成されている。背景画像２４３は、地平線２４４と、地表面画像２４５とを含んでいる。
表示制御部２１２は、目標オブジェクト２４２を、ユーザ２２０の頭上方向から下方に向けて降下してきているように、表示位置および大きさを徐々に変えて表示する。ユーザ２２０は、コントローラ２３４、２３５を動かして、画面中のアバターオブジェクト２４１を、目標オブジェクト２４２に近づける。アバターオブジェクト２４１に含まれるセンサオブジェクト（ここでは不図示）が目標オブジェクト２４２にぶつかると、目標オブジェクト２４２は消滅する。
表示制御部２１３は、さらに、レーダスクリーン画像２５０をヘッドマウントディスプレイ２３３の表示画面２４０に表示させる。レーダスクリーン画像２５０は、目標オブジェクト２４２の位置が、仮想空間内の基準方向（ここでは椅子にまっすぐに腰掛けたユーザの正面方向となるように初期設定されている）に対して、相対的にどちらの方向であるかを示す。
表示制御部２１３は、ユーザ２２０の頭の向きにかかわらず、レーダスクリーン画像２５０をヘッドマウントディスプレイ２３３の表示画面２４０の中央部分（例えば－５０度～５０度の範囲内）に表示させる。
レーダスクリーン画像２５０は、上方から見たユーザの頭を表わす頭画像２５１と、頭画像２５１の周囲を複数のブロックに分割したブロック画像２５２と、ユーザの視野領域を示す視野領域画像としての扇型画像２５３と、を含む。目標オブジェクトの位置を示す目標位置画像は、ブロック画像２５２のどのブロックが着色されるかによって示される。これにより、ユーザ２２０は、自分が向いている方向に対して左側に目標オブジェクトがあるのか、右側に目標オブジェクトがあるのかを、知ることができる。なお、本実施形態では、ブロック画像２５２が固定されて、扇型画像２５３が動く構成としているが、本発明はこれに限定されるものではなく、扇型画像２５３や頭画像２５１を固定しつつ、ブロック画像２５２を頭の向きに応じて動かしてもよい。具体的には頭が左に向けば、ブロック画像２５２が右に回転する構成でもよい。
評価部２１４は、動作検出部２１１が検出したリハビリテーション動作と、表示制御部２１２によって表示された目標オブジェクトが表わす目標位置とを比較して、ユーザ２２０のリハビリテーション能力を評価する。具体的には、動作検出部２１１が検出したリハビリテーション動作に対応して移動するアバターオブジェクト２４１と目標オブジェクト２４２とが重なったか否かを、３次元仮想空間中の位置の比較により決定する。
これらが重なれば、一つのリハビリテーション動作をクリアしたものと評価し、ポイントを加算する。表示制御部２１２は、目標オブジェクト２４２を、奥行き方向について異なる位置（例えば３段階の位置）に出現させることができる。評価部２１４は、それぞれ、異なるポイント（遠いオブジェクトには高いポイント、近いオブジェクトには低いポイント）を付与する。
更新部２１５は、積算されたポイントに応じて、目標課題を更新する。例えば、課題達成率（目標達成数／課題数）などを用いて目標課題を更新してもよい。
タスクセットデータベース２１６は、複数のタスクのセットを格納している。タスクとは、ユーザが行なうべき１回のリハビリテーション動作を示す。具体的には、１つのタスクを表わす情報として、どの位置にどのような速度で、どのような大きさの目標オブジェクトを出現させたか、その際、アバターオブジェクトはどのような大きさだったかなどを格納している。タスクセットデータベース２１６は、そのような複数のタスクをどのような順番でユーザに提供するかを決めるタスクセットを格納している。
例えば、病院毎のテンプレートとしてタスクセットを格納してもよいし、実行したタスクセットの履歴をユーザごとに格納してもよい。リハビリテーション支援装置２１０は、インターネットを介して他のリハビリテーション支援装置と通信可能に構成されていてもよく、その場合、１つのタスクセットを、同じユーザが複数の場所で実行することもできるし、様々なテンプレートを離れた複数のユーザ同士で共有することもできる。
操作部２１７は、表示制御部２１２および表示制御部２１３での表示制御を操作するために設けられている。具体的には、操作部２１７は、図３Ａ～図３Ｇのように、オペレータ向けの操作画面３００を表示させる。ここで設定画面を表示するディスプレイは、リハビリテーション支援装置２１０に接続された外部ディスプレイでもよいし、リハビリテーション支援装置２１０に内蔵されたディスプレイでもよく、デバイスを問わない。操作画面３００は、ユーザ視野画面３０１と各種パラメータ設定画面３０２とスコア表示画面３０３と一時停止ボタン３０４と再センタボタン３０５と終了ボタン３０７とを含んでいる。図３Ａ～図３Ｇは、説明のために、実際のユーザ２２０の様子を表わした領域３０６を含んでいるが、操作画面３００は、領域３０６を含む必要は無い。
ユーザ視野画面３０１は、ヘッドマウントディスプレイ２３３に実際に表示されている画像を表示している。ユーザ視野画面３０１の中には、仮想空間内の基準方向３１１が表示される。図２で説明したとおり、ユーザ視野画面３０１には、その中央部分（例えば－５０度～５０度の視野角範囲）にレーダスクリーン画像２５０が表示されている。そして、次に現われる目標オブジェクト２４２の位置が、仮想空間内の基準方向に対して、相対的にどちらの方向であるかを表わしている。この例では、ブロック画像２５２の着色位置により、仮想空間内の基準方向３１１に対して左方向の一番遠い位置に、目標オブジェクト２４２が現われることを示している。そして、扇型画像２５３の位置および頭画像２５１の向きにより、既にユーザは、左方向に向いていることが分かる。
また、各種パラメータ設定画面３０２は、タスクを規定する複数のパラメータを設定するための画面である。操作部２１７は、各種パラメータ設定画面３０２に対する入力を、不図示の入力デバイスから受け付ける。入力デバイスは、マウスやキーボードでもよいし、タッチパネルでも良く、その技術構成を問わない。
各種パラメータ設定画面３０２は、左右の目標オブジェクトの大きさを決める入力領域３２１と、アバターオブジェクト２４１の大きさを決める入力領域３２２と、目標オブジェクトの落下スピードを決める入力領域３２３と、次に現われる目標オブジェクトの位置を決める入力領域３２４とを含む。さらにホットキーによる目標オブジェクトの出現位置の操作を受け付けるか否かを設定するチェックボックス３２５を有している。
入力領域３２１は、右と左のそれぞれにおいて、ユーザに目標オブジェクトの位置を見やすくするための視認用オブジェクトの半径（視認サイズ）と、アバターオブジェクト２４１と反応する目標オブジェクトの半径（評価サイズ）とを設定可能である。つまり、図３Ａの例では、ユーザには半径２０ｃｍのボールが見えているが、実際にはそのボールの中央に位置する半径１０ｃｍのボールにタッチしなければタスクを完了したことにならない。視認サイズが小さければ、ユーザは目標オブジェクトを見つけるのが困難になる。視認サイズを大きくすれば、ユーザは目標オブジェクトを見つけやすくなる。評価サイズを大きくすれば、アバターオブジェクト２４１のずれの許容量が大きくなり、評価サイズを小さくすれば、アバターオブジェクト２４１のずれの許容量が小さくなりよりシビアにリハビリテーション動作を評価できる。これらの視認サイズと評価サイズとを一致させることもできる。
入力領域３２２では、アバターオブジェクト２４１のセンササイズ（センサオブジェクトのサイズ）を左右バラバラに設定できる。センササイズが大きければ、手の位置が目標オブジェクトから大きくずれていても、タスクを達成したことになるためリハビリテーション動作の難易度は下がる。逆にセンササイズが小さければ、手を目標オブジェクトの中央領域（評価用サイズに依存）に、正確に動かさなければならないため、よりリハビリテーション動作の難易度が上がる。図３Ａの例では、センササイズは左右それぞれ１．７５ｃｍとなっている。
入力領域３２３では、目標オブジェクト２４２が仮想空間内で動く速度を左右それぞれで規定できる。この例では７０ｃｍ／ｓの速度に設定されている。
つまり、図３Ａの例では、ユーザ２２０は仮想空間の中で、１．７５ｃｍのセンサ部分を含むアバターオブジェクト（コントローラ）をつかんで、左側の遠い場所において７０ｃｍ／ｓの速度で落下する半径１０ｃｍの目標オブジェクト（ボール）に接触させることがタスクとなる。
入力領域３２４は、レーダスクリーン画像２５０を拡大した形状となっている。チェックボックス３２５がチェックされているので、入力領域３２４における複数のブロックのいずれかをクリックまたはタップする操作が行なわれた場合に、操作が行なわれたブロックの位置に対応する仮想空間内の位置に、目標オブジェクト２４２を発生させる。
一方、スコア表示画面３０３は、レーダスクリーン拡大画像３３１と、スコアリスト３３２を含む。レーダスクリーン拡大画像３３１は、ヘッドマウントディスプレイ２３３に表示されたレーダスクリーン画像２５０を拡大したものであり、ユーザの動きと目標オブジェクト２４２が次に出現する位置に応じてリアルタイムに変化する。
スコアリスト３３２は、どの位置におけるタスクの合計回数および、そのタスクを何回達成したかを示す点数が示されている。点数は分数様に表記してもよいし、パーセント表示でも、またはそれらの組み合わせ等でもよい。評価部２１４は、１つのタスクセットで決められた一連のリハビリテーション動作の後、このスコアリスト３３２の値を用いて、リハビリテーション評価ポイントを導き出す。
このとき、評価部２１４は、目標オブジェクトの出現位置、アバターオブジェクト２４１によるタッチ精度、連続達成回数、によってポイントに重み付けをする。本実施形態では落下スピードやタスク間隔は重み付けの材料に入れていない。これは、必ずしも運動強度がスピードに依存しないという事実に基づいており、さらに、事故の防止などの観点からも、ユーザを焦らせる要素を排除している。
一時停止ボタン３０４は、一連のリハビリテーション動作を一時停止するためのボタンである。終了ボタン３０７は、一連のリハビリテーション動作を終了させるボタンである。
再センタボタン３０５は、ユーザ２２０の位置に合わせて仮想空間を再構築するための再構築指示をオペレータから受け付けるボタンである。再センタボタン３０５が操作されると、表示制御部２１２は、その瞬間のヘッドマウントディスプレイ２３３の位置を原点とし、その瞬間のヘッドマウントディスプレイ２３３の向きを基準方向とする仮想空間を再構築する。
図３Ｂは、図３Ａのユーザ視野画面３０１に目標オブジェクト２４２が出現した状態を示している。この状態で、領域３０６に示されているようにユーザ２２０が左腕を伸ばすと、ユーザ視野画面３０１に、アバターオブジェクト２４１が現われる。目標オブジェクト２４２の周囲には、目標オブジェクト２４２の視認性をよくするための視認用オブジェクト３１２が表示されている。ここでは視認用オブジェクト３１２はドーナツ形状であるが、本願発明はこれに限定されず、目標オブジェクトから放射状に延びた線や矢印などでもよい。入力領域３２１で設定した視認サイズとは、このドーナツ形状の視認用オブジェクト３１２の半径を示している。
図３Ｃは、図３Ｂの目標オブジェクト２４２がさらに下降して、アバターオブジェクト２４１と触れる瞬間のユーザ視野画面３０１を示している。この時点でアバターオブジェクト２４１と視認用オブジェクト３１２は触れているが、この時点では、目標オブジェクト２４２は消滅せず、タスク達成とはならない（一定の点数は入りgood評価される）。目標オブジェクト２４２にアバターオブジェクト２４１が触れて初めてタスク達成(perfect評価)となる。
図３Ｄは、図３Ｃの目標オブジェクト２４２がさらに下降して、アバターオブジェクト２４１と触れ、目標オブジェクト２４２が消えた直後のユーザ視野画面３０１を示している。
図３Ｅは、ユーザは仮想空間の中で、１．７５ｃｍのセンサ部分を含むアバターオブジェクト（コントローラ）をつかんで、ユーザから見て右側の遠い場所において７０ｃｍ／ｓの速度で落下する半径１０ｃｍの目標オブジェクト（ボール）に接触させることをタスクとする操作画面３００を示している。
図３Ｆは、右側の目標オブジェクトのサイズを３ｃｍに設定変更した一方で、センササイズを１０ｃｍに設定変更した操作画面３００を示している。センササイズが１０ｃｍと大きいため、アバターオブジェクト２４１からセンサオブジェクト３１３がはみ出して視認できる。ユーザは仮想空間の中で、１０ｃｍのセンサオブジェクト３１３を含むアバターオブジェクト（コントローラ）をつかんで、ユーザから見て右側の遠い場所において２０ｃｍ／ｓの速度で落下する半径３ｃｍの目標オブジェクト（ボール）に接触させることをタスクとする。
図３Ｇは、右側の目標オブジェクトのサイズを３０ｃｍに設定変更した一方で、センササイズを１０ｃｍに設定変更した操作画面３００を示している。ユーザは仮想空間の中で、１０ｃｍのセンサオブジェクト３１３を含むアバターオブジェクト（コントローラ）をつかんで、ユーザから見て右側の遠い場所において２０ｃｍ／ｓの速度で落下する半径３０ｃｍの目標オブジェクト（ボール）に接触させることをタスクとする。
図４に示すように、背景画像として、実際の風景を撮像して得た風景映像（例えばニューヨークの町並みを撮影した動画）を表示してもよい。風景映像としては、リハビリ施設の周囲の道路の映像を用いても良く、外国の映像を用いてもよい。異国を散歩している気分にさせたり、身近な場所を散歩している気分にさせたりすることができる。風景映像を重畳することで、患者を楽しませつつ、情報量が多い中でのトレーニングを実現することができる。
図５は、リハビリテーション支援装置２１０における処理の流れを示すフローチャートである。
ステップＳ５０１において、キャリブレーション処理として、リハビリテーション動作の目標をユーザに合わせて初期化する。具体的には、各患者に最初にキャリブレーションとして行動可能範囲の作業を行ってもらい、それを初期値に設定した上で目標をユーザに合わせて初期化する。
次に、ステップＳ５０３において、タスクを開始する。具体的にはオペレータが、一つ一つのタスクをリアルタイムで指定していく方法のほか、タスクセットデータベースから、テンプレートと呼ばれるタスクセットを読出して、あらかじめ設定された複数のタスクから順番にタスク要求（つまり表示制御部２１２による目標オブジェクトの表示）を行なってもよい。
ステップＳ５０５において、タスクをクリアしたか判定し、クリアすれば、そのクリアの程度（perfectかgoodか）に応じて、点数を記録する
ステップＳ５０７において、タスクセットのタスクが全て終了したか、あるいはオペレータが終了ボタン３０７を押したかを判定する。
終了でなければ、ステップＳ５０３に戻り、次のタスクを開始する。終了であれば、ステップＳ５１１に進み、タスクごとの点数に条件による重み付けをした上で集計して、累計ポイントを算出する。
ステップＳ５０７では、点数の変化などからユーザの疲労度を算出して、疲労度が所定の閾値を超えれば、「停止条件」として処理を自動終了させてもよい。
（デュアルタスクについて）
健常者は、普段の日常で「話をしながら歩く」など２つ以上のことを同時に行っている。この様な「２つのことを同時に行う能力」は加齢とともに衰えてくる。例えば「歩行中に話しかけられると、足を止めてしまう」などといったことが起こる。高齢者が転倒する原因は、「運動機能が低下していること」だけではなく、この様な「２つのことを同時に行う能力の低下」が関与していると考えられる。実際に、リハビリテーションにより十分に運動機能が回復したと判断されても、帰宅後に転倒してしまう高齢者は大勢いる。これは、リハビリテーション動作に集中できる環境・条件を整えた状態でリハビリテーションを行なっていることが一つの要因である。つまり、生活環境では、そのように動作に集中できない要因、例えば見晴らしが悪い、障害物が存在する、会話に意識が向いている、といった条件下での動作であることが多いからである。
そこで、注意を分散させるようなリハビリテーションを行なうことが重要と考えられ、具体的にデュアルタスクを与えてトレーニングすることが望ましい。このようなデュアルタスクトレーニングは、高齢者の転倒のみならず、認知症の予防にも有効なプログラムである。
デュアルタスクトレーニングには、認知課題と運動課題を組み合わせたトレーニングの他、２種類の運動課題を組み合わせたトレーニングも含まれる。
上記のように図３Ａ～図３Ｇで説明したタスクは、レーダスクリーン画像で、次の目標オブジェクトの位置を確認し（認知課題）、その位置にタイミング良く身体を向けて手を伸ばす（運動課題）必要があるため、認知＋運動のデュアルタスクとなっている。
他の認知課題＋運動課題としては、１００から１ずつ引き算をしながら手を伸ばすなどのトレーニングや、コップに入った水を溢さないように手を伸ばすなどのトレーニングが挙げられる。
評価部２１４は、単純な運動に比べてデュアルタスク運動検査で２０％程度評価が下がるような場合は、デュアルタスクを繰り返すように表示制御部２１２に通知する。
（他のデュアルタスクトレーニング例）
図６に示すように、背景画面に質問画像（例えば、かけ算）を重畳表示したり、音声で質問したりして、複数の目標オブジェクトのうち、答えが表示された目標オブジェクトの取得を高く評価してもよい。背景画面にグー・チョキ・パーのいずれかを表示し、それに勝つマークが表示されたオブジェクトの回収を要求してもよい。このような選択式の課題＋運動課題は、より高度な認知機能を要求するデュアルタスクトレーニングとなる。
さらには、単にオブジェクトに数字を表示させ、数字の大きいオブジェクトの取得のみを評価してもよい。
評価部２１４は、シングルタスクの点数とデュアルタスクの点数とを比較し、その点差を用いて認知機能の評価を行なってもよい。
２つの運動機能を同時に要求するデュアルタスクトレーニングとしては、例えば２つのフットペダルを用意し、いずれかのフットペダルを踏んでいるときのみ、目標オブジェクトの回収が可能となっている構成でもよい。ユーザは、右からの目標オブジェクトに対しては、右足でフットペダルを踏みつつ、右手を伸ばさなければならないため、手足を連動させる、２重の運動機能が要求される。他にも、オブジェクトを回収する側のアバターオブジェクトとは逆側のアバターオブジェクトを常に指定された場所に触れさせることを要求するといったことが考えられる。
以上、本実施形態によれば、レーダスクリーン画像によって、ユーザが頭を向けるべき方向があらかじめ認識できるため、視野が狭くなっても、内耳情報に混乱を生じさせず、ＶＲ酔いを防止できる。すなわちヘッドマウントディスプレイを用いたリハビリテーション中において、ユーザにとって快適なリハビリテーションを提供することができる。
なお、次のオブジェクトの位置を立体音声を利用して報知してもよい。
なお、目標オブジェクトは垂直落下とは限らず、水平に向かってくるターゲットにタッチする構成でもよい。
［第３実施形態］
次に本発明の第３実施形態に係るリハビリテーション支援装置について、図７～図９を用いて説明する。図７～図９は、リハビリテーション支援装置の操作画面７００、８００、９００を示す図である。本実施形態に係るリハビリテーション支援装置は、上記第２実施形態と比べると、操作画面のレイアウトが異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
図７は、オペレータによるマニュアル操作に基づいてタスクを生成してユーザに提供するための操作画面７００を示す図である。ユーザ視野画面３０１、再センタボタン３０５などおよびその内容は図３Ａで説明した画面と同じである。
操作画面７００は、左側に、過去に出現させた目標オブジェクトの位置およびその達成回数（達成率）を示すスコア表示領域７３２と、各種パラメータ設定領域７２１と、タスク履歴表示領域７４１と、を含む。さらに、操作画面７００は、次に現われる目標オブジェクトの位置を決める入力領域７２４と、ホットキーによる目標オブジェクトの出現位置の操作を受け付けるか否かを設定するチェックボックス７２５とを有している。
図８は、タスクセットデータベース２１６から読出したタスクセットをユーザに実行させる場合の操作画面８００を示す図である。ユーザ視野画面３０１、再センタボタン３０５などおよびその内容は図３Ａで説明した画面と同じである。
操作画面８００は、各種パラメータ設定領域を有しておらず、タスク履歴表示領域８４１と、過去に出現させた目標オブジェクトの位置およびその達成回数（達成率）を示すスコア表示領域８３２と、今後発生するタスクリスト表示領域８３３と、を含む。
図９は、タスクセットデータベース２１６に格納されたタスクセットの内容表示および編集画面９００の一例を示す図である。図９の画面では、３８個のタスクからなるタスクセット９０１が表示されている。
タスクセット９０１に含まれる１つ一つのタスクは、発生時間９１１、タスク間隔９１２、タスク位置９１３、タスク角度９１４、タスク距離９１５、スピード９１６、パーフェクト判定基準９１７、グッド判定基準９１８、キャッチ判定基準９１９のパラメータを有している。
図９は、Ｎｏ．２のタスクのパラメータを編集しようとしている状態を示している。編集後に、保存ボタン９０２を選択すれば、タスクセットデータベース２１６のタスクセットが更新される。
集計データ表示領域９０３には、合計プレイ時間や、左手および右手のタスクの合計数が表示される。
新規タスク登録領域９０４では、各種のパラメータを設定した新規のタスクをタスクセット９０１に追加することができる。出現位置やスピードなどのパラメータを全て設定して新規登録ボタン９４１を選択すれば、上部のタスクセット９０１に一行追加される。ここではＮｏ．３９のタスクとして登録される。
以上のように、本実施形態では、より操作性がよく、ユーザフレンドリーなリハビリテーション支援装置を提供することができる。
［他の実施形態］
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現するリハビリテーション支援プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体（non-transitory computer readable medium）は本発明の範疇に含まれる。

Claims (6)

  1. 要求するユーザ動作の目標となる目標オブジェクトを仮想空間内に出現させ、ユーザが装着したヘッドマウントディスプレイに表示させる表示制御部と、
    前記目標オブジェクトの設定操作を受け付ける操作部と、
    を備えた動作要求システムであって、
    前記操作部は、
    前記ヘッドマウントディスプレイに表示されている画像を表示するユーザ視野領域と、
    前記目標オブジェクトの属性を設定するパラメータ設定領域と、
    前記目標オブジェクトに対するユーザ動作のスコアを表示するスコア表示領域と、
    を含むオペレータ向けの操作画面を表示させる動作要求システム。
  2. 前記操作画面は、さらに、
    次に現われる目標オブジェクトの位置を決める入力領域を含む請求項１に記載の動作要求システム。
  3. 前記入力領域は、ユーザ位置の周囲を複数のブロックに分割したブロック画像である請求項２に記載の動作要求システム。
  4. 前記入力領域は、
    前記ユーザの視野を示す視野領域画像及び上方から見た前記ユーザの頭の向きを示す頭画像の少なくとも一方を含む請求項３に記載の動作要求システム。
  5. 表示制御部が、要求するユーザ動作の目標となる目標オブジェクトを仮想空間内に出現させ、ユーザが装着したヘッドマウントディスプレイに表示させる表示制御ステップと、
    操作部が、前記目標オブジェクトの設定操作を受け付ける操作ステップと、
    を含む動作要求方法であって、
    前記操作ステップでは、
    前記ヘッドマウントディスプレイに表示されている画像を表示するユーザ視野領域と、
    前記目標オブジェクトの属性を設定するパラメータ設定領域と、
    前記目標オブジェクトに対するユーザ動作のスコアを表示するスコア表示領域と、
    を含むオペレータ向けの操作画面を表示させる動作要求方法。
  6. 要求するユーザ動作の目標となる目標オブジェクトを仮想空間内に出現させ、ユーザが装着したヘッドマウントディスプレイに表示させる表示制御ステップと、
    前記目標オブジェクトの設定操作を受け付ける操作ステップと、
    をコンピュータに実行させる動作要求プログラムであって、
    前記操作ステップでは、
    前記ヘッドマウントディスプレイに表示されている画像を表示するユーザ視野領域と、
    前記目標オブジェクトの属性を設定するパラメータ設定領域と、
    前記目標オブジェクトに対するユーザ動作のスコアを表示するスコア表示領域と、
    を含むオペレータ向けの操作画面を表示させる動作要求プログラム。
JP2023188786A 2019-01-07 2023-11-02 動作要求システム、動作要求方法および動作要求プログラム Pending JP2024020292A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023188786A JP2024020292A (ja) 2019-01-07 2023-11-02 動作要求システム、動作要求方法および動作要求プログラム

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019000904A JP6531338B1 (ja) 2019-01-07 2019-01-07 リハビリテーション支援装置、リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP2019085585A JP7385238B2 (ja) 2019-01-07 2019-04-26 リハビリテーション支援装置、リハビリテーション支援方法及びリハビリテーション支援プログラム
JP2023188786A JP2024020292A (ja) 2019-01-07 2023-11-02 動作要求システム、動作要求方法および動作要求プログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019085585A Division JP7385238B2 (ja) 2019-01-07 2019-04-26 リハビリテーション支援装置、リハビリテーション支援方法及びリハビリテーション支援プログラム

Publications (1)

Publication Number Publication Date
JP2024020292A true JP2024020292A (ja) 2024-02-14

Family

ID=71520429

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019085585A Active JP7385238B2 (ja) 2019-01-07 2019-04-26 リハビリテーション支援装置、リハビリテーション支援方法及びリハビリテーション支援プログラム
JP2023188786A Pending JP2024020292A (ja) 2019-01-07 2023-11-02 動作要求システム、動作要求方法および動作要求プログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2019085585A Active JP7385238B2 (ja) 2019-01-07 2019-04-26 リハビリテーション支援装置、リハビリテーション支援方法及びリハビリテーション支援プログラム

Country Status (5)

Country Link
US (1) US20210154431A1 (ja)
EP (1) EP3777810A4 (ja)
JP (2) JP7385238B2 (ja)
CN (1) CN112105326B (ja)
WO (1) WO2020145092A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113018124A (zh) * 2021-03-02 2021-06-25 常州市第一人民医院 一种用于单侧忽略患者的康复设备
JP7125180B1 (ja) * 2021-09-10 2022-08-24 株式会社mediVR 認知能力推定装置、その方法およびプログラム
JP7391438B1 (ja) * 2023-06-13 2023-12-05 株式会社mediVR 情報処理システム、情報処理方法および情報処理プログラム

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5966680A (en) * 1996-02-15 1999-10-12 Butnaru; Hanan Motion sickness/vertigo prevention device and method
JP2005274433A (ja) 2004-03-25 2005-10-06 Xanavi Informatics Corp 車載ナビゲーション装置
JP2011033433A (ja) 2009-07-31 2011-02-17 Casio Computer Co Ltd ナビゲーション装置及びプログラム
JP5714855B2 (ja) 2010-09-16 2015-05-07 オリンパス株式会社 画像生成システム、プログラム及び情報記憶媒体
US8872766B2 (en) 2011-05-10 2014-10-28 Raytheon Company System and method for operating a helmet mounted display
JP6099348B2 (ja) * 2012-10-10 2017-03-22 オリンパス株式会社 頭部装着型表示装置、ロック解除処理システム、プログラム及びロック解除の制御方法
JP6375591B2 (ja) * 2013-01-15 2018-08-22 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、画像表示システム
KR20170066697A (ko) 2013-03-16 2017-06-14 피알시-데소토 인터내쇼날, 인코포레이티드 부식 억제제로서의 아졸 화합물
JP5825328B2 (ja) * 2013-11-07 2015-12-02 コニカミノルタ株式会社 透過型ｈｍｄを有する情報表示システム及び表示制御プログラム
JP6334276B2 (ja) * 2014-06-04 2018-05-30 日本光電工業株式会社 リハビリテーション支援システム
ES2693095T3 (es) * 2014-07-03 2018-12-07 Teijin Pharma Limited Dispositivo de asistencia de rehabilitación y programa para controlar el dispositivo de asistencia de rehabilitación
JP6340301B2 (ja) * 2014-10-22 2018-06-06 株式会社ソニー・インタラクティブエンタテインメント ヘッドマウントディスプレイ、携帯情報端末、画像処理装置、表示制御プログラム、表示制御方法、及び表示システム
JP2016224086A (ja) 2015-05-27 2016-12-28 セイコーエプソン株式会社 表示装置、表示装置の制御方法、及び、プログラム
JP2016110296A (ja) 2014-12-03 2016-06-20 株式会社ゼンリンデータコム ウェアラブルデバイス、情報処理方法及びプログラム
JP2016126687A (ja) * 2015-01-08 2016-07-11 セイコーエプソン株式会社 ヘッドマウントディスプレイ、操作受付方法および操作受付プログラム
JP6421670B2 (ja) 2015-03-26 2018-11-14 富士通株式会社 表示制御方法、表示制御プログラム、及び情報処理装置
JP6481456B2 (ja) * 2015-03-26 2019-03-13 富士通株式会社 表示制御方法、表示制御プログラム、及び情報処理装置
JP6409644B2 (ja) * 2015-03-26 2018-10-24 富士通株式会社 表示制御方法、表示制御プログラム、及び情報処理装置
JP6491531B2 (ja) 2015-05-08 2019-03-27 古野電気株式会社 船舶用表示装置
US20170053545A1 (en) 2015-08-19 2017-02-23 Htc Corporation Electronic system, portable display device and guiding device
JP5869177B1 (ja) * 2015-09-16 2016-02-24 株式会社コロプラ 仮想現実空間映像表示方法、及び、プログラム
JP6518578B2 (ja) * 2015-12-02 2019-05-22 株式会社ソニー・インタラクティブエンタテインメント 表示制御装置及び表示制御方法
JP6362631B2 (ja) * 2016-01-15 2018-07-25 株式会社ｍｅｌｅａｐ 画像表示システム、画像表示システムの制御方法、画像配信システムおよびヘッドマウントディスプレイ
JP6675209B2 (ja) 2016-01-20 2020-04-01 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置およびユーザガイド提示方法
JP6711033B2 (ja) * 2016-03-08 2020-06-17 富士通株式会社 表示制御方法、通信装置、表示制御プログラムおよび表示制御装置
JP2017181584A (ja) 2016-03-28 2017-10-05 京セラ株式会社 ヘッドマウントディスプレイ
US20170316806A1 (en) * 2016-05-02 2017-11-02 Facebook, Inc. Systems and methods for presenting content
JP6623122B2 (ja) * 2016-06-08 2019-12-18 パラマウントベッド株式会社 リハビリテーション支援制御装置及びコンピュータプログラム
JP6549066B2 (ja) * 2016-07-13 2019-07-24 株式会社コロプラ 没入型仮想空間でオブジェクト操作を制御するためのコンピュータ・プログラムおよびコンピュータ・システム
CN106551674A (zh) * 2016-09-09 2017-04-05 中国人民解放军海军总医院 基于模拟空间定向障碍场景的眼动测量装置
JP6816492B2 (ja) 2016-12-14 2021-01-20 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置
JP7066115B2 (ja) 2017-04-10 2022-05-13 国立大学法人九州大学 パブリックスピーキング支援装置、及びプログラム
EP3539525A4 (en) * 2017-04-25 2020-07-29 Medivr, Inc. REHABILITATION ASSISTANCE SYSTEM, PROCESS AND PROGRAM
JP6200615B1 (ja) 2017-04-25 2017-09-20 株式会社ｍｅｄｉＶＲ リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP6425287B1 (ja) 2017-10-23 2018-11-21 株式会社ｍｅｄｉＶＲ リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP6470796B2 (ja) * 2017-06-12 2019-02-13 株式会社コロプラ 情報処理方法、プログラム及びコンピュータ
JP6471290B2 (ja) 2017-06-16 2019-02-20 株式会社タカラ工芸社 炭素繊維強化複合積層シートのレーザー加工方法及びレーザー加工された炭素繊維強化複合積層シート

Also Published As

Publication number Publication date
EP3777810A1 (en) 2021-02-17
EP3777810A4 (en) 2021-08-11
JP2020110561A (ja) 2020-07-27
WO2020145092A1 (ja) 2020-07-16
US20210154431A1 (en) 2021-05-27
JP7385238B2 (ja) 2023-11-22
CN112105326B (zh) 2023-01-24
CN112105326A (zh) 2020-12-18

Similar Documents

Publication Publication Date Title
US11810244B2 (en) Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
JP2024020292A (ja) 動作要求システム、動作要求方法および動作要求プログラム
JP6758004B2 (ja) リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP6425287B1 (ja) リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP7420392B2 (ja) リハビリテーション支援装置、その方法およびプログラム
JP6531338B1 (ja) リハビリテーション支援装置、リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP6768231B2 (ja) リハビリテーション支援装置、リハビリテーション支援方法およびリハビリテーション支援プログラム
WO2021070411A1 (ja) リハビリテーション支援装置、その方法およびプログラム
JP7179364B2 (ja) リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP6969794B2 (ja) リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP6694333B2 (ja) リハビリテーション支援制御装置及びコンピュータプログラム
WO2023037619A1 (ja) 認知能力推定装置、その方法およびプログラム
JP7218978B2 (ja) リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP7149658B2 (ja) リハビリテーション支援システム、リハビリテーション支援方法およびリハビリテーション支援プログラム
JP7036476B1 (ja) 認知能力推定装置、その方法およびプログラム
JP2021060957A (ja) リハビリテーション支援装置、その方法およびプログラム
JP2023041004A (ja) リハビリテーション支援装置、その方法およびプログラム
JP2023040990A (ja) リハビリテーション支援装置、その方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231204