JP6775717B1 - 仮想現実動画再生装置、及びそれを使用する方法 - Google Patents
仮想現実動画再生装置、及びそれを使用する方法 Download PDFInfo
- Publication number
- JP6775717B1 JP6775717B1 JP2020536707A JP2020536707A JP6775717B1 JP 6775717 B1 JP6775717 B1 JP 6775717B1 JP 2020536707 A JP2020536707 A JP 2020536707A JP 2020536707 A JP2020536707 A JP 2020536707A JP 6775717 B1 JP6775717 B1 JP 6775717B1
- Authority
- JP
- Japan
- Prior art keywords
- virtual reality
- content
- image
- visual impairment
- diabetes
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 208000029257 vision disease Diseases 0.000 claims abstract description 187
- 230000004393 visual impairment Effects 0.000 claims abstract description 186
- 206010047571 Visual impairment Diseases 0.000 claims abstract description 180
- 238000000034 method Methods 0.000 claims abstract description 107
- 206010012601 diabetes mellitus Diseases 0.000 claims abstract description 104
- 230000008569 process Effects 0.000 claims abstract description 73
- 238000004088 simulation Methods 0.000 claims description 89
- 238000001914 filtration Methods 0.000 claims description 54
- 230000002265 prevention Effects 0.000 claims description 39
- 208000024891 symptom Diseases 0.000 claims description 31
- 208000013521 Visual disease Diseases 0.000 claims 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 abstract description 7
- 201000010099 disease Diseases 0.000 abstract description 3
- 230000000694 effects Effects 0.000 description 34
- 230000000007 visual effect Effects 0.000 description 18
- 230000001771 impaired effect Effects 0.000 description 15
- 230000003190 augmentative effect Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 13
- 230000006872 improvement Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 230000008450 motivation Effects 0.000 description 8
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 7
- 230000001788 irregular Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 5
- 238000000502 dialysis Methods 0.000 description 5
- 239000003814 drug Substances 0.000 description 5
- 230000001965 increasing effect Effects 0.000 description 5
- 230000003449 preventive effect Effects 0.000 description 5
- 208000007342 Diabetic Nephropathies Diseases 0.000 description 4
- 206010017711 Gangrene Diseases 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 4
- 208000033679 diabetic kidney disease Diseases 0.000 description 4
- 238000005728 strengthening Methods 0.000 description 4
- 208000017667 Chronic Disease Diseases 0.000 description 3
- 208000002249 Diabetes Complications Diseases 0.000 description 3
- 206010012655 Diabetic complications Diseases 0.000 description 3
- 206010012689 Diabetic retinopathy Diseases 0.000 description 3
- 238000002266 amputation Methods 0.000 description 3
- 208000035475 disorder Diseases 0.000 description 3
- 230000002708 enhancing effect Effects 0.000 description 3
- 201000001119 neuropathy Diseases 0.000 description 3
- 230000007823 neuropathy Effects 0.000 description 3
- 208000033808 peripheral neuropathy Diseases 0.000 description 3
- 238000002560 therapeutic procedure Methods 0.000 description 3
- 230000000052 comparative effect Effects 0.000 description 2
- 230000037213 diet Effects 0.000 description 2
- 235000005911 diet Nutrition 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 235000012054 meals Nutrition 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000036528 appetite Effects 0.000 description 1
- 235000019789 appetite Nutrition 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000005352 clarification Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000002483 medication Methods 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 235000011888 snacks Nutrition 0.000 description 1
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G06T3/04—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration by the use of local operators
-
- G06T5/70—
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B23/00—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
- G09B23/28—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Biomedical Technology (AREA)
- General Engineering & Computer Science (AREA)
- Social Psychology (AREA)
- Developmental Disabilities (AREA)
- Hospice & Palliative Care (AREA)
- Psychiatry (AREA)
- Psychology (AREA)
- Child & Adolescent Psychology (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Business, Economics & Management (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Mathematical Optimization (AREA)
- Algebra (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Medicinal Chemistry (AREA)
- Mathematical Physics (AREA)
- Pure & Applied Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Chemical & Material Sciences (AREA)
- General Business, Economics & Management (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
本発明は、典型的には、2つの実施形態で実施される。第1の実施形態は、糖尿病性網膜症などの糖尿病に起因する視覚障害の症状を体験させるためのシナリオに基づいて主人公の視点から撮影した三次元の仮想現実コンテンツをあらかじめ作成しておき、それを再生する際に視覚障害をシミュレーションするフィルタ処理を実行することにより、主人公の視点からそれを視聴するユーザに視覚障害を体験させる、コンテンツベースのものである。第2の実施形態は、ユーザの現実の視野に糖尿病性網膜症などの糖尿病に起因する視覚障害の症状を起こさせるものであり、ユーザが現在いる場所においてユーザの視野にあるべき正面のシーンを表わす前方映像を取得し、その前方映像に対して視覚障害をシミュレーションするフィルタ処理を実行することによって、リアルタイムで視覚障害を拡張現実により体験させる、前方映像ベースのものである。なお、これらの実施形態は、その一部あるいは全体を組み合わせて実施することも可能である。また、本明細書において、「視聴」との用語は、ユーザが少なくとも動画や画像などを「見ること」を意味するものであり、ユーザが音声などを「聞くこと」は必ずしも必須ではないものとする。
これから図面を参照し、本発明の第1の実施形態にかかる仮想現実動画再生装置100の説明を行う。図3に、仮想現実動画再生装置100の外観の概要を示す。図3において、破線で表した構成は、仮想現実動画再生装置100の本体の内部に存在し、外部からは視認できない構成である。図3には、101から106の参照番号で示された構成が記載されているが、それらの構成の詳細については、後で図1を参照して説明する。仮想現実動画再生装置100は、ユーザに、糖尿病性網膜症などの糖尿病に起因する視覚障害の症状を体験させるためのコンテンツを視聴させた後に、糖尿病の予防のための生活習慣の説明のコンテンツを視聴させるための装置である。仮想現実動画再生装置100は、典型的には、三次元の仮想現実を表わす動画を表示する電子ディスプレイを備えたヘッドマウントディスプレイ(ゴーグル)である仮想現実ヘッドセットの形態である。仮想現実動画再生装置100には、典型的にはゴムバンドのような装着用バンドが取り付けられている。ユーザは、仮想現実動画再生装置100を目の周りを覆うように当てて、そのゴムバンドを頭部に巻き付けることにより、仮想現実動画再生装置100を目の周囲に装着する。
患者体験コンテンツデータ103cの患者体験動画は、視覚障害のシミュレーションが実行された仮想現実動画に基づいて糖尿病に起因する視覚障害の症状をユーザに体験させるための仮想現実コンテンツを含む。これは、コンテンツのシナリオの主人公の視点から撮影した仮想現実動画であり、例えば、ユーザが、部屋に座った主人公の視点からある部屋の内部のような対象物の任意の方向を見ることができるような360度動画である。ここで、元の動画自体には視覚障害の症状を表わす画像処理の結果は含まれていない。これは、もし元の動画に、例えば視野の「欠け」などの視覚障害の症状を表わす画像処理の結果を含ませたとすると、その視覚障害の位置は、部屋などの対象物の特定の位置に固定されることになる。その場合、ユーザが視線を移動させても、それに合わせて移動すべき視覚障害の位置が移動しないため、ユーザは自身が視覚障害を有しているような没入感を得ることはできない。視覚障害をシミュレーションするために、この動画の再生時に、フィルタ処理により、電子ディスプレイ上に表示される仮想現実動画に含まれる画像の所定の領域に所定の視覚障害のシミュレーションが実行され、画像にその実行結果が重畳される。このように、患者体験コンテンツデータ103cの患者体験動画は、視覚障害のシミュレーションが実行された仮想現実動画に基づいて、ユーザに視覚障害の症状を体験させるものであり、そのためのシナリオに基づいて撮影されている。動画は仮想現実動画であるため、ユーザは自分の周りの任意の方向を向くと、その方向に対応する部屋の内部などの画像を見ることができるが、それの再生時に視覚障害をシミュレーションするフィルタ処理を実行することによって、ユーザは、その視覚障害を有している状態で部屋の内部などを見ることになる。このように、ユーザは、患者体験動画の再生時に、自身の視野の所定の位置に視覚障害をシミュレーションする画像処理の結果が重畳されて現われるため、自身がその視覚障害を有しているかのような没入感を得ることができる。このようにして、ユーザは、その視覚障害を有している状態を現実感を持って体験することができる。なお、シミュレーションされる視覚障害の程度は、コンテンツの再生が始まった直後から視覚障害が進行した状態を表わすものとするのではなく、再生中の所定の期間において視覚障害が開始して徐々に視覚障害が所定の程度まで悪化するようにすると好適である。すなわち、フィルタ処理は、視覚障害のシミュレーションの効果を、仮想現実動画の表示中の所定の期間において強くする処理を含むと好適である。このようにすることによって、コンテンツの再生開始後に唐突に視覚障害が発生することによる不自然さを解消するとともに、視覚障害が始まって、その症状が悪化することの深刻さをユーザに強く印象付けることができる。具体的なシナリオとしては、主人公の患者がテレビを見ているときに視覚障害が始まり、徐々に悪化して相当程度の視覚障害の状態になり、主人公が視覚障害に気が付いて当惑するようなストーリーが考えられる。
視覚障害をシミュレーションするフィルタ処理としては、例えば、「欠け」、「かすみ」、「ぼやけ」、「ゆがみ」、などの種類のシミュレーションを実行する処理を使用することができる。図7から図10には、種々の視覚障害による視野の変化が、格子模様の変形によって示されている。フィルタ処理においては、患者体験コンテンツデータ103cの再生により、RAM102などに展開された、画面のリフレッシュサイクル毎のそれぞれの画像のデータに対して、プロセッサ101が画素のデータを操作することによって画像処理を実行して元の画像を変形する。
次に、仮想現実動画再生装置100の動作について説明する。図5は、第1の実施形態に係る仮想現実動画再生装置100の動作フロー図である。仮想現実動画再生装置100に、コンテンツ再生の指示が入力されると、まず、仮想現実動画再生装置100は、コンテンツ再生プログラム103aが実行されることによって形成されたコンテンツ再生部の動作により、患者体験コンテンツデータ103cの動画データを読み出して仮想現実動画を生成する(ステップS101)。すなわち、仮想現実動画再生装置100は、患者体験コンテンツデータ103cの患者体験動画の360度動画の一連の画像を順番にメモリ103から読み出し、それが符号化された動画データであれば復号して、動画を構成するそれぞれの画像のデータを取り出し、RAM102上に展開する。仮想現実動画再生装置100は、復号した画像のデータから、センサ105で検知した仮想現実動画再生装置100の正面の方向(ユーザの視線方向)に見えることになる画像の領域を取り出すことによって、それを見たユーザが三次元空間においてその場にいるように見える仮想現実動画を構成する画像を生成する。その際には、必要により、360度動画を構成する画像に対して、仮想現実動画再生装置100の視線方向の位置を中心とした適切な遠近法に基づく変形を行うために、接眼レンズを介して電子ディスプレイ104を見たときに自然な遠近感を有する画像になるように個々の画素の座標を変換する。このように、仮想現実動画は、患者体験コンテンツデータ103cの360度動画を構成する画像に対して、仮想現実動画再生装置100の視線方向の位置を中心とした適切な遠近法に基づいて画像を変形させたものを、電子ディスプレイ104に表示される範囲だけ切り出した画像を次々に生成することによって、生成される。
次に、本発明の第2の実施形態にかかる仮想現実動画再生装置200の説明を行う。第2の実施形態にかかる仮想現実動画再生装置200は、第1の実施形態にかかる仮想現実動画再生装置100と同様の構成をいくつか有している。そのような同様の構成は、百の位を「1」から「2」にした参照符号で表わしている。仮想現実動画再生装置200の構成で、仮想現実動画再生装置100の対応する構成と機能などが同じものについては、適宜、説明を省略する。図4に、仮想現実動画再生装置200の外観の概要を示す。仮想現実動画再生装置200は、ユーザに、自分の視野に視覚障害が発生している状態をリアルタイムでシミュレーションした拡張現実の動画を視聴させた後に、糖尿病の予防のための生活習慣の説明のコンテンツを視聴させるための装置である。仮想現実動画再生装置200は、典型的には、三次元の仮想現実を表わす動画を表示する電子ディスプレイを備えたヘッドマウントディスプレイ(ゴーグル)である仮想現実ヘッドセットの形態である。
次に、仮想現実動画再生装置200の動作について説明する。図6は、第2の実施形態に係る仮想現実動画再生装置200の動作フロー図である。第2の実施形態にかかる仮想現実動画再生装置200の動作においては、第1の実施形態にかかる仮想現実動画再生装置100と同様あるいは対応する動作がある。そのような同様あるいは対応する動作は、百の位を「1」から「2」にした参照符号で表わしている。仮想現実動画再生装置200の動作で、仮想現実動画再生装置100の対応する動作と同じ動作については、適宜、説明を省略する。
これまで、第1の実施形態及び第2の実施形態について説明してきた。それらの実施形態は、視覚障害のシミュレーションが実行される三次元的な動画が、第1の実施形態ではあらかじめ撮影された仮想現実コンテンツを表わす仮想現実動画であり、第2の実施形態ではユーザの視野にあるべき正面のシーンを表わす拡張現実による前方映像である点で相違している。しかし、いずれの実施形態も、ユーザがその場にいるような感覚を得ることができる三次元的な動画に対して、視覚障害のシミュレーションを実行して元の動画に重畳する構成を有している点で、共通している。
101 :プロセッサ
102 :RAM
103 :メモリ
103a :コンテンツ再生プログラム
103b :フィルタ処理プログラム
103c :患者体験コンテンツデータ
103d :生活習慣説明コンテンツデータ
104 :電子ディスプレイ
105 :センサ
106 :インターフェイス
200 :仮想現実動画再生装置
201 :プロセッサ
202 :RAM
203 :メモリ
203a :コンテンツ再生プログラム
203b :フィルタ処理プログラム
203c :患者体験音声コンテンツデータ
203d :生活習慣説明コンテンツデータ
204 :電子ディスプレイ
205 :センサ
206 :インターフェイス
207 :カメラ
Claims (12)
- 仮想現実コンテンツを含むコンテンツデータを記憶するメモリと、
前記コンテンツデータに関する動画を表示するための電子ディスプレイを含む仮想現実ヘッドセットと、
前記仮想現実コンテンツを表わす仮想現実動画を前記コンテンツデータから生成するコンテンツ再生部と、
生成された前記仮想現実動画の少なくとも一部の画像の所定の領域に対して所定の画像処理を実行するフィルタ処理を実行して前記電子ディスプレイに表示させるフィルタ処理部と、を具備し、
前記フィルタ処理は、前記所定の画像処理として、糖尿病に起因する視覚障害のシミュレーションを実行するものであり、
前記仮想現実コンテンツは、前記視覚障害のシミュレーションが実行された前記仮想現実動画に基づいて糖尿病に起因する視覚障害の症状を体験させるためのシナリオに基づいて撮影された患者体験コンテンツの後に、糖尿病の予防のための生活習慣を説明するシナリオに基づいて撮影された生活習慣説明コンテンツが続くものである、
ことを特徴とする、仮想現実動画再生装置。 - 仮想現実コンテンツを含むコンテンツデータを記憶するメモリと、
前方映像を取得するカメラ、及び前記前方映像及び前記仮想現実コンテンツに関する動画を表示するための電子ディスプレイを含む仮想現実ヘッドセットと、
前記仮想現実コンテンツを表わす仮想現実動画を前記コンテンツデータから生成するコンテンツ再生部と、
前記前方映像の少なくとも一部の画像の所定の領域に対して所定の画像処理を実行するフィルタ処理を実行して前記電子ディスプレイに表示させるフィルタ処理部と、を具備し、
前記フィルタ処理は、前記所定の画像処理として、糖尿病に起因する視覚障害のシミュレーションを実行するものであり、
前記仮想現実コンテンツは、前記視覚障害のシミュレーションが実行された前記前方映像に基づいて糖尿病に起因する視覚障害を音声で説明する音声コンテンツである患者体験音声コンテンツと、それに続く、糖尿病の予防のための生活習慣を説明するシナリオに基づいて撮影された前記仮想現実コンテンツである生活習慣説明コンテンツと、を含むものであり、
前記コンテンツ再生部は、さらに、前記生活習慣説明コンテンツの再生の前に、前記患者体験音声コンテンツから前記音声の説明を再生するものであり、
前記フィルタ処理部は、前記前方映像の少なくとも一部の画像の所定の領域に対して前記視覚障害のシミュレーションを実行するものである、
ことを特徴とする、仮想現実動画再生装置。 - 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域を暗くすることによって、「欠け」の前記視覚障害の前記シミュレーションを実行するものである、請求項1又は2に記載の仮想現実動画再生装置。
- 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域をかすませることによって、「かすみ」の前記視覚障害の前記シミュレーションを実行するものである、請求項1又は2に記載の仮想現実動画再生装置。
- 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域をぼやけさせることによって、「ぼやけ」の前記視覚障害の前記シミュレーションを実行するものである、請求項1又は2に記載の仮想現実動画再生装置。
- 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域をゆがませることによって、「ゆがみ」の前記視覚障害の前記シミュレーションを実行するものである、請求項1又は2に記載の仮想現実動画再生装置。
- 仮想現実コンテンツに関する動画を表示するための電子ディスプレイを含む仮想現実ヘッドセットと、
前記仮想現実コンテンツを表わす仮想現実動画の少なくとも一部の画像の所定の領域に対して糖尿病に起因する視覚障害のシミュレーションを実行するフィルタ処理を実行して前記電子ディスプレイに表示させるフィルタ処理部と、
を含む仮想現実動画再生装置を糖尿病の予防のために使用する方法であって、
前記視覚障害のシミュレーションが実行された前記仮想現実動画に基づいて糖尿病に起因する視覚障害の症状を体験させるためのシナリオに基づいて撮影された前記仮想現実コンテンツである患者体験コンテンツを前記フィルタ処理を伴って再生して前記電子ディスプレイに表示する段階と、
前記患者体験コンテンツを再生した後に、糖尿病の予防のための生活習慣を説明するシナリオに基づいて撮影された前記仮想現実コンテンツである生活習慣説明コンテンツを再生して前記電子ディスプレイに表示する段階と、
を含むことを特徴とする方法。 - 前方映像を取得するカメラ、及び前記前方映像及び仮想現実コンテンツに関する動画を表示するための電子ディスプレイを含む仮想現実ヘッドセットと、
前記前方映像の少なくとも一部の画像の所定の領域に対して糖尿病に起因する視覚障害のシミュレーションを実行するフィルタ処理を実行して前記電子ディスプレイに表示させるフィルタ処理部と、
を含む仮想現実動画再生装置を糖尿病の予防のために使用する方法であって、
前記前方映像に前記フィルタ処理を実行して前記電子ディスプレイに表示するとともに、前記視覚障害のシミュレーションが実行された前記前方映像に基づいて糖尿病に起因する視覚障害を説明する患者体験音声コンテンツを再生する段階と、
前記患者体験音声コンテンツを再生した後に、糖尿病の予防のための生活習慣を説明するシナリオに基づいて撮影された前記仮想現実コンテンツである生活習慣説明コンテンツを再生して前記電子ディスプレイに表示する段階と、を含むことを特徴とする方法。 - 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域を暗くすることによって、「欠け」の前記視覚障害の前記シミュレーションを実行するものである、請求項7又は8に記載の方法。
- 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域をかすませることによって、「かすみ」の前記視覚障害の前記シミュレーションを実行するものである、請求項7又は8に記載の方法。
- 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域をぼやけさせることによって、「ぼやけ」の前記視覚障害の前記シミュレーションを実行するものである、請求項7又は8に記載の方法。
- 前記フィルタ処理は、前記少なくとも一部の画像の所定の領域をゆがませることによって、「ゆがみ」の前記視覚障害の前記シミュレーションを実行するものである、請求項7又は8に記載の方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020168955A JP6810825B1 (ja) | 2020-02-06 | 2020-10-06 | 仮想現実動画再生装置、及びそれを使用する方法 |
JP2020168954A JP6807484B1 (ja) | 2020-02-06 | 2020-10-06 | 仮想現実動画再生装置、及びそれを使用する方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2020/004565 WO2021157011A1 (ja) | 2020-02-06 | 2020-02-06 | 仮想現実動画再生装置、及びそれを使用する方法 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020168955A Division JP6810825B1 (ja) | 2020-02-06 | 2020-10-06 | 仮想現実動画再生装置、及びそれを使用する方法 |
JP2020168954A Division JP6807484B1 (ja) | 2020-02-06 | 2020-10-06 | 仮想現実動画再生装置、及びそれを使用する方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6775717B1 true JP6775717B1 (ja) | 2020-10-28 |
JPWO2021157011A1 JPWO2021157011A1 (ja) | 2021-08-12 |
Family
ID=72916075
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020536707A Active JP6775717B1 (ja) | 2020-02-06 | 2020-02-06 | 仮想現実動画再生装置、及びそれを使用する方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US11495358B2 (ja) |
JP (1) | JP6775717B1 (ja) |
WO (1) | WO2021157011A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007267802A (ja) * | 2006-03-30 | 2007-10-18 | Hokkaido | 検査システム、訓練システムおよび視覚情報呈示システム |
WO2017191847A1 (ja) * | 2016-05-04 | 2017-11-09 | 理香 大熊 | 将来像予測装置 |
JP2019537459A (ja) * | 2016-09-29 | 2019-12-26 | シンバイオニクス リミテッド | 仮想現実環境または拡張現実環境の中の手術室内での医療シミュレーションのための方法およびシステム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008144244A2 (en) * | 2007-05-15 | 2008-11-27 | Divenav, Inc. | Scuba diving device providing underwater navigation and communication capability |
US20160364915A1 (en) * | 2015-06-15 | 2016-12-15 | Google Inc. | Virtual reality content presentation including viewpoint transitions to prevent simulator sickness |
CN110582811A (zh) * | 2017-03-03 | 2019-12-17 | 贝赫维尔有限责任公司 | 用于影响行为改变的动态多感官模拟系统 |
-
2020
- 2020-02-06 JP JP2020536707A patent/JP6775717B1/ja active Active
- 2020-02-06 WO PCT/JP2020/004565 patent/WO2021157011A1/ja active Application Filing
-
2021
- 2021-09-02 US US17/465,285 patent/US11495358B2/en active Active
-
2022
- 2022-09-29 US US17/936,639 patent/US20230015641A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007267802A (ja) * | 2006-03-30 | 2007-10-18 | Hokkaido | 検査システム、訓練システムおよび視覚情報呈示システム |
WO2017191847A1 (ja) * | 2016-05-04 | 2017-11-09 | 理香 大熊 | 将来像予測装置 |
JP2019537459A (ja) * | 2016-09-29 | 2019-12-26 | シンバイオニクス リミテッド | 仮想現実環境または拡張現実環境の中の手術室内での医療シミュレーションのための方法およびシステム |
Non-Patent Citations (4)
Title |
---|
『生活習慣病予防プランナー講座』デビュー!, JPN6020033901, ISSN: 0004342181 * |
VRで視覚障害を体験、理解を深めるカールツアイスの取組, JPN6020033903, ISSN: 0004342182 * |
緑内障や白内障を予防せよ!, JPN6020033905, ISSN: 0004342183 * |
藤澤 正一郎, 第22回日本バーチャルリアリティ学会大会論文集 [USB] 第22回日本バーチャルリアリティ学会大会, JPN6020033906, 27 September 2017 (2017-09-27), pages 3 - 6, ISSN: 0004342184 * |
Also Published As
Publication number | Publication date |
---|---|
JPWO2021157011A1 (ja) | 2021-08-12 |
US20210398686A1 (en) | 2021-12-23 |
US11495358B2 (en) | 2022-11-08 |
WO2021157011A1 (ja) | 2021-08-12 |
US20230015641A1 (en) | 2023-01-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8953909B2 (en) | System, method, and computer software code for mimic training | |
JP5904620B2 (ja) | 情報表示装置 | |
US7771343B2 (en) | System and method for treating chronic pain | |
JP6565212B2 (ja) | 表示装置、表示方法およびプログラム | |
US20040152058A1 (en) | Video instructional system and method for teaching motor skills | |
US20030044757A1 (en) | Video instructional system and method for teaching motor skills | |
CN108478401A (zh) | 基于vr技术的弱视训练复健系统及方法 | |
WO2016181909A1 (ja) | ヘッドマウントディスプレイ、情報処理装置、情報処理システム、およびコンテンツデータ出力方法 | |
US11880502B2 (en) | Information processing device, information processing method, and non-transitory computer readable storage medium storing an information processing program | |
JP6775717B1 (ja) | 仮想現実動画再生装置、及びそれを使用する方法 | |
JP6810825B1 (ja) | 仮想現実動画再生装置、及びそれを使用する方法 | |
JP6807484B1 (ja) | 仮想現実動画再生装置、及びそれを使用する方法 | |
WO2019173677A1 (en) | Systems and methods for diagnostic applications of augmented reality | |
US10762878B1 (en) | System for guiding a user through an immersive experience | |
CN110755241A (zh) | 视觉训练方法、视觉训练装置及存储介质 | |
KR100445846B1 (ko) | 대인 공포증 치료를 위한 가상 연설 시뮬레이터 | |
US20220360827A1 (en) | Content distribution system, content distribution method, and content distribution program | |
Zünd et al. | Unfolding the 8-bit era | |
Dierker et al. | Mediated attention with multimodal augmented reality | |
US20240103617A1 (en) | User interfaces for gaze tracking enrollment | |
WO2022215258A1 (ja) | 酔い調整装置、酔い調整方法、及び酔い調整プログラム | |
US20240118746A1 (en) | User interfaces for gaze tracking enrollment | |
WO2023222182A1 (en) | System and method for object detection in immersive images | |
Miura et al. | Reality varied by visions: Requirements of immersive virtual reality content for users with low-vision | |
WO2022180605A1 (en) | Enhanced depth solutions |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A801 Effective date: 20200629 |
|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20200629 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200806 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200806 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200806 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200831 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200907 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201006 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6775717 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |