JP2022513578A - 仮想現実シミュレーション及び方法 - Google Patents

仮想現実シミュレーション及び方法 Download PDF

Info

Publication number
JP2022513578A
JP2022513578A JP2021521031A JP2021521031A JP2022513578A JP 2022513578 A JP2022513578 A JP 2022513578A JP 2021521031 A JP2021521031 A JP 2021521031A JP 2021521031 A JP2021521031 A JP 2021521031A JP 2022513578 A JP2022513578 A JP 2022513578A
Authority
JP
Japan
Prior art keywords
processor
display
controller
user
response
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021521031A
Other languages
English (en)
Other versions
JP7402867B2 (ja
JPWO2020123026A5 (ja
Inventor
クリスタル マーシュ
ブライアン ダンカン
ニコル モナチーノ
レベッカ ブリューワー
ロバート フェレール
ヴァネッサ フィゲロア
タイラー デュウィット
ケン ウィーバー
カタヤン マイヤー
スコット ドリスコル
マイケル オーンドルフ
Original Assignee
クオリティー エグゼクティブ パートナーズ インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by クオリティー エグゼクティブ パートナーズ インコーポレイテッド filed Critical クオリティー エグゼクティブ パートナーズ インコーポレイテッド
Publication of JP2022513578A publication Critical patent/JP2022513578A/ja
Publication of JPWO2020123026A5 publication Critical patent/JPWO2020123026A5/ja
Application granted granted Critical
Publication of JP7402867B2 publication Critical patent/JP7402867B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B23/00Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
    • G09B23/24Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for chemistry
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16CCOMPUTATIONAL CHEMISTRY; CHEMOINFORMATICS; COMPUTATIONAL MATERIALS SCIENCE
    • G16C20/00Chemoinformatics, i.e. ICT specially adapted for the handling of physicochemical or structural data of chemical particles, elements, compounds or mixtures
    • G16C20/60In silico combinatorial chemistry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16CCOMPUTATIONAL CHEMISTRY; CHEMOINFORMATICS; COMPUTATIONAL MATERIALS SCIENCE
    • G16C20/00Chemoinformatics, i.e. ICT specially adapted for the handling of physicochemical or structural data of chemical particles, elements, compounds or mixtures
    • G16C20/10Analysis or design of chemical reactions, syntheses or processes
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/40ICT specially adapted for the handling or processing of patient-related medical or healthcare data for data related to laboratory analysis, e.g. patient specimen analysis
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Epidemiology (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Chemical & Material Sciences (AREA)
  • Biomedical Technology (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Medicinal Chemistry (AREA)
  • General Business, Economics & Management (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Algebra (AREA)
  • Computational Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Software Systems (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computing Systems (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Hardware Design (AREA)
  • Chemical Kinetics & Catalysis (AREA)
  • Analytical Chemistry (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本発明の開示の一態様は、仮想現実トレーニングに向けて対話型仮想現実シミュレーションを提供するための方法及びシステムを含む。ヘッドセット、コントローラ、及び/又は1又は2以上のセンサは、ヘッドセット内のユーザディスプレイ上に対話型仮想現実シミュレーションを表示するためにプロセッサと通信する。対話型仮想現実トレーニングは、顕微鏡シミュレーション、細菌ストリーキングシミュレーション、及び/又は容器目視検査シミュレーションを含む仮想現実シミュレーションを容易にするのに使用される。【選択図】図1

Description

〔関連出願への相互参照〕
以下の出願は、2018年10月12日出願の「ソフトウエア没入型ツール(SOFTWARE IMMERSIVE TOOL)」という名称の米国仮特許出願第62/744,753号に対する「35 U.S.C.§119(e)」の下での優先権を主張する2019年XXX月XX日に国際公開番号WO/2019/XXX,XXXの下で公開された2019年10月12日出願の「仮想現実シミュレーション及び方法(VIRTUAL REALITY SIMULATION及びMETHOD)」という名称の国際PCT出願番号PCT/US19/XXX,XXXに対する「35 U.S.C.§371」の下での優先権を主張するものである。優先権は、上記に特定した全ての出願及び公開に対して主張するものであり、その全ては、全ての目的に対してその全体が引用によって本明細書に組み込まれている。
本発明の開示は、一般的に、仮想現実トレーニングのための装置及び方法に関連し、より具体的には、顕微鏡シミュレーション、細菌ストリーキングシミュレーション、及び/又は容器目視検査シミュレーションを含む仮想現実シミュレーションを容易にするのに使用するためのプロセッサデバイス、視覚出力、センサデバイス、及び特殊センサ組合せを利用する方法及びデバイスに関する。
顕微鏡を使用すること、プレートのストリーキングによって細菌コロニーを単離すること、及び/又は汚染に関して容器を目視検査することのような実験室状況のためのトレーニングは、実験室及び/又は製造環境での殆どの作業員にとって必要である。現実世界トレーニングは、時間を消費し(例えば、細菌が増殖することを待つ)、高価であり(例えば、不正使用によって顕微鏡が破損する可能性がある)、及び/又は訓練生が現実の製品に対して過誤を起こして汚染容器が病院に送られる及び/又は患者に対して使用される場合に危険性が高い可能性がある。更に、現実世界では、特定の要素は、トレーニングをより良く浸透させるために強調する又は変更することができない。これは、様々な資格又は学位プログラムのための膨大な実験室トレーニング時間を必要とするトレーニングに対して特に当て嵌まる。そのようなトレーニングは、資本設備が高価であり、並びに解体、洗浄、及び設置コストを必要とする。
「Facebook part # Quest」
本発明の開示の一態様は、ユーザによって入力されたビュー選択に基づいて3次元初期ビューを発生させる段階と、ヘッドセット内に含まれたヘッドセットのユーザディスプレイに初期ビューを提示する命令を送る段階と、初期ビュー内のユーザ移動を示す入力を少なくとも1つのセンサを含むコントローラから受信する段階と、ループの割り当てられたステータスを識別するためにメモリにアクセスする段階と、ループが初期ビュー内でユーザアイコンに結合されていることに応答して、ループと初期ビュー内に含まれたストリーキングプレートとの間の対話のパターンを格納する段階であって、一連の中間地点を発生させてそれらを接続してパターンを構成する段階と、低下する細菌濃度をループに割り当てる段階であって、中間地点生成の場所でのループの濃度が中間地点に割り当てられ、ループによって生成されている一連の中間地点内の各漸進的中間地点が低下する細菌濃度を有する上記割り当てる段階と、対話のパターンが1又は2以上の既存パターンの1又は2以上の既存中間地点に重なることに応答して、変更された細菌濃度を1又は2以上の既存中間地点の割り当てられた値と重ね合わせの場所でのループの割り当てられた細菌濃度とに基づいてループに割り当てる段階と、一連の中間地点及びそれらの割り当てられた細菌濃度を格納する段階とを含む前記格納する段階とを含む細菌ストリーキングシミュレーションを実施する方法を実行するための関連プロセッサによって実行可能な命令を格納する非一時的コンピュータ可読媒体を含む。
本発明の開示の別の態様は、細菌ストリーキングシミュレーションを提供するための仮想現実システムを含み、システムは、仮想現実ヘッドセット及び少なくとも1つのコントローラのうちの少なくとも一方から対応する入力を受信することに応答して予め定められた作動セットを実行するように構成されたプロセッサを有する処理デバイスを含み、処理デバイスは、細菌ストリーキングシミュレーションの3次元初期ビューが格納されたメモリを含み、初期ビューは、ストリーキングプレート、加熱要素、及びループを含む。プロセッサは、ヘッドセット内に含まれたユーザディスプレイ上に初期ビューが提示されるように命令し、少なくとも1つのコントローラは、コントローラが初期ビュー内で移動していることを示す入力をプロセッサに送り、プロセッサは、少なくとも1つのコントローラのうちのコントローラの移動がユーザディスプレイ上に提示されるように命令する。コントローラからの入力に応答して、プロセッサは、ループをコントローラの移動によって制御されるように割り当て、コントローラは、コントローラが移動しており、かつストリーキングプレートと対話していることを示す入力を送り、プロセッサは、ループとストリーキングプレートの間の対話のパターンを発生させて格納し、プロセッサは、ストリーキングプレートと対話しながらループによって移動される距離に応答して、線形に低下する細菌濃度をループに割り当てることによってパターンを発生させ、プロセッサは、一連の中間地点を発生させ、中間地点生成の場所でのループの細菌濃度が中間地点に割り当てられ、プロセッサは、中間地点をストリーキングプレート上にパターンを形成する線として示すようにユーザディスプレイに命令する。プロセッサは、一連の中間地点内の以前の中間地点に向けて延びる第1の矩形と、一連の中間地点内の次の中間地点に向けて延びる第2の矩形とを発生させ、プロセッサは、中間地点の割り当てられた細菌濃度に基づいて第1及び第2の矩形の細胞能力を計算する。プロセッサは、細胞能力に基づいて細胞配置をランダムに第1及び第2の矩形に割り当て、プロセッサは、第1及び第2の矩形内の細胞配置に基づいてストリーキングプレート上の細菌増殖を模擬する。
本発明の開示の更に別の態様は、ユーザによって入力されたビュー選択に基づいて3次元初期ビューを発生させる段階と、ヘッドセット内に含まれたヘッドセットのユーザディスプレイに初期ビューを提示する命令を送る段階と、初期ビュー内のユーザ移動を示す入力を少なくとも1つのセンサを含むコントローラから受信する段階と、1又は2以上の容器のうちの選択された容器の割り当てられたステータスを識別するためにメモリにアクセスする段階であって、コントローラからの入力に応答して、プロセッサが、選択された容器をコントローラの移動によって制御されるように割り当てる上記アクセスする段階と、可視化状態機械を利用して流体流れパターンを連続的に発生させる段階であって、横ダンパーを有する質量バネ上の単一点質量が、容器の中心で固定点に仮想的に取り付けられる上記連続的に発生させる段階と、定められた方向に容器が移動したという入力をコントローラから受信することに応答して、単一点質量を定められた方向に沿って前後に揺動し、次に、単一点質量を元の位置に落ち着かせる段階と、2次元液体上面を単一点質量の向きに従うように表示する段階であって、液体上面が、ユーザディスプレイからの視線に面するように連続的に向けられる上記表示する段階とを含む目視検査シミュレーションを実施する方法を実行するための関連プロセッサによって実行可能な命令を格納する非一時的コンピュータ可読媒体を含む。
本発明の更に別の態様は、目視検査シミュレーションを提供するための仮想現実システムを含み、システムは、仮想現実ヘッドセット及び少なくとも1つのコントローラのうちの少なくとも一方から対応する入力を受信することに応答して予め定められた作動セットを実行するように構成されたプロセッサを有する処理デバイスを含み、処理デバイスは、少なくとも1つの容器を含む目視検査シミュレーションの3次元初期ビューが格納されたメモリを含み、このプロセッサは、ヘッドセット内に含まれたユーザディスプレイ上に初期ビューが提示されるように命令し、少なくとも1つのコントローラは、コントローラが初期ビュー内で移動していることを示す入力をプロセッサに送る。プロセッサは、少なくとも1つのコントローラのうちのコントローラの移動がユーザディスプレイ上に提示されるように命令する。コントローラからの入力に応答して、プロセッサは、少なくとも1つの容器のうちの選択された容器をコントローラの移動によって制御されるように割り当て、コントローラは、コントローラが選択された容器を移動していることを示す入力を送り、プロセッサは、容器の中心で固定点に仮想的に取り付けられた横ダンパーを有する質量バネ上に単一点質量を含む可視化状態機械を利用して連続流体流れパターンを発生させる。コントローラは、定められた方向に容器が移動したという信号をプロセッサに送り、プロセッサは、定められた方向に沿って単一点質量を前後に揺動し、次に、単一点質量を初期位置に落ち着かせ、プロセッサは、単一点質量の向きに従うように2次元液体上面を表示するようにユーザディスプレイに命令し、その処理は、視線に面するように連続的に向けられるように液体上面を表示するようにユーザディスプレイに命令する。
本発明の開示の更に別の態様は、ユーザによって入力されたビュー選択に基づいて3次元初期ビューを発生させる段階と、ヘッドセット内に含まれたヘッドセットのユーザディスプレイに初期ビューを提示する命令を送る段階と、初期ビュー内のユーザ移動を示す入力を少なくとも1つのセンサを含むコントローラから受信する段階と、横ホイール、縦ホイール、対物ホイール、及びフォーカスホイール入力を含む顕微鏡の割り当てられたステータスを識別するためにメモリにアクセスする段階と、コントローラからの入力に応答して、横ホイール、縦ホイール、対物ホイール、及びフォーカスホイールのうちの1つを表示するようにユーザディスプレイに命令する段階と、顕微鏡上に存在するスライドに細菌が割り当てられることに応答して、メモリから細菌を取り出して顕微鏡上にかつ顕微鏡ビューを表示するヘッドアップディスプレイ上に存在するスライド上に細菌を表示するようにユーザディスプレイに命令する段階と、コントローラが移動しており、かつ対物ホイールと対話しているという信号をコントローラが送っていることに応答して、コントローラ移動に基づいて回転する対物ホイールを表示するように、かつ変更された倍率を有する顕微鏡ビューを表示するヘッドアップディスプレイを表示するようにユーザディスプレイに命令する段階と、コントローラが移動しており、かつフォーカスホイールと対話しているという信号をコントローラが送っていることに応答して、コントローラ移動に基づいて回転するフォーカスホイールを表示するように、かつ変更された不鮮明度を有する顕微鏡ビューを表示するヘッドアップディスプレイを表示するようにユーザディスプレイに命令する段階であって、スライド及び細菌が変更された不鮮明度を有するように提示される上記命令する段階とを含む顕微鏡シミュレーションを実施する方法を実行するための関連プロセッサによって実行可能な命令を格納する非一時的コンピュータ可読媒体を含む。
本発明の開示の更に別の態様は、顕微鏡シミュレーションを提供するための仮想現実システムを含み、システムは、仮想現実ヘッドセット及び少なくとも1つのコントローラのうちの少なくとも一方から対応する入力を受信することに応答して予め定められた作動セットを実行するように構成されたプロセッサを有する処理デバイスを含み、処理デバイスは、顕微鏡を含む顕微鏡シミュレーションの3次元初期ビューが格納されたメモリを含む。プロセッサは、ヘッドセット内に含まれたユーザディスプレイ上に初期ビューが提示されるように命令し、少なくとも1つのコントローラは、コントローラが初期ビュー内で移動していることを示す入力をプロセッサに送り、プロセッサは、少なくとも1つのコントローラのうちのコントローラの移動がユーザディスプレイ上に提示されるように命令する。コントローラからの入力に応答して、プロセッサは、横ホイール、縦ホイール、対物ホイール、及びフォーカスホイールのうちの1つを表示するようにユーザディスプレイに命令し、プロセッサが顕微鏡上に存在するスライドに細菌を割り当てなかったことに応答して、プロセッサは、メモリからブランクスライドを取り出し、かつ顕微鏡上及び顕微鏡ビューを表示するヘッドアップディスプレイ上に存在するスライドを表示するようにユーザディスプレイに命令する。コントローラが移動しており、かつ対物ホイールと対話しているという信号をコントローラが送っていることに応答して、プロセッサは、コントローラ移動に基づいて回転する対物ホイールを表示するように、かつ変更された倍率を有する顕微鏡ビューを表示するヘッドアップディスプレイを表示するようにユーザディスプレイに命令し、コントローラが移動しており、かつフォーカスホイールと対話しているという信号をコントローラが送っていることに応答して、プロセッサは、コントローラ移動に基づいて回転するフォーカスホイールを表示するように、かつ変更された不鮮明度を有する顕微鏡ビューを表示するヘッドアップディスプレイを表示するようにユーザディスプレイに命令し、スライドは、変更された不鮮明度を有するように提示される。
本発明の開示の以上の及び他の特徴及び利点は、他に説明しない限り図面を通して類似の参照番号が類似の部分を指す添付図面を参照して本発明の開示の以下の説明を考慮すると本発明の開示が関連する当業者には明らかになるであろう。
本発明の開示の一例示的実施形態による例示的仮想現実システムを示す図である。 本発明の開示の一例示的実施形態による例示的仮想現実システムを使用する方法の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたフォーカス対話機能を利用する顕微鏡シミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された横対話機能を利用する顕微鏡シミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された縦対話機能を利用する顕微鏡シミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された対物対話機能を利用する顕微鏡シミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された起動容積対話機能を利用する顕微鏡シミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微シミュレーションの対物レンズ要素の拡大図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたオイル滴下器対話機能を利用する顕微鏡シミュレーションの対物レンズ要素の拡大図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたオイル滴下器対話機能を利用する顕微鏡シミュレーションの図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在するスライドに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在するスライドを示す図である 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在するフォーカスホイールの使用を通して変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する横ホイールの使用を通して変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上の初期位置にあるスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する横ホイールの使用を通して最大前方位置まで変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する横ホイールの使用を通して最大前方位置まで変更されたスライドのビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する横ホイールの使用を通して最大後方位置まで変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する横ホイールの使用を通して最大後方位置まで変更されたスライドのビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する縦ホイールの使用を通して変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する縦ホイールの使用を通して最大左側位置まで変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する縦ホイールの使用を通して最大左側位置まで変更されたスライドのビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する縦ホイールの使用を通して最大右側位置まで変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する縦ホイールの使用を通して最大右側位置まで変更されたスライドのビューを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された顕微鏡シミュレーションの顕微鏡上に存在する対物ホイールの使用を通して変更されたスライドのビューに対応する顕微鏡ビューを示す図である。 本発明の開示の一例示的実施形態による細菌画像ソースコンスタントを示す図である。 本発明の開示の一例示的実施形態によるスライド画像ソースコンスタントを示す図である。 本発明の開示の一例示的実施形態によるビネットマスクソースコンスタントを示す図である。 本発明の開示の一例示的実施形態によるターゲット十字線画像コンスタントを示す図である。 本発明の開示の一例示的実施形態によるカーネル画像コンスタントを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された顕微鏡シミュレーションを使用する方法の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された顕微鏡シミュレーションでフォーカス機能を使用する方法の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された顕微鏡シミュレーションで横機能を使用する方法の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された顕微鏡シミュレーションで縦機能を使用する方法の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された顕微鏡シミュレーションで対物機能を使用する方法の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された顕微鏡シミュレーションでオイル機能を使用する方法の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションの概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングプレート、ソースプレート、加熱要素、及びループを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングプレート容積及びストリーキングプレートを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングプレート容積及びストリーキングプレートの第1の部分を含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングプレート容積の第1の部分での対話に基づいて発生された持ち上げ矢印のビューを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングプレート容積の第1の部分での対話に基づいて発生された持ち上げ矢印の拡大ビューを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングプレート容積及びストリーキングプレートの第2の部分を含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたソース容積での対話に基づいて発生されたソース持ち上げ矢印を含むソース容積及びソースプレートを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションでのループとの加熱要素第1フェーズ対話を示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションでの第1加熱フェーズでのループを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションでの第1加熱フェーズでのループとの加熱要素第2フェーズ対話を示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションでの第1冷却フェーズでのループを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションでの第2冷却フェーズでのループを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションでのループを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションでのソースコロニーを含有するループを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングプレートと、キャップが取り外されたソースプレートと、ループとを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングキャップが取り外されたストリーキングプレートと、ソースプレートと、ループとを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングキャップが取り外されたストリーキングプレートと対話するループを含むストリーキングシミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションで発生された一連の中間地点を示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションで発生されたストリーキングプレート上に発生された細菌増殖の一連のパターンを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションで発生されたストリーキングプレート上に発生された細菌増殖の第2の一連のパターンを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生されたストリーキングシミュレーションで発生された一連の中間地点及び対応する矩形を示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションを使用する方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションでのループ滅菌処理を使用する方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションでのソースプレートからキャップを取り外す段階を使用する方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションでの細菌コロニーを捕捉するループを使用する方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションでのストリーキングプレート回転処理を使用する方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションでのストリーキングプレートキャップ取り外し処理及びループ検証処理を使用する方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションで一連の入力を使用して一連の中間地点を発生させる方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションで一連の入力を使用してパターンを発生させる方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションで一連の入力を使用して既存パターン対話に基づいてパターンを発生させる方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションで既存パターン対話に基づいて一連の入力に基づいて発生されたパターンに基づいて細菌増殖を計算する方法600の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択されたストリーキングシミュレーションで一連の入力に基づいて触覚フィードバックを計算する方法699aの概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションに使用される入力の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションを示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された容器を示す図である。 本発明の開示の別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された容器を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された容器を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで入力として使用される液体質量モデルを示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された容器回転運動の概略図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションに使用される2次元(2D)面を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションに使用されるユーザディスプレイに対して割り当てられた2次元(2D)面の向きを示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された破片が割り当てられた容器を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された第2の背景の前であるように示された第1の可視インジケータ繊維として割り当てられた繊維を有する容器を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された第1の背景の前であるように示された第2の可視インジケータ繊維として割り当てられた繊維を有する容器を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された第2の背景の前であるように示された第1の可視インジケータ粒子として割り当てられた粒子を有する容器を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された第1の背景の前であるように示された第2の可視インジケータ粒子として割り当てられた粒子を有する容器を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで発生された第2の背景の前で観察される容器の概略図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションでの容器内の液体スロッシングのビューを示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションで容器内の液体上面及び液体側面を模擬する画像を提示するためにプロセッサによって割り当てられた2次元(2D)面を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションでの回転画像のシーケンスからの一連の繊維画像を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションでの容器の回転ベクトルを示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションでの第2及び第1の背景の両方の前の第1のインジケータ繊維を示す図である。 本発明の開示の更に別の例示的実施形態により例示的仮想現実システムによって発生された目視検査シミュレーションでの第1及び第2の背景の前の気泡を示す図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された可視化シミュレーションを使用する方法800の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された可視化シミュレーションでの容器逆転処理を使用する方法800の概略図である。 本発明の開示の一例示的実施形態により例示的仮想現実システムによって発生された選択された可視化シミュレーションで容器回転処理を使用する及び容器内に気泡又は粒子を発生させる方法800の概略図である。
当業者は、図内の要素が簡略化及び明瞭化の目的で例示したものであり、必ずしも縮尺通りに描かれていないことを認めるであろう。例えば、図内の要素のうちの一部の寸法は、本発明の開示の実施形態の理解を改善することを支援するために他の要素に対して誇張されている場合がある。
装置及び方法構成要素は、図面に適切な場合に従来の符号で表しており、本明細書の説明の利益を有する当業者に対して容易に明らかであることになる詳細によって本発明の開示を不明瞭にしないように本発明の開示の実施形態を理解することに関連する特定の詳細のみを示している。
ここで、一般的に、他に特筆しない限り類似の要素を指す類似の番号を振った特徴を示す図を参照する。本発明の開示は、一般的に、仮想現実トレーニングのための装置及び方法に関し、より具体的には顕微鏡シミュレーション、細菌ストリーキングシミュレーション、及び/又は容器目視検査シミュレーションを含む仮想現実シミュレーションを容易にする際の使用に向けてプロセッサデバイス、視覚出力、センサデバイス、及び特殊なセンサ組合せを利用する方法及びデバイスに関する。
図1は、本発明の開示の例示的実施形態のうちの1つによる仮想現実システム100の概略図を示している。仮想現実システム100は、処理デバイス110と、仮想現実ヘッドセットである「ヘッドセット120」と、少なくとも1つのコントローラ130とを含み、処理デバイス110は、仮想現実ヘッドセット120及びコントローラ130に接続可能である及び/又は接続される。
一例示的実施形態では、処理デバイス110は、コンピュータ機能を有するコンピュータデバイス(例えば、データベースサーバ、ファイルサーバ、アプリケーションサーバ、又はコンピュータなど)及び/又はプロセッサ112を含む。プロセッサは、フィールドプログラマブルアレイ(FPGA)、プログラマブル論理デバイス(PLD)、特定用途向け集積回路(ASIC)、ノースブリッジ、サウスブリッジ、及び/又は他の類似デバイス、又はその組合せを含む。プロセッサ112は、例えば、中央演算処理装置(CPU)、プログラマブル汎用又は専用マイクロプロセッサ、デジタル信号プロセッサ(DSP)、グラフィック処理ユニット(GPU、)及び/又は他の類似デバイス、又はその組合せを含むことができる。
処理デバイス110は、現実世界で見られる環境を再現する画像、音響、テキストなど、及び/又は現実世界として知覚されるように発生された環境を発生させると考えられる。処理デバイス110は、仮想現実ヘッドセット120及び少なくとも1つのコントローラ130と双方向通信しており、この場合、ヘッドセット及びコントローラは、処理デバイス110に入力を供給し、処理デバイス110は、ユーザの活動及び運動に関するデータを供給する。処理デバイス110は、ユーザがナビゲートして仮想世界と対話するように、受信する入力に応答して映像、音響、及び/又はテキストを発生させるという命令を与える。一例示的実施形態では、処理デバイス110は、仮想現実ヘッドセット120に統合される。別の例示的実施形態では、処理デバイス110は、仮想現実ヘッドセット120と有線及び/又は無線の接続状態にある。
当業者は、処理デバイス110が、その機能を実行するのに使用されるバッファデータ又は永続的データ、並びにコンパイルされたプログラミングコードを格納することになる非一時的、揮発性、及び不揮発性のメモリの様々な形態にあるストレージデバイスを含むことになることを認めるであろう。別の例示的実施形態では、データストレージデバイスは、処理デバイス110の外部にあり、それがアクセス可能なものとすることができ、外部ハードドライブ、クラウドストレージ、及び/又は他の外部記録デバイスを含むことができる。
一例示的実施形態では、処理デバイス110は、リモートコンピュータシステムである。このコンピュータシステムは、あらゆる数の公知のオペレーティングシステム上で作動し、ワールドワイドウェブ又はインターネットを通じたクラウド、ホスト運用コンピュータのようなリモートデータストレージとの通信に向けてアクセス可能なデスクトップ、ラップトップ、タブレット手持ち式パーソナルコンピュータデバイス、IAN、WAN、及びWWWなどを含む。一例示的実施形態では、コントローラ130及びVR(仮想現実)ヘッドセット120は、両方共に命令を送受信するための送受信機を含む。
別の例示的実施形態では、処理デバイス110は、ランダムアクセスメモリ(「RAM」)、読取専用メモリ(「ROM」)、及び/又は入力/出力インタフェースを含むプロセッサ、データストレージ、コンピュータシステムメモリを含む。処理デバイス110は、内部の非一時的コンピュータ可読媒体によって命令を実行するか、又は入力インタフェース及び/又は電気通信を通してプロセッサに通信するコンピュータを通して2次デバイス(例えば、スマート電話、タブレット、又は他のデバイス)、コントローラ130、及び/又はヘッドセット120等からの非一時的コンピュータ可読媒体によって命令を実行するかのいずれかである。更に別の例示的実施形態では、処理デバイス110は、インターネット、LAN、WAN、及び/又はクラウドのようなネットワーク、フラッシュドライブのような入力/出力デバイス、スマート電話又はタブレットのようなリモートデバイス、並びにディスプレイと通信する。
仮想現実ヘッドセット120は、内蔵ヘッド追跡システムを有するヘッド装着式ディスプレイ又はゴーグル122であると考えられる。例示的ヘッドセット120は、「Facebook part # Quest」によって製造されたものであり、この文献は、その全内容が全ての目的で引用によって組み込まれている。仮想現実ヘッドセット120は、統合ディスプレイ122、ヘッドセット運動センサ114、通信インタフェース、及び/又はユーザスピーカ124、並びに出力に命令を与えるためにメモリ又は入力から命令を実行するか又は読み取るための内蔵プロセッサを含む。
ディスプレイ122は、液晶ディスプレイ(LCD)又は発光ダイオード(LED)ディスプレイなどのうちの1つを含むことができる。運動センサ114は、加速度計(例えば、Gセンサ)、ジャイロスコープ(例えば、ジャイロセンサ)、及び/又はヘッドセット120の直線移動及び/又は回転移動(例えば、回転角速度又は回転角)を検出するセンサの組合せを含むことができる。別の例示的実施形態では、運動センサは、運動感知グリッド144を発生させる1又は2以上のロケータ142を含み、この場合、コントローラ130及び/又はヘッドセット120の運動は、1又は2以上のセンサによってモニタ及び識別される。コントローラ130及び/又はヘッドセット120は、運動感知グリッドが直線移動及び/又は回転移動を感知するような1又は2以上の感知容積を含む。ロケータ142は、例えば、レーザ又は赤外線の送信機及び受信機を含む。ロケータ142は、3次元空間内で仮想現実ヘッドセット120及びコントローラ130が存在する場所をマッピングする。例えば、ロケータ142は、ユーザが仮想世界内にいる間に壁に衝突するか又は有形の物体と衝突することを防止するために、プロセッサ112からの命令によって仮想空間の境界を定める。
一例示的実施形態では、ロケータ142は、例えば、回転レーザシートを含むベースステーションを含む。ヘッドセット120及びコントローラ130上のセンサ114、116は、レーザシートがヘッドセット120及び/又はコントローラ130上の様々な点を通った時(例えば、特定の時間)を検出してプロセッサ112に送信する。プロセッサ112は、様々な点が検出された時間を利用してこれらの時間からコントローラ130及び/又はヘッドセット120の位置及び向きを三角測位する。別の例示的実施形態では、ヘッドセット120のセンサ114(例えば、Oculus QuestヘッドセットのOculus Rift S)は、データをプロセッサ112に送信するか又は写真測量によって位置及び向きを計算する処理機能を自体が含む内蔵カメラを含む。更に別の例示的実施形態では、ロケータ142は、ヘッドセット120及びコントローラから投影された光を検出する1又は2以上のカメラを含む。
図示の例示的実施形態では、ヘッドセット120は、ヘッドセット運動データを処理デバイス110に出力し(例えば、ロケータ142及び/又は運動センサにより)、処理デバイスのプロセッサ112は、ヘッドセット運動データに相関する画像をユーザディスプレイ122上に表示するようにヘッドセットに命令する(例えば、ユーザがヘッドを左に方向転換すると、ディスプレイは、ユーザの元の視線の左方向の容積を示すように変化する)。
図1に示す例示的実施形態では、コントローラ130は手持ち式コントローラを含む。一例示的実施形態では、コントローラ130には、手持ち式運動センサ116、触知要素118、例えば、マウス、ジョイスティック、トラックボール、タッチパッド、及び/又はボタンが装備され、触知要素118は、ユーザが、仮想世界での環境、物体、又はアバターと対話することを可能にする(仮想世界は、ヘッドセット、コントローラの移動に基づいて、更にプロセッサ112及び/又はコントローラ130によって処理される命令に基づいてヘッドセット120内に表示されているものであり、これらの命令は、プロセッサ112及び/又はコントローラ130のそれぞれの入力によって受信され、それぞれのプロセッサにより、それぞれのデバイス120、130に非一時的命令を与えるように処理される)。一例示的実施形態では、そのような命令は、それぞれのデバイス120、130のそれぞれのプロセッサ上で処理されるようにシステム100のデバイスに送信することができるコンピュータ可読媒体のような非一時的なものある。コントローラ130は、いずれかの無線規格によって処理デバイス110、ロケータ142、及び/又はヘッドセット120と通信し、及び/又は処理デバイス110と有線通信している。当業者は、手持ち式運動センサが、コントローラ130上に位置付けられたセンサ116、及び/又はロケータ142のような他のデバイスによって感知される感知可能要素を含むことを認めるであろう。
図2に示すように、仮想現実システム100の使用方法200を示している。202では、ユーザが、仮想現実システム100を利用して実験室シミュレーション300、500、700を選択する。この例示的実施形態では、ユーザは、下記でより詳細に議論することになる複数の実験室シミュレーションへのアクセスを有する。ユーザは、コントローラ130及び/又はその触知要素118、処理ユニット110(例えば、処理ユニットと通信しているマウス又はキーボードなど)を利用して、及び/又はヘッドセット120によって感知された眼球及び/又はヘッドの運動によって実験室シミュレーション300、500、700を選択することができる。204では、プロセッサ112は、選択された実験室シミュレーション300、500、700を発生させる。この例示的実施形態では、プロセッサ112は、そこに格納された及び/又はリモートな場所に格納されたシミュレーションを識別し、取り付けられたヘッドセット120上に投影されるように実験室シミュレーションを構成する。
206では、プロセッサ112は、選択された実験室シミュレーション300、500、700をユーザディスプレイ122上に投影し、ユーザスピーカ124から発せられる音響、及び/又はヘッドセット120及び/又はコントローラ130において実現させるべき騒音運動を発生させるという命令をヘッドセット120に送る。この例示的実施形態では、ユーザは、コントローラ130を保持するか又はその運動を他に制御する。208では、作動容積(例えば、運動感知グリッド144)内のコントローラ130の存在が検索される。210では、コントローラ130が検出されないことに応答して、プロセッサ112は、ユーザディスプレイ122上にアイコン302を示さないように命令する(図3Aを参照されたい)。212では、コントローラ130が検出されたことに応答して、プロセッサ112は、ユーザディスプレイ122上にアイコン302を示すように命令する(図3B~3Eを参照されたい)。一例示的実施形態では、アイコン302は、ユーザの手を仮想空間又は仮想世界において模擬する1及び/又は複数の手を含む。214では、コントローラのセンサ116が起動されてユーザの手の運動を検出する。センサ116は、ロケータ142が検出することができる。横方向、長手方向、回転、軸線方向などを含むユーザの手の運動は、センサ116によって検出される。ヘッドセット120のセンサ114は、ユーザが仮想空間内にいる間に起動状態に留まる。
216では、センサ114、116がユーザの運動を検出することに応答して、センサ114、116、ロケータ142、及び/又は両方は、運動をプロセッサ112に送信する。218では、センサ116及び/又はロケータ142によって検出されたものと同じ挙動で移動するようにアイコン302を投影するように、及び/又はセンサ114から検出された運動に基づいてユーザディスプレイ122上のユーザのビューを変更するようにプロセッサ112がヘッドセット120に命令する。この例示的実施形態では、アイコン302は、コントローラ130が上下に、左右に、内外に、及び/又は回転して移動することが検出された場合に、ユーザに対して上下に、左右に、及び/又は回転するなどで移動することになる。220では、センサ116がユーザの運動を検出しないことに応答して、センサ114、116、ロケータ142、及び/又はこれらの全ては、運動がないことをプロセッサ112に送信する。プロセッサ112は、選択された実験室シミュレーション300、500、700をユーザディスプレイ122上に投影するという命令を維持する。選択された実験室シミュレーション300、500、700は、212での場合のようにコントローラ130が検出された時にアイコン302を含み、又は210での場合のようにコントローラが検出されない時にアイコン302を含まない。
顕微鏡シミュレーション300
図4Aに示すのは、対話型顕微鏡シミュレーション300での仮想現実システム100の使用方法400である。402では、ユーザが対話型顕微鏡シミュレーション300を選択したことを示す信号をプロセッサ112が受信する(図3Aを参照されたい)。404では、プロセッサ112は、顕微鏡322の画像を発生させる段階を含む顕微鏡シミュレーション300を発生させ、ユーザディスプレイ122に顕微鏡シミュレーションを表示するように命令する。406では、プロセッサ112は、下記で議論する式1~式11を計算することによって初期顕微鏡ビュー330を発生させ、ユーザディスプレイにこのビューを表示するように命令する。顕微鏡ビューは、現実世界で顕微鏡のレンズを覗き込んだ時にユーザが見ることになるものを示すヘッドアップディスプレイを含む。初期顕微鏡ビューは、ユーザ入力の前のビューを含み、その後の変更されたビューは、ユーザ入力を含むビューを含む。別の実施形態では、コントローラ130がホイール容積内であるという信号をセンサ116がプロセッサ112に送る。ホイール容積は、仮想現実顕微鏡322の顕微鏡起動距離(例えば、6インチから12インチの間)を定める直交座標系を含む。顕微鏡起動距離は、x軸とy軸とz軸とに沿って延びる3次元容積を定める。408では、プロセッサ112は、フォーカスアイコン304、横アイコン306、縦アイコン308、対物アイコン310、及び/又はオイル滴下器334(例えば、図3Aを参照されたい)を発生させ、ユーザディスプレイ122にこれらのアイコンを表示するように命令する。段階404~410は、いずれの順序でも実施することができ、及び/又は同時に実施することができる。別の例示的実施形態では、プロセッサ112は、コントローラ130が顕微鏡起動距離内で検出されることに応答して、ユーザディスプレイ122にフォーカスアイコン304、横アイコン306、縦アイコン308、対物アイコン310、及び/又はオイル滴下器334を表示するように命令する。410では、プロセッサ112は、フォーカスアイコン304、横アイコン306、縦アイコン308、対物アイコン310、及び/又はオイル滴下器334に対応する直交座標系内のホイール起動容積324、326、328、330及びオイル起動容積344(図3F、図3Aを参照されたい)を指定する。この例示的実施形態では、ホイール起動容積324、326、328、330は、それぞれのアイコンが位置付けられた中心の場所(座標0,0,0)又はそれぞれのアイコンの中心点からx軸とy軸とz軸とに沿って周囲に広がる3次元空間座標の容積(以下では、他に定めない限り「容積」)を含む。この実施形態では、ホイール起動容積324、326、328、330は、x軸に沿って1インチから約7インチの間、y軸に沿って1インチから約7インチの間、及び/又はz軸に沿って1インチから約7インチの間だけ延び、この場合、その範囲に定められる容積は、それぞれのホイール起動容積を含む。垂直空間でのインチは、ユーザによって知覚される距離に基づいている。412では、センサ116が運動を検出する。
フォーカスホイール314
414では、センサ116は、フォーカスアイコン304によって定められるフォーカスホイール容積324(図3A、図3F)内の運動を検出する。416では、センサ116がフォーカスホイール容積324内の運動を検出することに応答して、プロセッサは、フォーカスホイール314を発生させ、ユーザディスプレイ122にフォーカスホイール314を表示するように命令する(図3Bを参照されたい)。この例示的実施形態では、プロセッサ112は、フォーカスホイール314を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を表示し続けるようにユーザディスプレイ122に命令する。別の例示的実施形態では、プロセッサ112は、フォーカスホイール314を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を消去するようにユーザディスプレイ122に命令する。
セクション線A-Aから継続して図4Bでの例示的方法400内で継続する時に、436では、仮想現実システム100は、センサ116がフォーカスホイール座標系内での運動を検出している間に、ユーザが触知要素118と対話しているかを決定する。438では、ユーザが触知要素118と対話していないこと及び/又はセンサ116がフォーカスホイール座標系内での運動を検出していないことに応答して、プロセッサは、ユーザディスプレイ122にフォーカスホイール314の提示を維持するように命令する。430、432では、図4Aに示すように、セクション線E-Eでは、センサ130がそれぞれのホイール座標系の範囲外での運動を検出すること及び/又はユーザが触知要素118を係合解除することに応答して、プロセッサ112は、フォーカスアイコン304、横アイコン306、縦アイコン308、対物アイコン310、及び/又はオイル滴下器334を表示する状態に復帰するようにユーザディスプレイ122に命令し、フォーカスホイール314の提示を消去する。
440では、プロセッサは、初期顕微鏡ビュー330及び/又は他のアイコンとのユーザ対話(図3A及び図3K~図3Nを参照されたい)に基づいて変更された顕微鏡ビューを発生させ、ユーザディスプレイ122にこれらのビューを表示し続けるように命令する。442では、プロセッサ112は、対物レベルを識別し、この場合、対物レベルは、下記で説明するユーザによる変更を受けていない時にデフォルトの対物レベル(例えば、10×の倍率)に留まる。444では、センサ116は、フォーカスホイール314の座標系内での運動速度を検出する。450では、フォーカスホイール314の座標系内での運動速度が速度閾値(例えば、0)を下回っていることに応答して、プロセッサ112は、静止したままに留まっているフォーカスホイール314を示すようにユーザディスプレイ122に命令し、更に段階440に示した顕微鏡ビュー330を示し続けるように命令する。446では、フォーカスホイール314の座標系内での運動速度が速度閾値(例えば、0)を上回っていることに応答して、プロセッサ112は、回転するフォーカスホイール314を示すようにユーザディスプレイ122に命令し、識別した対物レベル及び/又は運動速度/回転程度に基づいて顕微鏡ビュー330を発生させ、ユーザディスプレイ122にこのビューを示すように命令する。フォーカスホイール314が、その初期位置から時計周り又は反時計周りのいずれかに既に180度回転されている場合に、プロセッサ112は、移動するフォーカスホイールを示すことを止めるようにユーザディスプレイ122に命令する。この例示的実施形態では、初期位置は0.5に等しい。180度の時計周り回転は1に等しく、180度の反時計周り回転は0.0に等しい。448では、プロセッサ112は、下記の式1及び式2を利用してスライド不鮮明度及び細菌不鮮明度を計算する。スライド不鮮明度及び細菌不鮮明度は、変数:no_oil_multiplier及びフォーカスホイール314の回転程度を利用し、次式に基づいて計算される。
式1:
slide_blurriness=(1-(1-abs(focus_wheel-SLIDE_FOCUS_LEVEL))*no_oil_multiplier)*objective_level
式2:
bacteria_blurriness=(1-(1-abs(focus_wheel-BACTERIA_FOCUS_LEVEL))*no_oil_multiplier)*objective_level
上式中のfocus_wheelは、センサ116がプロセッサ112に送信するフォーカスホイール314の回転程度であり、0度から360度の回転に対応する0.0と1.0の間で変化し、SLIDE_FOCUS_LEVELは、定数であり(下記の表1を参照されたい)、no_oil_multiplierは、1又は0.9という値であり、この場合、1は、ユーザがオイルを付加したこと又は対物が100×に設定されていないことを示し、0.9は、ユーザがオイルをスライドに付加しておらず、対物が100×にあることを示し、objective_levelは、デフォルト対物レベル又は入力対物レベル(例えば、10X、25X、50X、100Xの倍率)であり、これらの変数レベルに対する値を下記の表1に列記する。この対物値はメモリに格納され、プロセッサ112は、セッション内で行われたいずれかの変更に基づいてメモリにアクセスする。プロセッサ112は、格納された対物レベルを式1及び式2に適用する。absは、絶対値である。Slide_blurriness及びbacteria_blurrinessは、0.0の最小値を有する浮動小数点数であり、これは、顕微鏡ビュー330の後の計算において鮮明な画像をもたらす。不鮮明度変数が増大すると、得られる画像はより不鮮明になる。
(表1)
Figure 2022513578000002
最終顕微鏡ビュー330を発生させるために、プロセッサ112によっていくつかのソース画像が利用される。これらのソース画像を表2に列記する。
(表2)
Figure 2022513578000003
更に、変数を下記の表3に定める。
(表3)
Figure 2022513578000004
452では、プロセッサ112は、下記の式3及び式4を利用してスライド画像及び細菌画像を計算する。スライド342のどの部分を顕微鏡ビュー330内に表示するかを決定するために、プロセッサ112が以前に1回のセッションで受信した位置情報(例えば、下記で議論する横ホイール又は縦ホイール316,318を用いた入力)が最初に適用されることになることに注意されたい。スライド画像及び細菌画像は、次式を用いて計算される。
式3
slide_image_b=disc_blur(slide_image_z,kernel_image,slide_blurriness)
式4
bacteria_image_b=disc_blur(bacteria_image_z,kernel_image,bacteria_blurriness)
上式中のdisc_blurは、円形カーネルと画像の畳み込みを含む標準の画像処理フィルタ演算であり、slide_image_zは、下記で議論する式6及びそれに続く式8から導出され、bacteria_image_zは、下記で議論する式7及びそれに続く式9から導出される。454では、プロセッサ112は、最初に3つ(3)の画像を互いに掛け合わせ、次いで、vignette_maskに対してアルファチャネル(透明度)を設定することによってビネットを適用し、更に下式を利用して顕微鏡ビュー330を発生させることにより、下記の式5、式10、及び11に基づいて変更された顕微鏡ビューを計算及び発生させる。
式5
Microscope View_full=slide_image_b*bacteria_image_b*targeting_crosshair_image
式10
Microscope_view_full・alpha=vignette mask
式11
顕微鏡ビュー330=Microscope_view_full
targeting_crosshair_imageを図3Rに例示し、vignette_imageを図3Qに示す(上述の表2を参照されたい)。プロセッサ112は、ユーザディスプレイ122に初期顕微鏡ビュー330(図3L1を参照されたい)又は調節された顕微鏡ビュー(図3L2~図3L5、図3M1~図3M4を参照されたい)を表示するように命令する。プロセッサ112は、ユーザディスプレイ122に計算した不鮮明度を有するスライド画像を顕微鏡ビュー330内に表示するように命令する。不鮮明度は、disc blurへの入力の一部として使用される変数である。disc blurは、標準のグラフィック処理技術である。図3Kに示す例示的実施形態では、不鮮明である変更された顕微鏡ビュー330を発生させるために、フォーカスホイール314がユーザによって利用されている。方法400の図4Bに戻ると、本方法は段階436に戻り、そこでユーザは、フォーカスホイール314の追加の調節(段階440~454)を用いて進行することができ、又は段階338、430、432、及び434を用いて進行することによって別のホイール316、318、320に進行するか又はオイル滴下器334を利用することができる。
横ホイール316
図4Aに示す方法400の418では、センサ116は、横アイコン306によって定められる横ホイール容積326(図3A、図3F)内の運動を検出する。一例示的実施形態では、センサ116は、横ホイール容積326の前にフォーカスホイール容積324内の運動を検出し、プロセッサは、方法400の段階440~445に基づいて変更した顕微鏡ビューを格納し、このビューを提示する(例えば、フォーカスホイール314とのユーザ対話によって発生されたフォーカスを提示する)ようにユーザディスプレイ122に命令する。別の例示的実施形態では、プロセッサ112は、方法400の段階440~445に基づく入力を受信しなかった場合などに、ユーザディスプレイ122に初期顕微鏡ビュー330(図3L1を参照されたい)を表示するように命令する。420では、センサ116が横ホイール容積326内の運動を検出することに応答して、プロセッサが横ホイール316を発生させ、ユーザディスプレイ122に横ホイール316を表示する(図3Cを参照されたい)ように命令する。この例示的実施形態では、プロセッサ112は、横ホイール316を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を表示し続けるようにユーザディスプレイ122に命令する。別の例示的実施形態では、プロセッサ112は、横ホイール316を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を消去するようにユーザディスプレイ122に命令する。
セクション線B-Bから図4Cの例示的方法400に続き、456では、センサ116が横座標系内での運動を検出する間に、仮想現実システム100は、ユーザが触知要素118と対話しているかを決定する。458では、ユーザが触知要素118と対話していないこと及びセンサ116が横ホイール座標系内での運動を検出していないことに応答して、プロセッサ112は、ユーザディスプレイ122に横ホイール316の提示を維持するように命令する。図4Aでセクション線E-Eの場所に示す430、432では、センサ116がそれぞれのホイール座標系の範囲外での運動を検出すること及びユーザが触知要素118を係合解除することに応答して、プロセッサ112は、フォーカスアイコン304、横アイコン306、縦アイコン308、対物アイコン310、及び/又はオイル滴下器334を表示する状態に復帰するようにユーザディスプレイ122に命令する。
460では、プロセッサは、初期顕微鏡ビュー330及び/又は他のアイコンとのユーザ対話(図3A及び図3K~図3Nを参照されたい)に基づいて変更された顕微鏡ビューを発生させ、ユーザディスプレイ122にこれらのビューを表示し続けるように命令する。
462では、センサ116は、横ホイール座標系内での運動速度を検出する。466では、横ホイール316の座標系内での運動速度/回転程度が速度閾値を上回っていることに応答して、プロセッサ112は、ユーザディスプレイ122に回転する横ホイール316を示すように命令し、運動速度/回転程度に基づいて顕微鏡ビュー330を発生させ、ユーザディスプレイ122にこのビューを示すように命令する。プロセッサ112は、ユーザに向けて又はユーザから離れるように移動する顕微鏡ステージ343及びスライド342(図3G、図3L2~図3L5を参照されたい)を示すようにユーザディスプレイ122に更に命令する。464では、横ホイール316の座標系内での運動速度が速度閾値を下回っていることに応答して、プロセッサ112は、ユーザディスプレイ122に静止したままに留まっている横ホイール316を示すように命令し、更に段階460に示した顕微鏡ビュー330を示し続けるように命令する。468では、プロセッサ112は、横ホイール314の回転に基づいて顕微鏡ビューの横移動を計算し、以下の式によって計算した横距離だけ移動するスライド342の画像を顕微鏡ビュー330内に表示するようにユーザディスプレイ122に命令する。470では、プロセッサ112は、下記の式6及び式7を利用して顕微鏡ビューの横移動を計算する。画像slide_image_t及びbacteria_image_tは、次式を用いて計算される。
式6
slide_image_t=translate(slide_image_source,stage_x,stage_y)
式7
bacteria_image_t=translate(bacteria_image_source,stage_x,stage_y)
slide_image_t及びbacteria_image_tは、ソース画像をシフトして切り取る関数translateを利用して計算される。stage_yは、横ホイール316の運動速度/回転程度に依存する変数であり、stage_yが1よりも大きい場合はstage_yは1に等しく、stage_yが0よりも小さい場合はstage_yは0に等しい。例示的実施形態では、stage_yは0.5で始まり、1回の時計周り回転がstage_y=1.0に対応し、1回の反時計周り回転がstage_y=0.0に対応する。stage_xは一定に留まり、かつ縦ホイール318の移動に依存する。
472では、顕微鏡ビュー330の移動がスライド342の単一象限342a、342b、342c、342d(図3I及び図3Nを参照されたい)内のものであることに応答して、プロセッサ112は、サンプル識別ラベル(例えば、象限に存在する細菌のグラム染色及び/又は形状、球菌又は桿菌、又は象限識別子、例えば、対照+、サンプル1)を発生させ、ユーザディスプレイ122にこのラベルを表示するように命令する。図3Nに示す例示的実施形態では、顕微鏡ビュー330は、単一象限内にある。顕微鏡ビュー330の移動がスライド342の単一象限342a、342b、342c、342dの範囲外のものであることに応答して、プロセッサ112は、サンプル識別ラベルを発生させない又はユーザディスプレイ122にそれを表示するように命令しない。
474では、プロセッサ112は、顕微鏡ビューを通して見た画像のズーム又は倍率を下記の式8及び式9を利用して計算する。slide_image_z及びbacteria_image_zは、次式を用いて計算される。
式8
slide_image_z=zoom(slide_image_t,stage_x,stage_y,objective_magnification)
式9
bacteria_image_z=zoom(bacteria_image_t,stage_x,stage_y,objective_magnification)
slide_image_z及びbacteria_image_zは、現在のstage_y及びstage_xの場所を中心として現在の対物レベルに基づいて画像をスケーリングする関数zoomを利用して計算される。stage_yは、式6及び式7に関して上述したものと同じ変数である。stage_xは一定に留まり、かつ縦ホイール318の移動に依存する。objective_magnificationは、顕微鏡上に設定されている現在の対物に対応し、10×では10.0であり、40Xでは40.0であり、75Xでは75.0であり、100Xでは100.0である。
476では、プロセッサ112は、上述の式3及び式4を用いてslide_image_b及びbacteria_image_bを計算し、次いで、上述の式5、式10、及び式11を利用して顕微鏡ビュー330を計算し、ユーザ及び横ホイール316の運動によって引き起こされた横移動に対応する顕微鏡ビュー330を表示するようにユーザディスプレイ122に命令する。図3Lに示す例示的実施形態では、象限342c、342dの上の部分のみが見えるようにスライド342が方向Aに沿って移動されるように変更された顕微鏡ビュー330を発生させるために、ユーザによって横ホイール316が利用されている。図3L2~図3L3に示す例示的実施形態では、スライド342が方向Aに沿って最大距離だけ移動されるように変更された顕微鏡ビュー330を発生させるために、ユーザによって横ホイール316が利用されている。図3L4~図3L5に示す例示的実施形態では、スライド342が方向Cに沿って最大距離だけ移動されるように変更された顕微鏡ビュー330を発生させるために、ユーザによって横ホイール316が利用されている。方法400は段階456に戻り、そこでユーザは、横ホイール316を再度調節する段階(段階460~476)を用いて進行することができ、又は段階458、430、432、及び434を用いて進行することによって別のホイール314、318、320又はオイル滴下器334に進行することができる。
縦ホイール318
図4Aに示す方法400の422では、センサ116は、縦アイコン308によって定められる縦ホイール容積328(図3A、図3F)内の運動を検出する。一例示的実施形態では、センサ116は、縦ホイール容積328の前にフォーカスホイール容積324及び/又は横ホイール容積326内の運動を検出し、プロセッサは、方法400の段階440~445及び/又は460~476に基づいて変更した顕微鏡ビューを格納し、このビューを提示する(例えば、ユーザによるいずれかのフォーカス入力又は横入力が顕微鏡ビュー内に反映される)ようにユーザディスプレイ122に命令する。プロセッサ112が方法400の段階440~445及び460~476に基づく入力を受信しなかったなどの別の例示的実施形態では、プロセッサ112は、ユーザディスプレイ122に初期顕微鏡ビュー330を表示するように命令する。
422では、センサ116は、縦アイコン308によって定められる縦ホイール容積328(図3A、図3D)内の運動を検出する。424では、センサ116が縦ホイール容積328内の運動を検出することに応答して、プロセッサが縦ホイール318を発生させ、ユーザディスプレイ122に縦ホイール318を表示する(図3Dを参照されたい)ように命令する。
セクション線C-Cから図4Dの例示的方法400に続き、478では、センサ116が縦ホイール座標系内での運動を検出する間に、仮想現実システム100は、ユーザが触知要素118と対話しているかを決定する。479では、ユーザが触知要素118と対話していないこと及びセンサ116が縦ホイール座標系内での運動を検出していないことに応答して、プロセッサ112は、ユーザディスプレイ122に縦ホイール318の提示を維持するように命令する。この例示的実施形態では、プロセッサ112は、縦ホイール318を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を表示し続けるようにユーザディスプレイ122に命令する。別の例示的実施形態では、プロセッサ112は、縦ホイール318を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を消去するようにユーザディスプレイ122に命令する。図4Aでセクション線E-Eの場所に示す430、432では、センサ116がそれぞれのホイール座標系の範囲外での運動を検出すること、及び/又はユーザが触知要素118を係合解除することに応答して、プロセッサ112は、フォーカスアイコン304、横アイコン306、縦アイコン308、対物アイコン310、及び/又はオイル滴下器334(図3Aを参照されたい)を表示する状態に復帰するようにユーザディスプレイ122に命令する。
480では、プロセッサは、初期顕微鏡ビュー330(図3L1を参照されたい)及び/又は他のアイコンとのユーザ対話(図3A及び図3K~図3Nを参照されたい)に基づいて変更された顕微鏡ビュー(図3M1~図3M4を参照されたい)を発生させ、ユーザディスプレイ122にこれらのビューを表示し続けるように命令する。481では、センサ116は、縦ホイール318の座標系内での運動速度/回転程度を検出する。483では、縦ホイール318の座標系内での運動速度が速度閾値を上回っていることに応答して、プロセッサ112は、ユーザディスプレイ122に回転する縦ホイール318を示すように命令し、運動速度/回転程度に基づいて顕微鏡ビュー330を発生させ、ユーザディスプレイ122にこのビューを示すように命令する。482では、縦ホイール318の座標系内での運動速度/回転程度が速度閾値を下回っていることに応答して、プロセッサ112は、静止したままに留まっている縦ホイール318を示すようにユーザディスプレイ122に命令し、更に段階480で表示した顕微鏡ビュー330を示し続けるように命令する。プロセッサ112は、左又は右に移動する顕微鏡ステージ343及びスライド342(図3G、図3M1~図3M4を参照されたい)を示すようにユーザディスプレイ122に更に命令する。484では、プロセッサ112は、縦ホイール318の回転に基づいて顕微鏡ビューの縦移動を計算し、以下の式によって計算した縦距離だけ移動するスライド342の画像を顕微鏡ビュー内に表示するようにユーザディスプレイ122に命令する。485では、プロセッサ112は、上述の式6及び式7を利用して顕微鏡ビューの縦移動(例えば、平行移動した画像slide_image_t及びbacteria_image_t)を計算する。
slide_image_t及びbacteria_image_tは、stage_xが縦ホイール318の運動速度に依存する変数であることを除き、上述の式6及び式7を用いて計算した横移動に関して上述したものと同じ方式で計算される。例示的実施形態では、stage_xは0.5で始まり、1回の時計周り回転がstage_x=1.0に対応し、1回の反時計周り回転がstage_x=0.0に対応する。stage_yは一定に留まり、かつ横ホイール316の移動に依存する。
486では、顕微鏡ビュー330の移動がスライド342の単一象限342a~342d内のものであること(図3Jを参照されたい)に応答して、プロセッサ112は、サンプル識別ラベル(図3Nを参照されたい)を発生させ、ユーザディスプレイ122にこのラベルを表示するように命令する。顕微鏡ビュー330の移動がスライド342の単一象限342a~342dの範囲外のものであることに応答して、プロセッサ112は、サンプル識別ラベルを発生させない又はユーザディスプレイ122にそれを表示するように命令しない。487では、プロセッサ112は、図4Cに示す段階474において上述した式8及び式9を利用して顕微鏡ビューのズームを計算する。
stage_xは、式6及び式7に関して上述したものと同じ変数である。stage_yは一定に留まり、かつ横ホイール316の移動に依存する。487では、プロセッサ112は、上述の式3及び式4を用いてslide_image_b及びbacteria_image_bを計算し、次いで、上述の式5、式10、及び式11を利用して顕微鏡ビュー330を計算し、ユーザ及び縦ホイール318の運動によって引き起こされた横移動に対応する顕微鏡ビュー330を表示するようにユーザディスプレイ122に命令する。図3Mに示す例示的実施形態では、象限342a、342cの横の部分のみが見えるようにスライド342が方向Bに沿って移動されるように変更された顕微鏡ビュー330を発生させために、ユーザによって縦ホイール318が利用されている。図3M1~図3M2に示す例示的実施形態では、スライド342が方向Dに沿って最大距離だけ移動されるように変更された顕微鏡ビュー330を発生させるために、ユーザによって縦ホイール3186が利用されている。図3M3~図3M4に示す例示的実施形態では、スライド342が方向Bに沿って最大距離だけ移動されるように変更された顕微鏡ビュー330を発生させるために、ユーザによって縦ホイール318が利用されている。
方法400は段階478に戻り、そこでユーザは、再度縦ホイール318を調節する段階を用いて進行することができ、又は段階479、430、432、及び434を用いて進行することにより、ユーザは、フォーカスホイール314(段階436~454)又は横ホイール316(段階460~476)に進行することができ、又は対物ホイール320又はオイル滴下器334に進行することができる。
対物ホイール320
426では、センサ116は、対物アイコン310によって定められる対物ホイール容積332(図3A、図3F)内の運動を検出する。428では、センサ116が対物ホイール容積332内の運動を検出することに応答して、プロセッサが対物ホイール320を発生させ、ユーザディスプレイ122に対物ホイール320を表示する(図3Eを参照されたい)ように命令する。
セクション線D-Dから図4Eの例示的方法400に続き、489では、センサ116が対物ホイール座標系内での運動を検出する間に、仮想現実システム100は、ユーザが触知要素118と対話しているかを決定する。490では、ユーザが触知要素118と対話していないこと、及び/又はセンサ116が対物ホイール座標系内での運動を検出していないことに応答して、プロセッサは、ユーザディスプレイ122に対物ホイール320の提示を維持するように命令する。この例示的実施形態では、プロセッサ112は、対物ホイール320を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を表示し続けるようにユーザディスプレイ122に命令する。別の例示的実施形態では、プロセッサ112は、対物ホイール320を表示する時にアイコン304、406、308、310及び/又はオイル滴下器334を消去するようにユーザディスプレイ122に命令する。図4Aでセクション線E-Eの場所に示す430、432では、センサ116がそれぞれのホイール座標系の範囲外での運動を検出すること及びユーザが触知要素118を係合解除することに応答して、プロセッサ112は、フォーカスアイコン304、横アイコン306、縦アイコン308、対物アイコン310、及び/又はオイル滴下器334を表示する状態に復帰するようにユーザディスプレイ122に命令する。
491では、プロセッサは、初期顕微鏡ビュー330及び/又は他のアイコンとのユーザ対話(図3A及び図3K~図3Nを参照されたい)に基づいて変更された顕微鏡ビューを発生させ、ユーザディスプレイ122にこれらのビューを表示し続けるように命令する。492では、センサ116は、対物ホイール座標系内での運動を検出する。493では、対物ホイール320の座標系の範囲の運動が回転閾値を上回っていることに応答して、プロセッサ112は、ユーザディスプレイ122に回転する対物ホイール320及びレンズ330A~330C(図3G~図3Hを参照されたい)を示すように命令し、回転運動度に基づいて顕微鏡ビュー330を発生させ、ユーザディスプレイ122にそれを示すように命令する。図3G及び図3Hの例示的実施形態では、第1のレンズ330Aが第1の対物レベル(例えば、10×)に対応し、第2のレンズ330Bが第2の対物レベル(例えば、40×)に対応し、第3のレンズ330Cが第3の対物レベル(例えば、100×)に対応する。当業者は、様々な対物レベル(例えば、35×、55×、75×のような)を有するより多いか又はより少ないレンズが存在することが可能であることを認めるであろう。494では、対物ホイール座標系の範囲の運動が回転閾値を下回っていることに応答して、プロセッサ112は、静止したままに留まっている対物ホイール320及びレンズ330A~330C(図3G~図3Hを参照されたい)を示すようにユーザディスプレイ122に命令し、更に段階491で表示した顕微鏡ビュー330を示し続けるように命令する。495では、プロセッサ112は、選択された対物レベルを運動度に基づいて決定し、ユーザディスプレイ122にスライド342の上に対応するレンズ330A~330Cを表示するように命令する。
図4Fでセクション線F-Fの場所に示す499Aでは、対物レベルが100×を超えているか又はそれに等しいことに応答して、プロセッサ112は、オイルがスライド342上に存在するかを決定するためにメモリにアクセスする。オイルが存在することに応答して、プロセッサ112は、変数no_oil_multiplierを1.0に設定し、図4Eのセクション線G-Gに示す段階497に進行する。499Bでは、オイルが存在しないことに応答して、プロセッサ112は、変数no_oil_multiplierを0.9に設定し、オイル警告333(図3H1を参照されたい)を発生させ、ユーザディスプレイ122にそれを表示するように命令する。一例示的実施形態では、オイル警告333は、ユーザが対物レベルを100×に切り換えようとする時に(例えば、顕微鏡対物が100×に変更される前に)プロセッサ112の命令に基づいてユーザディスプレイ122上でユーザに示されている。別の例示的実施形態では、オイル警告333は、オイルが必要であることを説明するテキストを含む。更に別の例示的実施形態では、オイル警告333は、オイル滴下器に注意を引きつける光、移動、音などを提示することなどによってオイル滴下器334(図3A、図3Hを参照されたい)に注意を向ける段階を含む。499Cでは、ユーザが対物レベルを100×から変化させることに応答して、プロセッサ112は、オイルをスライド342に付加することができると命令する。100×から切り換える時に、no_oil_multiplierが1.0に設定される。別の例示的実施形態では、ユーザが100×から対物レベルを変化させることに応答して、プロセッサ112は、オイルをスライド342に付加する命令(例えば、テキスト、実演映像のような)を発生させる。499Dでは、ユーザが対物レベルを100×から変化させないことに応答して、プロセッサ112は、対物レベルを変更する命令(例えば、テキスト、実演映像のような)を発生させる。100×の対物がスライド342の上に設定されている時にオイルを追加する余地がなくなるので、プロセッサ112は、対物が100×である場合にオイルの追加を禁止する。499Eでは、センサ116は、オイル滴下器起動容積344内にアイコン302を検出しないこと、及び/又はユーザが触知要素118と対話していないことに応答して、プロセッサ112は、位置を維持している(例えば、移動していない)オイル滴下器334を表示するようにユーザディスプレイ122に命令する。ユーザがオイル滴下器334をオイル滴下器起動容積344に戻し、触知要素118と対話した場合に、プロセッサ112は、ユーザディスプレイ122にオイル滴下器をその元の位置に戻すように命令する。
499Fでは、ユーザが触知要素118と対話する間にセンサ116がオイル滴下器起動容積344内でアイコン302を検出することに応答して、プロセッサ112は、ユーザディスプレイ122にオイル滴下器334を保持するアイコンを表示するように命令する。オイル滴下器起動容積344はホイール起動容積と同じか又は類似であり、この場合滴下器ボトルが座標点(0,0,0)を含む。この例示的実施形態では、アイコン302によって保持されているオイル滴下器334は、ユーザディスプレイ122内でアイコンと共に移動するオイル滴下器を含む。
499Gでは、センサ116が滴下器解除容積346(図3Hを参照されたい)内にオイル滴下器334を検出しないことに応答して、プロセッサ112は、オイルを保持するオイル滴下器334を表示するようにユーザディスプレイ122に命令する(例えば、オイル滴下器は、滴下器起動容積346の範囲外でオイルを滴下することにはならない)。この例示的実施形態では、滴下器解除容積446は、スライドのすぐ上のいずれかの区域(例えば、スライド342の境界の上のいずれかの平面)である。499Hでは、センサ116が滴下器解除容積346内でオイル滴下器334を検出し、ユーザが触知要素118と対話することに応答して、プロセッサ112は、オイル滴下器334がスライド342上にオイルを滴下する場所を表示し、オイルが存在することを示すようにユーザディスプレイ122に命令する。
図4Eに示す497では、対物レベルが100×を下回っていること、又は図4Fに示す段階499a又は段階499Fにおいてオイルが存在し、図4Eのセクション線G-Gに続くことに応答して、プロセッサ112は、上述の図1及び図2を利用してスライド不鮮明度及び細菌不鮮明度を計算する。スライド不鮮明度及び細菌不鮮明度は、変数no_oil_multiplierを利用して計算され、オイルは段階499cにおいて追加されて存在し、オイルが存在する場合は1に等しく、495では、選択された対物レベルが100×よりも小さい場合にオイルは追加されていない。498では、プロセッサ112は、上述の式8及び式9、次いで、式3及び式4を利用してスライド画像及び細菌画像を計算する。499では、プロセッサ112は、3つ(3)の画像を互いに掛け合わせ、次いで、ビネットマスクに対して結果のアルファチャネルを設定し、これは、図示の対物レベルを有する顕微鏡ビュー330を発生させることにより、上述の式5、式10、及び式11に基づいて変更された顕微鏡ビューを計算及び発生させる。
図3Nに示す例示的実施形態では、スライド342が100×まで拡大され、それによって単一象限342a~342dのみが見えるように変更された顕微鏡ビュー330を発生させるために、ユーザによって対物ホイール320が利用されている。
方法400は489に戻り、そこでユーザは、再度対物ホイール320を調節する段階を用いて進行することができ、又は段階490、430、432、及び434を用いて進行することによってフォーカスホイール314(段階436~454)、横ホイール316(段階460~476)、縦ホイール318(段階478~488)、又はオイル滴下器334に進行することができる。
有利なことに、対話型顕微鏡シミュレーション300は、ユーザが高価な顕微鏡を破損することなく、更に顕微鏡が不足する可能性がある時にユーザが顕微鏡を利用することを可能にする必要なく顕微鏡に対してトレーニングすることを可能にする。更に、ユーザには、顕微鏡の基本的態様、及び当該顕微鏡を現実世界でどのように作動させるかを学習するのに理想的な当該顕微鏡の物理的特徴が示されている。これに加えて、ホイール起動容積は、精細な運動技能を必要とする可能性があって学習に対して障害になると考えられる小さいノブの調節によってではなく、コントローラ130による大きい運動を用いてユーザが顕微鏡を調節するための機能を提供する。
ストリーキングシミュレーション500
図6Aに示すのは、対話型ストリーキングシミュレーション500での仮想現実システム100の使用方法600である。602では、プロセッサ112は、ユーザが対話型ストリーキングシミュレーション500(図5A~図5Uを参照されたい)を選択したことを示す信号を受信する。604では、プロセッサ112は、第1のインジケータ(例えば、ユーザ入力が不在のままに維持された第1の外観)を有するソースプレート504、ストリーキングプレート520、ループ506、及び/又は加熱要素508を含む対話型ストリーキングシミュレーション500を発生させ、ユーザディスプレイ122にストリーキングシミュレーション500を表示するように命令する。606では、プロセッサ112は、非ストリークプレートビュー530(図5A、5Cを参照されたい)を発生させ、ユーザディスプレイ122にそれを表示するように命令する。プレートビュー530は、1又は2以上の定義区域を有する拡大ストリーキングプレート520を含む。図5Cに示す例示的実施形態では、拡大ストリーキングプレート520は、4つの区域/象限520A~530Dを定め、初期プレートビュー530は、ユーザから最も遠い上部分にある第1象限520A、ユーザに対して右部分にある第2象限520B、ユーザに最も近い底部分にある第3象限520AC、及び/又はユーザに対して左部分にある第4象限520Dを示している。初期プレートビュー530は、ユーザ入力の前のビューを含み、その後の変更された初期プレートビューは、ユーザ入力を含むビューを含む。
608では、プロセッサ112は、第1のインジケータ(例えば、図5A~図5Cを参照されたい)を有するソースプレート504、ストリーキングプレート520、ループ506、及び/又は加熱要素508を発生させ、ユーザディスプレイ122にこれらを表示するように命令する。段階604~610は、いずれの順序で実施することができ、及び/又は同時に実施することができる。
610では、プロセッサ112は、ソースプレート504、ストリーキングプレート520、ループ504、及び/又は加熱要素508にそれぞれ対応するストリーキングプレート容積532の第1の部分532a又は第2の部分532b(例えば、図5D~図5Hを参照されたい)、ソースプレート容積534(例えば、図5Iを参照されたい)、ループ起動容積538(例えば、図5Cを参照されたい)、及び/又は加熱起動容積540(例えば、図5Cを参照されたい)を直交座標系で指定する。
別の実施形態では、センサ116は、コントローラ130がストリーキングプレート容積532の第1の部分532a又は第2の部分532b内にある(例えば、図5D~図5Hを参照されたい)という信号をプロセッサ112に送る。ストリーキングプレート容積は、仮想現実ストリーキングプレート520のストリーキングプレート起動距離(例えば、6インチから12インチの間)を定める直交座標系を含む。ストリーキングプレート起動距離は、x軸とy軸とz軸とに沿って延びる3次元容積を定める。図5E~図5Gに示す例示的実施形態では、コントローラ130が第1の部分532a内にあるという信号を受信したプロセッサ112は、ユーザディスプレイ122にストリーキング持ち上げ矢印528を表示するように命令する。図5Hに示す例示的実施形態では、コントローラ130が第2の部分532b内にあるという信号を受信したプロセッサ112は、ユーザディスプレイ122にストリーキング回転矢印526を表示するように命令する。図5Iに示す例示的実施形態では、コントローラ130がソースプレート容積534内にあるという信号を受信したプロセッサ112は、ユーザディスプレイ122にソース持ち上げ矢印536を表示するように命令する。
別の例示的実施形態では、プロセッサ112は、コントローラ130が第1の部分532a、第2の部分532b、又はソースプレート容積534のうちの1つの範囲にあるという信号をセンサ116がプロセッサに送ることに応答して、ストリーキング持ち上げ矢印528、ストリーキング回転矢印526、及び/又はソース持ち上げ矢印536のうちの1つをそれぞれ表示するようにユーザディスプレイ122に命令する。
この例示的実施形態では、容積532A、532B、534、538、540、及び/又は542は、それぞれのアイコン(例えば、ストリーキングプレート520、ソースプレート504、ループ506、加熱要素508)が位置付けられた中心の場所(座標0,0,0)又はそれぞれのアイコンの中心点からx軸とy軸とz軸とに沿って周囲に広がる3次元容積を含む。この実施形態では、容積532A、532B、534、538、540、及び/又は542は、x軸に沿って1インチから約7インチの間、y軸に沿って1インチから約7インチの間、及び/又はz軸に沿って1インチから約7インチの間だけ延び、この場合その範囲に定められる容積は、それぞれの起動容積を含む。垂直空間でのインチは、ユーザによって知覚される距離に基づいている。612では、センサ116が運動を検出する。
ループ506
614では、センサ116は、ループ506によって定められるループ起動容積538(図5C)内の運動を検出する。616では、センサ116がループ起動容積538内での運動を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ループ506を保持するユーザアイコン502(例えば、上述したユーザアイコン302と同じか又は類似)を表示するようにユーザディスプレイ12に命令する。この実施形態では、ユーザアイコン502は、センサ116がループ起動容積538内での運動を検出している間にループを保持しているユーザが触知要素118と対話しているという信号をプロセッサ112が受信する時までループ504を保持し、この時に、プロセッサは、ユーザがループを手放し、ループがその初期位置(図5Bを参照されたい)に戻る場所を示すようにユーザディスプレイ122に命令する。プロセッサ112は、ループ504又は他の要素をユーザアイコン502で保持しているユーザが、それぞれの品目が下に置かれるまでいずれの追加の品目も取り上げることを許さない。617では、ユーザが触知要素118と対話していないこと、及び/又はセンサ116がループ起動容積538内の運動を検出していないことに応答して、プロセッサは、ユーザディスプレイ122に初期ストリーキングビュー530を維持するように命令する。一方で、612では、センサ116は、容積532A、532B、534、538、540、及び/又は542のうちのいずれかでの運動を検出することができる。
加熱要素508
618では、センサ116は、加熱要素508によって定められる加熱起動容積540(図5C)内の運動を検出する。622では、ユーザアイコン302がループ504を保持していることを仮想現実システム100が格納したことに応答して、プロセッサ112は、加熱要素508と対話するループ504(図5Jを参照されたい)を発生させ、ユーザディスプレイ122にそれを表示するように命令する。図6Bの例示的方法600において続くのは、ループ滅菌処理600aである。ループ滅菌処理600aは、図6Aのセクション線A-Aから続き、638では、センサ116が第1の加熱持続時間にわたってループ504を加熱容積540内で検出することに応答して、プロセッサは、第1フェーズ507aのループ加熱表示(例えば、色又は質感の変化、及び/又はテキストの加熱通知)を発生させる(図5Kを参照されたい)。一例示的実施形態では、第1の加熱持続時間は1秒と4秒の間にある。別の例示的実施形態では、第1の加熱持続時間は2秒である。第1フェーズ507aはループ温度に対応し、この場合ゼロから1までの数字がループに割り当てられる。ゼロは室温を表し、それに対して1は、ループが第1フェーズ507aにある時に対応する。640では、ユーザが加熱容積540内で第1フェーズ閾値を超えてループ506を保持しないことに応答して、プロセッサは、ループ504が滅菌されていないという命令(例えば、テキスト又は可聴音)を発生させ、ユーザディスプレイ122に命令(例えば、ループを滅菌する)を表示するように命令する。
617では、図6Aでセクション線E-Eの場所に示すように、ループが滅菌されていないとプロセッサ112が決定することに応答して、プロセッサは、ユーザディスプレイ122に初期ストリーキングビュー530を維持するように命令する。612では、ユーザがループ504を滅菌し損ねたことに応答して、センサ116は、容積532A、532B、534、538、540、及び/又は532のうちのいずれかでの運動を検出することができる。
642では、ユーザがループ506を加熱容積540内で第1フェーズ閾値を超えて保持することに応答して、プロセッサ120は、第1フェーズ509aの加熱要素表示(例えば、色又は質感の変化及び/又はテキストの加熱通知)を発生させる(図5Lを参照されたい)。一例示的実施形態では、第1フェーズ閾値は1秒と4秒の間である。別の例示的実施形態では、第1フェーズ閾値は5秒である。644では、ユーザがループ504を加熱容積540から取り出すことをセンサ116が検出しないことに応答して、プロセッサ112は、第1フェーズ507aのインジケータを有するループ504と第1フェーズ509aのインジケータを有する加熱要素508とを表示し続けるようにユーザディスプレイ122に命令する。
646では、ユーザがループ504を加熱容積540から取り出すことをセンサ116が検出したことに応答して、プロセッサ112は、初期表示段階の加熱要素508(図5Cを参照されたい)を表示する状態に復帰するようにユーザディスプレイ122に命令し、ループ506にゼロ細菌濃度(例えば、0という濃度)を割り当てる。648では、プロセッサ112は、第1の冷却持続時間の後に第1フェーズの冷却表示変化507b(図5Mを参照されたい)(例えば、色又は質感の変化、及び/又はテキストの冷却通知)を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、第1の冷却持続時間は1秒と2秒の間にある。別の例示的実施形態では、第1の冷却持続時間は1.5秒である。一例示的実施形態では、ループ504は、高輝度の白色、黄色のような高温色から比較的低輝度の黄色又はオレンジ色に色を変化させる。650では、プロセッサ112は、第2の冷却持続時間の後に第2フェーズの冷却表示変化507c(図5Nを参照されたい)(例えば、色又は質感の変化、及び/又はテキストの冷却通知)を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、第2の冷却持続時間は1秒と4秒の間にある。別の例示的実施形態では、第1の冷却持続時間は3.5秒である。一例示的実施形態では、ループ504は、比較的低輝度の黄色又はオレンジ色のような温暖色から更に低輝度の赤色又はオレンジ色に色を変化させる。
652では、プロセッサ112は、第2の冷却持続時間の後に初期表示(図5C、5Oを参照されたい)を表示する(例えば、色又は質感の変化及び/又はテキストは、ループがその初期温度に戻ったことを示す)ようにユーザディスプレイ122に命令し、ループ504が冷却閾値を超えて冷却されたことを格納する。当業者は、第1及び第2の冷却持続時間、及び/又は第1フェーズ閾値の時間幅又は限度をプロセッサ112への入力によって変更することができることを認めるであろう。
図6Aに示すように、617では、プロセッサは、ユーザディスプレイ122に初期ストリーキングビュー530を維持するように命令する。612では、センサ116は、容積532A、532B、534、538、540、及び/又は542のうちのいずれかでの運動を検出することができる。この場合、汚染行為(例えば、ループ504を非滅菌区域に接触させる)の不在時に、プロセッサ112は、ループ504が加熱要素508と加熱要素閾値を超えて対話し、冷却閾値を超えて冷却したことを格納する。
ソースプレート504
624では、センサ116は、ソースプレート504によって定められるソース容積534(図5I)内の運動を検出する。625では、キャップ510がソースプレート504から外れていないことに応答して、プロセッサ112は、キャップを取り外す命令(例えば、テキスト、映像、及び/又は音響)を発生させる。一例示的実施形態では、ソースプレート504上のキャップ510は、細菌コロニー504aへのアクセスを防止し、命令は発生されない。617では、ユーザがキャップ510を取り外さなかったことに応答して、プロセッサ112は、ユーザディスプレイ122に初期ストリーキングビュー530を維持するように命令する。一方、612では、センサ116は、容積532A、532B、534、538、540、及び/又は532のうちのいずれかでの運動を検出することができる。
図6Cでセクション線B-Bの場所に示す654では、センサ116がソース容積534内での運動を検出したという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にソース持ち上げ矢印536(図5Iを参照されたい)を表示するように命令する。センサ116がソース容積534内でのコントローラ130の継続的な存在を検出している間にユーザが触知要素118を起動したという信号を仮想現実システム100が受信しない時に、プロセッサ112は、ユーザディスプレイ122にソース持ち上げ矢印536を表示し続けるように命令する。
656では、センサ116がソース容積534内での運動を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にキャップ510を保持するユーザアイコン502(図5Pを参照されたい)を表示するように命令する。一例示的実施形態では、キャップ持ち上げ持続時間にわたってセンサ116がソース容積534内でのコントローラ130の継続的な存在を検出している間にユーザが触知要素118を作動し続けたという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にキャップ510を保持するユーザアイコン502を表示するように命令する。一例示的実施形態では、キャップ持ち上げ持続時間は1秒と5秒の間である。更に別の例示的実施形態では、センサ116がソース容積534から離れるコントローラ130の速度閾値よりも大きい運動を検出している間にユーザが触知要素118を作動し続けたという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にキャップ510を保持するユーザアイコン502を表示するように命令する。この実施形態では、速度閾値は、0.1フィート毎秒から約1.5フィート毎秒の間にある。当業者は、キャップ510を取り外すという命令を発生させるのに、上述した信号のあらゆる組合せをプロセッサ112を利用することができることを認めるであろう。657では、プロセッサ112は、最小にされたキャップ510を表示するようにユーザディスプレイ122に命令する。658では、ユーザがキャップ510を汚染閾値角度510aの範囲外に移動したという信号を仮想現実システム100が受信することに応答して、プロセッサ122は、ユーザディスプレイ122に汚染警告(例えば、テキスト、映像、及び/又は音響)を表示するように命令する。この例示的実施形態では、汚染閾値角度510aは、図5Pのx軸から0度と89度の間にある。この場合、キャップ510が汚染閾値角度510aを超えて延ばされることに応答して、空気中の細菌が重力の影響を受けてこのキャップ510の内側に着床する場合があり、それによってソースプレート504の中に汚染が引き起こされることになる。
ユーザがキャップ510を汚染閾値角度510a内に維持しているという信号を仮想現実システム100が受信することに応答して、例示的方法600は、セクション線C-Cから続く図6Aにおいて続けられ、プロセッサ122は、ループ504のステータス(例えば、ユーザアイコン502内の存在、ループの細菌全数、及び/又はループの温度)を識別する。
620では、プロセッサ112は、ループ504を保持するユーザアイコン502を格納したメモリを欠いていることに応答して、ループを取り上げるという命令(例えば、テキスト、映像、及び/又は音響)を発生させる。一例示的実施形態では、命令は発生されない。626では、プロセッサ112は、ループ504が加熱要素508と加熱要素閾値を超えて対話した(例えば、ループに0という細菌全数が割り当てられた)ことを格納したメモリを欠いていることに応答して、ループを加熱するという命令(例えば、テキスト、映像、及び/又は音響)を発生させる。628では、プロセッサ112は、ループ504が加熱要素508との対話から冷却要素閾値を超えて冷却したことを格納したメモリを欠いていることに応答して、ループを冷却するという命令(例えば、テキスト、映像、及び/又は音響)を発生させる。620、626、及び628から、方法600は617に続き、そこでプロセッサは、ユーザディスプレイ122にストリーキングビュー530を維持するように命令する。612では、センサ116は、容積532A、532B、534、538、540、及び/又は532のうちのいずれかでの運動を検出することができる。
630では、プロセッサ112が、ループ504を保持するユーザアイコン502を格納したメモリ、ループ504が加熱要素508と加熱要素閾値を超えて対話したことを格納したメモリ、及びループ504が加熱要素508との対話から冷却要素閾値を超えて冷却したことを格納したメモリを有することに応答して、プロセッサ112は、ソースプレート520の1又は2以上の細菌コロニー504aを支持する上面505(図5Cを参照されたい)へのアクセスを可能にする。一例示的実施形態では、コントローラ130が存在する時などに、プロセッサ122は、2つの触知要素118及び少なくとも2つのセンサ116から情報を受信し、第1のコントローラ130の場所を識別し、それに対応する第1のユーザアイコン502aと、第2のコントローラ130に対応する第2のユーザアイコン502bとを指定し、第1のユーザアイコン502aは、ループ504を保持中とすることができ、第2のユーザアイコン504bは、キャップ510、ストリーキングキャップ524、ソース持ち上げ矢印534、ストリーキング持ち上げ矢印528、ストリーキング回転矢印526、キャップ510、及び/又はストリーキングキャップ524(図5F~図5I、図5P~図5P1を参照されたい)と対話することができる。
セクション線D-Dから続く図6Dの例示的方法600において続けると、659では、ユーザが触知要素118と対話していないか又はセンサ116がコロニー容積542内での運動を検出しないという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ループ504保持するユーザアイコン502bとキャップ510を保持するユーザアイコン502aと(図5Pを参照されたい)を表示し続けるようにユーザディスプレイ122に命令する。660では、センサ116がコロニー容積542内での運動を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ソースプレートからコロニー504aを捕捉するループ506(図5O1~図5Pを参照されたい)を表示するようにユーザディスプレイ122に命令する。661では、ユーザが触知要素118を作動し続けたという信号又はセンサ116がソース容積534内でソースキャップ510を保持するユーザアイコン502に相関するコントローラ130の存在を検出しないという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にキャップ510を保持するユーザアイコン502(図5Pを参照されたい)を表示するように命令する。
662では、センサ116がソース容積534内でソースキャップ510を保持するユーザアイコン502に相関するコントローラ130の存在を検出している間にユーザが触知要素118を停止したという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、キャップ510でソースプレート504を再閉蓋する(図5Cを参照されたい)ユーザアイコン502を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、センサ116がキャップ交換持続時間にわたってソース容積534内でのコントローラ130の継続的な存在を検出している間にユーザが触知要素118を作動し続けたという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、キャップ510でソースプレート504を再閉蓋するユーザアイコン502を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、キャップ交換持続時間は1秒と5秒の間である。更に別の例示的実施形態では、センサ116がソース容積534に向うコントローラ130の速度閾値よりも大きい運動を検出している間にユーザが触知要素118を作動し続けたという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、キャップ510でソースプレート504を再閉蓋するユーザアイコン502を表示するようにユーザディスプレイ122に命令する。図6Aでセクション線Z-Zの場所に示す612では、センサ116は、容積532A、532B、534、538、540、及び/又は542のうちのいずれかでの運動を検出することができる。
ストリーキングプレート520
634では、センサ116は、ストリーキングプレート520によって定められるストリーキングプレート容積532の第2の部分532b(図5H)内の運動を検出する。図6Eの例示的方法600においてセクション線F-Fの場所で続くのは、ストリーキングプレート回転処理600bである。ストリーキングプレート回転処理600bは、図示のように663で始まる。663では、センサ116がストリーキングプレート容積532の第2の部分532b内でのコントローラ130の存在を検出している間にユーザが触知要素118と対話しているという信号を受信する仮想現実システム100がない時に、プロセッサ112は、ユーザディスプレイ122にストリーキングプレート520(図5Cを参照されたい)を表示し続けるように命令する。図6Aでセクション線Z-Zの場所に示す612では、センサ116は、容積532A、532B、534、538、540、及び/又は532のうちのいずれかでの運動を検出することができる。
664では、センサ116がストリーキングプレート容積532の第2の部分532b内でのユーザの存在を検出したことを仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にストリーキング回転矢印526(図5Hを参照されたい)を表示するように命令する。665では、センサ116がストリーキングプレート容積532の第2の部分532b内での運動を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、感知運動度に基づいて回転するストリーキングプレート520(図5Hを参照されたい)を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、センサ116がストリーキングプレート容積532の第2の部分532b内での運動を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にストリーキング回転矢印526の表示を中止するように命令する。別の例示的実施形態では、感知運動度は、コントローラ130の感知速度に基づいて決定され、第1の速度は、第1の回転程度に対応し、第1の速度が速いほど第1の回転程度は大きい。別の例示的実施形態では、感知運動度は、コントローラ130の回転移動に基づいて決定され、ユーザによる30度の回転移動により、プロセッサ112は、30度だけ回転するストリーキングプレート520(例えば、1:1の関係であるが、1:2、1:3のような関係を考えている)を表示するようにユーザディスプレイ122に命令する。当業者は、ストリーキングプレート520の回転程度を決定するのに感知速度と感知回転程度の組合せを使用することができることを理解するであろう。667では、ユーザが触知要素118と対話していない及び/又はセンサ116がストリーキングプレート容積532の第2の部分532b内でのコントローラ130の存在を検出しないという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ストリーキングプレート520の初期ビュー(図5Hを参照されたい)を維持するようにユーザディスプレイ122に命令する。
この実施形態では、プロセッサ112は、ユーザが触知要素と対話している間にストリーキングプレート容積532の第2の部分532b内での追加の運動を感知し、段階664、665、及び/又は667を繰り返すか又は段階663から図6Aでセクション線E-Eの場所に示す段階617へ、更に612に進行し、そこでセンサ116は、容積532A、532B、534、538、540、及び/又は542のうちのいずれかでの運動を検出することができる。
636では、センサ116は、ストリーキングプレート520によって定められるストリーキングプレート容積532の第1の部分532a(図5E)内の運動を検出する。図6Fの例示的方法600においてセクション線G-Gの場所で続くのは、ストリーキングプレートキャップ取り外し処理600cである。図示のように、ストリーキングプレートキャップ取り外し処理600cは668で始まる。図6Fでセクション線G-Gの場所にある668では、センサ116がストリーキングプレート容積532の第1の部分532a内でのコントローラ130の存在を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信しない時に、プロセッサ112は、ストリーキングプレート520(図5Cを参照されたい)を表示し続けるようにユーザディスプレイ122に命令する。図6Aでセクション線E-Eの場所に示す段階617、更に612では、プロセッサ112は、ユーザディスプレイ122に初期ストリーキングビュー530を表示するように命令し、センサ116は、容積532A、532B、534、538、540、及び/又は542のうちのいずれかでの運動を検出することができる。669では、ストリーキングプレート容積532の第1の部分532a内でのコントローラ130の存在の信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にストリーキング持ち上げ矢印528(図5F~図5Gを参照されたい)を表示するように命令する。
670では、ユーザが触知要素118と対話していない及び/又はセンサ116がストリーキングプレート容積532の第1の部分532a内でのコントローラ130の存在を検出していないという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にストリーキング持ち上げ矢印528(図5F~図5Gを参照されたい)を表示し続けるように命令する。671では、センサ116がストリーキングプレート容積532の第1の部分532a内での運動を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ストリーキングキャップ524を保持するユーザアイコン502b(図5P1を参照されたい)を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、センサ116がストリーキングプレート容積532の第2の部分532b内での運動を検出している間にユーザが触知要素118と対話しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122にストリーキング持ち上げ矢印528の表示を中止するように命令する。図5P1に示す例示的実施形態では、第1のユーザアイコン502aはループ506を保持しており、それに対して第2のユーザアイコン502bはストリーキングキャップ524と対話している。当業者は、第2のユーザアイコン502bがループ504を保持することができる及び/又は第1のユーザアイコン502aがストリーキングキャップ524と対話していることができること、更に、ストリーキングキャップ524が取り外し可能であることに対して1つのユーザアイコンがループを保持している必要がないことを理解するであろう。
672では、ユーザがストリーキングキャップ524を汚染閾値角度510aの範囲外に移動したという信号を仮想現実システム100が受信することに応答して、プロセッサ122は、ユーザディスプレイ122に汚染警告(例えば、テキスト、映像、及び/又は音響)(図5P1を参照されたい)を表示するように命令する。この場合、ストリーキングキャップ524が汚染閾値角度510aを超えて延ばされていることに応答して、空気中の細菌が重力の影響を受けてこのストリーキングキャップ524の内側に着床する場合があり、それによってストリーキングプレート520の中に汚染が引き起こされることになる。673では、ユーザがストリーキングキャップ524を汚染閾値角度510a内に維持しているという信号を仮想現実システム100が受信することに応答して、プロセッサ112は、ユーザディスプレイ122に最小にされたストリーキングキャップ524を表示するように命令する。
図6Fの例示的方法600において続くのは、ループ検証処理600dである。図示のように、ループ検証処理600dは674で始る。674では、プロセッサ112は、ストリーキングキャップ524を保持するユーザアイコン502を格納したメモリを欠いていることに応答して、ストリーキングキャップ524を取り外すという命令(例えば、テキスト、映像、及び/又は音響)を発生させる。一例示的実施形態では、ソースプレート504上にあるキャップ510は、細菌コロニー504aへのアクセスを妨げ、かつ命令は発生されない。675では、プロセッサ112は、ループ504を保持するユーザアイコン502を格納したメモリを欠いていることに応答して、ループを取り上げるという命令(例えば、テキスト、映像、及び/又は音響)を発生させる。一例示的実施形態では、ループ504は静止したままに留まり、かつ命令は発生されない。676では、プロセッサ112は、ループ504が加熱要素508と加熱要素閾値を超えて対話した(例えば、ループに0という細菌全数が割り当てられた)ことを格納したメモリを欠いていることに応答して、ループを加熱するという命令(例えば、テキスト、映像、及び/又は音響)を発生させる。一例示的実施形態では、命令は発生されない。677では、プロセッサ112は、ループ504が加熱要素508との対話から冷却要素閾値を超えて冷却したことを格納したメモリを欠いていることに応答して、ループを冷却するという命令(例えば、テキスト、映像、及び/又は音響)を発生させる。一例示的実施形態では、命令は発生されない。674、675、676、及び677から、方法600は、図6AのE-Eを通って617に続き、そこでプロセッサは、ユーザディスプレイ122に初期ストリーキングビュー530(例えば、初期ストリーキングビュー530は、過去のユーザ入力を含む)を維持するように命令する。612では、センサ116は、容積532A、532B、534、538、540、及び/又は532のうちのいずれかでの運動を検出することができる。
図6Gでセクション線H-Hの場所に示す678では、プロセッサ112は、ストリーキングキャップ524を保持するユーザアイコン502、ループ504を保持するユーザアイコン502を格納したメモリ、ループ504が加熱要素508と加熱要素閾値を超えて対話したことを格納したメモリ、及びループ504が加熱要素508との対話から冷却要素閾値を超えて冷却したことを格納したメモリを有し、センサ116がストリーキングプレート520の面容積522内での運動を検出することに応答して、プロセッサ112は、ストリーキングプレート520の面523とのループ504の対話の線パターン554を一連の中間地点550(図5R、図5Qを参照されたい)を用いて発生させ、ユーザディスプレイ122にそれを表示するように命令する。例示的実施形態では、プロセッサ112は、ループ504が加熱要素508と加熱要素閾値を超えて対話したことを格納したメモリ及び/又はループ504が加熱要素508との対話から冷却要素閾値を超えて冷却したことを格納したメモリの存在に関係なくストリーキングプレート520とのユーザ対話を可能にする。更に、プロセッサ112は、ストリーキングプレート520(図5P1を参照されたい)の細菌増殖をサポートすることになるストリーキングプレート520の上面523へのアクセスを可能にする。
プロセッサ112がストリーキングキャップ524を保持するユーザアイコン502を格納したメモリを持たない時に、プロセッサ112は、方法600を図6Aのセクション線E-Eを通して617に続け、そこでユーザディスプレイ122に初期ストリーキングビュー530を維持するように命令する。612では、センサ116は、容積532A、532B、534、538、540、及び/又は542のうちのいずれかでの運動を検出することができる。
679aでは、プロセッサ112は、ループ504が捕捉コロニー504aを含有し、ストリーキングプレート520の面523上にパターン554、558、562が存在しないことを格納したメモリを持たないことに応答して、面523との対話のパターンをメモリに格納し、ユーザ入力によってこのパターンが発生されている時にそれを表示する。679では、プロセッサ112は、ループ504が捕捉コロニー504aを含有することを格納したメモリを有することに応答して、コロニー増殖処理に向けて面523との対話のパターンをメモリに格納する。
図6Hのセクション線I-Iを通して続き、683では、ユーザが保持するループ504がストリーキングプレート520の面523と対話しているという入力をプロセッサ112がセンサ116から初めて受信し(例えば、この受信は、プロセッサ112は、細菌コロニー504aを有するループ504と面との対話を示す入力を受信した最初のインスタンスである)、センサ116は、面容積522内での運動を検出する。
683では、プロセッサは、予め決められた発生距離556で中間地点550を発生させ、この場合、一連の中間地点552が接続されて最初のパターン554(図5Q~図5Sを参照されたい)が形成される。684では、プロセッサ112は、細菌レベル/濃度を各中間地点550に割り当てる。この例示的実施形態では、ストリーキングプレート520の面523上のループ506の経路は、接続されて線を形成する一連の中間地点552として表される。図5Rの例示的実施形態に示すように、ループ504が先行中間地点550bから予め決められた発生距離556よりも大きい距離(例えば、5ミリメートル)だけ移動することに応答して、プロセッサ112によって追加の中間地点550aが発生される。中間地点550がパターンの最初の中間地点である場合に、ループ504上の細菌レベル又は細菌濃度は、初期ループ細菌レベル値(例えば、200)に留まる。連続する中間地点は、互いに接続されて最初のパターン554を形成する線を形成する。
685では、プロセッサ112は、漸進的中間地点550の割り当て細菌レベル/濃度を更新し、例えば、割り当て細菌レベルは、下記の式12に基づいて中間地点550aから中間地点550bの間に変更される。以前の中間地点550aと新しい中間地点550bとを接続することによって形成されている一連の中間地点552がいずれの他のパターン554、558、562、566とも重ならないこと(図5Tを参照されたい)に応答して、ループ504上の細菌レベルは、式12によって設定される等しいconcentration_nに割り当てられる。
式12
concentration_n=previousWaypointsConcentration*0.9975
初期濃度は200であり(200は最大濃度でもある)、第2の中間地点の濃度値は、200×定数0.9975になる。濃度値は、追加の中間地点550が発生されている間に漸変する。プロセッサ112が中間地点550を発生させる時に、当該中間地点にループ504の細菌レベル(例えば、ループの細菌レベルは、ソースプレート504の細菌コロニー504aと対話した後に200である)に等しい細菌数が割り当てられる。プロセッサ112は、パターン554が形成される時にループ504上の割り当てられた細菌濃度を低減する。実際の実験室環境では、細菌は、ループ504から完全に移ることになり、有利なことに、上述のように細菌分布をモデル化することにより、良好な技術と不良な技術の現実世界結果のより例証的なシミュレーションを証明する。
687では、ループ504がストリーキングプレート520の面523との接触を接触閾値を超えて中断したことをセンサ116が示すことに応答して、プロセッサ112は、パターン554の最初の線554aを終端し、最初のパターン554の新しい線554bを開始する(図5Sを参照されたい)(図5Sは細菌増殖を示すが、細菌が存在するか否かに関わらず、線554の形状及び終端が同じであることに注意されたい)。一例示的実施形態では、接触閾値は0.1秒である。別の例示的実施形態では、接触閾値は、.005~1.0秒の間である。686では、ループ504がストリーキングプレート520の面523との接触を接触閾値を超えて中断しなかったことをセンサ116が示すことに応答して、プロセッサ112は、最初のパターン554の線を形成し続ける(図5Tを参照されたい)。
図6Hのセクション線J-Jから続き、図6Gにセクション線J-J又は679aから続くように示す680では、ユーザが触知要素118との対話を続けている又はセンサ116がストリーキングプレート520の第1の部分532aの容積内での運動又は存在を検出したという信号をコントローラ130から受信することに応答して、プロセッサは、ストリーキングキャップ524がユーザアイコン502によって保持されている場所を表示し続けるようにユーザディスプレイ122に命令する。681では、プロセッサ112は、センサ116がストリーキングプレート520の第1の部分532aの容積内での運動又はユーザの存在を検出している間にユーザが触知要素118との対話を停止したという信号をコントローラ130から受信することに応答して、ストリーキングプレート520を再閉蓋するストリーキングキャップ524を表示するようにユーザディスプレイ122に命令する。
688aでは、プロセッサ112は、図6Bに示すループ滅菌処理600aから入力を受信する。688bでは、プロセッサ112は、図6Eに示すストリーキングプレート回転処理600bから任意的な入力を受信する。688cでは、プロセッサ112は、図6Fに示すストリーキングプレートキャップ取り外し処理600cから入力を受信する。一例示的実施形態では、ユーザアイコン502は、ストリーキングキャップ524を保持し続ける。688dでは、プロセッサ112は、図6Fに示すループ検証処理600dから入力を受信する。
図6Gのセクション線H-Hから図6G内に続き、プロセッサ112は、678において発生されたセンサ116からの入力を受信する。図6Gのセクション線L-Lから図6Iに続き、689では、プロセッサ112は、ストリーキングプレート520の面522上に最初/初期及び/又は中間のパターン554、558、562が存在することが格納されたメモリを有することに応答して、面523との対話のパターンをコロニー増殖処理に向けてメモリに格納する。690では、ループ504が最初のパターン554及び/又は中間パターン558、562の1又は2以上の線と対話しているという入力をプロセッサ112がセンサ116から受信する。式12に関して上述したように、ループ504に割り当てられる細菌濃度は、最初のパターン554の線が描かれる時に低下することになる。691では、プロセッサ112は、予め決められた距離に中間地点550を発生させ、この場合、中間/第2及び/又は第3のパターン558、562、及び/又は最後のパターン566の一連の中間地点が接続されて線が形成される。692では、プロセッサ112は、最初及び/又は中間のパターン554、558、562の1又は2以上の中間地点550とのループ504の対話に基づいて細菌レベルを各中間地点に割り当てる。この場合、ループ504が既存パターン(例えば、第1のパターン554、中間パターン558、562、及び/又は最後のパターン566)を横切る場合に、ループに割り当てられる細菌濃度は、直近に形成された中間地点550に割り当てられたループ濃度と、既存パターンと形成中のパターンの重ね合わせ556、560、564に最も近い既存パターン558、562、566(図5Tを参照されたい)の中間地点のものとの間の差に比例する量だけ増大することになる。形成されたパターンが細菌に増殖した図5Tの例示的実施形態に示すのは、最初のパターン554と第2のパターン558の間の一連の第1の重ね合わせ556、第2のパターン558と第3のパターン562の間の一連の第2の重ね合わせ560、及び第3のパターン562と最後のパターン566の間の一連の第3の重ね合わせ564である。
693では、プロセッサ112は、最初及び/又は中間のパターン554、558、562の中間地点の重ね合わせの数に基づいて、下記の式13、式14、及び/又は式15に基づいて漸進的中間地点550の割り当て細菌レベルを更新する。ループ504に割り当てられる細菌濃度は、パターンの重ね合わせに基づいており、この場合、重ね合わせを受ける既存パターン内の中間地点550は、当該重ね合わせ場所でループに割り当てられる細菌濃度よりも高い割り当て濃度を有する。これらの重ね合わせに基づく割り当てられた細菌濃度は、下記の式13、式14、及び式15によって計算される。
式13
Concentration_1=concentration_n+beta*(overlappedSegmentsConcentration-concentration_n)*0.00075
式14
beta=2/(1+e^(alpha*(1-r)))-1
式15
r=overlappedSegmentsConcentration/concentration_n
concentration_1がゼロである場合に、rは10に等しい。concentration_0は、上式12によって計算される重ね合わせ場所でループ504に割り当てられる濃度又は細菌レベルに等しい。alphaは、式14に提示するファジー数学公式に使用される定数である。alphaは、ゼロよりも大きい定数である。
図6Iのセクション線M-Mから図6Hのセクション線M-Mに続き、段階686及び687が繰り返されてパターンが発生される。図6Hのセクション線J-Jから図6Gのセクション線J-Jに続き、680では、ユーザが触知要素118との対話を続けている又はセンサ116がストリーキングプレート520の第1の部分532aの容積内での運動又はユーザの存在を検出したという信号をプロセッサ112が受信することに応答して、プロセッサは、ユーザアイコン502によって保持されているストリーキングキャップ524を表示し続けるようにユーザディスプレイ122に命令する。681では、プロセッサ112は、センサ116がストリーキングプレート520の第1の部分532aの容積内での運動又はユーザの存在を検出している間にユーザが触知要素118との対話を停止したという信号をコントローラ130から受信することに応答して、ストリーキングプレート520を再閉蓋するストリーキングキャップ524を表示するようにユーザディスプレイ122に命令する。688aでは、プロセッサ112は、図6Bに示すループ滅菌処理600aから入力を受信する。688bでは、プロセッサ112は、図6Eに示すストリーキングプレート回転処理600bから入力を受信する。688cでは、プロセッサ112は、図6Fに示すストリーキングプレートキャップ取り外し処理600cから入力を受信する。688dでは、プロセッサ112は、図6Fに示すループ検証処理600dから入力を受信する。
図6Gのセクション線K-Kから図6Jのセクション線K-Kに続き、プロセッサ112は、プロセッサ112がストリーキングプレート520の面523上に最後のパターン566が存在することを格納したメモリを有することに応答して、最初、中間、及び最後のパターン554、558、562、566(図5Tを参照されたい)の中間地点550の割り当て濃度/細菌レベルに基づいて細胞増殖を発生させる。当業者は、一例示的実施形態では最後のパターン566を第4象限520dの中に延びるいずれかのパターン(例えば、図5Sを参照されたい)とすることができ、この場合、最初のパターンが第1象限520a内で開始されて第4象限520d内で終了することに応答して第1のパターンが最後のパターンを含むことができることを認めるであろう。別の例示的実施形態では、最初のパターン554は、最初のストリーキングキャップ524の取り外し及び交換中に発生されるいずれかのパターンであり、ループ滅菌の後の第2のパターン558は、2回目のストリーキングキャップ524の取り外し及び交換中に発生されるいずれかのパターンであり、以降同様に続く。
695では、プロセッサ112は、隣接する中間地点550a、550b、550cを接続する第1及び第2の矩形558a、558b(図5Uを参照されたい)を割り当てる。パターン554、558、562、566の線上の各中間地点550に関して、2つの矩形558a、558bが計算される。第1の矩形558aは、中間地点550bから以前の中間地点550cへの中途まで延びる。第2の矩形558bは、中間地点550bから次の中間地点550aへの中途まで延びる。従って、図5Uの例示的実施形態に示すように、これらの中間地点550に基づく区域が定められるまで、中間地点550bの第1の矩形558aが次の中間地点550aの第2の矩形560bに接続され、中間地点550bの第2の矩形558bが以前の中間地点550cの第1の矩形560aに接続する。
696では、プロセッサ112は、下式16に基づいて、中間地点550の第1の矩形558a及び第2の矩形558bのcellpotential(細胞能力)を計算する。
式16
cellPotential=waypointConcentration*330*vMagnitude/0.005
697では、第1の矩形558aに関するvMagnitudeが下式17を用いて計算される。698では、第2の矩形558bに関するvMagnitudeが下式18を用いて計算される。式16では、330及び0.005は定数であり、waypointConcentrationは中間地点550bの濃度であり、この場合、waypointConcentrationは、上式12に基づいて各中間地点550に割り当てられる個々のconcentration_nである。
式17
vMagnitude=Magnitude(currentWaypointPosition-previousWaypointPosition)
式18
vMagnitude=Magnitude(currentWaypointPosition-nextWaypointPosition)
式17及び式18でのMagnitudeは、sqrt(x^2+y^2+z^2)として定められる成分x、y、zを有する3次元ベクトルのユークリッド距離である。図5Uの例示的実施形態に示すように、式17と式18の両方にあるcurrentWaypointPositionは、ストリーキングプレート520の座標系を基準とする3次元ベクトルとして表される中間地点550bの場所である。式17にあるpreviousWaypointPositionは、ストリーキングプレート520の座標系を基準とする3次元ベクトルとして表される中間地点550cの場所である。式17にあるnextWaypointPositionは、ストリーキングプレート520の座標系を基準とする3次元ベクトルとして表される中間地点550aの場所である。一例示的実施形態では、段階696~698は、いずれの順序でも又は同時に行うことができる。別の例示的実施形態では、段階697及び段階698は、段階696の前に行われる。
699では、プロセッサは、計算したcellPotentialに基づいて第1及び第2の矩形558a、558b内に細胞配置をランダムに割り当てる。言い換えれば、中間地点550bの濃度に大まかに基づく個数の細胞が各矩形558内にランダムに配置される。濃度が高いほど配置されることになる可能性が高い細胞が多い。cellPotentialは、20よりも高い場合に20に制限される。cellPotentialが計算された後に、0と1の間のランダム値が選択される。この値がcellPotentialよりも小さい場合に、それぞれの矩形558の範囲のランダムな場所に細胞が配置される。細胞が配置されるか否かに関係なく、cellPotentialは、1.0だけ減分される。cellPotentialが0よりも高いか又はそれに等しい間に、ランダム数を発生させる上述の段階が潜在的に細胞を配置し、1.0の減分が繰り返される。細胞の割り当ては、現実世界での細菌増殖に相関する。現実世界では、増殖させるために細菌増殖を促進する温度で12~24時間にわたってストリーキングプレート520を放置しなければならず、従って、12~24時間が経過するまでは、ユーザには細菌コロニーを成功裏に単離したか否かが分らない。ここでは、プロセッサ112は、現実世界の増殖時間よりもかなり短い増殖時間(例えば、コロニーが完全増殖するのに要する時間)を割り当てることができる。一例示的実施形態では、増殖時間は1秒から約4分である。別の例示的実施形態では、増殖時間は10秒である。
図5Tに示すように、培養及び増殖の可視化が示されており、この場合、最初、中間、及び最後のパターン554、558、562、566が細菌増殖に転換され、第1のパターン554は第1象限520a内にあり、第2/中間のパターン558は第2象限520b内にあり、第3/中間のパターン562は第3象限520c内にあり、最後のパターン566は第4象限520d内にある。例えば、細菌を第4象限520d内に移送するために、第4象限520dに関する全ての中間地点550の平均は、0.00001と0.0005の間になければならない。発生される全てのパターン線が象限520a~520dに割り当てられる。割り当てられる象限520a~520dは、中間地点550の物理的な場所に基づかず、代わりに象限は、プロセッサ112によって割り当てられる「アクティブ象限」として指定される。初期/最初のパターン554の形成中に、アクティブ象限は第1象限520aである。アクティブ象限は、少なくとも1つの線が発生されて次にループ504が加熱要素508と対話し終わるまで(図6Bに示すループ滅菌処理600aから発生された入力を含む方法の段階688aを参照されたい)、及び/又はストリーキングキャップ524がストリーキングプレート504上に配置されて戻されるまで(図6Fに示すストリーキングプレートキャップ取り外し処理600cからの入力を含む方法の段階688cを参照されたい)第1象限520aとして留まる。プロセッサ112は、アクティブ象限を第2/中間の象限520bに更新することになる。プロセッサ112は、アクティブ象限が最後の象限520dになるまでアクティブ象限を更新し続けることになる。ユーザは、プロセッサ112によってアクティブ象限に限度されず、全ての象限520a~520dにわたって入力を供給する。プロセッサ112は、細菌増殖の成果を計算する。この成果は閾値と比較され、一方、結果(閾値を通ってかつそれを超えた、閾値に届かずにそれよりも小さい)が、映像ディスプレイ(例えば、ユーザディスプレイ122)、検査データバンクなどを含む出力に供給される。
図6Kの例示的実施形態に示すのは、触覚フィードバックの方法699aである。699bでは、プロセッサ112は、ループ504を保持するように割り当てられたコントローラ130を識別する(例えば、図6Aに示す方法600の段階612、616においてプロセッサが受信した入力に基づいて)。699cでは、プロセッサ112は、VR発生式面(例えば、図6A及び図6Dに示す方法600の段階630、660においてプロセッサが受信した入力に基づくソースプレート504の上面505、及び/又は図6Gに示す方法600の段階679においてプロセッサが受信した入力に基づくストリーキングプレート520の面523)と対話しているループ504を識別する。699dでは、プロセッサ112は、ループ504を保持するように割り当てられたコントローラ130の速度と下式19とに基づいてaveragespeed(平均速度)を計算する。
式19
averageSpeed=instantaneousSpeed*exponentialAverageCoefficientAlpha+averageSpeed_0*(1-exponentialAverageCoefficientAlpha)
上式中のexponentialAverageCoefficientAlphaは、0.7という値が割り当てられた無単位の定数であり、instantaneousSpeedは、メートル/秒を単位とするユーザがコントローラ130を移動する速度である。averageSpeed_0は、式19の直前の計算の結果である。式19が直前に計算されなかった場合に、averageSpeed_0は、0という値で始まる。699eでは、プロセッサ112は、計算されたaverageSpeedと下式20とに基づいてmovementFactorを計算する。
式20
movementFactor=averageSpeed/0.02
699fでは、プロセッサ112は、計算されたmovementFactorと下式21とに基づいてvibeStrengthを計算する。
式21
vibeStrength=baseStrength*movementFactor
上式中のbaseStrengthは1という値が割り当てられた定数である。vibeStrengthが大きいほど指定されたコントローラ130の振動の強度が大きい。コントローラ130の振動を変調することによるループ504を使用する触覚体験は、仮想世界の現実感を高める。簡潔には、ループ504が面にわたって徐々に高まる速度で移動されると、プロセッサ112は、振動の強度を高める。
不良な技術が過度に多い又は過度に少ないコロニーをもたらすようにソースコロニー504からストリーキングプレート520への細菌の移送を模擬して可視化することにより、迅速で具体的なトレーニングを可能にする。有利なことに、プロセッサ112は、不正確性が容易に可視化される一方で、コントローラ130を使用する際の器用さ又は精細な運動技能のいずれかの欠如がストリーキングプレートのサイズによって最小にされるように、ユーザディスプレイ122上にストリーキングプレート502を過剰サイズで表示するように命令する。更に、プロセッサ112は、a)以前の線又はパターンを横切る線又はパターン554、558、562、及び/又は566の部分上の細菌全数を増大すること、b)ループ504がストリーキングプレートの面523の上で移動される時にループ504上の細菌を低減すること、c)ループ504がコロニー504aを成功裏に取り込んだことに応答してループに細菌を追加すること、d)ループ504がループ滅菌処理600aを成功裏に受けた場合に0という細菌濃度を割り当てること、e)適正な技術が分離/単離されたコロニーをもたらすように各パターン554、558、562、及び/又は566内の細菌の濃度の映像表示を発生させること、及び/又はf)結果を3~5日ではなく数秒で見ることができるように細菌の培養処理を高速化することにより、より視認性の高い細菌増殖結果を提示するストリーキングプレート520を表示するようにユーザディスプレイ122に命令する。更に、プロセッサ112は、コントローラ130にストリーキングシミュレーション500の使用を容易にする触覚フィードバックを与えるように命令する。
目視検査シミュレーション700
図8Aに示すのは、対話型目視検査シミュレーション700(図7A~図7Tを参照されたい)での仮想現実システム100の使用方法800である。802では、ユーザが対話型目視検査シミュレーション700を選択した(図7Bを参照されたい)ことを示す信号をプロセッサ112が受信する。804では、プロセッサ112は、目視検査シミュレーション700を発生させる。806では、プロセッサ112は、初期目視検査ビュー730を発生させ、ユーザディスプレイ122にそれを表示するように命令する。808では、プロセッサ112は、第1の背景704及び第2の背景706、並びに1又は2以上の容器708、710、712(図7B~図7Eを参照されたい)を発生させ、ユーザディスプレイ122にこれらを表示するように命令する。810では、プロセッサ112は、1又は2以上の容器708、710、712に粒子716、ガラス破片715、及び/又は繊維718をランダムに割り当てる。一例示的実施形態では、プロセッサ112は、1又は2以上の容器708、710、712に第1の可視インジケータ粒子716A(例えば、白色)、第2の可視インジケータ粒子716B(例えば、黒色)として粒子716、ガラス破片715(図7Jを参照されたい)、第1の可視インジケータ繊維718A(例えば、白色)、及び/又は第2の可視インジケータ繊維718B(例えば、黒色)を割り当てる(図7K~図7Lを参照されたい)。一例示的実施形態では、プロセッサ112は、ユーザに提示される全数のうちの30%から70%の間の容器に粒子716、ガラス破片715、及び/又は繊維718を割り当て、残りの容器は、汚染を持たないものとして指定される。一実施形態では、1又は2以上の容器708、710、712は、バイアル708と、流体バッグ710と、アンプル712とを含み、プロセッサ112によってコントローラ130が対話するものとして割り当てられたターゲットの容器をそれぞれの容器と呼ぶ。812では、プロセッサ112は、1又は2以上の容器708、710、712それぞれに対応する起動容積728、730、732(図7B~図7Eを参照されたい)を指定する。
一例示的実施形態では、センサ116は、コントローラ130が起動容積728、730、732のうちの1つの範囲にあるという信号をプロセッサ112に送る。起動容積728、730、732は、ターゲットの容器708、710、712の起動距離(例えば、6インチから12インチの間)を定める直交座標系を含む。起動距離は、x軸とy軸とz軸とに沿って延びる3次元容積を定める。段階804~812は、いずれの順序でも実施することができ、及び/又は同時に実施することができる。
一例示的実施形態では、起動容積728、730、732は、容器708、710、712が位置付けられた中心の場所(座標0,0,0)、又はそれぞれの容器の中心点からx軸とy軸とz軸とに沿って周囲に広がる3次元容積を含む。この実施形態では、起動容積728、730、732は、x軸に沿って1インチから約7インチの間、y軸に沿って1インチから約7インチの間、及び/又はz軸に沿って1インチから約7インチの間だけ延び、その範囲に定められる容積は、それぞれの起動容積を含む。空間内のインチは、ユーザによって知覚される距離に基づいている。
814では、ユーザが触知要素118と対話していないこと、及び/又はセンサ116が起動容積728、730、732内での運動を検出していないことに応答して、プロセッサは、初期位置にあるそれぞれの容器708、710、712の提示を維持するようにユーザディスプレイ122に命令する。一例示的実施形態では、1又は2以上のタイプの容器708、710、712のうちの1つがシミュレーション毎に表示される。別の例示的実施形態では、1又は2以上のタイプの容器708、710、712のうちの2又は3以上がシミュレーション毎に表示される。
816では、ユーザが触知要素118と対話し、センサ116が起動容積728、730、732内での運動を検出することに応答して、プロセッサ112は、それぞれの容器708、710、712を保持するユーザアイコン702(例えば、上述したユーザアイコン302及び502と同じか又は類似の)を表示するようにユーザディスプレイ122に命令する。別の例示的実施形態では、ユーザアイコン又は手は示されず、プロセッサ112は、触知要素118との対話及び起動容積728、730、732内で運動が検出されたという信号をセンサ116がプロセッサ112に送ることに応答して、手アイコンを示すことなくコントローラ130の運動に従うそれぞれの容器708、710、712を表示するようにユーザディスプレイ122に命令する。
図7Fのモデル722に示すように、横ダンパー736を有する質量バネ740上の単一点質量742が、容器708、710、712の中心にある固定点738に仮想的に取り付けられる。容器708、710、712がその容器の向き724(図7Aを参照されたい)を変更したという入力をプロセッサ112がセンサ116から受信すると、液体上面720aが発生され、質量742から固定点738の中心に描かれるベクトルと垂直に描かれる。
コントローラ130の運動と共に移動するように割り当てられた容器708、710、712が一方の側に移動されるという入力をプロセッサ112がセンサ116から受信することに応答して、質量742は、前後に揺動し、次に、再度静止することになる。プロセッサ112は、質量742の向きに従う液体上面720aを発生させ、ユーザディスプレイ122にそれを表示するように命令する時に、スロッシングするように見える(図7Pの例示的スロッシング進行を参照されたい)液体720(例えば、容器内の液体)を表示するようにユーザディスプレイに命令する。液体上面720a及び液体側面720bは3次元ではなく、2Dの面である。プロセッサ112は、連続的に視線743に面する液体上面720a及び液体側面720b(図7Q及び図7Iを参照されたい)を表示するようにユーザディスプレイ122に命令する。
一例示的実施形態では、図7Hの画像714は、液体面720aに適用されるテクスチャのための法線マップとして使用され、それによって平坦な面にリップルを有する外観が与えられる。それぞれの容器に対する質量742の速度が高いほど面平面の法線成分は大きくなる。別の例示的実施形態では、画像717は、垂直平面(例えば、粒子716、ガラス破片715、及び/又は繊維718が描かれる面)を定めるものとして示される。一例示的実施形態では、画像717は、図7Hに示すリップル画像を含み、プロセッサ112が液体720の上面上に表示するようにユーザディスプレイ122に命令するテクスチャである。
818では、コントローラ130の運動に合わせて移動するようにそれぞれの容器が割り当てられたコントローラ130が図7Gに示すように水平平面内で回転しているという信号をセンサ116が送ることに応答して、プロセッサは、回転(例えば、旋回)する液体を表示するようにユーザディスプレイ122に命令し、それぞれの容器に粒子716、ガラス破片715、及び/又は繊維718が割り当てられていることに応答して、ユーザディスプレイは、液体中に含有されているいずれかの気泡、ガラス破片、繊維、及び/又は粒子が液体と共に回転する場所を表示する。コントローラ130が移動を停止したという信号をセンサ116がプロセッサ112に送ることに応答して、プロセッサは、運動量持続時間にわたって依然として回転する液体720を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、運動量持続時間は1秒と約4秒の間にある。依然として移動している液体が表示されている間にそれぞれの容器が依然として保持されている(例えば、それぞれの容器が静止している)ように表示されることに応答して、容器本体に対して移動する粒子716、ガラス破片715、繊維718、及び/又は気泡の視認性が高められる。プロセッサ112によって発生される液体回転、並びに粒子716、ガラス破片715、繊維718、及び/又は気泡の表示を下記で説明する。
この例示的実施形態では、プロセッサ112は、それぞれの容器が下記で説明する逆転閾値を超えて逆転されることに応答して、ユーザディスプレイ122に粒子716、ガラス破片715、及び/又は繊維718を可視にするように命令する。逆転閾値よりも大きい逆転は、それぞれの容器の上部の下側に取り付けた場合があり、従って、液体720が逆転の前に旋回される時に可視ではないと考えられる模擬している粒子716、ガラス破片715、及び/又は繊維718を模擬する。820では、それぞれの容器(例えば、ユーザアイコン702が保持している容器)が逆転閾値を超えて逆転されたという信号をプロセッサ112がセンサ116から受信する。一例示的実施形態では、逆転閾値は、それぞれの容器の時計周り又は反時計周りのいずれかの155度よりも大きい回転及び非逆転状態(例えば、初期の向き)に戻る回転である。段階814、段階816~段階820は、いずれの順序でも行うことができる。図8Bのセクション線A-Aに続き、823では、プロセッサ112は、ユーザディスプレイ122に逆転したそれぞれの容器を表示するように命令する。824では、プロセッサ112は、ユーザディスプレイに逆転したそれぞれの容器内の液体720を表示するように命令する。825では、プロセッサ112は、メモリ内にそれぞれの容器が逆転されたことを格納し、逆転からの持続時間を決定するために逆転が発生した時間を格納する。
それぞれの容器が逆転閾値を超えて逆転され、直立に戻された状態で、それぞれの容器に割り当てられたいずれの粒子716、ガラス破片715、及び/又は繊維718も、ユーザディスプレイ122によって可視であるように表示されるようにプロセッサ112によって命令される。プロセッサ112は、図7Iに示すようにユーザディスプレイを見ているユーザの視線743に対して垂直であるように連続的に向けられる平面720b上に粒子716、ガラス破片715、繊維718、及び/又は気泡を表示するようにユーザディスプレイ122に命令する。
粒子又は繊維とは対照的な色を有する背景(例えば、第1又は第2の背景704、706)の前にそれぞれの容器が保持されることに応答して、プロセッサ112は、ユーザディスプレイ122に粒子又は繊維を可視であるように表示するように命令することになる。例えば、プロセッサ112は、第1の可視インジケータ粒子716A(例えば、白色)及び第1の可視インジケータ繊維718A(例えば、白色)を第2の背景706(例えば、黒色)の前で可視であるように表示し、第2の可視インジケータ粒子716B(例えば、黒色)及び第2の可視インジケータ繊維718B(例えば、黒色)を第1の背景704(例えば、白色)の前で可視であるように表示する(図7Tを参照されたい)ようにユーザディスプレイ122に命令するであろう。
粒子又は繊維とは対照的な色を欠く背景(例えば、第1又は第2の背景704、706)の前にそれぞれの容器が保持されることに応答して、プロセッサ112は、粒子又は繊維をほぼ不可視又は不可視であるように表示するようにユーザディスプレイ122に命令することになる。例えば、プロセッサ112は、第1の可視インジケータ粒子716A(例えば、白色)及び第1の可視インジケータ繊維718A(例えば、白色)を第1の背景704(例えば、白色)の前で不可視であるように表示し、第2の可視インジケータ粒子716B(例えば、黒色)及び第2の可視インジケータ繊維718B(例えば、黒色)を第2の背景706(例えば、黒色)の前で不可視であるように表示する(図7Tを参照されたい)ようにユーザディスプレイ122に命令するであろう。
一例示的実施形態では、プロセッサ112は、液体の回転速度(下記で式22において計算される変数liquid_rotational_velocity)が回転閾値を超過した時に液体720中の気泡が可視であるように表示されるようにユーザディスプレイ122に命令する。一例示的実施形態では、回転閾値は、0.1回転毎秒から約1回転毎秒の間にある。一例示的実施形態では、回転閾値は0.5回転毎秒である。液体回転速度が回転閾値よりも降下したとプロセッサ112が決定することに応答して、プロセッサ112は、増大して(例えば、図7Gに矢印Bに示す方向に)次に気泡持続時間の後に消失する気泡を表示するようにユーザディスプレイ122に命令する。一例示的実施形態では、気泡持続時間は、2秒から約6秒の間にある。別の例示的実施形態では、気泡持続時間は約4秒である。更に別の例示的実施形態では、プロセッサ112は、逆転閾値よりも大きい逆転の後にユーザディスプレイ122に気泡を可視であるように表示するように命令する。
図8Aに示す822では、liquid_rotation_velocityが回転閾値よりも大きいようにそれぞれの容器が回転されているという信号をプロセッサ112がセンサ116から受信する。図8Cのセクション線BBに続き、826では、プロセッサ112は、回転しているそれぞれの容器を表示するようにユーザディスプレイ122に命令する。834では、容器が回転の逆転持続時間閾値内で逆転閾値を超えて逆転されなかったことに応答して、プロセッサ112は、ユーザディスプレイ122に逆転警告を表示するように命令する。836及び838では、それぞれの容器に粒子716及び/又は繊維718が割り当てられること(図7Jを参照されたい)、又は粒子及び/又は繊維が割り当てられないことに応答して、プロセッサ112は、ユーザディスプレイ122に回転に応答して気泡721を表示するように命令する。
832では、それぞれの容器が重力持続時間にわたって回転閾値を上回って回転されないことに応答して、プロセッサ112は、式22~式24に示すように旋回する気泡721を表示し続けるようにユーザディスプレイ122に命令する。832では、容器が重力持続時間にわたって回転閾値を下回って回転されることに応答して、プロセッサ112は、上方に進行して気泡持続時間の後に消失する気泡721を表示するようにユーザディスプレイ122に命令し、更に粒子716及び/又は繊維718が存在する場合はこれらを浮遊したままに留めるように命令する。気泡721は、回転速度が低下する時に式22~式24に示すようにかなり低速に回転する。一例示的実施形態では、それぞれの容器の回転が回転閾値を下回って回転するものであると感知されることに応答して、気泡721は、増大する回転速度まで低速になり、増大し始めることになる(方向Bに沿って)(図7Gを参照されたい)。一例示的実施形態では、増大する回転速度は、0.25回転毎秒から約0.75回転毎秒の間にある。別の例示的実施形態では、増大する回転速度は0.5回転毎秒である。一例示的実施形態では、重力持続時間は、2~5秒の間にある。別の例示的実施形態では、重力持続時間は4秒である。
一例示的実施形態では、プロセッサ112は、液体側面720b上に示されている画像を101枚の事前レンダリングされた旋回する粒子又は気泡のシーケンス(図7Rを参照されたい)からの1枚に変更することにより、旋回する粒子716及び繊維718(存在するように割り当てられている場合)、並びに気泡721を表示するようにユーザディスプレイ122に命令する。別の例示的実施形態では、シーケンスは、50枚から約500枚の間の画像を含むことができる。プロセッサ112は、異なるシーケンスからのいくつかの画像を互いに重ねるように、例えば、第1の可視インジケータ粒子と気泡の両方を同時に表示するために第1の可視インジケータ粒子716B(図7Rに示す)と気泡721(図7M~図7N、図7Uを参照されたい)とを重ねるように命令することができる。
プロセッサ112がユーザディスプレイ122に表示するように命令する画像は、それぞれの容器の向きと、下式23~式24に示すように計算された液体720の回転速度とに基づいて計算される。
式23
image_number=Container_orientation/360度*100+liquid_rotational_velocity*speed_constant
式24
image_number>100である場合に、image_number=0、他にimage_number<0である場合に、image_number=100
上式中のContainer_orientationは、図7Sに示すcontainer_up_vector799の周りの0度からの回転程度であり、liquid_rotational_velocityは、下記で式22を用いて計算され、speed constantは1.0であり、この場合、speed constantは、プロセッサ112によって調節可能であり、ここで異なる粘性を有する流体が表示されている。式22は、コントローラ130がそれぞれの容器をcontainer_up_vector799の周りに回転させているか否か、液体がそれぞれの容器内で旋回しているか否かに関わらず、異なる角度からのそれぞれの容器中の液体720のビューを与える。
それぞれの容器がコントローラ130によって旋回/回転される時に、容器のUP方向(例えば、図7Sに矢印799で示す)の質量742の回転速度を用いて、プロセッサ112の可視化状態機械722において旋回する粒子716、繊維718、及び/又は気泡721を模擬するのに使用されるliquid_rotational_velocityが発生される。
プロセッサ112によって印加される質量742の回転速度は、単独で、ほぼ瞬時に開始及び停止する(惰性を示す現実世界の液体とは異なり)と考えられる粒子718の回転を発生させるであろう。従って、alpha=0.6を用いた質量の回転速度の「指数移動平均」に基づいて別の変数(liquid_rotational_velocity)が計算される(式22)。従って、計算される全ての回転に関して、liquid_rotational_velocityは、ターゲット速度(例えば、それぞれの容器708、710、712の質量742が回転している実際の速度)に60%近い場所までしか増大せず、それによってliquid_rotational_velocityの立ち上がり又は立ち下がりに遅延がもたらされ、現実的な回転惰性を有する液体が模擬される。
式22
liquid_rotational_velocity=mass_rotational_velocity[dot product]container_up_vector*0.6+liquid_rotational_velocity_0*0.4
上式中のmass_rotational_velocity[dot product]container_up_vectorは、container_up_vectorの周りの質量の回転速度を計算する。0.6及び0.4は、立ち上がり又は立ち下がりの速度に影響を及ぼす定数であり、異なる粘性を有する液体720をより的確に模擬するためにプロセッサ112が調節することができる。
プロセッサ112は、各容器708、710、712に観察済み又は未観察を割り当てる。図7Oに示すように、観察光線744が第1又は第2の背景704、706のうちの少なくとも一方と交差しており、視線743の角度閾値の範囲(例えば、90度以内)にある(水平又は垂直に)というセンサ114からの入力に応答して、それぞれの容器がプロセッサ112によって観察済みとして割り当てられることになる。観察光線744及び視線743は、センサ114によるユーザディスプレイ122の入力された向きに基づいて識別される。センサ114からの入力は、ユーザの周囲ビューを観察済みとして認定することを可能にする。この設計は、二焦点又は三焦点を用いてユーザが容器708、710、712を成功裏に検査することを可能にする。
例示的実施形態では、観察光線744が第1又は第2の背景704、706のうちの少なくとも一方と閲覧持続時間(例えば、5秒)にわたって交差しているというセンサ114からの入力に応答して、それぞれの容器が観察済みとして割り当てられることになる。観察光線744が第1又は第2の背景704、706の両方を離れたことをセンサ114が示すことに応答して、プロセッサ112は、閲覧持続時間を計時するタイマーを休止する。観察光線744が第1又は第2の背景704、706の両方を観察閾値(例えば、1秒)にわたって離れたことに応答して、タイマーはリセットし、プロセッサ112がそれぞれの容器を観察済みとして割り当てる前に最大閲覧持続時間が観察されることになる。
例示的実施形態では、ユーザは、それぞれの容器内に欠陥が存在するか否か、及びどの欠陥(例えば、第1の可視インジケータ粒子716a、第1の可視インジケータ繊維718a、第2の可視インジケータ粒子716b、第2の可視インジケータ繊維718b、及び/又はガラス破片715)が存在するかを決定する。目視検査シミュレーション700は、欠陥を決定するための良好な検査技術(一方の背景の前で5秒にわたって容器を逆転すること、旋回させること、旋回を停止すること、保持すること、他方の背景の前で5秒にわたって旋回させること、旋回を停止すること、保持すること)を教示している。容器が軽い粒子を有する場合に、訓練生が白色背景の前で容器を観察するだけでは、これらの粒子はほぼ不可視になる。同様に、ガラス粒子は、図7Jに示すようにいくつかの向きからは不可視にしか現れないので、訓練生が、ガラス破片を有する容器を旋回させない場合に、これらのガラス破片は両方の背景の前でほぼ不可視である場合がある。訓練生は、容器を十分に長く保持しなければ気泡が軽い粒子であると間違って思い込む場合がある。
この対話型目視検査シミュレーション700及び方法は、複雑な流体力学モデルを発生させるためのコンピュータパワーに対する必要性及び関連のコストなしに流体中の現実の粒子を模擬する流体充填容器708、710、712内の粒子718を模擬する方法を提供する。対話型目視検査シミュレーション700は、バイアル708、バッグ710、及び/又はアンプル712のような容器内でこれらの容器の製造中及び充満中に発生する可能性がある暗色粒子及び軽い粒子718a、718b(例えば、繊維、粒子、及び/又はガラス破片)、及び気泡721を模擬する。有利なことに、この対話型目視検査シミュレーション700は、複雑な流体力学モデルをなしで済ませるので、仮想現実体験において典型的なゲームコンピュータシステム上で実時間で実行することができる。更に、3Dモデルを実時間でレンダリングするのではなく画像を2D画像シーケンスに事前レンダリングすることにより、仮想現実で実時間に可能であると推測されるものよりも高い忠実性を有するモデル化機構、照明機構、及び挙動機構の使用を可能にする。
上述の明細書では、特定の実施形態を説明した。しかし、当業者は、下記の特許請求の範囲に示す本発明の開示の範囲から逸脱することなく様々な修正及び変更を加えることができることを認めるものである。従って、本明細書及び図は、限定的な意味ではなく例示的意味で捉えるべきものであり、全てのそのような修正は、本発明の教示の範囲に含まれるように意図している。
利益、利点、問題に対するソリューション、及びいずれかの利益、利点、又はソリューションを発生させるか又はより顕著にすることができるいずれの要素も、いずれか又は全ての特許請求の範囲の重要、必要、又は不可欠な特徴又は要素として解釈すべきではない。本発明の開示は、この出願の係属中に加えられるあらゆる補正及び付与される特許請求の範囲の全ての均等物を含む特許請求の範囲だけによって定められる。
更に、本明細書では、第1及び第2、上部及び底部、並びに類似の関係語は、1つのエンティティ又はアクションを別のエンティティ又はアクションからそのようなエンティティ又はアクション間のいずれの実際の関係又は順序も必ずしも必要とする又は暗示することなく区別するためにのみ使用することができる。用語「備える」、「備えている」、「有する」、「有している」、「含む」、「含んでいる」、「含有する」、「含有している」、又はそのあらゆる他の変形は、一覧の要素を備える、有する、含む、含有する処理、方法、物品、又は装置がこれらの要素だけではなく明示的に列記しない他の要素又はそのような処理、方法、物品、又は装置に内在する他の要素も含むことができるように非限定的な含有を網羅するように意図している。「を備える」、「を有する」、「を含む」、「を含有する」に先行する要素は、要素を備える、有する、含む、含有する処理、方法、物品、又は装置内の追加の同一要素の存在をそれ程多くの制約を有することなく除外しない。本明細書で他に明記しない限り、「a」及び「an」は、1又は2以上として定められる。用語「実質的に」、「本質的に」、「近似的に」、「約」、又はこれらのいずれの他のバージョンも、当業者に理解されるように近いとして定められる。1つの非限定的な実施形態では、これらの用語は、例えば、10%内であり、別の可能な実施形態では5%の範囲、別の可能な実施形態では1%の範囲、別の可能な実施形態では0.5%内であるとして定められる。本明細書に使用する用語「結合された」は、必ずしも直接的とは限らず、かつ必ずしも機械的とも限らずに、一時的又は永続的のいずれかで接続される又は接触しているとして定められる。ある一定の方法で「構成」されたデバイス又は構造は、少なくとも当該方法で構成されるが、列記しない方法で構成される場合もある。
上述の実施形態又はその構成要素のうちのいずれかに対する材料を指定しない範囲では、適切な材料は、意図する目的に対して当業者に公知であると考えられることは認められるものとする。
閲読者が本発明の技術的開示の特質を迅速に確認することを可能にするために「本発明の開示の要約」を提供する。これは、それが特許請求の範囲又は意味を解釈又は制限するのに使用されないという理解の下に提出するものである。これに加えて、上述の「発明を実施するための形態」では、本発明の開示を効率化するために様々な特徴を様々な実施形態に組み合わせていることを見ることができる。この開示方法は、主張する実施形態が各請求項に明示的に列挙するものよりも多い特徴を必要とするという意図を反映するとして解釈されないものとする。そうではなく、以下の特許請求の範囲が反映するように、本発明の主題は、単一の開示する実施形態の全ての特徴よりも少ないものである。すなわち、以下の特許請求の範囲は、これにより「発明を実施するための形態」の中に組み込まれ、各請求項は、個別に主張する主題としてそれ自体で成り立つものである。
100 仮想現実システム
118 触知要素
120 ヘッドセット
142 ロケータ
144 運動感知グリッド

Claims (25)

  1. ユーザによって入力されたビュー選択に基づいて3次元初期ビューを発生させる段階と、
    前記初期ビューを提示する命令をヘッドセットの該ヘッドセット内に含まれたユーザディスプレイに送る段階と、
    前記初期ビュー内のユーザ移動を示す入力を少なくとも1つのセンサを含むコントローラから受信する段階と、
    ループの割り当てられたステータスを識別するためにメモリにアクセスする段階と、
    前記ループが前記初期ビュー内でユーザアイコンに結合されていることに応答して、該ループと該初期ビュー内に含まれたストリーキングプレートとの間の対話のパターンを格納する段階であって、
    一連の中間地点を発生させ、かつそれらを接続して前記パターンを構成する段階、
    低下する細菌濃度を前記ループに割り当てる段階であって、中間地点生成の場所での該ループの該濃度が、該中間地点に割り当てられ、該ループによって生成されている前記一連の中間地点内の各漸進的中間地点が、低下する細菌濃度を有する前記割り当てる段階、
    前記対話のパターンが1又は2以上の既存パターンの1又は2以上の既存中間地点に重なることに応答して、該1又は2以上の既存中間地点の割り当てられた値と該重ね合わせの場所での該ループの割り当てられた細菌濃度とに基づいて、変更された細菌濃度を該ループに割り当てる段階、及び
    前記一連の中間地点とそれらの割り当てられた細菌濃度とを格納する段階、
    を含む前記格納する段階と、
    を含む細菌ストリーキングシミュレーションを実施する方法を実行するために関連のプロセッサによって実行可能な命令を格納する非一時的コンピュータ可読媒体。
  2. 低下する細菌濃度を前記ループに前記割り当てる段階は、指数関数的に低下する細菌濃度を割り当てる段階を含み、更に
    前記ループによって生成されている前記一連の中間地点内の各漸進的中間地点が、指数関数的に低下する細菌濃度を有する、
    ことを特徴とする請求項1に記載の方法。
  3. 前記一連の中間地点内の以前の中間地点に向けて延びる第1の矩形と該一連の中間地点内の次の中間地点に向けて延びる第2の矩形とを発生させる段階を特徴とする請求項1に記載の方法。
  4. 前記中間地点の前記割り当てられた細菌濃度に基づいて前記第1及び第2の矩形の細胞能力を計算する段階と、該細胞能力に基づいて該第1及び第2の矩形に細胞配置をランダムに割り当てる段階とを特徴とする請求項3に記載の方法。
  5. 前記第1及び第2の矩形内の前記細胞配置に基づいてストリーキングプレート上で細菌増殖を模擬する段階を特徴とする請求項4に記載の方法。
  6. 前記細菌増殖の成果を計算する段階と、該成果を閾値と比較する段階と、該閾値に対する該成果を前記ユーザディスプレイ上に提供する段階とを特徴とする請求項5に記載の方法。
  7. 細菌ストリーキングシミュレーションを提供するための仮想現実システムであって、
    仮想現実ヘッドセット及び少なくとも1つのコントローラのうちの少なくとも一方から対応する入力を受信することに応答して予め定められた作動セットを実行するように構成されたプロセッサを有する処理デバイスであって、該処理デバイスが、細菌ストリーキングシミュレーションの3次元初期ビューが格納されたメモリを含み、該初期ビューが、ストリーキングプレート、加熱要素、及びループを含む前記処理デバイス、
    を含み、
    前記プロセッサは、前記ヘッドセット内に含まれたユーザディスプレイ上に前記初期ビューが提示されるように命令し、
    前記少なくとも1つのコントローラは、該コントローラが前記初期ビュー内で移動していることを示す入力を前記プロセッサに送り、
    前記プロセッサは、前記少なくとも1つのコントローラのうちの前記コントローラの前記移動が前記ユーザディスプレイ上に提示されるように命令し、
    前記コントローラからの入力に応答して、前記プロセッサは、前記ループを該コントローラの移動によって制御されるように割り当て、
    前記コントローラは、該コントローラが移動しており、かつ前記ストリーキングプレートと対話していることを示す入力を送り、
    前記プロセッサは、前記ループと前記ストリーキングプレートの間の対話のパターンを発生させて格納し、該プロセッサは、該ストリーキングプレートと対話しながら該ループによって移動された距離に応答して指数関数的に低下する細菌濃度を該ループに割り当てることによって該パターンを発生させ、該プロセッサは、一連の中間地点を発生させ、中間地点生成の場所での該ループの該細菌濃度は、該中間地点に割り当てられ、該プロセッサは、該ストリーキングプレート上に該パターンを形成する線として該中間地点を例示するように前記ユーザディスプレイに命令し、
    前記プロセッサは、前記一連の中間地点内の以前の中間地点に向けて延びる第1の矩形と該一連の中間地点内の次の中間地点に向けて延びる第2の矩形とを発生させ、該プロセッサは、該中間地点の前記割り当てられた細菌濃度に基づいて該第1及び第2の矩形の細胞能力を計算し、
    前記プロセッサは、前記細胞能力に基づいて前記第1及び第2の矩形に細胞配置をランダムに割り当て、かつ
    前記プロセッサは、前記第1及び第2の矩形内の前記細胞配置に基づいて前記ストリーキングプレート上で細菌増殖を模擬する、
    ことを特徴とする仮想現実システム。
  8. 前記ループが既存パターンと対話したという信号を前記コントローラが前記プロセッサに送ることに応答して、該プロセッサは、前記1又は2以上の既存中間地点の割り当てられた値と重ね合わせの場所での該ループの割り当てられた細菌濃度とに基づいて、変更された細菌濃度を該ループに割り当てることを特徴とする請求項7に記載のシステム。
  9. 前記初期ビューの前記ループに対応するループ起動容積内のユーザ移動を示す前記少なくとも1つのコントローラからの入力に応答して、前記プロセッサは、該コントローラの移動によって制御されるように該ループを割り当てることを特徴とする請求項7に記載のシステム。
  10. ユーザによって入力されたビュー選択に基づいて3次元初期ビューを発生させる段階と、
    ヘッドセットの該ヘッドセット内に含まれたユーザディスプレイに前記初期ビューを提示する命令を送る段階と、
    前記初期ビュー内のユーザ移動を示す入力を少なくとも1つのセンサを含むコントローラから受信する段階と、
    1又は2以上の容器のうちの選択された容器の割り当てられたステータスを識別するためにメモリにアクセスする段階と、
    前記コントローラからの入力に応答して、前記プロセッサが、前記選択された容器を該コントローラの移動によって制御されるように割り当てる段階と、
    可視化状態機械を利用して流体流れパターンを連続的に発生させる段階であって、横ダンパーを有する質量バネ上の単一点質量が、前記容器の中心での固定点に仮想的に取り付けられる前記発生させる段階と、
    前記容器が定められた方向に移動したという入力を前記コントローラから受信することに応答して、前記単一点質量を該定められた方向に沿って前後に揺動し、次に該単一点質量を元の位置に落ち着かせる段階と、
    2次元液体上面を前記単一点質量の向きに従うように表示する段階であって、該液体上面が、前記ユーザディスプレイからの視線に面するように連続的に向けられる前記表示する段階と、
    を含む目視検査シミュレーションを実施する方法を実行するために関連のプロセッサによって実行可能な命令を格納する非一時的コンピュータ可読媒体。
  11. 前記選択された容器を該容器が前記視線と第1の背景の間にあることに応答して該第1の背景内であるとして指定する段階と、粒子を第1の可視インジケータ粒子であるとして割り当てることに応答して、該第1の可視インジケータ粒子を不可視又はほぼ不可視であるように命令する段階であって、該第1の背景及び該第1の可視インジケータ粒子に非対照的な色が割り当てられる前記命令する段階と、粒子を第2の可視インジケータ粒子であるとして割り当てることに応答して、該第2の可視インジケータ粒子が可視であるように命令する段階であって、該第1の背景及び該第2の可視インジケータ粒子に対照的な色が割り当てられる前記命令する段階とを特徴とする請求項10に記載の方法。
  12. 粒子を1又は2以上の容器にランダムに割り当てる段階と、前記コントローラが逆転閾値を超えて逆転され、かつ回転閾値を超えて回転されることに応答して、存在する時に該粒子を暴露する段階とを特徴とする請求項10に記載の方法。
  13. 粒子が前記選択された容器に割り当てられることに応答して、様々な回転での画像粒子のシーケンスのうちの画像を表示することによって2次元液体側面を発生させるかつ表示する段階を特徴とする請求項12に記載の方法。
  14. 目視検査シミュレーションを提供するための仮想現実システムであって、
    仮想現実ヘッドセット及び少なくとも1つのコントローラのうちの少なくとも一方から対応する入力を受信することに応答して予め定められた作動セットを実行するように構成されたプロセッサを有する処理デバイスであって、該処理デバイスが、目視検査シミュレーションの3次元初期ビューが格納されたメモリを含み、該初期ビューが少なくとも1つの容器を含む前記処理デバイス、
    を含み、
    前記プロセッサは、前記ヘッドセット内に含まれたユーザディスプレイ上に前記初期ビューが提示されるように命令し、
    前記少なくとも1つのコントローラは、該コントローラが前記初期ビュー内で移動していることを示す入力を前記プロセッサに送り、
    前記プロセッサは、前記少なくとも1つのコントローラのうちの前記コントローラの前記移動が前記ユーザディスプレイ上に提示されるように命令し、
    前記コントローラからの入力に応答して、前記プロセッサは、前記少なくとも1つの容器のうちの選択された容器を該コントローラの移動によって制御されるように割り当て、
    前記コントローラは、該コントローラが前記選択された容器を移動していることを示す入力を送り、
    前記プロセッサは、前記容器の中心での固定点に仮想的に取り付けられた横ダンパーを有する質量バネ上に単一点質量を含む可視化状態機械を利用して連続流体流れパターンを発生させ、
    前記コントローラは、前記容器が定められた方向に移動されたという信号を前記プロセッサに送り、かつ
    前記プロセッサは、前記単一点質量を前記定められた方向に沿って前後に揺動し、次に該単一点質量を初期位置に戻し、該プロセッサは、該単一点質量の向きに従うように2次元液体上面を表示するように前記ユーザディスプレイに命令し、この処理は、視線に面するように連続的に向けられるように該液体上面を表示するように該ユーザディスプレイに命令する、
    ことを特徴とする仮想現実システム。
  15. 前記選択された容器が第1の背景内であるという信号を前記コントローラが前記プロセッサに送ることに応答して、粒子を第1の可視インジケータ粒子であるとして割り当てた該プロセッサは、不可視又はほぼ不可視であるように該第1の可視インジケータ粒子を表示するように前記ユーザディスプレイに命令し、該第1の背景及び該第1の可視インジケータ粒子に非対照的な色が割り当てられ、粒子を第2の可視インジケータ粒子であるとして割り当てた該プロセッサは、可視であるように該第2の可視インジケータ粒子を表示するように該ユーザディスプレイに命令し、該第1の背景及び該第2の可視インジケータ粒子に対照的な色が割り当てられることを特徴とする請求項13に記載のシステム。
  16. 粒子が前記選択された容器に割り当てられることに応答して、前記プロセッサは、様々な回転での画像粒子のシーケンスのうちの画像を表示することによって2次元液体側面を発生させ、かつそれを表示するように前記ユーザディスプレイに命令することを特徴とする請求項14に記載のシステム。
  17. ユーザによって入力されたビュー選択に基づいて3次元初期ビューを発生させる段階と、
    ヘッドセットの該ヘッドセット内に含まれたユーザディスプレイに前記初期ビューを提示する命令を送る段階と、
    前記初期ビュー内のユーザ移動を示す入力を少なくとも1つのセンサを含むコントローラから受信する段階と、
    横ホイール入力、縦ホイール入力、対物ホイール入力、及びフォーカスホイール入力を含む顕微鏡の割り当てられたステータスを識別するためにメモリにアクセスする段階と、
    前記コントローラからの入力に応答して、前記横ホイール、前記縦ホイール、前記対物ホイール、及び前記フォーカスホイールのうちの1つを表示するように前記ユーザディスプレイに命令する段階と、
    前記顕微鏡上に存在するスライドに細菌が割り当てられることに応答して、メモリから細菌を取り出し、かつ該顕微鏡上にかつ顕微鏡ビューを表示するヘッドアップディスプレイ上に存在する該スライド上に該細菌を表示するように前記ユーザディスプレイに命令する段階と、
    前記コントローラが移動しており、かつ前記対物ホイールと対話しているという信号を該コントローラが送っていることに応答して、該コントローラ移動に基づいて回転する該対物ホイールを表示するように、かつ変更された倍率を有する顕微鏡ビューを表示する前記ヘッドアップディスプレイを表示するように前記ユーザディスプレイに命令する段階と、
    前記コントローラが移動しており、かつ前記フォーカスホイールと対話しているという信号を該コントローラが送っていることに応答して、該コントローラ移動に基づいて回転する該フォーカスホイールを表示するように、かつ変更された不鮮明度を有する前記顕微鏡ビューを表示する前記ヘッドアップディスプレイを表示するように前記ユーザディスプレイに命令する段階であって、前記スライド及び前記細菌が、該変更された不鮮明度を有するように提示される前記命令する段階と、
    を含む顕微鏡シミュレーションを実施する方法を実行するために関連のプロセッサによって実行可能な命令を格納する非一時的コンピュータ可読媒体。
  18. 前記コントローラが移動しており、かつ前記対物ホイールと対物閾値を超えて該対物を変更するために対話しているという信号を該コントローラが送っていることに応答して、オイルが存在するかをメモリから決定する段階と、オイルが存在していることに応答して、該対物閾値を超えて対物まで回転する該対物ホイールを表示するように前記ユーザディスプレイに命令し、更に、該対物閾値を超えた該対物に対応するレンズが前記スライドの上に位置決めされように命令する段階とを特徴とする請求項16に記載の方法。
  19. 前記コントローラが移動しており、かつ前記対物ホイールと対物閾値を超えて該対物を変更するために対話しているという信号を該コントローラが送っていることに応答して、オイルが存在するかをメモリから決定する段階と、オイルが存在していないことに応答して、オイル追加通知を表示するように前記ユーザディスプレイに命令する段階とを特徴とする請求項16に記載の方法。
  20. 回転する前記対物ホイールを表示するように前記ユーザディスプレイに前記命令する段階は、前記顕微鏡に結合された一連のレンズに回転するように命令する段階を含むことを特徴とする請求項17に記載の方法。
  21. 顕微鏡シミュレーションを提供するための仮想現実システムであって、
    仮想現実ヘッドセット及び少なくとも1つのコントローラのうちの少なくとも一方から対応する入力を受信することに応答して予め定められた作動セットを実行するように構成されたプロセッサを有する処理デバイスであって、該処理デバイスが、顕微鏡シミュレーションの3次元初期ビューが格納されたメモリを含み、該初期ビューが顕微鏡を含む前記処理デバイス、
    を含み、
    前記プロセッサは、前記ヘッドセット内に含まれたユーザディスプレイ上に前記初期ビューが提示されるように命令し、
    前記少なくとも1つのコントローラは、該コントローラが前記初期ビュー内で移動していることを示す入力を前記プロセッサに送り、
    前記プロセッサは、前記少なくとも1つのコントローラのうちの前記コントローラの前記移動が前記ユーザディスプレイ上に提示されるように命令し、
    前記コントローラからの入力に応答して、前記プロセッサは、横ホイール、縦ホイール、対物ホイール、及びフォーカスホイールのうちの1つを表示するように前記ユーザディスプレイに命令し、
    前記プロセッサが前記顕微鏡上に存在するスライドに細菌を割り当てなかったことに応答して、該プロセッサは、メモリからブランクスライドを取り出し、かつ該顕微鏡上にかつ顕微鏡ビューを表示するヘッドアップディスプレイ上に存在する該スライドを表示するように前記ユーザディスプレイに命令し、
    前記コントローラが移動しており、かつ前記対物ホイールと対話しているという信号を該コントローラが送っていることに応答して、前記プロセッサは、該コントローラ移動に基づいて回転する該対物ホイールを表示するように、かつ変更された倍率を有する前記顕微鏡ビューを表示する前記ヘッドアップディスプレイを表示するように前記ユーザディスプレイに命令し、かつ
    前記コントローラが移動しており、かつ前記フォーカスホイールと対話しているという信号を該コントローラが送っていることに応答して、前記プロセッサは、該コントローラ移動に基づいて回転する該フォーカスホイールを表示するように、かつ変更された不鮮明度を有する前記顕微鏡ビューを表示する前記ヘッドアップディスプレイを表示するように前記ユーザディスプレイに命令し、前記スライドは、該変更された不鮮明度を有するように提示される、
    ことを特徴とする仮想現実システム。
  22. 前記プロセッサが前記顕微鏡上に存在するスライドに細菌を割り当てたことに応答して、該プロセッサは、メモリから細菌スライドを取り出し、かつ該顕微鏡上にかつ顕微鏡ビューを表示するヘッドアップディスプレイ上に存在する該スライドを表示するように前記ユーザディスプレイに命令することを特徴とする請求項21に記載のシステム。
  23. 前記コントローラが移動しており、かつ前記フォーカスホイールと対話しているという前記信号を該コントローラが送っていることに応答して、前記プロセッサは、変更された不鮮明度を有する前記顕微鏡ビューを表示する前記ヘッドアップディスプレイを表示するように前記ユーザディスプレイに命令し、前記スライド及び前記細菌は、該変更された不鮮明度を有するように提示されることを特徴とする請求項22に記載のシステム。
  24. 前記コントローラが移動しており、かつ前記対物ホイールと対物閾値を超えて該対物を変更するために対話しているという信号を該コントローラが送っていることに応答して、前記プロセッサは、オイルが存在するかをメモリから決定し、オイルが存在していることに応答して、該プロセッサは、該対物閾値を超えて対物まで回転する該対物ホイールを表示するように前記ユーザディスプレイに命令し、更に、該プロセッサは、該対物閾値を超えた該対物に対応するレンズを前記スライドの上に位置決めされるように表示するように該ユーザディスプレイに命令することを特徴とする請求項21に記載のシステム。
  25. 回転する前記対物ホイールを表示するように前記ユーザディスプレイに命令する前記プロセッサは、該プロセッサが、回転する前記顕微鏡に結合された一連のレンズを表示するように該ユーザディスプレイに命令する段階を含むことを特徴とする請求項21に記載のシステム。
JP2021521031A 2018-10-12 2019-10-14 仮想現実シミュレーション及び方法 Active JP7402867B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862744753P 2018-12-10 2018-12-10
US62/744,753 2018-12-10
PCT/US2019/056136 WO2020123026A1 (en) 2018-12-10 2019-10-14 Virtual reality simulation and method

Publications (3)

Publication Number Publication Date
JP2022513578A true JP2022513578A (ja) 2022-02-09
JPWO2020123026A5 JPWO2020123026A5 (ja) 2022-10-20
JP7402867B2 JP7402867B2 (ja) 2023-12-21

Family

ID=71077466

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021521031A Active JP7402867B2 (ja) 2018-10-12 2019-10-14 仮想現実シミュレーション及び方法

Country Status (7)

Country Link
US (2) US11854424B2 (ja)
EP (1) EP3894997A4 (ja)
JP (1) JP7402867B2 (ja)
KR (1) KR20210100089A (ja)
AU (1) AU2019399480B2 (ja)
CA (1) CA3115710A1 (ja)
WO (1) WO2020123026A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115376383B (zh) * 2022-10-26 2023-01-17 运易通科技有限公司 一种体感交互自适应vr眼镜交互设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005134536A (ja) * 2003-10-29 2005-05-26 Omron Corp 作業訓練支援システム
JP2011502300A (ja) * 2007-10-26 2011-01-20 キンバリー クラーク ワールドワイド インコーポレイテッド 感染管理ソリューションの開発のための仮想現実ツール
US20150000025A1 (en) * 2012-06-27 2015-01-01 sigmund lindsay clements Touch Free Hygienic Display Control Panel For A Smart Toilet
US20180090029A1 (en) * 2016-09-29 2018-03-29 Simbionix Ltd. Method and system for medical simulation in an operating room in a virtual reality or augmented reality environment
WO2018106289A1 (en) * 2016-12-09 2018-06-14 Brent, Roger Augmented reality procedural system

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008156151A1 (ja) * 2007-06-19 2008-12-24 Kobelco Eco-Solutions Co., Ltd. シミュレーション方法、シミュレーション装置、生物処理方法、ならびに、生物処理装置
US9881520B2 (en) * 2008-01-08 2018-01-30 Immersion Medical, Inc. Virtual tool manipulation system
WO2013078449A1 (en) * 2011-11-23 2013-05-30 Sassani Joseph Universal microsurgical simulator
US10509865B2 (en) 2014-09-18 2019-12-17 Google Llc Dress form for three-dimensional drawing inside virtual reality environment
US11227509B2 (en) * 2014-12-29 2022-01-18 Help Me See Inc. Surgical simulator systems and methods
CN106085862A (zh) * 2016-06-06 2016-11-09 中国科学院沈阳应用生态研究所 一种快速高通量筛选油藏本源聚合物产生菌的方法
CN107312715B (zh) * 2017-06-15 2020-06-19 武汉理工大学 一种两相法快速筛选反硝化聚磷菌的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005134536A (ja) * 2003-10-29 2005-05-26 Omron Corp 作業訓練支援システム
JP2011502300A (ja) * 2007-10-26 2011-01-20 キンバリー クラーク ワールドワイド インコーポレイテッド 感染管理ソリューションの開発のための仮想現実ツール
US20150000025A1 (en) * 2012-06-27 2015-01-01 sigmund lindsay clements Touch Free Hygienic Display Control Panel For A Smart Toilet
US20180090029A1 (en) * 2016-09-29 2018-03-29 Simbionix Ltd. Method and system for medical simulation in an operating room in a virtual reality or augmented reality environment
WO2018106289A1 (en) * 2016-12-09 2018-06-14 Brent, Roger Augmented reality procedural system

Also Published As

Publication number Publication date
JP7402867B2 (ja) 2023-12-21
US11854424B2 (en) 2023-12-26
AU2019399480A1 (en) 2021-04-15
EP3894997A1 (en) 2021-10-20
AU2019399480B2 (en) 2024-04-18
US20240087473A1 (en) 2024-03-14
EP3894997A4 (en) 2022-09-07
WO2020123026A1 (en) 2020-06-18
US20220044593A1 (en) 2022-02-10
KR20210100089A (ko) 2021-08-13
CA3115710A1 (en) 2020-06-18

Similar Documents

Publication Publication Date Title
US20200273254A1 (en) Ergonomic mixed reality step-by-step instructions tethered to 3d holograms in real-world locations
US9041622B2 (en) Controlling a virtual object with a real controller device
US20240087473A1 (en) Virtual reality simulation and method
CN108885492A (zh) 虚拟对象路径控制
US20120005624A1 (en) User Interface Elements for Use within a Three Dimensional Scene
CN108780360A (zh) 虚拟现实导航
WO2016073783A1 (en) Sensory feedback systems and methods for guiding users in virtual reality environments
CN112105486B (zh) 用于工业机器人的增强现实
JP2017539035A (ja) ジェスチャインタフェース
Buń et al. Possibilities and determinants of using low-cost devices in virtual education applications
Adhikarla et al. Freehand interaction with large-scale 3D map data
JP2017004356A (ja) 仮想空間位置指定方法、プログラム、プログラムを記録した記録媒体、および、装置
Sharma et al. Augmented reality–an important aspect of Industry 4.0
WO2019121654A1 (en) Methods, apparatus, systems, computer programs for enabling mediated reality
RU2604430C2 (ru) Взаимодействие с трехмерным виртуальным динамическим отображением
Pai et al. Pinchmove: improved accuracy of user mobility for near-field navigation in virtual environments
Novak-Marcincin et al. Interactive monitoring of production process with use of augmented reality technology
Glueck et al. DeskCube: using physical zones to select and control combinations of 3D navigation operations
JPWO2020123026A5 (ja)
JP2018183600A (ja) アプリケーション制御プログラム、アプリケーション制御方法及びアプリケーション制御システム
US20240118786A1 (en) Augmented reality system and method for collecting custom datasets for 3d hand-object interaction pose estimation
Sherstyuk et al. Impact of hand-assisted viewing on user performance and learning patterns in virtual environments
KR102667544B1 (ko) 가상 현실 환경에서 사용자를 안내하기 위한 감각 피드백 시스템 및 방법
JP2017004539A (ja) 仮想空間位置指定方法、プログラム、プログラムを記録した記録媒体、および、装置
JP2021108067A (ja) 情報処理装置、情報処理方法及び情報処理プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221012

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221012

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230824

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231026

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231211

R150 Certificate of patent or registration of utility model

Ref document number: 7402867

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150