JP7345866B2 - 情報処理システム、情報処理方法及びプログラム - Google Patents
情報処理システム、情報処理方法及びプログラム Download PDFInfo
- Publication number
- JP7345866B2 JP7345866B2 JP2021048820A JP2021048820A JP7345866B2 JP 7345866 B2 JP7345866 B2 JP 7345866B2 JP 2021048820 A JP2021048820 A JP 2021048820A JP 2021048820 A JP2021048820 A JP 2021048820A JP 7345866 B2 JP7345866 B2 JP 7345866B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- user
- information processing
- augmented reality
- processing system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 119
- 238000003672 processing method Methods 0.000 title claims description 7
- 238000000034 method Methods 0.000 claims description 100
- 230000003190 augmentative effect Effects 0.000 claims description 92
- 230000000694 effects Effects 0.000 description 37
- 238000004891 communication Methods 0.000 description 29
- 238000003384 imaging method Methods 0.000 description 26
- 238000010586 diagram Methods 0.000 description 20
- 239000003550 marker Substances 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000036544 posture Effects 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000002439 hemostatic effect Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- APTZNLHMIGJTEW-UHFFFAOYSA-N pyraflufen-ethyl Chemical compound C1=C(Cl)C(OCC(=O)OCC)=CC(C=2C(=C(OC(F)F)N(C)N=2)Cl)=C1F APTZNLHMIGJTEW-UHFFFAOYSA-N 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 206010047571 Visual impairment Diseases 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 230000000968 intestinal effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000009958 sewing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/361—Image-producing devices, e.g. surgical cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2068—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B2090/364—Correlation of different images or relation of image positions in respect to the body
- A61B2090/365—Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/50—Supports for surgical instruments, e.g. articulated arms
- A61B2090/502—Headgear, e.g. helmet, spectacles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
Description
1.ハードウェア構成
本節では、第1の実施形態のハードウェア構成について説明する。
図1は、本実施形態に係る情報処理システム1を表す構成図である。情報処理システム1は、情報処理装置2と、拡張現実提示装置3とを備え、これらがネットワーク11を通じて接続されている。これらの構成要素についてさらに説明する。ここで、情報処理システム1に例示されるシステムとは、1つ又はそれ以上の装置又は構成要素からなるものである。したがって、情報処理装置2や拡張現実提示装置3単体であってもシステムの一例となる。
図2は、本実施形態に係る情報処理装置2のハードウェア構成を示すブロック図である。情報処理装置2は、通信部21と、記憶部22と、制御部23とを有し、これらの構成要素が情報処理装置2の内部において通信バス20を介して電気的に接続されている。各構成要素についてさらに説明する。
図3は、本実施形態に係る拡張現実提示装置3のハードウェア構成を示すブロック図である。拡張現実提示装置3は、ユーザに拡張現実を提供する装置である。拡張現実提示装置3は、通信部31と、記憶部32と、制御部33と、表示部34と、入力部35と、撮像部36とを有し、これらの構成要素が拡張現実提示装置3の内部において通信バス30を介して電気的に接続されている。各構成要素についてさらに説明する。
本節では、本実施形態の機能構成について説明する。前述の通り、記憶部32に記憶されているソフトウェアによる情報処理がハードウェアの一例である制御部33によって具体的に実現されることで、制御部33に含まれる各機能部として実行されうる。
本節では、前述した情報処理システム1の情報処理方法について説明する。ここでは、情報処理装置2を使用する情報提供者は、ユーザの指導医であり、ユーザは、指導医から医療手技を指導される研修医であるものとして説明する。また、拡張現実提示装置3は、前述したヘッドマウントディスプレイ方式のデバイスであるものとし、ユーザがこれを装着しているものとして説明する。
まず、情報処理装置2の情報処理について説明する。図5は、第1の実施形態に係る情報処理装置2によって実行される情報処理の流れを示すアクティビティ図である。図6は、情報提供者が行う参照手技を撮像装置211で撮像する態様を示した概要図である。
次に、拡張現実提示装置3の情報処理について説明する。図7は、第1の実施形態に係る拡張現実提示装置3によって実行される情報処理の流れを示すアクティビティ図である。図8及び図9は、ユーザに視認される表示部34の画面5の態様一例を示した図である。
第2の実施形態に係る情報処理システム1について説明する。第2の実施形態に係る情報処理システム1は、図1~図4に示される第1の実施形態に係る情報処理システム1と同様のハードウェア構成及び機能構成を有する。したがって、これらの説明を省略する。
前述の実施形態に係る情報処理システム1に関して、以下のような態様を採用してもよい。
前記情報処理システムにおいて、前記追跡箇所は、前記医療器具又はこの医療器具を操る手に対して設定され、前記3次元位置は、前記参照手技の術野に対する相対的な位置である、もの。
前記情報処理システムにおいて、前記制御部は、第1の特定ステップをさらに実行するように構成され、前記第1の特定ステップでは、前記撮像画像から、前記ユーザが視認可能な術野を特定し、前記生成ステップでは、前記医療器具又はこの医療器具を操る手が前記術野上に重畳された拡張現実を前記ユーザに提示するための表示情報を生成する、もの。
前記情報処理システムにおいて、前記制御部は、第2の特定ステップをさらに実行するように構成され、前記第2の特定ステップでは、前記撮像画像から、前記ユーザの医療手技であるユーザ手技を特定し、前記生成ステップでは、前記ユーザ手技の態様に応じて、前記拡張現実を前記ユーザに提示するための表示情報を変化させて生成する、もの。
前記情報処理システムにおいて、前記拡張現実では、前記ユーザ手技の態様に応じて、前記参照手技の進行が制御される、もの。
前記情報処理システムにおいて、前記拡張現実では、現在の前記ユーザ手技の態様に比べて、時系列的に未来の手順を示す前記参照手技が再現される、もの。
前記情報処理システムにおいて、前記拡張現実では、前記参照手技の進行速度が可変に構成される、もの。
前記情報処理システムにおいて、前記拡張現実では、前記医療器具又はこの医療器具を操る手の透過度が可変に構成される、もの。
前記情報処理システムにおいて、前記拡張現実では、前記医療器具又はこの医療器具を操る手の態様の時系列変化について、変化する各態様を重ねて、前記ユーザに提示する、もの。
前記情報処理システムにおいて、前記変化する各態様は、離散的に選択されたフレームに基づく、もの。
前記情報処理システムにおいて、前記読出ステップでは、予め記憶された前記参照情報を読み出す、もの。
前記情報処理システムにおいて、前記制御部は、第2の受付ステップをさらに実行するように構成され、前記第2の受付ステップでは、ネットワークを介して外部から前記参照情報を受け付け、前記読出ステップでは、外部から受け付けた前記参照情報を読み出す、もの。
前記情報処理システムにおいて、前記第2の受付ステップでは、前記ユーザと異なる者が実施中の前記参照手技に関する参照情報を継続的に受け付け、前記読出ステップでは、受け付けた前記参照情報を継続的に読み出し、前記生成ステップでは、実施中の前記参照手技に関する拡張現実を、前記ユーザに提示する、もの。
前記情報処理システムにおいて、表示部をさらに備え、前記表示部は、前記外界からの光を前記ユーザに向かう方向に透過させるように構成され、前記外界と前記参照手技とを重畳させた状態を前記ユーザが視認可能となるように、前記表示情報に基づく画面を表示するように構成され、もの。
前記情報処理システムにおいて、前記表示部は、ユーザが装着可能なウェアラブルデバイスに含まれる、もの。
情報処理方法であって、前記情報処理システムの各ステップを備える、方法。
プログラムであって、コンピュータに、前記情報処理システムにおける各ステップを実行させる、もの。
もちろん、この限りではない。
11 :ネットワーク
2 :情報処理装置
20 :通信バス
21 :通信部
211 :撮像装置
22 :記憶部
23 :制御部
24 :表示部
3 :拡張現実提示装置
30 :通信バス
31 :通信部
32 :記憶部
33 :制御部
331 :受付部
332 :読出部
333 :特定部
334 :生成部
335 :AR制御部
34 :表示部
35 :入力部
36 :撮像部
4L :左手
4R :右手
41 :攝子
42 :持針器
43 :術野
5 :画面
5L :左手
5R :右手
51 :攝子
511 :マーカ
52 :持針器
521 :マーカ
53 :術野
54 :模型
541 :マーカ
6 :AR情報
61 :AR攝子
62 :AR持針器
IF1 :参照情報
IF2 :表示情報
IM1 :撮像画像
IM2 :撮像画像
Claims (16)
- 情報処理システムであって、
制御部を備え、
前記制御部は、次の各ステップを実行するように構成され、
読出ステップでは、ユーザに参照させたい医療手技である参照手技に関する参照情報を読み出し、ここで前記参照情報は、前記参照手技における追跡箇所の3次元位置を含み、
第1の受付ステップでは、前記ユーザが視認する外界を撮像した撮像画像を受け付け、
生成ステップでは、前記追跡箇所の3次元位置と、前記撮像画像とに基づいて、前記参照手技に関する拡張現実(但し、前記参照手技を撮影したお手本動画が表示される態様の拡張現実と、前記お手本動画の表示内容を変化させた動画が表示される態様の拡張現実とを除く。)を前記ユーザに提示するための表示情報を生成し、
前記拡張現実では、前記参照手技において用いられる医療器具又はこの医療器具を操る手の態様が3次元で再現され、
前記追跡箇所は、前記医療器具又はこの医療器具を操る手に対して設定され、
前記3次元位置は、前記参照手技の術野に対する相対的な位置であり、
第2の特定ステップでは、前記撮像画像から、前記ユーザの医療手技であるユーザ手技を特定し、
前記生成ステップでは、前記ユーザ手技の態様に応じて、前記拡張現実を前記ユーザに提示するための表示情報を変化させて生成する、もの。 - 請求項1に記載の情報処理システムにおいて、
前記拡張現実では、前記ユーザ手技の態様に応じて、前記参照手技の進行が制御される、もの。 - 請求項2に記載の情報処理システムにおいて、
前記拡張現実では、現在の前記ユーザ手技の態様に比べて、時系列的に未来の手順を示す前記参照手技が再現される、もの。 - 情報処理システムであって、
制御部を備え、
前記制御部は、次の各ステップを実行するように構成され、
読出ステップでは、ユーザに参照させたい医療手技である参照手技に関する参照情報を読み出し、ここで前記参照情報は、前記参照手技における追跡箇所の3次元位置を含み、
第1の受付ステップでは、前記ユーザが視認する外界を撮像した撮像画像を受け付け、
生成ステップでは、前記追跡箇所の3次元位置と、前記撮像画像とに基づいて、前記参照手技に関する拡張現実(但し、前記参照手技を撮影したお手本動画が表示される態様の拡張現実と、前記お手本動画の表示内容を変化させた動画が表示される態様の拡張現実とを除く。)を前記ユーザに提示するための表示情報を生成し、
前記拡張現実では、前記参照手技において用いられる医療器具又はこの医療器具を操る手の態様が3次元で再現され、
前記追跡箇所は、前記医療器具又はこの医療器具を操る手に対して設定され、
前記3次元位置は、前記参照手技の術野に対する相対的な位置であり、
前記拡張現実では、前記参照手技の進行速度が可変に構成される、もの。 - 請求項1~請求項4の何れか1つに記載の情報処理システムにおいて、
前記制御部は、第1の特定ステップをさらに実行するように構成され、
前記第1の特定ステップでは、前記撮像画像から、前記ユーザが視認可能な術野を特定し、
前記生成ステップでは、前記医療器具又はこの医療器具を操る手が前記術野上に重畳された拡張現実を前記ユーザに提示するための表示情報を生成する、もの。 - 請求項1~請求項5の何れか1つに記載の情報処理システムにおいて、
前記拡張現実では、前記医療器具又はこの医療器具を操る手の透過度が可変に構成される、もの。 - 請求項1~請求項6の何れか1つに記載の情報処理システムにおいて、
前記拡張現実では、前記医療器具又はこの医療器具を操る手の態様の時系列変化について、変化する各態様を重ねて、前記ユーザに提示する、もの。 - 請求項7に記載の情報処理システムにおいて、
前記変化する各態様は、離散的に選択されたフレームに基づく、もの。 - 請求項1~請求項8の何れか1つに記載の情報処理システムにおいて、
前記読出ステップでは、予め記憶された前記参照情報を読み出す、もの。 - 請求項1~請求項8の何れか1つに記載の情報処理システムにおいて、
前記制御部は、第2の受付ステップをさらに実行するように構成され、
前記第2の受付ステップでは、ネットワークを介して外部から前記参照情報を受け付け、
前記読出ステップでは、外部から受け付けた前記参照情報を読み出す、もの。 - 請求項10に記載の情報処理システムにおいて、
前記第2の受付ステップでは、前記ユーザと異なる者が実施中の前記参照手技に関する参照情報を継続的に受け付け、
前記読出ステップでは、受け付けた前記参照情報を継続的に読み出し、
前記生成ステップでは、実施中の前記参照手技に関する拡張現実を、前記ユーザに提示する、もの。 - 請求項1~請求項11の何れか1つに記載の情報処理システムにおいて、
前記生成ステップでは、視覚以外の五感で前記ユーザに感知される情報をさらに生成する、もの。 - 請求項1~請求項12の何れか1つに記載の情報処理システムにおいて、
表示部をさらに備え、
前記表示部は、
前記外界からの光を前記ユーザに向かう方向に透過させるように構成され、
前記外界と前記参照手技とを重畳させた状態を前記ユーザが視認可能となるように、前記表示情報に基づく画面を表示するように構成される、もの。 - 請求項13に記載の情報処理システムにおいて、
前記表示部は、ユーザが装着可能なウェアラブルデバイスに含まれる、もの。 - 情報処理方法であって、
請求項1~請求項14の何れか1つに記載の情報処理システムの各ステップを備える、方法。 - プログラムであって、
コンピュータに、請求項1~請求項14の何れか1つに記載の情報処理システムにおける各ステップを実行させる、もの。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021048820A JP7345866B2 (ja) | 2021-03-23 | 2021-03-23 | 情報処理システム、情報処理方法及びプログラム |
PCT/JP2022/013346 WO2022202860A1 (ja) | 2021-03-23 | 2022-03-23 | 情報処理システム、情報処理方法及びプログラム |
US18/280,420 US20240074818A1 (en) | 2021-03-23 | 2022-03-23 | Information processing system, information processing method, and program |
EP22775642.6A EP4318408A1 (en) | 2021-03-23 | 2022-03-23 | Information processing system, information processing method, and program |
CN202280019485.1A CN116940995A (zh) | 2021-03-23 | 2022-03-23 | 信息处理系统、信息处理方法及程序 |
JP2023139978A JP7417337B2 (ja) | 2021-03-23 | 2023-08-30 | 情報処理システム、情報処理方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021048820A JP7345866B2 (ja) | 2021-03-23 | 2021-03-23 | 情報処理システム、情報処理方法及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023139978A Division JP7417337B2 (ja) | 2021-03-23 | 2023-08-30 | 情報処理システム、情報処理方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2022147538A JP2022147538A (ja) | 2022-10-06 |
JP2022147538A5 JP2022147538A5 (ja) | 2022-11-15 |
JP7345866B2 true JP7345866B2 (ja) | 2023-09-19 |
Family
ID=83397287
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021048820A Active JP7345866B2 (ja) | 2021-03-23 | 2021-03-23 | 情報処理システム、情報処理方法及びプログラム |
JP2023139978A Active JP7417337B2 (ja) | 2021-03-23 | 2023-08-30 | 情報処理システム、情報処理方法及びプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023139978A Active JP7417337B2 (ja) | 2021-03-23 | 2023-08-30 | 情報処理システム、情報処理方法及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20240074818A1 (ja) |
EP (1) | EP4318408A1 (ja) |
JP (2) | JP7345866B2 (ja) |
CN (1) | CN116940995A (ja) |
WO (1) | WO2022202860A1 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015097825A1 (ja) | 2013-12-26 | 2015-07-02 | 独立行政法人科学技術振興機構 | 動き学習支援装置及び動き学習支援方法 |
JP2016512658A (ja) | 2012-12-26 | 2016-04-28 | ビパール, エルエルシー | 多重現実環境における役割切り替えのためのシステムおよび方法 |
JP2019533824A (ja) | 2016-07-25 | 2019-11-21 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 拡張現実および仮想現実アイウェアを用いた結像修正、表示、および可視化 |
JP2020144233A (ja) | 2019-03-06 | 2020-09-10 | 株式会社日立製作所 | 学習支援システム、学習支援装置及びプログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102046214B1 (ko) | 2016-03-23 | 2019-12-04 | 주식회사 경동나비엔 | 공기조화기와 그 제어방법 |
JP6560331B2 (ja) | 2017-12-19 | 2019-08-14 | オリンパス株式会社 | 医療支援システム、ファイルサーバー、患者画像データ取得方法、患者画像データ取得プログラム |
-
2021
- 2021-03-23 JP JP2021048820A patent/JP7345866B2/ja active Active
-
2022
- 2022-03-23 US US18/280,420 patent/US20240074818A1/en active Pending
- 2022-03-23 EP EP22775642.6A patent/EP4318408A1/en active Pending
- 2022-03-23 WO PCT/JP2022/013346 patent/WO2022202860A1/ja active Application Filing
- 2022-03-23 CN CN202280019485.1A patent/CN116940995A/zh active Pending
-
2023
- 2023-08-30 JP JP2023139978A patent/JP7417337B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016512658A (ja) | 2012-12-26 | 2016-04-28 | ビパール, エルエルシー | 多重現実環境における役割切り替えのためのシステムおよび方法 |
WO2015097825A1 (ja) | 2013-12-26 | 2015-07-02 | 独立行政法人科学技術振興機構 | 動き学習支援装置及び動き学習支援方法 |
JP2019533824A (ja) | 2016-07-25 | 2019-11-21 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 拡張現実および仮想現実アイウェアを用いた結像修正、表示、および可視化 |
JP2020144233A (ja) | 2019-03-06 | 2020-09-10 | 株式会社日立製作所 | 学習支援システム、学習支援装置及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2022202860A1 (ja) | 2022-09-29 |
JP2022147538A (ja) | 2022-10-06 |
EP4318408A1 (en) | 2024-02-07 |
JP2023164901A (ja) | 2023-11-14 |
JP7417337B2 (ja) | 2024-01-18 |
US20240074818A1 (en) | 2024-03-07 |
CN116940995A (zh) | 2023-10-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11547520B2 (en) | Systems, methods, and computer-readable storage media for controlling aspects of a robotic surgical device and viewer adaptive stereoscopic display | |
RU2740259C2 (ru) | Позиционирование датчика ультразвуковой визуализации | |
US20220336078A1 (en) | System and method for tracking a portion of the user as a proxy for non-monitored instrument | |
JP2022507478A (ja) | 拡張現実を利用した手術補助装置 | |
US11094283B2 (en) | Head-wearable presentation apparatus, method for operating the same, and medical-optical observation system | |
CN114641251A (zh) | 外科手术虚拟现实用户接口 | |
US20180014903A1 (en) | Head-mountable computing device, method and computer program product | |
EP3803540B1 (en) | Gesture control of medical displays | |
Zinchenko et al. | Virtual reality control of a robotic camera holder for minimally invasive surgery | |
CN113768619A (zh) | 路径定位方法、信息显示装置、存储介质及集成电路芯片 | |
KR20110049703A (ko) | 수술 로봇 시스템 및 그 복강경 조작 방법 | |
JP7417337B2 (ja) | 情報処理システム、情報処理方法及びプログラム | |
US10854005B2 (en) | Visualization of ultrasound images in physical space | |
US11328187B2 (en) | Information processing apparatus and information processing method | |
KR101114234B1 (ko) | 수술 로봇 시스템 및 그 복강경 조작 방법 | |
JP2023504266A (ja) | 外科用イメージングの拡張現実ディスプレイ | |
US11771506B2 (en) | Method and system for controlling dental machines | |
US11937891B2 (en) | Systems and methods of controlling surgical robotic system using eye-tracking | |
JP2022147538A5 (ja) | ||
JP2024513991A (ja) | トリガイベントに基づいて術野のディスプレイオーバーレイを変更するためのシステム及び方法 | |
WO2022219491A1 (en) | System and method for tracking a portion of the user as a proxy for non-monitored instrument | |
JP2024514640A (ja) | 画面上及び画面外で発生する混合された要素及びアクションを表示するレンダリングされた要素で直接視覚化される混合 | |
GB2611556A (en) | Augmented reality ultrasound-control system for enabling remote direction of a user of ultrasound equipment by experienced practitioner | |
EP4178473A1 (en) | System comprising a camera array deployable out of a channel of a tissue penetrating surgical device | |
JP2021133170A (ja) | 医用画像処理装置、医用画像処理方法および医用画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221107 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221107 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20221107 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230317 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230804 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230829 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230830 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7345866 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |