CN100530048C - 信息显示、凝视探测和用户控制权优先化的方法和设备 - Google Patents

信息显示、凝视探测和用户控制权优先化的方法和设备 Download PDF

Info

Publication number
CN100530048C
CN100530048C CNB200510108401XA CN200510108401A CN100530048C CN 100530048 C CN100530048 C CN 100530048C CN B200510108401X A CNB200510108401X A CN B200510108401XA CN 200510108401 A CN200510108401 A CN 200510108401A CN 100530048 C CN100530048 C CN 100530048C
Authority
CN
China
Prior art keywords
user
display
information
control
health care
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB200510108401XA
Other languages
English (en)
Other versions
CN1770063A (zh
Inventor
M·M·莫里塔
P·马赫什
T·A·根特莱斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
General Electric Co
Original Assignee
General Electric Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Electric Co filed Critical General Electric Co
Publication of CN1770063A publication Critical patent/CN1770063A/zh
Application granted granted Critical
Publication of CN100530048C publication Critical patent/CN100530048C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Z—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS, NOT OTHERWISE PROVIDED FOR
    • G16Z99/00—Subject matter not provided for in other main groups of this subclass
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • A61B5/749—Voice-controlled interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Urology & Nephrology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • User Interface Of Digital Computer (AREA)
  • Eye Examination Apparatus (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明的某些实施例提供了使用凝视探测以改善医疗保健环境中信息显示的方法(400)和系统(300)。系统(300)的某些实施例包含用于探测用户凝视的位置的头戴式眼镜(210)和用于显示信息的显示器(350)。基于用户的凝视而为该用户定制诸如图像与/或数据的显示器(350)上的信息。在一个实施例中，头戴式眼镜观察器(220)将信息投影到用户的眼睛，从而实现单独的信息显示。系统(300)还包含用于确定多个用户之间对显示器(350)的优先权和控制权的冲突解决模块。在一个实施例中，使用例如声音命令、手势、与/或凝视触发显示器(350)的功能。

Description

信息显示、凝视探测和用户控制权优先化的方法和设备
技术领域
本发明通常涉及医疗保健环境中的信息显示。特别地，本发明涉及使用凝视探测技术以改善医疗保健环境中相关信息的显示。
背景技术
临床或医疗保健环境是拥挤且要求高的环境，这种环境将从对成像系统、数据存储系统、和其它用于医疗保健环境的设备的组织以及更加便利的使用中受益。诸如医院或诊所的医疗保健环境包含大批的专业人员、患者、和设备。医疗保健环境中的人员必须管理很多患者、系统、及任务，从而为患者提供高质量的服务。医疗保健工作人员在其工作流程中会碰到许多困难或者障碍。
临床环境中各种分散注意力的事物会频繁地打断医疗工作人员或妨碍他们的工作表现。此外，诸如放射室的工作场所可能杂乱地堆满例如各种监视器、数据输入装置、数据存储装置、和通信装置。混乱的工作场所可能导致低效率的工作流程以及对客户的服务，这可能影响患者健康和安全或对医疗保健设备负有责任。典型的医疗保健设备中，数据录入和访问也复杂。
因此，医疗或医疗保健工作人员难以管理置于已经拥挤的环境内、用于执行日常任务的多个完全不同的装置。此外，各个装置之间缺乏协同工作能力增大了医疗保健工作流程中与使用多个装置相关的延迟和不便。使用多个装置也会涉及在相同环境中管理多个注册。故非常需要用于改善医疗保健环境中多个装置使用的容易性及它们之间的协同工作能力的系统和方法。
在涉及与诸如键盘、计算机鼠标装置、成像探头、以及手术设备的多个装置频繁相互作用的医疗保健环境中，经常会发生重复性的运动无序。故非常需要可排除一些重复性运动以便最小化重复性运动伤害的系统和方法。
诸如医院或诊所的医疗保健环境包含例如医院信息系统(HIS)和放射信息系统(RIS)的临床信息系统和例如图像存档和通信系统(PACS)的存储系统。存储的信息可包含例如患者的医疗记录、成像数据、检验结果、诊断信息、管理信息、与/或进度信息。该信息可以集中存储或者划分在多个位置。医疗保健人员可能需要在医疗保健工作流程中的任意点访问患者信息或者其它信息。例如，在手术期间，医疗工作人员可以访问存储于医疗信息系统的诸如患者解剖图像的患者信息。或者，医疗工作人员可以在正在进行的医疗进程中将诸如病史、诊断信息、或者治疗信息的新信息录入医疗信息系统。
在诸如PACS的当前信息系统中，使用具有键盘与/或鼠标的本地计算机终端输入或检索信息。在医疗进程期间或者医疗工作流程的其它时间，物理使用键盘、鼠标、或类似装置可能不现实(例如在不同的房间内)与/或不卫生(即破坏个体无菌区的完整性)。使用本地计算机终端之后的重新消毒对于例如在手术室内的医疗工作人员而言经常是不现实的，而且可能使医疗工作人员对访问医疗信息系统失去信心。因此，非常需要能无物理接触地提供对医疗信息系统的访问的系统和方法，从而改善工作流程并保持无菌区。
成像系统的配置和操作复杂。经常，医疗保健工作人员可能会设法获得患者的图像、参考或者更新患者的记录或诊断、并预定检验或会诊。因此，需要这样的系统和方法，它能够使操作人员便于操作成像系统和相关装置并促进成像系统和相关装置的协同工作能力。
在许多情况中，当使用成像系统控制台扫描患者或其它对象时，成像系统的操作人员可能会碰到困难。例如，使用通常的系统控制的控制台，难以使用诸如超声成像系统的成像系统进行上肢和下肢检查、挤压检查(compression exam)、颈动脉检查、新生儿头部检查、以及便携式检查。操作人员可能无法同时物理接触控制台和待扫描位置。此外，操作人员可能无法调整正被扫描的患者并同时在控制台操作该系统。操作人员可能无法够得着电话或计算机终端以访问信息或预定检验或会诊。提供额外的操作人员或助手以辅助检查可能会提高检查成本，并可能由于操作人员和助手之间的错误交流而产生错误或无用数据。因此，非常需要使单个操作人员方便地操作成像系统和相关装置的方法和系统。
诸如放射科医生或心脏病医生进程阅读的阅读是例如放射科医生或心脏病医生的专业人员查看患者数字图像的过程。专业人员基于诊断图像的内容进行诊断并电子地(例如使用口述或其它方式)或者在纸上报告结果。诸如放射科医生或心脏病医生的专业人员通常使用其它工具进行诊断。其它工具的一些例子为先前的及相关的先前(历史)检查及其结果、实验室检查(诸如血液分析(blood work))、过敏反应、病理结果、药物治疗、警告、文档图像、以及其它工具。例如放射科医生或心脏病医生在阅读检查结果时，通常会查看诸如实验室信息、电子医疗记录、和医疗保健信息的其它系统。
目前，专业人员必须登录到不同的系统并搜寻患者以从该系统中检索关于该患者的信息。例如，如果患者抱怨其胸部疼痛，则进行胸部X光检查。接着放射科医生登录到其它系统以搜寻该患者并寻找该患者特定的生理状况和症状。因此，放射科医生可能查找到大量要查看的信息。
取决于专业人员所使用的系统及其卖方，诸如放射科医生或心脏病医生的专业人员只有很少的选择来参考可利用的工具。首先，可能要以书面的形式要求来从这些可利用的工具获得信息。其次，专业人员可能使用不同的应用软件，诸如放射信息系统(RIS)、图像存档和通信系统(PACS)、电子医疗记录(EMR)、医疗保健信息系统(HIS)、和实验室信息系统(LIS)，来搜寻患者并电子地检查信息，。
在第一种情况下，专业人员将其注意力从阅读工作站转移，从而在纸张文件上寻找和浏览，在绝大多数情况下每个患者的所述纸张包括许多页纸。这降低了专业人员的速度并引入由于纯粹的纸张量引起错误的可能性。因此非常需要减少专业人员查看和整理的纸张量的系统和方法。
在第二种情况下，电子信息系统经常无法良好地进行不同系统之间的通信。因此，专业人员必须分别登录到各个系统并在每个系统上搜寻患者和检查。如此冗长的作业会导致严重的延迟和潜在的错误。因此非常需要改善多个电子信息系统之间的通信和相互作用的系统和方法。
此外，即使使用诸如临床上下文管理标准(CCOW)的机制集成各个系统以为专业人员提供多个系统内统一的患者上下文，仍然向专业人员提供了太多的要浏览的信息。从不同应用软件同时提供了过多的信息并减慢了阅读和分析过程。需要过滤出用户在例行工作流程中将不需要的应用成分。因此非常需要管理由多个系统提供的信息的系统和方法。
目前，诸如手术室(OR)的医疗保健环境包含连接到多个完全不同的信息与/或成像系统的多个显示器(CRT、LCD等)。这些显示器可悬挂在例如墙壁、天花板、桌子、与/或地板上安装的臂状物的吊杆上。在诸如手术室的某些医疗保健环境中，可能有十个或更多的显示器堆放在房间中，使得专业人员很难试图定位关键信息而不扫视每个显示器。
当专业人员希望从完全不同的系统访问信息时，专业人员当前必须转头查看多个显示器并确定哪个显示器具有所需要的信息。头部的运动，尤其是在医疗过程中，在人机工程学上是不正确的，而且专业人员也觉得不舒适。此外，在整个检查或进程的过程中，这种头部运动可能是高度重复性的。因此非常需要减少头部运动并改善医疗保健环境中的人机工程学的系统和方法。
此外，多个显示器导致同时呈现给医疗保健专业人员的信息过多。因此太多显示器上的过多信息给专业人员试图定位相关信息制造困难。因此，需要一种系统和方法，以改善关键信息的识别并减少医疗保健环境中显示器的堆放。
在诸如手术室的医疗保健环境中拥有太多的显示器可能引发另外的困难。例如，从信息技术角度来看，多个显示器并非成本有效的。为一个或者多个房间购买多个显示器意味着医疗保健供应者的巨大开销。此外，例如，多个显示器与/或多个系统会在医疗保健环境中产生额外的热量。过多的热量导致更高的电费，且可能对医疗保健环境中的患者、专业人员、和设备构成健康威胁。因此非常需要减少医疗保健环境中多个显示器的系统。
因此需要改善医疗保健环境中相关信息显示的系统和方法。
发明内容
本发明的某些实施例提供了使用凝视探测以改善医疗保健环境中信息显示的方法和系统。系统的某些实施例包括用于探测用户凝视的头戴式眼镜及用于显示信息的显示器。显示器上例如图像与/或数据的信息是基于用户的凝视为用户定制的。在一个实施例中，头戴式眼镜观察器将信息投影到用户的眼睛以用于单独的信息显示。该系统还可包含用于确定多个用户之间对显示器的优先权和控制权的冲突解决模块。在一个实施例中，可以使用例如声音命令、手势、与/或凝视触发该显示器的功能。
在一个实施例中，该系统还包含分别存储和多个信息源中至少一个的关系的多个透视(perspective)。该系统可能还包含用于将至少一个信息源和透视相关联的医疗透视管理器。该医疗透视管理器允许用户使用该透视访问相关的一个(多个)信息源。
在一个实施例中，该系统还包含一个规则引擎，该规则引擎含有决定信息是否可用与/或展示的至少一个规则。该系统也可包含上下文管理器，该管理器用来基于查询而从多个信息源获取信息，并基于规则引擎的(多个)规则而过滤信息。
一个方法的某些实施例包括，确定与参考位置有关的用户凝视方向，识别正在朝显示器注视的用户，并基于该用户更新该显示器上的信息。在一个实施例中，基于例如用户的喜好与/或输入更新显示器上的信息。
该方法还包含在多个用户之间判断哪个用户拥有该显示器的控制权。在一个实施例中，可允许多个用户控制该显示器的全部或一部分上的信息。可以使用例如声音命令、手势、与/或凝视触发显示器的功能。此外，该方法可包含将图像投影到用户的眼睛上。该方法还可包括定义至少一个将与该用户相关的信息个人化的透视。在一个实施例中，基于一个或者多个规则过滤该显示器上可获得的信息。
在一个实施例中，计算机可读取的存储介质包含命令计算机显示信息的一组指令。这组指令包含用于确定用户何时注视显示器的凝视探测例行程序，以及在该用户注视该显示器时，在该显示器上显示和该用户相关的信息的显示例行程序。这组指令还可包含用于选择与用户相关联的信息的选择例行程序。此外，这组指令可包含用于确定正在注视该显示器的多个用户的控制优先权的判断例行程序。这组指令还可包含基于至少一个规则来过滤与该用户相关联的信息的基于规则的上下文管理器。在一个实施例中，该信息包含例如数据与/或(多个)图像。
附图说明
图1示出了根据本发明一个实施例所使用的改进的手术室。
图2示出了根据本发明一个实施例所使用的便携式眼镜观察系统。
图3示出了根据本发明一个实施例所使用的凝视探测和控制系统。
图4示出了根据本发明一个实施例所使用的医疗保健环境中凝视探测和控制方法的流程图。
结合附图进行阅读时，将会更好地理解本发明的前述总结以及特定实施例的下述详细描述。出于阐述本发明的目的，附图中示出了特定的实施例。然而，应该理解到，本发明不限于附图中所示的布置和工具。
具体实施方式
图1阐述了结合本发明一个实施例所使用的改进的手术室100。如图1所示，用单个、大型的显示器110替代许多完全不同的显示器，其中显示器110悬吊在靠近手术台120的吊杆115上。显示器110可以和便携式眼镜和眼睛跟踪系统一起使用，来为多个用户显示信息。此外，声音命令与/或使用摄像机(诸如火线网络摄像机(fire-wire webcam))的手势控制使得可以不破坏无菌区地与成像及信息系统相互作用。
图2描述了根据本发明一个实施例所使用的便携式眼镜观察系统200。系统200包含头戴式眼镜210、个人眼镜显示器220、以及凝视跟踪处理器230。处理器230可以集成到眼镜210与/或与眼镜210分离。个人眼镜显示器220被眼镜210投影到用户的视场。
医疗保健专业人员可以使用诸如护目镜的眼镜210，从而捕获专业人员的凝视并执行界面导航。可以通过例如红外或其它光源跟踪用户的凝视。光线可以从用户瞳孔反射并被探测到。光线也可以从用户眼睛的角膜和晶状体的前表面和后表面反射并被探测或记录。重复的测量跟踪用户凝视的变化。可替换地或此外，可以通过例如摄像机或位置传感器，基于用户头部的运动而跟踪用户的凝视。可以确定用户凝视与/或头部在参考坐标系内的位置与/或相对于诸如显示器上某个位置的参考点的位置。在一个实施例中，可以获得多个测量以确定例如用户的视线与/或头部角度。
护目镜或者其它眼镜也可以将图像投影到用户的眼睛，或者提供被粘接到眼镜210并置于用户视场内的微型屏幕从而形成虚拟的个人显示器220。因此，眼镜210可以用于排除医疗保健环境中的部分显示器。此外，眼镜210可允许特定信息被确定为目标显示给医疗保健环境中的特定用户。例如，护士、麻醉师、和外科医生接收显示在其个人眼镜式显示器220上的不同信息。例如，外科医生可能看到图像引导的外科手术和PACS数据，而麻醉师观看EKG和剂量数据。在一个实施例中，每个用户可观看定制信息，而无需转向注视某个显示器以选择该信息。
在一个实施例中，眼镜210为便携式眼镜观察器，该观察器显示诸如血液动力学数据、心脏波形、生命特征等的关键动态患者信息。眼镜210允许用户观看信息而无需转头观看LCD或CRT显示器。尽管头戴式眼镜210允许用户在埋头对患者工作时观看数据，但是例如图像查看与/或精细文本查看的分辨率可能受到限制。当用户希望观看详细信息或者粒度的精细程度时，用户可以观看该医疗保健环境中单个大型的显示器。在一个实施例中，该头戴式眼镜210与/或处理器230包含眼睛跟踪软件，使得一旦该软件探测到用户正在凝视该大型显示器时，用户的透视与/或基于规则的信息被显示在该屏幕上。头戴式眼镜210与/或处理器230的眼睛跟踪能力也可以使用凝视方向输入以控制该大型显示器。例如，处理器230探测用户何时正在注视显示器上的特定按钮、选项、或特征，并为该用户选择或者激活该按钮、选项、或特征。选项/特征的激活也可以基于用户注视某一区域的时间量。也可以结合声音命令与/或手势使用眼镜式系统200以控制例如显示器220与/或其它系统或特征。
例如，基于规则系统，主治外科医生具有对大型显示器的优先观看权力。一旦该主外科医生重新埋头做手术，则其它用户可以访问该显示器。在一个实施例中，“悬挂”显示协议允许用户共享大型显示器上的固定区域(real estate)。
图3阐述了根据本发明一个实施例使用的凝视探测和控制系统300。系统300包含单个大型显示器350和多个眼镜210。系统300可包含凝视跟踪和控制处理器360(未示出)，该处理器为一个单独的处理器或者是凝视跟踪处理器230的协同网络。在一个实施例中，个人眼镜式显示器220可能具有诸如600×800或800×600的有限分辨率。因此，对于诸如患者生命特征或其它数据的特定信息，个人眼镜式显示器220提供了足够的分辨率。对于更大的信息，专业人员可以参考单个大尺寸显示器350以观看诸如图像引导的手术信息的更大的信息。用户注视显示器350。凝视跟踪处理器230认识到该用户想要看特定信息并使用例如透视在更大的显示器350上显示该患者的上下文敏感信息。可以从处理器230传递关于凝视与/或头部位置的信息，以确定显示器350上的信息。此外，可以发送用户偏好信息、来自显示器220的信息、与/或其它输入，从而设置显示器350的内容与/或其它参数。
在一个实施例中，可以基于位置或者除了透视之外的规则，确定显示器350上显示的信息。例如，规则确定医生的凝视的优先于护士的凝视。随后，当医生转开不看显示器350时，护士得到显示器350的控制权。或者，显示器350的控制权可以由多个用户分享并在显示器350上显示公共信息，使得可以几乎同时为多个用户提供信息。
因此，系统200和300允许用户访问并显示诸如PACS、EMR、LIS、HIS、RIS、CVIS、以及其它应用软件或系统的各种系统中的数据。处理器230和/或360将数据组织成对于单个观察者有用的视图。处理器230与/或360快速识别用户正在凝视大尺寸显示器350并将该用户的信息投影到显示器350上。此外，处理器230与/或360能够判断试图访问的多个用户之间的冲突和优先权，并确定哪个(哪些)用户获得显示器350的控制权。例如，基于规则的显示控制与/或悬挂协议可以控制哪个用户具有控制权和优先权以及/或者哪些用户可共享控制权及显示区域。规则和其它协议也可以控制何时放弃与/或预先倒空显示器350的控制权。
显示器350替代手术室内的多个显示器。显示系统300基于用户的偏好跟踪该用户的凝视，且当用户需要比便携式眼镜观察器220的分辨率所允许的更加详细的信息时，显示系统300显示用户指定的“基于透视的”企业信息(enterprise information)。例如，用户在需要时可以在显示器350上看到更加清晰的文本与/或解剖影像。显示器350上显示的信息可以补充与/或替代头戴式眼镜显示器220上显示的信息。
在一个实施例中，视频开关盒与/或声音命令可以和图像引导的外科手术一起使用以切换显示，使得只看到图像引导外科手术信息。在一个实施例中，声音控制与/或手势可以结合眼睛跟踪一起使用以控制显示器350与/或系统光标。
在一个实施例中，管理器120可以和基于规则的上下文管理器协同工作以过滤和显示信息。基于规则的上下文管理器的一个例子在2004年10月1日提交的、发明人为Prakash Mahesh、标题为“System andMethod for Rules-Based Context Management in Radiology andCardiology Diagnostic Reading”的美国专利申请中得到描述，该专利申请在此被完全引用作为参考。
在一个实施例中，管理器120可以和透视管理系统协同工作以处理多个应用软件和工作流程。透视管理系统允许定义各种透视，其保存了特定用户的工作流程步骤和其它信息。透视允许个人化的信息显示给出例如和患者当前状况有密切关系的相关信息。透视管理器系统的一个例子在2004年10月1日提交的、发明人为Prakash Mahesh和MarkRicard、标题为“System and Method for Handling Multiple RadiologyApplications and Workflows”的美国专利申请中得到描述，该专利申请在此被完全引用作为参考。例如，在外科手术室内在手术台旁可能有许多医疗保健专业人员，他们使用相关患者信息的特定透视或视图。采用单个、大型显示器(例如LCD、等离子体显示器、46”以上的显示器等)，每个用户能够以大格式与/或小格式查看显示器上的个人透视。可由多个用户共享该显示器。
图4示出了根据本发明一个实施例所使用的医疗保健环境中用于凝视探测和控制的方法400的流程图。首先，在步骤410，用户戴上头戴式眼镜，例如便携式眼镜210。然后在步骤420，通过该眼镜跟踪用户的凝视。例如，可以在眼镜式显示器220上跟踪该用户的凝视，从而选择显示器220上的特定信息与/或特征。此外，例如，可以在显示器350上跟踪该用户的凝视。
在步骤430，当探测到用户的凝视是朝向显示器350时，调整显示器350上的内容从而为该用户提供信息。也就是说，上下文敏感透视与/或规则可以用于在显示器350上为特定用户显示相关信息。显示器350上的空间可以完全为正在注视显示器350的单个用户所专用，或者可以被划分从而为多个用户显示数据。或者，显示器350可包含显示一般数据的区域以及显示特定用户的特殊数据的一个或者多个区域。在一个实施例中，如果多个用户正看向显示器350，则比较用户的优先权以决定允许哪个(哪些)用户获得显示器350的控制权。
随后，在步骤440，控制显示器350的用户可以操作显示器350。例如，用户可以基于凝视、声音命令、手势、按钮、开关、与/或鼠标装置调整在显示器350上显示的信息。用户可以类似地调整显示器220上显示的信息。显示器220上显示的信息可以模仿或者不模仿显示器350上显示的信息。
接着，在步骤450，当用户将其凝视从显示器350上重新定向到其它位置时，显示器350自行调整成针对另一个用户。例如，当外科医生不看显示器350之后向下看正在进行外科手术的患者时，显示器350可为护士显示信息。在一个实施例中，在该环境中通过用户所戴的个人眼镜可以连续显示诸如生命特征的信息。显示器350上显示的信息补充与/或增强眼镜式显示器220上显示的信息。
因此，某些实施例将各种信息系统和其它应用软件统一成多个用户可以观看的单个显示器。某些实施例基于规则与/或透视过滤用户可获得的信息。某些实施例解决了例如信息过载、人机工程学问题、以及诸如混乱、发热、费用、及显示器的发光的多个显示器所带来的效应。诸如手术室的医疗保健环境中可以排除多个显示器，且可以简化单个大尺寸显示器上的信息从而向特定的专业人员显示相关的患者信息。某些实施例有助于为医疗保健专业人员提供临床决定支持。因此，例如，可以降低医疗错误并使外科手术室工作流程简化。此外，可以减少重复性的头部和颈部运动，从而降低人机工程学困难。
尽管参考特定实施例描述了本发明，本领域技术人员将会了解到，在不离开本发明范围的情况下可以进行各种变化并进行等效替换。此外，可以对本发明的教导进行许多调整以适应特殊的情形或材料而不离开本发明的范围。因此，本发明不限于所公开的具体实施例，本发明将包含落在所附权利要求范围内的所有实施例。
部件列表
100......手术室
110......显示器
115......吊杆
120......手术台
200......便携式眼镜观察系统
210......头戴式眼镜
220......眼睛式显示器
230......凝视跟踪处理器
300......凝视探测和控制系统
350......显示器
360......凝视跟踪和控制处理器
图4......流程图

Claims (10)

1.一种用于显示相关信息的凝视探测和控制系统(300)，所述系统(300)包含：
头戴式眼镜(210)，用于确定用户凝视相对于医疗保健环境中参考位置的方向；
用于显示医疗信息的显示器(350)；
处理器(230)，用于基于用户凝视相对于医疗保健环境中参考位置的方向识别看着显示器的用户，以确立该用户的身份；
其中基于该用户的身份为该用户定制在显示器上显示的医疗信息。
2.权利要求1的系统(300)，其中处理器(230)配置成使用来自被识别的用户的凝视方向输入来控制显示器。
3.权利要求1的系统(300)，进一步包含冲突解决模块，用于在多个用户之间确定对显示器(350)的优先权和控制权。
4.权利要求1的系统(300)，其中使用声音命令、手势、和凝视中的至少一种触发显示器(350)的功能。
5.一种基于凝视探测显示医疗信息的方法(400)，该方法(400)包含：
确定相对于医疗保健环境中参考位置(420)的用户凝视的方向；
基于相对于医疗保健环境中参考位置(420)的用户凝视的方向，识别正看向显示器(350)的用户，以确立用户身份；以及
基于该用户身份为该用户更新显示器(350)上显示的医疗信息，其中允许被识别的用户控制显示器(350)上的信息显示。
6.权利要求5的方法(400)，其中该更新步骤进一步包含基于被识别的用户的偏好和输入中的至少一者来更新显示器(350)上的信息。
7.权利要求5的方法(400)，进一步包含在多个用户之间进行判定以确定显示器(350)的控制权。
8.权利要求5的方法(400)，进一步包含允许多个用户控制显示器(350)上的信息。
9.权利要求5的方法(400)，进一步包含使用声音命令、手势、和凝视(440)中的至少一种触发显示器(350)的功能。
10.权利要求5的方法(400)，进一步包含将图像投影到用户的眼睛中。
CNB200510108401XA 2004-10-01 2005-10-08 信息显示、凝视探测和用户控制权优先化的方法和设备 Expired - Fee Related CN100530048C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/956,435 US7331929B2 (en) 2004-10-01 2004-10-01 Method and apparatus for surgical operating room information display gaze detection and user prioritization for control
US10/956435 2004-10-01

Publications (2)

Publication Number Publication Date
CN1770063A CN1770063A (zh) 2006-05-10
CN100530048C true CN100530048C (zh) 2009-08-19

Family

ID=35429647

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB200510108401XA Expired - Fee Related CN100530048C (zh) 2004-10-01 2005-10-08 信息显示、凝视探测和用户控制权优先化的方法和设备

Country Status (4)

Country Link
US (1) US7331929B2 (zh)
EP (1) EP1643401B1 (zh)
JP (1) JP5172085B2 (zh)
CN (1) CN100530048C (zh)

Families Citing this family (114)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ITFI20040223A1 (it) * 2004-10-29 2005-01-29 Sr Labs S R L Metodo e sistema di visualizzazione,elaborazione ed analisi integrata di immagini mediche
US20060236121A1 (en) * 2005-04-14 2006-10-19 Ibm Corporation Method and apparatus for highly secure communication
US20060287593A1 (en) * 2005-06-20 2006-12-21 General Electric Company System and method providing communication in a medical imaging system
KR101249988B1 (ko) * 2006-01-27 2013-04-01 삼성전자주식회사 사용자의 위치에 따른 영상을 디스플레이하는 장치 및 방법
WO2007089198A1 (en) 2006-02-01 2007-08-09 Tobii Technology Ab Generation of graphical feedback in a computer system
US20080024433A1 (en) * 2006-07-26 2008-01-31 International Business Machines Corporation Method and system for automatically switching keyboard/mouse between computers by user line of sight
WO2008012717A2 (en) * 2006-07-28 2008-01-31 Koninklijke Philips Electronics N. V. Gaze interaction for information display of gazed items
US7808449B2 (en) 2006-12-29 2010-10-05 Texas Instruments Incorporated Method and system for multi-channel viewing applications
WO2008021857A2 (en) * 2006-08-08 2008-02-21 Texas Instruments Incorporated Method and system for multi-channel viewing applications
WO2008091399A2 (en) * 2006-09-01 2008-07-31 Board Of Regents Of The University Of Texas Device and method for measuring information processing speed of the brain
DE102006043172A1 (de) * 2006-09-14 2008-03-27 Siemens Ag Verfahren zur Auswertung des Verhaltens von Nutzern eines digitalen Bildinformationssysstems
US7706896B2 (en) 2006-09-29 2010-04-27 Nellcor Puritan Bennett Llc User interface and identification in a medical device system and method
US7925511B2 (en) 2006-09-29 2011-04-12 Nellcor Puritan Bennett Llc System and method for secure voice identification in a medical device
WO2008042219A2 (en) * 2006-09-29 2008-04-10 Nellcor Puritan Bennett Llc User interface and identification in a medical device systems and methods
US7698002B2 (en) 2006-09-29 2010-04-13 Nellcor Puritan Bennett Llc Systems and methods for user interface and identification in a medical device
JP2008288767A (ja) * 2007-05-16 2008-11-27 Sony Corp 情報処理装置および方法、並びにプログラム
US20090125840A1 (en) * 2007-11-14 2009-05-14 Carestream Health, Inc. Content display system
US20090137227A1 (en) * 2007-11-26 2009-05-28 4Dk Technologies, Inc. Federated Virtual Network of Communications Services
DE102008052491B4 (de) 2008-10-21 2012-05-16 Dräger Medical GmbH Deckenarmsystem
DE102008059456B3 (de) * 2008-11-28 2010-08-26 Siemens Aktiengesellschaft Verfahren zur Anzeige von Bilddaten und Vorrichtung zur Durchführung des Verfahrens
US8416715B2 (en) * 2009-06-15 2013-04-09 Microsoft Corporation Interest determination for auditory enhancement
US9268404B2 (en) * 2010-01-08 2016-02-23 Microsoft Technology Licensing, Llc Application gesture interpretation
WO2011092369A1 (en) * 2010-01-28 2011-08-04 Nokia Corporation Access establishment to locally connectable device
RU2565482C2 (ru) * 2010-03-22 2015-10-20 Конинклейке Филипс Электроникс Н.В. Система и способ для отслеживания точки взгляда наблюдателя
US8373573B2 (en) * 2010-06-15 2013-02-12 Transcend Information, Inc. Display system adapting to 3D tilting adjustment
KR101790342B1 (ko) * 2010-09-14 2017-10-26 엘지전자 주식회사 디스플레이 장치 및 그의 제어 방법
EP2622518A1 (en) 2010-09-29 2013-08-07 BrainLAB AG Method and device for controlling appartus
US8361031B2 (en) 2011-01-27 2013-01-29 Carefusion 303, Inc. Exchanging information between devices in a medical environment
WO2012103387A2 (en) * 2011-01-27 2012-08-02 Carefusion 303, Inc. Associating devices in a medical environment
US8793623B2 (en) 2011-01-27 2014-07-29 Carefusion 303, Inc. Associating devices in a medical environment
US8445878B2 (en) 2011-03-16 2013-05-21 Controlrad Systems, Inc. Radiation control and minimization system and method
WO2012135653A1 (en) 2011-03-30 2012-10-04 Avisar Mordechai Method and system for simulating surgical procedures
KR20120132240A (ko) * 2011-05-27 2012-12-05 삼성전자주식회사 복수의 사용자에게 복수의 영상을 제공하는 듀얼 뷰 디스플레이 방법 및 듀얼 뷰 안경 구동 방법, 이를 적용한 디스플레이 장치 및 듀얼 뷰 안경
US9207767B2 (en) * 2011-06-29 2015-12-08 International Business Machines Corporation Guide mode for gesture spaces
US10976810B2 (en) * 2011-07-11 2021-04-13 Texas Instruments Incorporated Sharing input and output devices in networked systems
US8885882B1 (en) 2011-07-14 2014-11-11 The Research Foundation For The State University Of New York Real time eye tracking for human computer interaction
EP2551784A1 (en) 2011-07-28 2013-01-30 Roche Diagnostics GmbH Method of controlling the display of a dataset
US9658687B2 (en) 2011-09-30 2017-05-23 Microsoft Technology Licensing, Llc Visual focus-based control of coupled displays
US9142182B2 (en) * 2011-10-07 2015-09-22 Lg Electronics Inc. Device and control method thereof
US8970452B2 (en) 2011-11-02 2015-03-03 Google Inc. Imaging method
US9098069B2 (en) 2011-11-16 2015-08-04 Google Technology Holdings LLC Display device, corresponding systems, and methods for orienting output on a display
US8611015B2 (en) * 2011-11-22 2013-12-17 Google Inc. User interface
US20130147686A1 (en) * 2011-12-12 2013-06-13 John Clavin Connecting Head Mounted Displays To External Displays And Other Communication Networks
US9256071B1 (en) 2012-01-09 2016-02-09 Google Inc. User interface
US8988349B2 (en) 2012-02-28 2015-03-24 Google Technology Holdings LLC Methods and apparatuses for operating a display in an electronic device
US8947382B2 (en) 2012-02-28 2015-02-03 Motorola Mobility Llc Wearable display device, corresponding systems, and method for presenting output on the same
CN102779000B (zh) * 2012-05-03 2015-05-20 苏州触达信息技术有限公司 一种用户交互系统和方法
WO2013177520A1 (en) 2012-05-25 2013-11-28 Surgical Theater LLC Hybrid image/scene renderer with hands free control
JP5983065B2 (ja) * 2012-06-08 2016-08-31 株式会社リコー 操作制御装置、操作制御方法
KR101861380B1 (ko) * 2012-07-16 2018-05-28 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 헤드 마운트 디스플레이를 이용한 컨텐츠 출력 방법 및 이를 위한 헤드 마운트 디스플레이
EP2877909B1 (en) 2012-07-27 2018-12-26 Nokia Technologies Oy Multimodal interaction with near-to-eye display
CN102930170B (zh) * 2012-11-12 2016-04-06 声泰特（成都）科技有限公司 一种交互式医学超声的显示和输入系统
US9265458B2 (en) 2012-12-04 2016-02-23 Sync-Think, Inc. Application of smooth pursuit cognitive testing paradigms to clinical drug development
CN103105928A (zh) * 2012-12-11 2013-05-15 渭南高新区晨星专利技术咨询有限公司 一种手势遥控系统
US20140160004A1 (en) * 2012-12-11 2014-06-12 Biosense Webster (Israel), Ltd. Use of physician eye tracking during a procedure
US9213412B2 (en) * 2013-01-04 2015-12-15 Intel Corporation Multi-distance, multi-modal natural user interaction with computing devices
DE102013201527A1 (de) * 2013-01-30 2013-12-24 Siemens Aktiengesellschaft Verfahren und System zum Abruf und zur Steuerung von Daten und Archivbildern in einer sterilen Umgebung
DE102013203918A1 (de) * 2013-03-07 2014-09-11 Siemens Aktiengesellschaft Verfahren zum Betreiben einer Vorrichtung in einer sterilen Umgebung
US9380976B2 (en) 2013-03-11 2016-07-05 Sync-Think, Inc. Optical neuroinformatics
US9131989B2 (en) * 2013-03-23 2015-09-15 Controlrad Systems, Inc. Operating room environment
DE102013206553A1 (de) * 2013-04-12 2014-10-16 Siemens Aktiengesellschaft Verfahren zum Betreiben einer Vorrichtung in einer sterilen Umgebung
TW201505603A (zh) * 2013-07-16 2015-02-16 Seiko Epson Corp 資訊處理裝置、資訊處理方法及資訊處理系統
JP6252004B2 (ja) 2013-07-16 2017-12-27 セイコーエプソン株式会社 情報処理装置、情報処理方法、および、情報処理システム
JP6311393B2 (ja) * 2014-03-28 2018-04-18 セイコーエプソン株式会社 情報処理装置、情報処理方法、および、情報処理システム
JP2015019679A (ja) * 2013-07-16 2015-02-02 セイコーエプソン株式会社 情報処理装置、情報処理方法、および、情報処理システム
US10073515B2 (en) 2013-09-18 2018-09-11 Nanophthalmos, Llc Surgical navigation system and method
US20150128096A1 (en) * 2013-11-04 2015-05-07 Sidra Medical and Research Center System to facilitate and streamline communication and information-flow in health-care
KR102099178B1 (ko) * 2013-11-29 2020-04-09 엘지전자 주식회사 웨어러블 디바이스 및 웨어러블 디바이스 디스플레이 제어 방법
CN104679226B (zh) * 2013-11-29 2019-06-25 上海西门子医疗器械有限公司 非接触式医疗控制系统、方法及医疗设备
DE102013226242A1 (de) * 2013-12-17 2015-06-18 Siemens Aktiengesellschaft Einstellung eines Aufnahmebereichs
FR3015222B1 (fr) * 2013-12-24 2019-11-22 General Electric Company Procede de traitement d'images medicales par suivi de regard
JP6851133B2 (ja) * 2014-01-03 2021-03-31 ハーマン インターナショナル インダストリーズ インコーポレイテッド ユーザに方向付けられた個人情報アシスタント
US10042161B2 (en) * 2014-03-03 2018-08-07 Eyeway Vision Ltd. Eye projection system
JP6689203B2 (ja) 2014-03-19 2020-04-28 インテュイティブ サージカル オペレーションズ， インコーポレイテッド 立体ビューワのための視線追跡を統合する医療システム
JP6644699B2 (ja) * 2014-03-19 2020-02-12 インテュイティブ サージカル オペレーションズ， インコーポレイテッド 視線追跡を使用する医療装置、システム、及び方法
WO2015154069A1 (en) 2014-04-04 2015-10-08 Surgical Theater LLC Dynamic and interactive navigation in a surgical environment
KR20160071242A (ko) * 2014-12-11 2016-06-21 삼성전자주식회사 안구 움직임에 기반한 컴퓨터 보조 진단 장치 및 방법
CN113017836A (zh) * 2015-02-20 2021-06-25 柯惠Lp公司 手术室和手术部位感知
US10854168B2 (en) * 2015-03-30 2020-12-01 Sony Corporation Information processing apparatus, information processing method, and information processing system
JP6295995B2 (ja) * 2015-04-28 2018-03-20 京セラドキュメントソリューションズ株式会社 情報処理装置、画像処理装置へのジョブ指示方法
CN107595239B (zh) * 2015-06-02 2019-05-07 杭州镜之镜科技有限公司 个人用眼监控系统
US10045825B2 (en) * 2015-09-25 2018-08-14 Karl Storz Imaging, Inc. Partial facial recognition and gaze detection for a medical system
US10031577B2 (en) 2015-10-05 2018-07-24 International Business Machines Corporation Gaze-aware control of multi-screen experience
EP3361979A4 (en) 2015-10-14 2019-06-26 Surgical Theater LLC SURGICAL NAVIGATION WITH EXTENDED REALITY
CN105301778A (zh) * 2015-12-08 2016-02-03 北京小鸟看看科技有限公司 三维操控装置、头戴式装置及三维操控方法
EP3535639B1 (en) * 2016-11-02 2022-01-12 Telefonaktiebolaget LM Ericsson (PUBL) Controlling display of content using an external display device
US11250947B2 (en) * 2017-02-24 2022-02-15 General Electric Company Providing auxiliary information regarding healthcare procedure and system performance using augmented reality
JP2020515891A (ja) * 2017-03-24 2020-05-28 サージカル シアター エルエルシー 仮想環境における訓練および共同作業のためのシステムおよび方法
US10610179B2 (en) * 2017-06-05 2020-04-07 Biosense Webster (Israel) Ltd. Augmented reality goggles having X-ray protection
US10861236B2 (en) 2017-09-08 2020-12-08 Surgical Theater, Inc. Dual mode augmented reality surgical system and method
CN107707763B (zh) * 2017-10-19 2018-07-24 杭州镜之镜科技有限公司 近视防控可穿戴设备及近视防控系统和方法
US11114199B2 (en) 2018-01-25 2021-09-07 Mako Surgical Corp. Workflow systems and methods for enhancing collaboration between participants in a surgical procedure
EP3871143A4 (en) * 2018-10-25 2022-08-31 Beyeonics Surgical Ltd. USER INTERFACE FOR HEAD MOUNTED DISPLAY SYSTEM
US10969863B2 (en) * 2019-05-08 2021-04-06 International Business Machines Corporation Configurable sensor array for a multi-target environment
US12066624B2 (en) 2020-01-06 2024-08-20 Eyeway Vision Ltd. Eye tracking device and method thereof
EP3926642A1 (en) * 2020-06-17 2021-12-22 Koninklijke Philips N.V. Dynamic positioning for a virtual display
US11571225B2 (en) 2020-08-17 2023-02-07 Russell Todd Nevins System and method for location determination using movement between optical labels and a 3D spatial mapping camera
US20220104694A1 (en) * 2020-10-02 2022-04-07 Ethicon Llc Control of a display outside the sterile field from a device within the sterile field
US12016566B2 (en) 2020-10-02 2024-06-25 Cilag Gmbh International Surgical instrument with adaptive function controls
US11877897B2 (en) 2020-10-02 2024-01-23 Cilag Gmbh International Situational awareness of instruments location and individualization of users to control displays
US11963683B2 (en) 2020-10-02 2024-04-23 Cilag Gmbh International Method for operating tiered operation modes in a surgical system
US11883022B2 (en) 2020-10-02 2024-01-30 Cilag Gmbh International Shared situational awareness of the device actuator activity to prioritize certain aspects of displayed information
US11992372B2 (en) 2020-10-02 2024-05-28 Cilag Gmbh International Cooperative surgical displays
US12064293B2 (en) 2020-10-02 2024-08-20 Cilag Gmbh International Field programmable surgical visualization system
US20220108788A1 (en) * 2020-10-02 2022-04-07 Ethicon Llc Reconfiguration of display sharing
US11830602B2 (en) 2020-10-02 2023-11-28 Cilag Gmbh International Surgical hub having variable interconnectivity capabilities
US11748924B2 (en) 2020-10-02 2023-09-05 Cilag Gmbh International Tiered system display control based on capacity and user operation
US20220104910A1 (en) * 2020-10-02 2022-04-07 Ethicon Llc Monitoring of user visual gaze to control which display system displays the primary information
US11672534B2 (en) 2020-10-02 2023-06-13 Cilag Gmbh International Communication capability of a smart stapler
US20220331008A1 (en) 2021-04-02 2022-10-20 Russell Todd Nevins System and method for location determination using movement of an optical label fixed to a bone using a spatial mapping camera
US20220384016A1 (en) * 2021-05-28 2022-12-01 Cilag Gmbh International Monitoring a health care professional movement relative to a virtual boundary in an operating room
US11600053B1 (en) 2021-10-04 2023-03-07 Russell Todd Nevins System and method for location determination using a mixed reality device and multiple imaging cameras
IL312436A (en) * 2021-10-23 2024-06-01 Simulated Inanimate Models Llc Device, methods and systems for guidance in guiding procedures
EP4345838A1 (en) * 2022-09-29 2024-04-03 Koninklijke Philips N.V. Visualizing an indication of a location in a medical facility

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4931865A (en) * 1988-08-24 1990-06-05 Sebastiano Scarampi Apparatus and methods for monitoring television viewers
JPH07104718A (ja) * 1993-10-07 1995-04-21 Mitsubishi Heavy Ind Ltd 多人数用立体情報表示装置
JP3674993B2 (ja) * 1995-08-31 2005-07-27 三菱電機株式会社 仮想会議システムの画像表示方法並びに仮想会議用端末装置
JP3599854B2 (ja) * 1995-10-09 2004-12-08 オリンパス株式会社 医療用顔面装着型映像表示装置
US6204974B1 (en) * 1996-10-08 2001-03-20 The Microoptical Corporation Compact image display system for eyeglasses or other head-borne frames
JP3651204B2 (ja) * 1996-12-18 2005-05-25 トヨタ自動車株式会社 立体画像表示装置、立体画像表示方法及び記録媒体
JP3771985B2 (ja) * 1997-01-20 2006-05-10 オリンパス株式会社 蛍光観察内視鏡装置
DE69840547D1 (de) * 1997-10-30 2009-03-26 Myvu Corp Schnittstellensystem für brillen
US6152563A (en) * 1998-02-20 2000-11-28 Hutchinson; Thomas E. Eye gaze direction tracker
US6106119A (en) * 1998-10-16 2000-08-22 The Board Of Trustees Of The Leland Stanford Junior University Method for presenting high level interpretations of eye tracking data correlated to saved display images
JP2000152075A (ja) * 1998-11-11 2000-05-30 Nippon Hoso Kyokai <Nhk> 仮想副調装置
US6539100B1 (en) * 1999-01-27 2003-03-25 International Business Machines Corporation Method and apparatus for associating pupils with subjects
JP2001104331A (ja) * 1999-10-06 2001-04-17 Olympus Optical Co Ltd 医療用顔面装着型映像表示装置
ES2258972T3 (es) * 2000-05-16 2006-09-16 Swisscom Mobile Ag Procedimiento y terminal para entrar instrucciones.
US20030090439A1 (en) 2001-09-07 2003-05-15 Spitzer Mark B. Light weight, compact, remountable face-supported electronic display
US6712468B1 (en) * 2001-12-12 2004-03-30 Gregory T. Edwards Techniques for facilitating use of eye tracking data
US6943754B2 (en) * 2002-09-27 2005-09-13 The Boeing Company Gaze tracking system, eye-tracking assembly and an associated method of calibration
GB2403002A (en) * 2003-04-29 2004-12-22 Hewlett Packard Development Co Shared attention image capture system

Also Published As

Publication number Publication date
EP1643401B1 (en) 2017-11-15
JP5172085B2 (ja) 2013-03-27
JP2006102495A (ja) 2006-04-20
CN1770063A (zh) 2006-05-10
EP1643401A1 (en) 2006-04-05
US7331929B2 (en) 2008-02-19
US20060082542A1 (en) 2006-04-20

Similar Documents

Publication Publication Date Title
CN100530048C (zh) 信息显示、凝视探测和用户控制权优先化的方法和设备
US7576757B2 (en) System and method for generating most read images in a PACS workstation
US7573439B2 (en) System and method for significant image selection using visual tracking
US9841811B2 (en) Visually directed human-computer interaction for medical applications
US8036917B2 (en) Methods and systems for creation of hanging protocols using eye tracking and voice command and control
US7738684B2 (en) System and method for displaying images on a PACS workstation based on level of significance
US7501995B2 (en) System and method for presentation of enterprise, clinical, and decision support information utilizing eye tracking navigation
JP2020505675A (ja) 医療アシスタント
US20080103828A1 (en) Automated custom report generation system for medical information
JP2008515119A (ja) 複数の放射線科のアプリケーションおよびワークフローを処理するシステムおよび方法
US7259731B2 (en) Medical overlay mirror
JP2003242257A (ja) 患者データの処理システム及び処理方法
US20230146057A1 (en) Systems and methods for supporting medical procedures
US20060111936A1 (en) Container system and method for hosting healthcare applications and componentized archiecture
JP2019141642A (ja) 眼科情報処理システム
US20050021377A1 (en) Method and system for direct and persistent access to digital medical data
JP5302684B2 (ja) ルールベースコンテキスト管理のためのシステム
JP6891000B2 (ja) 病院情報システム
Stevenson et al. Evidence from the surgeons: gesture control of image data displayed during surgery
Shluzas et al. Mobile augmented reality for distributed healthcare
Chopra et al. Role of augmented reality in surgery
WO2002033681A2 (en) Method and apparatus for remotely viewing radiological images
CA2566633A1 (en) Method and system for direct and persistent access to digital medical data
JP2005250713A (ja) 電子カルテシステム及び電子カルテプログラム
Jalaliniya et al. Qualitative Study of Surgeons Using a Wearable Personal Assistant in Surgeries and Ward Rounds

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090819

Termination date: 20211008

CF01 Termination of patent right due to non-payment of annual fee