CN108209916A - 用于显示患者体内的对象的医学图像的系统和方法 - Google Patents

用于显示患者体内的对象的医学图像的系统和方法 Download PDF

Info

Publication number
CN108209916A
CN108209916A CN201711334417.1A CN201711334417A CN108209916A CN 108209916 A CN108209916 A CN 108209916A CN 201711334417 A CN201711334417 A CN 201711334417A CN 108209916 A CN108209916 A CN 108209916A
Authority
CN
China
Prior art keywords
electronic device
mobile electronic
patient
imaging apparatus
medical image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711334417.1A
Other languages
English (en)
Inventor
T.胡伊普夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
General Electric Co
Original Assignee
General Electric Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Electric Co filed Critical General Electric Co
Publication of CN108209916A publication Critical patent/CN108209916A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/462—Displaying means of special interest characterised by constructional features of the display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0013—Medical image data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0866—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving foetal diagnosis; pre-natal or peri-natal diagnosis of the baby
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/462—Displaying means of special interest characterised by constructional features of the display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Abstract

提供了一种用于显示患者体内的对象的医学图像的系统。该系统包括：医学成像装置，其操作用于生成对象的医学图像；以及移动电子设备，其具有前侧和后侧，并且操作用于与医学成像装置电子连通以便从医学成像装置接收医学图像。前侧包括显示器，后侧与前侧相对并且限定从移动电子设备向外伸出的视线。移动电子设备还操作用于围绕患者移动并在显示器上显示医学图像，使得医学图像沿着视线从移动电子设备的视角描绘对象的视图。

Description

用于显示患者体内的对象的医学图像的系统和方法
技术领域
本发明的实施例一般涉及医学成像技术，更具体地，涉及用于显示患者体内的对象的医学图像的系统和方法。
背景技术
医学成像系统提供对患者体内的对象(例如，骨骼、器官、流体等)进行成像的能力。例如，超声成像系统通过将声波发送到患者体内并分析返回的回波来生成患者体内的对象的图像，并且通过将患者放置在磁场中，激发在磁场中的患者体内的原子，并且当原子放松回到较低的能量状态时分析由原子发射的射频，磁共振成像(“MRI”)系统生成患者体内的对象的图像。
许多医学成像系统在具有固定位置的屏幕上显示生成的医学图像。然而，经历成像过程(例如，胎儿超声)的患者通常不容易看到这样的屏幕。此外，在这样的屏幕上显示的医学图像通常来自固定的视角。因此，许多医学成像系统不能实时地为人们动态地限定医学图像的视角。换句话说，在许多医学成像系统中，当观看图像的人在患者周围移动时，医学图像的视角保持相同。
因此，需要一种用于显示患者体内的对象的医学图像的改进的系统和方法。
发明内容
在一个实施例中，提供了一种用于显示患者体内的对象的医学图像的系统。该系统包括：医学成像装置，其操作用于生成对象的医学图像；以及移动电子设备，其具有前侧和后侧，并且操作用于与医学成像装置电子连通以便从医学成像装置接收医学图像。前侧包括显示器，后侧与前侧相对并且限定从移动电子设备向外伸出的视线。移动电子设备还操作用于围绕患者移动并在显示器上显示医学图像，使得医学图像沿着视线从移动电子设备的视角描绘对象的视图。
优选地，移动电子设备和医学成像装置中的至少一个还操作用于将所述医学图像传播到远程电子设备。
优选地，医学成像装置是磁共振成像设备、超声成像设备和X射线成像设备中的至少一个。
优选地，医学成像装置是超声成像设备，并且对象是胎儿。
优选地，移动电子设备将设备位置数据和设备取向数据中的至少一个发送到所述医学成像装置，并且所述医学成像装置至少部分地基于所述设备位置数据和所述设备取向数据中的至少一个生成所述医学图像。
优选地，上述系统还包括：一个或多个定位信标，并且移动电子设备还操作用于：从所述一个或多个定位信标接收位置参考数据；和至少部分地基于所述位置参考数据生成所述设备位置数据。
优选地，上述系统还包括：患者位置传感器，其与所述医学成像装置电子连通，以将患者位置数据和患者取向数据中的至少一个发送到所述医学成像装置，并且其中，所述医学成像装置至少部分地基于所述患者位置数据和所述患者取向数据中的至少一个生成所述医学图像。
优选地，上述系统中，移动电子设备的所述后侧包括照相机，照相机沿着所述视线定向并且操作用于生成所述患者的图像，并且移动电子设备还操作用于将所述患者的所述图像与所述医学图像组合，使得所述医学图像进一步描绘所述对象和所述患者的增强现实视图。
在另一个实施例中，提供了一种用于显示患者体内的对象的医学图像的方法。该方法包括：使移动电子设备围绕患者移动，移动电子设备具有前侧和与前侧相对的后侧，前侧包括显示器，后侧限定从移动电子设备向外伸出的视线；通过与移动电子设备电子连通的医学成像装置生成医学图像；通过医学成像装置将医学图像发送到移动电子设备；以及在移动电子设备上显示医学图像，使得医学图像沿着所述视线从移动电子设备的视角描绘所述对象的视图。
优选地，上述方法，还包括：将所述医学图像经由所述移动电子设备和所述医学成像装置中的至少一个传播到远程电子设备。
优选地，上述方法中，医学成像装置是磁共振成像设备、超声成像设备和X射线成像设备中的至少一个。
优选地，上述方法中，医学成像装置是超声成像设备，并且所述对象是胎儿。
优选地，上述方法还包括：将设备位置数据和设备取向数据中的至少一个经由所述移动电子设备发送到所述医学成像装置，并且其中，经由与所述移动电子设备电子连通的医学成像装置生成所述医学图像至少部分地基于所述设备位置数据和所述设备取向数据中的至少一个。
优选地，上述方法还包括：在所述移动电子设备处从一个或多个定位信标接收位置参考数据；和至少部分地基于所述位置参考数据生成所述设备位置数据。
优选地上述方法，还包括：经由与所述医学成像装置电子连通的患者位置传感器将患者位置数据和患者取向数据中的至少一个发送到所述医学成像装置；并且其中，经由与所述移动电子设备电子连通的医学成像装置生成所述医学图像至少部分地基于所述患者位置数据和所述患者取向数据中的至少一个。
优选地，上述方法还包括：经由设置在所述移动电子设备的后侧上且沿着所述视线定向的照相机来生成所述患者的图像；和将所述患者的所述图像与所述医学图像组合，使得所述医学图像进一步描绘所述对象和所述患者的增强现实视图。
在另一个实施例中，提供了一种非暂时性计算机可读介质。非暂时性计算机可读介质存储指令，所述指令被配置为使移动电子设备适应于：将设备位置数据和设备取向数据中的至少一个发送到医学成像装置，该医学成像装置操作用于生成患者体内的对象的医学图像；从医学成像装置接收医学图像；并且将医学图像显示在移动电子设备的前侧上的显示器上，使得医疗图像沿着从与前侧相对的移动电子设备的后侧从移动电子设备向外延伸的视线从移动电子设备的视角描绘对象的视图。
优选地，上述计算机可读介质中，所述存储的指令还被配置成使所述移动电子设备适合于将所述医学图像传播到远程电子设备。
优选地，上述计算机可读介质中，所述存储的指令还被配置成使所述移动电子设备适合于：经由设置在所述移动电子设备的所述后侧上且沿着所述视线定向的照相机来生成所述患者的图像；和将所述医学图像与所述患者的所述图像组合，使得所述医学图像进一步描绘所述对象和所述患者的增强现实视图。
优选地，上述计算机可读介质中，所述医学成像装置是磁共振成像设备、超声成像设备和X射线成像设备中的至少一个。
附图说明
通过参照附图阅读非限制性实施例的以下描述，将更好地理解本发明，附图中：
图1是根据本发明的实施例的用于显示患者体内的对象的医学图像的系统的示意图；
图2是根据本发明的实施例的图1的系统的另一示意图，描绘了系统的俯视图；
图3是根据本发明的实施例的图1的系统的另一示意图，描绘了系统的侧视图；以及
图4是根据本发明的实施例的图1的系统的另一示意图。
具体实施方式
下面将详细参照本发明的示例性实施例，其示例在附图中示出。在任何可能的情况下，贯穿各图使用的相同的附图标记表示相同或类似的部件，而不再进行重复描述。
如本说明书所用，术语“基本上”、“大体上”和“约”表示在相对于适合实现部件或组件的功能性目的的理想的所需条件可合理地实现的制造和组装公差内的条件。如本说明书所用，“电联接”、“电连接”和“电气连通”意指所引用的元件被直接地或间接地连接，使得电流可以从一者流到另一者。连接可包括直接传导连接(即，没有居间的电容、电感或有源元件)、电感连接、电容连接和/或任何其它合适的电连接。可以存在居间部件。如本说明书所用，术语“实时”意指用户感觉足够即时或者使处理器能够跟上外部过程的处理响应水平。
此外，尽管在本说明书中公开的实施例结合超声系统和图像进行了描述，但是应当理解，本发明的实施例可以适用于能够使另一对象内的对象可视化的其他类型的成像系统，例如MR工、X射线成像系统等。此外，应当理解，本发明的涉及成像系统的实施例可以用于一般地分析组织，而不限于人体组织。
现在参考图1，示出了根据本发明的实施例的用于显示例如胎儿、器官、血流、骨骼等的对象14的医学图像12的系统10的主要部件。该系统包括：医学成像装置18，其操作用于生成对象14的医学图像12，医学图像在实施例中可以是二维的(“2D”)和/或三维的(“3D”)；以及移动电子设备20，其具有前侧22和后侧24(图2和图3)，并且操作用于与医学成像装置18电气连通，以便从医学成像装置18接收医学图像12。前侧22包括显示器26，后侧24与前侧22相对，并且限定从移动电子设备20向外伸出的视线28。
如本说明书所使用的，术语“视线”是指从对象向外伸出的空间区域，该区域包围一个或多个对象的全部或一部分，例如从照相机的镜头或人的眼睛延伸的视线。移动电子设备20还操作用于如箭头30所示围绕患者16移动，并在显示器26上显示医学图像12，使得医学图像12沿着视线28从移动电子设备20的视角描绘对象14的视图。换句话说，随着移动电子设备20的操作者32将移动电子设备20围绕患者16移动，例如在上方、在下方、向左侧和/或向右侧，在显示器26上显示的医疗图像12描绘对象14，该对象14通常对于操作者32是不可见的，因为患者16的身体通常将对象14阻挡在视线之外。因此，在操作者32保持移动电子设备20使得移动电子设备20的视线28与操作者32的视线对齐或接近(例如，与操作者的眼睛对齐)的实施例中，显示器26作为虚拟窗口操作，该窗口允许操作者32“透视”患者16的身体并观察对象14。应当理解，在实施例中，操作者32可以不是倾向于对象/患者16的医师或其他医疗专业人员，而是患者16和/或对象/胎儿14的朋友和/或亲戚，例如胎儿14的父亲。在实施例中，操作者32可以是医师和/或倾向于对象/患者16的其他医疗专业人员。
如上所述，医学成像装置18生成医学图像12。应当理解，在实施例中，医学成像装置18可以是能够对另一个对象内的对象进行成像的任何类型的医学成像系统，例如磁共振成像设备、超声成像设备、X射线成像设备等。
同样如上所述，移动电子设备20与成像装置18电子连通，并且在显示器26上示出/显示医学图像12。应当理解，移动电子设备20可以是任何类型的移动电子设备，以包括具有至少一个处理器、存储器设备和显示器26的蜂窝/智能电话、平板计算机、膝上型计算机、智能眼镜、虚拟现实(“VR”)耳机等。如将进一步理解的，移动电子设备20经由电子连接34从医学成像装置18接收医学图像12。在实施例中，电子连接34可以是无线的，例如WiFi、蓝牙或其他适当的无线协议。在其他实施例中，电子连接34可以是有线连接，例如USB、火线、以太网或其他适当的协议。
现在转到图2和图3，在某些实施例中，移动电子设备20可以经由电子连接34向医学成像装置18发送设备取向数据，并且医学成像装置18至少部分地基于设备方向数据生成医学图像12。应当理解，在实施例中，设备取向数据可以传达/描述移动电子设备20的偏航角和/或俯仰角。如图2所示，移动电子设备20的偏航角是垂直于移动电子设备20的后侧24的线36与水平于患者16的平面中的患者16的水平轴线38形成的角度Y。如图3所示，移动电子设备20的俯仰角是垂直于移动电子设备20的后侧24的线36与由患者16的水平轴线38和竖直轴线40限定的平面中的水平轴线38形成的角度P。
应当理解，移动电子设备20可以经由一个或多个内部传感器(例如加速计)生成取向数据。在其他实施例中，取向数据可以经由移动电子设备20外部的一个或多个传感器例如照相机、磁性传感器等生成。
如图4所示，移动电子设备20可以经由电子连接34向医学成像装置18发送设备位置数据，并且医学成像装置18至少部分地基于设备位置数据生成医学图像12。应当理解，设备位置数据将关于移动电子设备20的位置信息传达/描述给医学成像系统18。例如，在实施例中，设备位置数据可以传达/描述移动电子设备20相对于医学成像设备18的位置。在这样的实施例中，设备位置数据可以经由2D和/或3D弧度和/或笛卡尔坐标系42来描述移动电子设备20的位置。在实施例中，设备位置数据可以将移动电子设备20的位置描述为GPS 44坐标，即，移动电子设备20可以包括GPS天线。
如图4进一步所示，在某些实施例中，系统10还可以包括一个或多个定位信标46，其发送可以由移动电子设备20接收的位置参考数据。在这样的实施例中，移动电子设备20可以至少部分地基于位置参考数据生成设备位置数据。例如，位置参考数据可以包含诸如坐标、距离和/或定时信号的信息数据，其允许移动电子设备20导出/计算其相对于定位信标46和/或医学成像装置18的位置。因此，定位信标46可以经由无线电波发送位置参考数据，以包括WiFi、蓝牙和/或其他适当的无线协议。在方面中，定位信标46可以远离医学成像装置18设置。在实施例中，定位信标46可以设置在医学成像装置18附近和/或集成在其中。
此外，在某些实施例中，系统10可以包括与医学成像装置18电子连通的一个或多个患者位置传感器48，以将患者位置数据发送到医学成像装置18。因此，医学成像装置18至少部分地基于患者位置数据生成医学图像12。应当理解，患者位置数据可以包括例如GPS坐标、距离、定时信号等的数据，其允许医学成像装置18确定和/或计算患者16相对于移动电子设备20和/或医学成像装置18的位置。在实施例中，患者位置数据可以有助于医学成像装置18对患者16和移动电子设备20使用相同的坐标系42。此外，患者位置传感器48可以从一个或多个定位信标46接收位置参考数据，并且至少部分地基于位置参考数据生成患者位置数据。
在实施例中，患者位置传感器48将患者取向数据发送到医学成像装置18。应当理解，患者取向数据可以包括例如角度、弧度等的数据，其允许医学成像装置18确定和/或计算患者16的取向。因此，在实施例中，医学成像装置18至少部分地基于患者取向数据生成医学图像12。
因此，在实施例中，患者位置传感器48包括GPS天线、WiFi/蓝牙天线、加速计、陀螺仪、照相机等。患者位置传感器48可以被集成到垫、带、带具和/或由患者16穿戴和/或覆盖在患者16上的其他物体中。
此外，移动电子设备20的后侧24可以包括照相机50(图2)，其沿着视线28定向并且操作用于生成患者16的图像。在这样的实施例中，移动电子设备还可以操作用于将患者16的图像与医学图像12组合，使得医学图像12进一步描绘如图4所示的对象14和患者16的增强现实视图。应当理解，增强现实视图将来自由照相机获得的图像的对象与由医学成像装置18生成的医学图像12组合以产生两个图像组的混合图像。例如，在医学成像装置18是超声系统并且对象14是胎儿的实施例中，可以通过将由超声系统获得的胎儿的图像叠加到和/或以其他方式集成到由照相机50获得/生成的患者的图像中来生成增强现实视图。
此外，医学成像装置18和/或移动电子设备20可以分别经由电连接54和56来传播/流式传输医疗图像12到远程电子设备52。应当理解，在实施例中，远程电子设备52可以是平板计算机、智能电话、膝上型计算机、智能电视和/或能够显示医学图像12的任何其他电子设备，并且其远离医学成像装置18和移动电子设备20两者。电连接54和/或56可以包括网络连接，例如因特网和/或能够发送医学图像12的其他电子通信系统。
因此，移动电子设备20和/或患者16可能需要与医学成像装置18配准。应当理解，本说明书所使用的术语“配准”是指初始通知/传送位置数据和/或取向数据到医学成像装置18的过程。例如，在实施例中，移动电子设备20可以通过发送其初始设备位置数据和/或设备取向数据来与医学成像装置18配准。类似地，患者16可以通过装配患者位置传感器48来与医学成像装置18配准，患者位置传感器48又将初始患者位置数据和/或患者取向数据通知/发送到医学成像装置18。在实施例中，经由患者位置传感器48，移动电子设备20和/或患者16可以分别将设备位置/取向数据和患者位置/取向数据更新/重新发送到医学成像装置18。换句话说，医学成像装置18可以实时跟踪移动电子设备20和/或患者16的位置和/或取向。此外，移动电子设备20和/或患者位置传感器48可以分别提供对设备位置/取向数据和患者位置/取向数据的手动调整。
通过了解设备位置/取向数据和/或患者位置/取向数据，医学成像装置18能够确定和/或计算从移动电子设备20的视角沿着视线28的患者16体内的对象14的视图，并且根据这样的视图生成医学图像12。因此，医学成像系统18可以生成医学图像12，使得医学图像12可以在操作者32围绕患者16移动移动电子设备20时实时地显示在显示器26上。
最后，还应当理解，系统10可包括必要的电子器件、软件、存储器、存储装置、数据库、固件、逻辑/状态机、微处理器、通信链路、显示器或其它可视或音频用户接口、印刷设备、以及任何其它输入/输出接口，以执行本说明书所述功能和/或实现本说明书所述结果。例如，如前所述，该系统可以包括至少一个处理器和系统存储器/数据存储结构，该系统存储器/数据存储结构可以包括随机存取存储器(RAM)和只读存储器(ROM)。系统10的所述至少一个处理器可包括一个或多个常规的微处理器和一个或多个补充的协处理器，例如数学协处理器等。本说明书讨论的数据存储结构可包括磁性、光学和/或半导体存储器的适当组合，并且可包括例如RAM、ROM、闪存驱动器、诸如压缩盘的光盘和/或硬盘或硬盘驱动器。
另外，使得控制器适应于执行本说明书公开的方法的软件应用程序可以从计算机可读介质读入至少一个处理器的主存储器。如本说明书所用，术语“计算机可读介质”是指提供或参与提供指令到系统10的所述至少一个处理器(或本说明书所述设备的任何其它处理器)以执行的任何介质。这样的介质可以采取许多形式，包括但不限于非易失性介质和易失性介质。非易失性介质包括例如光学、磁性、或光磁性盘，例如存储器。易失性介质包括动态随机存取存储器(DRAM)，其通常构成主存储器。常见形式的计算机可读介质包括例如软盘、软磁盘、硬盘、磁带、任何其它磁性介质、CD-ROM、DVD、任何其它光学介质、RAM、PROM、EPROM或EEPROM(电可擦除可编程只读存储器)、FLASH-EEPROM、任何其它存储芯片或盒、或计算机可从其读取的任何其它介质。
虽然在实施例中软件应用程序中指令序列的执行导致至少一个处理器执行本说明书所述方法/过程，硬连线电路可以代替软件指令或与软件指令结合使用以实现本发明的方法/过程。因此，本发明的实施例不限于任何硬件和/或软件的具体组合。
还应当理解，以上描述旨在举例说明而不是限制性的。举例来说，上述实施例(和/或其各方面)可彼此组合使用。另外，可作出许多修改以使特定情况或材料适应本发明的教导而不脱离其范围。
例如，在一个实施例中，提供了一种用于显示患者体内的对象的医学图像的系统。该系统包括：医学成像装置，其操作用于生成对象的医学图像；以及移动电子设备，其具有前侧和后侧，并且操作用于与医学成像装置电子连通以便从医学成像装置接收医学图像。前侧包括显示器，后侧与前侧相对并且限定从移动电子设备向外伸出的视线。移动电子设备还操作用于围绕患者移动并在显示器上显示医学图像，使得医学图像沿着视线从移动电子设备的视角描绘对象的视图。在某些实施例中，移动电子设备和医学成像装置中的至少一个还操作用于将医学图像传播到远程电子设备。在某些实施例中，医学成像装置是磁共振成像设备、超声成像设备和X射线成像设备中的至少一个。在某些实施例中，医学成像装置是超声成像设备，对象是胎儿。在某些实施例中，移动电子设备将设备位置数据和设备取向数据中的至少一个发送到医学成像装置，并且医学成像装置至少部分地基于设备位置数据和设备取向数据中的至少一个生成医学图像。在某些实施例中，该系统还包括一个或多个定位信标。在这样的实施例中，移动电子设备还操作用于从一个或多个定位信标接收位置参考数据，并且至少部分地基于位置参考数据生成设备位置数据。在某些实施例中，该系统还包括与医学成像装置电子连通的患者位置传感器，以将患者位置数据和患者取向数据中的至少一个发送到医学成像装置。在这样的实施例中，医学成像装置至少部分地基于患者位置数据和患者取向数据中的至少一个生成医学图像。在某些实施例中，移动电子设备的后侧包括照相机，其沿着视线定向，并且操作用于生成患者的图像，并且移动电子设备还操作用于将患者的图像与医学图像组合，使得医学图像进一步描绘对象和患者的增强现实视图。
其他实施例提供了一种用于显示患者体内的对象的医学图像的方法。该方法包括：使移动电子设备围绕患者移动，移动电子设备具有前侧和与前侧相对的后侧，前侧包括显示器，后侧限定从移动电子设备向外伸出的视线；通过与移动电子设备电子连通的医学成像装置生成医学图像；通过医学成像装置将医学图像发送到移动电子设备；以及在移动电子设备上显示医学图像，使得医学图像沿着所述视线从移动电子设备的视角描绘所述对象的视图。在某些实施例中，该方法还包括将医学图像经由移动电子设备和医学成像装置中的至少一个传播到远程电子设备。在某些实施例中，医学成像装置是磁共振成像设备、超声成像设备和X射线成像设备中的至少一个。在某些实施例中，医学成像装置是超声成像设备，对象是胎儿。在某些实施例中，该方法还包括将设备位置数据和设备取向数据中的至少一个经由移动电子设备发送到医学成像装置，并且其中，经由与移动电子设备电子连通的医学成像装置生成医学图像至少部分地基于设备位置数据和设备取向数据中的至少一个。在某些实施例中，该方法还包括：在移动电子设备处从一个或多个定位信标接收位置参考数据；以及至少部分地基于所述位置参考数据来生成设备位置数据。在某些实施例中，该方法还包括经由与医学成像装置电子连通的患者位置传感器将患者位置数据和患者取向数据中的至少一个发送到医学成像装置。在这样的实施例中，经由与移动电子设备电子连通的医学成像装置生成医学图像至少部分地基于患者位置数据和患者取向数据中的至少一个。在某些实施例中，该方法还包括：经由设置在移动电子设备的后侧上并沿着视线定向的照相机生成患者的图像；以及将患者的图像与医学图像组合，使得医学图像进一步描绘对象和患者的增强现实视图。
另一些实施例提供了一种非暂时性计算机可读介质。非暂时性计算机可读介质存储指令，所述指令被配置为使移动电子设备适应于：将设备位置数据和设备取向数据中的至少一个发送到医学成像装置，该医学成像装置操作用于生成患者体内的对象的医学图像；从医学成像装置接收医学图像；并且将医学图像显示在移动电子设备的前侧上的显示器上，使得医疗图像沿着从与前侧相对的移动电子设备的后侧从移动电子设备向外延伸的视线从移动电子设备的视角描绘对象的视图。在某些实施例中，存储的指令还被配置成使移动电子设备适合将医学图像传播到远程电子设备。在某些实施例中，存储的指令还被配置成：使移动电子设备适合经由设置在移动电子设备的后侧上并沿着视线定向的照相机生成患者的图像；并且将医学图像与患者的图像组合，使得医学图像进一步描绘对象和患者的增强现实视图。在某些实施例中，医学成像装置是磁共振成像设备、超声成像设备和X射线成像设备中的至少一个。
因此，应当理解，通过提供一种移动电子设备(当移动电子设备围绕患者移动时，该设备沿着视线从移动电子设备的视角显示患者体内的对象的医学图像)，本发明的一些实施例提供了一种“虚拟透视窗口”，其允许操作者观看患者体内的对象。因此，本发明的一些实施例提供了患者和/或另一个人(例如医师、医学实习者、患者的朋友和/或亲戚)对胎儿和/或器官的改进的可视化，以包括相对于患者的位置和/或取向。
此外，在需要将患者保持在不容易观看医学成像装置的专用监视器/显示单元的位置的医学成像系统/装置中，本发明的一些实施例提供了一种改进的显示器，患者可以从该显示器观看对象。此外，通过将医学图像传播到远程电子设备，本发明的实施例有助于家庭成员和/或远程医师观看患者体内的对象而不必与患者在同一房间中。
另外，虽然本说明书所述材料的尺寸和类型意图限定本发明的参数，但是这些实施例决不是限制性的，而只是示例性实施例。所属领域的技术人员在查阅以上描述后即会明白许多其它实施例。因此，本发明的范围应当参照所附权利要求书连同赋予给这种权利要求书的等同物的全部范围共同确定。在所附权利要求书中，用语“包括”和“其中”用作相应用语“包含”和“在其中”的简明等效用语。此外，在下面的权利要求书中，诸如“第一”、“第二”、“第三”、“上部”、“下部”、“底部”、“顶部”等的术语只用作标签，而并非意图对其对象施加数字或位置要求。此外，下面的权利要求书的限制并不按照装置加功能格式编写，并且并非意图如此解释，除非这类权利要求限制明确使用短语“用于…的装置”加上没有其它结构的功能陈述。
本书面描述用示例来公开包括最佳模式的本发明的若干实施例，并且还使本领域的普通技术人员能实施发明的这些实施例，包括制造和使用任何设备或系统以及执行任何包括在内的方法。因此，本发明的可专利范围由权利要求限定，并且可以包括本领域普通技术人员所想到的其他示例。如果此类其它实例具有并非不同于权利要求书的字面语言的结构要素，或如果它们包括与权利要求书的字面语言无实质差异的等效结构要素，那么它们既定在权利要求范围内。
如本文所使用，以单数形式叙述并且跟在词语“一”或“一个”后的元件或步骤应理解为不排除复数个所述元件或步骤，除非明确陈述此类排除。此外，对本发明的“一个实施例”的引用并非意图被解释为排除也结合所陈述特征的附加实施例的存在。此外，除非相反地明确说明，“包含”、“包括”或“具有”带特定性质的元件或多个元件的实施例可包括没有那种性质的附加此类元件。
由于可以在上述发明中做出某些改变，在不脱离本说明书所涉及的发明的精神和范围的情况下，预计附图中所示以上描述的所有主题仅应解释为示出本说明书中的发明构思的示例，而不应被理解为限制本发明。

Claims (10)

1.一种用于显示患者体内的对象的医学图像的系统，包括：
医学成像装置，其操作用于生成所述对象的所述医学图像；
移动电子设备，其具有前侧和后侧并且操作用于与所述医学成像装置电子连通，以便从所述医学成像装置接收所述医学图像，所述前侧包括显示器，并且所述后侧与所述前侧相对并限定从所述移动电子设备向外伸出的视线；并且
其中，所述移动电子设备还操作用于围绕所述患者移动并在所述显示器上显示所述医学图像，使得所述医学图像沿着所述视线从所述移动电子设备的视角描绘所述对象的视图。
2.根据权利要求1所述的系统，其中，所述移动电子设备和所述医学成像装置中的至少一个还操作用于将所述医学图像传播到远程电子设备。
3.根据权利要求1所述的系统，其中，所述医学成像装置是磁共振成像设备、超声成像设备和X射线成像设备中的至少一个。
4.根据权利要求1所述的系统，其中，所述医学成像装置是超声成像设备，并且所述对象是胎儿。
5.根据权利要求1所述的系统，其中，所述移动电子设备将设备位置数据和设备取向数据中的至少一个发送到所述医学成像装置，并且所述医学成像装置至少部分地基于所述设备位置数据和所述设备取向数据中的至少一个生成所述医学图像。
6.根据权利要求5所述的系统，还包括：
一个或多个定位信标，并且
其中，所述移动电子设备还操作用于：
从所述一个或多个定位信标接收位置参考数据；和
至少部分地基于所述位置参考数据生成所述设备位置数据。
7.根据权利要求1所述的系统，还包括：
患者位置传感器，其与所述医学成像装置电子连通，以将患者位置数据和患者取向数据中的至少一个发送到所述医学成像装置，并且
其中，所述医学成像装置至少部分地基于所述患者位置数据和所述患者取向数据中的至少一个生成所述医学图像。
8.根据权利要求1所述的系统，其中，所述移动电子设备的所述后侧包括照相机，所述照相机沿着所述视线定向并且操作用于生成所述患者的图像，并且
所述移动电子设备还操作用于将所述患者的所述图像与所述医学图像组合，使得所述医学图像进一步描绘所述对象和所述患者的增强现实视图。
9.一种用于显示患者体内的对象的医学图像的方法，包括：
将移动电子设备围绕所述患者移动，所述移动电子设备具有前侧和与所述前侧相对的后侧，所述前侧包括显示器，并且所述后侧限定从所述移动电子设备向外伸出的视线；
经由与所述移动电子设备电子连通的医学成像装置生成所述医学图像；
将所述医学图像经由所述医学成像装置发送到所述移动电子设备；和
在所述移动电子设备上显示所述医学图像，使得所述医学图像沿着所述视线从所述移动电子设备的视角描绘所述对象的视图。
10.一种存储指令的非暂时性计算机可读介质，所述指令被配置成使移动电子设备适合于：
将设备位置数据和设备取向数据中的至少一个发送到操作用于生成患者体内的对象的医学图像的医学成像装置；
从所述医学成像装置接收所述医学图像；和
在所述移动电子设备的前侧上的显示器上显示所述医学图像，使得所述医学图像沿着视线从所述移动电子设备的视角描绘所述对象的视图，所述视线从与所述前侧相对的所述移动电子设备的后侧从所述移动电子设备向外延伸。
CN201711334417.1A 2016-12-13 2017-12-13 用于显示患者体内的对象的医学图像的系统和方法 Pending CN108209916A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/376,984 US10548567B2 (en) 2016-12-13 2016-12-13 System and method for displaying medical images of an object within a patient
US15/376984 2016-12-13

Publications (1)

Publication Number Publication Date
CN108209916A true CN108209916A (zh) 2018-06-29

Family

ID=62487683

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711334417.1A Pending CN108209916A (zh) 2016-12-13 2017-12-13 用于显示患者体内的对象的医学图像的系统和方法

Country Status (3)

Country Link
US (1) US10548567B2 (zh)
KR (1) KR102467274B1 (zh)
CN (1) CN108209916A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112438717A (zh) * 2019-08-28 2021-03-05 通用电气精准医疗有限责任公司 用于使医学成像设备中的真空破裂的系统
CN113260313A (zh) * 2019-01-07 2021-08-13 蝴蝶网络有限公司 用于超声数据收集的方法和装置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10610179B2 (en) * 2017-06-05 2020-04-07 Biosense Webster (Israel) Ltd. Augmented reality goggles having X-ray protection
US10453237B2 (en) * 2017-12-21 2019-10-22 International Business Machines Corporation Automatic viewport releveling

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2452649A1 (en) * 2010-11-12 2012-05-16 Deutsches Krebsforschungszentrum Stiftung des Öffentlichen Rechts Visualization of anatomical data by augmented reality
US20140228653A1 (en) * 2012-02-14 2014-08-14 Marianna Kiraly Device and method for displaying fetal positions and fetal biological signals using portable technology
WO2015099835A1 (en) * 2013-12-27 2015-07-02 General Electric Company System and method for displaying ultrasound images
US20160182596A1 (en) * 2013-07-24 2016-06-23 Nurep Inc. Method, device and system for managing audio, video & data communications
US20160350649A1 (en) * 2015-05-26 2016-12-01 Qiang Zhang Method and apparatus of learning neural network via hierarchical ensemble learning

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003053247A1 (en) 2001-12-20 2003-07-03 Imadent Ltd. Ultrasonic apparatus and method for locating and imaging a waveguiding object through an interposing medium
CN100449440C (zh) * 2003-02-03 2009-01-07 西门子公司 综合信息的投影
US20110154569A1 (en) * 2009-12-28 2011-06-30 Varian Medical Systems, Inc. Mobile patient support system
US9113817B2 (en) 2010-10-20 2015-08-25 Siemens Medical Solutions Usa, Inc. System for locating anatomical objects in ultrasound imaging
CN104204904B (zh) * 2012-01-24 2018-05-18 亚利桑那大学评议会 紧凑式眼睛跟踪头戴式显示器
US8782158B2 (en) * 2012-10-02 2014-07-15 Tanner Cropper System for sharing and tracking review of rich content, and methods associated therewith
WO2015003727A1 (en) * 2013-07-08 2015-01-15 Brainlab Ag Single-marker navigation
US20150038844A1 (en) * 2013-08-01 2015-02-05 Travis Blalock Portable Ultrasound System Comprising Ultrasound Front-End Directly Connected to a Mobile Device
CN105594306B (zh) * 2013-09-03 2017-05-17 瑞亚生医股份有限公司 移动式射线机之铰接显示设备
TWI523469B (zh) * 2014-02-24 2016-02-21 廣達電腦股份有限公司 多頻道分享裝置及多頻道分享方法
US9510196B2 (en) * 2014-03-17 2016-11-29 Qualcomm Incorporated Method and apparatus for authenticating a user on a mobile device
EP3219088B1 (en) * 2014-11-13 2019-02-20 Medtronic Vascular, Inc. Visual and tactile assessment tool for attaching to a mobile device
KR20160059270A (ko) * 2014-11-18 2016-05-26 삼성전자주식회사 전기 커넥터 장치
US20170201285A1 (en) * 2016-01-13 2017-07-13 GoDirectInc.com, Inc. Protective cover for electronic device
CA3040703A1 (en) * 2016-10-17 2018-04-26 Context Ai, Llc Systems and methods for medical diagnosis and biomarker identification using physiological sensors and machine learning

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2452649A1 (en) * 2010-11-12 2012-05-16 Deutsches Krebsforschungszentrum Stiftung des Öffentlichen Rechts Visualization of anatomical data by augmented reality
US20140228653A1 (en) * 2012-02-14 2014-08-14 Marianna Kiraly Device and method for displaying fetal positions and fetal biological signals using portable technology
US20160182596A1 (en) * 2013-07-24 2016-06-23 Nurep Inc. Method, device and system for managing audio, video & data communications
WO2015099835A1 (en) * 2013-12-27 2015-07-02 General Electric Company System and method for displaying ultrasound images
US20160350649A1 (en) * 2015-05-26 2016-12-01 Qiang Zhang Method and apparatus of learning neural network via hierarchical ensemble learning

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113260313A (zh) * 2019-01-07 2021-08-13 蝴蝶网络有限公司 用于超声数据收集的方法和装置
CN112438717A (zh) * 2019-08-28 2021-03-05 通用电气精准医疗有限责任公司 用于使医学成像设备中的真空破裂的系统

Also Published As

Publication number Publication date
US20180161008A1 (en) 2018-06-14
KR102467274B1 (ko) 2022-11-14
KR20180068302A (ko) 2018-06-21
US10548567B2 (en) 2020-02-04

Similar Documents

Publication Publication Date Title
CN108209916A (zh) 用于显示患者体内的对象的医学图像的系统和方法
CN110169822B (zh) 用于与机器人外科手术系统一起使用的增强现实导航系统及其使用方法
US20220067965A1 (en) Systems and methods for augmented reality
CN103735312B (zh) 多模影像超声引导手术导航系统
US11413094B2 (en) System and method for multi-client deployment of augmented reality instrument tracking
US20190021698A1 (en) Methods for acquiring ultrasonic data
CN104869934B (zh) 利用三维跟踪传感器进行配准及导航
US20070024644A1 (en) Interactive augmented reality system
CN110461265A (zh) 用于基于图像的导航的方法和装置
CN113260313A (zh) 用于超声数据收集的方法和装置
Antunes et al. A survey of sensors in healthcare workflow monitoring
JPWO2012081194A1 (ja) 医療支援装置、医療支援方法および医療支援システム
CN103961178A (zh) 远程手术规划与导航系统
AU2020316076B2 (en) Positioning a camera for perspective sharing of a surgical site
WO2021026313A1 (en) Fast 3d reconstruction with depth information
WO2022005720A1 (en) Eyewear including multi-user, shared interactive experiences
CN111973273A (zh) 基于ar技术的手术导航系统、方法、设备和介质
Zhang et al. Immersive augmented reality (I am real)–remote clinical consultation
CN106168850A (zh) 用于显示屏幕的电子设备及其控制方法
Vogt Real-Time Augmented Reality for Image-Guided Interventions
CN110494840A (zh) 电子设备和用于电子设备的屏幕图像显示方法
CN110368026A (zh) 一种手术辅助装置及系统
CN110368028A (zh) 一种空间坐标系的实时配准方法和装置
Castro et al. Magnetic Localization of Wireless Ingestible Capsules Using a Belt-Shaped Array Transmitter
Nicolai A 3D Camera Based System Concept for Safe and Intuitive Use of a Surgical Robot System

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination