CN107315915A - 一种医疗手术模拟方法及系统 - Google Patents
一种医疗手术模拟方法及系统 Download PDFInfo
- Publication number
- CN107315915A CN107315915A CN201710511532.5A CN201710511532A CN107315915A CN 107315915 A CN107315915 A CN 107315915A CN 201710511532 A CN201710511532 A CN 201710511532A CN 107315915 A CN107315915 A CN 107315915A
- Authority
- CN
- China
- Prior art keywords
- dummy object
- real
- transparency
- dummy
- relative position
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
本发明实施例提供了一种医疗手术模拟方法及系统。本发明实施例中,在通过增强现实AR设备显示医疗手术场景的过程中,获取医疗手术场景中的虚拟物体与真实物体之间的相对位置关系,然后,当所述相对位置关系满足指定条件时,对所述虚拟物体中的指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度,进而,显示所述真实物体以及透明度调节后得到的虚拟物体。因此,本发明实施例提供的技术方案能够解决现有技术中使用AR技术进行医疗手术模拟时存在虚拟物体遮挡真实物体的问题。
Description
【技术领域】
本发明涉及医疗设备技术领域,尤其涉及一种医疗手术模拟方法及系统。
【背景技术】
目前,增强现实(Augmented Reality,AR)技术是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息,听觉信息,味觉信息,触觉信息等)通过计算机科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到类似现实或者超越现实的感官体验。利用AR技术,能够将真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。
目前,AR技术已经应用于医疗手术的模拟,利用AR技术进行医疗手术的模拟具有无损伤性、可重复性和可指定性等优点。
但是,在将AR技术应用到医疗手术领域时,用户通过AR设备呈现的手术场景中同时包含真实物体与虚拟物体,而虚拟物体和真实物体之间存在的遮挡关系将直接影响用户能够看到的场景。例如,在AR显示的医疗手术场景中,用户使用真实的手术刀对虚拟病人进行手术时,当找到合适的切入点之后,若当前视角下虚拟病人的某个组织(比如皮肤等软组织)挡住了手术刀,那么当用户使用手术刀不断深入虚拟病人体内的过程中,以及用户真正操刀对虚拟病人的病变组织进行切除时,用户很难直观地观察出手术刀的当前位置、进入虚拟病人体内的深度以及真实的手术刀在虚拟病人体内的走向。
【发明内容】
有鉴于此,本发明实施例提供了一种医疗手术模拟方法及系统,用以解决现有技术中使用AR技术进行医疗手术模拟时存在虚拟物体遮挡真实物体的问题。
一方面,本发明实施例提供了一种医疗手术模拟方法,包括:
在通过增强现实AR设备显示医疗手术场景的过程中,获取医疗手术场景中的虚拟物体与真实物体之间的相对位置关系;
当所述相对位置关系满足指定条件时,对所述虚拟物体中的指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度;
显示所述真实物体以及透明度调节后得到的虚拟物体。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,在通过所述AR设备显示所述医疗手术场景之前,所述方法还包括:
获取用户的操作信息;
根据所述操作信息,确定所述医疗手术场景中待显示的虚拟物体;
获取所述虚拟物体的建模数据;
根据所述建模数据,生成所述虚拟物体。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述方法还包括:
根据所述虚拟物体与所述真实物体之间的相对位置关系,模拟所述虚拟物体与所述真实物体之间的受力状态;
根据所述虚拟物体与所述真实物体之间的受力状态,获取反馈力的大小;
根据所述反馈力的大小,显示所述虚拟物体在受到所述反馈力的过程中的形态变化。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述方法还包括:
当所述虚拟物体与所述真实物体之间的相对位置关系为交叉关系时,判断出所述相对位置关系满足所述指定条件。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,对所述虚拟物体中的指定部位的透明度进行调节,包括:
获取所述虚拟物体与所述真实物体之间的交叉部位,以作为所述虚拟物体中的指定部位;
对所述指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,
另一方面,本发明实施例提供了一种医疗手术模拟系统,包括:
第一获取单元,用于在通过增强现实AR设备显示医疗手术场景的过程中,获取医疗手术场景中的虚拟物体与真实物体之间的相对位置关系;
调节单元,用于当所述相对位置关系满足指定条件时,对所述虚拟物体中的指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度;
显示单元,用于显示所述真实物体以及透明度调节后得到的虚拟物体。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述系统还包括:
第二获取单元,用于获取用户的操作信息;
确定单元,用于根据所述操作信息,确定所述医疗手术场景中待显示的虚拟物体;
第三获取单元,用于获取所述虚拟物体的建模数据;
生成单元,用于根据所述建模数据,生成所述虚拟物体。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述系统还包括:
模拟单元,用于根据所述虚拟物体与所述真实物体之间的相对位置关系,模拟所述虚拟物体与所述真实物体之间的受力状态;
第四获取单元,用于根据所述虚拟物体与所述真实物体之间的受力状态,获取反馈力的大小;
所述显示单元,还用于根据所述反馈力的大小,显示所述虚拟物体在受到所述反馈力的过程中的形态变化。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述系统还包括:
判断单元,用于当所述虚拟物体与所述真实物体之间的相对位置关系为交叉关系时,判断出所述相对位置关系满足所述指定条件;
所述调节单元,具体用于:
获取所述虚拟物体与所述真实物体之间的交叉部位,以作为所述虚拟物体中的指定部位;
对所述指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度。
再一方面,本发明实施例提供了一种医疗手术模拟系统,所述系统包括处理器以及存储器;所述存储器用于存储指令,所述指令被所述处理器执行时,导致所述系统实现上述的医疗手术模拟方法。
上述技术方案中的一个技术方案具有如下有益效果:
本发明实施例中,通过AR技术实现医疗手术模拟的过程中,可以通过获取真实物体与虚拟物体之间的相对位置关系,这样,当根据虚拟物体和真实物体之间的相对位置关系为二者存在遮挡时,就可以对虚拟物体中遮挡用户视线的指定部位的透明度进行调节,这样,用户可以在医疗手术的模拟过程中,清晰直观的观察出真实物体的当前位置,真实物体进入虚拟物体内部的深度以及真实物体在虚拟物体内部的走向,从而,能够帮助用户在医疗手术的模拟场景中找出最优的手术线路,以便于用户在真实的手术场景中能够根据该模拟场景得到的最优手术线路进行操刀,进而,可以帮助用户在真正实施手术时提高其成功率和手术效率。因此,本发明实施例提供的技术方案能够解决现有技术中使用AR技术进行医疗手术模拟时存在虚拟物体遮挡真实物体的问题。
【附图说明】
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。
图1是本发明实施例所提供的医疗手术模拟方法的流程示意图;
图2是本发明实施例所提供的医疗手术模拟系统的功能方块图;
图3是本发明实施例所提供的医疗手术模拟系统的实体装置示意图。
【具体实施方式】
为了更好的理解本发明的技术方案,下面结合附图对本发明实施例进行详细描述。
应当明确,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地,取决于语境,短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
针对现有技术中所存在的使用AR技术进行医疗手术模拟时存在虚拟物体遮挡真实物体的问题,本发明实施例提供了如下解决思路:在使用AR设备显示医疗手术场景的过程中,通过获取真实物体与虚拟物体之间的相对位置关系,若相对位置关系满足指定条件,就会对虚拟物体中的指定部位进行透明度的调节,以保证虚拟物体不会遮挡真实物体。
在该思路的引导下,本方案实施例提供了以下可行的实施方案。
实施例一
本发明实施例给出一种医疗手术模拟方法。
具体的,请参考图1,其为本发明实施例所提供的医疗手术模拟方法的流程示意图,如图1所示,该方法包括以下步骤:
S101,在通过AR设备显示医疗手术场景的过程中,获取医疗手术场景中的虚拟物体与真实物体之间的相对位置关系。
S102,当相对位置关系满足指定条件时,对虚拟物体中的指定部位的透明度进行调节,使指定部位的透明度为除完全不透明以外的透明度。
S103,显示真实物体以及透明度调节后得到的虚拟物体。
本发明实施例中,AR设备可以包括但不限于:单目式AR头戴设备或者双目式AR头戴设备。
可以理解的是,在执行S101之前,本发明实施中,还需要通过AR设备显示医疗手术场景。并且,鉴于医疗手术场景中可以同时包含虚拟物体与真实物体,因此,可以在具体执行S101之前,还需要先生成虚拟物体。
在一个具体的实现过程中,可以通过获取用户的操作信息,根据该操作信息,确定医疗手术场景中待显示的虚拟物体,从而,获取虚拟物体的建模数据,进而,根据该建模数据,生成虚拟物体。
其中,获取到的用户的操作信息可以是用户在AR设备上的操作信息,或者,也可以是用户在与AR设备存在通信的终端上的操作信息,本发明实施例对此不进行特别限定。
本发明实施例中,用户的操作信息用于对医疗手术场景中的虚拟物体进行指示。例如,在一个具体的医疗手术模拟过程中,用户的操作信息可以用于指示病人为虚拟物体,或者,用户的操作信息还可以用于指示某一医疗器械为虚拟物体。
并且,在上述实现方式中,获取虚拟物体的建模数据时,可以直接在预先存储有虚拟物体的建模数据的数据库中获取,或者,也可以通过获取用户输入的虚拟物体的建模数据的方式获取,本发明实施例对此不进行特别限定。
本发明实施例中,虚拟物体的建模数据可以包括但不限于:结构型数据与功能型数据。其中,结构型数据可以表示一个医疗设备外部可见的物理构造和内部的物理构造,具体的,结构性数据可以包括但不限于:物理结构、位置关系、材料数据和尺寸数据。其中,功能型数据可以表示医疗设备在功能方面的信息,具体的,功能型数据可以包括但不限于:可承载数据量、逻辑电路、电压、电流和输出功率。
本发明实施例中,根据上述获取到的虚拟物体的建模数据生成虚拟物体时,可以利用利用自身存储的建模程序,生成该虚拟物体的虚拟模型,进而,能够在AR设备的显示设备上显示该虚拟物体的虚拟模型,也就是说,能够在真实环境中以三维立体的方式显示该虚拟物体;与此同时,AR设备还可以同时显示该医疗手术场景中的真实物体。
基于AR设备可以对医疗手术场景进行显示,本发明实施例中,还可以获取医疗手术场景中真实物体与虚拟物体之间的相对位置关系。
在一个具体的实现过程中,可以通过头戴设备的摄像头对真实环境进行扫描,并以摄像头为坐标原点建立三维坐标系,如此,可以得到真实环境中各真实物体相对于该摄像头的三维坐标,基于此,当虚拟物体在真实环境中呈现时,可以通过虚拟物体的成像参数得到该虚拟物体相对于摄像头的三维坐标,由于真实物体与虚拟物体都处在同一个坐标系下,可以通过真实物体的三维坐标与虚拟物体的三维坐标,获得真实物体与虚拟物体之间的的相对位置关系。
具体的,本发明实施例中,医疗手术场景中真实物体与虚拟物体之间的相对位置关系可以包括但不限于:交叉关系和非交叉关系。其中,当真实物体与虚拟物体之间为交叉关系时,虚拟物体可能会对真实物体产生遮挡;而当真实物体与虚拟物体之间为非交叉关系时,虚拟物体不会对真实物体产生遮挡。
基于此,在具体实现S102时,可以判断虚拟物体与真实物体之间是否存在交叉关系,当二者存在交叉关系时,判断出该相对位置关系满足指定条件;反之,当二者不存在交叉关系时,判断出该相对位置关系不满足指定条件。
进而,当判断出虚拟物体与真实物体之间存在交叉关系时,就可以获取虚拟物体与真实物体之间的交叉部位,以作为虚拟物体中的指定部位,从而,对该指定部位的透明度进行调节,以使得指定部位的透明度为除完全不透明和完全透明以外的透明度。
本发明实施例中,在通过AR设备显示医疗手术场景的过程中,虚拟物体的透明度一般为完全不透明,当经过S102确定获取到的相对位置关系满足指定条件时,就会对虚拟物体的指定部位的透明度进行调节,使得该指定部位呈现半透明或完全透明的显示效果,此时,该指定部位的透明度为除完全不透明以外的透明度。
在一个实际的应用场景中,可以将指定部位的透明度设置为除完全透明和完全不透明以外的透明度,此时,指定部位介于完全透明与完全不透明之间,呈现一种半透明的显示效果。
具体的,假设透明度在0与1之间,当透明度为0时,指定部位的透明度为完全透明;当透明度为1时,指定部位的透明度为完全不透明。通常情况下,通过AR设备显示的虚拟物体的透明度一般为1,也就是显示为完全不透明状态;本发明实施例中,当确定虚拟物体与真实物体之间的相对位置关系满足指定条件后,对虚拟物体中的指定部位的透明度进行调节,调节后的虚拟物体中的指定部位的透明度的范围为:[0,1)。在一个优选的实现过程中,指定部位的透明度的范围为:(0,1)。
举例说明,若在一个具体的医疗手术模拟过程中,虚拟物体为病人,真实物体为手术刀。那么,当前通过AR设备显示的虚拟病人的透明度为1,随着用户握持的真实手术刀的位置发生变化,本发明实施例会获取真实手术刀与虚拟病人之间的相互位置关系,从而,当真实手术刀深入到虚拟病人体内的时候,虚拟病人的虚拟皮肉组织会对真实手术刀产生遮挡,也就是说,此时,真实手术刀与虚拟病人之间存在交叉关系,那么,确定交叉部位为虚拟病人的部分皮肉组织,这部分皮肉组织也就是指定部位,从而,通过AR设备显示的虚拟病人中,该部分皮肉组织的透明度被调节为透明度范围为(0,1)的半透明显示的状态,这样,用户可以清楚的、直观的观察出真实手术刀的当前位置、进入虚拟病人体内的深度以及真实的手术刀在虚拟病人体内的走向。
本发明实施例中,考虑到在医疗手术的虚拟场景中缺乏触觉效果,这样,用户在AR设备虚拟出的医疗手术场景下完成的手术与真实的手术场景区别很大,基于此,本发明实施例中,还可以在上述医疗手术的模拟场景中添加力反馈机制。
在一个具体的实现过程中,可以根据虚拟物体与真实物体之间的相对位置关系,模拟虚拟物体与真实物体之间的受力状态,从而,根据虚拟物体与真实物体之间的受力状态,获取反馈力的大小,进而,根据反馈力的大小,显示虚拟物体在受到反馈力的过程中的形态变化。
具体的,模拟虚拟物体与真实物体之间的受力状态可以通过触碰检测进行计算。具体的,当获取到虚拟物体和真实物体的相对位置关系之后,就可以据此计算出真实物体和虚拟物体是否有触碰,从而,得到虚拟物体与真实物体之间的受力状态。
以及,根据虚拟物体与真实物体的受力状态,获取反馈力的大小可以根据虚拟物体与真实物体之间的相对位置关系,模拟出虚拟物体的变形情况,然后,根据虚拟物体的形变大小,计算得到反馈力的数值。例如,可以通过真实的手术刀与虚拟的病人之间的相对位置关系,模拟出病人的各生理组织的变形情况,通过该形变大小来计算得到反馈力。
通过在医疗手术模拟过程中添加上述力反馈机制,可以使得用户在医疗手术模拟场景中感知到反馈力的存在,从而,在一定程度上使得医疗手术模拟场景更接近于真实手术场景,进而,能够达到较好的临床手术训练效果,可以帮助用户在真正实施手术时提高其成功率和手术效率。
本发明实施例的技术方案具有以下有益效果:
本发明实施例中,通过AR技术实现医疗手术模拟的过程中,可以通过获取真实物体与虚拟物体之间的相对位置关系,这样,当根据虚拟物体和真实物体之间的相对位置关系为二者存在遮挡时,就可以对虚拟物体中遮挡用户视线的指定部位的透明度进行调节,这样,用户可以在医疗手术的模拟过程中,清晰直观的观察出真实物体的当前位置,真实物体进入虚拟物体内部的深度以及真实物体在虚拟物体内部的走向,从而,能够帮助用户在医疗手术的模拟场景中找出最优的手术线路,以便于用户在真实的手术场景中能够根据该模拟场景得到的最优手术线路进行操刀,进而,可以帮助用户在真正实施手术时提高其成功率和手术效率。因此,本发明实施例提供的技术方案能够解决现有技术中使用AR技术进行医疗手术模拟时存在虚拟物体遮挡真实物体的问题。
实施例二
基于上述实施例一所提供的医疗手术模拟方法,本发明实施例进一步给出实现上述方法实施例中各步骤及方法的装置实施例。
请参考图2,其为本发明实施例所提供的医疗手术模拟系统的功能方块图。如图2所示,该系统包括:
第一获取单元21,用于在通过增强现实AR设备显示医疗手术场景的过程中,获取医疗手术场景中的虚拟物体与真实物体之间的相对位置关系;
调节单元22,用于当相对位置关系满足指定条件时,对虚拟物体中的指定部位的透明度进行调节,使指定部位的透明度为除完全不透明以外的透明度;
显示单元23,用于显示真实物体以及透明度调节后得到的虚拟物体。
具体的,本发明实施例中,该系统还包括:
第二获取单元24,用于获取用户的操作信息;
确定单元25,用于根据操作信息,确定医疗手术场景中待显示的虚拟物体;
第三获取单元26,用于获取虚拟物体的建模数据;
生成单元27,用于根据建模数据,生成虚拟物体。
具体的,本发明实施例中,该系统还包括:
模拟单元28,用于根据虚拟物体与真实物体之间的相对位置关系,模拟虚拟物体与真实物体之间的受力状态;
第四获取单元29,用于根据虚拟物体与真实物体之间的受力状态,获取反馈力的大小;
显示单元23,还用于根据反馈力的大小,显示虚拟物体在受到反馈力的过程中的形态变化。
本发明实施例中,该系统还包括:
判断单元30,用于当虚拟物体与真实物体之间的相对位置关系为交叉关系时,判断出相对位置关系满足指定条件。
在一个具体的实现过程中,调节单元22,具体用于:
获取虚拟物体与真实物体之间的交叉部位,以作为虚拟物体中的指定部位;
对指定部位的透明度进行调节,使指定部位的透明度为除完全不透明以外的透明度。
请参考图3,其为本发明实施例所提供的医疗手术模拟系统的实体装置示意图。如图3所示,该系统包括:处理器31以及存储器32,其中,存储器32用于存储指令,该指令被处理器31执行时,导致该系统可以实现实施例一所述的医疗手术模拟方法。
由于本实施例中的各单元能够执行图1所示的方法,本实施例未详细描述的部分,可参考对图1的相关说明。
本发明实施例的技术方案具有以下有益效果:
本发明实施例中,通过AR技术实现医疗手术模拟的过程中,可以通过获取真实物体与虚拟物体之间的相对位置关系,这样,当根据虚拟物体和真实物体之间的相对位置关系为二者存在遮挡时,就可以对虚拟物体中遮挡用户视线的指定部位的透明度进行调节,这样,用户可以在医疗手术的模拟过程中,清晰直观的观察出真实物体的当前位置,真实物体进入虚拟物体内部的深度以及真实物体在虚拟物体内部的走向,从而,能够帮助用户在医疗手术的模拟场景中找出最优的手术线路,以便于用户在真实的手术场景中能够根据该模拟场景得到的最优手术线路进行操刀,进而,可以帮助用户在真正实施手术时提高其成功率和手术效率。因此,本发明实施例提供的技术方案能够解决现有技术中使用AR技术进行医疗手术模拟时存在虚拟物体遮挡真实物体的问题。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机装置(可以是个人计算机,服务器,或者网络装置等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。
Claims (10)
1.一种医疗手术模拟方法,其特征在于,所述方法包括:
在通过增强现实AR设备显示医疗手术场景的过程中,获取医疗手术场景中的虚拟物体与真实物体之间的相对位置关系;
当所述相对位置关系满足指定条件时,对所述虚拟物体中的指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度;
显示所述真实物体以及透明度调节后得到的虚拟物体。
2.根据权利要求1所述的方法,其特征在于,在通过所述AR设备显示所述医疗手术场景之前,所述方法还包括:
获取用户的操作信息;
根据所述操作信息,确定所述医疗手术场景中待显示的虚拟物体;
获取所述虚拟物体的建模数据;
根据所述建模数据,生成所述虚拟物体。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述虚拟物体与所述真实物体之间的相对位置关系,模拟所述虚拟物体与所述真实物体之间的受力状态;
根据所述虚拟物体与所述真实物体之间的受力状态,获取反馈力的大小;
根据所述反馈力的大小,显示所述虚拟物体在受到所述反馈力的过程中的形态变化。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述虚拟物体与所述真实物体之间的相对位置关系为交叉关系时,判断出所述相对位置关系满足所述指定条件。
5.根据权利要求4所述的方法,其特征在于,对所述虚拟物体中的指定部位的透明度进行调节,包括:
获取所述虚拟物体与所述真实物体之间的交叉部位,以作为所述虚拟物体中的指定部位;
对所述指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度。
6.一种医疗手术模拟系统,其特征在于,所述系统包括:
第一获取单元,用于在通过增强现实AR设备显示医疗手术场景的过程中,获取医疗手术场景中的虚拟物体与真实物体之间的相对位置关系;
调节单元,用于当所述相对位置关系满足指定条件时,对所述虚拟物体中的指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度;
显示单元,用于显示所述真实物体以及透明度调节后得到的虚拟物体。
7.根据权利要求6所述的系统,其特征在于,所述系统还包括:
第二获取单元,用于获取用户的操作信息;
确定单元,用于根据所述操作信息,确定所述医疗手术场景中待显示的虚拟物体;
第三获取单元,用于获取所述虚拟物体的建模数据;
生成单元,用于根据所述建模数据,生成所述虚拟物体。
8.根据权利要求6所述的系统,其特征在于,所述系统还包括:
模拟单元,用于根据所述虚拟物体与所述真实物体之间的相对位置关系,模拟所述虚拟物体与所述真实物体之间的受力状态;
第四获取单元,用于根据所述虚拟物体与所述真实物体之间的受力状态,获取反馈力的大小;
所述显示单元,还用于根据所述反馈力的大小,显示所述虚拟物体在受到所述反馈力的过程中的形态变化。
9.根据权利要求6所述的系统,其特征在于,所述系统还包括:
判断单元,用于当所述虚拟物体与所述真实物体之间的相对位置关系为交叉关系时,判断出所述相对位置关系满足所述指定条件;
所述调节单元,用于:
获取所述虚拟物体与所述真实物体之间的交叉部位,以作为所述虚拟物体中的指定部位;
对所述指定部位的透明度进行调节,使所述指定部位的透明度为除完全不透明以外的透明度。
10.一种医疗手术模拟系统,其特征在于,所述系统包括处理器以及存储器;所述存储器用于存储指令,所述指令被所述处理器执行时,导致所述系统实现如权利要求1-5任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710511532.5A CN107315915A (zh) | 2017-06-28 | 2017-06-28 | 一种医疗手术模拟方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710511532.5A CN107315915A (zh) | 2017-06-28 | 2017-06-28 | 一种医疗手术模拟方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107315915A true CN107315915A (zh) | 2017-11-03 |
Family
ID=60180886
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710511532.5A Pending CN107315915A (zh) | 2017-06-28 | 2017-06-28 | 一种医疗手术模拟方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107315915A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108171817A (zh) * | 2018-01-10 | 2018-06-15 | 上海市地下空间设计研究总院有限公司 | 基于mr或ar的巡检方法、mr或ar设备及巡检系统 |
CN109464194A (zh) * | 2018-12-29 | 2019-03-15 | 上海联影医疗科技有限公司 | 医学图像的显示方法、装置、医学设备及计算机存储介质 |
CN113961122A (zh) * | 2021-11-04 | 2022-01-21 | 北京嘉和海森健康科技有限公司 | 人体模型显示方法和装置 |
WO2022252833A1 (zh) * | 2021-05-31 | 2022-12-08 | 北京字跳网络技术有限公司 | 一种图像渲染方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001518458A (ja) * | 1997-09-28 | 2001-10-16 | ディ − ファーム リミテッド | キレート化剤の親油性ジエステル |
CN102341046A (zh) * | 2009-03-24 | 2012-02-01 | 伊顿株式会社 | 利用增强现实技术的手术机器人系统及其控制方法 |
US8655598B2 (en) * | 2007-03-22 | 2014-02-18 | University Of South Florida | Predictive radiosensitivity network model |
CN104731337A (zh) * | 2009-08-18 | 2015-06-24 | Metaio有限公司 | 用于在真实环境中表示虚拟信息的方法 |
CN106683161A (zh) * | 2016-12-13 | 2017-05-17 | 中国传媒大学 | 基于图像分割与自定义图层法的增强现实遮挡方法 |
-
2017
- 2017-06-28 CN CN201710511532.5A patent/CN107315915A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001518458A (ja) * | 1997-09-28 | 2001-10-16 | ディ − ファーム リミテッド | キレート化剤の親油性ジエステル |
US8655598B2 (en) * | 2007-03-22 | 2014-02-18 | University Of South Florida | Predictive radiosensitivity network model |
CN102341046A (zh) * | 2009-03-24 | 2012-02-01 | 伊顿株式会社 | 利用增强现实技术的手术机器人系统及其控制方法 |
CN104731337A (zh) * | 2009-08-18 | 2015-06-24 | Metaio有限公司 | 用于在真实环境中表示虚拟信息的方法 |
CN106683161A (zh) * | 2016-12-13 | 2017-05-17 | 中国传媒大学 | 基于图像分割与自定义图层法的增强现实遮挡方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108171817A (zh) * | 2018-01-10 | 2018-06-15 | 上海市地下空间设计研究总院有限公司 | 基于mr或ar的巡检方法、mr或ar设备及巡检系统 |
CN109464194A (zh) * | 2018-12-29 | 2019-03-15 | 上海联影医疗科技有限公司 | 医学图像的显示方法、装置、医学设备及计算机存储介质 |
WO2022252833A1 (zh) * | 2021-05-31 | 2022-12-08 | 北京字跳网络技术有限公司 | 一种图像渲染方法及装置 |
CN113961122A (zh) * | 2021-11-04 | 2022-01-21 | 北京嘉和海森健康科技有限公司 | 人体模型显示方法和装置 |
CN113961122B (zh) * | 2021-11-04 | 2023-11-17 | 北京嘉和海森健康科技有限公司 | 人体模型显示方法和装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Hamacher et al. | Application of virtual, augmented, and mixed reality to urology | |
US10108266B2 (en) | Haptic augmented and virtual reality system for simulation of surgical procedures | |
CN106251751B (zh) | 一种基于vr技术的医疗手术模拟仿真系统 | |
CN107315915A (zh) | 一种医疗手术模拟方法及系统 | |
CN103456223A (zh) | 基于力反馈的腹腔镜手术模拟系统 | |
CN106781941A (zh) | 一种用于模拟微创穿刺手术的方法及其系统 | |
CN103345568A (zh) | 基于三维模型的手术规划的方法及其系统 | |
Stock et al. | Realistic simulation of progressive vision diseases in virtual reality | |
CN104517016A (zh) | 一种体感技术和虚拟现实技术的手术模拟系统 | |
KR20050047548A (ko) | 가상 해부 환경을 생성하는 장치 및 방법 | |
CN113379929B (zh) | 一种基于物理仿真的骨组织修复虚拟现实解决方法 | |
WO2007019546A2 (en) | System, device, and methods for simulating surgical wound debridements | |
Behringer et al. | Some usability issues of augmented and mixed reality for e-health applications in the medical domain | |
Tai et al. | Tissue and force modelling on multi-layered needle puncture for percutaneous surgery training | |
Wagner et al. | Intraocular surgery on a virtual eye | |
CN114267219B (zh) | 虚拟手术仿真装置及仿真系统 | |
Souza et al. | Development of a vr simulator for medical training using free tools: A case study | |
Cecil et al. | Design of VR based orthopedic simulation environments using emerging technologies | |
Tai et al. | Integrating virtual reality and haptics for renal puncture surgical simulator | |
Turini et al. | Patient-specific surgical simulator for the pre-operative planning of single-incision laparoscopic surgery with bimanual robots | |
WO2021155431A1 (en) | Vr-based treatment system and method | |
Robb | The virtualization of medicine: a decade of pitfalls and progress | |
Wieben | Virtual and augmented reality in medicine | |
Suzuki et al. | Deformable organ model using the sphere-filled method for virtual surgery | |
Indhumathi et al. | Multi-modal VR for medical simulation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 201807 Shanghai city Jiading District Industrial Zone Jiading Road No. 2258 Applicant after: Shanghai Lianying Medical Technology Co., Ltd Address before: 201807 Shanghai city Jiading District Industrial Zone Jiading Road No. 2258 Applicant before: SHANGHAI UNITED IMAGING HEALTHCARE Co.,Ltd. |
|
CB02 | Change of applicant information | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171103 |
|
RJ01 | Rejection of invention patent application after publication |