CN112422901A - 一种手术虚拟现实视频的生成方法和装置 - Google Patents

一种手术虚拟现实视频的生成方法和装置 Download PDF

Info

Publication number
CN112422901A
CN112422901A CN202011186650.1A CN202011186650A CN112422901A CN 112422901 A CN112422901 A CN 112422901A CN 202011186650 A CN202011186650 A CN 202011186650A CN 112422901 A CN112422901 A CN 112422901A
Authority
CN
China
Prior art keywords
surgical instrument
virtual
model
information
reality video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011186650.1A
Other languages
English (en)
Inventor
黄昌正
陈曦
周言明
黄庆麟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huanjing Technology Co ltd
Mirage Virtual Reality Guangzhou Intelligent Technology Research Institute Co ltd
Harley Medical Guangzhou Intelligent Technology Co ltd
Original Assignee
Guangzhou Huanjing Technology Co ltd
Mirage Virtual Reality Guangzhou Intelligent Technology Research Institute Co ltd
Harley Medical Guangzhou Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huanjing Technology Co ltd, Mirage Virtual Reality Guangzhou Intelligent Technology Research Institute Co ltd, Harley Medical Guangzhou Intelligent Technology Co ltd filed Critical Guangzhou Huanjing Technology Co ltd
Priority to CN202011186650.1A priority Critical patent/CN112422901A/zh
Publication of CN112422901A publication Critical patent/CN112422901A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Molecular Biology (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Multimedia (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例提供了一种手术虚拟现实视频的生成方法和装置。所述方法包括:在本发明实施例中,采集实体手术器具信息,采用所述手术器具信息,获取虚拟手术器具模型,采集手势动作数据,采集头部惯性数据,建立虚拟人体部位模型,采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频,解决了目前手术模拟产品提供的器械单一化的缺点,能提供多种模拟手术器具,满足手术过程的真实需求,并且能通过一种设备对多种手术进行分析与培训。

Description

一种手术虚拟现实视频的生成方法和装置
技术领域
本发明涉及手术虚拟现实视频技术领域,特别是涉及一种手术虚拟现实视频的生成方法和装置。
背景技术
医疗行业与我们的日常生活、身体健康息息相关。完备的医疗系统离不开医生的培养,而医生的培养往往又需要耗费极为漫长的时间。通常培养一名外科医生是一个很漫长的过程,一个外科医生的成长与观摩手术是分不开的,一间小小的手术室挤进去二三十个医生去观摩,这是非常正常的。这说明了现场观摩手术在医生培养中是非常有需求的。而虚拟现实技术从技术层面解决了观摩手术的问题,通过虚拟现实眼镜和虚拟现实视频录制直播,医生可以在第一时间以现场视角观摩手术过程。这对于医学教育具有重大的意义。
不过目前,在外科手术模拟系统,依旧存在许多急需解决的技术问题。模拟手术设备的专用器具单一。在外科手术过程中,根据手术类型不同,使用到的器械也各不相同,而目前的模拟手术专利基本都只有手术刀的模拟,而且型号单一,根本不符合现实手术的需求,自然也达不到模拟手术的效果。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种手术虚拟现实视频的生成方法和相应的一种手术虚拟现实视频的生成装置。
为了解决上述问题,本发明实施例公开了一种手术虚拟现实视频的生成方法,所述方法包括:
采集实体手术器具信息;
采用所述手术器具信息,获取虚拟手术器具模型;
采集手势动作数据;
采集头部惯性数据;
建立虚拟人体部位模型;
采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频。
可选地,所述实体手术器具信息包括手术器具种类以及手术器具尺寸,采集实体手术器具信息的步骤包括:
拍摄原始图像;
从所述原始图像中检测出实体手术器具;
识别所述实体手术器具所属于的手术器具种类;
计算所述实体手术器具的手术器具尺寸。
可选地,采用所述手术器具信息,获取虚拟手术器具模型的步骤包括:
采用所述手术器具信息,搜索预设虚拟手术器具库,从所述预设虚拟手术库中获取手术器具信息匹配的虚拟手术器具模型。
可选地,采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频的步骤包括:
采用所述虚拟手术器具模型以及所述手势动作数据,生成手术操作信息;
针对所述人体部位模型,执行所述手术操作信息对应的手术操作,并采用所述头部惯性数据,生成所述手术虚拟现实视频。
本发明实施例还公开了一种手术虚拟现实视频的生成装置,所述装置包括:
实体手术器具信息采集模块,用于采集实体手术器具信息;
虚拟手术器具模型获取模块,用于采用所述手术器具信息,获取虚拟手术器具模型;
手势动作数据采集模块,用于采集手势动作数据;
头部惯性数据采集模块,用于采集头部惯性数据;
虚拟人体部位模型建立模块,用于建立虚拟人体部位模型;
手术虚拟现实视频生成模块,用于采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频。
可选地,所述实体手术器具信息包括手术器具种类以及手术器具尺寸,所述实体手术器具信息采集模块包括:
原始图像拍摄子模块,用于拍摄原始图像;
实体手术器具检测子模块,用于从所述原始图像中检测出实体手术器具;
手术器具种类识别子模块,用于识别所述实体手术器具所属于的手术器具种类;
手术器具尺寸计算子模块,用于计算所述实体手术器具的手术器具尺寸。
可选地,所述虚拟手术器具模型获取模块包括:
虚拟手术器具模型获取子模块,用于采用所述手术器具信息,搜索预设虚拟手术器具库,从所述预设虚拟手术库中获取手术器具信息匹配的虚拟手术器具模型。
可选地,所述手术虚拟现实视频生成模块包括:
手术操作信息生成子模块,用于采用所述虚拟手术器具模型以及所述手势动作数据,生成手术操作信息;
手术虚拟现实视频生成子模块,用于针对所述人体部位模型,执行所述手术操作信息对应的手术操作,并采用所述头部惯性数据,生成所述手术虚拟现实视频。
本发明实施例包括以下优点:在本发明实施例中,采集实体手术器具信息,采用所述手术器具信息,获取虚拟手术器具模型,采集手势动作数据,采集头部惯性数据,建立虚拟人体部位模型,采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频,解决了目前手术模拟产品提供的器械单一化的缺点,能提供多种模拟手术器具,满足手术过程的真实需求,并且能通过一种设备对多种手术进行分析与培训。
附图说明
图1是本发明的一种手术虚拟现实视频的生成方法实施例一的步骤流程图。
图2是本发明的一种手术虚拟现实视频的生成装置实施例二的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1,示出了本发明的一种手术虚拟现实视频的生成方法实施例一的步骤流程图,具体可以包括如下步骤:
步骤101,采集实体手术器具信息;
在本发明实施例中,首先,受培训的医生拿起实体手术器具,所述实体手术器具可以是手术刀、手术钳等等,可以通过摄像头采集实体手术器具信息。具体的,所述实体手术器具信息包括手术器具种类以及手术器具尺寸,采集实体手术器具信息的步骤包括:
子步骤1011,拍摄原始图像;
子步骤1012,从所述原始图像中检测出实体手术器具;
通过图像识别算法,在所述原始图像中确定存在实体手术器具的图像区域,并从该图像区域中检测出实体手术器具。
子步骤1013,识别所述实体手术器具所属于的手术器具种类;
获取所述实体手术器具的多个器具特征,根据所述多个器具特征确定所述实体手术器具所属的手术器具种类,所述实体手术器具可以是手术刀、手术钳、手术镊、手术剪等等,本发明实施例对此不作进一步的限制。
子步骤1014,计算所述实体手术器具的手术器具尺寸。
具体的,所述摄像头可以为双目摄像头,所述双目摄像头对所述实体手术器具进行拍摄后可计算得到图像的视差信息,根据所述视差信息便可计算出所述实体手术器具的手术器具尺寸。
步骤102,采用所述手术器具信息,获取虚拟手术器具模型;
采用所述手术器具信息,获取虚拟手术器具模型的步骤包括:
采用所述手术器具信息,搜索预设虚拟手术器具库,从所述预设虚拟手术库中获取手术器具信息匹配的虚拟手术器具模型。
具体的,所述手术器具信息包括手术器具种类以及手术器具尺寸,所述预设虚拟手术器具库中预存着手术器具种类以及手术器具尺寸与虚拟手术器具模型的对应关系,采用所述手术器具信息,搜索预设虚拟手术器具库,从所述预设虚拟手术库中获取手术器具种类以及手术器具尺寸匹配的虚拟手术器具模型。
步骤103,采集手势动作数据;
在本发明实施例中,采用所述摄像头实现手势动作数据的采集,所述手势动作为医生在做手术时的手术手势动作。具体的,将所述摄像头采集的图像进行归一化等预处理操作,接着将图像输入预先通过手势数据集训练得到的卷积神经网络模型,卷积神经网络模型的卷积层会对图像中手势动作的特征进行卷积计算输出图像中包含的手势类别和坐标,最后比较置信度阈值完成手势动作数据的采集。
步骤104,采集头部惯性数据;
具体的,可以采用惯性传感器模块采集头部惯性数据。所述惯性传感模块主要包含三轴陀螺仪、三轴加速度计以及三轴磁感应传感器,其作用是获取头部发生的惯性运动状态,并将这些运动状态转化为电信号。其中,陀螺仪获取头部的角度与方向信息,加速度计测量头部在空间中个方向的加速度,而磁感应传感器则用于消除加速度计和陀螺仪在个方向上的累计偏差。惯性传感器通过I2C接口与集成了无线传输模块的微处理器相连。
步骤105,建立虚拟人体部位模型;
所述虚拟人体部位模型可以为虚拟头部模型、虚拟心脏模型、虚拟肝脏模型等等。
步骤106,采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频。
采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频的步骤包括:
采用所述虚拟手术器具模型以及所述手势动作数据,生成手术操作信息;
针对所述人体部位模型,执行所述手术操作信息对应的手术操作,并采用所述头部惯性数据,生成所述手术虚拟现实视频。所述手术虚拟现实视频生成后可实时进行直播,也可以存储后进行观看。
在本发明实施例中,采集实体手术器具信息,采用所述手术器具信息,获取虚拟手术器具模型,采集手势动作数据,采集头部惯性数据,建立虚拟人体部位模型,采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频,解决了目前手术模拟产品提供的器械单一化的缺点,能提供多种模拟手术器具,满足手术过程的真实需求,并且能通过一种设备对多种手术进行分析与培训。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图2,示出了本发明的一种手术虚拟现实视频的生成装置实施例一的结构框图,具体可以包括如下模块:
实体手术器具信息采集模块201,用于采集实体手术器具信息;
虚拟手术器具模型获取模块202,用于采用所述手术器具信息,获取虚拟手术器具模型;
手势动作数据采集模块203,用于采集手势动作数据;
头部惯性数据采集模块204,用于采集头部惯性数据;
虚拟人体部位模型建立模块205,用于建立虚拟人体部位模型;
手术虚拟现实视频生成模块206,用于采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频。
在本发明实施例中,所述实体手术器具信息包括手术器具种类以及手术器具尺寸,所述实体手术器具信息采集模块包括:
原始图像拍摄子模块,用于拍摄原始图像;
实体手术器具检测子模块,用于从所述原始图像中检测出实体手术器具;
手术器具种类识别子模块,用于识别所述实体手术器具所属于的手术器具种类;
手术器具尺寸计算子模块,用于计算所述实体手术器具的手术器具尺寸。
在本发明实施例中,所述虚拟手术器具模型获取模块包括:
虚拟手术器具模型获取子模块,用于采用所述手术器具信息,搜索预设虚拟手术器具库,从所述预设虚拟手术库中获取手术器具信息匹配的虚拟手术器具模型。
在本发明实施例中,所述手术虚拟现实视频生成模块包括:
手术操作信息生成子模块,用于采用所述虚拟手术器具模型以及所述手势动作数据,生成手术操作信息;
手术虚拟现实视频生成子模块,用于针对所述人体部位模型,执行所述手术操作信息对应的手术操作,并采用所述头部惯性数据,生成所述手术虚拟现实视频。
在本发明实施例中,所述装置还包括:
会议验证信息获取与发送模块,用于获取并发送会议验证信息至所述会议控制设备,所述会议控制设备用于判断是否存在与所述会议验证信息相对应的会议;
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种装置,包括:
包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,该计算机程序被处理器执行时实现上述一种手术虚拟现实视频的生成方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质上存储计算机程序,计算机程序被处理器执行时实现上述一种手术虚拟现实视频的生成方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种手术虚拟现实视频的生成方法和一种手术虚拟现实视频的生成装置,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (9)

1.一种手术虚拟现实视频的生成方法,其特征在于,所述方法包括:
采集实体手术器具信息;
采用所述手术器具信息,获取虚拟手术器具模型;
采集手势动作数据;
采集头部惯性数据;
建立虚拟人体部位模型;
采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频。
2.根据权利要求1所述的方法,其特征在于,所述实体手术器具信息包括手术器具种类以及手术器具尺寸,采集实体手术器具信息的步骤包括:
拍摄原始图像;
从所述原始图像中检测出实体手术器具;
识别所述实体手术器具所属于的手术器具种类;
计算所述实体手术器具的手术器具尺寸。
3.根据权利要求1所述的方法,其特征在于,采用所述手术器具信息,获取虚拟手术器具模型的步骤包括:
采用所述手术器具信息,搜索预设虚拟手术器具库,从所述预设虚拟手术库中获取手术器具信息匹配的虚拟手术器具模型。
4.根据权利要求1所述的方法,其特征在于,采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频的步骤包括:
采用所述虚拟手术器具模型以及所述手势动作数据,生成手术操作信息;
针对所述人体部位模型,执行所述手术操作信息对应的手术操作,并采用所述头部惯性数据,生成所述手术虚拟现实视频。
5.一种手术虚拟现实视频的生成装置,其特征在于,所述装置包括:
实体手术器具信息采集模块,用于采集实体手术器具信息;
虚拟手术器具模型获取模块,用于采用所述手术器具信息,获取虚拟手术器具模型;
手势动作数据采集模块,用于采集手势动作数据;
头部惯性数据采集模块,用于采集头部惯性数据;
虚拟人体部位模型建立模块,用于建立虚拟人体部位模型;
手术虚拟现实视频生成模块,用于采用所述虚拟手术器具模型、虚拟人体部位模型、手势动作数据以及头部惯性数据,生成所述手术虚拟现实视频。
6.根据权利要求5所述的装置,其特征在于,所述实体手术器具信息包括手术器具种类以及手术器具尺寸,所述实体手术器具信息采集模块包括:
原始图像拍摄子模块,用于拍摄原始图像;
实体手术器具检测子模块,用于从所述原始图像中检测出实体手术器具;
手术器具种类识别子模块,用于识别所述实体手术器具所属于的手术器具种类;
手术器具尺寸计算子模块,用于计算所述实体手术器具的手术器具尺寸。
7.根据权利要求5所述的装置,其特征在于,所述虚拟手术器具模型获取模块包括:
虚拟手术器具模型获取子模块,用于采用所述手术器具信息,搜索预设虚拟手术器具库,从所述预设虚拟手术库中获取手术器具信息匹配的虚拟手术器具模型。
8.根据权利要求5所述的装置,其特征在于,所述手术虚拟现实视频生成模块包括:
手术操作信息生成子模块,用于采用所述虚拟手术器具模型以及所述手势动作数据,生成手术操作信息;
手术虚拟现实视频生成子模块,用于针对所述人体部位模型,执行所述手术操作信息对应的手术操作,并采用所述头部惯性数据,生成所述手术虚拟现实视频。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至4中任一项所述的一种手术虚拟现实视频的生成的步骤。
CN202011186650.1A 2020-10-30 2020-10-30 一种手术虚拟现实视频的生成方法和装置 Pending CN112422901A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011186650.1A CN112422901A (zh) 2020-10-30 2020-10-30 一种手术虚拟现实视频的生成方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011186650.1A CN112422901A (zh) 2020-10-30 2020-10-30 一种手术虚拟现实视频的生成方法和装置

Publications (1)

Publication Number Publication Date
CN112422901A true CN112422901A (zh) 2021-02-26

Family

ID=74828240

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011186650.1A Pending CN112422901A (zh) 2020-10-30 2020-10-30 一种手术虚拟现实视频的生成方法和装置

Country Status (1)

Country Link
CN (1) CN112422901A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113436877A (zh) * 2021-06-29 2021-09-24 广州幻境科技有限公司 一种磁导吸波材料的制备方法和装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140272863A1 (en) * 2013-03-15 2014-09-18 Peter Kim User Interface For Virtual Reality Surgical Training Simulator
CN106501938A (zh) * 2016-11-21 2017-03-15 苏州苏大维格光电科技股份有限公司 一种头戴式增强现实三维显示装置
CN106708260A (zh) * 2016-11-30 2017-05-24 宇龙计算机通信科技(深圳)有限公司 一种虚拟实境手术场景生成方法及装置
CN109903129A (zh) * 2019-02-18 2019-06-18 北京三快在线科技有限公司 增强现实显示方法与装置、电子设备、存储介质
CN109906488A (zh) * 2016-09-29 2019-06-18 西姆博尼克斯有限公司 虚拟现实或增强现实环境下的手术室中医疗模拟的方法和系统
CN110638529A (zh) * 2019-09-20 2020-01-03 和宇健康科技股份有限公司 一种手术远程控制方法、装置、存储介质及终端设备
CN111640345A (zh) * 2020-05-22 2020-09-08 北京数医脊微科技有限公司 脊柱内镜穿刺置管训练方法、装置及计算机设备
CN111639531A (zh) * 2020-04-24 2020-09-08 中国人民解放军总医院 一种基于手势识别的医学模型交互可视化方法及系统
CN111834021A (zh) * 2020-07-20 2020-10-27 北京百度网讯科技有限公司 数据交互方法、装置、设备以及存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140272863A1 (en) * 2013-03-15 2014-09-18 Peter Kim User Interface For Virtual Reality Surgical Training Simulator
CN109906488A (zh) * 2016-09-29 2019-06-18 西姆博尼克斯有限公司 虚拟现实或增强现实环境下的手术室中医疗模拟的方法和系统
CN106501938A (zh) * 2016-11-21 2017-03-15 苏州苏大维格光电科技股份有限公司 一种头戴式增强现实三维显示装置
CN106708260A (zh) * 2016-11-30 2017-05-24 宇龙计算机通信科技(深圳)有限公司 一种虚拟实境手术场景生成方法及装置
CN109903129A (zh) * 2019-02-18 2019-06-18 北京三快在线科技有限公司 增强现实显示方法与装置、电子设备、存储介质
CN110638529A (zh) * 2019-09-20 2020-01-03 和宇健康科技股份有限公司 一种手术远程控制方法、装置、存储介质及终端设备
CN111639531A (zh) * 2020-04-24 2020-09-08 中国人民解放军总医院 一种基于手势识别的医学模型交互可视化方法及系统
CN111640345A (zh) * 2020-05-22 2020-09-08 北京数医脊微科技有限公司 脊柱内镜穿刺置管训练方法、装置及计算机设备
CN111834021A (zh) * 2020-07-20 2020-10-27 北京百度网讯科技有限公司 数据交互方法、装置、设备以及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113436877A (zh) * 2021-06-29 2021-09-24 广州幻境科技有限公司 一种磁导吸波材料的制备方法和装置

Similar Documents

Publication Publication Date Title
US11850021B2 (en) Dynamic self-learning medical image method and system
KR102013806B1 (ko) 인공데이터 생성 방법 및 장치
US11232556B2 (en) Surgical simulator providing labeled data
KR101864380B1 (ko) 수술영상데이터 학습시스템
CN112784672B (zh) 基于计算机视觉的手术场景评估
CN111311635A (zh) 一种目标定位方法、装置及系统
CN105426827A (zh) 活体验证方法、装置和系统
CN112149615B (zh) 人脸活体检测方法、装置、介质及电子设备
KR102146672B1 (ko) 수술결과에 대한 피드백 제공방법 및 프로그램
CN113485555B (zh) 医学影像阅片方法、电子设备和存储介质
WO2022195303A1 (en) Prediction of structures in surgical data using machine learning
CN114819598A (zh) 腰椎穿刺术考核评估方法、装置及存储介质
CN112422901A (zh) 一种手术虚拟现实视频的生成方法和装置
Basiev et al. Open surgery tool classification and hand utilization using a multi-camera system
CN107256375A (zh) 一种电脑前人体坐姿监测方法
JP2023526412A (ja) 情報処理方法、電子装置、及びコンピュータ記憶媒体
CN116747017A (zh) 脑出血手术规划系统及方法
Hosp et al. States of confusion: Eye and head tracking reveal surgeons’ confusion during arthroscopic surgery
US20230259817A1 (en) Machine learning pipeline
CN112885435B (zh) 图像目标区域的确定方法、装置和系统
CN110838373A (zh) 一种应用于会诊的虚拟现实仿真方法及系统
KR20190133424A (ko) 수술결과에 대한 피드백 제공방법 및 프로그램
CN118575203A (zh) 使用机器学习检测和区分外科手术中的关键结构
Cortes et al. The use of CNNs in VR/AR/MR/XR: a systematic literature review
CN112489541A (zh) 医疗训练的多媒体辅助系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 01, 17 / F, Xingguang Yingjing, 117 Shuiyin Road, Yuexiu District, Guangzhou City, Guangdong Province 510075

Applicant after: Harley Medical (Guangzhou) Intelligent Technology Co.,Ltd.

Applicant after: Mirage virtual reality technology (Guangzhou) Co.,Ltd.

Applicant after: GUANGZHOU HUANTEK Co.,Ltd.

Address before: Room 01, 17 / F, Xingguang Yingjing, 117 Shuiyin Road, Yuexiu District, Guangzhou City, Guangdong Province 510075

Applicant before: Harley Medical (Guangzhou) Intelligent Technology Co.,Ltd.

Applicant before: Mirage virtual reality (Guangzhou) Intelligent Technology Research Institute Co.,Ltd.

Applicant before: GUANGZHOU HUANTEK Co.,Ltd.

WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20210226