CN111373741B - 医疗安全系统 - Google Patents

医疗安全系统 Download PDF

Info

Publication number
CN111373741B
CN111373741B CN201880074894.5A CN201880074894A CN111373741B CN 111373741 B CN111373741 B CN 111373741B CN 201880074894 A CN201880074894 A CN 201880074894A CN 111373741 B CN111373741 B CN 111373741B
Authority
CN
China
Prior art keywords
image
display
safety system
unit
medical safety
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880074894.5A
Other languages
English (en)
Other versions
CN111373741A (zh
Inventor
菅野修也
权珉秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chuangjia Medical Co ltd
Original Assignee
Chuangjia Medical Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2017222866A external-priority patent/JP6355146B1/ja
Priority claimed from JP2018141822A external-priority patent/JP6436606B1/ja
Application filed by Chuangjia Medical Co ltd filed Critical Chuangjia Medical Co ltd
Publication of CN111373741A publication Critical patent/CN111373741A/zh
Application granted granted Critical
Publication of CN111373741B publication Critical patent/CN111373741B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107—Static hand or arm
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00115—Electrical control of surgical instruments with audible or visual output
    • A61B2017/00119—Electrical control of surgical instruments with audible or visual output alarm; indicating an abnormal situation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2505/00—Evaluating, monitoring or diagnosing in the context of a particular type of medical care
    • A61B2505/05—Surgical care
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images
    • G06V2201/034—Recognition of patterns in medical or anatomical images of medical instruments

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

从用户友好性的观点出发，提供一种比现有技术简便的医疗安全系统。具备：服务器装置(120)，其存储对手术室进行广角拍摄得到的展开影像；以及移动终端(132)，其显示作为展开影像的一部分的局部影像，移动终端(132)通过针对展开影像的图像识别处理，来确定该展开影像中拍摄到的手术区。移动终端(132)的特征在于，根据规定的契机来执行用于进行调整、以使确定出的手术区包含于局部影像的显示位置调整。

Description

医疗安全系统
技术领域
本发明涉及一种医疗安全系统。
背景技术
近年，社会整体上针对医疗错误、医疗事故的问题意识提高了，针对医疗机构的信息公开的要求越来越强烈。作为响应这种来自社会的要求的解决对策的一个环节，一部分的医疗机构引入了如下一种系统(下面有时称为医疗安全系统)：在设施内配置监视摄像机等，将拍摄在设施内发生的各种事件而得到的影像留作证据。
作为公开了能够应用于这种医疗安全系统的技术的现有技术文献，例示下述的专利文献1和专利文献2。
在专利文献1中公开了以下技术：从利用单眼摄像机拍摄得到的全向监视影像中，按照用户指定的位置信息切取影像的一部分，并对切取出的部分进行畸变校正，由此显示正对影像。
在专利文献2中公开了以下技术：对在街道上拍摄得到的运动图像数据进行编码，并在确定出该运动图像数据中拍摄到的重要部分(例如行人等)的情况下改变重要部分的编码方式，由此在对运动图像数据进行了再生的情况下对重要部分进行强调显示。
现有技术文献
专利文献
专利文献1：日本特开2012-244480号公报
专利文献2：日本特开2005-260501号公报
发明内容
发明要解决的问题
由于利用以长时间地对广范围进行拍摄为目的的监视摄像机等获得的影像的分辨率低、或影像因广角拍摄而发生了畸变等，有时用户无法以足够的精度确认细节。
如果应用上述的现有技术文献中公开的技术，能够实现一定的改进，但是还是很难说是充分的改进。
本发明是鉴于上述的问题而完成的，从用户友好性的观点出发，提供一种比现有技术简便的医疗安全系统。
用于解决问题的方案
根据本发明，提供一种医疗安全系统，具备：存储单元，其存储对手术室进行广角拍摄得到的展开影像；显示单元，其能够显示作为所述展开影像的一部分的局部影像；以及确定单元，其通过针对所述展开影像的图像识别处理，来确定该展开影像中拍摄到的手术区，其中，所述显示单元根据规定的契机来执行用于进行调整、以使由所述确定单元确定出的所述手术区包含于所述局部影像的显示位置调整。
根据上述发明，由于调整局部影像的显示位置以显示通过图像识别处理确定出的手术区，因此即使用户不亲自一边观看展开影像一边调整显示位置，也能够显示包含手术区的局部影像。
发明的效果
根据本发明，从用户友好性的观点出发，提供一种比现有技术简便的医疗安全系统。
附图说明
图1是示出本实施方式所涉及的医疗安全系统的图。
图2是半天球摄像机的立体图。
图3是示出由半天球摄像机拍摄到的展开影像的一个具体例的图。
图4是示出由定点摄像机拍摄到的影像的一个具体例的图。
图5是示出由移动终端显示的局部影像的一个具体例的图。
图6是用于说明移动终端的图像识别处理的示意图。
图7是用于说明移动终端的图像识别处理的示意图。
图8是用于说明移动终端的图像识别处理的示意图。
图9是用于说明移动终端的图像识别处理的示意图。
图10是利用个人电脑终端进行的显示的一个具体例。
具体实施方式
下面，使用附图来说明本发明的实施方式。此外，在所有的附图中，对同样的构成要素标注相同的标记，并适当地省略说明。
<关于医疗安全系统100中包括的各构成要素>
图1是示出本实施方式所涉及的医疗安全系统100的图。
此外，图1中图示的箭头表示在各构成要素之间被授受的影像数据的输出源和输入目的地。因而，对于除影像数据以外的数据等的授受，可以不必与各箭头所示的发送接收方向一致。
医疗安全系统100具备摄影单元(例如半天球摄像机111和定点摄像机112)、服务器装置120以及视听终端装置(例如个人电脑终端131和移动终端132)。
半天球摄像机111是包含施行手术的手术区地对手术室进行广角拍摄的装置。
在此，广角拍摄是指：使用单眼的广角镜头进行拍摄来获得范围比通常广的影像；使多个镜头(可以为标准镜头和广角镜头中的任一个)朝向互不相同的方向进行拍摄，并将拍摄到的多个影像进行结合来获得范围比通常广的影像。
本实施方式中使用的半天球摄像机111将3个广角镜头以120度间隔配置，并通过软件处理(图像处理)将使用各广角镜头拍摄到的3个影像进行结合来获得1个展开影像。由于进行这样的处理，因此通过半天球摄像机111的拍摄而获得的展开影像的特征在于，水平方向的展开角度达到360度。
因而，通过在手术室设置半天球摄像机111，能够无遗漏地拍摄该手术室的全景，除能够拍摄到手术区附近的样子以外，还能够一次拍摄到在手术室内活动的各医疗工作者(日语：医療関係者)的动作、显示生命体征的医疗设备的画面。像这样拍摄到的影像很难篡改，因此在作为与施行手术有关的状况证据使用时能够充分地确保其概率。
图2是半天球摄像机111的立体图。
半天球摄像机111具备底座部116、支承部117以及主体部113。主体部113具有3个广角镜头，在图2中图示了其中的镜头114和镜头115。
主体部113为具有半天球摄像机111的主要功能(包含摄影功能)的部分，通过支承部117被结合于底座部116。优选将底座部116设置于手术的手术区的上方，底座部116可以直接设置于手术室的天花板，也可以为使专用的支柱(未图示)伸长到手术区的上方并将底座部116设置于该支柱。
如图2所示，设置于主体部113的各广角镜头(镜头114、镜头115)的轴向向底座部116的相反方向倾斜、即在将底座部116设置于手术区的上方的前提下相对于水平方向向下方向倾斜。由于成为这种构造，因此半天球摄像机111能够向下方向拍摄半天球图像(水平方向的展开角度达到360度且对于下方向也无遗漏地拍摄到的图像)。此外，展开影像无需一定是半天球图像，也可以是全天球图像(无论是在水平方向上还是在上下方向上、展开角度均达到360度的图像)，还可以是针对水平方向或上下方向的至少一方、展开角度小于360度的图像。
图2所示的半天球摄像机111为本发明中使用的拍摄展开影像的单元的一例，可以不必包括摄影单元来作为本发明的构成要素。另外，即使是在本发明的构成要素中包括摄影单元地实施的情况，摄影单元也可以不具备上述那样的构造。例如，摄影单元的镜头的类别可以不必是广角镜头，摄影单元的镜头的数量也可以增减。
图3示出由半天球摄像机111拍摄到的展开影像的一个具体例。
在该展开影像的上部，拍摄到手术室的天花板附近的显示器装置201、为了使无影灯滑动而设置的导轨202等。也可能存在如图3中图示的显示器装置201、导轨202那样、变形大到不容易识别的程度的被摄体。
另外，在该展开影像中拍摄到多个医疗工作者(主刀医生(日语：執刀医)204、助手203、医务人员(日语：医療スタッフ)205～211)。此外，在下面的说明中，有时将这些医疗工作者统称为手术施行人员(日语：施術者)。
定点摄像机112是从正对手术的手术区的位置对该手术区进行定点拍摄的装置。定点摄像机112的拍摄采用通常的拍摄即可(不需要是广角拍摄)。
图4示出由定点摄像机112拍摄到的影像的一个具体例。如从图3与图4的比较中所明确的那样，图4的影像能够更清晰地确认手术区的状况(主刀医生204、助手203的手的动作等)。
此外，在下面的说明中，有时将由半天球摄像机111拍摄到的影像中的、与施行手术有关的影像称为“展开影像”，有时将由定点摄像机112拍摄到的影像中的、正对作为展开影像的拍摄范围的一部分的手术区拍摄到的影像称为“正对手术区影像”。
服务器装置120分别从半天球摄像机111输入展开影像、从定点摄像机112输入正对手术区影像，来作为与施行手术有关的影像，并存储到规定的存储区域。因而，作为本发明的存储单元发挥功能。
另外，服务器装置120所存储的影像也可以包括从未图示的摄影装置或医疗设备等获取到的影像，这些摄影装置或医疗设备可以为医疗安全系统100的内部结构，也可以为外部结构。
个人电脑终端131和移动终端132是安装有用于显示服务器装置120中存储的影像的应用软件(查看器(viewer))的计算机设备。
移动终端132安装有查看器，该查看器是主要假定了在手术室外等待的医疗工作者(麻醉师等)确认在手术室进行的施行手术的样子的用途的查看器，从而移动终端132能够对服务器装置120中存储的影像以直播流(live streaming)的方式接受分发并进行显示。
个人电脑终端131安装有查看器，该查看器是主要假定了在手术后分析手术内容的用途的查看器，从而个人电脑终端131除了具有与服务器装置120中存储的影像的播放相关的功能以外，还具有将该影像编辑为资料用影像的功能等。
此外，个人电脑终端131和移动终端132所安装的查看器可以不必通过本发明专用的应用软件来实现，也可以通过通用的应用软件或对通用的应用软件进行改进或变更而得到的软件来实现。
个人电脑终端131和移动终端132均是具有显示器装置和定点设备的计算机设备，对各个显示器装置的类别或各个定点设备的类别没有特别限制。
在与个人电脑终端131和移动终端132的任一个相关的显示器装置中，也能够显示展开影像和正对手术区影像，并且能够显示后述的局部影像，因此能够构成本发明的显示单元。
在与个人电脑终端131及移动终端132的任一个相关的定点设备中，也能够探测显示器装置(画面中显示的各种影像等)的接受到用户的操作输入的位置，从而能够构成本发明的操作位置探测单元。
此外，本实施方式中说明的个人电脑终端131的功能和移动终端132的功能无需一定只能由一方来执行，作为一方的功能来说明的功能的一部分或全部功能也可以能够由另一方来执行。例如，对于后述的由移动终端132进行的处理的一部分或全部处理，也可以在个人电脑终端131中也能够同样地实现。
另外，对于后述的由移动终端132进行的处理的一部分或全部处理，无需一定能够由移动终端132单独地执行，也可以为由服务器装置120执行该处理的一部分(例如图像识别处理)。
<关于移动终端132的显示>
接着，对移动终端132的显示进行说明。
移动终端132为从服务器装置120获取服务器装置120中存储的展开影像和正对手术区影像、并能够个别地或同时地显示展开影像和正对手术区影像的触摸面板。在此，触摸面板是指显示器装置的画面成为定点设备的装置。
移动终端132具有通过针对展开影像的图像识别处理来确定该展开影像中拍摄到的特定区域的功能(下面称为确定单元)。
具体地说，设为本实施方式中的特定区域是展开影像中拍摄到的手术区来进行说明，但是本发明的实施不限于此，也可以将展开影像中拍摄到的其它区域设为特定区域。
此外，在后面记述用于确定展开影像中拍摄到的手术区的图像识别处理。
移动终端132具有以下功能(下面称为判定单元)：在显示展开影像的情况下接受到用户的操作输入的情况下，判定接受到该操作输入的位置是否为特定区域或设定于其附近的操作输入容许区域。
在此，操作输入容许区域是指基于确定单元的处理设定的在移动终端132的画面上的区域，可以包含在特定区域中，也可以为其一部分与特定区域重叠且其余部分从特定区域偏离，还可以为其全部从特定区域偏离且位于该特定区域的附近。
移动终端132在上述的判定单元的判定被肯定的情况下显示正对手术区影像。在此，在该情况下，由移动终端132显示的正对手术区影像的方式为用户能够视觉识别的方式即可，没有特别限制，可以为使正对手术区影像弹出于展开影像的上层(layer)的方式，也可以为将正对手术区影像与展开影像分别划分为显示区域(窗口)进行显示的方式，还可以为在使展开影像消失之后显示正对手术区影像的方式。
如上所述，移动终端132在拍摄比较广的区域得到的展开影像的显示中接受到的操作输入的位置处于基于图像识别处理确定的手术区(特定区域)或设定于其附近的范围的判定上的区域(操作输入容许区域)的情况下，能够显示甚至容易确认较细节的正对手术区影像。因而，用户能够通过直观的操作来从与施行手术有关的影像获得需要的信息。
另外，移动终端132的显示区域与个人电脑终端131的显示区域相比较小，因此当显示由半天球摄像机110拍摄到的展开图像的整体时，不容易视觉识别。因而，移动终端132具有限定性地显示作为展开影像的一部分的局部影像的功能。
图5是由移动终端132显示的局部影像的一个具体例。
优选的是，如图5所示，对于由移动终端132显示的局部影像，在对其实施畸变校正之后进行正对显示。是因为对于用户而言变得容易视觉识别。
优选的是，由移动终端132显示的局部影像的显示位置能够根据用户的操作来进行调整，更加优选的是，至少对于水平方向能够全向地进行显示(作为所谓的全景查看器发挥功能)。
此外，在与局部影像相关的显示位置的调整中确定展开影像中拍摄到的手术区的处理通过上述的确定单元来实现，移动终端132具有如下功能：根据规定的契机来执行用于进行调整、以使由确定单元确定出的手术区包含于局部影像的显示位置调整。
在此，规定的契机是移动终端132能够识别的契机(事件)即可，没有特别限制，例如可以为在移动终端132中启动局部影像的显示功能，也可以为移动终端132接受特定的操作。但是，从用户友好性的观点出发，优选的是，作为规定的契机来处理的特定的操作为简单的操作(例如通过一次的操作即可的操作)。
像这样，移动终端132具有根据规定的契机自动地使显示位置与手术区一致的功能，因此节省了用户一边确认局部影像一边搜索手术区的劳力、时间。手术区为手术室的展开影像中的特别想要注视的位置之一，因此从用户友好性的观点出发，使移动终端132的显示位置与手术区一致的上述的功能是极其有用的。
<用于确定展开影像中拍摄到的手术区的图像识别处理>
对上述的移动终端132的图像识别处理详细地进行说明。
本发明人采用通过对手术施行人员的身体部位进行检测的图像识别处理来确定手术区的方式，以使该图像识别处理为通用的图像识别处理。是因为，外科手术一般要由多个手术施行人员组成团队来进行，如果是上述那样的图像识别处理，则几乎没有不存在成为处理的对象的被摄体的可能性。
此外，如果特殊化为使用特定的手术器械(日语：術具)、医疗设备(包括医疗机器人)的手术，则还考虑通过图像识别处理来检测手术器械、医疗设备，来作为检测手术施行人员的身体部位的补充或替代。
在本实施方式中，所谓“检测手术施行人员的身体部位”，不限于仅着眼于手术施行人员的实际的身体部位进行检测的处理，例如还包括通过检测防护眼镜来检测手术施行人员的眼睛、通过检测手术帽来检测手术施行人员的头部、或者通过检测手术口罩来检测手术施行人员的嘴。
关于“用于检测手术施行人员的身体部位的图像识别处理”的方式，能够适当地选择。作为本发明人的试错的结果，结果为提取身体部位的形状(轮廓)的方式的通用性最高，但是在使用无影灯的手术中，如果加入手术区的色彩、亮度地提取身体部位，则检测精度可能变高。另外，根据成为对象的身体部位的类别，还考虑加入其活动(动作模式)地提取身体部位。
使用图6和图7来说明移动终端132的图像识别处理的一个具体例。
图6和图7是用于说明移动终端132的图像识别处理的示意图，与实际显示的影像不同。将这些图中添加了底纹的部位作为通过移动终端132的图像识别处理而检测出的身体部位来进行说明。
在该具体例中，由移动终端132检测的身体部位为手术施行人员的手或手臂。
例如，设为通过针对图3所示的展开影像的图像识别处理检测到主刀医生204、助手203、医务人员206以及医务人员207的手、手臂(参照图6)。
在此，医务人员205、医务人员208以及医务人员209被其他被摄体遮挡而没有充分地被拍摄到手、手臂，因此通过该图像识别处理无法检测到手、手臂。另外，医务人员210和医务人员211离半天球摄像机111较远而没被以充分的大小拍摄，因此通过该图像识别处理无法检测到手、手臂。
像这样，移动终端132在通过图像识别处理检测到展开影像中拍摄到的多个身体部位的情况下，将所检测到的手、手臂(身体部位)密集的位置附近确定为手术区OF(参照图7)。
在此，主刀医生204和助手203的附近符合手术区OF。
接着，使用图8和图9来说明与上述的图像识别处理不同的具体例。
与图6及图7同样，图8和图9是用于说明移动终端132的图像识别处理的示意图，与实际显示的影像不同。将这些图中添加了底纹的部位作为通过移动终端132的图像识别处理检测到的身体部位来进行说明。
在该具体例中，由移动终端132检测的身体部位为手术施行人员的脸(头部)，在该检测中将双眼作为特征点来进行图像识别处理。
例如，设为通过针对图3所示的展开影像的图像识别处理检测到主刀医生204、医务人员206～209的脸(参照图8)。
在此，助手203的脸为侧向，医务人员205为后向，因此拍摄不到双眼，从而通过该图像识别处理无法检测到脸。另外，医务人员210和医务人员211离半天球摄像机111较远而没被以充分的大小拍摄，因此通过该图像识别处理无法检测到脸。
而且，移动终端132根据检测到的脸和双眼来判定手术施行人员的位置和朝向，在检测到判定出的位置接近至规定值以下的多个手术施行人员的情况下，将多个手术施行人员的朝向相交叉的部分确定为手术区(参照图9)。
在此，作为相接近的手术施行人员，移动终端132检测到主刀医生204、医务人员208以及医务人员209，将各自的视线方向V4、视线方向V8以及视线方向V9分别判定为手术施行人员的朝向。而且，移动终端132将包含视线方向V4与视线方向V8的交点IP1的位置及视线方向V4与视线方向V9的交点IP2的位置的区域确定为手术区OF。此外，视线方向V8与视线方向V9不交叉，因此没有被用于手术区OF的确定。
如将图7与图9进行比较所明确的那样，即使将相同的展开图像作为对象进行图像识别处理，根据所采用的图像识别处理的方式不同，确定出的手术区OF的位置可能变动。
因而，还考虑将移动终端132的图像识别处理的方式适当地变更或组合、由此提高手术区的确定精度。
<关于个人电脑终端131的显示>
接着，对个人电脑终端131的显示进行说明。
个人电脑终端131的显示区域与个人电脑终端131的显示区域相比较大，因此容许由半天球摄像机110拍摄到的展开图像的整体显示。另外，个人电脑终端131除了能够显示该展开图像外，也能够还并行地显示其它影像。
此外，上述的记载并不否定个人电脑终端131如上述的移动终端132那样显示局部影像这一情形(作为展开图像的全景查看器来发挥功能)。
图10是个人电脑终端131的显示的一个具体例。
在显示区域DA1整体显示由半天球摄像机110拍摄到的手术室的展开图像。
在显示区域DA2显示在该手术室接受手术的患者的心率监视器所涉及的影像。
在显示区域DA3显示通过未图示的摄影装置拍摄该手术的手术区而得到的影像。
个人电脑终端131通过同步显示这些影像，能够一边比较手术室整体的样子、手术区的样子以及心率的变化一边分析该手术。
并且，在显示区域DA4显示与展开影像有关的时间线。即，个人电脑终端131作为本发明所涉及的时间线显示单元发挥功能。
显示区域DA4中显示的光标C1显示在该时间点显示区域DA1中显示的影像位于时间线上的何处(是哪个时间点)。
显示区域DA4中显示的标签T1和标签T2通过相对于时间线上的显示位置来显示发出了蜂鸣声的时刻，通过其显示方式(色彩等)来显示发出了蜂鸣声的设备。在此，蜂鸣声是指设备发出的声音(警告音等)。
半天球摄像机110使用麦克风(未图示)，能够与展开影像的拍摄并行地录制声音数据。
服务器装置120将所录制的声音数据与该展开影像所涉及的影像数据对应地进行存储。并且，服务器装置120具有以下功能：通过针对声音数据的声音识别处理来检测该声音数据中包含的蜂鸣声并确定该蜂鸣声的时刻，并且确定发出了检测到的蜂鸣声的设备。即，服务器装置120作为本发明所涉及的蜂鸣声确定单元发挥功能。
个人电脑终端131通过显示标签T1和标签T2，能够使用户识别出由服务器装置120检测到的蜂鸣声的时刻以及发出该蜂鸣声的设备。
根据设备或该设备的制造商的不同，发出的蜂鸣声不同，因此通过录制蜂鸣声并进行分析，能够获知在哪个时刻发生了什么样的事件。
然而，具备上述功能的医疗安全系统从来没有被引入医疗现场，该上述功能为与分析用的影像数据一起录制蜂鸣声、通过声音识别处理识别蜂鸣声、显示蜂鸣声的时刻之类的。本实施方式中的医疗安全系统100由于具有上述功能，因此例如能够有助于医疗事故发生时的原因查明等。
<关于本发明的变形例>
到此为止根据使用各图说明的实施方式对本发明进行了说明，但是本发明不限定于上述的实施方式，还包括实现本发明的目的的范围内的各种变形、改进等的方式。
此外，在下面说明的变形例中，即使是作为个人电脑终端131的功能或移动终端132的功能来说明的，也无需一定只能由一方来执行，也可以为能够将作为一方的功能来说明的功能的一部分或全部由另一方来执行。
在上述的实施方式的说明中，以图1所示的构成要素为前提进行了说明，但是本发明的各构成要素形成为实现其功能即可。因而，本发明的各构成要素无需是各自独立的存在，容许多个构成要素作为一个构件形成、一个构成要素由多个构件形成、某构成要素为其它构成要素的一部分、以及某构成要素的一部分与其它构成要素的一部分重叠等。
例如，在本发明所涉及的医疗运动图像处理系统中，可以不包括相当于半天球摄像机111的摄影装置，可以使用从系统外部的摄影装置获取到的展开影像来实施本发明。
在上述的实施方式中说明的半天球摄像机111的结构、半天球摄像机111的摄影方式为一个具体例，本发明的实施不限于此。
例如，也可以使用单眼的利用广角镜头的摄影装置、由该摄影装置拍摄到的展开影像来实施本发明。
在上述的实施方式中，作为移动终端132检测的手术施行人员的身体部位的具体例，列举了手、手臂以及头部，但是也可以对其进行替代或对其进行补充，而检测其它部位。
在上述的实施方式中，说明了移动终端132将双眼作为特征点来检测手术施行人员的脸的主旨，但是也可以对其进行替代或对其进行补充，而通过将其它部位(鼻子、嘴、耳朵等)作为特征点的图像识别处理来检测脸，判定手术施行人员的位置、朝向。
在上述的实施方式中，列举通过移动终端132的图像识别处理确定的手术区的候选为一个的例子进行了说明，但是，也可以为，在存在多个确定出的手术区的候选的情况下，向用户呈现选择项，显示由用户选择出的手术区的附近。或者，也可以为，在这样的情况下，移动终端132每次接受到特定的操作时依次切换地显示多个候选。
在上述的实施方式中，通过移动终端132的图像识别处理确定的特定区域仅列举了手术区，但是也可以具有能够确定其它的特定区域的功能。例如，展开影像为包括手术中使用的医疗设备地拍摄手术室得到的影像，在由定点摄像机112拍摄的影像为正对医疗设备拍摄到的影像的情况下，也可以为移动终端132(确定单元)能够将展开影像中拍摄到的医疗设备的位置确定为特定区域。
此时，可以为，移动终端132(确定单元)通过图像识别处理来检测展开影像中拍摄到的多个标记，基于检测出的多个标记的位置来确定医疗设备的位置(例如，在手术前在医疗设备的画面的四角标注标记，将由多个标记包围的方形的区域确定为医疗设备的位置等)。
或者，也可以为，移动终端132针对一个或多个医疗设备进行形状、色彩等的图案识别，从展开影像中拍摄到的对象物中确定出与该图案识别匹配的对象物来作为医疗设备。
将上述的实施方式中的判定单元设为如下的判定单元进行了说明：在显示展开影像的情况下，判定接受到用户的操作输入的位置是否为该展开影像内包含的操作输入容许区域，但是对于显示上述的局部影像的情况也同样，也可以为能够判定接受到用户的操作输入的位置是否为该局部影像内包含的操作输入容许区域。
在该变形例中，也可以为，在由定点摄像机112拍摄到的影像为正对手术区影像且由确定单元确定的特定区域为手术区的情况下，当判定单元的判定被肯定时，显示单元显示正对手术区影像。
另外，在该变形例中，还可以为，在由定点摄像机112拍摄到的影像为正对医疗设备拍摄到的影像且由确定单元确定的特定区域为医疗设备的位置的情况下，当判定单元的判定被肯定时，显示单元显示医疗设备的正对影像。
并且，在该变形例中，还可以为，在由定点摄像机112拍摄到的影像为正对手术区影像或医疗设备的正对影像以外的规定影像且由确定单元确定的特定区域为该规定影像中拍摄到的被摄体的拍摄区域的情况下，当判定单元的判定被肯定时，显示单元显示该规定影像。
在上述的实施方式中，将个人电脑终端131设为如下的个人电脑终端进行了说明：在显示区域DA4显示与显示区域DA1中显示的展开影像有关的时间线，但是，也可以为，除此之外在显示区域DA4还显示与显示区域DA2或显示区域DA3中显示的影像有关的时间线。即，个人电脑终端131也可以分别显示与同步显示的多个影像有关的时间线。
本实施方式包含下面的技术思想。
(1-1)一种医疗安全系统，具备：存储单元，其存储对手术室进行广角拍摄得到的展开影像；显示单元，其能够显示作为所述展开影像的一部分的局部影像；以及确定单元，其通过针对所述展开影像的图像识别处理，来确定该展开影像中拍摄到的手术区，其中，所述显示单元根据规定的契机来执行用于进行调整、以使由所述确定单元确定出的所述手术区包含于所述局部影像中的显示位置调整。
(1-2)根据(1-1)所记载的医疗影像系统，其中，所述显示单元除了能够显示所述局部影像以外，还能够显示所述展开影像以及正对所述手术区拍摄得到的正对手术区影像，所述医疗影像系统还具备：操作位置探测单元，其能够探测所述显示单元的接受到用户的操作输入的位置；以及判定单元，在所述显示单元显示所述展开影像或所述局部影像的情况下由所述操作位置探测单元接受到用户的操作输入的情况下，所述判定单元判定接受到该操作输入的位置是否为由所述确定单元确定出的所述手术区或设定于其附近的操作输入容许区域，在所述判定单元的判定被肯定的情况下，所述显示单元显示所述正对手术区影像。
(1-3)根据(1-1)或(1-2)所记载的医疗安全系统，其中，所述确定单元通过检测手术施行人员的身体部位的图像识别处理，来确定所述手术区。
(1-4)根据(1-3)所记载的医疗安全系统，其中，由所述确定单元检测的所述身体部位为手术施行人员的手或手臂，所述确定单元在检测到所述展开影像中拍摄到的多个所述身体部位的情况下，将检测到的所述身体部位密集的位置确定为所述手术区。
(1-5)根据(1-3)所记载的医疗安全系统，其中，所述确定单元根据检测到的所述身体部位来判定手术施行人员的位置和朝向，所述确定单元在检测到判定出的位置接近到规定值以下的多个手术施行人员的情况下，将多个手术施行人员的朝向相交叉的位置附近确定为所述手术区。
(1-6)根据(1-1)至(1-5)中的任一个所记载的医疗安全系统，其中，所述存储单元中存储的所述展开影像为将拍摄互不相同的方向得到的多个影像相结合而得到的影像，并且水平方向的展开角度达到360度。
(1-7)根据(1-1)至(1-6)中的任一个所记载的医疗安全系统，其中，所述存储单元将与所述展开影像的拍摄并行地录制的声音数据同该展开影像所涉及的影像数据相对应地进行存储，所述医疗安全系统具备蜂鸣声确定单元，所述蜂鸣声确定单元通过针对所述声音数据的声音识别处理，来检测该声音数据中包含的蜂鸣声，并确定发出检测到的所述蜂鸣声的设备。
(1-8)根据(1-7)所记载的医疗安全系统，其中，所述医疗安全系统具备时间线显示单元，所述时间线显示单元显示与所述展开影像有关的时间线，所述时间线显示单元在所述时间线上显示发出由所述蜂鸣声确定单元检测到的所述蜂鸣声的时刻。
(2-1)一种医疗安全系统，具有：输入单元，其输入与施行手术有关的第一影像以及对所述第一影像的拍摄范围的一部分进行拍摄得到的第二影像；显示单元，其能够显示从所述输入单元输入的所述第一影像和所述第二影像；操作位置探测单元，其能够探测所述显示单元的接受到用户的操作输入的位置；确定单元，其通过针对所述第一影像的图像识别处理，来确定该第一影像中拍摄到的特定区域；以及判定单元，在所述显示单元显示所述第一影像的情况下由所述操作位置探测单元接受到用户的操作输入的情况下，所述判定单元判定接受到该操作输入的位置是否为所述特定区域或设定于其附近的操作输入容许区域，其中，在所述判定单元的判定被肯定的情况下，所述显示单元显示所述第二影像。
(2-2)根据(2-1)所记载的医疗安全系统，其中，所述第一影像为包括手术区地拍摄手术室得到的影像，所述第二影像为正对所述手术区拍摄到的影像，所述确定单元将所述第一影像中拍摄到的所述手术区确定为所述特定区域。
(2-3)根据(2-1)所记载的医疗安全系统，其中，所述第一影像为包括手术中使用的医疗设备地拍摄对手术室得到的影像，所述第二影像为正对所述医疗设备拍摄得到的影像，所述确定单元将所述第一影像中拍摄到的所述医疗设备的位置确定为所述特定区域。
(2-4)根据(2-3)所记载的医疗安全系统，其中，所述确定单元通过图像识别处理来检测所述第一影像中拍摄到的多个标记，基于检测到的多个所述标记的位置来确定所述特定区域。
(2-5)根据(2-1)至(2-4)中的任一个所记载的医疗影像系统，其中，所述第一影像为将拍摄互不相同的方向得到的多个影像相结合而得到的影像，并且水平方向的展开角度达到360度。
本申请主张以2017年11月20日申请的日本申请特愿2017-222866以及2018年7月27日申请的日本申请特愿2018-141822为基础的优先权，在此引入其公开的全部内容。
附图标记说明
100：医疗安全系统；111：半天球摄像机；112：定点摄像机；120：服务器装置；131：个人电脑终端；132：移动终端；201：显示器装置；202：导轨；203：助手；204：主刀医生；205～211：医务人员。

Claims (10)

1.一种医疗安全系统，具备：
存储单元，其存储对手术室的全景进行广角拍摄得到的展开影像，作为在该手术室中进行的外科手术的作业区域的手术区、在所述手术区的附近进行作业的手术施行人员以及在远离所述手术区的位置进行作业的手术施行人员收入在所述展开影像的拍摄范围内；
显示单元，其能够显示作为所述展开影像的一部分的局部影像，根据用户的第一操作来调整显示位置，由此作为能够显示将包含所述展开影像中拍摄到的所述手术区的范围作为显示位置的所述局部影像以及将不包含所述手术区的范围作为显示位置的所述局部影像中的任一者的全景查看器发挥功能；以及
确定单元，其通过图像识别处理检测所述展开影像中拍摄到的多个手术施行人员的手或手臂，并将检测到的手或手臂密集的位置确定为所述手术区，
其中，所述显示单元根据所述局部影像的显示的启动来自动地执行显示位置调整，或者根据与所述第一操作不同的第二操作来执行显示位置调整，所述显示位置调整用于进行调整以使由所述确定单元确定出的所述手术区包含于所述局部影像。
2.根据权利要求1所述的医疗安全系统，其特征在于，
所述显示单元除了能够显示所述局部影像以外，还能够显示所述展开影像以及正对所述手术区拍摄得到的正对手术区影像，
所述医疗安全系统还具备：
操作位置探测单元，其能够探测所述显示单元的接受到用户的操作输入的位置；以及
判定单元，在所述显示单元显示所述展开影像或所述局部影像的情况下由所述操作位置探测单元接受到用户的操作输入的情况下，所述判定单元判定接受到该操作输入的位置是否为由所述确定单元确定出的所述手术区或设定于其附近的操作输入容许区域，
其中，在所述判定单元的判定被肯定的情况下，所述显示单元显示所述正对手术区影像。
3.根据权利要求1或2所述的医疗安全系统，其特征在于，
所述存储单元中存储的所述展开影像为将拍摄互不相同的方向得到的多个影像结合而得到的影像，并且水平方向的展开角度达到360度。
4.根据权利要求1或2所述的医疗安全系统，其特征在于，
所述存储单元将与所述展开影像的拍摄并行地录制的声音数据同该展开影像所涉及的影像数据相对应地进行存储，
所述医疗安全系统具备蜂鸣声确定单元，所述蜂鸣声确定单元通过针对所述声音数据的声音识别处理，来检测该声音数据中包含的蜂鸣声，并确定发出检测到的所述蜂鸣声的设备。
5.根据权利要求4所述的医疗安全系统，其特征在于，
所述医疗安全系统具备时间线显示单元，所述时间线显示单元显示与所述展开影像有关的时间线，
所述时间线显示单元在所述时间线上显示发出由所述蜂鸣声确定单元检测到的所述蜂鸣声的时刻。
6.一种医疗安全系统，具备：
存储单元，其存储对手术室的全景进行广角拍摄得到的展开影像，作为在该手术室中进行的外科手术的作业区域的手术区、在所述手术区的附近进行作业的手术施行人员以及在远离所述手术区的位置进行作业的手术施行人员收入在所述展开影像的拍摄范围内；
显示单元，其能够显示作为所述展开影像的一部分的局部影像，根据用户的第一操作来调整显示位置，由此作为能够显示将包含所述展开影像中拍摄到的所述手术区的范围作为显示位置的所述局部影像以及将不包含所述手术区的范围作为显示位置的所述局部影像中的任一者的全景查看器发挥功能；以及
确定单元，其检测所述展开影像中拍摄到的多个手术施行人员的身体部位，根据检测到的所述身体部位来判定手术施行人员的位置和朝向，在检测到判定出的位置接近到规定值以下的多个手术施行人员的情况下，将多个手术施行人员的朝向相交叉的位置附近确定为所述手术区，
其中，所述显示单元根据所述局部影像的显示的启动来自动地执行显示位置调整，或者根据与所述第一操作不同的第二操作来执行显示位置调整，所述显示位置调整用于进行调整以使由所述确定单元确定出的所述手术区包含于所述局部影像。
7.根据权利要求6所述的医疗安全系统，其特征在于，
所述显示单元除了能够显示所述局部影像以外，还能够显示所述展开影像以及正对所述手术区拍摄得到的正对手术区影像，
所述医疗安全系统还具备：
操作位置探测单元，其能够探测所述显示单元的接受到用户的操作输入的位置；以及
判定单元，在所述显示单元显示所述展开影像或所述局部影像的情况下由所述操作位置探测单元接受到用户的操作输入的情况下，所述判定单元判定接受到该操作输入的位置是否为由所述确定单元确定出的所述手术区或设定于其附近的操作输入容许区域，
其中，在所述判定单元的判定被肯定的情况下，所述显示单元显示所述正对手术区影像。
8.根据权利要求6或7所述的医疗安全系统，其特征在于，
所述存储单元中存储的所述展开影像为将拍摄互不相同的方向得到的多个影像结合而得到的影像，并且水平方向的展开角度达到360度。
9.根据权利要求6或7所述的医疗安全系统，其特征在于，
所述存储单元将与所述展开影像的拍摄并行地录制的声音数据同该展开影像所涉及的影像数据相对应地进行存储，
所述医疗安全系统具备蜂鸣声确定单元，所述蜂鸣声确定单元通过针对所述声音数据的声音识别处理，来检测该声音数据中包含的蜂鸣声，并确定发出检测到的所述蜂鸣声的设备。
10.根据权利要求9所述的医疗安全系统，其特征在于，
所述医疗安全系统具备时间线显示单元，所述时间线显示单元显示与所述展开影像有关的时间线，
所述时间线显示单元在所述时间线上显示发出由所述蜂鸣声确定单元检测到的所述蜂鸣声的时刻。
CN201880074894.5A 2017-11-20 2018-11-01 医疗安全系统 Active CN111373741B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2017222866A JP6355146B1 (ja) 2017-11-20 2017-11-20 医療安全システム
JP2017-222866 2017-11-20
JP2018-141822 2018-07-27
JP2018141822A JP6436606B1 (ja) 2018-07-27 2018-07-27 医療映像システム
PCT/JP2018/040760 WO2019098052A1 (ja) 2017-11-20 2018-11-01 医療安全システム

Publications (2)

Publication Number Publication Date
CN111373741A CN111373741A (zh) 2020-07-03
CN111373741B true CN111373741B (zh) 2023-01-03

Family

ID=66540234

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880074894.5A Active CN111373741B (zh) 2017-11-20 2018-11-01 医疗安全系统

Country Status (3)

Country Link
US (1) US20200337798A1 (zh)
CN (1) CN111373741B (zh)
WO (1) WO2019098052A1 (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202035101U (zh) * 2011-04-27 2011-11-09 西安市四腾工程有限公司 医用家属探视系统
CN105307591A (zh) * 2013-04-10 2016-02-03 解析-可追踪性医院 在医疗环境中的手术器具的可追踪性
CN106535805A (zh) * 2014-07-25 2017-03-22 柯惠Lp公司 用于机器人手术系统的增强手术现实环境

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003234910B2 (en) * 2002-05-07 2008-07-17 Kyoto University Medical cockpit system
JP4828919B2 (ja) * 2004-11-09 2011-11-30 株式会社東芝 医療情報システム
US8864652B2 (en) * 2008-06-27 2014-10-21 Intuitive Surgical Operations, Inc. Medical robotic system providing computer generated auxiliary views of a camera instrument for controlling the positioning and orienting of its tip
KR20100062575A (ko) * 2008-12-02 2010-06-10 삼성테크윈 주식회사 감시 카메라의 제어 방법 및 이를 사용한 제어 장치
US20100245582A1 (en) * 2009-03-25 2010-09-30 Syclipse Technologies, Inc. System and method of remote surveillance and applications therefor
CN201465328U (zh) * 2009-04-29 2010-05-12 上海华平信息技术股份有限公司 基于流媒体传输的远程医疗教学系统
JP2013062559A (ja) * 2010-09-02 2013-04-04 Dodwell Bms Ltd 撮像監視画面及び全方位撮像画面監視システム
US8526700B2 (en) * 2010-10-06 2013-09-03 Robert E. Isaacs Imaging system and method for surgical and interventional medical procedures
US20120158011A1 (en) * 2010-12-16 2012-06-21 Sandhu Kulbir S Proximity sensor interface in a robotic catheter system
JP5866146B2 (ja) * 2011-05-20 2016-02-17 東芝テリー株式会社 全方位監視画像表示処理システム
CN103815972A (zh) * 2014-02-26 2014-05-28 上海齐正微电子有限公司 腹胸腔镜的手术区域自动跟踪系统及方法
TW201632949A (zh) * 2014-08-29 2016-09-16 伊奧克里公司 捕捉在一可攜式電子器件上之影像之影像轉向
CN104316166A (zh) * 2014-09-16 2015-01-28 国家电网公司 变电站异响视频定位方法
US11058509B2 (en) * 2016-01-25 2021-07-13 Sony Corporation Medical safety control apparatus, medical safety control method, and medical support system
JP2017192043A (ja) * 2016-04-13 2017-10-19 キヤノン株式会社 医療用画像管理システム、表示システム、表示装置
CN107977138A (zh) * 2016-10-24 2018-05-01 北京东软医疗设备有限公司 一种显示方法及装置
CN106534672A (zh) * 2016-11-02 2017-03-22 深圳亿维锐创科技股份有限公司 一种医疗手术直播系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202035101U (zh) * 2011-04-27 2011-11-09 西安市四腾工程有限公司 医用家属探视系统
CN105307591A (zh) * 2013-04-10 2016-02-03 解析-可追踪性医院 在医疗环境中的手术器具的可追踪性
CN106535805A (zh) * 2014-07-25 2017-03-22 柯惠Lp公司 用于机器人手术系统的增强手术现实环境

Also Published As

Publication number Publication date
WO2019098052A1 (ja) 2019-05-23
US20200337798A1 (en) 2020-10-29
CN111373741A (zh) 2020-07-03

Similar Documents

Publication Publication Date Title
US9819843B2 (en) Head-mounted systems and methods for providing inspection, evaluation or assessment of an event or location
US9762816B2 (en) Video processing apparatus, camera apparatus, video processing method, and program
JP4459788B2 (ja) 顔特徴照合装置、顔特徴照合方法、及びプログラム
WO2004004320A1 (en) Digital processing of video images
JP2008009849A (ja) 人物追跡装置
JP2007019671A (ja) 画像通信システム及び画像処理プログラム
WO2013014872A1 (ja) 画像変換装置、カメラ、映像システム、画像変換方法およびプログラムを記録した記録媒体
KR100967718B1 (ko) 물체인식 정보를 이용한 영상 보안시스템
WO2018168823A1 (ja) 画像処理装置および電子機器
JP6355146B1 (ja) 医療安全システム
CN111373741B (zh) 医疗安全系统
JP2017046233A (ja) 表示装置及び情報処理装置及びその制御方法
JP6436606B1 (ja) 医療映像システム
KR101926510B1 (ko) 광각카메라를 이용한 안면인식 기반의 광역 감시 시스템
US10979675B2 (en) Video monitoring apparatus for displaying event information
KR101619953B1 (ko) 감시카메라용 자동 다중 추적 영상처리방법
KR101619956B1 (ko) 감시카메라용 자동 다중 추적 영상처리장치
KR20180116044A (ko) 증강현실용 디바이스와 그 증강현실 출력 방법
US11212485B2 (en) Transparency system for commonplace camera
WO2021199853A1 (ja) 情報登録装置、情報登録システム、情報登録方法およびプログラム記憶媒体
JP2016134765A (ja) 監視システム
WO2017195646A1 (ja) 作業支援装置
KR20180085432A (ko) 카메라와 연계해서 증강현실 프리미티브와 이벤트를 연동시키는 시스템 및 그 시스템의 구동방법
WO2019138682A1 (ja) 情報処理装置、情報処理方法及びプログラム
WO2018168825A1 (ja) 画像処理装置および電子機器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant