CN113050852A - 医疗系统中显示单元的控制方法以及控制装置 - Google Patents

医疗系统中显示单元的控制方法以及控制装置 Download PDF

Info

Publication number
CN113050852A
CN113050852A CN201911378048.5A CN201911378048A CN113050852A CN 113050852 A CN113050852 A CN 113050852A CN 201911378048 A CN201911378048 A CN 201911378048A CN 113050852 A CN113050852 A CN 113050852A
Authority
CN
China
Prior art keywords
user
display unit
information
control signal
users
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911378048.5A
Other languages
English (en)
Inventor
惠蕙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GE Precision Healthcare LLC
Original Assignee
GE Precision Healthcare LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GE Precision Healthcare LLC filed Critical GE Precision Healthcare LLC
Priority to CN201911378048.5A priority Critical patent/CN113050852A/zh
Priority to US17/118,826 priority patent/US11460917B2/en
Publication of CN113050852A publication Critical patent/CN113050852A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pathology (AREA)
  • Primary Health Care (AREA)
  • Veterinary Medicine (AREA)
  • Epidemiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Ophthalmology & Optometry (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Dentistry (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明提供了一种医疗系统中显示单元的控制方法，其包括：获取所述显示单元的环境图像；根据所述环境图像获取其中至少一个用户的特征信息；以及根据所述特征信息确定所述用户中的特定用户以生成控制信号，所述控制信号用于驱动所述显示单元旋转以便于所述特定用户对所述显示单元的查看。本发明还提供了一种医疗系统中显示单元的控制装置，其包括：环境图像生成单元；处理单元；以及驱动单元；其中，所述环境图像生成单元用于生成环境图像并发送至所述处理单元，所述处理单元用于执行如上所述的方法以发送控制信号给所述驱动单元，所述驱动单元用于接收所述控制信号以驱动所述显示单元旋转。

Description

医疗系统中显示单元的控制方法以及控制装置
技术领域
本发明涉及医疗领域，尤其是涉及一种医疗系统和该医疗系统中显示单元的控制方法、控制装置，以及一种非暂态计算机可读存储介质。
背景技术
常见的医疗系统包括超声成像系统，磁共振成像系统，X射线成像系统等成像系统；以及监护系统，心电系统，麻醉系统等其他医疗系统。用户利用这些医疗系统，能够快速、准确地掌握待检测者的相关信息，从而能够针对待检测者的健康状况或者其他身体参数给出相应地建议或者策略。
随着医疗系统的不断发展，用户与医疗系统之间的人机交互变得越来越频繁。显示单元作为医疗系统的一部分，是实现人机交互的重要部件。通过显示单元，医疗系统获得的各种信息能够快速、实时地传递给用户。用户同样可以通过显示单元，掌握其所需要的各种参数信息，并判断其对医疗系统的操作是否准确。
在一些使用场景下，同一环境中可能存在多个潜在用户，这些潜在用户对于显示单元查看的需求程度可能是不同的，而显示单元难以判断用户查看的需求程度以满足特定用户对于显示单元的查看。
发明内容
本发明的一些实施例中提供了一种医疗系统中显示单元的控制方法，其包括：获取所述显示单元的环境图像；根据所述环境图像获取其中至少一个用户的特征信息；以及根据所述特征信息确定所述用户中的特定用户以生成控制信号，所述控制信号用于驱动所述显示单元旋转以便于所述特定用户对所述显示单元的查看。
可选的，所述特征信息包括所述用户的脸部信息或眼部信息。
可选的，所述控制信号包括驱动所述显示单元旋转一定角度的信号。
可选的，根据所述特征信息确定所述用户中的特定用户以生成控制信号包括：根据所述特征信息识别所述用户，对比所识别的用户与预设信息，根据对比结果确定所述用户中的特定用户以生成相应的控制信号。
可选的，所述预设信息包括不同用户的优先级信息；对比所识别的用户与预设信息包括：对比所识别的用户与所述优先级信息，判断所述用户的优先级等级。
可选的，所述控制信号被配置为：驱动所述显示单元，朝向优先级等级高的特定用户旋转一定角度。
可选的，所述特征信息包括第一特征信息以及与所述第一特征信息对应的第二特征信息。
可选的，所述第一特征信息包括用户的眼部信息；所述第二特征信息包括用户的脸部信息。
可选的，根据所述特征信息确定所述用户中的特定用户以生成控制信号包括：根据所述第一特征信息判断用户对于显示单元的查看需求；根据所述第二特征信息识别所述用户并对比所述用户与预设信息；根据对所述查看需求的判断结果以及所述对比的结果确定所述用户中的特定用户以生成相应的控制信号。
可选的，所述预设信息包括不同用户的优先级信息；对比所述用户与预设信息进一步包括：对比所述用户与所述优先级信息，判断所述用户的优先级等级。
可选的，所述控制信号被配置为：驱动所述显示单元，朝向优先级等级高并且具有查看需求的特定用户旋转一定角度。
本发明的另外一些实施例中提供了一种医疗系统中显示单元的控制装置，其包括：环境图像生成单元；处理单元；以及驱动单元；其中，所述环境图像生成单元用于生成环境图像并发送至所述处理单元，所述处理单元用于执行如上述方法以发送控制信号给所述驱动单元，所述驱动单元用于接收所述控制信号以驱动所述显示单元旋转。
本发明的另外一些实施例中提供了一种医疗系统，其包括上述的控制装置。
本发明的另外一些实施例中提供了还一种非暂态计算机可读存储介质，其用于存储计算机程序，所述计算机程序由计算机执行时使计算机执行上述的控制方法。
应理解，提供上文的简要描述是为了以简化的形式介绍在具体实施方式中进一步描述的一些概念。这并不意味着识别所要求保护的主题的关键或必要特征，其范围由详细描述之后的权利要求唯一地限定。此外，所要求保护的主题不限于解决在上文中或在本公开的任一区段中所提及的任何缺点的实现。
附图说明
通过结合附图对于本发明的示例性实施例进行描述，可以更好地理解本发明，在附图中：
图1示出了本发明一些实施例中的医疗系统中显示单元的控制方法的示意图；
图2示出了本发明一些实施例中的控制信号生成方式的示意图；
图3示出了本发明另外一些实施例中控制信号生成方式的示意图；
图4a示出了本发明一些实施例中的用户注视显示单元时的眼睛形状示意图；
图4b示出了本发明一些实施例中的用户未注视显示单元时的眼睛形状示意图；
图5示出了本发明一些实施例中的医疗系统中显示单元的控制装置的结构示意图。
具体实施方式
以下将描述本发明的具体实施方式，需要指出的是，在这些实施方式的具体描述过程中，为了进行简明扼要的描述，本说明书不可能对实际的实施方式的所有特征均作详尽的描述。应当可以理解的是，在任意一种实施方式的实际实施过程中，正如在任意一个工程项目或者设计项目的过程中，为了实现开发者的具体目标，为了满足系统相关的或者商业相关的限制，常常会做出各种各样的具体决策，而这也会从一种实施方式到另一种实施方式之间发生改变。此外，还可以理解的是，虽然这种开发过程中所作出的努力可能是复杂并且冗长的，然而对于与本发明公开的内容相关的本领域的普通技术人员而言，在本公开揭露的技术内容的基础上进行的一些设计，制造或者生产等变更只是常规的技术手段，不应当理解为本公开的内容不充分。
除非另作定义，权利要求书和说明书中使用的技术术语或者科学术语应当为本发明所属技术领域内具有一般技能的人士所理解的通常意义。本发明专利申请说明书以及权利要求书中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“一个”或者“一”等类似词语并不表示数量限制，而是表示存在至少一个。“包括”或者“包含”等类似的词语意指出现在“包括”或者“包含”前面的元件或者物件涵盖出现在“包括”或者“包含”后面列举的元件或者物件及其等同元件，并不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，也不限于是直接的还是间接的连接。
首先参考图1，图1示出了本发明一些实施例的医疗系统中显示单元的控制方法100。上述医疗系统可以包括但不限于超声成像系统，磁共振成像系统，X射线成像系统，监护系统，心电系统，麻醉系统等医疗系统。本说明书的一些实施例中以监护系统为例进行说明。监护系统具有多种应用场景，例如病房、急诊室、手术室等。现有监护系统的显示单元通常是预设一定角度后放置或者固定设置在某一位置。一旦设置完成，显示单元的朝向便不能够轻易的进行调节。在一些使用环境中，用户(例如，医生，护士，或者患者)可能是到处走动的，并且时常具有对于上述显示单元的查看需求。然而，当用户走动到某些位置时，显示单元对于用户而言有可能存在难以进行查看的情况。此外，同一环境中可能存在多个潜在用户，这些潜在用户对于显示单元查看的需求程度可能是不同的，而显示单元难以判断用户查看的需求程度以满足特定用户对于显示单元的查看。
为了解决至少部分上述问题，本发明一些实施例的控制方法100包括如下步骤：
步骤S110，获取上述显示单元的环境图像。所述的环境图像可以是显示单元所在的外界环境的图像，包括但不限于病房，急诊室，手术室，检查室或者其他任何可能使用到该医疗系统的场景。在一些实施例中，获取所述环境图像的方式可以是实时的，例如通过相机、摄像机等成像工具进行实时图像采集。此外，也可以通过诸如存储器的工具对上述环境图像进行预先采集以及存储，以利于通过访问存储器进行环境图像的获取。需要注意的是，在进行图像实时采集时，相机、摄像机等成像工具可以是独立于所述显示单元单独设置的，也可以是集成在显示单元上的。但在某些情况下，成像工具所能获取的图像范围是有限的，例如，无法采集成像工具背面的图像信息。本发明的一些实施例中，通过设置多组成像工具，并对所述多组成像工具的成像范围进行合理分配，能够很好的覆盖整个外界环境去进行图像的采集。
步骤S120，根据所述环境图像获取其中至少一个用户的特征信息。步骤S110中所获取的环境图像中所包含的信息可能是多种多样的，例如包括用户、墙壁、病床等信息。在步骤S120中，对上述环境图像中所包含的至少一个用户的特征信息进行获取。上述特征信息的种类可以是多样的。例如，用户的身体轮廓，头部轮廓或者其他任何肢体以及器官等能够使用户与环境图像中其他物体相区别的特征信息。应当注意，上述用户并非特指用于操作显示单元或者医疗系统的使用者(例如，医生或者护士)，也可能是对于显示单元具有潜在查看需求的人(例如，患者或者其他受检者)。但在某些实施例中，也可以限定上述用户特指例如医生或者护士等实际使用该显示单元或医疗系统的专业人士。在一些实施例中，上述特征信息可以是人脸信息。相应地，对该特征信息的识别可以通过现有技术中的人脸识别技术来实现。在另外一些实施例中，上述特征信息还可以是眼部信息。相应地，对该特征信息的识别可以通过现有技术中的眼部识别来实现。在其他一些实施例中，上述特征信息还可以是用户的衣着等信息。例如，用户面部佩戴的口罩或者头部佩戴的帽子等信息。这样设置的优势在于可以根据上述衣着信息较为准确的识别医护人员，从而在后续步骤中使显示单元做出利于医护人员的调整。
步骤S130，根据所述特征信息确定所述用户中的特定用户以生成控制信号，所述控制信号用于驱动所述显示单元旋转以便于所述特定用户对所述显示单元的查看。上述步骤S120中对至少一个用户的特征信息进行了识别，该识别可以区分出用户以及环境图像中的其他物体。其中，特定用户可以是所识别出的用户中的任意一位或者几位。特定用户也可以是所识别出的所有用户中位置相对居中的用户。或者，特定用户还可以是医护人员等对于该显示单元或者医疗系统查看需求更高的人员，此种情况可以通过衣着等信息判断。在此基础上，生成控制信号，该控制信号可以被配置为驱动显示单元旋转，从而使得特定用户更加方便地查看上述显示单元。应当注意，旋转的方式可以是多种多样的，例如先在水平面方向上旋转然后在垂直于水平面的方向上进行旋转，或者以任意的方式进行的转动，均应当视为旋转。
在一些实施例中，控制信号可以包括驱动所述显示单元旋转一定角度的信号。上述控制信号的配置可以通过以下方式实现：通过对用户特征信息的识别例如身体轮廓，头部轮廓或者面部信息等，确定特征信息点，例如确定身体轮廓、头部轮廓或者面部的中间点。然后，确定该中间点与显示单元中间点的连线。进一步，可以判断出该连线与显示单元中垂线之间的夹角。根据该夹角即可对控制信号进行配置，使其朝向减小甚至消除该夹角的方向旋转。该控制信号的设定方式可以是多样的。在一些实施例中，可以预设固定的旋转角度，例如5°-20°。在一次旋转完成后，继续执行前述步骤，判断上述夹角是否已经被减小至一定阈值以内。如果是，则可以停止旋转；如果否，则可以继续发出控制信号控制显示单元的旋转，直到上述夹角在阈值以内。在一些实施例中，上述一定角度可以与上述夹角一致，例如，当检测到夹角为30°，相应地发出旋转30°的控制信号以消除该夹角。这样仅发出一次控制信号就能够实现利于特定用户查看的技术效果。在某些场景下，特定用户可能是移动的，可以在一些时间间隔内进行环境图像的获取，例如每隔5-10秒或者其他时间间隔进行环境图像获取，从而利于动态场景下特定用户的查看。应当注意，上述控制信号是本发明较佳的一些实施方式，其他的现有控制方式同样允许被采用。
参考图2，图2示出了本发明一些实施例中根据特征信息生成控制信号的方法示意图200。在一些实施例中，本发明的方法可以包括设置预设信息。上述预设信息可以是通过诸如存储器的工具对其进行预先采集以及存储，以利于通过访问存储器进行获取。根据上述特征信息生成控制信号时，可以将识别得到的特征信息与预设信息进行对比，从而根据对比结果去生成相应的控制信号。
步骤S210中，根据特征信息识别用户，对比所识别的用户与预设信息。上述预设信息的设置形式是可以多种多样的。在一些实施例中，预设信息可以是不同用户的优先级信息。例如，预先采集若干个可能会应用到显示单元或者医疗系统的用户的特征信息。然后对上述特征信息对应的用户进行一定的优先级排序，即，设定不同用户的优先级信息。设定的规则可以是多样的，在一些实施例中，可以根据用户的重要等级进行排序。例如手术室中医护人员的关键程度，或者病房内护士的重要程度等。在一些实施例中，上述特征信息可以是人脸信息。相应地，进行优先级信息存储时，可以通过人脸识别等技术，方便地预先采集医护人员等用户的人脸信息并根据优先级规则进行预设。应当注意，正如上文所介绍的，特征信息可以是其他类型的，例如眼部信息、衣着信息等。在进行预设时，同样可以根据本发明的方法，进行相应的眼部信息、衣着信息等优先级信息的预设。
当识别出环境图像中至少一个用户的特征信息以后，相应地可以将上述特征信息对应的用户与预先设定的用户优先级信息进行对比，从而判断出上述用户的优先级等级。在一些实施例中，用户可能是多个的。通过步骤S220，根据对比结果确定所述用户中的特定用户以生成相应的控制信号。通过上述特征信息的优先级等级判断，可以生成相应地控制信号，从而确定显示单元应当朝向多个用户中的哪一个或者哪几个去进行旋转。例如，可以将控制信号配置为驱动所述显示单元，朝向优先级等级高的特征信息所对应的用户旋转一定角度。关于旋转角度的确定，可以参考上文所描述的一些实施例，同样，也可以采用现有技术中的其他方式，在此不再赘述。
通过判断用户的优先级等级并生成相应控制信号，确保了上述显示单元以及医疗系统在一些应用场景下，能够更加方便于特定用户进行查看。尤其是在一些用户较多的场景之下，由于进行了优先级的判断，可以使得显示单元优先对准于优先级等级高的用户，避免其他不必要或者不重要的用户干扰，从而能够更好满足特定用户查看需求。
在一些实施例中，上述特征信息可以是多种特征信息的组合。例如，参考图3，图3示出了本发明另外一些实施例中控制信号生成方式的示意图300。在S310获取医疗系统中显示单元的环境图像后，可以进行S320步骤，即根据环境图像获取第一特征信息和与该第一特征信息对应的第二特征信息。上述对应的含义是：上述第一特征信息和第二特征信息对应于同一用户。这样的识别方式，可以对同一用户多种特征信息进行识别。例如，第一特征信息可以包括用户的眼部信息，第二特征信息可以包括对应所述用户的眼部信息(即第一特征信息)的脸部信息。
相应地，根据上述特征信息生成控制信号的过程可以如步骤S330，根据所述第一特征信息判断用户对于显示单元的查看需求；根据所述第二特征信息识别所述用户并对比所述用户与预设信息。可以根据第一特征信息来判断用户对于显示单元的查看需求。当第一特征信息包括眼部信息时，该判断可以利用现有技术中的眼球捕捉技术实现，或者，也可以利用图4a、4b以及下文所阐述的一些实施例来进行。在一些实施例中，当判断用户的视线方向经过或者大概经过上述显示单元时，则判定用户具有查看需求。
此外，还可以包括根据所述第二特征信息识别所述用户，并对比所述用户第二特征信息与预设信息。当第二信息包括脸部信息时，预设信息的预设方式以及预设信息与根据第二特征信息所识别的用户的对比方式可以参考上文所述的实施例，在此不再赘述。在一些实施例中，预设信息可以包括不同用户的优先级信息。这样，通过对比根据第二特征信息所识别的用户的优先级信息，可以判断从环境图像中识别出的用户的优先级等级。
步骤S340中，通过利用第一特征信息判断用户对于显示单元的查看需求，同时结合对应于第一特征信息的第二特征信息确定用户的优先级等级，便可以生成控制信号。上述控制信号可以被配置为驱动显示单元朝向优先级等级高的并且具有查看需求的特定用户旋转一定角度。控制信号控制旋转角度的方式可以是多种多样的，也可以是类似如上所述的方式。例如，确定上述特定用户后，判断出该第二特征信息(例如，特定用户的面部轮廓)的中间点。然后，确定该中间点与显示单元中间点的连线。进一步，可以判断出该连线与显示单元中垂线之间的夹角。根据该夹角即可对控制信号进行配置，使其朝向减小甚至消除该夹角的方向旋转。该控制信号的设定方式可以是多样的。在一些实施例中，可以预设固定的旋转角度，例如5°-20°。在一次旋转完成后，继续执行前述步骤，判断上述夹角是否已经被减小至一定阈值以内。如果是，则可以停止旋转；如果否，则可以继续发出控制信号控制显示单元的旋转，直到上述夹角在阈值以内。在一些实施例中，上述一定角度可以与上述夹角一致，例如，当检测到夹角为30°，相应地发出旋转30°的控制信号以消除该夹角。这样仅发出一次控制信号就能够实现利于特定用户查看的功能。在某些场景下，特定用户可能是移动的，可以在一些时间间隔内进行环境图像的获取，例如每隔5-10秒或者其他时间间隔进行环境图像获取，从而利于动态场景下特定用户的查看。应当注意，上述控制信号是本发明较佳的一些实施方式，其他的现有控制方式同样允许被采用。此外，上述第二特征信息的中间点并非必须是严格的面中间点或者体中间点，而是允许在一定范围内存在偏差的。在一些实施例中，也可以不选择第二特征信息的中间点，而是其他位置的点。
通过识别上述第一特征信息与相应的第二特征信息，能够更有效地提高用户对于显示单元或者医疗系统的查看效率。相较于仅利用一种特征信息的方式，通过两种或以上特征信息的结合，可以排除掉尽管优先级等级较高但并不具有查看需求的用户，避免显示单元对查看需求的误判。这在一些用户较多的应用场景中是十分有利的。
下面参考图4a以及图4b，图4a示出了本发明一些实施例中用户注视显示单元时的眼睛形状示意图；图4b示出了本发明一些实施例中的用户未注视显示单元时的眼睛形状示意图。用户的眼睛410包括虹膜420。当用户注视显示单元时，其虹膜420将是垂直投影于显示单元上的。相应地，上述方法中获取的用户第一特征信息为眼部信息时，该第一特征信息将会得到形状规则的虹膜420图像。此时，虹膜420左右方向的宽度a将大体上等于上下方向上的高度b。而当用户的眼睛注视于其他位置时，此时虹膜420并非垂直投影于显示单元上。相应地，上述方法中获取的用户第一特征信息为眼部信息时，该第一特征信息将无法得到形状规则的虹膜420图像。通常，该虹膜420投影形状将为椭圆形，如图4b所示。此时，虹膜420左右方向的宽度a将和上下方向上的高度b具有明显区别。通过判断宽度a和高度b之间的差别，例如设定一定阈值，判断宽度a和高度b之间的差别的绝对值是否高于此阈值。若是，则判断用户未注视显示单元，相应地，此用户无查看需求；若否，则判断用户正在注视显示单元，相应地，此用户具有查看需求。应当注意，上述查看需求的判断方式，仅是本发明实现的一种情形，而并非是唯一的。其他现有技术中利用眼球捕捉的方式同样是被允许的。例如，通过判断虹膜所在平面与显示单元所在的平面是否平行或者大体平行；或者，通过机器学习等方式，在使用环境下对上述医疗系统进行训练，使其能够识别在环境中任一特定位置下用户查看显示单元时的眼部图像。在此不再赘述。
参考图5。图5示出了本发明一些实施例中医疗系统中显示单元的控制装置500的结构示意图。该控制装置500包括环境图像生成单元510，处理单元520以及驱动单元530。上述控制装置500连接显示单元540。其中，环境图像生成单元510可用于生成环境图像并发送至所述处理单元520；所述处理单元520可用于执行上述任一实施例中所述的方法以发送控制信号给所述驱动单元530，所述驱动单元530用于接收所述控制信号以驱动所述显示单元540旋转。
其中，所述环境图像生成单元510可以是相机、摄像机等成像工具。上述工具可以是独立于所述显示单元单独设置的，也可以是集成在显示单元上的。在某些情况下，成像工具所能获取的图像范围是有限的，例如，无法采集成像工具背面的图像信息。本发明的一些实施例中，通过设置多组成像工具，并对所述多组成像工具的成像范围进行合理分配，能够很好的覆盖整个外界环境去进行图像采集。经环境图像生成单元510采集到的图像可以发送至处理单元520，使处理单元520能够获取环境图像。
本发明的控制装置500对应的医疗系统可以不限于超声成像系统，磁共振成像系统，X射线成像系统，监护系统，心电系统，麻醉系统等。这些医疗系统通常具有用于成像或者监测的处理器。本发明中的处理单元520可以独立于上述处理器存在，也可以是上述处理器，或者是上述处理器的一部分。上述类型的处理器单元520均应视为本发明医疗系统中的一部分。处理器单元520执行上述任一实施例所述的方法后，生成控制信号，并将其发送至驱动单元530。在一些实施例中，上述医疗系统可以包括监护系统，在应用上述控制装置500时，可以预先存储该监护系统具体使用场景下重要的用户信息，例如从主治医生、副主治医生、护士长再到护士的优先级排序，并存储上述用户对应的特征信息(例如，脸部信息)。在一些实施例中，该控制装置500便可以根据上述排序，选择环境图像中优先级程度最高的用户作为特定用户去进行旋转，例如主治医生。当主治医生未出现于环境图像，则可以按照上述优先级排序以此类推。进一步地，当还包括识别多种特征信息时，例如，脸部信息和眼部信息时，则可以按照上述实施例中的描述，排除一些没有注视监护仪显示单元的用户。需要注意，上述监护系统应用场景的描述仅是本发明的一个示例，用于帮助理解本发明的突出技术效果。本发明上述任意实施例均不限于监护仪，而是可以应用于任意的医疗系统。
驱动单元530的机械结构可以是现有技术中任意类型的，这样的驱动单元530在本领域中是较为常见的，在此不再赘述。需要注意的是，驱动单元530可以是在任意方向上具有自由度的，例如水平方向，垂直方向，或者水平方向以及垂直方向。此外，上文的一些实施例中介绍了驱动显示单元540旋转一定角度的方法。上述角度有可能并非是水平或者垂直的，此时驱动器530可以通过在水平方向以及垂直方向上运动角度的矢量和来达到上述旋转角度的效果。本发明也并不限制上述水平方向以及垂直方向运动的先后顺序，或者，两种方向的运动同样也可以同时进行。
显示单元540与驱动单元530之间的连接关系可以是任意的。例如，二者可以是一体成型的，或者，可以是可拆卸连接或其他任意连接方式。显示单元540的种类可以取决于医疗系统的具体类型，或者是其他能够满足用户查看需求的种类。
本发明一些实施例中还可以提供一种非暂态计算机可读存储介质，其用于存储指令集和/或计算机程序，该指令集和/或计算机程序由计算机执行时使计算机执行上述任一实施例中所述的控制方法。执行该指令集和/或计算机程序的计算机可以为上述医疗系统的计算机，也可以为其它装置/模块，在一种实施例中，该指令集和/或计算机程序可以编制于计算机的处理器/控制器中。
如上所述的指令可以被合并为一个指令执行，任一指令也可以被拆分成多个指令以执行，此外，也并不限于按照上述的指令执行顺序。术语“计算机”可包括任何基于处理器或基于微处理器的系统，其包括使用微控制器、精简指令集计算机(RISC)、专用集成电路(ASIC)、逻辑电路和能够执行本文描述的功能的任何其它电路或处理器的系统。上文的示例只是示范性的，并且从而不意在采用任何方式限制术语“计算机”的定义和/或含义。
指令集可包括各种命令，其指示作为处理机的计算机或处理器执行特定的操作，例如各种实施例的方法和过程。指令集可采用软件程序的形式，该软件程序可形成一个或多个有形的非暂时性计算机可读介质的一部分。该软件可采用例如系统软件或应用软件的各种形式。此外，该软件可采用独立程序或模块的集合、在更大程序内的程序模块或程序模块的一部分的形式。该软件还可包括采用面向对象编程的形式的模块化编程。输入数据由处理机的处理可响应于操作者命令，或响应于先前的处理结果，或响应于由另外一个处理机作出的请求。
上面已经描述了一些示例性实施例，然而，应该理解的是，可以做出各种修改。例如，如果所描述的技术以不同的顺序执行和/或如果所描述的系统、架构、设备或电路中的组件以不同方式被组合和/或被另外的组件或其等同物替代或补充，则可以实现合适的结果。相应地，其他实施方式也落入权利要求的保护范围内。

Claims (14)

1.一种医疗系统中显示单元的控制方法，其包括：
获取所述显示单元的环境图像；
根据所述环境图像获取其中至少一个用户的特征信息；以及
根据所述特征信息确定所述用户中的特定用户以生成控制信号，所述控制信号用于驱动所述显示单元旋转以便于所述特定用户对所述显示单元的查看。
2.根据权利要求1所述的方法，其中，所述特征信息包括所述用户的脸部信息或眼部信息。
3.根据权利要求1所述的方法，其中，所述控制信号包括驱动所述显示单元旋转一定角度的信号。
4.根据权利要求1-3中任一项所述的方法，其中，根据所述特征信息确定所述用户中的特定用户以生成控制信号包括：
根据所述特征信息识别所述用户，对比所识别的用户与预设信息，根据对比结果确定所述用户中的特定用户以生成相应的控制信号。
5.根据权利要求4所述的方法，其中，所述预设信息包括不同用户的优先级信息；
对比所识别的用户与预设信息包括：
对比所识别的用户与所述优先级信息，判断所述用户的优先级等级。
6.根据权利要求5所述的方法，其中，所述控制信号被配置为：
驱动所述显示单元，朝向优先级等级高的特定用户旋转一定角度。
7.根据权利要求1-3中任一项所述的方法，其中，所述特征信息包括第一特征信息以及与所述第一特征信息对应的第二特征信息。
8.根据权利要求7所述的方法，其中，所述第一特征信息包括用户的眼部信息；所述第二特征信息包括用户的脸部信息。
9.根据权利要求7所述的方法，其中，根据所述特征信息确定所述用户中的特定用户以生成控制信号包括：
根据所述第一特征信息判断用户对于显示单元的查看需求；根据所述第二特征信息识别所述用户并对比所述用户与预设信息；
根据对所述查看需求的判断结果以及所述对比的结果确定所述用户中的特定用户以生成相应的控制信号。
10.根据权利要求9所述的方法，其中，所述预设信息包括不同用户的优先级信息；
对比所述用户与预设信息进一步包括：
对比所述用户与所述优先级信息，判断所述用户的优先级等级。
11.根据权利要求10所述的方法，其中，所述控制信号被配置为：
驱动所述显示单元，朝向优先级等级高并且具有查看需求的特定用户旋转一定角度。
12.一种医疗系统中显示单元的控制装置，其包括：
环境图像生成单元；
处理单元；以及
驱动单元；
其中，所述环境图像生成单元用于生成环境图像并发送至所述处理单元，所述处理单元用于执行如权利要求1-11中任一项所述的方法以发送控制信号给所述驱动单元，所述驱动单元用于接收所述控制信号以驱动所述显示单元旋转。
13.一种医疗系统，其包括如权利要求12所述的控制装置。
14.一种非暂态计算机可读存储介质，其用于存储计算机程序，所述计算机程序由计算机执行时使计算机执行权利要求1-11任一项所述的控制方法。
CN201911378048.5A 2019-12-27 2019-12-27 医疗系统中显示单元的控制方法以及控制装置 Pending CN113050852A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911378048.5A CN113050852A (zh) 2019-12-27 2019-12-27 医疗系统中显示单元的控制方法以及控制装置
US17/118,826 US11460917B2 (en) 2019-12-27 2020-12-11 Control method and control apparatus of display unit in medical system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911378048.5A CN113050852A (zh) 2019-12-27 2019-12-27 医疗系统中显示单元的控制方法以及控制装置

Publications (1)

Publication Number Publication Date
CN113050852A true CN113050852A (zh) 2021-06-29

Family

ID=76506755

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911378048.5A Pending CN113050852A (zh) 2019-12-27 2019-12-27 医疗系统中显示单元的控制方法以及控制装置

Country Status (2)

Country Link
US (1) US11460917B2 (zh)
CN (1) CN113050852A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060109237A1 (en) * 2004-11-24 2006-05-25 Morita Mark M System and method for presentation of enterprise, clinical, and decision support information utilizing eye tracking navigation
US20120075166A1 (en) * 2010-09-29 2012-03-29 Samsung Electronics Co. Ltd. Actuated adaptive display systems
CN103826145A (zh) * 2012-10-19 2014-05-28 三星电子株式会社 显示装置及其控制方法
CN108885495A (zh) * 2016-03-24 2018-11-23 三星电子株式会社 电子设备和在电子设备中提供信息的方法
JP2019122767A (ja) * 2018-01-15 2019-07-25 キヤノンメディカルシステムズ株式会社 医用情報処理装置、ｘ線診断システム及び医用情報処理プログラム
US20190239853A1 (en) * 2018-02-06 2019-08-08 Samsung Medison Co., Ltd. Ultrasonic diagnostic apparatus and control method thereof

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060109237A1 (en) * 2004-11-24 2006-05-25 Morita Mark M System and method for presentation of enterprise, clinical, and decision support information utilizing eye tracking navigation
US20120075166A1 (en) * 2010-09-29 2012-03-29 Samsung Electronics Co. Ltd. Actuated adaptive display systems
CN103826145A (zh) * 2012-10-19 2014-05-28 三星电子株式会社 显示装置及其控制方法
CN108885495A (zh) * 2016-03-24 2018-11-23 三星电子株式会社 电子设备和在电子设备中提供信息的方法
JP2019122767A (ja) * 2018-01-15 2019-07-25 キヤノンメディカルシステムズ株式会社 医用情報処理装置、ｘ線診断システム及び医用情報処理プログラム
US20190239853A1 (en) * 2018-02-06 2019-08-08 Samsung Medison Co., Ltd. Ultrasonic diagnostic apparatus and control method thereof

Also Published As

Publication number Publication date
US11460917B2 (en) 2022-10-04
US20210200306A1 (en) 2021-07-01

Similar Documents

Publication Publication Date Title
US11515030B2 (en) System and method for artificial agent based cognitive operating rooms
US9844321B1 (en) Enhanced ophthalmic surgical experience using a virtual reality head-mounted display
US11297285B2 (en) Dental and medical loupe system for lighting control, streaming, and augmented reality assisted procedures
JP6904254B2 (ja) 手術用制御装置、手術用制御方法、およびプログラム
JPH0476698A (ja) 画像監視装置
CN103188987B (zh) 手术机器人系统及其腹腔镜操作方法以及体感式手术用图像处理装置及其方法
US10607340B2 (en) Remote image transmission system, display apparatus, and guide displaying method thereof
KR20190088375A (ko) 수술영상데이터 학습시스템
CN107077214A (zh) 用于在医院中使用的通信的方法和系统
WO2017061293A1 (ja) 手術システム、並びに、手術用制御装置および手術用制御方法
KR20120060978A (ko) 시선 위치 추적 기반의 3차원 인간-컴퓨터 상호작용 장치 및 방법
CN105078580A (zh) 手术机器人系统及其腹腔镜操作方法以及体感式手术用图像处理装置及其方法
JP2022513013A (ja) 複合現実のための仮想オブジェクトの体系的配置
EP3477655A1 (en) Method of transmitting a medical image, and a medical imaging apparatus performing the method
Yip et al. Development of an eye-gaze controlled interface for surgical manipulators using eye-tracking glasses
US10037479B2 (en) Human-assisted learning in eye tracking applications
US20230186574A1 (en) Systems and methods for region-based presentation of augmented content
US20220392084A1 (en) Scene perception systems and methods
CN113050852A (zh) 医疗系统中显示单元的控制方法以及控制装置
US20230410499A1 (en) Visibility metrics in multi-view medical activity recognition systems and methods
CN112216376A (zh) 远程引导系统、方法、计算机设备以及可读存储介质
CN114740966A (zh) 多模态图像显示控制方法、系统及计算机设备
JP2017016347A (ja) 情報処理装置、情報処理方法及びプログラム
US11488382B2 (en) User presence/absence recognition during robotic surgeries using deep learning
CN219418116U (zh) 基于智能眼镜的医学图像交互系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination