CN109345632B - 一种获取图像的方法、相关装置及可读存储介质 - Google Patents

一种获取图像的方法、相关装置及可读存储介质 Download PDF

Info

Publication number
CN109345632B
CN109345632B CN201811080993.2A CN201811080993A CN109345632B CN 109345632 B CN109345632 B CN 109345632B CN 201811080993 A CN201811080993 A CN 201811080993A CN 109345632 B CN109345632 B CN 109345632B
Authority
CN
China
Prior art keywords
image
ultrasonic
detected object
ultrasonic image
dimensional model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811080993.2A
Other languages
English (en)
Other versions
CN109345632A (zh
Inventor
骆磊
吉庆伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cloudminds Shenzhen Holdings Co Ltd
Original Assignee
Cloudminds Shenzhen Holdings Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cloudminds Shenzhen Holdings Co Ltd filed Critical Cloudminds Shenzhen Holdings Co Ltd
Priority to CN201811080993.2A priority Critical patent/CN109345632B/zh
Publication of CN109345632A publication Critical patent/CN109345632A/zh
Priority to JP2019166548A priority patent/JP6944492B2/ja
Priority to US16/572,837 priority patent/US20200085411A1/en
Application granted granted Critical
Publication of CN109345632B publication Critical patent/CN109345632B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/466—Displaying means of special interest adapted to display 3D data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42—Details of probe positioning or probe attachment to the patient
    • A61B8/4245—Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10132—Ultrasound image
    • G06T2207/10136—3D ultrasound image

Abstract

本发明实施例涉及通信技术领域，公开了一种获取图像的方法、相关装置及可读存储介质。本发明中，获取被检测物体第一位置的第一超声波图像；将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上，其中，三维模型中保存有一次超声检测过程中获取的被检测物体的历史超声波图像。通过将被检测物体一个确定位置的超声波图像保存在被检测物体的三维模型中与该确定位置所对应的位置上，从而扩大了一次超声波检测过程中所获取的被检测物体的超声波图像的区域。在一次超声检测过程中，该确定位置是由超声探测器所在的位置确定的，并且超声探测器在每一个位置所确定的超声波图像都会保存下来，从而提高了用户的操作效率。

Description

一种获取图像的方法、相关装置及可读存储介质
技术领域
本发明实施例涉及通信技术领域，特别涉及一种获取图像的方法、相关装置及可读存储介质。
背景技术
作为一种医学影像技术，超声成像技术已经被广泛关注并被充分运用于临床诊断中，并且提出了将增强现实(Augmented Reality，AR)技术与超声检查设备结合，通过超声检查设备获取被检查部位的影像，并将影像传输给AR眼镜，并在人体当前的正确位置表面实时的渲染出来，使得医生可以在手术过程中实时的看到检查部位的器官影响，并进行精确的操作。
发明人发现现有技术中至少存在如下问题：由于超声检查设备探头面积较小，同一时间只能看到对应的一小块区域，如果医生希望同时看到大范围的血管或动脉的走向的话，只能移动着检测设备的探头一点点的看，因此影响医生的操作效率。
发明内容
本发明实施方式的目的在于提供一种获取图像的方法、相关装置及可读存储介质，使得能够扩大被检测物体的三维模型中所保存的被检测物体的超声波图像区域。
为解决上述技术问题，本发明的实施方式提供了一种获取图像的方法，应用于终端，包括以下步骤：获取被检测物体第一位置的第一超声波图像；将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上，其中，三维模型中保存有一次超声检测过程中获取的被检测物体的历史超声波图像。
本发明的实施方式还提供了一种终端，包括：至少一个处理器；以及，与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行如上所述的获取图像的方法。
本发明的实施方式还提供了一种计算机可读存储介质，存储有计算机程序，其特征在于，计算机程序被处理器执行时实现如上所述的获取图像的方法。
本发明实施方式相对于现有技术而言，通过将被检测物体一个确定位置的超声波图像保存在被检测物体的三维模型中与该确定位置所对应的位置上，从而扩大了一次超声波检测过程中所获取的被检测物体的超声波图像的区域。在一次超声检测过程中，该确定位置是由超声探测器所在的位置确定的，并且超声探测器在每一个位置所确定的超声波图像都会保存下来，从而提高了用户的操作效率。
另外，获取被检测物体第一位置的第一超声波图像之前，还包括：获取被检测物体的三维模型。
另外，AR显示装置上设置有摄像装置；获取被检测物体的三维模型，具体包括：接收AR显示装置通过摄像装置拍摄的被检测物体的图像；根据被检测物体的图像通过三维建模获得三维模型。
另外，获取被检测物体第一位置的第一超声波图像之前，还包括：获取AR显示装置通过摄像装置对超声探测器进行追踪的结果，其中，追踪的结果中包括超声探测器的位置；若根据追踪的结果确定超声探测器发生位置移动时，将超声探测器位置移动后所在的位置确定为被检测物体第一位置。该实现中，通过获取摄像装置对超声探测器进行追踪的结果，并根据追踪结果中超声探测器的位移情况，来确定被检测物体的第一位置，从而使所确定的第一位置更加精确。
另外，获取被检测物体第一位置的第一超声波图像，具体包括：接收超声探测器在被检测物体第一位置所获取的第一反射超声波信号；根据第一反射超声波信号获得第一超声波图像。
另外，将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上之后，还包括：将保存有第一超声波图像和历史超声波图像的三维模型传输给AR显示装置，其中，AR显示装置对保存在所述三维模型中的第一超声波图像和历史超声波图像进行显示。该实现中，通过将保存有第一超声波图像和历史超声波图像的三维模型传输给AR显示装置，使用户通过AR显示装置能够看到保存在三维模型中对应位置上的超声波图像，从而提高了用户的体验效果。
另外，将保存有第一超声波图像和历史超声波图像的三维模型传输给AR显示装置之前，还包括：若确定第一超声波图像与历史超声波图像存在重叠区域时，将第一超声波图像的重叠区域覆盖历史超声波图像的重叠区域。该实现中，在新获得的超声波图像与历史超声波图像存在重叠区域时，通过将新获取的超声波图像的重叠区域覆盖历史超声波图像的重叠区域，使最终所获取的每一个位置处的超声波图像都是最新所获取的图像，从而使最终所获取的扩大范围后的超声波图像更具有实时性。
另外，将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上之后，还包括：将保存有第一超声波图像和历史超声波图像的三维模型显示在人机交互界面上。该实现中，通过将保存有第一超声波图像和历史超声波图像的三维模型显示在人机交互界面上，使用户能够根据需要在人机交互界面上对显示的三维模型进行相应的操作。
另外，将保存有第一超声波图像和历史超声波图像的三维模型显示在人机交互界面上之后，还包括：若确定接收到用户的操作指令，则根据操作指令在保存有第一超声波图像和历史超声波图像的三维模型中进行标记。该实现中，通过在保存有第一超声波图像和历史超声波图像的三维模型中进行标记，便于用户根据标记结果对保存有第一超声波图像和历史超声波图像的三维模型中进行分析。
另外，超声探测器上设置有定位标记，追踪的结果是由摄像装置通过对定位标记进行追踪所确定的。该实现中，由于超声探测器上设置有定位标记，便于摄像装置对超声探测器进行追踪锁定，从而进一步提高了追踪结果的精确性。
另外，获取被检测物体的三维模型之后，还包括：若根据摄像装置拍摄的被检测物体的图像，确定AR显示装置与被检测物体发生相对位置变化，则重新获取相对位置变化后的三维模型。该实现中，在AR显示装置与被检测物体发生相对位置变化后，通过重新获取位置变化后的三维模型，使得AR显示装置所显示的超声波图像中的被检测物体的位置，与实际检测的被检测物体的位置一致。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。
图1是本申请第一实施例中获取图像的方法流程图；
图2是本申请第二实施例中获取图像的方法流程图；
图3是本申请第三实施例中获取图像的装置方框示意图；
图4是本申请第四实施例中获取图像的装置方框示意图；
图5是本申请第五实施例中终端的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的各实施方式进行详细的阐述。然而，本领域的普通技术人员可以理解，在本发明各实施方式中，为了使读者更好地理解本申请而提出了许多技术细节。但是，即使没有这些技术细节和基于以下各实施方式的种种变化和修改，也可以实现本申请所要求保护的技术方案。
本发明的第一实施方式涉及一种获取图像的方法，应用于超声波检测仪等终端设备。具体流程如图1所示，包括以下步骤：
步骤101，获取被检测物体的三维模型。
需要说明的是，在本实施方式中，终端设备分别与AR显示装置和超声探测器进行通信连接，并且在实际应用中，AR显示装置是佩戴在用户的眼睛前方，并可以随用户头部的移动而发生位置的变化。其中，在AR显示装置上设置有摄像装置，摄像装置一般设置在AR显示装置的前方，并随着用户头部的移动而拍摄用户眼睛前方的实际场景。
具体的说，当对被检测物体进行检测时，AR显示装置上设置的摄像装置会拍摄被检测物体，并将拍摄的被检测物体的图像传输给终端，终端接收AR显示装置通过摄像装置拍摄的被检测物体的图像。由于接收的图像是二维平面图像，终端在接收到被检测物体的二维平面图像之后，会根据被检测物体的图像通过三维建模获得三维模型。例如，当被检测物体是某一个患者的腹部时，会接收AR显示装置通过摄像装置拍摄的腹部区域的图像，并根据获取的腹部区域的图像通过三维建模获得腹部区域的三维模型。
值得一提的是，在进行一次超声波检测时，三维模型中是保存有一次超声波检测过程中获取的被检测物体的历史超声波图像的。
步骤102，获取被检测物体第一位置的第一超声波图像。
需要说明的是，在获取被检测物体第一位置的第一超声波图像之前，首先需要确定被检测物体第一位置。因为AR显示装置在拍摄被检测物体的图像时，还会对位于被检测物体上的超声探测器进行追踪。终端会获取AR显示装置通过拍摄装置对超声探测器进行追踪的结果，其中，追踪的结果中包括超声探测器的位置。如果根据追踪的结果确定超声探测器发生了位置移动，则会将超声探测器位置移动后所在的位置确定为被检测物体第一位置。也就是说被检测物体第一位置并不是固定不变的，只要根据追踪结果确定超声探测器当前的位置与相邻时刻所确定的位置不相同，就把当前的位置确定为被检测物体第一位置。
其中，为了便于摄像装置更准确的对超声探测器进行追踪锁定，在实际应用中，可以在超声探测器上设置定位标记，而追踪的结果就是由摄像装置通过对定位标记进行追踪所确定的。
具体的说，获取被检测物体第一位置的第一超声波图像的具体方式为，接收超声探测器在被检测物体第一位置所获取的第一反射超声波信号，并对获取到的第一反射超声波信号进行处理获得第一超声波图像，并且此时所获得的第一超声波图像是具有透明背景的。例如，被检测物体第一位置为肚脐区域，则在腹部肚脐区域的器官结构影像都会显示在第一超声波图像中。
步骤103，将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上。
具体的说，被检测物体的三维模型与真实的被检测物体是相互对应的，例如在确定第一位置为腹部的肚脐，则在三维模型中找到与肚脐相对应的位置，并将该位置确定为第二位置，并将第一超声波图像保存在被检测物体三维模型中的第二位置上。
需要说明的是，如果确定第一超声波图像与历史超声波图像存在重叠区域时，此时采用的图像保存方式是，将新获得的第一超声波图像的重叠区域覆盖历史超声波图像的重叠区域。通过将新获取的超声波图像的重叠区域覆盖历史超声波图像的重叠区域，使最终所获取的每一个位置处的超声波图像都是超声探测器最新扫描所获取的图像，从而使最终所获取的扩大范围后的超声波图像更具有实时性。
值得一提的是，在将第一超声波图像在三维模型中进行保存之后，还需要用户通过AR显示装置能够看到范围扩大后的超声波图像，因此需要将保存有第一超声波图像和历史超声波图像的三维模型传输给AR显示装置，通过AR显示装置按照三维模型中对应的位置对第一超声波图像和历史超声波图像进行显示。
需要说明的是，如果根据摄像装置拍摄的被检测物体的图像，确定AR显示装置与被检测物体发生相对位置变化，则需要重新获取相对位置变化后的三维模型，通过重新获取位置变化后的三维模型，使得AR显示装置所显示的超声波图像中的被检测物体的位置，与实际检测的被检测物体的位置一致。例如，之前AR显示装置与被检测物体之间是垂直角度关系，如果AR显示装置与被检测物体之间发生了角度偏移，此时需要重新获取位置变化后的三维模型，并按照位置变化后的三维模型将第一超声波图像和历史超声波图像重新在AR显示装置上进行显示。
与现有技术相比，本实施方式提供的获取图像的方法，通过将被检测物体一个确定位置的超声波图像保存在被检测物体的三维模型中与该确定位置所对应的位置上，从而扩大了一次超声波检测过程中所获取的被检测物体的超声波图像的区域。在一次超声检测过程中，该确定的位置是由超声探测器所在的位置确定的，并且超声探测器在每一个位置所确定的超声波图像都会保存下来，从而提高了用户的操作效率。
本发明的第二实施方式涉及一种获取图像的方法。本实施例在第一实施例的基础上做了进一步改进，具体改进之处为：在将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上之后，再将三维模型显示在人机交互界面上。本实施例中获取图像的方法的流程如图2所示。具体的说，在本实施例中，包括步骤201至步骤204，其中步骤201至步骤203与第一实施方式中的步骤101至步骤103大致相同，此处不再赘述，下面主要介绍不同之处，未在本实施方式中详尽描述的技术细节，可参见第一实施例所提供的获取图像的方法，此处不再赘述。
在步骤201至步骤203之后，执行步骤204。
在步骤204中，将保存有第一超声波图像和历史超声波图像的三维模型显示在人机交互界面上。
具体的说，通过将保存有第一超声波图像和历史超声波图像的三维模型显示在人机交互界面上，用户看到该三维模型后可以在人机交互界面上执行相应的操作，例如，标出腹部某一个器官的病灶部位、需要切除肿瘤的部位等等，而终端在确定接收到用户的操作指令时，则根据操作指令在保存有第一超声波图像和历史超声波图像的三维模型中进行标记。
与现有技术相比，本实施方式提供的获取图像的方法，通过将被检测物体一个确定位置的超声波图像保存在被检测物体的三维模型中与该确定位置所对应的位置上，从而扩大了一次超声波检测过程中所获取的被检测物体的超声波图像的区域。在一次超声检测过程中，该确定的位置是由超声探测器所在的位置确定的，并且超声探测器在每一个位置所确定的超声波图像都会保存下来，从而提高了用户的操作效率。并通过将保存有第一超声波图像和历史超声波图像的三维模型显示在人机交互界面上，便于用户根据显示的图像在人机交互界面上执行相应的操作，进一步提高了用户体验。
上面各种方法的步骤划分，只是为了描述清楚，实现时可以合并为一个步骤或者对某些步骤进行拆分，分解为多个步骤，只要包括相同的逻辑关系，都在本专利的保护范围内；对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计，但不改变其算法和流程的核心设计都在该专利的保护范围内。
本发明第三实施方式涉及一种获取图像的装置，具体结构如如图3所示。
如图3所示，获取图像的装置包括三维模型获取模块301、超声波图像获取模块302和保存模块303：
其中，三维模型获取模块301，用于获取被检测物体的三维模型。
超声波图像获取模块302，用于获取被检测物体第一位置的第一超声波图像。
保存模块303，用于将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上。
不难发现，本实施方式为与第一实施方式相对应的装置实施例，本实施方式可与第一实施方式互相配合实施。第一实施方式中提到的相关技术细节在本实施方式中依然有效，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第一实施方式中。
本发明第四实施方式涉及一种获取图像的装置。该实施方式与第三实施方式大致相同，具体结构如图4所示。其中，主要改进之处在于：第四实施方式在第三实施方式的基础上增加了显示模块304。
其中，三维模型获取模块301，用于获取被检测物体的三维模型。
超声波图像获取模块302，用于获取被检测物体第一位置的第一超声波图像。
保存模块303，用于将第一超声波图像保存在被检测物体的三维模型中与第一位置相对应的第二位置上。
显示模块304，用于将保存有第一超声波图像和历史超声波图像的三维模型显示在人机交互界面上。
不难发现，本实施方式为与第二实施方式相对应的装置实施例，本实施方式可与第二实施方式互相配合实施。第二实施方式中提到的相关技术细节在本实施方式中依然有效，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第二实施方式中。
值得一提的是，本实施方式中所涉及到的各模块均为逻辑模块，在实际应用中，一个逻辑单元可以是一个物理单元，也可以是一个物理单元的一部分，还可以以多个物理单元的组合实现。此外，为了突出本发明的创新部分，本实施方式中并没有将与解决本发明所提出的技术问题关系不太密切的单元引入，但这并不表明本实施方式中不存在其它的单元。
本发明第五实施方式涉及一种终端，如图5所示，包括至少一个处理器501；以及，与至少一个处理器501通信连接的存储器502；其中，存储器502存储有可被至少一个处理器501执行的指令，指令被至少一个处理器501执行，以使至少一个处理器501能够执行上述实施例中的获取图像的方法。
本实施例中，处理器501以中央处理器(Central Processing Unit，CPU)为例，存储器502以可读写存储器(Random Access Memory，RAM)为例。处理器501、存储器502可以通过总线或者其他方式连接，图5中以通过总线连接为例。存储器502作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本申请实施例中实现获取图像的方法的程序就存储于存储器502中。处理器501通过运行存储在存储器502中的非易失性软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述获取图像的方法。
存储器502可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储选项列表等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器502可选包括相对于处理器501远程设置的存储器，这些远程存储器可以通过网络连接至外接设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
一个或者多个程序模块存储在存储器502中，当被一个或者多个处理器501执行时，执行上述任意方法实施例中的获取图像的方法。
上述产品可执行本申请实施例所提供的方法，具备执行方法相应的功能模块和有益效果，未在本实施例中详尽描述的技术细节，可参见本申请实施例所提供的方法。
本申请的第六实施方式涉及一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，该计算机程序被处理器执行时能够实现本发明任意方法实施例中涉及的获取图像的方法。
本领域技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域的普通技术人员可以理解，上述各实施方式是实现本发明的具体实施例，而在实际应用中，可以在形式上和细节上对其作各种改变，而不偏离本发明的精神和范围。

Claims (12)

1.一种获取图像的方法，应用于终端，其特征在于，包括：
对位于被检测物体上的超声探测器进行追踪；
在检测到超声探测器的位置移动的情况下，将超声探测器位置移动后所在的位置确定为被检测物体第一位置；
获取被检测物体第一位置的第一超声波图像；
将所述第一超声波图像保存在所述被检测物体的三维模型中与所述第一位置相对应的第二位置上，其中，所述三维模型中保存有一次超声检测过程中获取的所述被检测物体的历史超声波图像，所述历史超声波图像由所述超声探测器在每一个位置所确定的超声波图像保存得到；
所述将所述第一超声波图像保存在所述被检测物体的三维模型中与所述第一位置相对应的第二位置上之后，还包括：
将保存有所述第一超声波图像和所述历史超声波图像的所述三维模型传输给AR显示装置，其中，所述AR显示装置对保存在所述三维模型中的所述第一超声波图像和所述历史超声波图像进行显示。
2.根据权利要求1所述的获取图像的方法，其特征在于，所述获取被检测物体第一位置的第一超声波图像之前，还包括：
获取所述被检测物体的三维模型。
3.根据权利要求2所述的获取图像的方法，其特征在于，AR显示装置上设置有摄像装置；
所述获取所述被检测物体的三维模型，具体包括：
接收所述AR显示装置通过所述摄像装置拍摄的所述被检测物体的图像；
根据所述被检测物体的图像通过三维建模获得所述三维模型。
4.根据权利要求3所述的获取图像的方法，其特征在于，所述获取被检测物体第一位置的第一超声波图像之前，还包括：
获取所述AR显示装置通过所述摄像装置对超声探测器进行追踪的结果，其中，所述追踪的结果中包括所述超声探测器的位置；
若根据所述追踪的结果确定所述超声探测器发生位置移动时，将所述超声探测器位置移动后所在的位置确定为所述被检测物体第一位置。
5.根据权利要求4所述的获取图像的方法，其特征在于，所述获取被检测物体第一位置的第一超声波图像，具体包括：
接收所述超声探测器在所述被检测物体第一位置所获取的第一反射超声波信号；
根据所述第一反射超声波信号获得所述第一超声波图像。
6.根据权利要求1所述的获取图像的方法，其特征在于，所述将保存有所述第一超声波图像和所述历史超声波图像的所述三维模型传输给AR显示装置之前，还包括：
若确定所述第一超声波图像与所述历史超声波图像存在重叠区域时，将所述第一超声波图像的重叠区域覆盖所述历史超声波图像的重叠区域。
7.根据权利要求1所述的获取图像的方法，其特征在于，所述将所述第一超声波图像保存在所述被检测物体的三维模型中与所述第一位置相对应的第二位置上之后，还包括：
将保存有所述第一超声波图像和所述历史超声波图像的所述三维模型显示在人机交互界面上。
8.根据权利要求7所述的获取图像的方法，其特征在于，所述将保存有所述第一超声波图像和所述历史超声波图像的所述三维模型显示在人机交互界面上之后，所述方法还包括：
若确定接收到用户的操作指令，则根据所述操作指令在保存有所述第一超声波图像和所述历史超声波图像的所述三维模型中进行标记。
9.根据权利要求4所述的获取图像的方法，其特征在于，所述超声探测器上设置有定位标记，所述追踪的结果是由所述摄像装置通过对所述定位标记进行追踪所确定的。
10.根据权利要求3所述的获取图像的方法，其特征在于，所述获取所述被检测物体的三维模型之后，还包括：
若根据所述摄像装置拍摄的所述被检测物体的图像，确定所述AR显示装置与所述被检测物体发生相对位置变化，则重新获取相对位置变化后的所述三维模型。
11.一种终端，其特征在于，包括：至少一个处理器；以及，
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求1至10任一项所述的获取图像的方法。
12.一种计算机可读存储介质，存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至10任一项所述的获取图像的方法。
CN201811080993.2A 2018-09-17 2018-09-17 一种获取图像的方法、相关装置及可读存储介质 Active CN109345632B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201811080993.2A CN109345632B (zh) 2018-09-17 2018-09-17 一种获取图像的方法、相关装置及可读存储介质
JP2019166548A JP6944492B2 (ja) 2018-09-17 2019-09-12 画像取得方法、関連装置及び読み取り可能な記憶媒体
US16/572,837 US20200085411A1 (en) 2018-09-17 2019-09-17 Method, apparatus and readable storage medium for acquiring an image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811080993.2A CN109345632B (zh) 2018-09-17 2018-09-17 一种获取图像的方法、相关装置及可读存储介质

Publications (2)

Publication Number Publication Date
CN109345632A CN109345632A (zh) 2019-02-15
CN109345632B true CN109345632B (zh) 2023-04-07

Family

ID=65305185

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811080993.2A Active CN109345632B (zh) 2018-09-17 2018-09-17 一种获取图像的方法、相关装置及可读存储介质

Country Status (3)

Country Link
US (1) US20200085411A1 (zh)
JP (1) JP6944492B2 (zh)
CN (1) CN109345632B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110675490B (zh) * 2019-09-27 2023-04-28 武汉中旗生物医疗电子有限公司 一种三维超声渲染成像方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101162524A (zh) * 2006-08-11 2008-04-16 佳能株式会社 图像处理设备及方法
WO2016149805A1 (en) * 2015-03-20 2016-09-29 The Governing Council Of The University Of Toronto Systems and methods of ultrasound simulation
CN106028943A (zh) * 2014-10-08 2016-10-12 深圳迈瑞生物医疗电子股份有限公司 超声虚拟内窥成像系统和方法及其装置
CN108196258A (zh) * 2017-12-26 2018-06-22 青岛小鸟看看科技有限公司 外接设备的位置的确定方法及装置、虚拟现实设备及系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101926658B (zh) * 2003-12-16 2013-08-21 株式会社日立医药 超声波体动检测装置
CN101849843B (zh) * 2009-03-31 2013-03-13 上海交通大学医学院附属新华医院 三维心脏超声虚拟内窥镜导航方法
JP2012147858A (ja) * 2011-01-17 2012-08-09 Tokyo Univ Of Agriculture & Technology 画像処理装置、画像処理方法及び画像処理プログラム
WO2013134559A1 (en) * 2012-03-07 2013-09-12 Speir Technologies Inc. Methods and systems for tracking and guiding sensors and instruments
US20130267838A1 (en) * 2012-04-09 2013-10-10 Board Of Regents, The University Of Texas System Augmented Reality System for Use in Medical Procedures
CN102999902B (zh) * 2012-11-13 2016-12-21 上海交通大学医学院附属瑞金医院 基于ct配准结果的光学导航定位导航方法
JP5693691B2 (ja) * 2013-10-21 2015-04-01 キヤノン株式会社 情報処理装置、その処理方法及びプログラム
US20170367766A1 (en) * 2016-03-14 2017-12-28 Mohamed R. Mahfouz Ultra-wideband positioning for wireless ultrasound tracking and communication
CN105763702B (zh) * 2016-03-30 2019-07-26 努比亚技术有限公司 基于移动终端的三维成像方法和装置
WO2017179350A1 (ja) * 2016-04-11 2017-10-19 富士フイルム株式会社 画像表示制御装置および方法並びにプログラム
WO2017182417A1 (en) * 2016-04-19 2017-10-26 Koninklijke Philips N.V. Ultrasound imaging probe positioning
WO2018115200A1 (en) * 2016-12-20 2018-06-28 Koninklijke Philips N.V. Navigation platform for a medical device, particularly an intracardiac catheter
CN107854142B (zh) * 2017-11-28 2020-10-23 无锡祥生医疗科技股份有限公司 医用超声增强现实成像系统
CN108324246B (zh) * 2018-01-19 2021-06-22 上海联影医疗科技股份有限公司 医疗诊断辅助系统及方法
CN108540542B (zh) * 2018-03-26 2021-12-21 湖北大学 一种移动增强现实系统及显示的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101162524A (zh) * 2006-08-11 2008-04-16 佳能株式会社 图像处理设备及方法
CN106028943A (zh) * 2014-10-08 2016-10-12 深圳迈瑞生物医疗电子股份有限公司 超声虚拟内窥成像系统和方法及其装置
WO2016149805A1 (en) * 2015-03-20 2016-09-29 The Governing Council Of The University Of Toronto Systems and methods of ultrasound simulation
CN107533808A (zh) * 2015-03-20 2018-01-02 多伦多大学管理委员会 超声模拟系统和方法
CN108196258A (zh) * 2017-12-26 2018-06-22 青岛小鸟看看科技有限公司 外接设备的位置的确定方法及装置、虚拟现实设备及系统

Also Published As

Publication number Publication date
US20200085411A1 (en) 2020-03-19
JP6944492B2 (ja) 2021-10-06
JP2020044331A (ja) 2020-03-26
CN109345632A (zh) 2019-02-15

Similar Documents

Publication Publication Date Title
KR102013866B1 (ko) 실제수술영상을 이용한 카메라 위치 산출 방법 및 장치
EP3081184B1 (en) System and method for fused image based navigation with late marker placement
RU2740259C2 (ru) Позиционирование датчика ультразвуковой визуализации
JP5410629B1 (ja) 超音波診断システム、画像処理装置およびその制御方法と制御プログラム
US11642096B2 (en) Method for postural independent location of targets in diagnostic images acquired by multimodal acquisitions and system for carrying out the method
JPWO2017179350A1 (ja) 画像表示制御装置および方法並びにプログラム
US9974615B2 (en) Determining a position of a medical device to be localized
JP2020049211A (ja) 検査位置の調整方法、調整装置、超音波プローブおよび端末
CN107106128B (zh) 用于分割解剖目标的超声成像装置和方法
CN104013424B (zh) 一种基于深度信息的超声宽景成像方法
US10398411B2 (en) Automatic alignment of ultrasound volumes
US10078906B2 (en) Device and method for image registration, and non-transitory recording medium
CN106236264A (zh) 基于光学跟踪和图像匹配的胃肠手术导航方法及系统
CN108113629B (zh) 硬管内窥镜旋转角度测量方法和装置
CN109345632B (zh) 一种获取图像的方法、相关装置及可读存储介质
CN108697410A (zh) 超声波拍摄装置、图像处理装置及其方法
CN116047412B (zh) 标记物的伪影坐标去除方法及相关装置
CN112155595A (zh) 超声波诊断设备、超声探头、图像的生成方法及存储介质
CN114617614A (zh) 手术机器人及其前列腺穿刺方法、装置及存储介质
CN112488982A (zh) 一种超声图像检测方法及装置
CN116077152A (zh) 穿刺路径规划方法及相关产品
US20190333399A1 (en) System and method for virtual reality training using ultrasound image data
CN113081033A (zh) 基于空间定位装置的三维超声成像方法、存储介质及设备
CN106236263A (zh) 基于场景分解的胃肠手术导航方法及系统
CN211325035U (zh) 一种内外可视的新型内窥镜系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant