CN109102573B - 图像处理方法、装置和存储介质 - Google Patents

图像处理方法、装置和存储介质 Download PDF

Info

Publication number
CN109102573B
CN109102573B CN201810887116.XA CN201810887116A CN109102573B CN 109102573 B CN109102573 B CN 109102573B CN 201810887116 A CN201810887116 A CN 201810887116A CN 109102573 B CN109102573 B CN 109102573B
Authority
CN
China
Prior art keywords
dimensional image
sub
dimensional
matching
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810887116.XA
Other languages
English (en)
Other versions
CN109102573A (zh
Inventor
朱康
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201810887116.XA priority Critical patent/CN109102573B/zh
Publication of CN109102573A publication Critical patent/CN109102573A/zh
Application granted granted Critical
Publication of CN109102573B publication Critical patent/CN109102573B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10052—Images from lightfield camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供一种图像处理方法、装置和存储介质，该方法包括：获取显微镜拍摄的物体的二维图像；采用增强现实AR技术对二维图像进行处理，获取物体对应的AR形式的三维图像，AR形式的三维图像用于使得用户获取不同角度的物体的图像；显示AR形式的三维图像。本发明采用AR技术将显微镜获取的二维图像转化为AR形式的三维图像，使得用户可以获取微小物体各个角度的结构，提升了用户体验。

Description

图像处理方法、装置和存储介质
技术领域
本发明涉及图像处理技术领域，尤其涉及一种图像处理方法、装置和存储介质。
背景技术
光学显微镜(Optical Microscope，OM)是利用光学原理，把人眼所不能分辨的微小物体放大成像，以供人们提取微细结构信息的光学仪器。
现有的相关技术中，光学显微镜拍摄的图像均为二维图像，用户在观察物体的微细结构时，所看到的是该微细结构的二维图像，该二维图像不能全面地对该微细结构进行显示，其显示的仅是该微细结构的某一个角度的图像，由此限制了用户对微细结构的观察，用户体验差。
发明内容
本发明提供一种图像处理方法、装置和存储介质，采用AR技术将显微镜获取的二维图像转化为AR形式的三维图像，使得用户可以获取微小物体各个角度的结构，提升了用户体验。
本发明的第一方面提供图像处理方法，包括：
获取显微镜拍摄的物体的二维图像；
采用增强现实AR技术对所述二维图像进行处理，获取所述物体对应的AR形式的三维图像，所述AR形式的三维图像用于使得用户获取不同角度的所述物体的图像；
显示所述AR形式的三维图像。
可选的，所述显示所述AR形式的三维图像，包括：
控制所述AR形式的三维图像按照预设方向进行转动显示。
AR形式的三维图像按照预设方向进行转动显示，一方面解决了用户手动操作的不便利行，另一方面，避免了手动旋转造成的三维图像中的结构信息的不完整的问题。
可选的，所述二维图像包括多张子二维图像，每张所述子二维图像的拍摄角度不同；
所述获取所述物体对应的AR形式的三维图像，包括：
获取每张所述子二维图像对应的AR形式的子三维图像；
根据多个所述AR形式的子三维图像，获取所述AR形式的三维图像。
可选的，所述根据多个所述AR形式的子三维图像，获取所述AR形式的三维图像，包括：
获取每个所述AR形式的子三维图像的多个特征点；
将每个所述AR形式的子三维图像的多个特征点与多个所述AR形式的子三维图像中的其他每个AR形式的子三维图像的多个特征点进行匹配，获取每个所述AR形式的子三维图像的多个匹配度；
根据每个所述AR形式的子三维图像的多个匹配度，获取所述AR形式的三维图像。
可选的，根据每个所述AR形式的子三维图像的多个匹配度，获取所述AR形式的三维图像，包括：
根据每个所述AR形式的子三维图像的多个匹配度，获取每个所述AR形式的子三维图像的平均匹配度；
将平均匹配度最大的AR形式的子三维图像确定为所述AR形式的三维图像。
可选的，所述获取每个所述AR形式的子三维图像的平均匹配度之前，还包括：
将每个所述AR形式的子三维图像的多个匹配度中小于第一匹配度阈值的匹配度进行去除，以及，将每个所述AR形式的子三维图像的多个匹配度中大于第二匹配度阈值的匹配度进行去除；所述第一匹配度阈值小于所述第二匹配度阈值。
本发明的第二方面提供一种图像处理装置，包括：
二维图像获取装置，用于获取显微镜拍摄的物体的二维图像；
AR形式的三维图像获取装置，用于采用增强现实AR技术对所述二维图像进行处理，获取所述物体对应的AR形式的三维图像，所述AR形式的三维图像用于使得用户获取不同角度的所述物体的图像；
显示装置，用于显示所述AR形式的三维图像。
可选的，所述显示装置，具体用于控制所述AR形式的三维图像按照预设方向进行转动显示。
可选的，所述二维图像包括多张子二维图像，每张所述子二维图像的拍摄角度不同；
所述AR形式的三维图像获取装置，具体用于获取每张所述子二维图像对应的AR形式的子三维图像；
根据多个所述AR形式的子三维图像，获取所述AR形式的三维图像。
可选的，所述AR形式的三维图像获取装置，具体还用于获取每个所述AR形式的子三维图像的多个特征点；
将每个所述AR形式的子三维图像的多个特征点与多个所述AR形式的子三维图像中的其他每个AR形式的子三维图像的多个特征点进行匹配，获取每个所述AR形式的子三维图像的多个匹配度；
根据每个所述AR形式的子三维图像的多个匹配度，获取所述AR形式的三维图像。
可选的，所述AR形式的三维图像获取装置，具体还用于根据每个所述AR形式的子三维图像的多个匹配度，获取每个所述AR形式的子三维图像的平均匹配度；
将平均匹配度最大的AR形式的子三维图像确定为所述AR形式的三维图像。
可选的，所述AR形式的三维图像获取装置，具体还用于将每个所述AR形式的子三维图像的多个匹配度中小于第一匹配度阈值的匹配度进行去除，以及，将每个所述AR形式的子三维图像的多个匹配度中大于第二匹配度阈值的匹配度进行去除；所述第一匹配度阈值小于所述第二匹配度阈值。
本发明的第三方面提供一种图像处理装置，包括：至少一个处理器和存储器；
所述存储器存储计算机执行指令；
所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述图像处理装置执行上述图像处理方法。
本发明的第四方面提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机执行指令，当所述计算机执行指令被处理器执行时，实现上述图像处理方法。
本发明提供一种图像处理方法、装置和存储介质，该方法包括：获取显微镜拍摄的物体的二维图像；采用增强现实AR技术对二维图像进行处理，获取物体对应的AR形式的三维图像，AR形式的三维图像用于使得用户获取不同角度的物体的图像；显示AR形式的三维图像。本发明采用AR技术将显微镜获取的二维图像转化为AR形式的三维图像，使得用户可以获取微小物体各个角度的结构，提升了用户体验。
附图说明
图1为本发明提供的图像处理方法适用的系统架构示意图；
图2为本发明提供的图像处理方法的流程示意图一；
图3为本发明提供的获取物体对应的AR形式的三维图像的流程示意图；
图4为本发明提供的图像处理方法的流程示意图二；
图5为本发明提供的图像处理装置的结构示意图一；
图6为本发明提供的图像处理装置的结构示意图二。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明的实施例，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明提供的图像处理方法适用于图像处理系统，图1为本发明提供的图像处理方法适用的系统架构示意图，如图1所示，该图像处理系统包括：图像处理方法的执行主体图像处理装置、显微镜。其中，本实施例中的显微镜可以但不限于为光学显微镜、电子显微镜、探针显微镜；显微镜能够把人眼所不能分辨的微小物体放大成像，获取微小物体的二维图像。显微镜拍摄二维图像后，可以将该二维图像发送给图像处理装置执行本发明中的图像处理方法，或者可以由图像处理装置实时获取显微镜拍摄的二维图像执行本发明中的图像处理方法。
本实施例中的图像处理装置可以为手机、个人数字助理(Personal DigitalAssistant，简称：PDA)、平板电脑、便携设备(例如，便携式计算机、袖珍式计算机或手持式计算机)等移动设备；也可以是台式计算机等固定设备。
具体的，本发明提供的图像处理装置中设置有显示模块，该显示模块包括但不限于阴极射线管CRT显示屏、液晶LCD显示屏、LED显示屏，该显示模块用于显示二维图像经图像处理后的图像。
可以想到的是，本发明提供的图像处理装置中不设置有显示模块，而是将该二维图像经图像处理后的图像发送给显示设备进行显示，该显示设备可以与显微镜的二维图像的显示设备为同一个设备。
图2为本发明提供的图像处理方法的流程示意图一，图2所示方法流程的执行主体可以为图像处理装置，该图像处理装置可由任意的软件和/或硬件实现。如图2所示，本实施例提供的图像处理方法可以包括：
S101，获取显微镜拍摄的物体的二维图像。
本实施例中，被拍摄的物体放置在显微镜的操作平台上，显微镜可对该物体进行拍摄，获取该物体的二维图像；显微镜设置有相应的图像显示器，该图像显示器可以显示以及存储二维图像，图像处理装置可以从该图像显示器中获取该二维图像，或者显微镜拍摄获取物体的二维图像后，直接发送给图像处理装置。本实施例对图像处理装置如何获取二维图像的方式不做限制。
具体的，本实施例提供的图像处理装置可以获取显微镜拍摄的较早时期的二维图像；图像处理装置也可以与显微镜进行同步，图像处理装置可以获取显微镜正在拍摄的物体对应的二维图像。
S102，采用增强现实AR技术对二维图像进行处理，获取物体对应的AR形式的三维图像，AR形式的三维图像用于使得用户获取不同角度的物体的图像。
由虚拟现实技术发展而来的增强现实(Augmented Reality，AR)技术是将虚拟的信息叠加到真实世界中，被人类感官所感知，从而达到超越现实的感官体验，不同于虚拟现实技术，采用增强现实技术用户不仅能够看到由AR技术获取的信息，还能够看到现有世界的真实信息，临场感与真实感都更强。
本实施例中，采用增强现实AR技术对二维图像进行处理，获取物体对应的AR形式的三维图像，其中，AR形式的三维图像用于使得用户获取不同角度的物体的图像；具体的，物体的二维图像可以显示该物体某一个角度的结构特征，而经过AR技术处理后，可以获取该物体不同角度的图像，即可以获取该物体AR形式的三维图像。
S103，显示AR形式的三维图像。
本实施例中，可以在图像处理装置的显示屏上显示该物体的AR形式的三维图像，也可在独立设置的显示设备上显示该物体的AR形式的三维图像。
具体的，用户可以看到该物体的二维图像，在该二维图像的基础上，通过AR技术的处理，也可以获取该二维图像对应的AR形式的三维图像；其中，由于该处理后的图像是三维的，用户可以在该显示屏或显示装置上将该AR形式的三维图像进行旋转，图像处理装置可以根据用户在该显示屏或显示装置上形成的滑动轨迹，确定滑动轨迹对应的滑动方向；控制AR形式的三维图像按照滑动方向进行转动显示。示例性的，如用户在显示屏或显示装置上的用手指按照顺时针方向进行滑动，则AR形式的三维图像按照顺时针方向进行转动显示，转动的角度可以根据用户形成的滑动轨迹对应的滑动距离进行获取。
示例性的，图像处理装置获取的显微镜拍摄的物体的二维图像是“A细胞”的二维图像，采用AR技术对“A细胞”的二维图像进行处理，获取“A细胞”对应的AR形式的三维图像，显示该“A细胞”的AR形式的三维图像；具体的，该“A细胞”的AR形式的三维图像可以在该“A细胞”的二维图像上进行叠加，获取该“A细胞”的AR形式三维图像与二维图像的叠加效果的图像。
本实施例提供一种图像处理方法，该方法包括：获取显微镜拍摄的物体的二维图像；采用增强现实AR技术对二维图像进行处理，获取物体对应的AR形式的三维图像，AR形式的三维图像用于使得用户获取不同角度的物体的图像；显示AR形式的三维图像。本发明采用AR技术将显微镜获取的二维图像转化为AR形式的三维图像，使得用户可以获取微小物体各个角度的结构，提升了用户体验。
进一步的，为了使得采用AR技术获取的AR形式的三维图像更为准确，本实施例中，图像处理装置获取的二维图像可以包括多张子二维图像，每张子二维图像的拍摄角度不同；由此，根据多张不同拍摄角度的二维图像获取的AR形式的三维图像具有更高的准确度。
下面结合图3对本发明提供的图像处理方法中如何获取物体对应的AR形式的三维图像进行详细说明，其中，显微镜拍摄的二维图像为多张，图3为本发明提供的获取物体对应的AR形式的三维图像的流程示意图，如图3所示，本实施例提供的获取物体对应的AR形式的三维图像的步骤可以包括：
S1021，获取每张子二维图像对应的AR形式的子三维图像。
采用与上述实施例中相同的AR技术对每张子二维图像进行处理，获取每张子二维图像对应的AR形式的子三维图像。
S1022，根据多个AR形式的子三维图像，获取AR形式的三维图像。
本实施例中，根据多个AR形式的子三维图像，获取AR形式的三维图像的具体方式为：获取每个AR形式的子三维图像的多个特征点，具体的，特征点可以是AR形式的子三维图像中的多个像素块的灰度值，该多个像素块可以为AR形式的子三维图像中具有边缘特征的像素块。
将每个AR形式的子三维图像的多个特征点与多个AR形式的子三维图像中的其他每个AR形式的子三维图像的多个特征点进行匹配，获取每个AR形式的子三维图像的多个匹配度。
示例性的，获取的AR形式的子三维图像为10个，分别编号为1-10，获取编号为1的多个匹配度的过程为：分别获取10个AR形式的子三维图像分别对应的多个特征点，将编号为1的AR形式的子三维图像对应的多个特征点与编号为2-9的AR形式的子三维图像分别对应的多个特征点依次进行匹配，获取编号为1的AR形式的子三维图像的9个匹配度。
根据每个AR形式的子三维图像的多个匹配度，获取AR形式的三维图像。
具体的，将每个AR形式的子三维图像的多个匹配度中小于第一匹配度阈值的匹配度进行去除，以及，将每个AR形式的子三维图像的多个匹配度中大于第二匹配度阈值的匹配度进行去除；第一匹配度阈值小于第二匹配度阈值。
示例性的，如编号为1的AR形式的子三维图像的9个匹配度分别为0.1、0.55、0.7、0.8、0.95、0.67、0.86、0.77、0.78、0.85，预先设置的第一匹配度阈值为0.5，第二匹配度阈值为0.9，则经处理后，获取到编号为1的AR形式的子三维图像的有效匹配度有8个，分别是0.55、0.7、0.8、0.67、0.86、0.77、0.78、0.85。
根据每个AR形式的子三维图像的多个匹配度，获取每个AR形式的子三维图像的平均匹配度。示例性的，编号为1的AR形式的子三维图像的平均匹配度为0.75。
将平均匹配度最大的AR形式的子三维图像确定为AR形式的三维图像。本实施例中，按照上述获取每个AR形式的子三维图像的平均匹配度后，按照大小顺序将平均匹配度进行降序排列，将平均匹配度最大的AR形式的子三维图像确定为AR形式的三维图像。
本实施例中，通过获取显微镜拍摄的物体的多张子二维图像，分别获取每张子二维图像对应的AR形式的三维图像，通过每个AR形式的三维图像中的特征点与其他多个AR形式的三维图像中的特征点进行匹配的方式，获取每个AR形式的三维图像的多个匹配度；进一步的，将不满足预设条件的匹配度进行去除，获取有效匹配度，再获取AR形式的三维图像对应的平均匹配度，并将平均匹配度最大的AR形式的子三维图像确定为AR形式的三维图像。本实施例中，通过多个AR形式的三维图像特征点进行匹配的方式，获取了更为准确的AR形式的三维图像，进一步使得用户获取更为准确的微小物体的三维结构，进一步提升了用户体验。
在上述实施例的基础上，下面结合图4对本发明提供的图像处理方法进行进一步说明，图4为本发明提供的图像处理方法的流程示意图二，如图4所示，本实施例提供的图像处理方法可以包括：
S201，获取显微镜拍摄的物体的二维图像。
S202，采用增强现实AR技术对二维图像进行处理，获取物体对应的AR形式的三维图像。
其中，S201和S202具体可参照上述实施例中的S101和S102中的相关描述，在此不作赘述。
S203，控制AR形式的三维图像按照预设方向进行转动显示。
为了使得用户更加方便的观看AR形式的三维图像，本实施例中，可以控制AR形式的三维图像按照预设方向进行转动显示。进一步的，用户还可以在图像处理装置中进行AR形式的三维图像转动方向以及转动角速度的设置，进一步的，为了便于用户对某一角度的图像进行观察，还可以在图像处理装置上进行相应的操作，使得AR形式的三维图像静止在该角度。
本实施例中，AR形式的三维图像按照预设方向进行转动显示，一方面解决了用户手动操作的不便利行，另一方面，避免了手动旋转造成的三维图像中的结构信息的不完整的问题。
图5为本发明提供的图像处理装置的结构示意图一，如图5所示，该图像处理装置300包括：二维图像获取装置301、AR形式的三维图像获取装置302、显示装置303。
二维图像获取装置301，用于获取显微镜拍摄的物体的二维图像。
AR形式的三维图像获取装置302，用于采用增强现实AR技术对二维图像进行处理，获取物体对应的AR形式的三维图像，AR形式的三维图像用于使得用户获取不同角度的物体的图像。
显示装置303，用于显示AR形式的三维图像。
本实施例提供的图像处理装置与上述图像处理方法实现的原理和技术效果类似，在此不作赘述。
可选的，显示装置303，具体用于控制AR形式的三维图像按照预设方向进行转动显示。
可选的，所述二维图像包括多张子二维图像，每张所述子二维图像的拍摄角度不同；
AR形式的三维图像获取装置303，具体用于获取每张子二维图像对应的AR形式的子三维图像；
根据多个AR形式的子三维图像，获取AR形式的三维图像。
可选的，AR形式的三维图像获取装置303，具体还用于获取每个AR形式的子三维图像的多个特征点；
将每个AR形式的子三维图像的多个特征点与多个AR形式的子三维图像中的其他每个AR形式的子三维图像的多个特征点进行匹配，获取每个AR形式的子三维图像的多个匹配度；
根据每个AR形式的子三维图像的多个匹配度，获取AR形式的三维图像。
可选的，AR形式的三维图像获取装置303，具体还用于根据每个AR形式的子三维图像的多个匹配度，获取每个AR形式的子三维图像的平均匹配度；
将平均匹配度最大的AR形式的子三维图像确定为AR形式的三维图像。
可选的，AR形式的三维图像获取装置303，具体还用于将每个AR形式的子三维图像的多个匹配度中小于第一匹配度阈值的匹配度进行去除，以及，将每个AR形式的子三维图像的多个匹配度中大于第二匹配度阈值的匹配度进行去除；第一匹配度阈值小于第二匹配度阈值。
图6为本发明提供的图像处理装置的结构示意图二，该图像处理装置例如可以是终端设备，比如智能手机、平板电脑、计算机等。如图6所示，该图像处理装置400包括：存储器401和至少一个处理器402。
存储器401，用于存储程序指令。
处理器402，用于在程序指令被执行时实现本实施例中的图像处理方法，具体实现原理可参见上述实施例，本实施例此处不再赘述。
该图像处理装置400还可以包括及输入/输出接口403。
输入/输出接口403可以包括独立的输出接口和输入接口，也可以为集成输入和输出的集成接口。其中，输出接口用于输出数据，输入接口用于获取输入的数据，上述输出的数据为上述方法实施例中输出的统称，输入的数据为上述方法实施例中输入的统称。
本发明还提供一种可读存储介质，可读存储介质中存储有执行指令，当图像处理装置的至少一个处理器执行该执行指令时，当计算机执行指令被处理器执行时，实现上述实施例中的图像处理方法。
本发明还提供一种程序产品，该程序产品包括执行指令，该执行指令存储在可读存储介质中。图像处理装置的至少一个处理器可以从可读存储介质读取该执行指令，至少一个处理器执行该执行指令使得图像处理装置实施上述的各种实施方式提供的图像处理方法。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(英文：processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取存储器(英文：Random Access Memory，简称：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
在上述网络设备或者终端设备的实施例中，应理解，处理器可以是中央处理单元(英文：Central Processing Unit，简称：CPU)，还可以是其他通用处理器、数字信号处理器(英文：Digital Signal Processor，简称：DSP)、专用集成电路(英文：ApplicationSpecific Integrated Circuit，简称：ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种图像处理方法，其特征在于，包括：
获取显微镜拍摄的物体的二维图像，所述二维图像包括多张子二维图像，每张所述子二维图像的拍摄角度不同；
采用增强现实AR技术对所述二维图像进行处理，获取每张所述子二维图像对应的AR形式的子三维图像；
获取每个所述AR形式的子三维图像的多个特征点；
将每个所述AR形式的子三维图像的多个特征点与多个所述AR形式的子三维图像中的其他每个AR形式的子三维图像的多个特征点进行匹配，获取每个所述AR形式的子三维图像的多个匹配度；
根据每个所述AR形式的子三维图像的多个匹配度，获取所述物体对应的AR形式的三维图像，所述AR形式的三维图像用于使得用户获取不同角度的所述物体的图像；
显示所述AR形式的三维图像。
2.根据权利要求1所述的方法，其特征在于，所述显示所述AR形式的三维图像，包括：
控制所述AR形式的三维图像按照预设方向进行转动显示。
3.根据权利要求1所述的方法，其特征在于，根据每个所述AR形式的子三维图像的多个匹配度，获取所述AR形式的三维图像，包括：
根据每个所述AR形式的子三维图像的多个匹配度，获取每个所述AR形式的子三维图像的平均匹配度；
将平均匹配度最大的AR形式的子三维图像确定为所述AR形式的三维图像。
4.根据权利要求3所述的方法，其特征在于，所述获取每个所述AR形式的子三维图像的平均匹配度之前，还包括：
将每个所述AR形式的子三维图像的多个匹配度中小于第一匹配度阈值的匹配度进行去除，以及，将每个所述AR形式的子三维图像的多个匹配度中大于第二匹配度阈值的匹配度进行去除；所述第一匹配度阈值小于所述第二匹配度阈值。
5.一种图像处理装置，其特征在于，包括：
二维图像获取装置，用于获取显微镜拍摄的物体的二维图像，所述二维图像包括多张子二维图像，每张所述子二维图像的拍摄角度不同；
AR形式的三维图像获取装置，用于采用增强现实AR技术对所述二维图像进行处理，获取所述物体对应的AR形式的三维图像，所述AR形式的三维图像用于使得用户获取不同角度的所述物体的图像；
显示装置，用于显示所述AR形式的三维图像；
所述AR形式的三维图像获取装置，具体用于获取每张所述子二维图像对应的AR形式的子三维图像；
获取每个所述AR形式的子三维图像的多个特征点；
将每个所述AR形式的子三维图像的多个特征点与多个所述AR形式的子三维图像中的其他每个AR形式的子三维图像的多个特征点进行匹配，获取每个所述AR形式的子三维图像的多个匹配度；
根据每个所述AR形式的子三维图像的多个匹配度，获取所述AR形式的三维图像。
6.根据权利要求5所述的装置，其特征在于，
所述显示装置，具体用于控制所述AR形式的三维图像按照预设方向进行转动显示。
7.根据权利要求5所述的装置，其特征在于，
所述AR形式的三维图像获取装置，具体还用于根据每个所述AR形式的子三维图像的多个匹配度，获取每个所述AR形式的子三维图像的平均匹配度；
将平均匹配度最大的AR形式的子三维图像确定为所述AR形式的三维图像。
8.根据权利要求7所述的装置，其特征在于，
所述AR形式的三维图像获取装置，具体还用于将每个所述AR形式的子三维图像的多个匹配度中小于第一匹配度阈值的匹配度进行去除，以及，将每个所述AR形式的子三维图像的多个匹配度中大于第二匹配度阈值的匹配度进行去除；所述第一匹配度阈值小于所述第二匹配度阈值。
9.一种图像处理装置，其特征在于，包括：至少一个处理器和存储器；
所述存储器存储计算机执行指令；
所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述图像处理装置执行权利要求1-4任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机执行指令，当所述计算机执行指令被处理器执行时，实现权利要求1-4任一项所述的方法。
CN201810887116.XA 2018-08-06 2018-08-06 图像处理方法、装置和存储介质 Active CN109102573B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810887116.XA CN109102573B (zh) 2018-08-06 2018-08-06 图像处理方法、装置和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810887116.XA CN109102573B (zh) 2018-08-06 2018-08-06 图像处理方法、装置和存储介质

Publications (2)

Publication Number Publication Date
CN109102573A CN109102573A (zh) 2018-12-28
CN109102573B true CN109102573B (zh) 2023-05-02

Family

ID=64848917

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810887116.XA Active CN109102573B (zh) 2018-08-06 2018-08-06 图像处理方法、装置和存储介质

Country Status (1)

Country Link
CN (1) CN109102573B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5912720A (en) * 1997-02-13 1999-06-15 The Trustees Of The University Of Pennsylvania Technique for creating an ophthalmic augmented reality environment
WO2014175514A1 (ko) * 2013-04-25 2014-10-30 경북대학교 산학협력단 표면 이미지와 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치
CN105701863A (zh) * 2016-01-11 2016-06-22 华为技术有限公司 图像处理的方法和装置
CN106445282A (zh) * 2016-09-08 2017-02-22 掌阅科技股份有限公司 一种基于增强现实技术的交互方法
CN106772996A (zh) * 2017-01-23 2017-05-31 清华大学 一种增强现实操作方法及系统
CN107392946A (zh) * 2017-07-18 2017-11-24 宁波永新光学股份有限公司 一种面向三维形状重建的显微多焦距图像序列处理方法
CN107907987A (zh) * 2017-12-26 2018-04-13 深圳科创广泰技术有限公司 基于混合现实的3d显微镜
WO2018127509A1 (de) * 2017-01-09 2018-07-12 Carl Zeiss Microscopy Gmbh Verfahren zur erzeugung eines dreidimensionalen modells einer probe in einem digitalen mikroskop und digitales mikroskop

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10373379B2 (en) * 2015-08-20 2019-08-06 Disney Enterprises, Inc. Deformable-surface tracking based augmented reality image generation

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5912720A (en) * 1997-02-13 1999-06-15 The Trustees Of The University Of Pennsylvania Technique for creating an ophthalmic augmented reality environment
WO2014175514A1 (ko) * 2013-04-25 2014-10-30 경북대학교 산학협력단 표면 이미지와 증강 현실 이미지를 중첩시켜 출력하는 수술용 현미경 시스템 및 그를 위한 증강 현실 이미지 제공 장치
CN105701863A (zh) * 2016-01-11 2016-06-22 华为技术有限公司 图像处理的方法和装置
CN106445282A (zh) * 2016-09-08 2017-02-22 掌阅科技股份有限公司 一种基于增强现实技术的交互方法
WO2018127509A1 (de) * 2017-01-09 2018-07-12 Carl Zeiss Microscopy Gmbh Verfahren zur erzeugung eines dreidimensionalen modells einer probe in einem digitalen mikroskop und digitales mikroskop
CN106772996A (zh) * 2017-01-23 2017-05-31 清华大学 一种增强现实操作方法及系统
CN107392946A (zh) * 2017-07-18 2017-11-24 宁波永新光学股份有限公司 一种面向三维形状重建的显微多焦距图像序列处理方法
CN107907987A (zh) * 2017-12-26 2018-04-13 深圳科创广泰技术有限公司 基于混合现实的3d显微镜

Also Published As

Publication number Publication date
CN109102573A (zh) 2018-12-28

Similar Documents

Publication Publication Date Title
CN109978931B (zh) 三维场景重建方法及设备、存储介质
EP3466070B1 (en) Method and device for obtaining image, and recording medium thereof
CN106027910B (zh) 预览画面呈现方法、装置及终端
JP2020507850A (ja) 画像内の物体の姿の確定方法、装置、設備及び記憶媒体
CN110866977B (zh) 增强现实处理方法及装置、系统、存储介质和电子设备
EP2420955A2 (en) Terminal device and method for augmented reality
CN108230384B (zh) 图像深度计算方法、装置、存储介质和电子设备
US10074216B2 (en) Information processing to display information based on position of the real object in the image
JP2018537748A (ja) 可変の計算量を用いた画像のライトフィールドレンダリング
KR102450236B1 (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
CN110290285B (zh) 图像处理方法、图像处理装置、图像处理系统及介质
JP5822545B2 (ja) 画像処理装置、画像処理装置の制御方法、およびプログラム
CN110969060A (zh) 神经网络训练、视线追踪方法和装置及电子设备
CN112905014A (zh) Ar场景下的交互方法、装置、电子设备及存储介质
CN107065164B (zh) 图像展示方法及装置
CN115002442B (zh) 一种图像展示方法、装置、电子设备及存储介质
CN109005285A (zh) 增强现实处理方法、终端设备及存储介质
JP2018097581A (ja) 情報処理装置およびプログラム
CN109981989B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN105678696B (zh) 一种信息处理方法及电子设备
US10586392B2 (en) Image display apparatus using foveated rendering
CN108604128B (zh) 一种处理方法及移动设备
CN109102573B (zh) 图像处理方法、装置和存储介质
US20230244318A1 (en) Program, head-mounted display, and information processing device
JP6938952B2 (ja) 移動端末装置及びシリアルコード抽出用プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant