CN106600531B - 手持扫描仪、手持扫描仪点云拼接方法和装置 - Google Patents

手持扫描仪、手持扫描仪点云拼接方法和装置 Download PDF

Info

Publication number
CN106600531B
CN106600531B CN201611099407.XA CN201611099407A CN106600531B CN 106600531 B CN106600531 B CN 106600531B CN 201611099407 A CN201611099407 A CN 201611099407A CN 106600531 B CN106600531 B CN 106600531B
Authority
CN
China
Prior art keywords
point cloud
initial
current
space point
pointing information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611099407.XA
Other languages
English (en)
Other versions
CN106600531A (zh
Inventor
白新平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Weixin Dengtuo Medical Technology Co ltd
Original Assignee
Shenzhen Weixin Dengtuo Medical Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Weixin Dengtuo Medical Technology Co ltd filed Critical Shenzhen Weixin Dengtuo Medical Technology Co ltd
Priority to CN201611099407.XA priority Critical patent/CN106600531B/zh
Publication of CN106600531A publication Critical patent/CN106600531A/zh
Application granted granted Critical
Publication of CN106600531B publication Critical patent/CN106600531B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038Image mosaicing, e.g. composing plane images from plane sub-images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Input (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)

Abstract

本发明公开了一种手持扫描仪、手持扫描仪点云拼接方法和装置,该方法包括当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取扫描头的当前指向信息;将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,拼接完成后的空间点云,作为初始空间点云。本发明避免在空间全角度范围内进行遍例式、盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率。

Description

手持扫描仪、手持扫描仪点云拼接方法和装置
技术领域
本发明涉及三维扫描技术领域,尤其涉及一种手持扫描仪、手持扫描仪点云拼接方法和装置。
背景技术
随着三维扫描技术的发展和研究,三维扫描仪的应用越来越广泛,特别是近年来三维扫描仪应用于牙科的牙齿矫正和义齿塑造,由于人体牙齿对三维扫描的精度要求很高(主要用途是通过三维扫描生成义齿模型,以供工厂基于义齿模型进行义齿实体制作),且对三维扫描的效率要求高(病人和医生很难有足够的耐心容忍三维扫描仪的反复扫描操作)。
但是,现有三维扫描技术中对于扫描所得的两片空间点云的拼接(又称配准),是简单基于传统ICP(Iterative Closest Point,就近点搜索法)算法实现空间点云在360度的尝试角度区间进行反复拼接尝试,由于拼接尝试的盲目性,造成迭代次数多、耗时长,无法满足人们对三维扫描效率的要求。
发明内容
本发明的主要目的在于提供一种手持扫描仪、手持扫描仪点云拼接方法和装置,旨在解决现有三维扫描耗时长、效率低的技术问题。
为实现上述目的,本发明实施例提供一种手持扫描仪,所述手持扫描仪包括:
扫描头,用于扫描外设物体生成空间点云;
姿态传感器,用于检测所述扫描头的指向信息;
控制器,与扫描头和姿态传感器电性链接,当控制器控制扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息。
可选地,所述手持扫描仪还包括与所述控制器电性连接的存储器,存储器关联存储扫描头生成的空间点云和姿态传感器同步检测的扫描头指向信息。
本发明还提供一种手持扫描仪点云拼接方法,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接方法包括:
当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;
若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
可选地,所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤包括:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
可选地,所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤之后还包括:
若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;
若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
本发明还提供一种手持扫描仪点云拼接装置,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接装置包括:
扫描模块,用于当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
判断模块,用于将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
拼接模块,用于若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
可选地,所述拼接模块用于:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
可选地,所述手持扫描仪点云拼接装置还包括:
循环模块,用于在根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接之后,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
本发明通过当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息,然后将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云,若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,从而基于指向信息进行针对性空间点云拼接,避免在空间全角度范围内进行盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率,进而基于本发明手持扫描仪点云拼接方法的手持扫描仪在牙科牙齿扫描时的扫描效率,提高了手持扫描仪的使用体验。
附图说明
图1为本发明中空间点云拼接位置对齐的一场景示意图;
图2为本发明中空间点云尝试角度区间确定的一场景示意图;
图3为本发明手持扫描仪点云拼接方法一实施例的流程示意图;
图4为本发明手持扫描仪点云拼接方法又一实施例的流程示意图;
图5为本发明手持扫描仪点云拼接方法另一实施例的流程示意图;
图6为本发明手持扫描仪点云拼接装置一实施例的模块示意图;
图7为本发明手持扫描仪点云拼接装置另一实施例的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
本发明提供一种手持扫描仪,手持扫描仪包括:扫描头,用于扫描外设物体生成空间点云;姿态传感器,用于检测所述扫描头的指向信息;控制器,与扫描头和姿态传感器电性链接,当控制器控制扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息。
扫描头中设有对外设物体(如病人牙齿)进行扫描光学组件,从而生成扫描覆盖到区域的空间点云。姿态传感器是基于MEMS技术的高性能三维运动姿态测量系统。它包含三轴陀螺仪、三轴加速度计,三轴电子罗盘等运动传感器,通过内嵌的低功耗ARM处理器得到经过温度补偿的三维姿态与方位等数据。姿态传感器检测并获取手持扫描仪的扫描头每次进行扫描时的指向信息,例如姿态传感器在时刻A1、A2和A3所采集的指向信息依次为Z1、Z2、Z3,其中扫描头在时刻A1进行扫描得到空间点云C1,在时刻A3进行扫描得到空间点云C3,从而指向信息Z1与空间点云C1关联存储,指向信息Z3与空间点云C3关联存储。控制器可为控制芯片,在扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息。
此外,手持扫描仪还包括与控制器电性连接的存储器,存储器关联存储扫描头生成的空间点云和姿态传感器同步检测的扫描头指向信息。存储器可以存储由控制器执行的处理和控制操作的软件程序等等,或者可以暂时地存储己经输出或将要输出的数据(例如,已扫描生成的空间点云、拼接成功的空间点云、拼接失败的空间点云等等)。而且,存储器可以存储关联对应的空间点云和指向信息。
存储器可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。
此外,手持扫描仪可与外界显示终端连接,显示设备包括显示单元(如触摸屏、显示屏等),显示单元可同步显示扫描头扫描生成的空间点云以及拼接成功或失败的空间点云,以利于手持扫描仪的使用者对扫描进度有一个直观的了解。
进一步地,本发明还提供一种手持扫描仪点云拼接方法,该手持扫描仪点云拼接方法主要应用于牙科中牙齿扫描建模成型应用中,手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,姿态传感器可实时采集手持扫描仪的指向信息(即手持扫描仪的姿态信息),当然姿态传感器也可以在手持扫描仪的扫描头进行物体扫描时,同步采集手持扫描仪进行扫描并生成空间点云时的指向信息。
在本发明手持扫描仪点云拼接方法一实施例中,参照图3,该手持扫描仪点云拼接方法包括:
步骤S10,当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
扫描指令可以是手持扫描仪自行生成,例如手持扫描仪在进入自动扫描模式时,手持扫描仪每秒多次生成扫描指令,以控制手持扫描仪的扫描头主动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如手持扫描仪每秒生成10个扫描指令,即扫描头每秒进行10次扫描,并基于姿态传感器获取扫描头进行这10次扫描时的指向信息。
当然,扫描指令也可以是使用者操作手持扫描仪触发生成,当用户操作手持扫描仪的扫描键时,手持扫描仪生成一个或多个扫描指令,以控制手持扫描仪被动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如使用者每操作一次手持扫描仪生成1个扫描指令以控制扫描头进行1次扫描,并基于姿态传感器获取扫描头进行这1次扫描时的指向信息。
当检测到扫描指令时,控制手持扫描仪的扫描头对待扫描物体进行扫描,生成对应的空间点云,将这些机遇扫描指令得到的空间点云作为当前空间点云,并且将姿态传感器获取的扫描头指向信息作为当前指向信息。然后根据当前空间点云的生成时间和指向信息的生成时间,将当前空间点云与当前指向信息关联起来并对应存储。例如在时刻A1、A2和A3检测到扫描指令,对应生成空间点云C1、C2和C3,姿态传感器对应同步生成对应的指向信息Z1、Z2和Z3,从而指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储。
步骤S20,将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
步骤S30,若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;
步骤S40,若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
在当前空间点云和当前指向信息关联之后,判断手持扫描仪中是否还存有其他空间点云,即判断当前空间点云是否为初始空间点云,若当前空间点云时初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则获取当前空间点云的当前指向信息以及手持扫描仪中存储的初始空间点云的初始指向信息,根据当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接。
比如,指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储,手持扫描仪依次生成空间点云C1、C2和C3,从而首先判断C1是否为初始空间点云,显然C1是初始空间点云,从而C1作为初始空间点云,C1的指向信息为Z1;然后判断C2是否为初始空间点云,显然C2不是初始空间点云,根据Z1和C2的指向信息Z2,对C1和C2进行拼接;若C1和C2拼接成功了,C1和C2共同拼接成为空间点云C12,将空间点云C12作为新的初始空间点云,C12对应的指向信息可以为Z1、Z2或由Z1和Z2求出的参考指向信息Z12。然后继续判断C3是否为初始空间点云,在判定C3不是初始空间点云后,根据C3的指向信息Z3和C12的指向信息(Z1、Z2或Z12),对C3和C12进行拼接,若C3和C12拼接失败,C12和C3共同组成新的初始空间点云,即初始空间点云可为多个;若C3和C12拼接成功,则由C3和C12拼接成的空间点云C123作为新的初始空间点云,C123的指向信息科为Z1、Z2、Z3或由Z1、Z2和Z3共同求出的参考指向信息Z123。
具体地,参照图4,步骤S40中根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤包括:
步骤S41,根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
步骤S42,根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
步骤S43,基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
姿态传感器基于三维空间的参考坐标系得出扫描头每次扫描生成空间点云所对应的指向信息,指向信息包括扫描得到空间点云时扫描头在参考坐标系中的位移信息和角度信息,位移信息表明此次扫描中扫描头的空间位置,角度信息表明此次扫描中扫描头的空间倾斜角度。
所以根据当前空间点云的位移信息和初始空间点云的位移信息,将当前空间点云与初始空间点云进行空间位置定位,即根据当前空间点云的扫描生成位置和初始空间点云的扫描生成位置,粗略地确定当前空间点云与初始空间点云存在相同点云区域以进行拼接的位置,也就是将当前空间点云与初始空间点云进行拼接位置对齐。为了辅助理解拼接位置对齐,列举一简单实例,例如,参照图1,当前空间点云C1中一部分的位移信息为D1、一部分的位移信息为D2(具体地空间点云位移信息是一个点对应一个位移信息,此处只为方便理解,以最简单情形进行说明),初始空间点云C2中一部分的位移信息为D1、一部分的位移信息为D3,从而C1和C2的拼接区域很有可能在位移信息为D1的区域中,从而基于位移信息D1将C1和C2拼接位置对齐。
在前空间点云与初始空间点云进行拼接位置对齐之后,根据当前空间点云的角度信息和初始空间点云的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。为了辅助理解尝试角度区间的确定原理,列举一简单实例,例如,参照图2,当前空间点云C1和初始空间点云C2的拼接位置是位移信息D1,当前空间点云C1的角度信息对应空间角为E1,初始空间点云C2的角度信息对应空间角为E2,因为初始空间点云C2的空间角为E2,那么当前空间点云C1应当在空间角E2附近的角度范围内进行拼接,这样拼接成功率才会很高,所以根据空间角E1和E2,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。在得到尝试角度区间之后,基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接,以完成当前空间点云与初始空间点云的拼接。
从而本申请将尝试角度区间作为传统ICP算法的约束条件,可以大大收敛传统ICP算法所需尝试迭代的次数,在不增加手持扫描仪的空间点云拼接处理装置硬件成本的前提下,大大提高了空间点云拼接速度,有效降低了三维扫描耗时、提高了三维扫描的效率。同时,基于一个空间点云拼接规律:“两片空间点云存在相同点越多,该两片空间点云的拼接尝试次数越少;相同点的特征越明显(特征明显是指三维特征明显少见、变化剧烈)该两片空间点云的拼接尝试次数越少”,本发明无需减少进行拼接的抽取点个数、只抽取少部分点以组成一个“稀疏点云”来做空间点云拼接,无需以此来提高空间点云拼接速度,从而避免因基于“稀疏点云”进行拼接所带来的点云拼接精度差的问题。并且,本发明无法基于提取特征明显的点来减少拼接尝试次数,在特征明显点较少时,也能保证拼接速度和拼接精度,即本发明无需牺牲拼接精度,也能显著提高拼接速度。
在本实施例中,通过当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息,然后将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云,若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,从而基于指向信息进行针对性空间点云拼接,避免在空间全角度范围内进行盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率,进而基于本发明手持扫描仪点云拼接方法的手持扫描仪在牙科牙齿扫描时的扫描效率,提高了手持扫描仪的使用体验。
进一步地,在本发明手持扫描仪点云拼接方法另一实施例中,参照图5,步骤S40之后还包括:
步骤S51,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;
步骤S51,若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
在基于当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接尝试后,判断当前空间点云和初始空间点云是否拼接成功,若当前空间点云和初始空间点云拼接成功,从而当前空间点云和初始空间点云拼接合成为一个新的空间点云,将该新的空间点云作为新的初始空间点云进行存储;若当前空间点云和初始空间点云拼接失败,当前空间点云和初始空间点云无法拼接合成为一个新的空间点云,从而将当前空间点云作为新的初始空间点云,将之前的初始空间点云丢弃。例如前空间点云C1和初始空间点云C2拼接失败,则将C1作为新的初始空间点云,将C2丢弃。若后续还有当前空间点云C3,则将当前空间点云C3与新的初始空间点云C1进行拼接;从而可以实现空间点云的快速拼接。
基于上述手持扫描仪的硬件结构,提出本发明手持扫描仪点云拼接装置各实施例,手持扫描仪点云拼接装置可为手持扫描仪的一部分(如手持扫描仪控制器的一部分),也可以是手持扫描仪外界装置,该持扫描仪点云拼接装置主要应用于牙科中牙齿扫描建模成型应用中,手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,姿态传感器可实时采集手持扫描仪的指向信息(即手持扫描仪的姿态信息),当然姿态传感器也可以在手持扫描仪的扫描头进行物体扫描时,同步采集手持扫描仪进行扫描并生成空间点云时的指向信息。
在本发明手持扫描仪点云拼接装置一实施例中,参照图6,所述手持扫描仪点云拼接装置包括:
扫描模块10,用于当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
扫描指令可以是手持扫描仪自行生成,例如手持扫描仪在进入自动扫描模式时,手持扫描仪每秒多次生成扫描指令,以控制手持扫描仪的扫描头主动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如手持扫描仪每秒生成10个扫描指令,即扫描头每秒进行10次扫描,并基于姿态传感器获取扫描头进行这10次扫描时的指向信息。
当然,扫描指令也可以是使用者操作手持扫描仪触发生成,当用户操作手持扫描仪的扫描键时,手持扫描仪生成一个或多个扫描指令,以控制手持扫描仪被动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如使用者每操作一次手持扫描仪生成1个扫描指令以控制扫描头进行1次扫描,并基于姿态传感器获取扫描头进行这1次扫描时的指向信息。
当检测到扫描指令时,扫描模块10控制手持扫描仪的扫描头对待扫描物体进行扫描,生成对应的空间点云,将这些机遇扫描指令得到的空间点云作为当前空间点云,并且将姿态传感器获取的扫描头指向信息作为当前指向信息。然后根据当前空间点云的生成时间和指向信息的生成时间,将当前空间点云与当前指向信息关联起来并对应存储。例如在时刻A1、A2和A3检测到扫描指令,对应生成空间点云C1、C2和C3,姿态传感器对应同步生成对应的指向信息Z1、Z2和Z3,从而指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储。
判断模块20,用于将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
拼接模块30,用于若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
在当前空间点云和当前指向信息关联之后,判断模块20判断手持扫描仪中是否还存有其他空间点云,即判断当前空间点云是否为初始空间点云,若当前空间点云时初始空间点云,则拼接模块30将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则拼接模块30获取当前空间点云的当前指向信息以及手持扫描仪中存储的初始空间点云的初始指向信息,根据当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接。
比如,指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储,手持扫描仪依次生成空间点云C1、C2和C3,从而首先判断C1是否为初始空间点云,显然C1是初始空间点云,从而C1作为初始空间点云,C1的指向信息为Z1;然后判断C2是否为初始空间点云,显然C2不是初始空间点云,根据Z1和C2的指向信息Z2,对C1和C2进行拼接;若C1和C2拼接成功了,C1和C2共同拼接成为空间点云C12,将空间点云C12作为新的初始空间点云,C12对应的指向信息可以为Z1、Z2或由Z1和Z2求出的参考指向信息Z12。然后继续判断C3是否为初始空间点云,在判定C3不是初始空间点云后,根据C3的指向信息Z3和C12的指向信息(Z1、Z2或Z12),对C3和C12进行拼接,若C3和C12拼接失败,C12和C3共同组成新的初始空间点云,即初始空间点云可为多个;若C3和C12拼接成功,则由C3和C12拼接成的空间点云C123作为新的初始空间点云,C123的指向信息科为Z1、Z2、Z3或由Z1、Z2和Z3共同求出的参考指向信息Z123。
具体地,所述拼接模块30用于:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
姿态传感器基于三维空间的参考坐标系得出扫描头每次扫描生成空间点云所对应的指向信息,指向信息包括扫描得到空间点云时扫描头在参考坐标系中的位移信息和角度信息,位移信息表明此次扫描中扫描头的空间位置,角度信息表明此次扫描中扫描头的空间倾斜角度。
所以拼接模块30根据当前空间点云的位移信息和初始空间点云的位移信息,将当前空间点云与初始空间点云进行空间位置定位,即根据当前空间点云的扫描生成位置和初始空间点云的扫描生成位置,粗略地确定当前空间点云与初始空间点云存在相同点云区域以进行拼接的位置,也就是将当前空间点云与初始空间点云进行拼接位置对齐。为了辅助理解拼接位置对齐,列举一简单实例,例如,参照图1,当前空间点云C1中一部分的位移信息为D1、一部分的位移信息为D2(具体地空间点云位移信息是一个点对应一个位移信息,此处只为方便理解,以最简单情形进行说明),初始空间点云C2中一部分的位移信息为D1、一部分的位移信息为D3,从而C1和C2的拼接区域很有可能在位移信息为D1的区域中,从而基于位移信息D1将C1和C2拼接位置对齐。
在前空间点云与初始空间点云进行拼接位置对齐之后,拼接模块30根据当前空间点云的角度信息和初始空间点云的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。为了辅助理解尝试角度区间的确定原理,列举一简单实例,例如,参照图2,当前空间点云C1和初始空间点云C2的拼接位置是位移信息D1,当前空间点云C1的角度信息对应空间角为E1,初始空间点云C2的角度信息对应空间角为E2,因为初始空间点云C2的空间角为E2,那么当前空间点云C1应当在空间角E2附近的角度范围内进行拼接,这样拼接成功率才会很高,所以根据空间角E1和E2,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。在得到尝试角度区间之后,拼接模块30基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接,以完成当前空间点云与初始空间点云的拼接。
从而本申请将尝试角度区间作为传统ICP算法的约束条件,可以大大收敛传统ICP算法所需尝试迭代的次数,在不增加手持扫描仪的空间点云拼接处理装置硬件成本的前提下,大大提高了空间点云拼接速度,有效降低了三维扫描耗时、提高了三维扫描的效率。同时,基于一个空间点云拼接规律:“两片空间点云存在相同点越多,该两片空间点云的拼接尝试次数越少;相同点的特征越明显(特征明显是指三维特征明显少见、变化剧烈)该两片空间点云的拼接尝试次数越少”,本发明无需减少进行拼接的抽取点个数、只抽取少部分点以组成一个“稀疏点云”来做空间点云拼接,无需以此来提高空间点云拼接速度,从而避免因基于“稀疏点云”进行拼接所带来的点云拼接精度差的问题。并且,本发明无法基于提取特征明显的点来减少拼接尝试次数,在特征明显点较少时,也能保证拼接速度和拼接精度,即本发明无需牺牲拼接精度,也能显著提高拼接速度。
在本实施例中,通过当检测到扫描指令时,拼接模块30获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息,然后拼接模块30将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云,若当前空间点云是初始空间点云,则拼接模块30将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则拼接模块30根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,从而基于指向信息进行针对性空间点云拼接,避免在空间全角度范围内进行盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率,进而基于本发明手持扫描仪点云拼接方法的手持扫描仪在牙科牙齿扫描时的扫描效率,提高了手持扫描仪的使用体验。
进一步地,在本发明手持扫描仪点云拼接装置另一实施例中,参照图7,手持扫描仪点云拼接装置还包括:
循环模,40,用于在根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接之后,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
在基于当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接尝试后,循环模,40判断当前空间点云和初始空间点云是否拼接成功,若当前空间点云和初始空间点云拼接成功,从而当前空间点云和初始空间点云拼接合成为一个新的空间点云,将该新的空间点云作为新的初始空间点云进行存储;若当前空间点云和初始空间点云拼接失败,当前空间点云和初始空间点云无法拼接合成为一个新的空间点云,从而将当前空间点云作为新的初始空间点云,将之前的初始空间点云丢弃。例如前空间点云C1和初始空间点云C2拼接失败,则将C1作为新的初始空间点云,将C2丢弃。若后续还有当前空间点云C3,则将当前空间点云C3与新的初始空间点云C1进行拼接;从而可以实现空间点云的快速拼接。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (6)

1.一种手持扫描仪,其特征在于,所述手持扫描仪包括:
扫描头,用于扫描外设物体生成空间点云;
姿态传感器,用于检测所述扫描头的指向信息;
控制器,与扫描头和姿态传感器电性链接,当控制器控制扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息,在检测到所述扫描头生成的当前空间点云不是初始空间点云时,根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接;
其中,根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,包括:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
2.如权利要求1所述的手持扫描仪,其特征在于,所述手持扫描仪还包括与所述控制器电性连接的存储器,存储器关联存储扫描头生成的空间点云和姿态传感器同步检测的扫描头指向信息。
3.一种手持扫描仪点云拼接方法,其特征在于,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接方法包括:
当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;
若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接;
其中,所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤包括:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
4.如权利要求3所述的手持扫描仪点云拼接方法,其特征在于,所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤之后还包括:
若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;
若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
5.一种手持扫描仪点云拼接装置,其特征在于,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接装置包括:
扫描模块,用于当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
判断模块,用于将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
拼接模块,用于若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接;
其中,所述拼接模块用于:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
6.如权利要求5所述的手持扫描仪点云拼接装置,其特征在于,所述手持扫描仪点云拼接装置还包括:
循环模块,用于在根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接之后,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
CN201611099407.XA 2016-12-01 2016-12-01 手持扫描仪、手持扫描仪点云拼接方法和装置 Active CN106600531B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611099407.XA CN106600531B (zh) 2016-12-01 2016-12-01 手持扫描仪、手持扫描仪点云拼接方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611099407.XA CN106600531B (zh) 2016-12-01 2016-12-01 手持扫描仪、手持扫描仪点云拼接方法和装置

Publications (2)

Publication Number Publication Date
CN106600531A CN106600531A (zh) 2017-04-26
CN106600531B true CN106600531B (zh) 2020-04-14

Family

ID=58597012

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611099407.XA Active CN106600531B (zh) 2016-12-01 2016-12-01 手持扫描仪、手持扫描仪点云拼接方法和装置

Country Status (1)

Country Link
CN (1) CN106600531B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108269300B (zh) * 2017-10-31 2019-07-09 先临三维科技股份有限公司 牙齿三维数据重建方法、装置和系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104299211A (zh) * 2014-09-25 2015-01-21 周翔 一种自由移动式三维扫描方法
CN104615880A (zh) * 2015-01-31 2015-05-13 电子科技大学中山学院 一种三维激光雷达点云匹配的快速icp方法
CN204498219U (zh) * 2015-02-13 2015-07-22 深圳市维新登拓医疗科技有限公司 扫描仪
CN104838228A (zh) * 2012-12-05 2015-08-12 法罗技术股份有限公司 三维扫描仪及操作方法
CN105078573A (zh) * 2014-05-11 2015-11-25 复旦大学 基于手持式扫描仪的神经导航空间配准方法
CN105761206A (zh) * 2014-12-16 2016-07-13 富泰华工业(深圳)有限公司 点云拼接方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104838228A (zh) * 2012-12-05 2015-08-12 法罗技术股份有限公司 三维扫描仪及操作方法
CN105078573A (zh) * 2014-05-11 2015-11-25 复旦大学 基于手持式扫描仪的神经导航空间配准方法
CN104299211A (zh) * 2014-09-25 2015-01-21 周翔 一种自由移动式三维扫描方法
CN105761206A (zh) * 2014-12-16 2016-07-13 富泰华工业(深圳)有限公司 点云拼接方法及系统
CN104615880A (zh) * 2015-01-31 2015-05-13 电子科技大学中山学院 一种三维激光雷达点云匹配的快速icp方法
CN204498219U (zh) * 2015-02-13 2015-07-22 深圳市维新登拓医疗科技有限公司 扫描仪

Also Published As

Publication number Publication date
CN106600531A (zh) 2017-04-26

Similar Documents

Publication Publication Date Title
KR102559625B1 (ko) 증강 현실 출력 방법 및 이를 지원하는 전자 장치
CN109389665B (zh) 三维模型的纹理获取方法、装置、设备和存储介质
CN104869304B (zh) 显示对焦的方法和应用该方法的电子设备
JP4608326B2 (ja) 指示動作認識装置及び指示動作認識プログラム
EP2843625A1 (en) Method for synthesizing images and electronic device thereof
EP3276942B1 (en) Electronic device and method for controlling the same
CN110866497B (zh) 基于点线特征融合的机器人定位与建图方法和装置
US20180307819A1 (en) Terminal control method and terminal, storage medium
JP2016006589A (ja) 表示装置、制御プログラム、および制御方法
US11688136B2 (en) 3D object model reconstruction from 2D images
JP7078234B2 (ja) 拡張現実空間に配置される3dオブジェクトを生成する方法
CN112181141B (zh) Ar定位的方法、装置、电子设备及存储介质
KR102392437B1 (ko) 반사 기반 제어 활성화 기법
US20230267687A1 (en) 3d object model reconstruction from 2d images
CN112597785A (zh) 一种目标对象图像采集的引导方法及系统
EP2107529A2 (en) Storage medium storing image conversion programm and image conversion apparatus
KR102264591B1 (ko) 영상 처리 방법 및 이를 지원하는 전자 장치
CN114466139A (zh) 追踪定位方法、系统、装置、设备、存储介质和产品
CN108604010A (zh) 用于校正设备中的漂移的方法和该设备
CN106600531B (zh) 手持扫描仪、手持扫描仪点云拼接方法和装置
CN109785444A (zh) 图像中现实平面的识别方法、装置及移动终端
CN112733579A (zh) 对象重建的方法、装置、设备及存储介质
KR102048208B1 (ko) 증강현실을 이용한 x선 촬영 시뮬레이션 방법 및 프로그램
CN109840515B (zh) 面部姿态调整方法、装置和终端
CN112348868A (zh) 一种通过检测和标定恢复单目slam尺度的方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant