CN106600531A - 手持扫描仪、手持扫描仪点云拼接方法和装置 - Google Patents
手持扫描仪、手持扫描仪点云拼接方法和装置 Download PDFInfo
- Publication number
- CN106600531A CN106600531A CN201611099407.XA CN201611099407A CN106600531A CN 106600531 A CN106600531 A CN 106600531A CN 201611099407 A CN201611099407 A CN 201611099407A CN 106600531 A CN106600531 A CN 106600531A
- Authority
- CN
- China
- Prior art keywords
- point cloud
- spatial point
- information
- initial
- current spatial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 239000000523 sample Substances 0.000 claims description 71
- 238000006073 displacement reaction Methods 0.000 claims description 38
- 238000003860 storage Methods 0.000 claims description 24
- 230000001360 synchronised effect Effects 0.000 claims description 9
- 230000002093 peripheral effect Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 238000010408 sweeping Methods 0.000 description 3
- 125000004122 cyclic group Chemical group 0.000 description 2
- 238000000465 moulding Methods 0.000 description 2
- 201000004569 Blindness Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
- Image Input (AREA)
Abstract
本发明公开了一种手持扫描仪、手持扫描仪点云拼接方法和装置,该方法包括当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取扫描头的当前指向信息;将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,拼接完成后的空间点云,作为初始空间点云。本发明避免在空间全角度范围内进行遍例式、盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率。
Description
技术领域
本发明涉及三维扫描技术领域,尤其涉及一种手持扫描仪、手持扫描仪点云拼接方法和装置。
背景技术
随着三维扫描技术的发展和研究,三维扫描仪的应用越来越广泛,特别是近年来三维扫描仪应用于牙科的牙齿矫正和义齿塑造,由于人体牙齿对三维扫描的精度要求很高(主要用途是通过三维扫描生成义齿模型,以供工厂基于义齿模型进行义齿实体制作),且对三维扫描的效率要求高(病人和医生很难有足够的耐心容忍三维扫描仪的反复扫描操作)。
但是,现有三维扫描技术中对于扫描所得的两片空间点云的拼接(又称配准),是简单基于传统ICP(Iterative Closest Point,就近点搜索法)算法实现空间点云在360度的尝试角度区间进行反复拼接尝试,由于拼接尝试的盲目性,造成迭代次数多、耗时长,无法满足人们对三维扫描效率的要求。
发明内容
本发明的主要目的在于提供一种手持扫描仪、手持扫描仪点云拼接方法和装置,旨在解决现有三维扫描耗时长、效率低的技术问题。
为实现上述目的,本发明实施例提供一种手持扫描仪,所述手持扫描仪包括:
扫描头,用于扫描外设物体生成空间点云;
姿态传感器,用于检测所述扫描头的指向信息;
控制器,与扫描头和姿态传感器电性链接,当控制器控制扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息。
可选地,所述手持扫描仪还包括与所述控制器电性连接的存储器,存储器关联存储扫描头生成的空间点云和姿态传感器同步检测的扫描头指向信息。
本发明还提供一种手持扫描仪点云拼接方法,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接方法包括:
当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;
若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
可选地,所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤包括:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
可选地,所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤之后还包括:
若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;
若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
本发明还提供一种手持扫描仪点云拼接装置,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接装置包括:
扫描模块,用于当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
判断模块,用于将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
拼接模块,用于若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
可选地,所述拼接模块用于:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
可选地,所述手持扫描仪点云拼接装置还包括:
循环模块,用于在根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接之后,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
本发明通过当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息,然后将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云,若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,从而基于指向信息进行针对性空间点云拼接,避免在空间全角度范围内进行盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率,进而基于本发明手持扫描仪点云拼接方法的手持扫描仪在牙科牙齿扫描时的扫描效率,提高了手持扫描仪的使用体验。
附图说明
图1为本发明中空间点云拼接位置对齐的一场景示意图;
图2为本发明中空间点云尝试角度区间确定的一场景示意图;
图3为本发明手持扫描仪点云拼接方法一实施例的流程示意图;
图4为本发明手持扫描仪点云拼接方法又一实施例的流程示意图;
图5为本发明手持扫描仪点云拼接方法另一实施例的流程示意图;
图6为本发明手持扫描仪点云拼接装置一实施例的模块示意图;
图7为本发明手持扫描仪点云拼接装置另一实施例的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
本发明提供一种手持扫描仪,手持扫描仪包括:扫描头,用于扫描外设物体生成空间点云;姿态传感器,用于检测所述扫描头的指向信息;控制器,与扫描头和姿态传感器电性链接,当控制器控制扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息。
扫描头中设有对外设物体(如病人牙齿)进行扫描光学组件,从而生成扫描覆盖到区域的空间点云。姿态传感器是基于MEMS技术的高性能三维运动姿态测量系统。它包含三轴陀螺仪、三轴加速度计,三轴电子罗盘等运动传感器,通过内嵌的低功耗ARM处理器得到经过温度补偿的三维姿态与方位等数据。姿态传感器检测并获取手持扫描仪的扫描头每次进行扫描时的指向信息,例如姿态传感器在时刻A1、A2和A3所采集的指向信息依次为Z1、Z2、Z3,其中扫描头在时刻A1进行扫描得到空间点云C1,在时刻A3进行扫描得到空间点云C3,从而指向信息Z1与空间点云C1关联存储,指向信息Z3与空间点云C3关联存储。控制器可为控制芯片,在扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息。
此外,手持扫描仪还包括与控制器电性连接的存储器,存储器关联存储扫描头生成的空间点云和姿态传感器同步检测的扫描头指向信息。存储器可以存储由控制器执行的处理和控制操作的软件程序等等,或者可以暂时地存储己经输出或将要输出的数据(例如,已扫描生成的空间点云、拼接成功的空间点云、拼接失败的空间点云等等)。而且,存储器可以存储关联对应的空间点云和指向信息。
存储器可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。
此外,手持扫描仪可与外界显示终端连接,显示设备包括显示单元(如触摸屏、显示屏等),显示单元可同步显示扫描头扫描生成的空间点云以及拼接成功或失败的空间点云,以利于手持扫描仪的使用者对扫描进度有一个直观的了解。
进一步地,本发明还提供一种手持扫描仪点云拼接方法,该手持扫描仪点云拼接方法主要应用于牙科中牙齿扫描建模成型应用中,手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,姿态传感器可实时采集手持扫描仪的指向信息(即手持扫描仪的姿态信息),当然姿态传感器也可以在手持扫描仪的扫描头进行物体扫描时,同步采集手持扫描仪进行扫描并生成空间点云时的指向信息。
在本发明手持扫描仪点云拼接方法一实施例中,参照图3,该手持扫描仪点云拼接方法包括:
步骤S10,当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
扫描指令可以是手持扫描仪自行生成,例如手持扫描仪在进入自动扫描模式时,手持扫描仪每秒多次生成扫描指令,以控制手持扫描仪的扫描头主动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如手持扫描仪每秒生成10个扫描指令,即扫描头每秒进行10次扫描,并基于姿态传感器获取扫描头进行这10次扫描时的指向信息。
当然,扫描指令也可以是使用者操作手持扫描仪触发生成,当用户操作手持扫描仪的扫描键时,手持扫描仪生成一个或多个扫描指令,以控制手持扫描仪被动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如使用者每操作一次手持扫描仪生成1个扫描指令以控制扫描头进行1次扫描,并基于姿态传感器获取扫描头进行这1次扫描时的指向信息。
当检测到扫描指令时,控制手持扫描仪的扫描头对待扫描物体进行扫描,生成对应的空间点云,将这些机遇扫描指令得到的空间点云作为当前空间点云,并且将姿态传感器获取的扫描头指向信息作为当前指向信息。然后根据当前空间点云的生成时间和指向信息的生成时间,将当前空间点云与当前指向信息关联起来并对应存储。例如在时刻A1、A2和A3检测到扫描指令,对应生成空间点云C1、C2和C3,姿态传感器对应同步生成对应的指向信息Z1、Z2和Z3,从而指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储。
步骤S20,将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
步骤S30,若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;
步骤S40,若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
在当前空间点云和当前指向信息关联之后,判断手持扫描仪中是否还存有其他空间点云,即判断当前空间点云是否为初始空间点云,若当前空间点云时初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则获取当前空间点云的当前指向信息以及手持扫描仪中存储的初始空间点云的初始指向信息,根据当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接。
比如,指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储,手持扫描仪依次生成空间点云C1、C2和C3,从而首先判断C1是否为初始空间点云,显然C1是初始空间点云,从而C1作为初始空间点云,C1的指向信息为Z1;然后判断C2是否为初始空间点云,显然C2不是初始空间点云,根据Z1和C2的指向信息Z2,对C1和C2进行拼接;若C1和C2拼接成功了,C1和C2共同拼接成为空间点云C12,将空间点云C12作为新的初始空间点云,C12对应的指向信息可以为Z1、Z2或由Z1和Z2求出的参考指向信息Z12。然后继续判断C3是否为初始空间点云,在判定C3不是初始空间点云后,根据C3的指向信息Z3和C12的指向信息(Z1、Z2或Z12),对C3和C12进行拼接,若C3和C12拼接失败,C12和C3共同组成新的初始空间点云,即初始空间点云可为多个;若C3和C12拼接成功,则由C3和C12拼接成的空间点云C123作为新的初始空间点云,C123的指向信息科为Z1、Z2、Z3或由Z1、Z2和Z3共同求出的参考指向信息Z123。
具体地,参照图4,步骤S40中根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤包括:
步骤S41,根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
步骤S42,根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
步骤S43,基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
姿态传感器基于三维空间的参考坐标系得出扫描头每次扫描生成空间点云所对应的指向信息,指向信息包括扫描得到空间点云时扫描头在参考坐标系中的位移信息和角度信息,位移信息表明此次扫描中扫描头的空间位置,角度信息表明此次扫描中扫描头的空间倾斜角度。
所以根据当前空间点云的位移信息和初始空间点云的位移信息,将当前空间点云与初始空间点云进行空间位置定位,即根据当前空间点云的扫描生成位置和初始空间点云的扫描生成位置,粗略地确定当前空间点云与初始空间点云存在相同点云区域以进行拼接的位置,也就是将当前空间点云与初始空间点云进行拼接位置对齐。为了辅助理解拼接位置对齐,列举一简单实例,例如,参照图1,当前空间点云C1中一部分的位移信息为D1、一部分的位移信息为D2(具体地空间点云位移信息是一个点对应一个位移信息,此处只为方便理解,以最简单情形进行说明),初始空间点云C2中一部分的位移信息为D1、一部分的位移信息为D3,从而C1和C2的拼接区域很有可能在位移信息为D1的区域中,从而基于位移信息D1将C1和C2拼接位置对齐。
在前空间点云与初始空间点云进行拼接位置对齐之后,根据当前空间点云的角度信息和初始空间点云的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。为了辅助理解尝试角度区间的确定原理,列举一简单实例,例如,参照图2,当前空间点云C1和初始空间点云C2的拼接位置是位移信息D1,当前空间点云C1的角度信息对应空间角为E1,初始空间点云C2的角度信息对应空间角为E2,因为初始空间点云C2的空间角为E2,那么当前空间点云C1应当在空间角E2附近的角度范围内进行拼接,这样拼接成功率才会很高,所以根据空间角E1和E2,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。在得到尝试角度区间之后,基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接,以完成当前空间点云与初始空间点云的拼接。
从而本申请将尝试角度区间作为传统ICP算法的约束条件,可以大大收敛传统ICP算法所需尝试迭代的次数,在不增加手持扫描仪的空间点云拼接处理装置硬件成本的前提下,大大提高了空间点云拼接速度,有效降低了三维扫描耗时、提高了三维扫描的效率。同时,基于一个空间点云拼接规律:“两片空间点云存在相同点越多,该两片空间点云的拼接尝试次数越少;相同点的特征越明显(特征明显是指三维特征明显少见、变化剧烈)该两片空间点云的拼接尝试次数越少”,本发明无需减少进行拼接的抽取点个数、只抽取少部分点以组成一个“稀疏点云”来做空间点云拼接,无需以此来提高空间点云拼接速度,从而避免因基于“稀疏点云”进行拼接所带来的点云拼接精度差的问题。并且,本发明无法基于提取特征明显的点来减少拼接尝试次数,在特征明显点较少时,也能保证拼接速度和拼接精度,即本发明无需牺牲拼接精度,也能显著提高拼接速度。
在本实施例中,通过当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息,然后将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云,若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,从而基于指向信息进行针对性空间点云拼接,避免在空间全角度范围内进行盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率,进而基于本发明手持扫描仪点云拼接方法的手持扫描仪在牙科牙齿扫描时的扫描效率,提高了手持扫描仪的使用体验。
进一步地,在本发明手持扫描仪点云拼接方法另一实施例中,参照图5,步骤S40之后还包括:
步骤S51,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;
步骤S51,若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
在基于当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接尝试后,判断当前空间点云和初始空间点云是否拼接成功,若当前空间点云和初始空间点云拼接成功,从而当前空间点云和初始空间点云拼接合成为一个新的空间点云,将该新的空间点云作为新的初始空间点云进行存储;若当前空间点云和初始空间点云拼接失败,当前空间点云和初始空间点云无法拼接合成为一个新的空间点云,从而将当前空间点云作为新的初始空间点云,将之前的初始空间点云丢弃。例如前空间点云C1和初始空间点云C2拼接失败,则将C1作为新的初始空间点云,将C2丢弃。若后续还有当前空间点云C3,则将当前空间点云C3与新的初始空间点云C1进行拼接;从而可以实现空间点云的快速拼接。
基于上述手持扫描仪的硬件结构,提出本发明手持扫描仪点云拼接装置各实施例,手持扫描仪点云拼接装置可为手持扫描仪的一部分(如手持扫描仪控制器的一部分),也可以是手持扫描仪外界装置,该持扫描仪点云拼接装置主要应用于牙科中牙齿扫描建模成型应用中,手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,姿态传感器可实时采集手持扫描仪的指向信息(即手持扫描仪的姿态信息),当然姿态传感器也可以在手持扫描仪的扫描头进行物体扫描时,同步采集手持扫描仪进行扫描并生成空间点云时的指向信息。
在本发明手持扫描仪点云拼接装置一实施例中,参照图6,所述手持扫描仪点云拼接装置包括:
扫描模块10,用于当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
扫描指令可以是手持扫描仪自行生成,例如手持扫描仪在进入自动扫描模式时,手持扫描仪每秒多次生成扫描指令,以控制手持扫描仪的扫描头主动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如手持扫描仪每秒生成10个扫描指令,即扫描头每秒进行10次扫描,并基于姿态传感器获取扫描头进行这10次扫描时的指向信息。
当然,扫描指令也可以是使用者操作手持扫描仪触发生成,当用户操作手持扫描仪的扫描键时,手持扫描仪生成一个或多个扫描指令,以控制手持扫描仪被动进行对应次数的扫描,并且扫描头每进行一次扫描姿态传感器也同步检测一次扫描头的指向信息。例如使用者每操作一次手持扫描仪生成1个扫描指令以控制扫描头进行1次扫描,并基于姿态传感器获取扫描头进行这1次扫描时的指向信息。
当检测到扫描指令时,扫描模块10控制手持扫描仪的扫描头对待扫描物体进行扫描,生成对应的空间点云,将这些机遇扫描指令得到的空间点云作为当前空间点云,并且将姿态传感器获取的扫描头指向信息作为当前指向信息。然后根据当前空间点云的生成时间和指向信息的生成时间,将当前空间点云与当前指向信息关联起来并对应存储。例如在时刻A1、A2和A3检测到扫描指令,对应生成空间点云C1、C2和C3,姿态传感器对应同步生成对应的指向信息Z1、Z2和Z3,从而指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储。
判断模块20,用于将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
拼接模块30,用于若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
在当前空间点云和当前指向信息关联之后,判断模块20判断手持扫描仪中是否还存有其他空间点云,即判断当前空间点云是否为初始空间点云,若当前空间点云时初始空间点云,则拼接模块30将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则拼接模块30获取当前空间点云的当前指向信息以及手持扫描仪中存储的初始空间点云的初始指向信息,根据当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接。
比如,指向信息Z1与空间点云C1关联存储,指向信息Z2与空间点云C2关联存储,指向信息Z3与空间点云C3关联存储,手持扫描仪依次生成空间点云C1、C2和C3,从而首先判断C1是否为初始空间点云,显然C1是初始空间点云,从而C1作为初始空间点云,C1的指向信息为Z1;然后判断C2是否为初始空间点云,显然C2不是初始空间点云,根据Z1和C2的指向信息Z2,对C1和C2进行拼接;若C1和C2拼接成功了,C1和C2共同拼接成为空间点云C12,将空间点云C12作为新的初始空间点云,C12对应的指向信息可以为Z1、Z2或由Z1和Z2求出的参考指向信息Z12。然后继续判断C3是否为初始空间点云,在判定C3不是初始空间点云后,根据C3的指向信息Z3和C12的指向信息(Z1、Z2或Z12),对C3和C12进行拼接,若C3和C12拼接失败,C12和C3共同组成新的初始空间点云,即初始空间点云可为多个;若C3和C12拼接成功,则由C3和C12拼接成的空间点云C123作为新的初始空间点云,C123的指向信息科为Z1、Z2、Z3或由Z1、Z2和Z3共同求出的参考指向信息Z123。
具体地,所述拼接模块30用于:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
姿态传感器基于三维空间的参考坐标系得出扫描头每次扫描生成空间点云所对应的指向信息,指向信息包括扫描得到空间点云时扫描头在参考坐标系中的位移信息和角度信息,位移信息表明此次扫描中扫描头的空间位置,角度信息表明此次扫描中扫描头的空间倾斜角度。
所以拼接模块30根据当前空间点云的位移信息和初始空间点云的位移信息,将当前空间点云与初始空间点云进行空间位置定位,即根据当前空间点云的扫描生成位置和初始空间点云的扫描生成位置,粗略地确定当前空间点云与初始空间点云存在相同点云区域以进行拼接的位置,也就是将当前空间点云与初始空间点云进行拼接位置对齐。为了辅助理解拼接位置对齐,列举一简单实例,例如,参照图1,当前空间点云C1中一部分的位移信息为D1、一部分的位移信息为D2(具体地空间点云位移信息是一个点对应一个位移信息,此处只为方便理解,以最简单情形进行说明),初始空间点云C2中一部分的位移信息为D1、一部分的位移信息为D3,从而C1和C2的拼接区域很有可能在位移信息为D1的区域中,从而基于位移信息D1将C1和C2拼接位置对齐。
在前空间点云与初始空间点云进行拼接位置对齐之后,拼接模块30根据当前空间点云的角度信息和初始空间点云的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。为了辅助理解尝试角度区间的确定原理,列举一简单实例,例如,参照图2,当前空间点云C1和初始空间点云C2的拼接位置是位移信息D1,当前空间点云C1的角度信息对应空间角为E1,初始空间点云C2的角度信息对应空间角为E2,因为初始空间点云C2的空间角为E2,那么当前空间点云C1应当在空间角E2附近的角度范围内进行拼接,这样拼接成功率才会很高,所以根据空间角E1和E2,确定当前空间点云与初始空间点云进行拼接的尝试角度区间。在得到尝试角度区间之后,拼接模块30基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接,以完成当前空间点云与初始空间点云的拼接。
从而本申请将尝试角度区间作为传统ICP算法的约束条件,可以大大收敛传统ICP算法所需尝试迭代的次数,在不增加手持扫描仪的空间点云拼接处理装置硬件成本的前提下,大大提高了空间点云拼接速度,有效降低了三维扫描耗时、提高了三维扫描的效率。同时,基于一个空间点云拼接规律:“两片空间点云存在相同点越多,该两片空间点云的拼接尝试次数越少;相同点的特征越明显(特征明显是指三维特征明显少见、变化剧烈)该两片空间点云的拼接尝试次数越少”,本发明无需减少进行拼接的抽取点个数、只抽取少部分点以组成一个“稀疏点云”来做空间点云拼接,无需以此来提高空间点云拼接速度,从而避免因基于“稀疏点云”进行拼接所带来的点云拼接精度差的问题。并且,本发明无法基于提取特征明显的点来减少拼接尝试次数,在特征明显点较少时,也能保证拼接速度和拼接精度,即本发明无需牺牲拼接精度,也能显著提高拼接速度。
在本实施例中,通过当检测到扫描指令时,拼接模块30获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息,然后拼接模块30将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云,若当前空间点云是初始空间点云,则拼接模块30将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则拼接模块30根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接,从而基于指向信息进行针对性空间点云拼接,避免在空间全角度范围内进行盲目地空间点云拼接尝试,有效降低了空间点云拼接尝试次数,缩短了三维扫描耗时长,提高了三维扫描效率,进而基于本发明手持扫描仪点云拼接方法的手持扫描仪在牙科牙齿扫描时的扫描效率,提高了手持扫描仪的使用体验。
进一步地,在本发明手持扫描仪点云拼接装置另一实施例中,参照图7,手持扫描仪点云拼接装置还包括:
循环模,40,用于在根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接之后,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
在基于当前指向信息和初始指向信息,对当前空间点云和初始空间点云进行拼接尝试后,循环模,40判断当前空间点云和初始空间点云是否拼接成功,若当前空间点云和初始空间点云拼接成功,从而当前空间点云和初始空间点云拼接合成为一个新的空间点云,将该新的空间点云作为新的初始空间点云进行存储;若当前空间点云和初始空间点云拼接失败,当前空间点云和初始空间点云无法拼接合成为一个新的空间点云,从而将当前空间点云作为新的初始空间点云,将之前的初始空间点云丢弃。例如前空间点云C1和初始空间点云C2拼接失败,则将C1作为新的初始空间点云,将C2丢弃。若后续还有当前空间点云C3,则将当前空间点云C3与新的初始空间点云C1进行拼接;从而可以实现空间点云的快速拼接。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (8)
1.一种手持扫描仪,其特征在于,所述手持扫描仪包括:
扫描头,用于扫描外设物体生成空间点云;
姿态传感器,用于检测所述扫描头的指向信息;
控制器,与扫描头和姿态传感器电性链接,当控制器控制扫描头扫描并生成空间点云时,同步控制姿态传感器检测所述扫描头的指向信息。
2.如权利要求1所述的手持扫描仪,其特征在于,所述手持扫描仪还包括与所述控制器电性连接的存储器,存储器关联存储扫描头生成的空间点云和姿态传感器同步检测的扫描头指向信息。
3.一种手持扫描仪点云拼接方法,其特征在于,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接方法包括:
当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;
若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
4.如权利要求3所述的手持扫描仪点云拼接方法,其特征在于,
所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤包括:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
5.如权利要求3或4所述的手持扫描仪点云拼接方法,其特征在于,所述根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接的步骤之后还包括:
若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;
若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
6.一种手持扫描仪点云拼接装置,其特征在于,所述手持扫描仪包括用于扫描物体形成空间点云的扫描头,以及用于检测手持扫描仪扫描头指向信息的姿态传感器,
所述手持扫描仪点云拼接装置包括:
扫描模块,用于当检测到扫描指令时,获取手持扫描仪扫描的当前空间点云,并基于姿态传感器获取所述扫描头的当前指向信息;
判断模块,用于将当前空间点云和当前指向信息关联,并判断当前空间点云是否为初始空间点云;
拼接模块,用于若当前空间点云是初始空间点云,则将当前空间点云作为初始空间点云;若当前空间点云不是初始空间点云,则根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接。
7.如权利要求6所述的手持扫描仪点云拼接装置,其特征在于,所述拼接模块用于:
根据当前指向信息的位移信息和初始指向信息的位移信息,将当前空间点云与初始空间点云进行拼接位置对齐;
根据当前指向信息的角度信息和初始指向信息的角度信息,确定当前空间点云与初始空间点云进行拼接的尝试角度区间;
基于ICP算法控制当前空间点云在尝试角度区间内与初始空间点云进行拼接。
8.如权利要求6或7所述的手持扫描仪点云拼接装置,其特征在于,所述手持扫描仪点云拼接装置还包括:
循环模块,用于在根据当前指向信息和初始空间点云的初始指向信息,对当前空间点云和初始空间点云进行拼接之后,若当前空间点云和初始空间点云拼接成功,将拼接后的空间点云作为新的初始空间点云;若当前空间点云和初始空间点云拼接失败,将初始空间点云丢弃,将当前空间点云作为新的初始空间点云。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611099407.XA CN106600531B (zh) | 2016-12-01 | 2016-12-01 | 手持扫描仪、手持扫描仪点云拼接方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611099407.XA CN106600531B (zh) | 2016-12-01 | 2016-12-01 | 手持扫描仪、手持扫描仪点云拼接方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106600531A true CN106600531A (zh) | 2017-04-26 |
CN106600531B CN106600531B (zh) | 2020-04-14 |
Family
ID=58597012
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611099407.XA Active CN106600531B (zh) | 2016-12-01 | 2016-12-01 | 手持扫描仪、手持扫描仪点云拼接方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106600531B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019085392A1 (zh) * | 2017-10-31 | 2019-05-09 | 先临三维科技股份有限公司 | 牙齿三维数据重建方法、装置和系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104299211A (zh) * | 2014-09-25 | 2015-01-21 | 周翔 | 一种自由移动式三维扫描方法 |
CN104615880A (zh) * | 2015-01-31 | 2015-05-13 | 电子科技大学中山学院 | 一种三维激光雷达点云匹配的快速icp方法 |
CN204498219U (zh) * | 2015-02-13 | 2015-07-22 | 深圳市维新登拓医疗科技有限公司 | 扫描仪 |
CN104838228A (zh) * | 2012-12-05 | 2015-08-12 | 法罗技术股份有限公司 | 三维扫描仪及操作方法 |
CN105078573A (zh) * | 2014-05-11 | 2015-11-25 | 复旦大学 | 基于手持式扫描仪的神经导航空间配准方法 |
CN105761206A (zh) * | 2014-12-16 | 2016-07-13 | 富泰华工业(深圳)有限公司 | 点云拼接方法及系统 |
-
2016
- 2016-12-01 CN CN201611099407.XA patent/CN106600531B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104838228A (zh) * | 2012-12-05 | 2015-08-12 | 法罗技术股份有限公司 | 三维扫描仪及操作方法 |
CN105078573A (zh) * | 2014-05-11 | 2015-11-25 | 复旦大学 | 基于手持式扫描仪的神经导航空间配准方法 |
CN104299211A (zh) * | 2014-09-25 | 2015-01-21 | 周翔 | 一种自由移动式三维扫描方法 |
CN105761206A (zh) * | 2014-12-16 | 2016-07-13 | 富泰华工业(深圳)有限公司 | 点云拼接方法及系统 |
CN104615880A (zh) * | 2015-01-31 | 2015-05-13 | 电子科技大学中山学院 | 一种三维激光雷达点云匹配的快速icp方法 |
CN204498219U (zh) * | 2015-02-13 | 2015-07-22 | 深圳市维新登拓医疗科技有限公司 | 扫描仪 |
Non-Patent Citations (1)
Title |
---|
赵兴东等: "《矿用三维激光数字测量原理及其工程应用》", 31 January 2016, 冶金工业出版社 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019085392A1 (zh) * | 2017-10-31 | 2019-05-09 | 先临三维科技股份有限公司 | 牙齿三维数据重建方法、装置和系统 |
Also Published As
Publication number | Publication date |
---|---|
CN106600531B (zh) | 2020-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US12112417B2 (en) | Artificial intelligence-based animation character drive method and related apparatus | |
CN111652121B (zh) | 一种表情迁移模型的训练方法、表情迁移的方法及装置 | |
CN111738220B (zh) | 三维人体姿态估计方法、装置、设备及介质 | |
CN109427083B (zh) | 三维虚拟形象的显示方法、装置、终端及存储介质 | |
US20200387698A1 (en) | Hand key point recognition model training method, hand key point recognition method and device | |
US11715224B2 (en) | Three-dimensional object reconstruction method and apparatus | |
US10281981B2 (en) | AR output method and electronic device for supporting the same | |
JP2022502783A (ja) | 画像融合方法、モデル訓練方法、画像融合装置、モデル訓練装置、端末機器、サーバ機器、及びコンピュータプログラム | |
CN104346612B (zh) | 信息处理装置和显示方法 | |
WO2018076437A1 (zh) | 一种人脸贴图方法及装置 | |
EP3992919B1 (en) | Three-dimensional facial model generation method and apparatus, device, and medium | |
CN109191508A (zh) | 一种模拟整容装置、模拟整容方法及设备 | |
CN108985220B (zh) | 一种人脸图像处理方法、装置及存储介质 | |
CN106254848A (zh) | 一种基于增强现实的学习方法及终端 | |
CN109600550A (zh) | 一种拍摄提示方法及终端设备 | |
CN111292427B (zh) | 骨骼位移信息获取方法、装置、设备及存储介质 | |
CN108829242A (zh) | 智能终端及其非触控式操作方法 | |
KR20180013005A (ko) | 전자 장치 및 전자 장치 제어 방법 | |
WO2020149270A1 (ja) | 拡張現実空間に配置される3dオブジェクトを生成する方法 | |
CN109461124A (zh) | 一种图像处理方法及终端设备 | |
CN108431776A (zh) | 用于执行任务的方法及支持该方法的电子设备 | |
CN108833791A (zh) | 一种拍摄方法和装置 | |
CN111383332A (zh) | 一种三维扫描和重建系统、计算机设备和可读存储介质 | |
CN109858402B (zh) | 一种图像检测方法、装置、终端以及存储介质 | |
CN114904279A (zh) | 数据预处理方法、装置、介质及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |