CN116437870A - 口腔图像处理装置和口腔图像处理方法 - Google Patents

口腔图像处理装置和口腔图像处理方法 Download PDF

Info

Publication number
CN116437870A
CN116437870A CN202180075903.4A CN202180075903A CN116437870A CN 116437870 A CN116437870 A CN 116437870A CN 202180075903 A CN202180075903 A CN 202180075903A CN 116437870 A CN116437870 A CN 116437870A
Authority
CN
China
Prior art keywords
tip
oral
information
oral scanner
size
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180075903.4A
Other languages
English (en)
Inventor
李胜珍
张光进
朴正桓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Medit Corp
Original Assignee
Medit Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Medit Corp filed Critical Medit Corp
Publication of CN116437870A publication Critical patent/CN116437870A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00Impression cups, i.e. impression trays; Impression methods
    • A61C9/004Means or methods for taking digitized impressions
    • A61C9/0046Data acquisition means or methods
    • A61C9/0053Optical means or methods, e.g. scanning the teeth by a laser or light beam
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00011Operational features of endoscopes characterised by signal transmission
    • A61B1/00016Operational features of endoscopes characterised by signal transmission using wireless means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00071Insertion part of the endoscope body
    • A61B1/0008Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00101Insertion part of the endoscope body characterised by distal tip features the distal tip features being detachable
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00172Optical arrangements with means for scanning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00194Optical arrangements adapted for three-dimensional imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0605Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for spatially modulated illumination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0676Endoscope light sources at distal tip of an endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/24Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • A61B5/0064Body surface scanning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/743Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00Impression cups, i.e. impression trays; Impression methods
    • A61C9/004Means or methods for taking digitized impressions
    • A61C9/0046Data acquisition means or methods
    • A61C9/0053Optical means or methods, e.g. scanning the teeth by a laser or light beam
    • A61C9/006Optical means or methods, e.g. scanning the teeth by a laser or light beam projecting one or more stripes or patterns on the teeth
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00Impression cups, i.e. impression trays; Impression methods
    • A61C9/004Means or methods for taking digitized impressions
    • A61C9/0046Data acquisition means or methods
    • A61C9/0053Optical means or methods, e.g. scanning the teeth by a laser or light beam
    • A61C9/0066Depth determination through adaptive focusing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C2204/00Features not otherwise provided for
    • A61C2204/005Features not otherwise provided for using chip tag or any electronic identification mean, e.g. RFID
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Epidemiology (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
  • Endoscopes (AREA)

Abstract

公开一种图像处理装置。图像处理装置,包括:通信部,向口腔扫描仪发送信息并从所述口腔扫描仪接收信息,存储器,用于存储一个以上指令,以及处理器,用于执行存储在存储器中的所述一个以上指令;处理器,通过执行一个以上指令来执行如下操作:基于关于口腔扫描仪所包括的尖端的尖端信息识别口腔图像获取模式,基于通过通信部从口腔扫描仪接收的二维图像数据和所识别的口腔图像获取模式,获取口腔图像;尖端信息包括尖端紧固方向信息和尖端尺寸信息中的至少一者。

Description

口腔图像处理装置和口腔图像处理方法
技术领域
所公开的实施例涉及一种口腔图像处理装置和口腔图像处理方法。具体地,涉及一种根据结合至口腔扫描仪的尖端处理口腔图像的口腔图像处理装置及其方法。
背景技术
最近,作为获取患者口腔信息的方法,正在使用通过插入患者口腔来获取口腔内图像的口腔扫描仪。口腔扫描仪可通过扫描患者口腔内的图像获取二维扫描数据。连接到口腔扫描仪的PC等数据处理装置,可以利用口腔扫描仪获取的二维扫描数据生成三维虚拟模型,并将其输出到画面上。
由于数据处理装置无法识别口腔扫描仪获取的二维扫描数据是上颚扫描数据、下颚扫描数据、还是上颚和下颚的咬合扫描数据,医生等需要操作数据处理装置,输入口腔扫描仪获取的二维扫描数据是关于哪个部位的扫描数据。
但是,在使用口腔扫描仪拍摄患者口腔的同时,同时操作数据处理装置来选择扫描数据不仅麻烦,而且存在卫生方面不好的问题。
此外,就儿童而言,与普通成人不同,口腔较小,因此很难利用符合成人口腔制作的普通尺寸的尖端扫描口腔内。
发明内容
用于解决问题的手段
根据实施例的图像处理装置,包括:通信部,向口腔扫描仪发送信息并从所述口腔扫描仪接收信息,存储器,用于存储一个以上指令,以及处理器,用于执行存储在所述存储器中的所述一个以上指令;所述处理器,通过执行所述一个以上指令来执行如下操作:基于关于所述口腔扫描仪所包括的尖端的尖端信息识别口腔图像获取模式,基于通过所述通信部从所述口腔扫描仪接收的二维图像数据和所识别的口腔图像获取模式,获取口腔图像;所述尖端信息可以包括尖端紧固方向信息和尖端尺寸信息中的至少一者。
附图说明
图1是用于说明公开的实施例的口腔图像处理系统的图。
图2是用于根据一实施例说明口腔扫描仪获取表面数据的方法的图。
图3是根据实施例的口腔扫描仪的立体图。
图4是根据实施例的口腔图像处理装置的内部的框图。
图5是用于说明根据实施例的口腔扫描仪利用传感器获取尖端信息的图。
图6是用于说明根据实施例的口腔扫描仪利用传感器获取尖端信息的图。
图7是用于说明根据实施例的口腔扫描仪利用传感器获取尖端信息的图。
图8是根据实施例按照尖端的尺寸或位置示出表面颜色不同的情况的图。
图9是用于说明根据实施例的口腔扫描仪识别扫描模式并将其传送至数据处理装置的图。
图10是用于说明根据实施例的在尖端为小尺寸的情况下口腔扫描仪以小投射模式动作的图。
图11是用于说明根据实施例从二维图像数据获取尖端信息并根据尖端信息检测投射区域的方法的图。
图12是用于说明根据实施例从二维图像数据获取尖端信息的图。
图13是用于说明根据实施例在小投射模式时投射区域的大小及摄像头扫描感兴趣区域的大小被调节的图。
图14为用于说明根据实施例不同的投射模式下的扫描感兴趣区域的图。
图15示出根据实施例的口腔图像处理系统。
图16示出根据实施例的口腔图像处理方法的顺序图。
图17是示出根据实施例的口腔图像处理系统获取尖端信息的过程的顺序图。
图18是示出根据实施例以识别的扫描模式获取口腔图像的方法的顺序图。
图19是根据实施例示出根据尖端的尺寸以不同的投射模式获取口腔图像的方法的顺序图。
图20是用于说明根据实施例口腔扫描仪根据图像处理装置调节投射模式的顺序图。
具体实施方式
在实施例中,所述处理器,可以通过执行所述一个以上指令来执行如下操作:通过所述通信部从所述口腔扫描仪接收所述尖端信息,或者从通过所述通信部接收的所述二维图像数据中获取所述尖端信息。
在实施例中,所述处理器,可以通过执行所述一个以上指令来执行如下操作:在所述二维图像数据中,检测反射镜区域,并基于所述反射镜区域的大小和形状中的至少一者来获取所述尖端信息。
在实施例中,所述处理器,可以通过执行所述一个以上指令来执行如下操作:基于所述尖端信息包括所述尖端尺寸信息,识别根据所述尖端尺寸信息的投射模式,根据所述投射模式生成控制信息,通过所述通信部将所述控制信息传送至所述口腔扫描仪,以及通过所述通信部接收所述口腔扫描仪基于所述控制信息动作而获取的新二维图像数据;所述控制信息是当所述尖端为第一尺寸尖端时,控制所述口腔扫描仪以第一投射模式动作,且当所述尖端的尺寸为第二尺寸尖端时,控制所述口腔扫描仪以第二投射模式动作的信息。
在实施例中,所述处理器基于所述尖端信息包括所述尖端紧固方向信息,识别根据所述尖端紧固方向信息的扫描模式,根据所识别的扫描模式处理所述二维图像数据来获取口腔图像,所识别的扫描模式可以是上颚扫描模式、下颚扫描模式和咬合扫描模式中的一者。
根据实施例的口腔扫描仪,包括:口腔扫描仪主体,以及尖端,以可拆卸的方式结合至所述口腔扫描仪主体;所述口腔扫描仪主体,包括:摄像头,通过扫描口腔来获取二维图像数据,存储器,用于存储一个以上指令,以及处理器,用于执行存储在所述存储器中的所述一个以上指令;所述处理器,通过执行所述一个以上指令来执行如下操作:获取关于结合至所述口腔扫描仪主体的尖端的尖端信息;所述尖端信息可以包括尖端紧固方向信息和尖端尺寸信息中的至少一者。
在实施例中,所述口腔扫描仪主体还包括传感器,所述尖端的壁根据方向具有不同的厚度和不同的颜色中的至少一者,所述传感器可以感测所述尖端,基于从所述传感器至所述尖端的壁的距离和所述尖端的壁的颜色中的至少一者来获取所述尖端信息。
在实施例中,所述口腔扫描仪主体还包括传感器,所述尖端包括多个突出部,能够以结合至所述口腔扫描仪主体的状态旋转,所述传感器可以感测所述尖端,基于从所述传感器至根据所述尖端的旋转而识别的突出部的距离和所述突出部的颜色中的至少一者来获取所述尖端信息。
在实施例中,所述处理器,可以通过执行所述一个以上指令来执行如下操作:在所述摄像头获取的所述二维图像数据中检测反射镜区域,并基于所述反射镜区域的大小和形状中的至少一者来获取所述尖端信息。
在实施例中,所述口腔扫描仪主体可以还包括:通信部,向图像处理装置发送信息并从所述图像处理装置接收信息;所述通信部将获取的所述二维图像数据和所述尖端信息传送至所述图像处理装置。
在实施例中,所述口腔扫描仪主体还包括:投影仪,用于投射光;所述通信部从所述图像处理装置接收基于所述尖端信息生成的控制信息,所述控制信息是当所述尖端为第一尺寸尖端时,控制所述口腔扫描仪以第一投射模式动作,且当所述尖端的尺寸为第二尺寸尖端时,控制所述口腔扫描仪以第二投射模式动作的信息;所述处理器,可以通过执行所述一个以上指令来执行如下操作:当所述控制信息是要求以所述第一投射模式动作的信息时,使所述投影仪在第一投射区域中投射光,并使所述摄像头在第一感兴趣区域中获取二维图像数据,以及当所述控制信息是要求以所述第二投射模式动作的信息时,使所述投影仪向比所述第一投射区域小的第二投射区域投射光,并使所述摄像头在比所述第一感兴趣区域小的第二感兴趣区域中获取二维图像数据。
在实施例中,所述处理器,可以通过执行所述一个以上指令来执行如下操作:基于所述尖端信息识别口腔图像获取模式,并基于所述二维图像数据和所识别的口腔图像获取模式来获取口腔图像。
在实施例中,所述处理器,通过执行所述一个以上指令来执行如下操作:基于所述尖端信息包括所述尖端紧固方向信息,识别根据所述尖端紧固方向信息的扫描模式,根据所识别的扫描模式处理所述二维图像数据来获取所述口腔图像,所识别的扫描模式可以是上颚扫描模式、下颚扫描模式和咬合扫描模式中的一者。
在实施例中,所述口腔扫描仪主体还包括:投影仪,用于投射光;所述处理器,可以通过执行所述一个以上指令来执行如下操作:基于所述尖端信息包括所述尖端尺寸信息,识别根据所述尖端尺寸信息的投射模式,当所识别的投射模式为第一投射模式时,使所述投影仪在第一投射区域中投射光,并使所述摄像头在第一感兴趣区域中获取所述二维图像数据,以及当所识别的投射模式为第二投射模式时,使所述投影仪向比所述第一投射区域小的第二投射区域投射光,并使所述摄像头在比所述第一感兴趣区域小的第二感兴趣区域中获取所述二维图像数据。
在实施例中,所述第二投射区域和所述第二感兴趣区域,可以基于所述二维图像数据所包括的反射镜区域的大小来确定。
根据实施例的图像处理方法,可包括如下步骤:通过扫描口腔来获取二维图像数据,获取关于结合至口腔扫描仪主体的尖端的尖端信息,基于所述尖端信息识别口腔图像获取模式,以及基于所述二维图像数据和所识别的模式来获取口腔图像;所述尖端信息包括尖端紧固方向信息和尖端尺寸信息中的至少一者。
根据实施例的图像处理系统,包括:口腔扫描仪,通过扫描口腔来获取二维图像数据,以及图像处理装置,处理从所述口腔扫描仪接收的所述二维数据来生成口腔图像;所述口腔扫描仪,包括:口腔扫描仪主体,以及尖端,以可拆卸的方式结合至所述口腔扫描仪主体;所述图像处理装置,获取关于所述尖端的尖端信息,并基于所述尖端信息识别口腔图像获取模式,基于所识别的口腔图像获取模式,处理从所述口腔扫描仪接收的二维数据,从而获取口腔图像。
本说明书描述了本发明的原理,并公开了实施例,以明确了发明的权利范围,以及使本领域技术人员能够实施本发明。所公开的实施例可以以各种形式实现。
在整个说明书中,相同的附图标记指相同的构成要素。所公开的实施例并不说明实施例的所有要素,并且省略了属于本发明的技术领域的一般内容或实施例之间的重复内容。说明书中使用的“部(part、portion)”一词,可以通过软件或硬件实现,根据实施例,多个“部”可以作为一个要素(unit、element)实现,或者一个“部”可以包含多个要素。下面参考附图说明本发明的作用原理和实施例。
在本说明书中,图像可包括示出至少一个牙齿或包括至少一个牙齿的口腔的图像(以下称为“口腔图像”)。
此外,本说明书中的图像可以是关于对象体的二维图像、或立体示出对象体的三维模型或三维图像。
此外,本说明书中的数据可以指用于二维或三维表示对象体所需的信息,例如利用至少一个摄像头获取的原始数据(raw data)等。
具体地,原始数据是为了生成口腔图像而获取的数据,可以是当使用口腔扫描仪(intraoral scanner)对作为对象体的患者的口腔内进行扫描时,从口腔扫描仪中的至少一个图像传感器获取的数据(例如,二维数据)。在口腔扫描仪中获取的原始数据,还可被称为扫描数据或二维图像数据。原始数据可指利用口腔扫描仪扫描对象体时,通过多个摄像头而获取的不同视角的二维图像。
在本说明书中,“对象体(object)”作为被拍摄的对象,可以包括人、动物或其一部分。对象体可以包括口腔,所述口腔包括至少一个牙齿。例如,对象体可包括牙齿、牙龈、口腔的至少一部分区域、和/或可插入口腔内的人造结构物(例如,正畸矫治器、植牙、人造牙、插入口腔内的矫正辅助工具等)等。
下面,参照附图对实施例进行详细说明。
图1是用于说明根据公开的实施例的口腔图像处理系统的图。
参照图1,口腔图像处理系统可包括:口腔扫描仪110,以及数据处理装置120,通过通信网130与口腔扫描仪110结合。
口腔扫描仪110是用于获取口腔内的图像的医疗装置。具体地,口腔扫描仪110可以通过插入口腔内并以非接触式扫描牙齿,来获取对于包括至少一个牙齿的口腔的图像。此外,口腔扫描仪110可具有能够进出口腔内的形态,使用至少一个图像传感器(例如,光学摄像头等)来扫描患者的口腔内部。口腔扫描仪110作为手持式(handheld)扫描仪,可以以二维图像数据获取关于对象体的表面信息,并生成三维数据。
在口腔扫描仪110中获取的二维图像数据可传输到通过通信网130连接的数据处理装置120。
数据处理装置120可以是通过有线或无线的通信网130与口腔扫描仪110连接,从口腔扫描仪110接收通过扫描口腔来获取的二维图像数据,并且根据接收到的二维图像数据生成、处理、显示和/或传输口腔图像的所有电子装置。
数据处理装置120可根据从口腔扫描仪110接收到的二维图像数据,生成通过处理二维图像数据而生成的信息和通过处理二维图像数据而生成的口腔图像中的至少一者,并将所生成的信息以及口腔图像通过显示器125显示。
数据处理装置120可以为智能手机(smart phone)、笔记本电脑、台式电脑、PDA、平板电脑等的计算装置,但不限于此。
数据处理装置120还可以以用于处理口腔图像的服务器(或服务器装置)等的形式存在。
口腔扫描仪110可以将通过扫描口腔获取的原始数据原样传输到数据处理装置120。在这种情况下,数据处理装置120可根据接收到的原始数据,生成三维表示口腔的三维口腔图像。此外,“三维口腔图像”可通过根据接收到的原始数据,将口腔的内部结构进行三维建模(modeling)来生成,因此可以被称为“三维口腔模型”。以下,将以二维或三维表示口腔的模型或图像统称为“口腔图像”。
数据处理装置120可分析和/或处理生成的口腔图像,并且向显示器125和/或外部装置输出或传输。
作为另一示例,口腔扫描仪110可通过扫描口腔来获取原始数据,并加工所获取的原始数据以生成与作为对象体的口腔对应的图像,并传输到数据处理装置120。
在实施例中,口腔扫描仪110通过向对象体照射(project)图案光并扫描被照射图案光的对象体,利用图案变形引起的三角测量原理,获取表示对象体的形状的三维数据。
在实施例中,口腔扫描仪110还可以使用共聚焦(confocal)方法获取对象体的三维数据。共聚焦方法是一种用于测量三维表面的非破坏光学成像技术,可以使用针孔结构获取具有高空间分辨率的光学截面图像。口腔扫描仪110可以通过沿轴向堆叠(stack)获取的二维图像来获得三维数据。
然而,这为实施例,口腔扫描仪110可利用除了上述方法之外的多种方式从原始数据获取口腔图像。口腔扫描仪110将三维数据传送至数据处理装置120。在该情况下,数据处理装置120可分析、处理、显示和/或传送所接收的图像。
图2是用于根据一实施例说明口腔扫描仪获取表面数据的方法的图。
在实施例中,口腔扫描仪可利用至少一个摄像头获取图像,并基于所获取的图像获取三维数据。在图2中,口腔扫描仪可以是光学三维扫描仪。口腔扫描仪为获取有关对象体210的表面的三维数据,可利用立体视觉结构光(structured light with stereovision)方式。
口腔扫描仪可包括两个以上摄像头230、240和可投射结构光225的投影仪220。在实施例中,口腔扫描仪可以向对象体210投射结构光225,并分别从对应于左视场(leftField of View)的L摄像头230和对应于右视场(Right Field of View)的R摄像头240,获取对应于左视场的L图像235和对应于右视场的R图像245。L图像235和R图像245可重构为表示对象体210的表面的三维帧。
口腔扫描仪可连续获取包括有关对象体210的L图像235和R图像245的二维图像帧。口腔扫描仪或数据处理装置,可从包括L图像235和R图像245的二维图像帧获取表示对象体210的表面形状的三维图像帧。在图2中,说明了口腔扫描仪从利用两个摄像头230、240获取的两个图像获取三维数据,但这为一实施例,口腔扫描仪还可仅利用两个摄像头230、240中的任一个摄像头获取图像。
口腔扫描仪可以在对象体210周围移动的同时以一定的时间间隔(例如,每秒10~30帧)扫描对象体210,从而获取多个二维帧。口腔扫描仪或数据处理装置可从多个二维图像帧获取多个三维图像帧。
数据处理装置可以通过合并(merge)或位置对齐(align)多个三维图像帧来获取整个对象体210的三维图像数据。
图3是根据实施例的口腔扫描仪的立体图。
参照图3,口腔扫描仪300可包括主体310和尖端320。
主体310可包括:光照射部,用于投射光;以及摄像头,拍摄对象体来获取图像。
尖端320作为安装在主体310并插入口腔内的部分,以长形形成,以便能够容易地进入口腔内。尖端320以可拆卸的方式结合至主体310,并包括光路径改变装置,使从主体310照射的光朝向对象体,并使从对象体接收的光朝向主体310。
尖端320的一端可与主体310结合。尖端320不固定至主体310,而是以可拆卸的结构安装在主体310。
尖端320的另一端可包括开口部。开口部可以形成在与尖端320的长度方向正交的一侧方向。光照射部照射的光可通过开口部流出,从对象体反射的光可流入至摄像头。
开口部可以设有改变光路径的装置,例如,可设有镜面。镜面可以以一定路径反射光,以使从光照射部出射的光朝向对象体照射。此外,镜面可以调节光路径,使从对象体反射并入射到尖端320的开口部的光朝向摄像头的透镜。
镜面固定附着在尖端320的内部,因此,从投影仪投射的光所照射的方向也是固定的。因此,通常,为了扫描患者的口腔,使用口腔扫描仪300的用户沿固定的方向将尖端320安装在主体310上,例如尖端320的上部与主体310的上部结合。
另一方面,口腔扫描仪300所获取的数据可在口腔扫描仪的主体310中处理,或传送至数据处理装置而被处理。这时,口腔扫描仪的主体310或数据处理装置无法认知所获取的数据是扫描上颚的数据、扫描下颚的数据、还是上颚和下颚咬合的咬合数据。因此,用户可在通过扫描口腔来获取扫描数据之前,在口腔扫描仪的主体310或数据处理装置中将扫描模式设为上颚扫描模式、下颚扫描模式、咬合扫描模式中的一种后再进行扫描。否则,即使口腔扫描仪300扫描了下颚,口腔扫描仪的主体310或数据处理装置也会将从口腔扫描仪300接收的数据误认为是上颚或咬合数据,而不是下颚,从而生成错误的影像。但是,用户每次扫描口腔时,操作口腔扫描仪的主体310或数据处理装置,逐一设置扫描模式,不仅麻烦,而且不利于卫生。
在实施例中,结合至主体310的尖端320不必在恒定方向上与主体310结合。例如,不需要仅尖端320的上部与主体310的上部相结合,尖端320的上部或下部或侧面也可以与主体310的上部相结合。
在实施例中,口腔扫描仪300可在主体310中设置传感器315,通过感测安装在主体310的尖端320来识别尖端320的紧固方向。
在实施例中,口腔扫描仪300还可基于通过主体310所包括的摄像头获取的口腔的二维图像数据,来获取尖端320信息。即,当口腔扫描仪300可在通过摄像头获取的图像数据中区分镜面区域和其他区域时,识别镜面区域并基于镜面区域的形状来识别尖端320的紧固方向。在实施例中,口腔扫描仪300可根据所识别的尖端320的紧固方向来识别扫描模式。所识别的扫描模式可以是上颚扫描模式、下颚扫描模式和咬合扫描模式中的一种。
在实施例中,口腔扫描仪300可根据扫描模式处理通过扫描患者的上颚或下颚或咬合而获取的原始数据,并直接获取表示上颚或下颚或咬合的三维口腔图像,并将其传送至数据处理装置。
在另一实施例中,口腔扫描仪300可将所识别的扫描模式传送至数据处理装置。这种情况下,数据处理装置可根据从口腔扫描仪300接收的扫描模式,来识别扫描对象是上颚、下颚、还是同时包括上颚和下颚的咬合。
此外,口腔扫描仪300可扫描患者的上颚或下颚或咬合来获取原始数据,并将其传送至数据处理装置。数据处理装置从口腔扫描仪300接收扫描模式和原始数据,并根据所接收的扫描模式处理原始数据,从而获取表示上颚或下颚或咬合的三维口腔图像,并将其输出至显示器。此外,数据处理装置还可将从口腔扫描仪300接收的扫描模式显示在显示器。
因此,根据实施例,口腔扫描仪300可利用传感器315,或利用通过摄像头获取的二维图像数据来识别尖端320的紧固方向,并将其传送至数据处理装置,由此,数据处理装置可自动地以与尖端320方向相符合的扫描模式获取口腔图像,因此用户无需另行操作数据处理装置来设定扫描模式。
另一方面,传感器315除了识别尖端320的紧固方向外,还可识别尖端的尺寸。
与成人不同,儿童口腔小,口腔内的牙齿也小,因此,如果使用符合成人口腔制作的普通尺寸的尖端,很难准确扫描儿童口腔,获取准确的数据。另外,当通过根据成人口腔制作的普通尺寸的尖端获取儿童口腔的扫描数据时,即使获取的口腔图像中包含儿童口腔区域较小,也存在对剩余不必要的区域执行影像处理的问题。
在实施例中,尖端320不是具有固定的一个尺寸,而且可以具有不同的各种尺寸。
在实施例中,尖端320可以包括具有第一尺寸的第一尺寸尖端和具有第二尺寸的第二尺寸尖端。其中,第一尺寸可以指与第二尺寸不同的尺寸。
例如,第一尺寸尖端是普通尺寸尖端,第二尺寸尖端可以是比普通尺寸尖端更小的小尺寸尖端。
小尺寸尖端可指,相比于普通尺寸尖端,安装在尖端内的镜面的大小和尖端的宽度比普通尺寸尖端更小的尖端。
在实施例中,传感器315可感测尖端320,来识别尖端320是普通尺寸尖端还是小尺寸尖端。
在实施例中,口腔扫描仪300可基于通过摄像头获取的口腔的二维图像数据,来识别尖端320是普通尺寸尖端还是小尺寸尖端。口腔扫描仪300可在通过摄像头获取的图像数据中识别镜面区域,并基于镜面区域的大小识别尖端320的尺寸。
小尺寸尖端相比于普通尺寸尖端其镜面和尖端的宽度小,当照射与使用普通尺寸尖端时相同的面积的光时,照射的光可能会与尖端的壁碰撞而发生漫反射。
因此,在实施例中,口腔扫描仪300可根据尖端320的尺寸以不同的投射模式获取口腔图像。即,口腔扫描仪300在尖端320的尺寸为普通尺寸和小尺寸的情况下,可以通过不同地调节投射区域和摄像头的感兴趣区域(Region of Interest,ROI)来获取口腔图像。
如上所述,根据实施例,口腔扫描仪300可利用传感器315或摄像头,识别尖端315的紧固方向或尖端的尺寸,并基于此以不同的扫描模式获取口腔图像,或者以不同的投射模式获取口腔图像。
图4是根据实施例的口腔图像处理装置400的内部的框图。
口腔图像处理装置400可包括口腔扫描仪和数据处理装置。
参照图4,口腔图像处理装置400包括处理器410、存储器420、感测部430、光照射部440和图像处理部450。
存储器420可存储至少一个指令。此外,存储器420可存储处理器410所执行的至少一个指令。此外,存储器420可存储处理器410所执行的至少一个程序。
感测部430可包括至少一个传感器。感测部430所包括的传感器可包括接近传感器。感测部430感测尖端,并基于接近传感器与尖端的壁的距离和尖端的壁的颜色中的至少一者,从尖端获取尖端信息。
在实施例中,尖端可包括多个突出部。此外,尖端可以以安装至主体的状态旋转。尖端所包括的多个突出部可具有彼此不同的厚度或彼此不同的颜色。
当尖端包括突出部并且可以与主体结合并旋转时,感测部430可以针对根据尖端的旋转识别的突出部,获取从传感器到突出部的距离和突出部的颜色中的至少一种,以获取尖端信息。
光照射部440可以照射光。光照射部440可以包括从光源投射光的投影仪。光照射部440照射的光通过安装在尖端上的镜面向开口部侧照射,并通过开口部向对象体照射。但是,本公开并不仅限于此,在尖端也可以安装用于折射所投射的光的棱镜,以替代镜面。棱镜可以使从光照射部440投射的光根据介质的种类或棱镜之间的角而不同程度地折射。
在实施例中,光照射部440可根据投射模式向不同的投射区域照射光。
在实施例中,投射模式可以根据尖端尺寸具有不同的模式。例如,投射模式可以包括:第一投射模式,当尖端是第一尺寸尖端时,以与第一尺寸尖端相符合的面积照射光,以及第二投射模式,当尖端是第二尺寸尖端时,以与第二尺寸尖端相符合的面积照射光。
第一投射模式是普通投射模式,第二投射模式是小投射模式。
光照射部440可在普通投射模式时和小投射模式时,以具有不同尺寸的投射区域照射光。
图像处理部450可以执行用于图像生成和/或处理的动作。图像处理部450可包括至少一个摄像头。图像处理部450可利用摄像头拍摄由光照射部440投射光的对象体来获取与左视场和右视场中的至少一者相对应的数据。图像处理部450可扫描口腔来获取二维图像数据。
在实施例中,图像处理部450可利用通过摄像头获取的二维图像数据来获取上颚图像、下颚图像和咬合图像中的一者。在实施例中,当尖端信息为关于尖端紧固方向的信息时,图像处理部450可根据处理器410的控制以特定扫描模式处理图像。即,图像处理部450可根据处理器410所识别的扫描模式,处理原始数据,从而获取上颚、下颚或咬合图像。
处理器410可控制口腔图像处理装置400的整体。处理器410可基于尖端信息,识别口腔图像获取模式。当尖端信息为尖端紧固方向时,处理器410可识别根据尖端紧固方向的扫描模式。处理器410可识别上颚扫描模式、下颚扫描模式和咬合扫描模式中的一种,并使图像处理部450根据所识别的模式获取口腔图像。
处理器410可基于尖端信息来识别尖端尺寸是普通尺寸还是小尺寸。当尖端为小尺寸尖端时,处理器410可控制口腔图像处理装置400,以符合小尺寸尖端所包括的镜面尺寸来获取口腔图像。即,处理器410可控制光照射部440来缩小光照射部440所照射的光的区域。此外,处理器410可控制图像处理部450来缩小用于获取图像的摄像头的感兴趣区域。
在实施例中,处理器410可直接检测小尺寸尖端所包括的镜面尺寸。为此,处理器410可在图像处理部450所获取的图像中检测出小尺寸尖端所包括的镜面区域。
在实施例中,处理器410还可利用图像处理部450所包括的摄像头所获取的二维图像数据来获取尖端信息。例如,虽然安装的是小尺寸尖端,但投影仪投影的区域和摄像头获取图像的感兴趣区域被设置为符合普通尺寸尖端时,投影仪照射的部分光会撞到尖端的内壁而引起漫反射,并且只有被小尺寸尖端内部的镜面反射的光才会被照射到对象体上。在这种情况下,摄像头获取的二维图像数据可以包括针对对象体获取的区域,即镜面区域和非镜面区域。在实施例中,口腔扫描仪300在二维图像数据中检测镜面区域,并且可以基于镜面区域的大小和形状中的至少一个来识别尖端的方向或大小。
处理器410可以根据检测到的镜面区域,控制光照射部440和图像处理部450,调节照射的光的区域和摄像头的感兴趣区域。
处理器410可以控制口腔图像处理装置400内部包括的至少一个构成要素,以便执行期望的动作。因此,即使以处理器410执行预定动作为例进行说明,也可以意味着处理器410控制口腔图像处理装置400内部包括的至少一个构成要素,以便执行预定动作。
为了实现本说明书中公开的实施例,口腔图像处理装置400可包括图4所示的构成要素中的一部分,还可包括除图4所示的构成要素之外的更多的构成要素。
图5是用于说明根据实施例的口腔扫描仪利用传感器获取尖端信息的图。
参照图5,口腔扫描仪500可包括主体510和尖端520。尖端520和主体510以可拆卸的方式结合。
在实施例中,主体510中可设有用于感测尖端520的传感器515。在主体510中,传感器515可位于主体510和尖端520结合的区域。
如图5的(a)和(b)所示,当尖端520以覆盖主体510的方式结合至主体510时,传感器515可在主体510的上部或下部的外围,设置在主体510和尖端520结合的区域。然而,这仅为一实施例,根据尖端520和主体510的结合结构,传感器515安装至主体510的位置可以改变。
如图5的(a)和(b)所示,尖端520可以以与传感器515隔开预定距离d1的状态与主体510结合。如图5所示,主体510的外围和尖端520的内壁相向结合。
传感器515可以是无需物理接触就能感知周围物体存在的接近传感器。传感器515可以发射电磁场或电磁波、超声波等,并测量发射的信号被作为对象体的尖端520的壁部525反射并返回的光量或返回时间等,识别尖端520的壁部和传感器515之间的距离。
在实施例中,尖端520的内壁的厚度根据尖端520的紧固方向,例如尖端520的上部、下部和侧面可以具有不同的值。
图5的(b)中,尖端520的上部和下部的内壁厚度各不相同。根据与主体510的上部结合的尖端520的方向是上部还是下部,传感器515和尖端520的内壁的距离将变为d1或d2。
图5的(c)和(d)分别示出了尖端520的上部和下部的内壁525具有不同的厚度。图5中的(c)示出了尖端520的上部与主体510的上部结合时从传感器515到内壁525的距离,图5中的(d)示出了尖端520的下部与主体510的上部结合时从传感器515到内壁525的距离。可见,尖端520下部的内壁525与传感器515之间的距离比尖端520上部的内壁525与传感器515之间的距离长d长度。
在实施例中,传感器515可感测内壁525和传感器515之间的距离。传感器515可以向内壁525发射超声波或红外线等,并基于发射的超声波或红外线等被内壁525反射后返回的光量,来感测到内壁525的距离。或者,传感器515可以发射红外线等,通过测量发射的信号被内壁525反射并返回传感器515的时间来测量到内壁525的距离。
传感器515根据内壁525和传感器515之间的距离,可将尖端520的紧固方向作为尖端信息来获取。即,传感器515可以识别尖端520的上部是否紧固,或下部是否紧固,或侧面是否紧固。
在实施例中,尖端520的内壁525的厚度可以根据尖端520的尺寸而变化。例如,在尖端520是普通尺寸的情况和小尺寸的情况,尖端520可以具有不同厚度的内壁525。
在实施例中,传感器515可感测内壁525和传感器515之间的距离,并根据感测的距离将尖端520的尺寸作为尖端信息来获取,即,尖端是普通尺寸还是小尺寸。
图6是用于说明根据实施例的口腔扫描仪利用传感器获取尖端信息的图。
与图5相同,在图6中,尖端620可以是以覆盖主体的方式与主体结合的结构。传感器615可位于主体的外围。尖端620的内部与传感器615可开预定距离并与主体结合。
在实施例中,尖端620的内壁625可以根据方向具有不同的颜色。例如,尖端620的上部、下部和侧面的内壁625表面颜色可以是不同的颜色。
图6的(a)和(b)分别示出尖端620的上部和下部的内壁625具有不同的颜色。
在实施例中,传感器615可利用内壁625的颜色获取尖端信息。例如,传感器615可以向内壁625发射红外线,并通过测量发射到内壁625的信号返回的光量来识别内壁625的颜色。红外信号具有对象体的颜色越亮越容易被对象体反射的性质,颜色越暗越容易被对象体吸收的性质。因此,反射信号光量大可以意味着内壁625的颜色亮,光量小可能意味着内壁625的颜色暗。即,当传感器615与内壁625的距离相同时,对象体的颜色越亮,反射回来的光量就越大。
传感器615还可以从尖端620反射的光中计算色度坐标,并将其与储存的参考色度进行比较,以检测内壁625的表面颜色。
在实施例中,传感器615可以识别内壁625的颜色,并根据所识别的颜色检测尖端620的紧固方向是上部、下部、还是侧面部。
在实施例中,内壁625的颜色可以根据尖端620的尺寸而变化。即,普通尺寸和小尺寸的尖端620的内壁625可以具有不同的颜色。
在实施例中,传感器615可以感测内壁625的颜色,根据感测的颜色获取尖端620信息,从而识别尖端是普通尺寸还是小尺寸。
图7是用于说明根据实施例的口腔扫描仪利用传感器获取尖端信息的图。
图7所示的口腔扫描仪700与图5和图6所示的口腔扫描仪不同,是尖端720进入主体710内部并结合至主体710的结构。即,主体710的内壁和尖端720的外壁相向结合。
在实施例中,传感器可安装在主体710。传感器可安装在主体710的内壁。传感器可设置在主体710内部的上部区域或下部区域等。
或者,传感器还可以在主体710和尖端720相接合的位置处,位于朝向尖端720的方向上。在实施例中,尖端720可以以结合到主体710的状态旋转。例如,尖端720和主体710紧固的区域可以分别制成圆柱形。尖端720可以以与主体710结合的状态进行旋转。
在另一实施例中,如图5和图6所示的结构,主体710还可以是进入尖端720的内部且尖端720结合至主体710的结构。这种情况下,尖端720可以在覆盖主体710的同时从主体510的外部以圆柱形与主体710结合并旋转。
在实施例中,用户可转动结合至主体710的尖端720,手动地使尖端720旋转。
在实施例中,主体710还包括可旋转的旋转构件,尖端720还可结合至主体710的旋转构件。用户利用安装在主体710的控制键等的用户界面(未图示)使旋转构件旋转,从而使安装在旋转构件的尖端720也一起旋转。
或者,主体710与数据处理装置联动,旋转构件可根据数据处理装置的控制而旋转。更具体地,主体710可以根据数据处理装置中设置的扫描模式使旋转构件旋转,从而调节尖端720的紧固方向。例如,在尖端720与主体710所包括的旋转构件结合,且尖端720的上部与主体710的上部以相同方向结合的状态下,用户利用数据处理装置将扫描模式设定为下颚扫描模式时,主体710与数据处理装置联动,旋转构件旋转180度,使尖端720的下部与主体710的上部朝向相同的方向,从而便于下颚扫描。
或者,当主体710的旋转构件旋转时,主体710根据旋转构件的旋转角度感测尖端720的紧固方向,将紧固方向或根据紧固方向的扫描模式传送至数据处理装置。数据处理装置识别根据尖端720的紧固方向的扫描模式,并以所识别的扫描模式获取图像。
在实施例中,尖端720可包括多个突出部。例如,多个突出部可以以锯齿状突出形成。在主体710中与尖端720结合的区域,可以具有与尖端720的突出部相接合并旋转的结构。
安装在主体710的传感器可根据尖端720的旋转识别形成在尖端720的多个突出部中的一个。即,传感器可识别多个突出部中的随着旋转而接近传感器上部或正面的突出部。
在实施例中,尖端720所包括的多个突出部,根据突出部的位置分别具有不同的厚度或颜色。例如,位于尖端720的上端的突出部和位于尖端720的下端的突出部以及位于尖端720的侧面的突出部,可分别具有不同的厚度,或具有不同的表面颜色。
在实施例中,尖端720所包括的多个突出部,根据尖端720是普通尺寸还是小尺寸,其厚度或颜色可不同。例如,普通尺寸的尖端720所包括的突出部的厚度或颜色可与小尺寸的尖端720所包括的突出部的厚度或颜色不同。
传感器可利用突出部的厚度来感测传感器和突出部之间的距离,或感测突出部的颜色。传感器利用感测的信息,识别尖端720的紧固方向和尺寸中的至少一种。
传感器可在尖端720每旋转一周时对其进行识别。主体710可在尖端720每旋转一周时,利用振动或声音、光等,向用户告知已完成了一次旋转动作。
如上所述,根据实施例,尖端720可以以结合至主体710的状态进行旋转。主体710可与数据处理装置联动,使尖端720自动地根据在数据处理装置中设置的模式旋转。或者,根据取决于主体710的旋转构件的旋转程度的尖端720的紧固方向,数据处理装置可以以预定扫描模式获取图像。
此外,根据实施例,尖端720可包括具有不同颜色或厚度的多个突出部。传感器可识别尖端720所包括的多个突出部中的一者的颜色或厚度来识别尖端720的尺寸或紧固方向。
图8是根据实施例按照尖端的尺寸或位置示出表面颜色不同的情况的图。
图8所示的尖端800,与图7所示的尖端720相同,是尖端800进入主体内部并结合至主体的结构。即,尖端800的外壁820和主体的内壁相向结合。
在实施例中,尖端800的外壁820可根据方向具有不同的表面颜色。即,尖端800的外壁820的上部、下部、侧面部可分别具有不同的颜色。这种情况下,在实施例中,安装在主体的传感器可根据外壁820的表面颜色感测尖端800的紧固方向。
在实施例中,尖端800的外壁820可根据尖端800是普通尺寸尖端还是小尺寸尖端而具有不同的表面颜色。
在实施例中,尖端800的外壁820可按照尖端800的尺寸或按照尖端800的方向,分别具有不同的颜色。即,具有普通尺寸的尖端820的上部、下部、侧面方向的各外壁820,以及具有小尺寸的尖端820的上部、下部、侧面方向的各外壁820,可具有不同的颜色。
在实施例中,传感器可感测尖端820的外壁820的颜色,并利用所感测的颜色检测出是尖端820的尺寸是普通尺寸且上部方向紧固,还是尖端820的尺寸是小尺寸且下部方向紧固等。
在另一实施例中,尖端800可以是在主体外部与主体结合的结构。即,尖端800的内壁可与主体的外壁相向结合。主体的外壁可安装有传感器。这种情况下,尖端800的内壁的表面颜色可根据方向或尺寸而不同。
如上所述,根据实施例,尖端820的外壁820或内壁可按照尺寸或按照紧固方向而具有不同的表面颜色。
根据实施例,传感器可感测尖端820的表面颜色,来识别尖端的尺寸和紧固方向中的至少一种。
图9是用于说明根据实施例的口腔扫描仪识别扫描模式并将其传送至数据处理装置的图。
参照图9,口腔扫描仪910可向数据处理装置920发送信息或从数据处理装置920接收信息。
在实施例中,口腔扫描仪910可利用安装在主体的传感器来感测与主体结合的尖端。口腔扫描仪910可基于通过传感器获取的尖端信息来识别口腔图像获取模式。在实施例中,传感器可以基于从传感器至尖端的壁的距离和壁的颜色中的至少一者来获取尖端信息。
在实施例中,口腔扫描仪910可以与通过传感器获取尖端信息同时或分开地,利用借助安装在主体的摄像头获取的二维图像数据来获取尖端信息。口腔扫描仪910还可以从二维图像数据检测出安装在尖端的镜面区域,从而获取尖端信息。
尖端信息可包括尖端紧固方向和尖端尺寸中的至少一者。
在实施例中,当尖端信息为尖端紧固方向时,口腔扫描仪910可识别根据尖端紧固方向的扫描模式。即,当尖端紧固至主体时,口腔扫描仪910可根据该紧固方向是尖端的上部、下部、还是侧面,识别不同的扫描模式。
例如,当尖端紧固方向为上部时,即尖端的上部与主体的上部为同一方向时,口腔扫描仪910可识别上颚扫描模式。当尖端紧固方向为如尖端的左侧或右侧的侧面时,口腔扫描仪910可识别咬合扫描模式。
口腔扫描仪910可将识别的扫描模式传送至数据处理装置920。此外,口腔扫描仪910可将通过扫描患者的口腔而获取的二维图像数据传送至数据处理装置920。口腔扫描仪910所获取的二维图像可以是根据所识别的扫描模式的图像。例如,当尖端的上部紧固至主体时,用户可利用口腔扫描仪910扫描患者的上颚来获取关于上颚的数据。口腔扫描仪910可将关于上颚的数据传送至数据处理装置920。
在实施例中,数据处理装置920可从口腔扫描仪910接收扫描模式,并根据该扫描模式来处理图像。例如,当从口腔扫描仪910接收的扫描模式为上颚扫描模式时,数据处理装置920可识别从口腔扫描仪910传送的数据为用于生成上颚图像的上颚用扫描数据,并利用所传送的数据,生成关于上颚的三维虚拟模型。
数据处理装置920可通过显示器925向用户输出表示当前被扫描的对象体的部位的扫描模式菜单927。扫描模式菜单927可以是表示扫描对象是口腔的上颚、下颚、还是咬合的信息。
在实施例中,数据处理装置920可在扫描模式菜单927上显示从口腔扫描仪910接收的扫描模式并输出。例如,从口腔扫描仪910传送的扫描模式为下颚扫描模式时,数据处理装置920可在扫描模式菜单927中将下颚扫描模式加亮显示。
在实施例中,数据处理装置920可利用从口腔扫描仪910接收的原始数据,获取符合识别的扫描模式的三维图像926。即,当所识别的扫描模式为下颚扫描模式时,数据处理装置920可利用从口腔扫描仪910接收的原始数据,获取符合下颚扫描模式的三维图像926,并将其通过显示器925输出。
在实施例中,口腔扫描仪910可利用扫描患者的口腔而获取的二维图像数据,根据所识别的扫描模式来获取三维图像926。口腔扫描仪910可将扫描模式和所获取的三维图像926传送至数据处理装置920。数据处理装置920可将从口腔扫描仪910接收的扫描模式和三维图像926输出至显示器925。
图9示出口腔扫描仪910向数据处理装置920传送扫描模式的情况,但在另一实施例中,还可以是数据处理装置920向口腔扫描仪910传送扫描模式。
例如,用户可利用通过数据处理装置920的显示器925输出的用户界面画面,选择要利用扫描数据来生成的扫描对象。即,用户可利用图9的显示器925所示的扫描模式菜单927,来选择要利用原始数据生成的图像是口腔的上颚图像、下颚图像、还是咬合图像。
在实施例中,数据处理装置920可将用户在扫描模式菜单927中选择的扫描模式传送至口腔扫描仪910。口腔扫描仪910可根据从数据处理装置920接收的扫描模式来调节结合至主体的尖端的方向。例如,当前在主体紧固有尖端的上部,且从数据处理装置920接收的扫描模式为咬合扫描模式时,口腔扫描仪910可自动旋转尖端的紧固方向,以使尖端的侧面紧固至主体,或者,可以使用光、声音或影像等通知用户尖端的紧固方向需旋转。
如上所述,根据实施例,口腔扫描仪910和数据处理装置920可联动尖端的紧固方向和扫描模式,使根据尖端的紧固方向自动设置扫描模式。因此,用户可避免下述不便:在利用口腔扫描仪910扫描口腔的同时操作数据处理装置920来输入扫描模式,或通过数据处理装置920设置扫描模式后再次调节尖端的紧固方向以符合扫描模式。
图10是用于说明根据实施例的在尖端为小尺寸的情况下口腔扫描仪以小投射模式动作的图。
在实施例中,尖端根据尺寸可分为普通尺寸尖端和小尺寸尖端。小尺寸尖端是安装至尖端内的镜面和尖端的宽度均小于普通尺寸尖端的尖端。
口腔扫描仪的光学系统照射光的投射区域可以是预先确定的区域。因此,口腔扫描仪的光学系统未被调整时,口腔扫描仪可以以预先确定的基本投射区域照射光。下面,为了便于说明,将由口腔扫描仪的光学系统确定的基本投射区域称为第一投射区域。
在实施例中,当尖端为普通尺寸尖端时,口腔扫描仪可向第一投射区域照射光。
图10的(a)是说明当尖端1010为普通尺寸时从口腔扫描仪的光学系统照射的光的光路径的图。图10的(a)中,从口腔扫描仪的光学系统照射到第一投射区域的光被尖端1010的镜面1011反射,并通过尖端1010的开口部照射到对象体上。
图10的(b)示出了当尖端1020是小尺寸时,与图10的(a)相同,将光照射到第一投射区域的情况。如图10的(b)所示,小尺寸的尖端1020所包括的镜面1021比普通尺寸的尖端1010所包括的镜面1011小。
尽管尖端1020是小尺寸,但如果口腔扫描仪以与向普通尺寸的尖端1010照射光时相同的面积照射光时,则照射的光1013中的一部分会撞到小尺寸的尖端1020的内壁,而不是镜面1011,从而引起漫反射。撞到内壁的光会作为噪声进入主体内的摄像头镜头。在这种情况下,由于漫反射光引起的噪声被添加到主体中的摄像头获取的图像中,因此无法获取准确的扫描数据。此外,由于数据处理装置生成包括噪声的三维虚拟模型,因此无法生成准确的三维虚拟模型。
在实施例中,口腔扫描仪可以使用摄像头获取的图像来识别尖端的尺寸。例如,即使尖端1020是小尺寸尖端,但如果照射符合普通尺寸的尖端1010的面积的光时,照射的光中的一部分被小尺寸的尖端1020的镜面1021反射,并照射到对象体上,照射到对象体的光通过摄像头以图像获取。其余的光不会撞到镜面1021,在壁发生漫反射,再次回到摄像头镜头。
在实施例中,口腔扫描仪可在摄像头获取的二维图像数据中,区分针对对象体所获取的图像数据区域,即,镜面区域和其他区域。由此,口腔扫描仪可识别尖端是小尺寸尖端还是普通尺寸尖端。
在实施例中,口腔扫描仪可通过传感器识别尖端的尺寸,或从通过摄像头获取的图像数据识别尖端的尺寸,当识别的尖端为小尺寸时,可以相应地以小投射模式动作。在小投射模式中,口腔扫描仪可将投射区域从第一投射区域调节成第二投射区域。第二投射区域的大小是比第一投射区域的大小更缩小的区域。
图10的(c)示出了当尖端1020是小尺寸时,口腔扫描仪根据小投射模式调整投射区域时的光路径。在图10的(c)中,口腔扫描仪可以通过将投射区域缩小到第二投射区域来照射缩小面积的光1023。从第二投射区域发射的光1023不会撞到小尺寸的尖端1020的内壁,而是全部照射到镜面1021,并从镜面1021反射并朝向对象体。
如上所述,根据实施例,当识别到尖端为小尺寸时,口腔扫描仪可相应地缩小投射区域,从而获取准确的扫描数据。
图11是用于说明根据实施例从二维图像数据获取尖端信息并根据尖端信息检测投射区域的方法的图。
在实施例中,口腔扫描仪可从通过摄像头获取的二维图像数据中获取关于尖端的尺寸的信息。
图11的(a)示出小尺寸尖端内所包括的镜面1110。小尺寸尖端内所包括的镜面1110比普通尺寸尖端内所包括的镜面小。
图11的(b)示出口腔扫描仪的投影仪照射光的基本投射区域1120。基本投射区域1120可以是按照普通尺寸的尖端设置的投射区域。基本投射区域1120可以是具有预定大小的区域。如果安装在口腔扫描仪主体上的尖端是普通尺寸,则口腔扫描仪可以将光照射到预先确定的基本投射区域1120中。口腔扫描仪的摄像头可以通过基本关注扫描区域获取对象体的图像。
在口腔扫描仪上安装了小尺寸尖端,但当口腔扫描仪将光照射到基本投射区域1120时,照射的光的面积大于小尺寸尖端的镜面1110。因此,被照射的部分光被小尺寸尖端所包括的镜面1110反射,并被照射到对象体上,但其余光会撞到尖端内壁,引起漫反射。
口腔扫描仪的摄像头可以从通过小尺寸的尖端所包括的镜面1110照射到对象体的光中获取图像。
图11的(c)示出了摄像头通过基本关注扫描区域获取的图像数据1130。通过基本关注扫描区域获取的图像数据1130可以包括由小尺寸尖端内所包括的镜面1110获取的关于对象体的图像区域1140,以及由投影仪发射的光在壁中引起漫反射,重新返回摄像头镜头而获取的区域。
在实施例中,在通过基本关注扫描区域获取的图像数据1130中,口腔扫描仪可区分针对对象体获取的图像数据区域1140和其他区域。
在实施例中,为了在通过基本关注扫描区域获取的图像数据1130中更容易地区分针对对象体获取的图像数据区域1140和其他区域,口腔扫描仪可以利用预定图案的光。例如,如图11的(b)所示,口腔扫描仪可利用格纹图案的光,但这为一实施例,可利用能够容易区分区域的多种图案的光。
即使当小尺寸尖端安装在口腔扫描仪主体上时,当口腔扫描仪将预定图案的光发射到基本投射区域1120时,所发射的预定图案的光中的一部分与小尺寸尖端的壁碰撞后再次入射到摄像头镜头,因此入射的光保持原始预定图案。
在口腔扫描仪所发射的预定图案的光中,撞到小尺寸尖端的镜面1110的光照射至对象体,照射至对象体的光通过口腔扫描仪内部的摄像头以图像获取。这时,通过摄像头获取的图像可以是拍摄对象体的图像。这种情况下,在通过摄像头获取的图像中,几乎看不到照射光中包含的图案。因此,口腔扫描仪可以从通过基本关注扫描区域获取的图像数据1130中识别出包括预定图案的区域、以及几乎看不到预定图案的区域,即针对对象体获取的图像区域1140。口腔扫描仪可以识别几乎看不到预定图案的针对对象体获取的图像区域1140的尺寸。
口腔扫描仪可以识别看不见预定图案的针对对象体获取的图像区域1140的大小。例如,口腔扫描仪可以识别与针对对象体获取的图像区域1140的横向或纵向尺寸相符合的格纹图案的数量,并且可以根据所识别的格纹图案的数量来识别针对对象体获取的图像区域1140的大小。根据针对对象体获取的图像区域的大小比具有基本关注扫描区域的图像1130小预定基准值以上,口腔扫描仪可以识别出结合到口腔扫描仪主体的尖端是小尺寸的尖端。
在实施例中,口腔扫描仪还可将通过基本关注扫描区域获取的图像数据传送至数据处理装置。例如,口腔扫描仪可将如图11的(c)所示的图像数据传送至数据处理装置。
这种情况下,数据处理装置可从口腔扫描仪接收图像数据,并由此识别针对对象体获取的图像数据区域1140。
数据处理装置可识别与图像数据所包括的镜面区域对应的格纹图案的数,由此认知尖端的尺寸与当前投射模式不同。数据处理装置可识别对应于尖端的尺寸的投射模式,并根据所识别的模式生成控制信息,将其传送至口腔扫描仪,并控制口腔扫描仪,使其以根据控制信息的投射模式动作。
或者,数据处理装置还可以在从口腔扫描仪接收的图像数据中,仅切割与所识别的图像数据区域1140相对应的区域,并且仅将该区域用作原始数据来获取三维口腔图像。
在实施例中,从数据处理装置接收控制信息时,口腔扫描仪可以根据控制信息调节投射模式。或者,口腔扫描仪在识别出尖端尺寸与当前投射模式不符时,可以自动以与尖端尺寸相符合的投射模式进行动作。
例如,当尖端的尺寸为小尺寸时,口腔扫描仪可将投射模式调节为小投射模式,将投射区域从第一投射区域缩小至第二投射区域。第一投射区域和第二投射区域的大小为预先确定的值,预先存储在口腔扫描仪内部。
在另一实施例中,尖端的尺寸与当前的投射模式不符合时,口腔扫描仪可直接检测与尖端相符合的投射区域。
尖端可以已经规定了宽度或长度以及安装镜面的位置或角度等。但是,由于尖端是由多个部件组合而成,因此设计上规定的尺寸可能会存在允许范围的误差。此外,由于尖端在其特性上不是固定在口腔扫描仪的主体上的结构,而是可以拆卸的结构,因此根据与主体的拆卸程度是松动还是牢固等,可能会存在公差。
因此,在实施例中,当安装的尖端尺寸与根据当前投射模式的尺寸不同时,口腔扫描仪可以根据所安装的尖端直接检测和使用新的投射区域。
在实施例中,口腔扫描仪可以在每次安装新尖端时检测与尖端相符合的投射区域。
在实施例中,当识别出安装在口腔扫描仪上的尖端是小尺寸时,口腔扫描仪可以在通过摄像头的基本扫描感兴趣区域获取的图像数据1130中识别包括预定图案的区域和几乎看不到图案的区域,并且可以检测针对对象体的图像区域1140,从而获取与检测到的图像区域1140区域相对应的第二投射区域。口腔扫描仪可以通过第二投射区域,向小尺寸尖端的镜面1110照射光。此时,照射的光可以是具有与预定图案不同的图案的结构光。
口腔扫描仪还可以获取对应于第二投射区域的第二感兴趣区域。口腔扫描仪可以针对对象体通过缩小的扫描感兴趣区域,即第二感兴趣区域来获取图像。图11的(d)示出口腔扫描仪将光照射到第二投射区域,且口腔扫描仪的摄像头通过第二感兴趣区域将照射的光获取为图像数据1150。参照图11的(d),可以看出通过第2感兴趣区域获取的图像数据1150中只包含与小尺寸尖端的镜面相对应的图像数据,而不存在不必要的数据。
虽然为了便于说明,在图11中图像数据区域1140被图示为正方形,但并不限于此,图像数据区域1140可以是具有上、下长度彼此不同的四角形形状。对此,将参照图12进行具体说明。
在实施例中,图11以安装在口腔扫描仪上的尖端为小尺寸的情况为例说明,但本申请的公开并不限于此。
在实施例中,尖端可以具有多个各种尺寸,例如按照尺寸可具有大尺寸、小尺寸和中型尺寸。这时,口腔扫描仪的投射区域具有与比安装在大尺寸尖端上的镜面尺寸更大的镜面相对应的面积,并且摄像头的感兴趣区域也可以设置为与比安装在大尺寸尖端上的镜面更大的镜面尺寸相对应的面积。
口腔扫描仪可以从通过摄像头获取的图像数据中识别针对对象体的图像区域,从而识别安装在口腔扫描仪上的尖端的尺寸。口腔扫描仪可以识别图像数据所包括的针对对象体的图像区域的大小,根据所识别的图像区域的大小包括在哪个范围内来识别尖端的尺寸。例如,口腔扫描仪在识别出的图像区域的大小小于第一基准大小时,识别出尖端是小尺寸尖端,当图像区域的大小大于第一基准大小且小于第二基准大小时,识别出尖端是中型尺寸尖端,当识别出的图像区域的大小大于第二基准大小时,识别出是大尺寸尖端。
在实施例中,口腔扫描仪可以根据所识别的尖端的尺寸调节投射区域和摄像头感兴趣区域。例如,当识别出的尖端是大尺寸尖端时,口腔扫描仪可以调节投射区域以使其具有与安装在大尺寸上的镜面相对应的面积。此外,口腔扫描仪可以调节摄像头的感兴趣区域以符合大尺寸的感兴趣区域。
如上所述,根据实施例,口腔扫描仪可以通过使用摄像头扫描的二维图像数据来识别安装在主体上的尖端尺寸。
此外,口腔扫描仪可以将易于识别的预定图案的光照射到基本投射区域,从而更准确地识别安装在主体上的尖端尺寸。
此外,口腔扫描仪可调节投射区域和扫描感兴趣区域,以符合小尺寸尖端所包括的镜面尺寸,利用调节后的投射区域和扫描感兴趣区域来获取二维图像数据。
图12是用于说明根据实施例从二维图像数据获取尖端信息的图。
图12的(a)示出了口腔扫描仪上安装的尖端虽然是小尺寸,但口腔扫描仪向普通投射区域照射光的情况。小尺寸尖端中所包括的镜面比普通尺寸尖端的所包括的镜面小,小尺寸尖端的宽度也比普通尺寸尖端的上、下宽度小。尽管尖端是小尺寸,但当口腔扫描仪以与向普通尺寸尖端照射光时相同的面积照射光时,照射的光中的一部分会撞到小尺寸尖端的内壁,而不是镜面,从而引起漫反射,并以噪声形式进入摄像头镜头。
此外,图12的(a)示出尖端的上部和口腔扫描仪主体的上部相接并正向结合。
图12的(b)示出,即使像图12的(a)一样安装了小尺寸尖端,当向普通投射区域照射光时,摄像头通过基本关注扫描区域获取的图像数据1210。通过基本关注扫描区域获取的图像数据1210中,包括通过小尺寸尖端内所包括的镜面获取的关于对象体的图像区域1220,还包括通过投影仪发射的光在壁引起漫反射,再次回到摄像头镜头而获取的区域。
口腔扫描仪和/或从口腔扫描仪接收二维图像数据的数据处理装置,可以根据针对对象体获取的图像区域1220的大小比具有基本关注扫描区域的图像1210小预定基准值以上,识别出结合到口腔扫描仪主体的尖端是小尺寸尖端。
另一方面,为了改变光路径,安装在尖端上的镜面以倾斜预定角度的状态安装在尖端。镜面改变光路径,使从投影仪射出的光朝向对象体照射,并且改变光路径,使从对象体反射并入射到尖端的开口部的光朝向摄像头镜头,因此,镜面以与从投影仪射出的光的方向及从对象体入射的光的方向不同的预定角度倾斜地安装在尖端。因此,从摄像头到镜面的上端部的距离和从摄像头到镜面的下端部的距离不同。即,从摄像头到镜面的上端部的距离比从摄像头到镜面的下端部的距离更短。在这种情况下,如图12的(a)所示,当在安装有小尖端的情况下将光照射到普通投射区域并通过基本扫描感兴趣区域获取图像数据1210时,如图12的(b)所示,图像数据1210所包括的关于对象体的图像区域1220具有图像区域1220的上端部比下端部更长的形状。
在实施例中,口腔扫描仪和/或从口腔扫描仪接收图像数据1210的数据处理装置,可从图像数据1210检测出关于对象体的图像区域1220来识别镜面区域。口腔扫描仪可基于关于对象体的图像区域1220的形状来识别尖端的紧固方向。口腔扫描仪和/或数据处理装置可以根据如图12的(b)所示的对应于图像区域1220的上端部的格纹图案的数量比对应于下端部的格纹图案的数量大,识别出上端部的长度更长。
当图像区域1220的上端部的长度更长时,口腔扫描仪和/或数据处理装置可识别尖端以正向安装。
图12的(c)与图12的(a)的相同,示出了口腔扫描仪上安装的尖端虽然是小尺寸,但口腔扫描仪向普通投射区域照射光的情况。但是,图12的(c)是尖端的下部与口腔扫描仪主体的上部相接并逆向结合,这点与正向结合的图12的(a)不同。
图12的(d)示出,即使像图12的(c)一样安装了小尺寸尖端,当向普通投射区域照射光时,摄像头通过基本关注扫描区域获取的图像数据1230。通过基本关注扫描区域获取的图像数据1210中,包括通过尖端内所包括的镜面获取的关于对象体的图像区域1240,还包括在壁中引起漫反射的光再次回到摄像头镜头而获取的区域。
在实施例中,口腔扫描仪和/或从口腔扫描仪接收图像数据1230的数据处理装置,可分别识别图像数据1230所包括的关于对象体的图像区域1240的上端部和下端部的长度。例如,口腔扫描仪和/或数据处理装置可识别对应于图像区域1240的上端部和下端部的长度的格纹图案的数量,根据所识别的格纹图案的数量分别识别图像区域1240的上端部和下端部的长度,并识别哪一个更长。
口腔扫描仪和/或数据处理装置可根据图像区域1240的下端部比上端部长,识别出结合至口腔扫描仪主体的小尺寸尖端以逆向安装在口腔扫描仪。
在实施例中,口腔扫描仪和/或数据处理装置可从图像数据识别针对对象体的图像区域的方向。口腔扫描仪和/或数据处理装置可识别图像区域的上端部和下端部的长度,由此识别尖端是以正向安装还是逆向安装。在实施例中,口腔扫描仪和/或数据处理装置可根据所识别的尖端的方向识别扫描模式,并根据所识别的扫描模式处理图像数据。
如上所述,根据实施例口腔扫描仪和/或数据处理装置可利用通过摄像头扫描的二维图像数据识别安装在主体的尖端的尺寸和方向。
图13是用于根据说明实施例在小投射模式时投射区域的大小及摄像头扫描感兴趣区域的大小被调节的图。
口腔扫描仪可利用投影仪照射光。口腔扫描仪的投影仪可以通过用RGB光源照射光,并控制数字微镜器件(digital micromirror device,DMD)中包括的多个镜面中的每一个来形成图案。DMD是细微镜头的集合体,数万个镜面像棋盘一样布置,每个镜面都可以起到像素的作用。投影仪可以将DMD中包含的镜面控制为打开(on)和关闭(off)中的一者。各镜面在打开状态和关闭状态中具有不同的倾斜度,由此使光流出或无法流出,从而调节亮度。
在实施例中,口腔扫描仪可以识别尖端的尺寸,并且可以根据所识别的尖端的尺寸以不同的投射模式动作。在尖端尺寸为普通尺寸时,口腔扫描仪可以以普通投射模式动作。在普通投射模式下,口腔扫描仪可以将光照射到预定的第一投射区域。
图13中的(a)简化了投影仪照射光时使用的DMD。在实施例中,图13的(a)所示的DMD整个区域可以是与第一投射区域1100相对应的区域。即,在普通投射模式下,投影仪可以通过控制DMD整个区域中包括的镜面均处于打开状态来照射光。
在实施例中,当识别出的尖端尺寸为小尺寸时,口腔扫描仪可以以小投射模式动作。在小投射模式下,口腔扫描仪可以将第一投射区域缩小到第二投射区域。
在实施例中,第二投射区域可以是对应安装在小尺寸尖端上的镜面尺寸而确定的区域。在第二投射区域中,照射的光不会撞到尖端的壁,并且可以全部照射到小尺寸尖端所包括的镜面中。
在图13的(a)中,为了以小投射模式动作,口腔扫描仪可将第一投射区域1300缩小到第二投射区域1310。口腔扫描仪仅将第二投射区域1310所包括的镜面控制为打开状态,并将其余区域所包括的镜面控制为关闭状态,从而可以不使用DMD整个区域中位于边缘的镜面,只使用缩小后的第二投射区域1310的镜面进行光投射。
在小投射模式下,口腔扫描仪将光投射到第二投射区域,投射的光被小尺寸尖端所包括的镜面反射并照射到对象体上。
口腔扫描仪可以针对照射光的口腔使用一个以上摄像头获取二维图像数据。此时,口腔扫描仪可以获取与扫描感兴趣区域相对应的二维图像数据。扫描感兴趣区域是从整个影像中选择的部分区域,可指为分析图像而实际处理的影像处理区域。
扫描感兴趣区域的大小可以预先确定。口腔扫描仪可以在预定的扫描感兴趣区域获取二维图像数据。以下,为了便于说明,将预先确定的基本扫描感兴趣区域称为第一感兴趣区域。
如果安装在口腔扫描仪主体上的尖端是小尺寸,那么小尺寸尖端中所包括的镜面比普通尺寸尖端中所包括的镜面小。因此,通过小尺寸尖端所包括的镜面反射而入射到对象体的光的面积也变小。即使尖端是小尺寸,当通过预先确定的基本扫描感兴趣区域获取图像时,除了对象体之外,不必要的数据也可能包括在图像中。此外,由于不必要的数据,数据处理速度及运算量等也会增加。
因此,在实施例中,当尖端为小尺寸时,口腔扫描仪只能通过缩小摄像头的扫描感兴趣区域来仅在缩小的扫描感兴趣区域中获取口腔图像。在实施例中,当尖端为小尺寸时,口腔扫描仪可以将扫描感兴趣区域从第一感兴趣区域调整到第二感兴趣区域。第二感兴趣区域可以是比第一感兴趣区域更小的区域。
图13的(b)是示出摄像头获取图像数据的扫描感兴趣区域的图。在实施例中,图13的(b)所示的扫描感兴趣区域可以是基本扫描感兴趣区域,即第一感兴趣区域1320。即,在普通投射模式下,摄像头可以在第一感兴趣区域1320中获取图像。在第一感兴趣区域1320中获取的图像可用于生成三维虚拟模型。
在实施例中,当所识别的尖端的尺寸为小尺寸时,口腔扫描仪可将摄像头的扫描感兴趣区域从第一感兴趣区域1320缩小至第二感兴趣区域1330。
在实施例中,第二感兴趣区域1330可以对应于安装在小尺寸尖端上的镜面尺寸来确定。
在图13的(b)中,为了以小投射模式动作,口腔扫描仪可以将扫描感兴趣区域从第一感兴趣区域1320缩小到第二感兴趣区域1330。口腔扫描仪可以将第一感兴趣区域1320沿着横轴左右调节a大小,沿着纵轴上下调节b大小,从而将扫描感兴趣区域缩小到第二感兴趣区域1330。口腔扫描仪可以在缩小的第二感兴趣区域1330中获取图像数据。在第二感兴趣区域1330中获取的图像数据可用于生成三维虚拟模型。
如上所述,根据实施例,口腔扫描仪可根据所识别的尖端的尺寸以不同的投射模式动作。在尖端尺寸为小尺寸时,口腔扫描仪可以缩小投射区域和扫描感兴趣区域,以应对小尖端的镜面尺寸,从而获取准确的扫描数据。
图14为用于说明根据实施例不同的投射模式下的扫描感兴趣区域的图。
图14的(a)示出基本扫描感兴趣区域,即,第一感兴趣区域1400。第一感兴趣区域1400的大小可以包括54个点,横和竖分别为6×9。在基本投射模式下,口腔扫描仪可以在第一感兴趣区域1400中获取图像数据。数据处理装置可以通过提取口腔扫描仪在第一感兴趣区域1400中获取的图像数据中包括的所有54个点或提取其中的一部分来获取三维虚拟模型。
在实施例中,当所安装的尖端为小尺寸时,口腔扫描仪可将扫描感兴趣区域调节为第二感兴趣区域。
图14的(b)示出第二感兴趣区域1410。口腔扫描仪可将扫描感兴趣区域从第一感兴趣区域1400调节为第二感兴趣区域1410。第二感兴趣区域1410的大小可以对应于安装在小尺寸尖端上的镜面尺寸来确定。在图14的(b)中,第二感兴趣区域1410可以包括20个点,横和竖分别为4×5。
当尖端为小尺寸时,口腔扫描仪可以在第二感兴趣区域1410中获取图像数据。数据处理装置可以通过提取口腔扫描仪通过第二感兴趣区域1410获取的图像数据中包括的所有20个点或提取其中的一部分来获取三维虚拟模型。
在又一实施例中,当以小投射模式动作时,数据处理装置可提高调整后的扫描感兴趣区域的分辨率。图14的(c)示出分辨率提高的第二感兴趣区域1420。
数据处理装置可以通过从第二感兴趣区域1420中提取8×10大小的点并用于数据处理来提高调整后的扫描感兴趣区域的分辨率。数据处理装置可以通过增加调整后的扫描感兴趣区域的分辨率来获取更精确的三维虚拟模型。
图15示出根据实施例的口腔图像处理系统。
在实施例中,口腔图像处理系统可包括口腔扫描仪1510、数据处理装置1520和通信网络1530。
口腔扫描仪1510可将通过扫描患者的口腔或牙齿铸模模型而获取的二维数据通过通信网络1530传送至数据处理装置1520,或者处理二维数据来生成三维虚拟模型,并将其传送至数据处理装置1520。
数据处理装置1520可以通过处理从口腔扫描仪1510接收的二维数据来生成三维虚拟模型,或者可以将从口腔扫描仪1510接收的三维虚拟模型显示在显示器上或传输到外部装置。
在图15中,口腔扫描仪1510可包括处理器1511、存储器1512、感测部1513、光照射部1514、用户界面1515、通信接口1516和影像处理部1517。
存储器1512可存储至少一个指令。此外,存储器1512可存储处理器所执行的至少一个指令。此外,存储器可存储处理器1511所执行的至少一个程序。此外,存储器1512可以暂时存储影像处理部1516所包括的摄像头获取的二维图像数据或由此生成的三维虚拟模型,以传送到数据处理装置1520。
在实施例中,存储器1512可以存储映射到尖端信息的口腔图像获取模式。口腔图像获取模式信息可以是用于识别对应于尖端信息的模式的信息。例如,口腔图像获取模式可以包括每个尖端紧固方向的扫描模式。尖端紧固方向可以通过使用传感器根据从传感器到尖端的壁的距离或颜色来获取,与此同时或分开地,可以基于摄像头获取的二维图像数据中包括的镜面区域的形状来获取。此外,口腔图像获取模式可以包括根据尖端尺寸的投射模式。尖端尺寸可以通过使用传感器根据从传感器到尖端的壁的距离或颜色来获取,与此同时或分开地,可以基于摄像头获取的二维图像数据中包括的镜像区域的尺寸来获取。
感测部1513可以包括至少一个传感器。感测部1513设置在口腔扫描仪1510的主体上,可以感测结合到主体的尖端。感测部1513可以包括至少一个接近传感器。感测部1513可以发射电磁场、电磁波、超声波等,测量所发射的信号被尖端反射并返回的光量或返回时间等,识别与尖端的距离或识别尖端的表面颜色。感测部1513可以利用到尖端的距离或尖端的表面颜色,获取关于尖端的尖端信息。尖端信息可以包括尖端紧固方向和尖端尺寸中的至少一者。
光学部1514可以包括光源和用于投射来自光源的光的投影仪。光学部1514可以投影图案光或结构光等。光学部1514可以通过用RGB光源照射光,并控制DMD中包含的微细镜面中的每一个来形成图案。光学部151514可以通过控制DMD所包括的镜面的打开或关闭来照射光。
光学部1514照射的光通过安装在尖端上的镜面向开口部照射,并通过开口部向对象体照射。
在实施例中,光学部1514根据处理器1511的控制,当尖端尺寸为普通尺寸并且尖端尺寸与当前投射模式不符合时,可以将光照射到基本投射区域,即第一投射区域。
在实施例中,光学部1514根据处理器1511的控制,当尖端尺寸为小尺寸并且尖端尺寸与当前投射模式不符合时,可以根据小尺寸尖端调节投射区域,并将光照射到调节后的第二投射区域。
在实施例中,光学部1514可以照射诸如格纹之类的易于划分区域的预定图案光,以识别尖端尺寸。
用户界面1515可以接收用于控制口腔扫描仪1510的用户输入。用户界面1515可以包括检测用户触摸的触摸面板、接收用户按压操作的按钮、包括麦克风的语音识别装置等。
在实施例中,用户界面1515可以包括用于旋转尖端的输入装置。例如,用户界面1515可以通过使用诸如按钮类型、环形类型、轮毂类型和触摸板类型之类的装置从用户接收用于旋转尖端的控制信号。
通信接口1516可以与数据处理装置1520通过有线或无线的通信网络1530进行通信。具体地,通信接口1516可根据处理器1511的控制与数据处理装置1520执行通信。通信接口1516可将影像处理部1517获取的二维图像数据或口腔图像传送至数据处理装置1520。
通信接口1516可包括:根据蓝牙、Wi-Fi、蓝牙低能耗(Bluetooth Low Energy,BLE)、NFC/RFID、Wi-Fi直连(Wifi Direct)、UWB或紫峰(ZIGBEE)等通信规格进行通信的至少一个近距离通信模块;根据远距离通信规格与支持远距离通信的服务器进行通信的远距离通信模块;以及为了有线通信,与外部电子装置通过有线电缆连接的至少一个端口。
在实施例中,当感测部1513获取尖端信息或处理器1511从影像处理部1517获取的二维图像数据中获取尖端信息时,通信接口1516可以通过通信网络1530将尖端信息发送到数据处理装置1520。
另外,通信接口1516可以通过通信网络1530从数据处理装置1520接收根据投射模式的控制信息。
影像处理部1517可执行用于图像的生成和/或处理的动作。影像处理部1517可包括至少一个摄像头。影像处理部1517可利用摄像头获取二维图像数据。
例如,为了根据光学三角法复原三维图像,影像处理部1517可包括对应于左视野(left F ield of View)的L摄像头以及对应于右视野(Right Field of View)的R摄像头。L摄像头以及R摄像头可分别获取对应于左视野(left Field of View)的L图像数据以及对应于右视野(Right Field of View)的R图像数据。影像处理部1517可以对包括L图像数据和R图像数据在内的原始数据执行数据传输等的处理动作,并将其输出到通信接口1516以传输到数据处理装置1520。
或者,影像处理部1517还可以直接处理通过摄像头获取的二维图像数据,生成三维虚拟模型,并通过通信接口1516传送到数据处理装置1520。
在实施例中,影像处理部1517根据处理器1511的控制,当尖端尺寸与当前扫描感兴趣区域不符合时,可以根据尖端尺寸调整扫描感兴趣区域,并基于调整后的扫描感兴趣区域获取二维图像数据。
处理器1511可控制口腔扫描仪1510的整体。
在实施例中,处理器1511可通过感测部1513获取尖端信息。
在实施例中,处理器1511从影像处理部1517获取的二维图像数据中检测反射镜区域,并且基于反射镜区域的大小和形状中的至少一者,获取尖端方向和尖端尺寸中的至少一者。
在实施例中,处理器1511可以通过通信接口1516将尖端信息和二维图像数据发送到数据处理装置1520。
或者,在另一实施例中,处理器1511可以基于尖端信息直接从二维图像数据中获取口腔图像,并将获取的口腔图像发送到数据处理装置1520。
处理器1511可以基于尖端信息识别口腔图像获取模式。处理器1511从存储器1512中提取口腔图像获取模式,并利用该模式,可以识别根据尖端信息的口腔图像获取模式。
如果尖端信息是关于尖端紧固方向的信息,处理器1511可以识别根据尖端紧固方向的扫描模式。例如,处理器1511可以根据尖端紧固方向是上部、下部、还是侧面,来识别上颚扫描模式、下颚扫描模式和咬合扫描模式中的一种。处理器1511可以根据识别的模式处理二维图像数据以获取口腔图像,并通过通信接口1516将其发送到数据处理装置1520。
在实施例中,处理器1511可以从数据处理装置1520接收控制信息,并且可以根据控制信息调节投射模式。即,当数据处理装置1520基于尖端信息识别投射模式时,处理器1511可以接收根据数据处理装置1520生成的投射模式的控制信息,并相应地进行动作。控制信息可以是,当尖端为普通尺寸尖端时,控制口腔扫描仪以普通投射模式动作,当尖端尺寸为小尺寸尖端时,控制口腔扫描仪以小投射模式动作的信息。
或者,在实施例中,处理器1511可以基于尖端信息识别口腔图像获取模式是投射模式,并且可以直接控制口腔扫描仪,以便口腔扫描仪根据所识别的投射模式动作。
在实施例中,如果尖端信息是关于尖端尺寸的信息,处理器1511可以控制口腔扫描仪1510,以便在尖端尺寸为普通尺寸和小尺寸的情况下,以不同的投射模式动作。
当尖端是小尺寸且当前投射模式被设置为普通投射模式时,处理器1511可以控制口腔扫描仪1510,使其以小投射模式动作,从而使光学部1514将投射区域从第一投射区域缩小到第二投射区域并投射光,并且影像处理部1517可以将摄像头的扫描感兴趣区域从第一感兴趣区域缩小到第二感兴趣区域。
或者,处理器1511还可以直接检测出与尖端尺寸符合的投射区域。为此,处理器1511使光学部1514将预定图案的光投射到预定投射区域,并使影像处理部1517可以在预定区域中获取口腔图像。处理器1511可以在从预定感兴趣区域中获取的口腔图像中利用预定图案检测尖端的反射镜区域。处理器1511可以将投射区域更改为与检测到的反射镜区域相对应的投射区域。
处理器1511可以将感兴趣区域变更为与变更的投射区域对应的扫描感兴趣区域。
处理器1511可控制口腔扫描仪内部的至少一个结构,以执行预期动作。因此,即便作为示例说明了处理器执行预定动作的情况,但这也意味着处理器控制数据处理装置内部中的至少一个结构,以执行预定动作。
下面,说明数据处理装置1520。数据处理装置1520还可称为口腔图像处理装置。
数据处理装置1520可包括通信接口1524、用户界面1523、显示器1525、影像处理部1526、存储器1522和处理器1521。
通信接口1524可通过有线或无线通信网络与至少一个外部电子装置进行通信。具体地,通信接口1524可通过处理器1521的控制,与口腔扫描仪1510进行通信。通信接口1524可根据处理器1521的控制,与通过有线、无线的通信网络1530连接的外部电子装置或服务器等执行通信。
在实施例中,通信接口1524可从口腔扫描仪1510接收二维图像数据和尖端信息。此外,通信接口1524可将控制信息传送至口腔扫描仪1510。
或者,通信接口1524可将口腔扫描仪1510基于尖端信息获取的口腔图像传送至口腔扫描仪1510。
具体地,通信接口1524可包括至少一个近距离通信模块,所述近距离通信模块按照蓝牙、Wi-Fi、蓝牙低功耗(Bluetooth Low Energy,BLE)、近场通信/射频识别(NFC/RFID)、Wi-Fi直连(Wifi Direct)、超宽带(UWB)、或紫蜂(ZIGBEE)等的通信标准进行通信。
此外,通信接口1524还可以包括远程通信模块,所述远程通信模块按照远程通信标准与用于支持远距离通信的服务器进行通信。具体地,通信接口1524可以包括通过用于互联网通信的网络进行通信的远程通信模块。此外,通信接口1524可包括通过符合3G、4G、和/或5G等的通信标准的通信网络进行通信的远程通信模块。
此外,通信接口1524可包括通过有线电缆连接到外部电子装置(例如,口腔扫描仪等)的至少一个端口,以与外部电子装置进行有线通信。由此,通信接口1524能够与通过至少一个端口有线连接的外部电子装置进行通信。
用户界面1523可以接收用于控制数据处理装置1520的用户输入。用户界面1523可包括:触摸面板,用于感测用户的触摸;按钮,用于接收用户的按压操作;以及用户输入设备,包括用于指定或选择用户界面画面上的一个点的鼠标(mouse)或键盘(key board)等,但不限于此。
此外,用户界面1523可包括用于语音识别的语音识别装置。例如,语音识别装置可以是麦克风,语音识别装置可接收用户的语音命令或语音请求。由此,处理器可以进行控制以执行对应于语音命令或语音请求的动作。
显示器1525显示画面。具体地,显示器1252可根据处理器1521的控制显示预定画面。具体地,显示器1525可基于通过口腔扫描仪15100扫描患者的口腔而获取的数据,显示包括所生成的口腔图像的用户界面画面。或者,显示器1525可显示包括与患者牙科治疗有关信息的用户界面画面。
在实施例中,显示器1525可以将从口腔扫描仪1510接收的根据尖端紧固方向的扫描模式输出到画面上。显示器1525可以输出三维虚拟模型,所述三维虚拟模型根据基于从口腔扫描仪1510接收的原始数据识别出的扫描模式生成。
影像处理部1526可执行用于图像的生成和/或处理的动作。具体地,影像处理部1526可接收从口腔扫描仪1510获取的原始数据,并根据所接收的数据生成口腔图像。具体地,影像处理部1526可针对从口腔扫描仪1510接收的扫描数据生成三维虚拟模型。
存储器1522可存储至少一个指令。此外,存储器1522可存储由处理器执行的至少一个指令。此外,存储器中可存储有由处理器1521执行的至少一个程序。此外,存储器1522可存储从口腔扫描仪1510接收到的数据(例如,通过扫描口腔来获取的原始数据等)。或者,存储器可存储三维表示口腔的口腔图像。根据一实施例,存储器1522可以包括一个以上指令,所述指令用于在正畸计划中获取口腔图像中的牙齿的最终位置。根据一实施例,存储器1522可以包括一个以上指令,所述指令用于基于调整后的扫描感兴趣区域来生成分辨率提高的三维虚拟模型。
处理器1521执行存储在存储器1522中的至少一个指令,以控制执行预期动作。其中,至少一个指令可存储在处理器1521中的内部存储器中、或存储在与处理器1521分开地包括在数据处理装置内的存储器1522中。
具体地,处理器1521执行至少一个指令,以控制数据处理装置内部的至少一个结构,从而执行预期动作。因此,即便作为示例说明了处理器1521执行预定动作的情况,但这也意味着处理器1521控制数据处理装置内部中的至少一个结构,以执行预定动作。
根据一实施例,处理器1521通过执行存储在存储器1522中的一个以上指令,缩小扫描感兴趣区域的大小时,可提高扫描感兴趣区域的分辨率。
根据一例,处理器1521可以以内部性地包括至少一个内部处理器以及用于存储在内部处理器中处理或使用的程序、指令、信号、以及数据中的至少一种的存储器器件(例如,随机存取存储器(RAM)、只读存储器(ROM)等)的形式体现。
此外,处理器1521可包括用于处理对应于视频的图形的图形处理单元(GraphicProcessing Unit)。此外,处理器可以实现为集成了核(core)和图形处理单元(GPU)的片上系统(System On Chip,SoC)。此外,处理器可包括单核以上的多核。例如,处理器1521可包括双核、三核、四核、六核、八核、十核、十二核、十六核等。
在所公开的实施例中,处理器1521可基于从口腔扫描仪1510接收到的二维图像,生成口腔图像。具体地,通信接口1524可通过处理器1521的控制接收从口腔扫描仪1510获取的数据,例如通过扫描口腔来获取的原始数据。而且,处理器1521可基于从通信接口接收到的原始数据,生成三维表示口腔的三维口腔图像。
在实施例中,处理器1521可从口腔扫描仪1510接收尖端信息。
在实施例中,处理器1521可以从口腔扫描仪1510接收的原始数据中检测反射镜区域,并且可以基于反射镜区域的大小和形状中的至少一个直接获取尖端信息。
在实施例中,当尖端信息包括尖端紧固方向信息时,处理器1521可以识别根据尖端紧固方向信息的扫描模式,并根据所识别的扫描模式处理二维图像数据以获取口腔图像。
在实施例中,当尖端信息包括尖端尺寸信息时,处理器1521可以识别根据尖端尺寸信息的投射模式,并根据投射模式生成控制信息。控制信息可以包括当尖端尺寸与当前口腔扫描仪的投射模式不符合时,控制口腔扫描仪以与尖端尺寸相符合的投射模式进行动作的信息。
在实施例中,当尖端信息包括尖端尺寸信息时,处理器1521可以调节图像的大小,以与根据尖端中包括的镜面尺寸的图像区域相符合,并且可以通过仅使用调节尺寸的图像来获取三维信息。
通信接口1524可向处理器1521传输从口腔扫描仪1510接收的原始数据,处理器1521基于接收到的原始数据,生成三维表示口腔的口腔图像。
此外,处理器1521可通过控制通信接口1524,来从外部服务器、医疗装置等直接接收三维表示口腔的口腔图像。在这种情况下,处理器1521可在不生成基于原始数据的三维口腔图像的情况下,获取三维口腔图像。
根据所公开的实施例,处理器1521执行“提取”、“获取”、“生成”等的动作可以指通过在处理器1521中执行至少一个指令来直接执行如上所述的动作的情况、以及控制其他构成要素以执行如上所述的动作的情况。
为了实现本说明书中所公开的实施例,数据处理装置1520可包括图14所示的构成要素中的一部分,也可以包括图14所示的构成要素以外的更多构成要素。
此外,数据处理装置1520可存储和执行与口腔扫描仪1510联动的专用软件。其中,专用软件可称为专用程序、专用工具(tool)、或专用应用程序。在数据处理装置1520与口腔扫描仪1510相互联动并动作的情况下,存储在数据处理装置1520中的专用软件连接到口腔扫描仪1510,并可以实时接收通过扫描口腔来获取的数据。
此外,专用软件可以执行用于获取、处理、存储和/或传输口腔图像的至少一个动作。其中,专用软件可存储在处理器中。此外,专用软件可提供用户界面,以使用从口腔扫描仪获取的数据。其中,由专用软件提供的用户界面画面可包括根据公开的实施例生成的口腔图像。
图16示出根据实施例的口腔图像处理方法的顺序图。
参照图16,口腔图像处理系统可以利用安装在口腔扫描仪主体的传感器,或从安装在口腔扫描仪主体的摄像头获取的二维图像数据中检测反射镜区域,获取关于与口腔扫描仪主体结合的尖端的尖端信息(步骤1610)。在实施例中,尖端信息可以包括尖端紧固方向和尖端尺寸中的至少一种。
口腔图像处理系统可基于尖端信息,识别口腔图像获取模式(步骤1620)。
口腔图像获取模式会根据尖端信息而有所不同。例如,如果尖端信息是尖端紧固方向,则可以意味着根据尖端紧固方向的扫描模式。口腔图像处理系统可以根据尖端的紧固方向识别扫描模式。所识别的扫描模式可以是上颚扫描模式、下颚扫描模式以及咬合扫描模式中的一种。
或者,如果尖端信息是关于尖端尺寸的信息时,则口腔图像获取模式可以意味着投射模式。投射模式可以包括紧固有普通尺寸尖端时执行的普通投射模式和紧固有小尺寸尖端时执行的小投射模式。
口腔图像处理系统可根据识别的模式获取口腔图像(步骤1630)。
当根据尖端紧固方向识别扫描模式时,口腔图像处理系统可以根据所识别的扫描模式获取口腔图像。例如,口腔图像处理系统在识别出的扫描模式为下颚扫描模式时,可以利用拍摄对象体而获取的原始数据生成下颚的三维图像。
当根据尖端尺寸识别投射模式时,口腔图像处理系统可以根据投射模式调节投射区域和摄像头的扫描感兴趣区域,从而获取口腔图像。
图17是示出根据实施例的口腔图像处理系统获取尖端信息的过程的顺序图。
口腔图像处理系统利用安装在口腔扫描仪主体的摄像头,获取关于对象体的二维图像数据(步骤1710)。此时,口腔图像处理系统利用预定图案的光进行投射,并拍摄预定图案的光照射的对象体,从而获取二维图像数据。
口腔图像处理系统可以从二维图像数据中检测出反射镜区域(步骤1720)。口腔图像处理系统通过识别二维图像数据所包括的针对对象体而获取的图像区域和其他区域,可以检测出与针对对象体而获取的图像区域相对应的反射镜区域。口腔图像处理系统可以通过区分包括和不包括预定图案的光的区域来检测反射镜区域。
口腔图像处理系统可利用反射镜区域获取尖端信息(步骤1730)。
口腔图像处理系统可以基于反射镜区域的尺寸来识别尖端尺寸。例如,口腔图像处理系统可以识别与反射镜区域的横向或纵向尺寸相对应的图案数量,并且可以根据所识别的图案数量来识别针对对象体获取的图像区域的大小。
此外,口腔图像处理系统识别与反射镜区域的上端和下端的长度相对应的图案数量,识别上端和下端长度中更长的方向,从而识别尖端是正向安装在口腔扫描仪主体上还是逆向安装在口腔扫描仪主体上。
图18是示出根据实施例以识别的扫描模式获取口腔图像的方法的顺序图。
参照图18,口腔图像处理系统可获取尖端信息(步骤1810)。口腔图像处理系统可以从通过使用安装在口腔扫描仪主体的传感器或摄像头获取的图像数据中获取尖端信息。
口腔图像处理系统可以从尖端信息中获取尖端紧固方向(步骤1820)。
口腔图像处理系统可以根据尖端紧固方向识别扫描模式(步骤1830)。例如,当尖端的上部与主体的上部沿同一方向紧固时,口腔图像处理系统可以识别上颚扫描模式。当尖端的下部与主体的上部沿同一方向紧固时,口腔图像处理系统可以识别下颚扫描模式。此外,当尖端的侧面与主体的上部沿同一方向紧固时,口腔图像处理系统可以识别咬合扫描模式。
口腔图像处理系统可通过所识别的扫描模式获取口腔图像(步骤1840)。在识别出的扫描模式为上颚扫描模式时,口腔图像处理系统可以利用二维图像数据获取上颚的三维口腔图像。当识别出的扫描模式为下颚扫描模式时,口腔图像处理系统可以基于原始数据获取下颚的三维口腔图像。当识别出的扫描模式为咬合扫描模式时,口腔图像处理系统可以从原始数据中获取关于咬合的三维口腔图像。
图19是根据实施例示出根据尖端的尺寸以不同的投射模式获取口腔图像的方法的顺序图。
口腔图像处理系统可获取尖端信息(步骤1910)。
当尖端信息包括尖端尺寸的信息时,口腔图像处理系统可以判断尖端是否为小尺寸(步骤1920)。
在尖端不是小尺寸而是普通尺寸的情况下,口腔图像处理系统可以以普通投射模式投射光(步骤1930)。在普通投射模式下,投影仪所投射的区域可以是第一投射区域。
口腔图像处理系统可以将光照射到第一投射区域,并从在对象体反射的光中获得原始数据。此时,口腔图像处理系统可以通过普通感兴趣区域获得二维图像数据(步骤1940)。普通感兴趣区域可以是摄像头的扫描感兴趣区域被设定为默认的基本领域。
在尖端为小尺寸时,口腔图像处理系统可以以小投射模式动作。口腔图像处理系统可以缩小投射区域,以小投射模式投射光(步骤1950)。以小投射模式投射光,可以意味着投影仪将投射的区域缩小到比第一投射区域缩小的区域,即第二投射区域,从而照射光。第二投射区域可以是当照射到小尺寸尖端时,所照射的光全都能被镜面反射的区域。
口腔图像处理系统可以将光照射到第二投射区域,并且可以通过使用从对象体反射的光来获取关于对象体的原始数据。口腔图像处理系统可以将感兴趣区域缩小到比基本区域更小的第二感兴趣区域,从而获得二维图像数据(步骤1960)。缩小的感兴趣区域可以是与小尺寸尖端所包括的镜面尺寸相对应的区域。
图20是用于说明根据实施例口腔扫描仪根据图像处理装置调节投射模式的顺序图。
参照图20,图像处理装置可从口腔扫描仪接收尖端信息,或通过分析从口腔扫描仪接收的二维图像数据来获取尖端信息。图像处理装置可从尖端信息获取尖端尺寸信息(步骤2010)。
图像处理装置可识别根据尖端尺寸信息的投射模式(步骤2020)。投射模式可包括普通投射模式和小投射模式。
图像处理装置可根据投射模式生成控制信息(步骤2030)。当图像处理装置判断尖端尺寸与口腔扫描仪的投射模式不符时,可生成控制信息。
图像处理装置可将控制信息传送至口腔扫描仪(步骤2040)。
口腔扫描仪可从图像处理装置接收控制信息,并以根据控制信息的投射模式进行动作,从而获取新二维图像数据(步骤2050)。
例如,如果控制信息是要求将投射模式设置为普通投射模式的信息,则口腔扫描仪可以将当前的投射模式更改为普通投射模式。在普通投射模式下,口腔扫描仪可以将光投射到第一投射区域,并在第一感兴趣区域中获得新二维图像数据。
例如,如果控制信息是要求将投射模式设置为小投射模式的信息,则口腔扫描仪可以将当前的投射模式更改为小投射模式。在小投射模式下,口腔扫描仪可以将光投射到比第一投射区域小的第二投射区域,并在比第一感兴趣区域小的第二感兴趣区域中获得新二维图像数据。
口腔扫描仪可将新二维图像数据传送至图像处理装置(步骤2060)。
图像处理装置可通过从口腔扫描仪接收的新二维图像数据获取三维口腔图像(步骤2070)。
根据本公开一实施例的口腔图像的处理方法以能够通过各种计算机机构执行的程序命令形式实现,并记录在计算机可读介质中。此外,本公开的实施例中,可以是一种计算机可读存储介质,其中记录了包括用于执行口腔图像的处理方法的至少一个指令的一个以上程序。
此外,根据上述本公开的实施例的口腔图像处理方法可以以包括计算机可读记录介质的计算机程序产品来实现,所述计算机可读记录介质记录有用于实现口腔图像处理方法的程序,所述口腔图像处理方法,包括如下步骤:通过扫描口腔来获取二维图像数据,获取关于结合至口腔扫描仪主体的尖端的尖端信息,基于所述尖端信息识别口腔图像获取模式,以及基于所述二维图像数据和所识别的模式获取口腔图像;所述尖端信息包括尖端紧固方向信息和尖端尺寸信息中的至少一者。
所述计算机可读存储介质可以单独或组合包括程序命令、数据文件、数据结构等。其中,计算机可读存储介质的例子包括硬盘、软盘及磁带等磁介质(magnetic media)、CD-ROM、DVD等光记录介质(optic media)、软式光盘(floptical disk)等磁光介质(magneto-optic media)、以及配置为存储和执行程序命令的硬件装置,如只读存储器(ROM)、随机存取存储器(RAM)和闪存等。
其中,可以用机器读取的存储介质可以以非暂时性(non-transitory)存储介质的形式提供。其中,“非暂时性存储介质”是指存储介质是实际的(tangible)设备。另外,“非暂时性存储介质”可以包括暂时存储数据的缓冲器。
根据一实施例,根据本说明书中公开的各种实施例的口腔图像的处理方法可通过被包括在计算机程序产品(computer program product)中来提供。计算机程序产品可以以设备可读存储介质(例如,光盘只读存储器(compact disc read only memory,CD-ROM))的形式发布。或者,通过应用商店(例如,Play Store等)或在两个用户装置(例如,智能手机)之间直接、线上发布(例如,下载或上传)。具体地,根据公开的实施例的计算机程序产品可包括记录有包括至少一个指令的程序的存储介质,以执行根据公开的实施例的口腔图像的处理方法。
以上对实施例进行了详细说明,但本发明的权利范围并不限于此,在权利要求书内定义的利用本发明的基本概念的本领域技术人员的各种变形及改良形态也属于本发明的权利范围。

Claims (20)

1.一种图像处理装置,其中,
包括:
通信部,向口腔扫描仪发送信息并从所述口腔扫描仪接收信息,
存储器,用于存储一个以上指令,以及
处理器,用于执行存储在所述存储器中的所述一个以上指令;
所述处理器,通过执行所述一个以上指令来执行如下操作:
基于关于所述口腔扫描仪所包括的尖端的尖端信息识别口腔图像获取模式,基于通过所述通信部从所述口腔扫描仪接收的二维图像数据和所识别的口腔图像获取模式,获取口腔图像;
所述尖端信息包括尖端紧固方向信息和尖端尺寸信息中的至少一者。
2.根据权利要求1所述的图像处理装置,其中,
所述处理器,通过执行所述一个以上指令来执行如下操作:
通过所述通信部从所述口腔扫描仪接收所述尖端信息,或者从通过所述通信部接收的所述二维图像数据中获取所述尖端信息。
3.根据权利要求2所述的图像处理装置,其中,
所述处理器,通过执行所述一个以上指令来执行如下操作:
在所述二维图像数据中,检测反射镜区域,并基于所述反射镜区域的大小和形状中的至少一者来获取所述尖端信息。
4.根据权利要求1所述的图像处理装置,其中,
所述处理器,通过执行所述一个以上指令来执行如下操作:
基于所述尖端信息包括所述尖端尺寸信息,识别根据所述尖端尺寸信息的投射模式,
根据所述投射模式生成控制信息,
通过所述通信部将所述控制信息传送至所述口腔扫描仪,以及
通过所述通信部接收所述口腔扫描仪基于所述控制信息动作而获取的新二维图像数据;
所述控制信息是当所述尖端为第一尺寸尖端时,控制所述口腔扫描仪以第一投射模式动作,且当所述尖端的尺寸为第二尺寸尖端时,控制所述口腔扫描仪以第二投射模式动作的信息。
5.根据权利要求1所述的图像处理装置,其中,
所述处理器基于所述尖端信息包括所述尖端紧固方向信息,识别根据所述尖端紧固方向信息的扫描模式,根据所识别的扫描模式处理所述二维图像数据来获取口腔图像,
所识别的扫描模式是上颚扫描模式、下颚扫描模式和咬合扫描模式中的一者。
6.一种口腔扫描仪,其中,
包括:
口腔扫描仪主体,以及
尖端,以可拆卸的方式结合至所述口腔扫描仪主体;
所述口腔扫描仪主体,包括:
摄像头,通过扫描口腔来获取二维图像数据,
存储器,用于存储一个以上指令,以及
处理器,用于执行存储在所述存储器中的所述一个以上指令;
所述处理器,通过执行所述一个以上指令来执行如下操作:
获取关于结合至所述口腔扫描仪主体的尖端的尖端信息;
所述尖端信息包括尖端紧固方向信息和尖端尺寸信息中的至少一者。
7.根据权利要求6所述的口腔扫描仪,其中,
所述口腔扫描仪主体还包括传感器,
所述尖端的壁根据方向具有不同的厚度和不同的颜色中的至少一者,
所述传感器感测所述尖端,基于从所述传感器至所述尖端的壁的距离和所述尖端的壁的颜色中的至少一者来获取所述尖端信息。
8.根据权利要求6所述的口腔扫描仪,其中,
所述口腔扫描仪主体还包括传感器,
所述尖端包括多个突出部,能够以结合至所述口腔扫描仪主体的状态旋转,
所述传感器感测所述尖端,基于从所述传感器至根据所述尖端的旋转而识别的突出部的距离和所述突出部的颜色中的至少一者来获取所述尖端信息。
9.根据权利要求6所述的口腔扫描仪,其中,
所述处理器,通过执行所述一个以上指令来执行如下操作:
在所述摄像头获取的所述二维图像数据中检测反射镜区域,并基于所述反射镜区域的大小和形状中的至少一者来获取所述尖端信息。
10.根据权利要求6所述的口腔扫描仪,其中,
还包括:
通信部,向图像处理装置发送信息并从所述图像处理装置接收信息;
所述通信部将获取的所述二维图像数据和所述尖端信息传送至所述图像处理装置。
11.根据权利要求10所述的口腔扫描仪,其中,
所述口腔扫描仪主体还包括:
投影仪,用于投射光;
所述通信部从所述图像处理装置接收基于所述尖端信息生成的控制信息,
所述控制信息是当所述尖端为第一尺寸尖端时,控制所述口腔扫描仪以第一投射模式动作,且当所述尖端的尺寸为第二尺寸尖端时,控制所述口腔扫描仪以第二投射模式动作的信息;
所述处理器,通过执行所述一个以上指令来执行如下操作:
当所述控制信息是要求以所述第一投射模式动作的信息时,使所述投影仪在第一投射区域中投射光,并使所述摄像头在第一感兴趣区域中获取二维图像数据,以及
当所述控制信息是要求以所述第二投射模式动作的信息时,使所述投影仪向比所述第一投射区域小的第二投射区域投射光,并使所述摄像头在比所述第一感兴趣区域小的第二感兴趣区域中获取二维图像数据。
12.根据权利要求6所述的口腔扫描仪,其中,
所述处理器,通过执行所述一个以上指令来执行如下操作:
基于所述尖端信息识别口腔图像获取模式,并基于所述二维图像数据和所识别的口腔图像获取模式来获取口腔图像。
13.根据权利要求12所述的口腔扫描仪,其中,
所述处理器,通过执行所述一个以上指令来执行如下操作:
基于所述尖端信息包括所述尖端紧固方向信息,识别根据所述尖端紧固方向信息的扫描模式,根据所识别的扫描模式处理所述二维图像数据来获取所述口腔图像,
所识别的扫描模式是上颚扫描模式、下颚扫描模式和咬合扫描模式中的一者。
14.根据权利要求12所述的口腔扫描仪,其中,
所述口腔扫描仪主体还包括:
投影仪,用于投射光;
所述处理器,通过执行所述一个以上指令来执行如下操作:
基于所述尖端信息包括所述尖端尺寸信息,识别根据所述尖端尺寸信息的投射模式,
当所识别的投射模式为第一投射模式时,使所述投影仪在第一投射区域中投射光,并使所述摄像头在第一感兴趣区域中获取所述二维图像数据,以及
当所识别的投射模式为第二投射模式时,使所述投影仪向比所述第一投射区域小的第二投射区域投射光,并使所述摄像头在比所述第一感兴趣区域小的第二感兴趣区域中获取所述二维图像数据。
15.根据权利要求14所述的口腔扫描仪,其中,
所述第二投射区域和所述第二感兴趣区域,基于所述二维图像数据所包括的反射镜区域的大小来确定。
16.一种图像处理方法,其中,
包括如下步骤:
通过扫描口腔来获取二维图像数据,
获取关于结合至口腔扫描仪主体的尖端的尖端信息,
基于所述尖端信息识别口腔图像获取模式,以及
基于所述二维图像数据和所识别的模式来获取口腔图像;
所述尖端信息包括尖端紧固方向信息和尖端尺寸信息中的至少一者。
17.根据权利要求16所述的图像处理方法,其中,
识别所述口腔图像获取模式的步骤包括如下步骤:
当所述尖端信息包括所述尖端紧固方向信息时,识别根据所述尖端紧固方向信息的扫描模式;
获取所述口腔图像的步骤包括如下步骤:
根据所识别的扫描模式处理所述二维图像数据来获取所述口腔图像;
所识别的扫描模式是上颚扫描模式、下颚扫描模式和咬合扫描模式中的一者。
18.根据权利要求16所述的图像处理方法,其中,
所述口腔扫描仪主体还包括:
传感器,用于感测所述尖端来获取所述尖端信息;
所述尖端的壁根据方向具有不同的厚度和不同的颜色中的至少一者,
获取所述尖端信息的步骤包括如下步骤:
基于从所述传感器至所述尖端的壁的距离和所述尖端的壁的颜色中的至少一者来获取所述尖端信息。
19.根据权利要求16所述的图像处理方法,其中,
所述口腔扫描仪主体还包括:
传感器,用于感测所述尖端来获取所述尖端信息;
所述尖端包括多个突出部,能够以结合至所述口腔扫描仪主体的状态旋转;
获取所述尖端信息的步骤包括如下步骤:
基于从所述传感器至根据所述尖端的旋转而识别的突出部的距离和所述突出部的颜色中的至少一者获取所述尖端信息。
20.根据权利要求16所述的图像处理方法,其中,
获取所述尖端信息的步骤包括如下步骤:
在所述二维图像数据中检测反射镜区域;以及
基于所述反射镜区域的大小和形状中的至少一者来获取所述尖端信息。
CN202180075903.4A 2020-11-11 2021-11-10 口腔图像处理装置和口腔图像处理方法 Pending CN116437870A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2020-0150507 2020-11-11
KR1020200150507A KR102488096B1 (ko) 2020-11-11 2020-11-11 구강 이미지 처리 장치 및 구강 이미지 처리 방법
PCT/KR2021/016356 WO2022103153A1 (ko) 2020-11-11 2021-11-10 구강 이미지 처리 장치 및 구강 이미지 처리 방법

Publications (1)

Publication Number Publication Date
CN116437870A true CN116437870A (zh) 2023-07-14

Family

ID=81602545

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180075903.4A Pending CN116437870A (zh) 2020-11-11 2021-11-10 口腔图像处理装置和口腔图像处理方法

Country Status (5)

Country Link
US (1) US20230397804A1 (zh)
EP (1) EP4245252A1 (zh)
KR (1) KR102488096B1 (zh)
CN (1) CN116437870A (zh)
WO (1) WO2022103153A1 (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007005726B4 (de) * 2007-01-31 2010-05-12 Sirona Dental Systems Gmbh Vorrichtung und Verfahren zur optischen 3D-Vermessung
KR101176770B1 (ko) * 2012-03-22 2012-08-23 추상완 치과용 3차원 스캐너 및 이를 이용한 스캐닝 방법
KR102401548B1 (ko) * 2012-12-24 2022-05-24 덴틀리텍 지.피.엘. 리미티드 치은연하 측정을 위한 방법 및 장치
KR101699250B1 (ko) * 2014-05-14 2017-01-24 주식회사바텍 치과용 3차원 스캐너
KR101662566B1 (ko) * 2015-05-20 2016-10-05 주식회사바텍 광학부 교환에 의해 스캔 영역과 정밀도 변경이 가능한 구강스캐너
KR101844746B1 (ko) * 2016-06-17 2018-04-05 오스템임플란트 주식회사 구강 스캐너 및 구강 스캐너의 김서림 방지방법
EP4154845A1 (en) * 2017-07-04 2023-03-29 Dentlytec G.P.L. Ltd. Dental device with probe
US20220008180A1 (en) * 2018-11-01 2022-01-13 3Shape A/S Method and system for measuring periodontal pocket depth
EP3908975A4 (en) * 2019-01-09 2022-09-21 Dentlytec G.P.L. Ltd. DENTAL DEVICE WITH PROBE AND RELATED METHODS
KR20200113677A (ko) * 2019-03-26 2020-10-07 오스템임플란트 주식회사 프로세서가 내장된 구강 스캐너용 크래들 및 이를 포함하는 구강 스캐너 시스템

Also Published As

Publication number Publication date
US20230397804A1 (en) 2023-12-14
WO2022103153A1 (ko) 2022-05-19
KR102488096B1 (ko) 2023-01-13
KR20220064228A (ko) 2022-05-18
EP4245252A1 (en) 2023-09-20

Similar Documents

Publication Publication Date Title
JP2022130677A (ja) 統合されたカメラを有する歯科ミラーおよびそのアプリケーション
EP3403568B1 (en) Scanning of cavities with restricted accessibility
US20170289523A1 (en) Dental intraoral scanner system
CN107427345A (zh) 具有触敏输入的口内扫描仪
EP3202366B1 (en) Method, apparatus, and computer program for scanning an object in three dimensions using color dashed line pattern
CN103153167A (zh) 三维暂存光学彩色图像摄取装置
US20150098636A1 (en) Integrated tracking with fiducial-based modeling
EP3900666A1 (en) Three-dimensional intraoral scanner and intraoral scanning method using same
EP3381015B1 (en) Systems and methods for forming three-dimensional models of objects
JP2003202216A (ja) 三次元画像処理方法、三次元画像処理装置、三次元画像処理システムおよび三次元画像処理プログラム
JP6948407B2 (ja) 表面トポロジおよび関連する色を決定するための装置および方法
WO2017029670A1 (en) Intra-oral mapping of edentulous or partially edentulous mouth cavities
CN116437870A (zh) 口腔图像处理装置和口腔图像处理方法
KR102534778B1 (ko) 3차원 데이터 획득 방법, 장치 및 그 방법을 수행하는 프로그램이 저장된 컴퓨터 판독 가능 저장 매체
JP2021128661A (ja) 操作検出方法、操作検出装置及び表示システム
KR20240040634A (ko) 스캐너, 데이터 처리 장치 및 데이터 처리 방법
US20240129447A1 (en) Data processing device and data processing method
JP2009014520A (ja) 顔計測システム
KR102612682B1 (ko) 전자 장치 및 3차원 스캐너의 스캔 이미지 처리 방법
US20240177450A1 (en) Data processing device and data processing method
KR102605094B1 (ko) 데이터 처리 장치 및 데이터 처리 방법
KR102651515B1 (ko) 데이터 처리 장치 및 데이터 처리 방법
US11826016B2 (en) External light interference removal method
KR20220122486A (ko) 데이터 처리 장치 및 데이터 처리 방법
EP4318306A1 (en) Data processing device and data processing method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination