KR102626891B1 - A data processing apparatus, a scanner, and methods for operating the same - Google Patents

A data processing apparatus, a scanner, and methods for operating the same Download PDF

Info

Publication number
KR102626891B1
KR102626891B1 KR1020210131884A KR20210131884A KR102626891B1 KR 102626891 B1 KR102626891 B1 KR 102626891B1 KR 1020210131884 A KR1020210131884 A KR 1020210131884A KR 20210131884 A KR20210131884 A KR 20210131884A KR 102626891 B1 KR102626891 B1 KR 102626891B1
Authority
KR
South Korea
Prior art keywords
data
scanner
processing device
frames
data processing
Prior art date
Application number
KR1020210131884A
Other languages
Korean (ko)
Other versions
KR20220139217A (en
Inventor
이동훈
Original Assignee
주식회사 메디트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 메디트 filed Critical 주식회사 메디트
Priority to PCT/KR2022/004974 priority Critical patent/WO2022216056A1/en
Priority to EP22784965.0A priority patent/EP4321128A1/en
Publication of KR20220139217A publication Critical patent/KR20220139217A/en
Application granted granted Critical
Publication of KR102626891B1 publication Critical patent/KR102626891B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00Impression cups, i.e. impression trays; Impression methods
    • A61C9/004Means or methods for taking digitized impressions
    • A61C9/0046Data acquisition means or methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00Impression cups, i.e. impression trays; Impression methods
    • A61C9/004Means or methods for taking digitized impressions
    • A61C9/0046Data acquisition means or methods
    • A61C9/0053Optical means or methods, e.g. scanning the teeth by a laser or light beam
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/18Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by applying electromagnetic radiation, e.g. microwaves
    • A61B18/20Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by applying electromagnetic radiation, e.g. microwaves using laser
    • A61B2018/2035Beam shaping or redirecting; Optical components therefor
    • A61B2018/20351Scanning mechanisms
    • A61B2018/20353Scanning in three dimensions [3D]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30036Dental; Teeth

Abstract

실시예들에 따라 데이터 처리 장치, 스캐너, 그 동작 방법 및 그 방법을 수행하는 프로그램이 저장된 컴퓨터 판독 가능 저장 매체가 개시된다. 개시된 데이터 처리 장치는 데이터 처리 장치는, 디스플레이, 통신 인터페이스, 하나 이상의 인스트럭션을 포함하는 메모리, 및 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 스캔 데이터에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 표시하도록 상기 디스플레이를 제어하고, 상기 이미지를 표시하는 동안, 상기 스캐너의 하나 이상의 사용자 인터페이스를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 상기 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 제어 신호에 따라 상기 생성된 삼차원 데이터를 조정하는 기능을 수행하고, 상기 조정된 삼차원 데이터를 이용하여 이미지를 표시하도록 상기 디스플레이를 제어한다. According to embodiments, a data processing device, a scanner, a method of operating the same, and a computer-readable storage medium storing a program for performing the method are disclosed. The disclosed data processing device includes a display, a communication interface, a memory including one or more instructions, and a processor executing the one or more instructions, wherein the processor scans an object by executing the one or more instructions. Controlling the communication interface to receive scan data of the object obtained by doing so from a scanner, and controlling the display to display an image corresponding to three-dimensional data generated based on the scan data, while displaying the image, Controlling the communication interface to receive a control signal generated according to a user input detected through one or more user interfaces of the scanner from the scanner, and performing a function of adjusting the generated three-dimensional data according to the control signal, The display is controlled to display an image using the adjusted three-dimensional data.

Description

데이터 처리 장치, 스캐너 및 그 동작 방법{A data processing apparatus, a scanner, and methods for operating the same} A data processing apparatus, a scanner, and methods for operating the same}

개시된 실시예는 데이터 처리 장치, 스캐너 및 그 동작 방법에 관한 것이다. The disclosed embodiments relate to a data processing device, a scanner, and a method of operating the same.

구체적으로, 개시된 실시예는 스캐너 의해 획득된 이미지 데이터를 처리하거나 스캐너의 설정을 조정할 때 보다 편리하게 제어할 수 있도록 하기 위한 데이터 처리 장치, 스캐너 및 그 동작 방법에 대한 것이다.Specifically, the disclosed embodiments relate to a data processing device, a scanner, and a method of operating the same for providing more convenient control when processing image data acquired by a scanner or adjusting settings of the scanner.

최근에는 환자의 구강 정보를 획득하기 위한 방법으로, 환자의 구강에 삽입하여 구강 내의 이미지를 획득하는 구강 스캐너가 이용되고 있다. 구강 스캐너를 이용하여 환자의 구강을 스캔함으로써 상악 스캔 데이터, 하악 스캔 데이터 및 상악과 하악의 교합 스캔 데이터를 획득할 수 있다. 획득된 스캔 데이터를 이용하여 3차원 가상 모델을 생성하고, 생성된 3차원 가상 모델을 이용하여 치아의 치료나 교정 등을 진행할 수 있다. Recently, an oral scanner that is inserted into the patient's mouth and acquires images within the oral cavity has been used as a method to obtain information about the patient's oral cavity. By scanning the patient's oral cavity using an oral scanner, upper jaw scan data, lower jaw scan data, and occlusion scan data of the upper and lower jaw can be obtained. A 3D virtual model can be created using the acquired scan data, and treatment or correction of teeth can be performed using the generated 3D virtual model.

구강 스캐너를 이용하는 사용자는 구강 스캐너를 이용하여 획득한 데이터를 데이터 처리 장치의 디스플레이로 확인할 수 있다. 또한 사용자는 디스플레이에 표시된 데이터를 확인하고, 데이터에 불필요하거나 잘못된 데이터가 포함된 경우에는 해당 데이터를 삭제한 뒤에 다시 스캔할 수 있다. 이때 사용자가 데이터를 삭제하는 등의 편집을 할 때, 데이터 처리 장치에 데이터 입력 가능한 마우스나 키보드와 같은 별도의 외부 입력 장치를 이용하여 데이터를 삭제할 수 있다. 이러한 과정에서 사용자는 구강 스캐너와 외부 입력 장치를 번갈아 사용하여야 함으로써, 위생적인 문제가 발생할 수 있으며, 스캔 동작과 데이터 조정 동작 사이에서 동선이 증가하여 작업 효율이 떨어질 수 있다. 구강 스캐너를 이용하여 3차원 가상 모델을 생성하는 것과 관련된 출원으로는 한국공개특허 10-2017-0113412호 (공개일: 2017년 10월 12일) 문헌을 예로 들 수 있다. A user using an oral scanner can check the data obtained using the oral scanner on the display of the data processing device. Additionally, users can check the data displayed on the display and, if the data contains unnecessary or incorrect data, delete the data and scan again. At this time, when the user edits data, such as deleting data, the data can be deleted using a separate external input device such as a mouse or keyboard that can input data into the data processing device. In this process, the user must alternately use the intraoral scanner and the external input device, which may cause hygienic problems and increase movement between the scanning operation and the data adjustment operation, which may reduce work efficiency. An example of an application related to creating a 3D virtual model using an intraoral scanner is Korean Patent Publication No. 10-2017-0113412 (publication date: October 12, 2017).

개시된 실시예는, 별도의 외부 입력 장치를 사용하지 않고 스캐너를 이용하여 스캐너를 통해 획득된 데이터를 조정할 수 있는 기능을 제공하는 스캐너, 데이터 처리 장치 및 그 방법을 제공하는 것을 목적으로 한다. The disclosed embodiment aims to provide a scanner, a data processing device, and a method that provide a function to adjust data acquired through a scanner using a scanner without using a separate external input device.

개시된 실시예는 별도의 외부 입력 장치를 사용하지 않고 스캐너의 설정을 변경할 수 있는 기능을 제공하는 스캐너 및 그 동작 방법을 제공하는 것을 목적으로 한다. The disclosed embodiment aims to provide a scanner and a method of operating the same that provide a function to change scanner settings without using a separate external input device.

실시예에 따른 데이터 처리 장치는, 디스플레이, 통신 인터페이스, 하나 이상의 인스트럭션을 포함하는 메모리, 및 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 스캔 데이터에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 표시하도록 상기 디스플레이를 제어하고, 상기 이미지를 표시하는 동안, 상기 스캐너의 하나 이상의 사용자 인터페이스를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 상기 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 제어 신호에 따라 상기 생성된 삼차원 데이터를 조정하는 기능을 수행하고, 상기 조정된 삼차원 데이터를 이용하여 이미지를 표시하도록 상기 디스플레이를 제어한다. A data processing device according to an embodiment includes a display, a communication interface, a memory including one or more instructions, and a processor that executes the one or more instructions, wherein the processor scans an object by executing the one or more instructions. Controlling the communication interface to receive acquired scan data of the object from a scanner, controlling the display to display an image corresponding to three-dimensional data generated based on the scan data, and displaying the image, Controlling the communication interface to receive a control signal generated according to a user input detected through one or more user interfaces of the scanner from the scanner, and performing a function of adjusting the generated three-dimensional data according to the control signal, The display is controlled to display an image using the adjusted three-dimensional data.

일 실시예에 따라 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리할 수 있다. According to one embodiment, by executing the one or more instructions, the processor executes the most recently input predetermined number of frames among the frames constituting the three-dimensional data as the control signal corresponds to an undo command. It can be hidden.

일 실시예에 따라 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 되살리기 (redo) 명령에 대응됨에 따라, 가장 최근에 숨김 처리되었던 미리 지정된 개수의 프레임들을 복구 처리할 수 있다. According to one embodiment, the processor may restore a predetermined number of frames that were most recently hidden by executing the one or more instructions, as the control signal corresponds to a redo command.

일 실시예에 따라 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 락킹 (locking) 명령에 대응됨에 따라, 상기 숨김 처리나 상기 복구 처리가 더 이상 허용되지 않도록 현재 상태의 삼차원 데이터에 기반하여 삼차원 데이터를 확정 처리할 수 있다. According to one embodiment, the processor executes the one or more instructions, so that the control signal corresponds to a locking command, so that the hiding process or the recovery process is no longer allowed based on the three-dimensional data of the current state. This allows three-dimensional data to be definitively processed.

상기 삼차원 데이터는, 상기 스캔 데이터에 기반하여 생성된 복셀 데이터 또는 상기 스캔 데이터에 기반하여 생성된 메쉬 데이터 중 적어도 하나를 포함할 수 있다. The three-dimensional data may include at least one of voxel data generated based on the scan data or mesh data generated based on the scan data.

일 실시예에 따라 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 대상체의 제1영역에 대응하는 스캔 데이터에 기반하여 생성된 제1삼차원 데이터에 대응하는 제1이미지를 서브 화면에 표시하도록 상기 디스플레이를 제어하고, 상기 제1영역과 이격된 상기 대상체의 제2영역에 대응하는 스캔 데이터에 기반하여 생성된 제2삼차원 데이터에 대응하는 제2이미지를 메인 화면에 표시하도록 상기 디스플레이를 제어하고, 상기 스캐너로부터 수신된 제어 신호에 따라 상기 메인 화면에 표시된 상기 제2이미지에 대응하는 삼차원 데이터를 조정하는 기능을 수행하고, 상기 조정된 삼차원 데이터를 이용하여 제2이미지를 표시하도록 상기 디스플레이를 제어할 수 있다. According to one embodiment, the processor executes the one or more instructions to display the first image corresponding to the first three-dimensional data generated based on the scan data corresponding to the first area of the object on the sub-screen. Controlling the display to display on the main screen a second image corresponding to second three-dimensional data generated based on scan data corresponding to a second area of the object spaced apart from the first area, Perform a function of adjusting three-dimensional data corresponding to the second image displayed on the main screen according to a control signal received from the scanner, and control the display to display a second image using the adjusted three-dimensional data. there is.

일 실시예에 따라 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 서브 화면에 표시된 상기 제1이미지에 대응하는 삼차원 데이터에 대해서 데이터 조정 기능이 수행되지 않도록 하는 락킹 기능을 설정할 수 있다. According to one embodiment, the processor may set a locking function to prevent a data adjustment function from being performed on three-dimensional data corresponding to the first image displayed on the sub-screen by executing the one or more instructions.

일 실시예에 따라 상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 제2삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리하는 동작에 의해 상기 제2삼차원 데이터가 모두 숨김 처리되면, 상기 서브 화면에 대응하는 상기 제1삼차원 데이터에 대응하는 제1이미지를 상기 메인 화면에 표시하도록 상기 디스플레이를 제어할 수 있다. According to one embodiment, the processor executes the one or more instructions, and as the control signal corresponds to an undo command, the most recently input predetermined number of frames constituting the second three-dimensional data When all the second three-dimensional data is hidden by the operation of hiding the frames, the display can be controlled to display a first image corresponding to the first three-dimensional data corresponding to the sub screen on the main screen. .

일 실시예에 따른 스캐너는, 스캔 동작을 수행하는 광학부, 하나 이상의 센서, 통신 인터페이스, 및 프로세서를 포함하고, 상기 프로세서는, 상기 광학부를 이용하여 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 데이터 처리 장치로 전송하도록 상기 통신 인터페이스를 제어하고, 상기 하나 이상의 센서를 통해서 감지된 사용자 입력을 획득하고, 상기 사용자 입력에 따라 상기 스캔 동작을 멈추도록 상기 광학부를 제어하고, 상기 사용자 입력에 대응하는 기능을 수행하거나 또는 상기 사용자 입력에 대응하는 기능을 수행하도록 제어하는 제어 신호를 상기 데이터 처리 장치로 전송하도록 상기 통신 인터페이스를 제어한다. A scanner according to an embodiment includes an optical unit that performs a scanning operation, one or more sensors, a communication interface, and a processor, wherein the processor receives scan data of the object obtained by scanning the object using the optical unit. Control the communication interface to transmit to a data processing device, obtain user input sensed through the one or more sensors, control the optical unit to stop the scanning operation according to the user input, and respond to the user input. The communication interface is controlled to transmit a control signal to the data processing device to perform a function or to perform a function corresponding to the user input.

일 실시예에 따라 상기 하나 이상의 센서의 각 센서는 복수의 기능 중 하나 이상의 기능에 대응될 수 있다. According to one embodiment, each sensor of the one or more sensors may correspond to one or more functions among a plurality of functions.

일 실시예에 따라 상기 복수의 기능은, 데이터 조정 기능, 락킹 기능, 상기 광학부의 설정을 조정하는 기능 중 적어도 하나를 포함할 수 있다. According to one embodiment, the plurality of functions may include at least one of a data adjustment function, a locking function, and a function for adjusting settings of the optical unit.

일 실시예에 따라 데이터 처리 장치의 동작 방법은, 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 스캐너로부터 수신하는 동작, 상기 스캔 데이터에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 표시하는 동작, 상기 이미지를 표시하는 동안, 상기 스캐너의 하나 이상의 사용자 인터페이스를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 상기 스캐너로부터 수신하는 동작, 상기 제어 신호에 따라 상기 생성된 삼차원 데이터를 조정하는 기능을 수행하는 동작, 및 상기 조정된 삼차원 데이터를 이용하여 이미지를 표시하는 동작을 포함한다. According to one embodiment, a method of operating a data processing device includes receiving scan data of an object obtained by scanning an object from a scanner, displaying an image corresponding to three-dimensional data generated based on the scan data, While displaying the image, receiving a control signal generated from the scanner according to a user input detected through one or more user interfaces of the scanner, and performing a function of adjusting the generated three-dimensional data according to the control signal. and an operation of displaying an image using the adjusted three-dimensional data.

일 실시예에 따라 광학부 및 하나 이상의 센서를 포함하는 스캐너의 동작 방법은, 상기 광학부를 이용하여 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 데이터 처리 장치로 전송하는 동작, 상기 하나 이상의 센서를 통해서 감지된 사용자 입력을 획득하는 동작, 상기 사용자 입력에 따라 상기 스캔 동작을 멈추도록 상기 광학부를 제어하는 동작, 및 상기 사용자 입력에 대응하는 기능을 수행하거나 또는 상기 사용자 입력에 대응하는 기능을 수행하도록 제어하는 제어 신호를 상기 데이터 처리 장치로 전송하는 동작을 포함한다. According to one embodiment, a method of operating a scanner including an optical unit and one or more sensors includes transmitting scan data of the object obtained by scanning an object using the optical unit to a data processing device, the one or more sensors Obtaining a user input detected through, controlling the optical unit to stop the scanning operation according to the user input, and performing a function corresponding to the user input or performing a function corresponding to the user input It includes an operation of transmitting a control signal to the data processing device.

일 실시예에 따라 데이터 처리 방법을 수행하기 위해 적어도 하나의 인스트럭션을 포함하는 프로그램이 기록된 비일시적(non-transitory) 컴퓨터 판독 가능 저장 매체에 있어서, 데이터 처리 장치의 동작 방법은, 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 스캐너로부터 수신하는 동작, 상기 스캔 데이터에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 표시하는 동작, 상기 이미지를 표시하는 동안, 상기 스캐너의 하나 이상의 사용자 인터페이스를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 상기 스캐너로부터 수신하는 동작, 상기 제어 신호에 따라 상기 생성된 삼차원 데이터를 조정하는 기능을 수행하는 동작, 및 상기 조정된 삼차원 데이터를 이용하여 이미지를 표시하는 동작을 포함한다. According to one embodiment, in a non-transitory computer-readable storage medium on which a program including at least one instruction is recorded to perform a data processing method, the method of operating the data processing device includes scanning an object. An operation of receiving acquired scan data of the object from a scanner, an operation of displaying an image corresponding to three-dimensional data generated based on the scan data, and detection through one or more user interfaces of the scanner while displaying the image. An operation of receiving a control signal generated according to a user input from the scanner, an operation of performing a function of adjusting the generated three-dimensional data according to the control signal, and an operation of displaying an image using the adjusted three-dimensional data. Includes.

개시된 실시예에 따라 스캐너를 이용하여 대상체를 스캔하는 동안 스캔 데이터를 조정하고자 할 때 별도의 사용자 입력 장치를 이용함 없이 대상체를 스캔하는 스캐너를 그대로 이용하여 스캔 데이터를 조정할 수 있다. According to the disclosed embodiment, when it is desired to adjust scan data while scanning an object using a scanner, the scan data can be adjusted by using the scanner that scans the object without using a separate user input device.

개시된 실시예에 따라 스캐너를 이용하여 대상체를 스캔하는 동안 스캐너의 설정을 변경하고자 할 때 별도의 사용자 입력 장치를 이용함 없이 대상체를 스캔하는 스캐너를 그대로 이용하여 스캐너의 설정을 변경할 수 있다. According to the disclosed embodiment, when it is desired to change the scanner settings while scanning an object using a scanner, the scanner settings can be changed by using the scanner that scans the object without using a separate user input device.

본 발명은, 다음의 자세한 설명과 그에 수반되는 도면들의 결합으로 쉽게 이해될 수 있으며, 참조 번호(reference numerals)들은 구조적 구성요소(structural elements)를 의미한다.
도 1은 개시된 실시예에 따른 디지털 구강 모델 처리 시스템을 설명하기 위한 도면이다.
도 2는 일 실시예에 따라 스캐너와 데이터 처리 장치를 포함하는 시스템의 세부적인 블록도의 일 예이다.
도 3은 일 실시예에 따른 사용자 입력-기능 매핑 정보 300의 예를 나타낸다.
도 4는 일 실시예에 따라 스캐너와 데이터 처리 장치의 동작 과정을 나타내는 흐름도의 일 예이다.
도 5는 일 실시예에 따라 스캐너를 통해 획득된 이차원 데이터를 이용하여 생성된 삼차원 가상 모델을 데이터 처리 장치에서 표시하는 과정을 설명하기 위한 참고도이다.
도 6은 일 실시예에 따라 스캔 데이터에 기반하여 가공되는 복셀 데이터와 메쉬 데이터를 설명하기 위한 참고도이다.
도 7은 일 실시예에 따라 데이터 처리 장치에서 수행되는 동작 방법의 일 예에 따른 구체적인 흐름도이다.
도 8은 일 실시예에 따라 데이터 처리 장치가 스캐너로부터 수신한 되돌리기 명령에 따라 동작하는 방법을 설명하기 위한 참고도이다.
도 9는 일 실시예에 따라 데이터 처리 장치가 스캐너로부터 수신한 되살리기 명령에 따라 동작하는 방법을 설명하기 위한 참고도이다.
도 10은 일 실시예에 따라 데이터 처리 장치가 스캐너로부터 수신한 락킹 명령에 따라 동작하는 방법을 설명하기 위한 참고도이다.
도 11은 일 실시예에 따라 데이터 처리 장치가 대상체의 복수의 영역에 대응하는 이미지를 표시하는 동작을 설명하기 위한 참고도이다.
도 12는 일 실시예에 따라 데이터 처리 장치의 디스플레이에 대상체의 제1영역에 대응하는 삼차원 데이터를 표시하는 동작을 설명하기 위한 참고도이다.
도 13은 일 실시예에 따라 메인 화면 1210에 표시된 이미지가 모두 숨김 처리된 경우에 데이터 처리 장치 100가 자동적으로 서브 화면 1220의 이미지를 메인 화면 1210으로 이동시키는 동작을 설명하기 위한 참고도이다.
The present invention may be readily understood by combination of the following detailed description with the accompanying drawings, where reference numerals refer to structural elements.
1 is a diagram for explaining a digital oral model processing system according to the disclosed embodiment.
2 is an example of a detailed block diagram of a system including a scanner and a data processing device according to one embodiment.
Figure 3 shows an example of user input-function mapping information 300 according to an embodiment.
Figure 4 is an example of a flowchart showing the operation process of a scanner and a data processing device according to an embodiment.
FIG. 5 is a reference diagram for explaining a process of displaying a three-dimensional virtual model created using two-dimensional data acquired through a scanner in a data processing device, according to an embodiment.
Figure 6 is a reference diagram for explaining voxel data and mesh data processed based on scan data according to an embodiment.
Figure 7 is a detailed flowchart according to an example of an operation method performed in a data processing device according to an embodiment.
FIG. 8 is a reference diagram for explaining how a data processing device operates according to a revert command received from a scanner, according to an embodiment.
FIG. 9 is a reference diagram for explaining how a data processing device operates according to a restore command received from a scanner, according to an embodiment.
FIG. 10 is a reference diagram for explaining how a data processing device operates according to a locking command received from a scanner, according to an embodiment.
FIG. 11 is a reference diagram for explaining an operation of a data processing device to display images corresponding to a plurality of areas of an object, according to an embodiment.
FIG. 12 is a reference diagram for explaining an operation of displaying three-dimensional data corresponding to a first area of an object on a display of a data processing device, according to an embodiment.
FIG. 13 is a reference diagram for explaining an operation in which the data processing device 100 automatically moves the image of the sub-screen 1220 to the main screen 1210 when all images displayed on the main screen 1210 are hidden according to an embodiment.

본 명세서는 본 발명의 권리범위를 명확히 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 실시할 수 있도록, 본 발명의 원리를 설명하고, 실시예들을 개시한다. 개시된 실시예들은 다양한 형태로 구현될 수 있다.This specification clarifies the scope of rights of the present invention, explains the principles of the present invention, and discloses embodiments so that those skilled in the art can practice the present invention. The disclosed embodiments may be implemented in various forms.

명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 본 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다. 명세서에서 사용되는 '부'(part, portion)라는 용어는 소프트웨어 또는 하드웨어로 구현될 수 있으며, 실시예들에 따라 복수의 '부'가 하나의 요소(unit, element)로 구현되거나, 하나의 '부'가 복수의 요소들을 포함하는 것도 가능하다. 이하 첨부된 도면들을 참고하여 본 발명의 작용 원리 및 실시예들에 대해 설명한다.Like reference numerals refer to like elements throughout the specification. This specification does not describe all elements of the embodiments, and general content or overlapping content between the embodiments in the technical field to which the present invention pertains is omitted. The term 'part' (portion) used in the specification may be implemented as software or hardware, and depending on the embodiment, a plurality of 'portions' may be implemented as a single element (unit, element) or as a single 'portion'. It is also possible for 'boo' to contain plural elements. Hereinafter, the operating principle and embodiments of the present invention will be described with reference to the attached drawings.

본 명세서에서 이미지는 적어도 하나의 치아, 또는 적어도 하나의 치아를 포함하는 구강을 나타내는 이미지(이하, '구강 이미지')를 포함할 수 있다. In this specification, an image may include an image representing at least one tooth or an oral cavity including at least one tooth (hereinafter referred to as an 'oral image').

또한, 본 명세서에서 이미지는 대상체에 대한 2차원 이미지 또는 대상체를 입체적으로 나타내는 3차원 모델 또는 3차원 이미지가 될 수 있다. 또한, 본 명세서에서 이미지는 대상체를 2차원 또는 3차원적으로 표현하기 위해서 필요한 데이터, 예를 들어, 적어도 하나의 이미지 센서로부터 획득된 로우 데이터(raw data) 등을 의미할 수 있다. 구체적으로, 로우 데이터는 구강 이미지를 생성하기 위해서 획득되는 데이터로, 구강 스캐너(intraoral scanner)를 이용하여 대상체인 환자의 구강 내를 스캔(scan)할 때 구강 스캐너에 포함되는 적어도 하나의 이미지 센서에서 획득되는 데이터(예를 들어, 2차원 데이터)가 될 수 있다. 구강 스캐너에서 획득되는 로우 데이터는, 스캔 데이터 또는 이차원 이미지 데이터로 언급될 수도 있다. Additionally, in this specification, an image may be a two-dimensional image of an object, a three-dimensional model or a three-dimensional image representing the object in three dimensions. Additionally, in this specification, an image may refer to data required to represent an object in two or three dimensions, for example, raw data obtained from at least one image sensor. Specifically, raw data is data acquired to generate an oral image, and is obtained from at least one image sensor included in the intraoral scanner when the inside of the oral cavity of the subject, a patient, is scanned using an intraoral scanner. It may be acquired data (for example, two-dimensional data). Raw data acquired from an intraoral scanner may also be referred to as scan data or two-dimensional image data.

본 명세서에서 '대상체(object)'는 치아, 치은, 구강의 적어도 일부 영역, 및/또는 구강 내에 삽입 가능한 인공 구조물(예를 들어, 교정 장치, 임플란트, 인공 치아, 구강 내 삽입되는 교정 보조 도구 등) 등을 포함할 수 있다. 여기서, 교정 장치는 브라켓, 어태치먼트(attachment), 교정용 나사, 설측 교정 장치, 및 가철식 교정 유지 장치 중 적어도 하나를 포함할 수 있다. In this specification, 'object' refers to teeth, gingiva, at least some areas of the oral cavity, and/or artificial structures that can be inserted into the oral cavity (e.g., orthodontic devices, implants, artificial teeth, orthodontic aids inserted into the oral cavity, etc. ), etc. may be included. Here, the correction device may include at least one of a bracket, an attachment, a correction screw, a lingual correction device, and a removable correction retainer.

이하에서는 도면을 참조하여 실시 예들을 상세히 설명한다.Hereinafter, embodiments will be described in detail with reference to the drawings.

도 1은 개시된 실시예에 따른 디지털 구강 모델 처리 시스템을 설명하기 위한 도면이다. 1 is a diagram for explaining a digital oral model processing system according to the disclosed embodiment.

도 1을 참조하면, 디지털 구강 모델 처리 시스템은 스캐너 200와 데이터 처리 장치 100를 포함할 수 있다. Referring to FIG. 1, the digital oral model processing system may include a scanner 200 and a data processing device 100.

스캐너 200는 대상체를 스캔하는 장치이다. 스캐너 200는 예를 들어, 환자의 구강에 삽입하여 환자의 치아를 스캔하는 구강 스캐너 또는 치아 모형을 설치하고 설치된 치아 모형 주위를 움직이면서 스캔하는 모델 스캐너 등을 포함할 수 있다. The scanner 200 is a device that scans an object. The scanner 200 may include, for example, an oral scanner that is inserted into the patient's mouth to scan the patient's teeth, or a model scanner that installs a tooth model and scans it while moving around the installed tooth model.

스캐너 200는 대상체의 3차원적 정보를 측정하는 방식으로 광 삼각법 (triangulation technique)또는 공초점 (confocal) 방식을 이용할 수 있다. 광 삼각법은 광원, 광원으로부터 조사된 빛이 조사되는 대상체, 대상체로부터 반사된 빛이 입력되는 이미지 센서에 의해 형성되는 삼각형을 이용하여 삼각 계산을 통해 대상체의 3차원적 정보를 획득하는 기술이고, 공초점 방식은 대상체에 조사되는 빛을 통과시키는 렌즈의 굴절률에 따라서, 반사된 빛의 최대 강도를 통해 알아낸 점의 위치를 기초로 대상체의 3차원적 정보를 획득하는 방식이다. The scanner 200 can use an optical triangulation technique or a confocal method to measure three-dimensional information of an object. Optical trigonometry is a technology that obtains three-dimensional information about an object through trigonometric calculations using triangles formed by a light source, an object on which light irradiated from the light source is irradiated, and an image sensor that receives light reflected from the object. The focusing method is a method of acquiring three-dimensional information about an object based on the location of a point found through the maximum intensity of reflected light according to the refractive index of the lens that passes the light irradiated to the object.

예를 들어, 구강 스캐너 301는 구강 내에 삽입되어 비 접촉식으로 치아를 스캐닝함으로써, 적어도 하나의 치아를 포함하는 구강에 대한 이미지를 획득하기 위한 장치가 될 수 있다. 또한, 구강 스캐너 301는 구강 내에 인입 및 인출이 가능한 형태를 가질 수 있으며, 적어도 하나의 이미지 센서(예를 들어, 광학 카메라 등)를 이용하여 환자의 구강 내부를 스캔 한다. 구강 스캐너 301는 대상체인 구강 내부의 치아, 치은 및 구강 내에 삽입 가능한 인공 구조물(예를 들어, 브라켓 및 와이어 등을 포함하는 교정 장치, 임플란트, 인공 치아, 구강 내 삽입되는 교정 보조 도구 등) 중 적어도 하나의 표면을 이미징하기 위해서, 대상체에 대한 표면 정보를 로우 데이터(raw data)로 획득할 수 있다. For example, the oral scanner 301 may be a device for acquiring an image of the oral cavity including at least one tooth by being inserted into the oral cavity and scanning teeth in a non-contact manner. Additionally, the oral scanner 301 may have a form that allows insertion and withdrawal into the oral cavity, and scans the inside of the patient's oral cavity using at least one image sensor (eg, an optical camera, etc.). The oral scanner 301 includes at least one of the teeth, gingiva, and artificial structures that can be inserted into the oral cavity (e.g., orthodontic devices including brackets and wires, implants, artificial teeth, orthodontic auxiliary tools inserted into the oral cavity, etc.). In order to image a single surface, surface information about the object can be acquired as raw data.

스캐너 200에서 획득된 이미지 데이터는 유선 또는 무선 통신 네트워크를 통하여 연결되는 데이터 처리 장치 100로 전송될 수 있다. Image data acquired from the scanner 200 may be transmitted to the data processing device 100 connected through a wired or wireless communication network.

일 실시예에 따라 스캐너는, 광학부를 이용하여 객체를 스캔함으로써 획득한 대상체의 스캔 데이터를 데이터 처리 장치로 전송할 수 있다. According to one embodiment, the scanner may transmit scan data of an object obtained by scanning the object using an optical unit to a data processing device.

일 실시예에 따라 스캐너는, 스캐너에 마련된 하나 이상의 센서를 통해서 감지된 사용자 입력을 획득하고, 사용자 입력에 따라 스캔 동작을 멈추도록 광학부를 제어할 수 있다. According to one embodiment, the scanner may obtain a user input detected through one or more sensors provided in the scanner and control the optical unit to stop the scanning operation according to the user input.

일 실시예에 따라 스캐너는, 스캐너에 마련된 하나 이상의 센서를 통해서 감지된 사용자 입력을 획득하고, 사용자 입력에 따라 사용자 입력에 대응하는 기능을 수행할 수 있다. 사용자 입력에 대응하는 기능은 스캐너에 마련된 광학부의 설정을 변경하는 기능을 포함할 수 있다. According to one embodiment, the scanner may obtain user input detected through one or more sensors provided in the scanner, and perform a function corresponding to the user input according to the user input. The function corresponding to the user input may include the function of changing the settings of the optical unit provided in the scanner.

일 실시예에 따라 스캐너는, 스캐너에 마련된 하나 이상의 센서를 통해서 감지된 사용자 입력을 획득하고, 사용자 입력에 따라 사용자 입력에 대응하는 기능을 수행하도록 제어하는 제어 신호를 데이터 처리 장치로 전송할 수 있다. 데이터 처리 장치로 보내지는 사용자 입력에 대응하는 기능은 스캔 데이터의 조정 기능을 포함할 수 있다. 스캔 데이터의 조정 기능은 스캔 데이터의 되돌리기 처리 기능, 되살리기 처리 기능, 락킹 기능 등을 포함할 수 있다. According to one embodiment, the scanner may obtain a user input detected through one or more sensors provided in the scanner, and transmit a control signal for controlling the user to perform a function corresponding to the user input according to the user input to a data processing device. Functions responsive to user input sent to the data processing device may include adjustments to scan data. The scan data adjustment function may include a scan data revert processing function, a rejuvenation processing function, a locking function, etc.

데이터 처리 장치 100는 스캐너 200와 유선 또는 무선 통신 네트워크를 통하여 연결되며, 스캐너 200로부터 구강을 스캔하여 획득된 이차원 이미지를 수신하고, 수신된 이차원 이미지에 근거하여 구강 이미지를 생성, 처리, 디스플레이 및/또는 전송할 수 있는 모든 전자 장치가 될 수 있다. The data processing device 100 is connected to the scanner 200 through a wired or wireless communication network, receives a two-dimensional image obtained by scanning the oral cavity from the scanner 200, and generates, processes, displays, and/or creates an oral image based on the received two-dimensional image. Or it can be any electronic device capable of transmitting.

데이터 처리 장치 100는 스캐너 200에서 수신된 이차원 이미지 데이터에 근거하여, 이차원 이미지 데이터를 처리하여 생성한 정보 및 이차원 이미지 데이터를 처리하여 생성한 구강 이미지 중 적어도 하나를 생성하고, 생성된 정보 및 구강 이미지를 디스플레이를 통하여 디스플레이 할 수 있다. The data processing device 100 generates at least one of information generated by processing the two-dimensional image data and an oral image generated by processing the two-dimensional image data, based on the two-dimensional image data received from the scanner 200, and includes the generated information and the oral image. can be displayed through the display.

데이터 처리 장치 100는 스마트 폰(smart phone), 랩탑 컴퓨터, 데스크탑 컴퓨터, PDA, 태블릿 PC 등의 컴퓨팅 장치가 될 수 있으며, 이에 한정되지 않는다. 또한, 데이터 처리 장치 100는 구강 이미지를 처리하기 위한 서버(또는 서버 장치) 등의 형태로 존재할 수도 있을 것이다. The data processing device 100 may be a computing device such as a smart phone, laptop computer, desktop computer, PDA, or tablet PC, but is not limited thereto. Additionally, the data processing device 100 may exist in the form of a server (or server device) for processing oral images.

또한, 스캐너 200는 스캔을 통하여 획득된 스캔 데이터 (또는 로우 데이터(raw data)로 언급될 수 있다.)를 그대로 데이터 처리 장치 100로 전송할 수 있다. 이 경우, 데이터 처리 장치 100는 수신된 스캔 데이터에 근거하여 구강을 3차원적으로 나타내는 삼차원 데이터를 생성할 수 있다. '3차원 데이터'는 수신된 스캔 데이터에 근거하여 구강의 내부 구조를 3차원적으로 모델링(modeling)하여 생성될 수 있으므로, '3차원 구강 모델', '디지털 구강 모델', 또는 '3차원 구강 이미지'로 호칭될 수도 있다. Additionally, the scanner 200 may transmit scan data (or may be referred to as raw data) obtained through scanning to the data processing device 100 as is. In this case, the data processing device 100 may generate three-dimensional data representing the oral cavity in three dimensions based on the received scan data. Since '3D data' can be generated by three-dimensional modeling of the internal structure of the oral cavity based on the received scan data, it is called '3D oral model', 'digital oral model', or '3D oral cavity'. It may also be called ‘image’.

또한, 데이터 처리 장치 100는 스캔 데이터에 기반하여 생성된 삼차원 데이터를 분석, 처리, 디스플레이 및/또는 외부 장치로 전송할 수 있을 것이다. Additionally, the data processing device 100 may be able to analyze, process, display, and/or transmit three-dimensional data generated based on scan data to an external device.

또 다른 예로, 스캐너 200가 스캔을 통하여 로우 데이터(raw data)를 획득하고, 획득된 로우 데이터를 가공하여 대상체인 구강에 대응되는 삼차원 데이터를 생성하여 데이터 처리 장치 100로 전송할 수 있다. 이 경우, 데이터 처리 장치 100는 수신된 삼차원 데이터를 분석, 처리, 디스플레이 및/또는 전송할 수 있을 것이다. As another example, the scanner 200 may acquire raw data through scanning, process the acquired raw data to generate three-dimensional data corresponding to the oral cavity as an object, and transmit it to the data processing device 100. In this case, the data processing device 100 may be able to analyze, process, display, and/or transmit the received three-dimensional data.

개시된 실시예에서, 데이터 처리 장치 100는 하나 이상의 치아를 포함하는 구강을 3차원적으로 나타내는 삼차원 데이터를 생성 및 디스플레이할 수 있는 전자 장치로, 이하에서 상세히 설명한다. In the disclosed embodiment, the data processing device 100 is an electronic device capable of generating and displaying three-dimensional data representing the oral cavity including one or more teeth in three dimensions, which will be described in detail below.

일 실시예에 따라 데이터 처리 장치 100는 스캐너 200로부터 대상체를 스캔함으로써 획득한 스캔 데이터를 수신하면, 수신된 스캔 데이터를 가공하여 삼차원 데이터를 생성할 수 있다. According to one embodiment, when the data processing device 100 receives scan data obtained by scanning an object from the scanner 200, it may process the received scan data to generate three-dimensional data.

일 실시예에 따라 데이터 처리 장치 100는 대상체를 스캔함으로써 획득한 대상체의 스캔 데이터를 스캐너로부터 수신할 수 있다. According to one embodiment, the data processing device 100 may receive scan data of an object obtained by scanning the object from a scanner.

일 실시예에 따라 데이터 처리 장치 100는 스캐너로부터 수신된 스캔 데이터에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 실시간으로 표시할 수 있다. According to one embodiment, the data processing device 100 may display an image corresponding to three-dimensional data generated based on scan data received from a scanner in real time.

일 실시예에 따라 데이터 처리 장치 100는 이미지를 표시하는 동안, 스캐너의 하나 이상의 센서를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 스캐너로부터 수신하고, 제어 신호에 따라 생성된 삼차원 데이터를 조정하는 기능을 수행하고, 조정된 삼차원 데이터를 이용하여 이미지를 표시할 수 있다. According to one embodiment, the data processing device 100 receives a control signal generated according to a user input detected through one or more sensors of the scanner while displaying an image, and adjusts three-dimensional data generated according to the control signal. It can perform functions and display images using adjusted three-dimensional data.

일 실시예에 따라 데이터 처리 장치 100는 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리할 수 있다. According to one embodiment, the data processing device 100 may hide a predetermined number of the most recently input frames among the frames constituting three-dimensional data as the control signal corresponds to an undo command.

일 실시예에 따라 데이터 처리 장치 100는 제어 신호가 되살리기 (redo) 명령에 대응됨에 따라, 가장 최근에 숨김 처리되었던 미리 지정된 개수의 프레임들을 복구 처리할 수 있다. According to one embodiment, the data processing device 100 may restore a predetermined number of frames that were most recently hidden as the control signal corresponds to a redo command.

일 실시예에 따라 데이터 처리 장치 100는 제어 신호가 락킹 (locking) 명령에 대응됨에 따라, 숨김 처리나 복구 처리가 더 이상 허용되지 않도록 현재 상태의 삼차원 데이터에 기반하여 삼차원 데이터를 확정 처리할 수 있다. According to one embodiment, the data processing device 100 may confirm and process the three-dimensional data based on the three-dimensional data in the current state so that hiding processing or recovery processing is no longer allowed as the control signal corresponds to a locking command. .

일 실시예에 따라 데이터 처리 장치 100는 디스플레이의 화면을 복수개의 화면으로 분할하고, 복수개의 화면의 각각에 대상체의 서로 다른 영역에 대응하는 이미지를 표시할 수 있다. According to one embodiment, the data processing device 100 may divide the display screen into a plurality of screens and display images corresponding to different areas of the object on each of the plurality of screens.

일 실시예에 따라 데이터 처리 장치 100는 대상체의 제1영역에 대응하는 스캔 데이터에 기반하여 생성된 제1삼차원 데이터에 대응하는 제1이미지를 서브 화면에 표시하도록 디스플레이를 제어하고, 제1영역과 이격된 대상의 제2영역에 대응하는 스캔 데이터에 기반하여 생성된 제2삼차원 데이터에 대응하는 제2이미지를 메인 화면에 표시하고, 스캐너로부터 수신된 제어 신호에 따라 메인 화면에 표시된 상기 제2이미지에 대응하는 제2삼차원 데이터를 조정하는 기능을 수행하고, 조정된 삼차원 데이터를 이용하여 제2이미지를 표시할 수 있다. According to one embodiment, the data processing device 100 controls the display to display a first image corresponding to first three-dimensional data generated based on scan data corresponding to a first area of the object on a sub screen, and displays the first image corresponding to the first area and the first area of the object. Displaying a second image corresponding to second three-dimensional data generated based on scan data corresponding to the second area of the spaced object on the main screen, and displaying the second image on the main screen according to a control signal received from the scanner A function of adjusting the second three-dimensional data corresponding to can be performed, and a second image can be displayed using the adjusted three-dimensional data.

일 실시예에 따라 데이터 처리 장치 100는 서브 화면에 표시된 제1이미지에 대응하는 삼차원 데이터에 대해서 데이터 조정 기능이 수행되지 않도록 하는 락킹 기능을 설정할 수 있다. According to one embodiment, the data processing device 100 may set a locking function to prevent a data adjustment function from being performed on three-dimensional data corresponding to the first image displayed on the sub-screen.

일 실시예에 따라 데이터 처리 장치 100는 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 제2삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리하는 동작에 의해 제2삼차원 데이터가 모두 숨김 처리되면, 서브 화면에 대응하는 제1삼차원 데이터에 대응하는 제1이미지를 상기 메인 화면에 표시할 수 있다. According to one embodiment, the data processing device 100 hides a predetermined number of the most recently input frames among the frames constituting the second three-dimensional data as the control signal corresponds to the undo command. When all the second three-dimensional data is hidden, the first image corresponding to the first three-dimensional data corresponding to the sub screen can be displayed on the main screen.

도 2는 일 실시예에 따라 스캐너와 데이터 처리 장치를 포함하는 시스템의 세부적인 블록도의 일 예이다. 2 is an example of a detailed block diagram of a system including a scanner and a data processing device according to one embodiment.

도 2를 참조하면, 시스템은 스캐너 200, 데이터 처리 장치 100, 및 스캐너 200와 데이터 처리 장치 100를 통신 가능하게 하는 통신 네트워크 50를 포함할 수 있다. Referring to FIG. 2, the system may include a scanner 200, a data processing device 100, and a communication network 50 that enables the scanner 200 and the data processing device 100 to communicate.

스캐너 200는 환자의 구강이나 치아 캐스트 모델을 스캔하여 획득한 이차원 스캔 데이터를 통신 네트워크 50를 통해 데이터 처리 장치 100로 전송하고, 데이터 처리 장치 100는 스캐너 200로부터 수신한 이차원 스캔 데이터를 처리하여 삼차원 데이터를 생성하고, 생성된 삼차원 데이터에 대응하는 이미지를 디스플레이에 표시하거나 또는 외부 장치로 전송할 수 있다. 스캔 데이터에 기반하여 생성되는 삼차원 데이터는 삼차원 가상 모델이나 삼차원 구강 모델로 언급될 수도 있다. The scanner 200 transmits two-dimensional scan data obtained by scanning the patient's oral cavity or tooth cast model to the data processing device 100 through the communication network 50, and the data processing device 100 processes the two-dimensional scan data received from the scanner 200 to produce three-dimensional data. can be generated, and an image corresponding to the generated three-dimensional data can be displayed on a display or transmitted to an external device. Three-dimensional data generated based on scan data may also be referred to as a three-dimensional virtual model or three-dimensional oral model.

먼저, 스캐너 200를 설명한다. First, the scanner 200 will be described.

도 2를 참조하면, 스캐너 200는 광학부 210, 센서 220, 통신 인터페이스 230, 메모리 240 및 프로세서 250를 포함할 수 있다. Referring to FIG. 2, the scanner 200 may include an optical unit 210, a sensor 220, a communication interface 230, a memory 240, and a processor 250.

광학부 210는 광원으로부터의 광을 투사하는 프로젝터 및 하나 이상의 카메라를 포함할 수 있다. 광학부 210는, 예를 들어, 광 삼각 방식에 따라서 3차원 이미지를 복원하기 위해서, 좌안 시야(left Field of View)에 대응되는 L 카메라 및 우안 시야(Right Field of View)에 대응되는 R 카메라를 포함할 수 있다. L 카메라 및 R 카메라 각각은 좌안 시야(left Field of View)에 대응되는 L 이미지 데이터 및 우안 시야(Right Field of View)에 대응되는 R 이미지 데이터를 획득할 수 있다. 광학부 210로부터 얻어진 L 이미지 데이터 및 R 이미지 데이터를 포함하는 로우 데이터는 데이터 처리를 위해 프로세서 250로 전달될 수 있다. The optical unit 210 may include a projector that projects light from a light source and one or more cameras. For example, the optical unit 210 uses an L camera corresponding to the left field of view and an R camera corresponding to the right field of view to restore a 3D image according to the optical triangulation method. It can be included. Each of the L camera and R camera can acquire L image data corresponding to the left field of view and R image data corresponding to the right field of view. Raw data including L image data and R image data obtained from the optical unit 210 may be transmitted to the processor 250 for data processing.

사용자 인터페이스 220는 스캐너 200의 설정을 제어하거나 또는 스캐너 200에 의해 획득된 스캔 데이터의 조정을 제어하는 사용자 입력의 수신을 위해 다양한 모달리티를 가질 수 있다. The user interface 220 may have various modalities for receiving user input that controls settings of the scanner 200 or adjustment of scan data acquired by the scanner 200.

사용자 인터페이스 220는 사용자 입력에 대응하는 스캐너 200의 움직임을 감지할 수 있는 하나 이상의 센서를 포함하는 센서부 221, 사용자 입력부 222, 또는 사용자의 음성을 수신하는 마이크로폰을 포함할 수 있다. The user interface 220 may include a sensor unit 221 including one or more sensors capable of detecting movement of the scanner 200 corresponding to user input, a user input unit 222, or a microphone that receives the user's voice.

일 실시예에 따라 센서부 221는 스캐너 200의 움직임에 관한 정보를 감지하는 자이로 센서를 포함할 수 있다. 자이로 센서는 스캐너 200의 동작에 관한 정보를 x, y, z 축을 기준으로 센싱할 수 있다. 예를 들어, 사용자가 스캐너 200를 쥐고 스캔 동작을 하다가 흔들면 자이로 센서는 이를 감지하여 입력 신호로 감지할 수 있다. 또는 스캔 동작을 멈춘 스캐너의 각도에 따라서 이를 입력 신호로 감지할 수 있다. 센서부 221는 스캐너 200를 흔드는 횟수, 스캐너 200를 위치시키는 특정한 각도, 스캐너 200를 이용한 쥐고 수행하는 특정한 패턴의 모션 등을 서로 다른 입력 신호로 감지할 수 있다. According to one embodiment, the sensor unit 221 may include a gyro sensor that detects information about the movement of the scanner 200. The gyro sensor can sense information about the operation of the scanner 200 based on the x, y, and z axes. For example, when a user shakes the scanner 200 while performing a scanning motion, the gyro sensor can detect this and detect it as an input signal. Alternatively, this can be detected as an input signal depending on the angle of the scanner that has stopped scanning. The sensor unit 221 can detect the number of times the scanner 200 is shaken, a specific angle at which the scanner 200 is positioned, and a specific pattern of motion performed while holding the scanner 200 as different input signals.

일 실시예에 따라 센서부 221는 2축 (x, y) 방향 또는 3축 (x, y, z) 방향에서 가속도를 감지할 수 있는 가속도 센서를 포함할 수 있다. 예를 들어, 사용자가 스캐너 200를 탭(tap) 하면 가속도 센서는 이를 입력 신호로 감지할 수 있다. 예를 들어, 사용자가 스캐너 200를 탭하는 회수에 따라서 가속도 센서는 이를 서로 다른 입력 신호로 감지할 수 있다. According to one embodiment, the sensor unit 221 may include an acceleration sensor capable of detecting acceleration in a two-axis (x, y) direction or a three-axis (x, y, z) direction. For example, when a user taps the scanner 200, the acceleration sensor can detect this as an input signal. For example, depending on the number of times the user taps the scanner 200, the acceleration sensor may detect this as different input signals.

일 실시예에 따라 센서부 221는 터치 패드 또는 터치 센서를 포함할 수 있다. 예를 들어, 사용자가 스캐너 200에 마련된 터치 센서를 터치하는 동작을 하면 터치 센서는 이를 입력 신호로 감지할 수 있다. 터치 센서는 드래그 방향, 드래그 시간, 터치하는 시간이나 회수에 따라서 서로 다른 입력 신호로 감지할 수 있다. According to one embodiment, the sensor unit 221 may include a touch pad or a touch sensor. For example, when a user touches the touch sensor provided in the scanner 200, the touch sensor may detect this as an input signal. The touch sensor can detect different input signals depending on the drag direction, drag time, and time or number of touches.

이외에도 센서부 221는 회전 (rotation), 각변위 (angular displacement), 틸트 (tilt), 위치 (position), 오리엔테이션 (orientation) 등을 감지할 수 있다. In addition, the sensor unit 221 can detect rotation, angular displacement, tilt, position, orientation, etc.

일 실시예에 따라 사용자 입력부 222는 키패드, 버튼, 하나 이상의 방향 버튼이나 하나 이상의 방향 키, 스크롤 키나 조그 다이얼, 회전 휠이나 회전 링 중 하나 이상을 포함할 수 있다. According to one embodiment, the user input unit 222 may include one or more of a keypad, buttons, one or more direction buttons or one or more direction keys, a scroll key, a jog dial, a rotation wheel, or a rotation ring.

사용자 입력 부222가 하드 키 버튼을 구비할 경우, 사용자는 하드 키 버튼의 푸쉬 동작을 통하여 스캐너 200의 설정을 제어하거나 또는 스캐너 200에 의해 획득된 스캔 데이터의 조정을 제어하는 사용자 명령을 입력할 수 있다. 사용자 입력부 222는 버튼이 종류, 버튼을 누르는 횟수, 버튼이 눌려진 시간 등을 서로 다른 입력 신호로 감지할 수 있다. If the user input unit 222 is provided with a hard key button, the user can control the settings of the scanner 200 or input a user command to control the adjustment of scan data acquired by the scanner 200 through a push operation of the hard key button. there is. The user input unit 222 can detect the type of button, the number of times the button is pressed, and the time the button is pressed, as different input signals.

사용자 입력부 222가 회전 휠을 구비할 경우 사용자는 회전 휠을 회전시키는 횟수나 회전 휠의 회전 방향, 회전 휠의 회전 각도 등에 따라서 서로 다른 입력 신호로 감지할 수 있다. When the user input unit 222 is provided with a rotating wheel, the user can perceive different input signals depending on the number of times the rotating wheel is rotated, the rotation direction of the rotating wheel, and the rotation angle of the rotating wheel.

사용자 입력부 222가 하나 이상의 방향 버튼 또는 하나 이상의 방향 키를 포함하는 경우, 하나 이상의 방향 버튼이나 하나 이상의 방향 키를 서로 다른 입력 신호로 감지할 수 있다. When the user input unit 222 includes one or more direction buttons or one or more direction keys, the one or more direction buttons or one or more direction keys may be detected as different input signals.

이외에도 사용자 입력부 222는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력 수단을 구비할 수 있다. In addition, the user input unit 222 may be equipped with various types of input means that the user can operate, such as scroll keys and jog keys.

마이크로폰 223은 사용자의 음성 입력을 수신할 수 있다. 마이크로폰 223에 의해 수신된 사용자 음성은 음성 인식 장치 등에 의해 인식되어 사용자 입력으로 이용될 수 있다. The microphone 223 may receive a user's voice input. The user's voice received by the microphone 223 may be recognized by a voice recognition device, etc. and used as user input.

통신 인터페이스 230는 데이터 처리 장치 100와 유선 또는 무선 통신 네트워크를 통하여 통신을 수행할 수 있다. 구체적으로, 통신 인터페이스 230는 프로세서 100의 제어에 따라서 데이터 처리 장치 100와 통신을 수행할 수 있다. The communication interface 230 can communicate with the data processing device 100 through a wired or wireless communication network. Specifically, the communication interface 230 may communicate with the data processing device 100 under the control of the processor 100.

구체적으로, 통신 인터페이스는 블루투스, 와이파이, BLE(Bluetooth Low Energy), NFC/RFID, 와이파이 다이렉트(Wifi Direct), UWB, 또는 ZIGBEE 등의 통신 규격에 따른 통신을 수행하는 적어도 하나의 근거리 통신 모듈, 원거리 통신 규격에 따라서 원거리 통신을 지원하기 위한 서버와 통신을 수행하는 원거리 통신 모듈, 유선으로 통신하기 위해서, 외부 전자 장치와 유선 케이블로 연결되기 위한 적어도 하나의 포트를 포함할 수 있다. Specifically, the communication interface is at least one short-range communication module that performs communication according to communication standards such as Bluetooth, Wi-Fi, BLE (Bluetooth Low Energy), NFC/RFID, Wifi Direct, UWB, or ZIGBEE, and a long-distance communication module. According to communication standards, it may include a long-distance communication module that performs communication with a server to support long-distance communication, and at least one port for connecting to an external electronic device with a wired cable for wired communication.

영상 처리부 240는 이미지의 생성 및/또는 처리를 위한 동작들을 수행할 수 있다. 구체적으로, 영상 처리부 240는 광학부 210로부터 획득된 이차원 이미지 데이터를 영상 처리할 수 있다. 영상 처리부 240는 광학부 210로부터 획득된 이차원 이미지 데이터를 데이터 전송 등을 위한 처리 동작만 수행하여 데이터 처리 장치로의 전송을 위해 통신 인터페이스 230으로 출력할 수 있다. The image processor 240 may perform operations for generating and/or processing images. Specifically, the image processing unit 240 may image-process two-dimensional image data obtained from the optical unit 210. The image processing unit 240 may only perform processing operations for data transmission on the two-dimensional image data acquired from the optical unit 210 and output the data to the communication interface 230 for transmission to the data processing device.

메모리 250는 적어도 하나의 인스트럭션을 저장할 수 있다. 또한, 메모리 260는 프로세서가 실행하는 적어도 하나의 인스트럭션을 저장하고 있을 수 있다. 또한, 메모리는 프로세서 260가 실행하는 적어도 하나의 프로그램을 저장하고 있을 수 있다. 또한, 메모리 250는 광학부 210로부터 수신된 이차원 이미지 데이터를 데이터 처리 장치 100로 전달하기 위해 일시적으로 저장할 수 있다. Memory 250 can store at least one instruction. Additionally, the memory 260 may store at least one instruction executed by the processor. Additionally, the memory may store at least one program executed by the processor 260. Additionally, the memory 250 may temporarily store two-dimensional image data received from the optical unit 210 in order to transmit it to the data processing device 100.

일 실시예에 따라 메모리 250는 사용자 인터페이스 220를 통해서 수신된 사용자 입력에 대응하는 기능을 정의하는 사용자 입력-기능 매핑 정보 300를 저장할 수 있다. 사용자 입력-기능 매핑 정보 300는 사용자 인터페이스 220에 포함된 다양한 수단 즉, 센서부 221, 버튼 222, 마이크로폰 223을 통해 수신한 하나 이상이 사용자 입력과 해당 사용자 입력에 대응하는 기능을 정의해 놓은 정보를 나타낼 수 있다. 사용자 입력에 대응하는 기능은 크게 스캐너 200의 광학부 210의 설정을 제어하는 기능 또는 스캐너 200에 의해 획득된 스캔 데이터가 데이터 처리 장치 100에서 조정되도록 제어하는 기능 중 적어도 하나를 포함할 수 있다.According to one embodiment, the memory 250 may store user input-function mapping information 300 that defines a function corresponding to a user input received through the user interface 220. The user input-function mapping information 300 includes information defining one or more user inputs received through various means included in the user interface 220, that is, the sensor unit 221, the button 222, and the microphone 223, and the functions corresponding to the user input. It can be expressed. The function corresponding to the user input may broadly include at least one of a function to control settings of the optical unit 210 of the scanner 200 or a function to control scan data acquired by the scanner 200 to be adjusted in the data processing device 100.

사용자 입력-기능 매핑 정보 300를 도 3을 참조하여 설명한다. User input-function mapping information 300 will be described with reference to FIG. 3 .

도 3은 일 실시예에 따른 사용자 입력-기능 매핑 정보 300의 예를 나타낸다. Figure 3 shows an example of user input-function mapping information 300 according to an embodiment.

도 3을 참조하면, 사용자 입력-기능 매핑 정보 300는 사용자 인터페이스의 각 수단을 통해서 입력된 사용자 입력과 그에 대응하는 기능을 매핑시켜 놓은 정보를 포함할 수 있다. 사용자 인터페이스는 스캐너 200에 포함된 사용자 인터페이스 220의 하나 이상의 수단을 포함할 수 있다. 사용자 입력은 해당 사용자 인터페이스를 통해서 입력된 사용자 입력을 나타낼 수 있다. 기능은, 사용자 입력에 대응하여 수행되는 기능을 정의할 수 있다. 사용자 입력에 대응하는 기능은 크게 스캐너 200의 광학부 210의 설정을 제어하는 기능이나 스캐너 200에 의해 획득된 스캔 데이터가 데이터 처리 장치 100에서 조정되도록 제어하는 기능을 포함할 수 있다. 당업자라면, 사용자 인터페이스에 포함되는 센서 또는 버튼, 이에 대응하는 사용자 입력 및 대응하는 기능을 시스템의 상황을 고려하여 적절하게 결정할 수 있음을 이해할 것이다. Referring to FIG. 3, user input-function mapping information 300 may include information mapping user input input through each means of the user interface and the corresponding function. The user interface may include one or more means of the user interface 220 included in the scanner 200. User input may represent user input entered through the corresponding user interface. A function may define a function performed in response to user input. Functions corresponding to user input may largely include a function to control settings of the optical unit 210 of the scanner 200 or a function to control scan data acquired by the scanner 200 to be adjusted in the data processing device 100. Those skilled in the art will understand that the sensors or buttons included in the user interface, the corresponding user input, and the corresponding functions can be appropriately determined considering the situation of the system.

도 3을 참조하면, 사용자 입력-기능 매핑 정보 300는 제1센서를 통한 제1사용자 입력을 제1기능에, 제1센서를 통한 제2사용자 입력을 제2기능에, 제1센서를 통한 제3사용자 입력을 제3기능에, 제2센서를 통한 제4사용자 입력을 제4기능에, 제2센서를 통한 제5사용자 입력을 제5기능에, 버튼을 통한 제6사용자 입력을 제6기능에, 버튼을 통한 제7사용자 입력을 제7기능에 매핑되도록 정의해 놓은 정보일 수 있다. Referring to FIG. 3, the user input-function mapping information 300 includes the first user input through the first sensor to the first function, the second user input through the first sensor to the second function, and the first user input through the first sensor to the second function. 3rd user input through the 3rd function, 4th user input through the 2nd sensor to the 4th function, 5th user input through the 2nd sensor to the 5th function, 6th user input through the button to the 6th function. This may be information defined to map the 7th user input through the button to the 7th function.

사용자 입력 - 기능 매핑 정보 300의 구체적인 예를 나타내는 테이블 310을 참조하면, 자이로 센서를 통하여 1회 흔드는 동작 (사용자 입력)은 되돌리기 (undo) 기능에 대응시키고, 자이로 센서를 통하여 2회 흔드는 동작 (사용자 입력)은 되살리기 (redo) 기능에 대응시키고, 자이로 센서를 통하여 스캐너를 소정 각도로 놓는 동작은 락킹 (locking) 기능에 대응시키고, 가속도 센서를 통하여 1회 탭하는 동작 (사용자 입력)은 스캔 해상도 변경 기능에 대응시키고, 가속도 센서를 통하여 2회 탭하는 동작 (사용자 입력)은 스캔 심도 변경 기능에 대응시키고, 버튼을 통하여 1회 푸쉬하는 동작 (사용자 입력)은 스캔 광원 색상 변경 기능에 대응시키고, 버튼을 통하여 2회 푸쉬하는 동작 (사용자 입력)은 필터링 설정 변경 기능에 대응시킬 수 있다. User input - Referring to table 310 showing a specific example of function mapping information 300, a one-time shaking action (user input) through the gyro sensor corresponds to the undo function, and a two-time shaking action through the gyro sensor (user input) input) corresponds to the redo function, the action of placing the scanner at a certain angle through the gyro sensor corresponds to the locking function, and the action of tapping once through the acceleration sensor (user input) changes the scan resolution. Corresponds to the function, the action of tapping twice through the acceleration sensor (user input) corresponds to the scan depth change function, the action of pushing once through the button (user input) corresponds to the scan light source color change function, and the button The action of pushing twice (user input) can correspond to the filtering setting change function.

도 3에 도시된 예는 일 예에 따른 것이고 다양한 센서를 통한 사용자 입력에 대응하여 다양한 기능이 매핑될 수 있음은 물론이다. The example shown in FIG. 3 is just one example, and it goes without saying that various functions can be mapped in response to user input through various sensors.

일 실시예에 따라 이와 같은 사용자 입력 -기능 매핑 정보 300는 스캐너 200의 제조시에 메모리에 저장될 수 있다. According to one embodiment, such user input-function mapping information 300 may be stored in memory when the scanner 200 is manufactured.

일 실시예에 따라 이와 같은 사용자 입력 -기능 매핑 정보 300는 스캐너 200의 제조 또는 판매 후에 서버를 통해 다운로드 되거나 업데이트 될 수 있다. According to one embodiment, such user input-function mapping information 300 may be downloaded or updated through a server after manufacturing or selling the scanner 200.

일 실시예에 따라 이와 같은 사용자 입력 - 기능 매핑 정보 300는 사용자의 설정에 따라서 커스터마이즈될 수 있다. 예를 들어 사용자 입력-기능 매핑 정보 300는 스캐너 200를 통해 사용자가 설정을 커스터마이즈하거나 또는 데이터 처리 장치 100에서 설정을 커스터마이즈한 후 스캐너 200로 전송해줄 수 있다.According to one embodiment, this user input-function mapping information 300 may be customized according to the user's settings. For example, the user input-function mapping information 300 can be customized by the user through the scanner 200, or customized by the data processing device 100 and then transmitted to the scanner 200.

프로세서 260는 의도하는 동작이 수행되도록 스캐너 내부에 포함되는 적어도 하나의 구성들을 제어할 수 있다. 따라서, 프로세서가 소정 동작들을 수행하는 경우를 예로 들어 설명하더라도, 프로세서가 소정 동작들이 수행되도록 데이터 처리 장치 내부에 포함하는 적어도 하나의 구성들을 제어하는 것을 의미할 수 있다. The processor 260 may control at least one component included within the scanner to perform the intended operation. Accordingly, even if the case in which the processor performs certain operations is used as an example, it may mean that the processor controls at least one component included in the data processing device so that certain operations are performed.

일 실시예에 따라 프로세서 260는 대상체를 스캔하는 동안 사용자 인터페이스 220로부터 사용자 입력을 수신하여 감지하는 경우에 스캔 동작을 중단하도록 광학부 210를 제어할 수 있다. 예를 들어, 사용자는 스캐너 200를 쥐고 환자의 구강을 스캔하다가 광학부의 설정을 변경하거나 또는 스캔 데이터의 조정을 원하는 경우 사용자 인터페이스 220가 사용자 입력을 감지하도록 스캐너 200를 조작할 수 있다. 이 경우, 프로세서 260는 사용자 인터페이스 220를 통해 수신한 사용자 입력을 처리하기 위해 광학부 210의 스캔 동작을 중단시키도록 제어할 수 있다. 프로세서 260는 광학부 210의 스캔 동작을 중단하고 나서 사용자 입력에 대응하는 기능을 수행한 후, 다시 스캔 동작을 재개하는 사용자 입력에 따라서 광학부 210의 스캔 동작을 재개할 수 있다. 스캔 동작을 재개하는 사용자 입력은 다양한 형태로 수신할 수 있다. 예를 들어, 스캐너 200에는 스캔 동작을 시작과 정지를 토글하는 버튼이 마련될 수 있다. 프로세서 260는 이와 같이 마련된 버튼을 누르는 사용자 입력의 수신에 따라서 광학부 210의 스캔 동작을 재개할 수 있다. According to one embodiment, the processor 260 may control the optical unit 210 to stop the scanning operation when a user input is received and detected from the user interface 220 while scanning an object. For example, if the user holds the scanner 200 and scans the patient's oral cavity and wishes to change the settings of the optical unit or adjust the scan data, the user may operate the scanner 200 so that the user interface 220 detects the user input. In this case, the processor 260 may control the scanning operation of the optical unit 210 to stop in order to process the user input received through the user interface 220. The processor 260 may stop the scanning operation of the optical unit 210, perform a function corresponding to a user input, and then resume the scanning operation of the optical unit 210 according to a user input that resumes the scanning operation. User input for resuming the scan operation can be received in various forms. For example, the scanner 200 may be provided with a button to toggle starting and stopping a scanning operation. The processor 260 may resume the scanning operation of the optical unit 210 in response to receiving a user input by pressing the button provided as described above.

일 실시예에 따라 프로세서 260는 사용자 인터페이스 220로부터 수신된 사용자 입력에 대응하는 기능을 메모리 250에 저장된 사용자 입력-기능 매핑 정보 251를 참조하여 식별할 수 있다. According to one embodiment, the processor 260 may identify a function corresponding to the user input received from the user interface 220 by referring to the user input-function mapping information 251 stored in the memory 250.

일 실시예에 따라 프로세서 260는 식별된 기능이 광학부 210의 설정을 제어하는 기능이라고 판단되면, 사용자 입력에 따라 광학부 210의 설정을 제어할 수 있다. According to one embodiment, if the processor 260 determines that the identified function is a function that controls the settings of the optical unit 210, the processor 260 may control the settings of the optical unit 210 according to the user input.

일 실시예에 따라 광학부 210의 설정을 제어하는 기능은, 스캔 해상도 변경, 스캔 심도 변경, 스캔 광원 색상 변경, 필터링 설정 변경 중 하나 이상을 포함할 수 있다. According to one embodiment, the function of controlling the settings of the optical unit 210 may include one or more of changing scan resolution, changing scan depth, changing scan light source color, and changing filtering settings.

일 실시예에 따라 광학부 210의 설정을 제어하는 기능은, 스캔 해상도 변경을 포함할 수 있다. 스캔 해상도는 표준 해상도 (SD)와 고해상도 (HD)를 포함할 수 있고, 스캔 해상도 변경은 이러한 표준 해상도를 고해상도로 변경하거나 고해상도를 표준 해상도로 변경하는 것을 포함할 수 있다. According to one embodiment, the function of controlling the settings of the optical unit 210 may include changing the scan resolution. Scan resolutions may include standard definition (SD) and high definition (HD), and changing scan resolutions may include changing these standard resolutions to high resolutions or changing high definitions to standard definitions.

일 실시예에 따라 광학부 210의 설정을 제어하는 기능은 스캔 심도 변경을 포함할 수 있다. 스캔 심도 (scan depth)는 스캐너 200의 스캔 동작 중 스캐너의 광학부가 위치된 팁 부분으로부터 스캔하고 싶은 영역의 영역까지의 거리 또는 깊이를 나타내는 값을 나타낼 수 있다. 스캐너의 스캔 심도는 예를 들어, 12mm ~ 21mm 범위에서 조절할 수 있으며, 예시적인 스캔 심도 기본값은 8.5mm 가 될 수 있다. 이와 같은 스캔 심도는 일반적으로 데이터 처리 장치 100에서 스캔 심도를 변경할 수 있는 그래픽 사용자 인터페이스를 제공함으로써 데이터 처리 장치 100에 대한 입력 장치를 이용하여 설정할 수 있다. 그러나 본 개시서에 개시된 실시예에 따라 스캔 심도를 스캐너 200에 마련된 사용자 인터페이스를 이용하여 조절할 수 있다. 예를 들어, 스캐너 200의 사용자 인터페이스 220를 이용하여 하나의 입력 신호를 반복할 경우, 12mm -> 15mm -> 18mm -> 21mm 순서로 변경될 수 있다. 예를 들어, 사용자 인터페이스 220가 자이로 센서를 포함하고, 한번 스캐너 200를 흔드는 동작을 하나의 사용자 입력 신호에 대응시키는 경우, 한번 흔들면, 12mm로 변경, 두번 흔들면 15mm로 변경, 3회 흔들면 18mm로 변경, 4회 흔들면 21mm로 변경, 다시 5회부터는 12mm로 변경 등과 같은 형태가 될 수 있다. 또는 사용자 인터페이스 220가 두개의 방향 키를 포함하고, 제1방향키는 12mm -> 15mm로 변경에 대응시키고, 제2방향키는 15mm -> 12mm로 변경에 대응시킬 수 있다. According to one embodiment, the function of controlling the settings of the optical unit 210 may include changing the scan depth. The scan depth may represent a value representing the distance or depth from the tip portion where the optical unit of the scanner is located to the area to be scanned during the scanning operation of the scanner 200. The scan depth of the scanner can be adjusted, for example, in the range of 12 mm to 21 mm, with an exemplary default scan depth of 8.5 mm. Such scan depth can generally be set using an input device for the data processing device 100 by providing a graphical user interface that can change the scan depth in the data processing device 100. However, according to the embodiment disclosed in this disclosure, the scan depth can be adjusted using the user interface provided in the scanner 200. For example, when repeating one input signal using the user interface 220 of the scanner 200, the order may change from 12mm -> 15mm -> 18mm -> 21mm. For example, if the user interface 220 includes a gyro sensor and the motion of shaking the scanner 200 once corresponds to a single user input signal, if you shake it once, it changes to 12mm, if you shake it twice, it changes to 15mm, and if you shake it three times, it changes to 18mm. , if you shake it 4 times, it changes to 21mm, and from the 5th time onwards, it changes to 12mm, etc. Alternatively, the user interface 220 may include two direction keys, and the first direction key may correspond to a change from 12 mm to 15 mm, and the second direction key may correspond to a change from 15 mm to 12 mm.

일 실시예에 따라 광학부 210의 설정을 제어하는 기능은 스캔 광원 색상 변경을 포함할 수 있다. 스캔 광원 색상 변경은 프로젝터의 광원의 색상을 청색광에서 백색광으로 변경하거나 백색광에서 청색광으로 변경하는 것을 포함할 수 있다. According to one embodiment, the function of controlling the settings of the optical unit 210 may include changing the scan light source color. Changing the scan light source color may include changing the color of the light source of the projector from blue light to white light or from white light to blue light.

일 실시예에 따라 광학부 210의 설정을 제어하는 기능은 필터링 설정 변경을 포함할 수 있다. 필터링 설정은 대상체인 구강의 전체를 필터링 없이 치아와 치은 데이터를 모두 전송하거나 또는 획득된 스캔 데이터 중에서 치은 부분을 필터링 하고 치아 부분만 데이터 전송하도록 하는 것을 포함할 수 있다. According to one embodiment, the function of controlling the settings of the optical unit 210 may include changing filtering settings. The filtering setting may include transmitting all tooth and gingival data without filtering the entire oral cavity, which is the object, or filtering the gingival portion among the acquired scan data and transmitting only the tooth portion.

일 실시예에 따라 프로세서 260는 식별된 기능이 데이터 처리 장치에서 스캔 데이터를 처리하는 기능이라고 판단되면, 스캔 데이터를 처리하는 기능을 수행하도록 지시하는 제어 신호를 데이터 처리 장치 100로 전송하도록 통신 인터페이스 230를 제어할 수 있다. 스캔 데이터를 처리하는 기능은 예를 들어 스캔 데이터를 조정하는 기능을 포함할 수 있다. According to one embodiment, if the processor 260 determines that the identified function is a function of processing scan data in the data processing device, the communication interface 230 transmits a control signal instructing the data processing device to perform the function of processing the scan data to the data processing device 100. can be controlled. Functions for processing scan data may include, for example, functions for adjusting scan data.

본 개시서에 개시된 실시예들을 구현하기 위해서 스캐너 200는 도 2에 도시된 구성요소들의 일부만을 포함할 수도 있고, 도 2에 도시된 구성요소 외에 더 많은 구성요소를 포함할 수도 있다. In order to implement the embodiments disclosed in this disclosure, the scanner 200 may include only some of the components shown in FIG. 2 or may include more components in addition to the components shown in FIG. 2.

도 2를 참조하면, 데이터 처리 장치 100는 통신 인터페이스 110, 사용자 인터페이스 120, 디스플레이 130, 영상 처리부 140, 메모리 150 및 프로세서 160를 포함할 수 있다. Referring to FIG. 2 , the data processing device 100 may include a communication interface 110, a user interface 120, a display 130, an image processor 140, a memory 150, and a processor 160.

통신 인터페이스 110는 적어도 하나의 외부 전자 장치와 유선 또는 무선 통신 네트워크를 통하여 통신을 수행할 수 있다. 구체적으로, 통신 인터페이스 110는 프로세서 160의 제어에 따라서 스캐너 200와 통신을 수행할 수 있다. 통신 인터페이스 110는 프로세서의 제어에 따라서 유무선의 통신 네트워크를 통하여 연결되는 외부의 전자 장치 또는 서버 등과 통신을 수행할 수 있다. The communication interface 110 can communicate with at least one external electronic device through a wired or wireless communication network. Specifically, the communication interface 110 may communicate with the scanner 200 under the control of the processor 160. The communication interface 110 can communicate with an external electronic device or server connected through a wired or wireless communication network under the control of the processor.

구체적으로, 통신 인터페이스는 블루투스, 와이파이, BLE(Bluetooth Low Energy), NFC/RFID, 와이파이 다이렉트(Wifi Direct), UWB, 또는 ZIGBEE 등의 통신 규격에 따른 통신을 수행하는 적어도 하나의 근거리 통신 모듈을 포함할 수 있다. Specifically, the communication interface includes at least one short-range communication module that performs communication according to communication standards such as Bluetooth, Wi-Fi, BLE (Bluetooth Low Energy), NFC/RFID, Wifi Direct, UWB, or ZIGBEE. can do.

또한, 통신 인터페이스 110는 원거리 통신 규격에 따라서 원거리 통신을 지원하기 위한 서버와 통신을 수행하는 원거리 통신 모듈을 더 포함할 수 있다. 구체적으로, 통신 인터페이스 110는 인터넷 통신을 위한 네트워크를 통하여 통신을 수행하는 원거리 통신 모듈을 포함할 수 있다. 또한, 통신 인터페이스 110는 3G, 4G, 및/또는 5G 등의 통신 규격에 따르는 통신 네트워크를 통하여 통신을 수행하는 원거리 통신 모듈을 포함할 수 있다. Additionally, the communication interface 110 may further include a long-distance communication module that communicates with a server to support long-distance communication according to long-distance communication standards. Specifically, the communication interface 110 may include a long-distance communication module that performs communication through a network for Internet communication. Additionally, the communication interface 110 may include a long-distance communication module that performs communication through a communication network compliant with communication standards such as 3G, 4G, and/or 5G.

또한, 통신 인터페이스 110는 외부 전자 장치(예를 들어, 구강 스캐너 등)와 유선으로 통신하기 위해서, 외부 전자 장치와 유선 케이블로 연결되기 위한 적어도 하나의 포트를 포함할 수 있다. 그에 따라서, 통신 인터페이스 110는 적어도 하나의 포트를 통하여 유선 연결된 외부 전자 장치와 통신을 수행할 수 있다. Additionally, the communication interface 110 may include at least one port for connecting to an external electronic device (eg, an oral scanner, etc.) via a wired cable in order to communicate with the external electronic device via a wired cable. Accordingly, the communication interface 110 can communicate with a wired external electronic device through at least one port.

사용자 인터페이스 120는 데이터 처리 장치 100를 제어하기 위한 사용자 입력을 수신할 수 있다. 사용자 인터페이스 120는 사용자의 터치를 감지하는 터치 패널, 사용자의 푸시 조작을 수신하는 버튼, 사용자 인터페이스 화면 상의 일 지점을 지정 또는 선택하기 위한 마우스(mouse) 또는 키보드(key board) 등을 포함하는 사용자 입력 디바이스를 포함할 수 있으나 이에 제한되지 않는다.The user interface 120 may receive user input for controlling the data processing device 100. The user interface 120 is a user input including a touch panel that detects the user's touch, a button that receives the user's push operation, and a mouse or keyboard that specifies or selects a point on the user interface screen. It may include, but is not limited to, devices.

또한, 사용자 인터페이스 120는 음성 인식을 위한 음성 인식 장치를 포함할 수 있다. 예를 들어, 음성 인식 장치는 마이크로폰이 될 수 있으며, 음성 인식 장치는 사용자의 음성 명령 또는 음성 요청을 수신할 수 있다. 그에 따라서, 프로세서는 음성 명령 또는 음성 요청에 대응되는 동작이 수행되도록 제어할 수 있다. Additionally, the user interface 120 may include a voice recognition device for voice recognition. For example, the voice recognition device may be a microphone, and the voice recognition device may receive a user's voice command or voice request. Accordingly, the processor can control the operation corresponding to the voice command or voice request to be performed.

디스플레이 130는 화면을 디스플레이 한다. 구체적으로, 디스플레이 130는 프로세서 160의 제어에 따라서 소정 화면을 디스플레이 할 수 있다. 구체적으로, 디스플레이 130는 스캐너 200에서 환자의 구강을 스캔하여 획득한 데이터에 근거하여 생성된 구강 이미지를 포함하는 사용자 인터페이스 화면을 디스플레이 할 수 있다. 또는, 디스플레이 130는 환자의 치과 치료와 관련되는 정보를 포함하는 사용자 인터페이스 화면을 디스플레이 할 수 있다. Display 130 displays a screen. Specifically, the display 130 can display a predetermined screen under the control of the processor 160. Specifically, the display 130 may display a user interface screen including an oral image generated based on data obtained by scanning the patient's oral cavity with the scanner 200. Alternatively, the display 130 may display a user interface screen including information related to the patient's dental treatment.

영상 처리부 140는 이미지의 생성 및/또는 처리를 위한 동작들을 수행할 수 있다. 구체적으로, 영상 처리부 140는 스캐너 200로부터 획득된 로우 데이터를 수신하고, 수신된 데이터에 근거하여 구강 이미지를 생성할 수 있다. 구체적으로, 영상 처리부 140는 스캐너 200로부터 수신된 스캔 데이터를 가공하여 메쉬 형태로 된 삼차원 데이터를 생성함으로써 삼차원 구강 모델을 획득할 수 있다. 일 예에 따라 영상 처리부 140는 스캐너 200로부터 수신된 스캔 데이터를 실시간으로 가공하여 삼차원 형태로 사용자에게 보여주기 위해 스캔 데이터를 가공하여 복셀 데이터를 생성하고 생성된 복셀 데이터에 대응하는 이미지를 디스플레이 130에 표시할 수 있다. 물론 데이터 처리 장치 100의 처리 성능이 만족된다면 데이터 처리 장치 100는 스캔 데이터를 바로 메쉬 데이터로 가공하여 실시간으로 메쉬 데이터에 대응하는 이미지를 디스플레이 130에 표시할 수도 있을 것이다. The image processor 140 may perform operations for generating and/or processing images. Specifically, the image processor 140 may receive raw data obtained from the scanner 200 and generate an oral image based on the received data. Specifically, the image processing unit 140 may obtain a three-dimensional oral model by processing scan data received from the scanner 200 to generate three-dimensional data in the form of a mesh. According to one example, the image processing unit 140 processes scan data received from the scanner 200 in real time to generate voxel data by processing the scan data to display to the user in three-dimensional form, and displays an image corresponding to the generated voxel data on the display 130. It can be displayed. Of course, if the processing performance of the data processing device 100 is satisfactory, the data processing device 100 may immediately process the scan data into mesh data and display an image corresponding to the mesh data on the display 130 in real time.

도 2에서는 영상 처리부 140가 별도의 구성요소로 도시되었지만, 다른 예에서 영상 처리부 140에 의해 수행되는 동작에 대응하는 프로그램이 메모리 150에 저장되고 프로세서 160가 메모리 150에 저장된 프로그램을 실행함으로써 영상 처리 동작을 수행할 수도 있다. Although the image processing unit 140 is shown as a separate component in FIG. 2, in another example, a program corresponding to the operation performed by the image processing unit 140 is stored in the memory 150, and the processor 160 executes the program stored in the memory 150 to perform the image processing operation. You can also perform .

메모리 150는 적어도 하나의 인스트럭션을 저장할 수 있다. 또한, 메모리 150는 프로세서가 실행하는 적어도 하나의 인스트럭션을 저장하고 있을 수 있다. 또한, 메모리는 프로세서 160가 실행하는 적어도 하나의 프로그램을 저장하고 있을 수 있다. 또한, 메모리 150는 스캐너 200로부터 수신되는 데이터(예를 들어, 구강 스캔을 통하여 획득된 로우 데이터 등)를 저장할 수 있다. 또는, 메모리는 구강을 3차원적으로 나타내는 구강 이미지를 저장할 수 있다. Memory 150 can store at least one instruction. Additionally, the memory 150 may store at least one instruction executed by the processor. Additionally, the memory may store at least one program executed by the processor 160. Additionally, the memory 150 may store data received from the scanner 200 (eg, raw data obtained through an oral scan, etc.). Alternatively, the memory may store an oral image representing the oral cavity in three dimensions.

일 실시예에 따라 메모리 150는 사용자 입력 -기능 매핑 정보 300의 전부 또는 일부를 저장하고 있을 수 있다. 구체적으로, 메모리 150는 사용자 입력-기능 매핑 정보 300의 전부를 저장하거나 또는 사용자 입력-기능 매핑 정보 300 중 데이터 처리 장치 100에서 수행되는 제어 기능에 관련된 정보만을 저장하고 있을 수 있다. According to one embodiment, the memory 150 may store all or part of the user input-function mapping information 300. Specifically, the memory 150 may store all of the user input-function mapping information 300 or may store only information related to the control function performed by the data processing device 100 among the user input-function mapping information 300.

프로세서 160는 메모리 150에 저장된 적어도 하나의 인스트럭션을 수행하여, 의도하는 동작이 수행되도록 제어한다. 여기서, 적어도 하나의 인스트럭션은 프로세서 160내에 포함되는 내부 메모리 또는 프로세서와 별도로 데이터 처리 장치 내에 포함되는 메모리 150에 저장되어 있을 수 있다.The processor 160 executes at least one instruction stored in the memory 150 and controls the intended operation to be performed. Here, at least one instruction may be stored in the internal memory included in the processor 160 or in the memory 150 included in the data processing device separately from the processor.

구체적으로, 프로세서 160는 적어도 하나의 인스트럭션을 수행하여, 의도하는 동작이 수행되도록 데이터 처리 장치 내부에 포함되는 적어도 하나의 구성들을 제어할 수 있다. 따라서, 프로세서가 소정 동작들을 수행하는 경우를 예로 들어 설명하더라도, 프로세서가 소정 동작들이 수행되도록 데이터 처리 장치 내부에 포함하는 적어도 하나의 구성들을 제어하는 것을 의미할 수 있다. Specifically, the processor 160 may perform at least one instruction and control at least one component included in the data processing device so that the intended operation is performed. Accordingly, even if the case in which the processor performs certain operations is used as an example, it may mean that the processor controls at least one component included in the data processing device so that certain operations are performed.

일 실시예에 따라 프로세서 160는 메모리 150에 저장된 하나 이상의 인스트럭션을 실행함으로써, 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 스캔 데이터에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 표시하도록 상기 디스플레이를 제어하고, 상기 이미지를 표시하는 동안, 상기 스캐너의 하나 이상의 사용자 인터페이스를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 상기 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고, 상기 제어 신호에 따라 상기 생성된 삼차원 데이터를 조정하는 기능을 수행하고, 상기 조정된 삼차원 데이터를 이용하여 이미지를 표시하도록 상기 디스플레이를 제어할 수 있다. According to one embodiment, the processor 160 controls the communication interface to receive scan data of the object obtained by scanning the object by executing one or more instructions stored in the memory 150 from the scanner, and generates scan data based on the scan data. Control the display to display an image corresponding to three-dimensional data, and, while displaying the image, the communication interface to receive a control signal from the scanner generated in response to user input sensed through one or more user interfaces of the scanner. , perform a function of adjusting the generated three-dimensional data according to the control signal, and control the display to display an image using the adjusted three-dimensional data.

일 실시예에 따라 프로세서 160는 메모리 150에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리할 수 있다. According to one embodiment, the processor 160 executes one or more instructions stored in the memory 150, so that as the control signal corresponds to an undo command, the most recently input predetermined number of frames constituting the three-dimensional data Frames can be hidden.

일 실시예에 따라 프로세서 160는 메모리 150에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 되살리기 (redo) 명령에 대응됨에 따라, 가장 최근에 숨김 처리되었던 미리 지정된 개수의 프레임들을 복구 처리할 수 있다. According to one embodiment, the processor 160 executes one or more instructions stored in the memory 150 to restore a predetermined number of frames that were most recently hidden as the control signal corresponds to a redo command. .

일 실시예에 따라 프로세서 160는 메모리 150에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 락킹 (locking) 명령에 대응됨에 따라, 상기 숨김 처리나 상기 복구 처리가 더 이상 허용되지 않도록 현재 상태의 삼차원 데이터에 기반하여 삼차원 데이터를 확정 처리할 수 있다. According to one embodiment, the processor 160 executes one or more instructions stored in the memory 150, thereby creating a three-dimensional state of the current state such that the hiding process or the recovery process is no longer allowed as the control signal corresponds to a locking command. Three-dimensional data can be confirmed and processed based on the data.

일 실시예에 따라 프로세서 160는 메모리 150에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상기 대상체의 제1영역에 대응하는 스캔 데이터에 기반하여 생성된 제1삼차원 데이터에 대응하는 제1이미지를 서브 화면에 표시하도록 상기 디스플레이를 제어하고, 상기 제1영역과 이격된 상기 대상체의 제2영역에 대응하는 스캔 데이터에 기반하여 생성된 제2삼차원 데이터에 대응하는 제2이미지를 메인 화면에 표시하도록 상기 디스플레이를 제어하고, 상기 스캐너로부터 수신된 제어 신호에 따라 상기 메인 화면에 표시된 상기 제2이미지에 대응하는 삼차원 데이터를 조정하는 기능을 수행하고, 상기 조정된 삼차원 데이터를 이용하여 제2이미지를 표시하도록 상기 디스플레이를 제어할 수 있다. According to one embodiment, the processor 160 executes one or more instructions stored in the memory 150 to display a first image corresponding to first three-dimensional data generated based on scan data corresponding to the first area of the object on the sub-screen. Control the display to display a second image corresponding to second three-dimensional data generated based on scan data corresponding to a second area of the object spaced apart from the first area on the main screen. And, performs a function of adjusting three-dimensional data corresponding to the second image displayed on the main screen according to a control signal received from the scanner, and configures the display to display a second image using the adjusted three-dimensional data. You can control it.

일 실시예에 따라 프로세서 160는 메모리 150에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상기 서브 화면에 표시된 상기 제1이미지에 대응하는 삼차원 데이터에 대해서 데이터 조정 기능이 수행되지 않도록 하는 락킹 기능을 설정할 수 있다. According to one embodiment, the processor 160 may set a locking function that prevents a data adjustment function from being performed on three-dimensional data corresponding to the first image displayed on the sub-screen by executing one or more instructions stored in the memory 150.

일 실시예에 따라 프로세서 160는 메모리 150에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 제2삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리하는 동작에 의해 상기 제2삼차원 데이터가 모두 숨김 처리되면, 상기 서브 화면에 대응하는 상기 제1삼차원 데이터에 대응하는 제1이미지를 상기 메인 화면에 표시하도록 상기 디스플레이를 제어할 수 있다. According to one embodiment, the processor 160 executes one or more instructions stored in the memory 150, so that as the control signal corresponds to an undo command, the most recently input preset of the frames constituting the second three-dimensional data is executed. When all of the second three-dimensional data is hidden by hiding a designated number of frames, the display is controlled to display a first image corresponding to the first three-dimensional data corresponding to the sub screen on the main screen. can do.

일 예에 따라 프로세서 160는, 내부적으로 적어도 하나의 내부 프로세서 및 내부 프로세서에서 처리 또는 이용될 프로그램, 인스트럭션, 신호, 및 데이터 중 적어도 하나 저장하기 위한 메모리 소자(예를 들어, RAM, ROM 등)을 포함하는 형태로 구현될 수 있다. According to one example, the processor 160 internally includes at least one internal processor and a memory element (e.g., RAM, ROM, etc.) for storing at least one of programs, instructions, signals, and data to be processed or used by the internal processor. It can be implemented in a form that includes

또한, 프로세서 160는 비디오에 대응되는 그래픽 처리를 위한 그래픽 프로세서(Graphic Processing Unit)를 포함할 수 있다. 또한, 프로세서는 코어(core)와 GPU를 통합한 SoC(System On Chip)로 구현될 수 있다. 또한, 프로세서는 싱글 코어 이상의 멀티 코어를 포함할 수 있다. 예를 들어, 프로세서는 듀얼 코어, 트리플 코어, 쿼드 코어, 헥사 코어, 옥타 코어, 데카 코어, 도데카 코어, 헥사 다시 벌 코어 등을 포함할 수 있다.Additionally, the processor 160 may include a graphics processor (Graphics Processing Unit) for graphics processing corresponding to video. Additionally, the processor may be implemented as a System On Chip (SoC) that integrates a core and GPU. Additionally, the processor may include multiple cores or more than a single core. For example, the processor may include dual core, triple core, quad core, hexa core, octa core, deca core, dodeca core, hexa core, etc.

개시된 실시예에서, 프로세서 160는 구강 스캐너 500로부터 수신되는 이차원 이미지 데이터에 근거하여 구강 이미지를 생성할 수 있다. In the disclosed embodiment, the processor 160 may generate an oral image based on two-dimensional image data received from the oral cavity scanner 500.

구체적으로, 프로세서 160의 제어에 따라서 통신 인터페이스 110는 구강 스캐너 500에서 획득된 데이터, 예를 들어 구강 스캔을 통하여 획득된 로우 데이터(raw data)를 수신할 수 있다. 그리고, 프로세서 160는 통신 인터페이스에서 수신된 로우 데이터에 근거하여 구강을 3차원적으로 나타내는 3차원 구강 이미지를 생성할 수 있다. 예를 들어, 구강 스캐너는 광 삼각 방식에 따라서 3차원 이미지를 복원하기 위해서, 좌안 시야(left Field of View)에 대응되는 L 카메라 및 우안 시야(Right Field of View)에 대응되는 R 카메라를 포함할 수 있다. 그리고, 구강 스캐너는 L 카메라 및 R 카메라 각각에서 좌안 시야(left Field of View)에 대응되는 L 이미지 데이터 및 우안 시야(Right Field of View)에 대응되는 R 이미지 데이터를 획득할 수 있다. 계속하여, 구강 스캐너(미도시)는 L 이미지 데이터 및 R 이미지 데이터를 포함하는 로우 데이터를 데이터 처리 장치 100의 통신 인터페이스로 전송할 수 있다. Specifically, under the control of the processor 160, the communication interface 110 may receive data obtained from the intraoral scanner 500, for example, raw data obtained through an intraoral scan. Additionally, the processor 160 may generate a 3D oral image representing the oral cavity in 3D based on raw data received from the communication interface. For example, an intraoral scanner may include an L camera corresponding to the left field of view and an R camera corresponding to the right field of view to restore a 3D image according to the optical triangulation method. You can. And, the oral scanner can acquire L image data corresponding to the left field of view and R image data corresponding to the right field of view from each of the L camera and the R camera. Continuing, the intraoral scanner (not shown) may transmit raw data including L image data and R image data to the communication interface of the data processing device 100.

그러면, 통신 인터페이스 110는 수신되는 로우 데이터를 프로세서로 전달하고, 프로세서는 전달받은 로우 데이터에 근거하여, 구강을 3차원적으로 나타내는 구강 이미지를 생성할 수 있다. Then, the communication interface 110 transfers the received raw data to the processor, and the processor can generate an oral image representing the oral cavity in three dimensions based on the received raw data.

또한, 프로세서 160는 통신 인터페이스를 제어하여, 외부의 서버, 의료 장치 등으로부터 구강을 3차원적으로 나타내는 구강 이미지를 직접 수신할 수 있을 것이다. 이 경우, 프로세서는 로우 데이터에 근거한 3차원 구강 이미지를 생성하지 않고, 3차원 구강 이미지를 획득할 수 있다. Additionally, the processor 160 may control the communication interface to directly receive an oral image representing the oral cavity in three dimensions from an external server, medical device, etc. In this case, the processor may acquire a 3D oral image without generating a 3D oral image based on raw data.

개시된 실시예에 따라서, 프로세서 160가 '추출', '획득', '생성' 등의 동작을 수행한다는 것은, 프로세서 160에서 적어도 하나의 인스트럭션을 실행하여 전술한 동작들을 직접 수행하는 경우 뿐만 아니라, 전술한 동작들이 수행되도록 다른 구성 요소들을 제어하는 것을 포함할 수 있다. According to the disclosed embodiment, the processor 160 performing operations such as 'extraction', 'acquisition', and 'generation' means not only the case of directly performing the above-described operations by executing at least one instruction in the processor 160, but also the case of performing the above-described operations directly. It may include controlling other components so that one operation is performed.

본 개시서에 개시된 실시예들을 구현하기 위해서 데이터 처리 장치 100는 도 2에 도시된 구성요소들의 일부만을 포함할 수도 있고, 도 2에 도시된 구성요소 외에 더 많은 구성요소를 포함할 수도 있다. In order to implement the embodiments disclosed in this disclosure, the data processing device 100 may include only some of the components shown in FIG. 2 or may include more components in addition to the components shown in FIG. 2.

또한, 데이터 처리 장치 100는 스캐너에 연동되는 전용 소프트웨어를 저장 및 실행할 수 있다. 여기서, 전용 소프트웨어는 전용 프로그램, 전용 툴(tool), 또는 전용 어플리케이션으로 호칭될 수 있다. 데이터 처리 장치 100가 스캐너 200와 상호 연동되어 동작하는 경우, 데이터 처리 장치 100에 저장되는 전용 소프트웨어는 스캐너 200와 연결되어 구강 스캔을 통하여 획득되는 데이터들을 실시간을 수신할 수 있다. 예를 들어, 메디트의 구강 스캐너인 i500 제품에서 구강 스캔을 통하여 획득된 데이터를 처리하기 위한 전용 소프트웨어가 존재한다. 구체적으로, 메디트에서는 구강 스캐너(예를 들어, i500)에서 획득된 데이터를 처리, 관리, 이용, 및/또는 전송하기 위한 소프트웨어인 'Medit Link'를 제작하여 배포하고 있다. 여기서, '전용 소프트웨어'는 구강 스캐너와 연동되어 동작 가능한 프로그램, 툴, 또는 어플리케이션을 의미하는 것이므로 다양한 제작자에 의해서 개발 및 판매되는 다양한 구강 스캐너들이 공용으로 이용할 수도 있을 것이다. 또한, 전술한 전용 소프트웨어는 구강 스캔을 수행하는 구강 스캐너와 별도로 제작 및 배포될 수 있다. 데이터 처리 장치 100는 i500 제품에 대응되는 전용 소프트웨어를 저장 및 실행할 수 있다. 전송 소프트웨어는 구강 이미지를 획득, 처리, 저장, 및/또는 전송하기 위한 적어도 하나의 동작들을 수행할 수 있다. 여기서, 전용 소프트웨어는 프로세서에 저장될 수 있다. 또한, 전용 소프트웨어는 구강 스캐너에서 획득된 데이터의 이용을 위한 사용자 인터페이스를 제공할 수 있다. 여기서, 전용 소프트웨어에서 제공되는 사용자 인터페이스 화면은 개시된 실시예에 따라서 생성되는 구강 이미지를 포함할 수 있다. Additionally, the data processing device 100 can store and execute dedicated software linked to the scanner. Here, dedicated software may be referred to as a dedicated program, dedicated tool, or dedicated application. When the data processing device 100 operates in conjunction with the scanner 200, dedicated software stored in the data processing device 100 is connected to the scanner 200 and can receive data obtained through oral scanning in real time. For example, Medit's i500 intraoral scanner product has dedicated software to process data obtained through intraoral scanning. Specifically, Medit produces and distributes 'Medit Link', software for processing, managing, using, and/or transmitting data obtained from intraoral scanners (e.g., i500). Here, 'dedicated software' refers to a program, tool, or application that can operate in conjunction with an intraoral scanner, so it may be commonly used by various intraoral scanners developed and sold by various manufacturers. Additionally, the dedicated software described above can be produced and distributed separately from the oral scanner that performs the intraoral scan. The data processing device 100 can store and execute dedicated software corresponding to the i500 product. Transmission software may perform at least one operation to acquire, process, store, and/or transmit an oral image. Here, dedicated software may be stored in the processor. Additionally, dedicated software can provide a user interface for use of data acquired from an intraoral scanner. Here, the user interface screen provided by the dedicated software may include an oral image created according to the disclosed embodiment.

도 4는 일 실시예에 따라 스캐너와 데이터 처리 장치의 동작 과정을 나타내는 흐름도의 일 예이다. Figure 4 is an example of a flowchart showing the operation process of a scanner and a data processing device according to an embodiment.

도 4를 참조하면, 동작 410에서 스캐너 200는 대상체를 스캔하고, 스캔에 의해 획득된 스캔 데이터를 데이터 처리 장치 100로 전송할 수 있다. 대상체는 환자의 구강 또는 치아 모형이 될 수 있지만 이에 한정되지 않는다. 대상체는 스캔의 대상이 되는 어떠한 신체 부위 또는 물체가 될 수 있다. 예를 들어, 의사는 스캐너 200를 쥐고 환자의 구강 내를 따라서 스캐너 200를 이동시킴으로써 환자의 구강을 스캔할 수 있다. 이와 같이 스캔된 데이터는 실시간으로 데이터 처리 장치 100로 전송될 수 있다. Referring to FIG. 4 , in operation 410, the scanner 200 may scan an object and transmit scan data obtained by scanning to the data processing device 100. The object may be, but is not limited to, a model of the patient's mouth or teeth. The object may be any body part or object that is subject to scanning. For example, a doctor can scan a patient's oral cavity by holding the scanner 200 and moving the scanner 200 along the inside of the patient's oral cavity. Data scanned in this way can be transmitted to the data processing device 100 in real time.

동작 420에서, 데이터 처리 장치 100는 스캐너 200로부터 스캔 데이터를 실시간으로 수신하고, 수신된 스캔 데이터에 기반하여 삼차원 데이터에 대응하는 이미지를 표시할 수 있다. 구체적으로, 데이터 처리 장치 100는 스캐너 200로부터 수신된 스캔 데이터에 기반하여 환자의 구강 모델에 대응하는 삼차원 데이터를 생성하고, 생성된 삼차원 데이터에 대응하는 이미지를 디스플레이에 표시할 수 있다. 삼차원 데이터는 복셀 데이터 또는 메쉬 데이터를 포함할 수 있다. In operation 420, the data processing device 100 may receive scan data from the scanner 200 in real time and display an image corresponding to three-dimensional data based on the received scan data. Specifically, the data processing device 100 may generate three-dimensional data corresponding to the patient's oral model based on scan data received from the scanner 200 and display an image corresponding to the generated three-dimensional data on the display. Three-dimensional data may include voxel data or mesh data.

도 5는 일 실시예에 따라 스캐너를 통해 획득된 이차원 데이터를 이용하여 생성된 삼차원 가상 모델을 데이터 처리 장치에서 표시하는 과정을 설명하기 위한 참고도이다. FIG. 5 is a reference diagram for explaining a process of displaying a three-dimensional virtual model created using two-dimensional data acquired through a scanner in a data processing device, according to an embodiment.

도 5를 참조하면, 스캐너 200는 프로젝터를 통하여 환자의 구강 510에 광을 투사하고, 하나 이상의 카메라를 통하여 구강의 이차원 이미지 데이터를 획득한다. 이때 스캐너 200는 스캔 관심 영역 (scan ROI (Region of Interest) 영역) 520에 대해서 광을 투사하고 이 영역 520에 대응하는 이차원 이미지 데이터를 획득할 수 있다. 스캐너 200가 구강 510의 치아를 따라서 이동하면서 스캔함으로써 얻어지는 데이터는 실시간으로 데이터 처리 장치 100로 보내질 수 있다. Referring to FIG. 5, the scanner 200 projects light onto the patient's oral cavity 510 through a projector and acquires two-dimensional image data of the oral cavity through one or more cameras. At this time, the scanner 200 can project light on a scan ROI (Region of Interest) 520 and acquire two-dimensional image data corresponding to this region 520. Data obtained by scanning while the scanner 200 moves along the teeth of the oral cavity 510 can be sent to the data processing device 100 in real time.

데이터 처리 장치 100는 스캐너 200로부터 스캔 관심 영역 520에 대응하는 이차원 이미지 데이터를 실시간으로 수신하고, 수신된 하나 이상의 이차원 이미지 데이터를 매칭시킴으로써 삼차원 데이터를 생성할 수 있다. 도 5를 참조하면, 데이터 처리 장치 100는 디스플레이 화면 130에서 두 개의 윈도우, 즉, 메인 윈도우 530와 서브 윈도우 540를 통해서 데이터를 보여줄 수 있다. 예를 들어, 데이터 처리 장치 100는 메인 윈도우 (또는 제1윈도우) 530에는 데이터 처리 장치 100가 생성한 삼차원 가상 모델에 대응하는 이미지를 표시하고, 서브 윈도우 (또는 제2윈도우) 540에는 현재 스캐너에서 스캔되는 스캔 관심 영역에 대응하는 삼차원 데이터의 이미지를 표시할 수 있다. The data processing device 100 may receive two-dimensional image data corresponding to the scan area of interest 520 from the scanner 200 in real time and generate three-dimensional data by matching one or more received two-dimensional image data. Referring to FIG. 5, the data processing device 100 can display data through two windows, that is, a main window 530 and a sub window 540, on the display screen 130. For example, the data processing device 100 displays an image corresponding to the three-dimensional virtual model generated by the data processing device 100 in the main window (or first window) 530, and displays an image corresponding to the three-dimensional virtual model generated by the data processing device 100 in the sub window (or second window) 540. An image of three-dimensional data corresponding to the scanned area of interest can be displayed.

즉, 데이터 처리 장치 100는 스캐너 200로부터 실시간으로 수신되는 스캔 관심 영역 520의 스캔 데이터를 가공하여 획득한 삼차원 데이터에 대응하는 이미지를 서브 윈도우 540에 표시하고, 스캐너 200로부터 실시간으로 수신되는 스캔 관심 영역 520에 대응하는 스캔 데이터를 수집하여 삼차원 가상 모델로 생성한 다음 생성된 삼차원 가상 모델의 이미지 550를 메인 윈도우 530에 표시할 수 있다. 메인 윈도우 530의 삼차원 가상 모델의 이미지 550에는 삼차원 가상 모델에서 스캔 관심 영역을 나타내기 위한 박스 560가 표시될 수 있다. That is, the data processing device 100 displays an image corresponding to the three-dimensional data obtained by processing the scan data of the scan area of interest 520 received in real time from the scanner 200 on the sub window 540, and displays the image corresponding to the three-dimensional data obtained by processing the scan data of the scan area of interest 520 received in real time from the scanner 200. Scan data corresponding to 520 can be collected and created as a three-dimensional virtual model, and then image 550 of the generated three-dimensional virtual model can be displayed on the main window 530. An image 550 of the three-dimensional virtual model of the main window 530 may display a box 560 to indicate a scanning area of interest in the three-dimensional virtual model.

도 5에 도시된 바와 같이, 디스플레이 130의 메인 윈도우 530이나 서브 윈도우 540에 표시되는 이미지에 대응하는 삼차원 데이터는 복셀 데이터 및/또는 메쉬 데이터를 포함할 수 있다. As shown in FIG. 5 , three-dimensional data corresponding to an image displayed on the main window 530 or sub-window 540 of the display 130 may include voxel data and/or mesh data.

이하에서는 도 6을 참조하여 복셀 데이터와 메쉬 데이터를 설명한다. Hereinafter, voxel data and mesh data will be described with reference to FIG. 6.

도 6은 일 실시예에 따라 스캔 데이터에 기반하여 가공되는 복셀 데이터와 메쉬 데이터를 설명하기 위한 참고도이다. Figure 6 is a reference diagram for explaining voxel data and mesh data processed based on scan data according to an embodiment.

데이터 처리 장치 100는 스캐너 200로부터 스캔 데이터를 수신하여 가공하고 폴리곤과 정점으로 이루어진 메쉬 데이터를 생성함으로써 삼차원 가상 모델을 획득할 수 있다. 데이터 처리 장치 100는 이와 같이 메쉬 형태로 된 삼차원 가상 모델을 기반으로 구강 치료나 교정의 계획을 수립하고 적용할 수 있다. 스캐너를 이용하여 이차원 데이터가 획득되었을 때 데이터 처리 장치 100는 삼각 측량 방법을 사용하여 복수의 조명된 표면 포인트의 좌표를 계산할 수 있다. 스캐너를 이용하여 대상체의 표면을 이동하면서 스캔함으로써 스캔 데이터의 양이 증가함에 따라 표면 포인트의 좌표들이 누적될 수 있다. 이러한 이미지 획득의 결과로서, 정점들의 포인트 클라우드가 식별되어 표면의 범위를 나타낼 수 있다. 포인트 클라우드 내의 포인트는 객체의 3 차원 표면 상의 실제 측정된 포인트를 나타낼 수 있다. 표면 구조는 포인트 클라우드의 인접한 정점 (vertice)이 라인 세그먼트에 의해 연결된 다각형 메쉬를 형성함으로써 근사화될 수 있다. 다각형 메쉬는 삼각형, 사각형, 오각형 메쉬 등 다양하게 결정될 수 있다. 이와 같은 메쉬 모델의 다각형 및 이웃하는 다각형 간의 관계는 치아 경계의 특징, 예를 들어, 곡률, 최소 곡률, 에지, 공간 관계 등을 추출하는 데 사용될 수 있다. 예를 들어 도 6을 참조하면, 삼차원 데이터는 포인트 클라우드를 구성하는 복수의 정점들 및 인접한 정점들을 선으로 연결함으로써 생성된 삼각형 메쉬로 구성될 수 있다. 각 정점은 그 속성으로서 위치 정보와 색상 정보를 포함할 수 있다. 각 정점이 속성으로서 가지는 위치 정보는 삼차원 좌표계상의 X, Y, Z 좌표로 구성될 수 있다. 각 정점이 속성으로서 가지는 색상 정보는 스캔 장치에 구비된 카메라나 이미지 센서에 의해 획득된 색상을 나타내는 RGB 값을 가질 수 있다. 이와 같이 각 정점들의 속성 즉 위치 정보와 색상 정보에 의해 삼차원 구강 모델의 모양이나 윤곽, 색상이 표현될 수 있다. The data processing device 100 can obtain a three-dimensional virtual model by receiving scan data from the scanner 200, processing it, and generating mesh data consisting of polygons and vertices. The data processing device 100 can establish and apply a plan for oral treatment or correction based on the three-dimensional virtual model in the form of a mesh. When two-dimensional data is acquired using a scanner, the data processing device 100 may calculate the coordinates of a plurality of illuminated surface points using a triangulation method. By scanning the surface of an object while moving it using a scanner, the coordinates of surface points can be accumulated as the amount of scan data increases. As a result of this image acquisition, a point cloud of vertices can be identified to represent the extent of the surface. Points within a point cloud may represent actual measured points on the three-dimensional surface of an object. The surface structure can be approximated by forming a polygonal mesh where adjacent vertices of the point cloud are connected by line segments. A polygonal mesh can be determined in various ways, such as a triangular, square, or pentagonal mesh. The relationships between the polygons of the mesh model and neighboring polygons can be used to extract features of tooth boundaries, such as curvature, minimum curvature, edges, and spatial relationships. For example, referring to FIG. 6, three-dimensional data may be composed of a triangular mesh created by connecting a plurality of vertices constituting a point cloud and adjacent vertices with lines. Each vertex may include location information and color information as its properties. The location information that each vertex has as an attribute may consist of X, Y, and Z coordinates on a three-dimensional coordinate system. The color information that each vertex has as an attribute may have an RGB value representing the color acquired by a camera or image sensor provided in the scanning device. In this way, the shape, outline, and color of the three-dimensional oral model can be expressed by the properties of each vertex, that is, position information and color information.

데이터 처리 장치 100는 스캔 데이터를 실시간으로 수신하여 이러한 메쉬 형태의 삼차원 가상 모델을 생성하고 표시할 수 있다. 그러나, 데이터 처리 장치 100가 스캔 데이터를 수신하여 실시간으로 메쉬 형태 삼차원 가상 모델로 처리하기 위해서는 데이터 처리 장치 100의 높은 처리 속도와 고성능이 요구되기 때문에, 데이터 처리 장치 100가 디스플레이의 화면에 실시간으로 표시하는 데이터는 메쉬 데이터 대신에 복셀 데이터를 이용할 수 있다. The data processing device 100 can receive scan data in real time to create and display a three-dimensional virtual model in the form of a mesh. However, in order for the data processing device 100 to receive scan data and process it into a mesh-type three-dimensional virtual model in real time, high processing speed and high performance of the data processing device 100 are required, so the data processing device 100 displays the scan data in real time on the screen of the display. The data used can be voxel data instead of mesh data.

데이터 처리 장치 100는 스캔 데이터를 이용하여 3D 객체를 표현하는데 이용되는 기본 데이터인 볼륨 엘리먼트 (즉, 복셀)로 구성된 볼륨 데이터를 생성할 수 있다. 일반적으로, 복셀은 Cartesian 좌표 시스템에서 x 좌표와 y 좌표 이외에 세번째 좌표인 Z 좌표를 더 가지는 픽셀을 말한다. 다시 말하면, 복셀은 이산적으로 정의된 3D 공간을 형성하는 동일 크기의 큐브를 나타낸다. 일반적인 복셀 기반 3D 장면은 하나 이상의 복셀 셋으로 구성될 수 있고, 각 복셀 셋은 하나 이상의 복셀들로 구성된다. 3D 복셀 데이터는 디스플레이와 같은 적절한 출력 장치에서 2D 이미지를 생성하기 위해 랜더링된다. 랜더링은 3D 복셀 데이터 파일로부터 출력 장치상에 2D 그래픽 이미지를 생성하는 것을 의미하며 이미지에 현실감을 부여하기 위해 컬러나 텍스쳐 등을 이용한 이미지를 생성하는 것을 포함한다. The data processing device 100 may use scan data to generate volume data composed of volume elements (i.e., voxels), which are basic data used to express 3D objects. Generally, a voxel refers to a pixel that has a third coordinate, the Z coordinate, in addition to the x and y coordinates in the Cartesian coordinate system. In other words, voxels represent equally sized cubes that form a discretely defined 3D space. A typical voxel-based 3D scene may consist of one or more voxel sets, and each voxel set consists of one or more voxels. 3D voxel data is rendered to create a 2D image on an appropriate output device, such as a display. Rendering refers to creating a 2D graphic image on an output device from a 3D voxel data file and includes creating an image using color or texture to give the image a sense of reality.

일반적으로 메쉬 데이터 보다는 복셀 데이터를 이용하여 이미지를 실시간으로 랜더링하는 데에 처리 속도나 처리 성능 면에서 용이하기 때문에 데이터 처리 장치 100는 스캔 데이터로부터 수신된 스캔 데이터의 이미지를 실시간으로 표시하기 위해서, 복셀 데이터를 이용할 수 있다. In general, it is easier in terms of processing speed and processing performance to render images in real time using voxel data rather than mesh data, so the data processing device 100 uses voxel data to display images of scan data received from scan data in real time. Data is available.

다시 도 4로 돌아가서, 동작 420에서는 위에서 설명한 바와 같이 데이터 처리 장치 100는 스캔 데이터에 기반하여 복셀 데이터나 메쉬 데이터를 이용하여 삼차원 데이터에 대응하는 이미지를 실시간으로 표시할 수 있다. Returning to FIG. 4 , in operation 420, as described above, the data processing device 100 may display an image corresponding to three-dimensional data in real time using voxel data or mesh data based on scan data.

동작 430에서, 스캐너 200는 대상체를 스캔하는 동안에 사용자 인터페이스를 통하여 사용자 입력을 감지할 수 있다. 스캐너 200는 사용자 인터페이스에 포함된 하나 이상의 센서나, 버튼, 마이크로폰 등을 통해 사용자 입력을 감지할 수 있다. In operation 430, the scanner 200 may detect a user input through a user interface while scanning an object. The scanner 200 can detect user input through one or more sensors, buttons, microphones, etc. included in the user interface.

동작 440에서, 스캐너 200는 사용자 인터페이스를 통해 감지된 사용자 입력에 대응하는 기능을 식별할 수 있다. 구체적으로, 스캐너 200는 사용자 인터페이스를 통해서 감지되는 다양한 사용자 입력에 대응하는 기능을 매핑시켜 놓은 정보를 저장하고 있을 수 있다. 예를 들어 스캐너 200는 도 3에 도시된 바와 같은 사용자 입력-기능 매핑 정보 300를 저장하고 있을 수 있다. 따라서 스캐너 200는 사용자 입력을 감지하면 도 3에 도시된 바와 같은 사용자 입력-기능 매핑 정보 300를 참조하여 대응하는 기능을 찾을 수 있다. 스캐너 200는 사용자 입력에 대응하는 기능이 스캐너 설정 기능에 관련된 것인지 또는 스캔 데이터 처리 기능과 관련된 것인지 식별할 수 있다. 사용자 입력에 대응하는 기능이 스캐너 설정 기능에 대응하는 것이라고 판단되면 동작 450으로 진행할 수 있다. In operation 440, the scanner 200 may identify a function corresponding to the user input detected through the user interface. Specifically, the scanner 200 may store information mapping functions corresponding to various user inputs detected through the user interface. For example, the scanner 200 may store user input-function mapping information 300 as shown in FIG. 3 . Therefore, when the scanner 200 detects a user input, it can find the corresponding function by referring to the user input-function mapping information 300 as shown in FIG. 3. The scanner 200 can identify whether the function corresponding to the user input is related to the scanner setting function or the scan data processing function. If it is determined that the function corresponding to the user input corresponds to the scanner setting function, operation 450 may be performed.

동작 450에서, 스캐너 200는 스캔 동작을 중단할 수 있다. At operation 450, the scanner 200 may stop scanning operations.

동작 460에서, 스캐너 200는 사용자 입력에 대응하는 스캐너 설정 동작을 수행할 수 있다. 예를 들어, 스캐너 200는 도 3에 도시된 바와 같은 사용자 입력-기능 매핑 정보 300를 참조하여, 감지된 사용자 입력에 대응하는 스캐너 설정 기능을 식별하고, 식별된 스캐너 설정 기능을 수행할 수 있다. 스캐너 설정 기능은 스캐너의 설정을 변경하는 기능으로서, 예를 들어, 스캔 해상도 변경, 스캔 심도 변경, 스캔 광원 색상 변경, 필터링 설정 변경 등을 포함할 수 있다. In operation 460, the scanner 200 may perform a scanner setting operation corresponding to a user input. For example, the scanner 200 may refer to the user input-function mapping information 300 as shown in FIG. 3, identify a scanner setting function corresponding to the detected user input, and perform the identified scanner setting function. The scanner setting function is a function that changes scanner settings and may include, for example, changing scan resolution, changing scan depth, changing scan light source color, and changing filtering settings.

동작 440에서, 사용자 입력에 대응하는 기능이 스캔 데이터 처리 기능에 대응하는 것이라고 판단되면 동작 470으로 진행할 수 있다. In operation 440, if it is determined that the function corresponding to the user input corresponds to the scan data processing function, the process may proceed to operation 470.

동작 470에서, 스캐너 200는 스캔 동작을 중단할 수 있다. 이와 같은 스캔 동작 중단에 따라 실시간으로 이루어지는 스캔 데이터의 전송도 중단될 수 있다. At operation 470, the scanner 200 may stop scanning operations. Due to this interruption of the scan operation, real-time scan data transmission may also be stopped.

동작 480에서, 스캐너 200는 사용자 입력에 대응하는 제어 신호를 데이터 처리 장치 100로 전송할 수 있다. 예를 들어, 스캐너 200는 도 3에 도시된 바와 같은 사용자 입력-기능 매핑 정보 300를 참조하여, 감지된 사용자 입력에 대응하는 스캔 데이터 처리 기능을 식별하고, 식별된 스캔 데이터 처리 기능을 수행하도록 지시하는 제어 신호를 데이터 처리 장치 100로 전송할 수 있다. 예를 들어, 스캔 데이터 처리 기능은, 되돌리기 기능, 되살리기 기능, 락킹 기능을 포함할 수 있다. In operation 480, the scanner 200 may transmit a control signal corresponding to the user input to the data processing device 100. For example, the scanner 200 refers to the user input-function mapping information 300 as shown in FIG. 3, identifies a scan data processing function corresponding to the detected user input, and instructs the scanner 200 to perform the identified scan data processing function. The control signal may be transmitted to the data processing device 100. For example, the scan data processing function may include an undo function, a revival function, and a locking function.

동작 490에서, 데이터 처리 장치 100는 사용자 입력에 대응하는 제어 신호를 스캐너 200로부터 수신하고, 수신된 제어 신호에 따라 삼차원 데이터를 처리할 수 있다. 삼차원 데이터의 처리는 데이터 처리 장치 100의 디스플레이에 표시된 이미지에 대응하는 삼차원 데이터의 되돌리기 처리, 되살리기 처리, 락킹 처리 등을 포함할 수 있다. In operation 490, the data processing device 100 may receive a control signal corresponding to the user input from the scanner 200 and process three-dimensional data according to the received control signal. Processing of three-dimensional data may include undoing, reviving, locking, etc. of three-dimensional data corresponding to the image displayed on the display of the data processing device 100.

동작 495에서, 데이터 처리 장치100는 처리된 삼차원 데이터에 대응하는 이미지를 표시할 수 있다. In operation 495, the data processing device 100 may display an image corresponding to the processed three-dimensional data.

도 7은 일 실시예에 따라 데이터 처리 장치에서 수행되는 동작 방법의 일 예에 따른 구체적인 흐름도이다. Figure 7 is a detailed flowchart according to an example of an operation method performed in a data processing device according to an embodiment.

도 7을 참조하면, 동작 710에서, 데이터 처리 장치 100는 스캐너 200로부터 대상체를 스캔한 스캔 데이터를 실시간으로 수신할 수 있다. Referring to FIG. 7 , in operation 710, the data processing device 100 may receive scan data obtained by scanning an object from the scanner 200 in real time.

동작 720에서, 데이터 처리 장치 100는 현재 스캔되고 있는 대상체의 부분을 실시간으로 디스플레이에 표시하기 위해, 스캐너 200로부터 수신한 스캔 데이터에 기반하여 삼차원 데이터를 생성하고, 생성된 삼차원 데이터에 대응하는 이미지를 실시간으로 디스플레이에 표시할 수 있다. In operation 720, the data processing device 100 generates three-dimensional data based on scan data received from the scanner 200 in order to display the portion of the object currently being scanned on the display in real time, and creates an image corresponding to the generated three-dimensional data. It can be displayed on the display in real time.

동작 730에서, 데이터 처리 장치 100는 스캐너 200로부터 제어 신호를 수신할 수 있다. 스캐너 200로부터 수신하는 제어 신호는 스캐너 200의 사용자 인터페이스를 통해서 감지한 사용자 입력에 따라서 스캐너 200가 데이터 처리 장치 100에서 데이터 처리 기능을 수행하도록 지시하는 명령을 포함할 수 있다.In operation 730, the data processing device 100 may receive a control signal from the scanner 200. The control signal received from the scanner 200 may include a command instructing the scanner 200 to perform a data processing function in the data processing device 100 according to a user input detected through the user interface of the scanner 200.

동작 740에서, 데이터 처리 장치 100는 스캐너 200로부터 수신한 제어 신호를 파싱하여 제어 신호를 되돌리기 (undo) 명령에 대응하는 것인지, 되살리기 (redo) 명령에 대응하는 것인지, 락킹 (locking) 명령에 대응하는 것인지 판별할 수 있다. 스캐너 200로부터 수신한 제어 신호가 되돌리기 (undo) 명령에 대응하는 것이라고 판단되면, 동작 750으로 진행할 수 있다. In operation 740, the data processing device 100 parses the control signal received from the scanner 200 and determines whether the control signal corresponds to an undo command, a redo command, or a locking command. You can determine if it is. If it is determined that the control signal received from the scanner 200 corresponds to an undo command, operation 750 may be performed.

동작 750에서, 데이터 처리 장치 100는 되돌리기 (undo) 명령에 따라 삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리할 수 있다. In operation 750, the data processing device 100 may hide a predetermined number of the most recently input frames among the frames constituting the three-dimensional data according to an undo command.

이하에서는 도 8을 참조하여 되돌리기 명령에 따른 데이터 처리 장치의 동작을 설명한다. Hereinafter, the operation of the data processing device according to the undo command will be described with reference to FIG. 8.

도 8은 일 실시예에 따라 데이터 처리 장치가 스캐너로부터 수신한 되돌리기 명령에 따라 동작하는 방법을 설명하기 위한 참고도이다. FIG. 8 is a reference diagram for explaining how a data processing device operates according to a revert command received from a scanner, according to an embodiment.

도 8을 참조하면, 데이터 처리 장치 100는 스캐너 200로부터 수신한 스캔 데이터에 기반하여 삼차원 데이터를 생성하고 삼차원 데이터 810에 대응하는 이미지 811를 실시간으로 디스플레이 130에 표시할 수 있다. 삼차원 데이터 810는 복수의 프레임들로 구성될 수 있다. 예를 들어 삼차원 데이터 810는 프레임 F1 - F11 로 구성될 수 있다. 데이터 처리 장치 100는 프레임 F1- F11로 구성된 삼차원 데이터에 대응하는 이미지 811를 디스플레이 130에 표시할 수 있다. 이와 같이 이미지 811이 데이터 처리 장치 100의 디스플레이 130에 표시된 상태에서, 사용자는 다양한 목적이나 이유로 인해 최근에 스캔된 데이터를 숨김 처리를 하기를 원할 수 있다. 이 경우, 환자의 구강 스캔을 위해 스캐너 200를 쥐고 있는 상태에서 데이터 처리 장치 100의 디스플레이에 표시된 데이터의 숨김 처리를 위해 데이터 처리 장치 100의 입력 장치를 이용하여 입력을 하는 것은 위생적이지 않고 스캔 동작 처리에 효율적이지 않다. 따라서 사용자는 스캐너 200에 마련된 사용자 인터페이스를 이용하여 사용자 입력을 하여 데이터 처리 명령을 내릴 수 있다. 예를 들어 이미지 811이 데이터 처리 장치 100의 디스플레이 130에 표시된 상태에서, 사용자는 스캐너 200에 되돌리기 명령에 대응하는 사용자 입력을 하면, 이러한 사용자 입력은 데이터 처리 장치 100로 제공되고, 데이터 처리 장치 100는 되돌리기 명령에 따라, 생성된 삼차원 데이터 810를 구성하는 프레임들 중 미리 지정된 개수의 프레임들을 숨김 처리할 수 있다. 예를 들어 숨김 처리될 미리 지정된 개수의 프레임들이 3개 라면, 데이터 처리 장치 100는 삼차원 데이터 810의 프레임들 중 가장 최근에 입력된 프레임 F9, F10, F11을 숨김 처리함으로써 삼차원 데이터 820를 획득하고, 프레임 F9, F10, F11이 숨김 처리된 삼차원 데이터 820에 대응하는 이미지 821를 디스플레이 130에 표시할 수 있다. 이와 같이 숨김 처리 동작에 의해 이미지 821이 디스플레이 130에 표시된 상태에서 사용자로부터 다시 두번째 되돌리기에 대응하는 사용자 입력을 스캐너 200로부터 수신하면, 데이터 처리 장치 10는 삼차원 데이터 820에서 미리 지정된 개수의 프레임들 예를 들어, 3개의 프레임 F6, F7, F8을 숨김 처리 함으로써 삼차원 데이터 830를 획득하고, 프레임 F9, F10, F11에 더하여 프레임 F6, F7, F8까지 총 6개의 프레임이 숨김 처리된 삼차원 데이터 830에 대응하는 이미지 831를 디스플레이 130에 표시할 수 있다. Referring to FIG. 8 , the data processing device 100 may generate three-dimensional data based on scan data received from the scanner 200 and display an image 811 corresponding to the three-dimensional data 810 on the display 130 in real time. Three-dimensional data 810 may be composed of a plurality of frames. For example, three-dimensional data 810 may consist of frames F1 - F11. The data processing device 100 may display image 811 corresponding to three-dimensional data consisting of frames F1-F11 on the display 130. With the image 811 displayed on the display 130 of the data processing device 100, the user may wish to hide the recently scanned data for various purposes or reasons. In this case, it is not hygienic to input using the input device of the data processing device 100 to hide the data displayed on the display of the data processing device 100 while holding the scanner 200 to scan the patient's oral cavity, and it is not hygienic to process the scan operation. is not efficient. Therefore, the user can issue a data processing command through user input using the user interface provided in the scanner 200. For example, with image 811 displayed on the display 130 of the data processing device 100, when the user inputs a user input corresponding to a revert command to the scanner 200, this user input is provided to the data processing device 100, and the data processing device 100 According to the undo command, a predetermined number of frames among the frames constituting the generated three-dimensional data 810 can be hidden. For example, if the predetermined number of frames to be hidden is three, the data processing device 100 obtains three-dimensional data 820 by hiding the most recently input frames F9, F10, and F11 among the frames of three-dimensional data 810, An image 821 corresponding to the three-dimensional data 820 in which frames F9, F10, and F11 are hidden can be displayed on the display 130. When image 821 is displayed on the display 130 through the hiding process and a user input corresponding to the second rewind is received from the scanner 200, the data processing device 10 selects a predetermined number of frames from the three-dimensional data 820. For example, three-dimensional data 830 is obtained by hiding three frames F6, F7, and F8, and in addition to frames F9, F10, and F11, a total of six frames, including frames F6, F7, and F8, are hidden, corresponding to three-dimensional data 830. Image 831 can be displayed on the display 130.

이와 같은 되돌리기 명령에 따른 숨김 처리는 삼차원 데이터를 구성하는 프레임들 중 일부를 표시하지 않음으로써 사용자에게 보이지 않게 하는 것이고 프레임 자체를 삭제 처리하는 것과는 다르다. 따라서 사용자는 숨김 처리된 프레임들을 다시 되살리기 명령에 따라서 보여지게 할 수 있다. Hiding processing according to this undo command is to make some of the frames that make up the three-dimensional data invisible to the user by not displaying them, and is different from deleting the frame itself. Therefore, the user can make hidden frames visible by following the revive command.

일 실시예에 따라 데이터 처리 장치 100가 되돌리기 명령에 따라 숨김 처리하는 대상이 되는 삼차원 데이터는 스캔 데이터에 기반하여 생성된 복셀 데이터 또는 메쉬 데이터를 포함할 수 있다. According to one embodiment, the three-dimensional data that the data processing device 100 hides according to the undo command may include voxel data or mesh data generated based on scan data.

일 실시예에 따라 데이터 처리 장치 100가 되돌리기 명령에 따라 삼차원 데이터에서 숨김 처리되는 프레임들의 미리 지정된 개수는 다양하게 결정할 수 있다. According to one embodiment, the data processing device 100 may determine the predetermined number of frames to be hidden in three-dimensional data in various ways according to the undo command.

일 실시예에 따라 스캐너 200에 마련된 버튼을 지속적으로 누름 동작 또는 스캐너 200를 지속적으로 흔드는 동작에 의해 되돌리기 명령에 대응하는 사용자 입력을 수신할 수 있고, 데이터 처리 장치 100는 스캐너 200로부터 버튼을 지속적으로 푸쉬하는 동작에 대응하는 제어 신호를 수신할 수 있다. 이 경우 데이터 처리 장치 100는 버튼 푸쉬 동작이 해제될 때까지 지속적으로 삼차원 데이터에서 최근 입력된 프레임들로부터 숨김 처리하여 표시하고, 버튼 푸쉬 동작이 해제되면 그때 숨김 처리 동작을 중단할 수 있다. According to one embodiment, a user input corresponding to a revert command may be received by continuously pressing a button provided on the scanner 200 or continuously shaking the scanner 200, and the data processing device 100 continuously presses the button from the scanner 200. A control signal corresponding to the pushing operation may be received. In this case, the data processing device 100 may continue to hide and display frames from recently input three-dimensional data until the button push operation is released, and then stop the hiding process when the button push operation is released.

일 실시예에 따라 데이터 처리 장치 100는 사용자가 스캐너 200에 마련된 버튼을 누르는 시간 정보를 스캐너 200로부터 수신하고, 버튼이 눌려진 시간에 따라서 비례해서 삼차원 데이터에서 숨김 처리될 프레임들의 개수를 결정할 수 있다. 예를 들어 버튼이 눌려진 시간이 짧으면 데이터 처리 장치 100는 적은 개수의 프레임들을 숨김 처리하고, 버튼이 눌려진 시간이 길면 데이터 처리 장치 100는 많은 개수의 프레임들을 숨김 처리할 수 있다. According to one embodiment, the data processing device 100 may receive information on the time at which the user presses a button provided on the scanner 200 from the scanner 200, and determine the number of frames to be hidden in the three-dimensional data in proportion to the time at which the button was pressed. For example, if the button is pressed for a short time, the data processing device 100 can hide a small number of frames, and if the button is pressed for a long time, the data processing device 100 can hide a large number of frames.

다시 도 7로 돌아가서, 동작 740에서 스캐너 200로부터 수신한 제어 신호가 되살리기 (redo) 명령에 대응하는 것이라고 판단되면, 동작 760으로 진행할 수 있다. Returning to FIG. 7 , if it is determined in operation 740 that the control signal received from the scanner 200 corresponds to a redo command, operation 760 may be performed.

동작 760에서, 데이터 처리 장치 100는 되살리기 (redo) 명령에 따라 삼차원 데이터를 구성하는 프레임들 중 가장 최근에 숨김 처리되었던 미리 지정된 개수의 프레임들을 복구 처리할 수 있다. In operation 760, the data processing device 100 may restore a predetermined number of frames that were most recently hidden among the frames constituting three-dimensional data according to a redo command.

이하에서는 도 9를 참조하여 되살리기 명령에 따른 데이터 처리 장치의 동작을 설명한다. Hereinafter, the operation of the data processing device according to the restore command will be described with reference to FIG. 9.

도 9는 일 실시예에 따라 데이터 처리 장치가 스캐너로부터 수신한 되살리기 명령에 따라 동작하는 방법을 설명하기 위한 참고도이다. FIG. 9 is a reference diagram for explaining how a data processing device operates according to a restore command received from a scanner, according to an embodiment.

도 9를 참조하면, 데이터 처리 장치 100는 도 8에 도시된 바와 같이 2회 되돌리기 동작에 따라 프레임 F6-F11이 숨김 처리된 삼차원 데이터 830에 대응하는 이미지 831을 디스플레이 130에 표시할 수 있다. Referring to FIG. 9 , the data processing device 100 may display an image 831 corresponding to three-dimensional data 830 in which frames F6-F11 are hidden according to a two-time undo operation as shown in FIG. 8 on the display 130.

이와 같이 이미지 831이 데이터 처리 장치 100의 디스플레이 130에 표시된 상태에서, 사용자는 다양한 목적이나 이유로 인해 최근에 숨김 처리된 부분을 복구 처리를 하기를 원할 수 있다. 이 경우, 환자의 구강 스캔을 위해 스캐너 200를 쥐고 있는 상태에서 숨김 처리된 데이터의 복구 처리를 위해 데이터 처리 장치 100의 입력 장치를 이용하여 입력을 하는 것은 위생적이지 않고 스캔 동작 처리에 효율적이지 않다. 따라서 사용자는 스캐너 200에 마련된 사용자 인터페이스를 이용하여 사용자 입력을 하여 데이터 처리 명령을 내릴 수 있다. 예를 들어 이미지 831이 데이터 처리 장치 100의 디스플레이 130에 표시된 상태에서, 사용자는 스캐너 200에 되살리기 명령에 대응하는 사용자 입력을 하면, 이러한 사용자 입력은 데이터 처리 장치 100로 제공되고, 데이터 처리 장치 100는 되살리기 명령에 따라, 삼차원 데이터 830를 구성하는 프레임들 중 숨김 처리된 프레임들 중에서 미리 지정된 개수의 프레임들을 복구 처리할 수 있다. 예를 들어 복구 처리될 미리 지정된 개수의 프레임들이 3개 라면, 데이터 처리 장치 100는 삼차원 데이터 830의 프레임들 중 가장 최근에 숨김 처리된 프레임 F6, F7, F8을 복구 처리함으로써 삼차원 데이터 820를 획득하고, 프레임 F6, F7, F8이 복구 처리된 삼차원 데이터 820에 대응하는 이미지 821를 디스플레이 130에 표시할 수 있다. 이와 같이 복구 처리 동작에 의해 이미지 821이 디스플레이 130에 표시된 상태에서 사용자로부터 다시 두번째 되살리기에 대응하는 사용자 입력을 스캐너 200로부터 수신하면, 데이터 처리 장치 100는 삼차원 데이터 820에서 가장 최근에 숨김 처리된 프레임들 F9, F10, F11을 복구 처리함으로써 삼차원 데이터 810를 획득하고, 프레임 F6, F7, F8에 더하여 프레임 F9, F10, F11까지 총 6개의 프레임이 복구 처리된 삼차원 데이터 810에 대응하는 이미지 811를 디스플레이 130에 표시할 수 있다. In this state, with image 831 displayed on the display 130 of the data processing device 100, the user may wish to restore the recently hidden portion for various purposes or reasons. In this case, inputting data using the input device of the data processing device 100 to recover hidden data while holding the scanner 200 to scan the patient's oral cavity is not hygienic and is not efficient in scanning operation processing. Therefore, the user can issue a data processing command through user input using the user interface provided in the scanner 200. For example, with image 831 displayed on the display 130 of the data processing device 100, when the user inputs a user input corresponding to a revive command on the scanner 200, this user input is provided to the data processing device 100, and the data processing device 100 According to the restore command, a predetermined number of frames from among the hidden frames constituting the three-dimensional data 830 can be restored. For example, if the predetermined number of frames to be recovered is three, the data processing device 100 obtains the three-dimensional data 820 by recovering and processing the most recently hidden frames F6, F7, and F8 among the frames of the three-dimensional data 830. , an image 821 corresponding to the three-dimensional data 820 in which frames F6, F7, and F8 have been recovered and processed can be displayed on the display 130. In this way, when the user input corresponding to the second restoration is received from the scanner 200 while the image 821 is displayed on the display 130 through the recovery processing operation, the data processing device 100 retrieves the most recently hidden frames from the three-dimensional data 820. Three-dimensional data 810 is acquired by recovering F9, F10, and F11, and a total of six frames, including frames F9, F10, and F11, in addition to frames F6, F7, and F8, are recovered, and an image 811 corresponding to three-dimensional data 810 is displayed. 130 It can be displayed in .

일 실시예에 따라 데이터 처리 장치 100가 되살리기 명령에 따라 복구 처리하는 대상이 되는 삼차원 데이터는 스캔 데이터에 기반하여 생성된 복셀 데이터 또는 메쉬 데이터를 포함할 수 있다. According to one embodiment, the three-dimensional data that the data processing device 100 recovers and processes according to a restore command may include voxel data or mesh data generated based on scan data.

일 실시예에 따라 데이터 처리 장치 100가 되살리기 명령에 따라 삼차원 데이터에서 복구 처리되는 프레임들의 미리 지정된 개수는 다양하게 결정할 수 있다. According to one embodiment, the data processing device 100 may determine a predetermined number of frames to be recovered from three-dimensional data according to a restore command in various ways.

일 실시예에 따라 스캐너 200에 마련된 버튼을 지속적으로 누름 동작 또는 스캐너 200를 지속적으로 흔드는 동작에 의해 되살리기 명령에 대응하는 사용자 입력을 수신할 수 있고, 데이터 처리 장치 100는 스캐너 200로부터 버튼을 지속적으로 푸쉬하는 동작에 대응하는 제어 신호를 수신할 수 있다. 이 경우 데이터 처리 장치 100는 버튼 푸쉬 동작이 해제될 때까지 지속적으로 삼차원 데이터에서 최근 숨김 처리된 프레임들로부터 복구 처리하여 표시하고, 버튼 푸쉬 동작이 해제되면 그때 복구 처리 동작을 중단할 수 있다. According to one embodiment, a user input corresponding to a revive command may be received by continuously pressing a button provided on the scanner 200 or continuously shaking the scanner 200, and the data processing device 100 continuously presses the button from the scanner 200. A control signal corresponding to the pushing operation may be received. In this case, the data processing device 100 may continuously process and display recovery processes from recently hidden frames in the three-dimensional data until the button push operation is released, and then stop the recovery processing operation when the button push operation is released.

일 실시예에 따라 데이터 처리 장치 100는 사용자가 스캐너 200에 마련된 버튼을 누르는 시간 정보를 스캐너 200로부터 수신하고, 버튼이 눌려진 시간에 따라서 비례해서 삼차원 데이터에서 복구 처리될 프레임들의 개수를 결정할 수 있다. 예를 들어 버튼이 눌려진 시간이 짧으면 데이터 처리 장치 100는 적은 개수의 프레임들을 복구 처리하고, 버튼이 눌려진 시간이 길면 데이터 처리 장치 100는 많은 개수의 프레임들을 복구 처리할 수 있다. According to one embodiment, the data processing device 100 may receive information on the time at which the user presses a button provided on the scanner 200 from the scanner 200, and determine the number of frames to be recovered from the three-dimensional data in proportion to the time at which the button was pressed. For example, if the button is pressed for a short time, the data processing device 100 may recover and process a small number of frames, and if the button is pressed for a long time, the data processing device 100 may recover and process a large number of frames.

다시 도 7로 돌아가서, 동작 740에서 스캐너 200로부터 수신한 제어 신호가 락킹 (locking) 명령에 대응하는 것이라고 판단되면, 동작 770으로 진행할 수 있다. Going back to FIG. 7 , if it is determined in operation 740 that the control signal received from the scanner 200 corresponds to a locking command, operation 770 may be performed.

동작 770에서, 데이터 처리 장치 100는 락킹 (locking) 명령에 따라 삼차원 데이터에 대해서 더 이상 숨김 처리나 복구 처리가 되지 않도록 현재 상태의 삼차원 데이터를 확정 처리할 수 있다. In operation 770, the data processing device 100 may confirm and process the three-dimensional data in its current state so that the three-dimensional data is no longer hidden or restored according to a locking command.

이하에서는 도 10을 참조하여 락킹 명령에 따른 데이터 처리 장치의 동작을 설명한다. Hereinafter, the operation of the data processing device according to the locking command will be described with reference to FIG. 10.

도 10은 일 실시예에 따라 데이터 처리 장치가 스캐너로부터 수신한 락킹 명령에 따라 동작하는 방법을 설명하기 위한 참고도이다. FIG. 10 is a reference diagram for explaining how a data processing device operates according to a locking command received from a scanner, according to an embodiment.

도 10을 참조하면, 데이터 처리 장치 100는 도 8에 도시된 바와 같이 1회 되돌리기 동작에 따라 프레임 F9-F11이 숨김 처리된 삼차원 데이터 820에 대응하는 이미지 821을 디스플레이 130에 표시할 수 있다. Referring to FIG. 10 , the data processing device 100 may display an image 821 corresponding to three-dimensional data 820 in which frames F9-F11 are hidden according to a one-time undo operation as shown in FIG. 8 on the display 130.

이와 같이 이미지 821이 데이터 처리 장치 100의 디스플레이 130에 표시된 상태에서, 사용자는 현재 상태의 이미지를 확정하여 더 이상 숨김 처리나 복구 처리되지 않기를 원할 수 있다. 예를 들어 사용자는 되돌리기 동작과 되살리기 동작의 시도 후에 현재 상태의 데이터가 더 이상 수정되지 않고 현재 상태의 데이터를 확정적으로 고정되기를 원할 수 있다. 이 경우, 환자의 구강 스캔을 위해 스캐너 200를 쥐고 있는 상태에서 데이터 확정 처리를 위해 데이터 처리 장치 100의 입력 장치를 이용하여 입력을 하는 것은 위생적이지 않고 스캔 동작 처리에 효율적이지 않다. 따라서 사용자는 스캐너 200에 마련된 사용자 인터페이스를 이용하여 사용자 입력을 하여 데이터 처리 명령을 내릴 수 있다. 예를 들어 이미지 821이 데이터 처리 장치 100의 디스플레이 130에 표시된 상태에서, 사용자는 스캐너 200에 락킹 명령에 대응하는 사용자 입력을 하면, 이러한 사용자 입력은 데이터 처리 장치 100로 제공되고, 데이터 처리 장치 100는 락킹 명령에 따라, 삼차원 데이터 820를 구성하는 프레임들 중 숨김 처리된 프레임 F9-F11을 삭제할 수 있다. 이와 같은 삭제 처리에 의해 데이터 처리 장치 100는 F1-F8로 구성된 삼차원 데이터 840를 생성할 수 있으며 삼차원 데이터 840에 대응하는 이미지 841을 표시할 수 있다. 이미지 821과 이미지 841은 동일하지만, 이미지 841은 더이상 편집이 가능하지 않도록 락킹 후의 이미지이기 때문에 사용자는 더 이상 이미지 841에 대해서 되돌리기 기능이나 되살리기 기능을 적용할 수 없다. In this state, when the image 821 is displayed on the display 130 of the data processing device 100, the user may wish to confirm the image in its current state so that it is no longer hidden or restored. For example, the user may want the data in the current state to be fixed definitively so that the data in the current state is no longer modified after attempts at the undo and restore operations. In this case, using the input device of the data processing device 100 to input data while holding the scanner 200 to scan the patient's oral cavity is not hygienic and is not efficient in processing the scan operation. Therefore, the user can issue a data processing command through user input using the user interface provided in the scanner 200. For example, with image 821 displayed on the display 130 of the data processing device 100, when the user inputs a user input corresponding to a locking command to the scanner 200, this user input is provided to the data processing device 100, and the data processing device 100 According to the locking command, hidden frames F9-F11 among the frames constituting the three-dimensional data 820 can be deleted. Through this deletion process, the data processing device 100 can generate three-dimensional data 840 consisting of F1-F8 and display an image 841 corresponding to the three-dimensional data 840. Image 821 and image 841 are the same, but since image 841 is an image that has been locked so that it can no longer be edited, the user can no longer apply the undo or revive function to image 841.

일 실시예에 따라 데이터 처리 장치 100는 락킹 동작에 의해 확정된 삼차원 데이터에 대해서는 되돌리기 기능이나 되살리기 기능을 적용할 수 없지만 락킹 이후에 새로 수신된 스캔 데이터에 기반하여 생성된 삼차원 데이터에 대해서는 되돌리기 기능이나 되살리기 기능을 적용할 수 있다. 도 10에 도시된 예에서 락킹 기능에 의해 프레임 F1-F8을 포함하는 삼차원 데이터 840가 확정된 후에, 이어서 스캔 데이터를 수신하여 새로운 프레임 F9-F14을 포함하는 삼차원 데이터를 을 수신하여 삼차원 데이터 850을 생성한 경우, 데이터 처리 장치 100는 락킹 동작 이후 새로 생성된 F9-F14에 대해서 되돌리기 기능 및 되살리기 기능을 적용할 수 있다. According to one embodiment, the data processing device 100 cannot apply the revert function or revive function to three-dimensional data confirmed by the locking operation, but does not apply the revert function or revive function to three-dimensional data generated based on newly received scan data after locking. The revive function can be applied. In the example shown in FIG. 10, after the three-dimensional data 840 including frames F1-F8 is confirmed by the locking function, scan data is then received to receive three-dimensional data including new frames F9-F14 to create three-dimensional data 850. When created, the data processing device 100 can apply the undo function and the restore function to the newly created F9-F14 after the locking operation.

일반적으로 스캐너 200가 대상체인 구강의 치아를 따라서 이동하면서 스캔을 하여 구강의 스캔 데이터를 획득하면, 데이터 처리 장치 100는 수신되는 스캔 데이터로부터 중복되는 부분에 기반하여 정렬함으로써 삼차원 데이터를 생성할 수 있다. 한편, 사용자는 구강의 연속되지 않은 영역을 스캐너 200를 이용하여 스캔할 수 있다. 예를 들어 왼쪽 어금니쪽부터 스캔을 시작하다가 중간에 오른쪽 어금니쪽으로 이동하여 스캔을 하면 스캐너는 연속적이지 않은 두개의 영역에 대한 스캔 데이터를 획득할 수 있다. 데이터 처리 장치 100가 디스플레이에 대상체의 하나 이상이 영역에 대한 삼차원 데이터를 동시에 표시하는 상황에서 되돌리기 동작이나 되살리기 동작을 하는 경우의 예를 도 11 내지 도 13을 참조하여 설명한다.In general, when the scanner 200 acquires scan data of the oral cavity by scanning while moving along the teeth of the oral cavity, the data processing device 100 can generate three-dimensional data by sorting the received scan data based on overlapping parts. . Meanwhile, the user can scan a non-contiguous area of the oral cavity using the scanner 200. For example, if you start scanning from the left molar and then move to the right molar to scan, the scanner can acquire scan data for two non-contiguous areas. An example of a case where the data processing device 100 performs an undo or refresh operation in a situation where three-dimensional data for an area of one or more objects is simultaneously displayed on the display will be described with reference to FIGS. 11 to 13.

도 11은 일 실시예에 따라 데이터 처리 장치가 대상체의 복수의 영역에 대응하는 이미지를 표시하는 동작을 설명하기 위한 참고도이다. FIG. 11 is a reference diagram for explaining an operation of a data processing device to display images corresponding to a plurality of areas of an object, according to an embodiment.

도 11을 참조하면, 데이터 처리 장치 100는 제1서브 화면 1110에 대상체의 제1영역에 대응하는 제1이미지의 썸네일을 표시하고, 제2서브 화면 1120에 대상체의 제1영역과 이격된 제2영역에 대응하는 제2이미지의 썸네일을 표시하고, 메인 화면 1130에 대상체의 제1영역이나 제2영역과 이격된 제3영역에 대응하는 제3이미지를 표시할 수 있다. 서브 화면의 개수는 다양하게 결정될 수 있다. Referring to FIG. 11, the data processing device 100 displays a thumbnail of the first image corresponding to the first area of the object on the first sub-screen 1110, and displays a thumbnail of the first image corresponding to the first area of the object on the second sub-screen 1120. A thumbnail of the second image corresponding to the area may be displayed, and a third image corresponding to the first area of the object or a third area spaced apart from the second area may be displayed on the main screen 1130. The number of sub-screens can be determined in various ways.

일 실시예에 따라 데이터 처리 장치 100는 메인 화면에 표시된 이미지에 대응하는 삼차원 데이터에 대해서 되돌리기나 되살리기, 락킹 등의 데이터 처리 동작을 수행할 수 있다. 따라서 서브 화면에 표시된 이미지에 대해서 데이터 처리 동작을 하기 위해서는 서브 화면에 대응하는 이미지를 메인 화면으로 이동시킬 수 있다. 사용자는 사용자 입력에 따라 제1서브 화면이나 제2서브 화면에 표시된 이미지와 메인 화면에 표시된 이미지를 서로 교환시킬 수 있다. 예를 들어 사용자는 제1서브 화면에 표시된 썸네일을 제1서브 화면으로 드래그하는 동작에 의해 제1서브 화면에 표시된 썸네일에 대응하는 제1이미지를 메인 화면에 표시되게 하고, 메인 화면에 표시된 제3이미지의 썸네일이 제1서브 화면에 표시되게 할 수 있다. 이와 같이 이동시킨 후 데이터 처리 장치 100는 메인 화면 1130에 표시된 제3이미지에 대해서 데이터 처리 동작을 수행할 수 있다. According to one embodiment, the data processing device 100 may perform data processing operations such as undoing, reviving, and locking on three-dimensional data corresponding to the image displayed on the main screen. Therefore, in order to perform a data processing operation on the image displayed on the sub screen, the image corresponding to the sub screen can be moved to the main screen. The user can exchange the image displayed on the first or second sub-screen with the image displayed on the main screen according to user input. For example, the user causes the first image corresponding to the thumbnail displayed on the first sub screen to be displayed on the main screen by dragging the thumbnail displayed on the first sub screen to the first sub screen, and the third image displayed on the main screen. The thumbnail of the image can be displayed on the first sub screen. After moving in this way, the data processing device 100 can perform a data processing operation on the third image displayed on the main screen 1130.

일 실시예에 따라 메인 화면에 표시된 이미지가 반복적인 되돌리기 동작에 의해 모두 숨김 처리되어 더 이상 표시될 이미지가 없는 경우에, 데이터 처리 장치 100는 아무 동작을 하지 않을 수 있다. 이경우 사용자는 수동으로 서브 화면에 표시된 이미지를 메인 화면으로 이동시킬 수 있다. According to one embodiment, when all images displayed on the main screen are hidden by a repetitive undo operation and there are no more images to be displayed, the data processing device 100 may not perform any operation. In this case, the user can manually move the image displayed on the sub screen to the main screen.

일 실시예에 따라 메인 화면에 표시된 이미지가 반복적인 되돌리기 동작에 의해 모두 숨김 처리되어 더 이상 표시될 이미지가 없는 경우에, 데이터 처리 장치 100는 자동으로 서브 화면에 대응하는 이미지를 메인 화면으로 이동시켜 표시할 수 있다. 이때 데이터 처리 장치 100는 최근에 스캔된 데이터 순으로 서브 화면에 대응하는 이미지를 메인 화면으로 이동시킬 수 있다. 예를 들어 제2서브 화면의 이미지가 더 최근에 스캔된 데이터이면 데이터 처리 장치 100는 제2서브 화면에 대응하는 이미지를 메인 화면으로 이동시킬 수 있다. According to one embodiment, when all images displayed on the main screen are hidden by a repetitive revert operation and there are no more images to be displayed, the data processing device 100 automatically moves the image corresponding to the sub screen to the main screen. It can be displayed. At this time, the data processing device 100 may move images corresponding to the sub screen to the main screen in the order of recently scanned data. For example, if the image of the second sub-screen is more recently scanned data, the data processing device 100 may move the image corresponding to the second sub-screen to the main screen.

일 실시예에 따라 데이터 처리 장치는 서브 화면 별로 락킹(locking)을 설정할 수 있다. 락킹은 되돌리기 동작이나 되살리기 동작 등이 실행되지 않도록 하는 설정하는 것을 의미할 수 있다. 도 11을 참조하면 제1서브 화면에는 락킹을 표시하는 자물쇠 아이콘 1140이 표시되어 있다. 락킹을 나타내기 위해서는 자물쇠 아이콘 뿐만 아니라 서브 화면의 테두리에 색상이나 두께 등을 이용하여 시각적 효과를 부여할 수 있다. According to one embodiment, the data processing device may set locking for each sub-screen. Locking may mean setting to prevent an undo or revive operation from being executed. Referring to FIG. 11, a lock icon 1140 indicating locking is displayed on the first sub screen. To indicate locking, a visual effect can be given using not only the lock icon but also the color or thickness of the border of the sub screen.

도 12는 일 실시예에 따라 데이터 처리 장치의 디스플레이에 대상체의 제1영역에 대응하는 삼차원 데이터를 표시하는 동작을 설명하기 위한 참고도이다. FIG. 12 is a reference diagram for explaining an operation of displaying three-dimensional data corresponding to a first area of an object on a display of a data processing device, according to an embodiment.

도 12를 참조하면, 데이터 처리 장치 100는 대상체인 구강의 제1영역에 대응하는 스캔 데이터를 수신하고, 수신된 스캔 데이터를 가공하여 삼차원 데이터를 생성하고, 생성된 삼차원 데이터에 대응하는 제1이미지를 디스플레이의 메인 화면 1210에 실시간으로 표시할 수 있다. Referring to FIG. 12, the data processing device 100 receives scan data corresponding to a first region of the oral cavity as an object, processes the received scan data to generate three-dimensional data, and creates a first image corresponding to the generated three-dimensional data. can be displayed in real time on the main screen 1210 of the display.

다음 데이터 처리 장치 100는 제1영역과 연속적이지 않은, 즉 이격된 제2영역에 대응하는 스캔 데이터를 수신하면, 제1영역에 대응하는 제1이미지의 썸네일 이미지를 서브 화면 1220으로 이동시켜 표시하고, 제2영역에 대응하는 스캔 데이터를 가공하여 삼차원 데이터를 생성하고, 생성된 삼차원 데이터에 대응하는 제2이미지를 디스플레이의 메인 화면 1210에 실시간으로 표시할 수 있다. Next, when the data processing device 100 receives scan data corresponding to a second area that is not continuous with the first area, that is, is spaced apart, it moves the thumbnail image of the first image corresponding to the first area to the sub screen 1220 and displays it. , scan data corresponding to the second area can be processed to generate three-dimensional data, and a second image corresponding to the generated three-dimensional data can be displayed in real time on the main screen 1210 of the display.

이와 같이 데이터 처리 장치 100의 디스플레이의 메인 화면 1210과 서브 화면 1220에 서로 다른 영역에 대응하는 이미지가 표시되는 상태에서, 사용자는 메인 화면 1210에 표시된 이미지 즉, 제2영역에 대응하는 제2이미지에 대해서 되돌리기 동작이나 되살리기 동작이 수행되도록 할 수 있다. 즉, 도 12의 1200B와 같이 메인 화면 1210과 서브 화면 1220에 서로 다른 영역에 대응하는 이미지가 표시된 상태에서 사용자가 스캐너 200를 조작함으로써, 되돌리기 동작에 대응하는 사용자 입력을 하는 경우, 데이터 처리 장치 100는 스캐너 200로부터 사용자 입력에 대응하는 제어 신호를 수신하고, 메인 화면 1210에 표시된 제2영역에 대응하는 제2이미지에 대응하는 삼차원 데이터에 대해서 숨김 처리를 할 수 있다. 그리고, 사용자가 메인 화면 1210에 표시된 제2영역에 대응하는 제2이미지에 대해서 되돌리기 동작을 반복적으로 수행함으로써 메인 화면 1210에 표시된 제2이미지가 모두 숨김 처리되어 메인 화면 1210에 표시할 제2이미지가 보이지 않는 경우에 데이터 처리 장치 100는 다양한 시나리오에 따라 동작할 수 있다. In this way, in a state where images corresponding to different areas are displayed on the main screen 1210 and the sub screen 1220 of the display of the data processing device 100, the user selects the image displayed on the main screen 1210, that is, the second image corresponding to the second area. A revert operation or a restore operation can be performed. That is, when a user inputs a user input corresponding to a revert operation by operating the scanner 200 while images corresponding to different areas are displayed on the main screen 1210 and the sub screen 1220, as shown in 1200B of FIG. 12, the data processing device 100 Receives a control signal corresponding to the user input from the scanner 200, and can perform hiding processing on three-dimensional data corresponding to the second image corresponding to the second area displayed on the main screen 1210. Then, as the user repeatedly performs a revert operation on the second image corresponding to the second area displayed on the main screen 1210, all of the second images displayed on the main screen 1210 are hidden, so that the second image to be displayed on the main screen 1210 is hidden. When not visible, the data processing device 100 may operate according to various scenarios.

일 실시예에 따라, 사용자가 메인 화면 1210에 표시된 제2영역에 대응하는 제2이미지에 대해서 되돌리기 동작을 반복적으로 수행함으로써 메인 화면 1210에 표시된 제2이미지가 모두 숨김 처리되어 메인 화면 1210에 표시할 제2이미지가 보이지 않는 경우에, 데이터 처리 장치 100는 자동적으로 어떤 동작을 수행하지 않을 수 있다. 즉, 데이터 처리 장치 100는 메인 화면에 표시된 이미지에 대응하는 삼차원 데이터에 대해서 데이터 처리 동작 즉, 되돌리기, 되살리기, 락킹 동작을 수행하므로 서브 화면의 이미지에 대해서 데이터 처리 동작을 하기 위해서는 사용자가 서브 화면의 이미지를 메인 화면으로 이동시켜야 한다. 예를 들어, 사용자는 서브 화면 1220에 표시된 제1이미지의 썸네일을 메인 화면 1210으로 드래그 하는 동작 등의 사용자 입력을 통해 서브 화면 1220에 대응하는 제1이미지를 메인 화면 1210에 표시되게 할 수 있다. 그리고 이와 같이 제1이미지가 메인 화면 1210에 표시된 상태에서 사용자가 스캐너 200를 조작하여 되돌리기 동작에 대응하는 사용자 입력을 하면, 데이터 처리 장치 100는 스캐너 200로부터 사용자 입력에 대응하는 제어 신호를 수신하고, 제어 신호 수신에 따라 메인 화면 1210에 대응하는 제1이미지의 삼차원 데이터에 대해서 숨김 처리를 할 수 있다. According to one embodiment, the user repeatedly performs a revert operation on the second image corresponding to the second area displayed on the main screen 1210, so that all second images displayed on the main screen 1210 are hidden and cannot be displayed on the main screen 1210. If the second image is not visible, the data processing device 100 may not automatically perform any operation. In other words, the data processing device 100 performs data processing operations, that is, reversing, reviving, and locking operations, on three-dimensional data corresponding to the image displayed on the main screen. Therefore, in order to perform data processing operations on the image on the sub screen, the user must use the sub screen. The image must be moved to the main screen. For example, the user can cause the first image corresponding to the sub-screen 1220 to be displayed on the main screen 1210 through a user input, such as dragging the thumbnail of the first image displayed on the sub-screen 1220 to the main screen 1210. And when the user operates the scanner 200 and inputs a user input corresponding to a revert operation while the first image is displayed on the main screen 1210, the data processing device 100 receives a control signal corresponding to the user input from the scanner 200, Depending on the reception of the control signal, the three-dimensional data of the first image corresponding to the main screen 1210 can be hidden.

일 실시예에 따라, 데이터 처리 장치 100의 디스플레이의 메인 화면 1210에 제2 이미지가 표시되고 서브 화면 1220에 제1이미지가 표시된 상태에서, 사용자가 서브 화면 1220에 표시된 제1이미지에 대해서 데이터 처리 동작을 하고 싶은 경우 사용자는 메인 화면 1210에 표시된 제2이미지와 서브 화면 1220에 표시된 제1이미지의 위치를 서로 교환되게 하여, 제1이미지가 메인 화면 1110에 표시되게 한 상태에서 제1이미지에 대해서 데이터 처리 동작을 수행할 수 있다. According to one embodiment, while the second image is displayed on the main screen 1210 of the display of the data processing device 100 and the first image is displayed on the sub-screen 1220, the user performs a data processing operation on the first image displayed on the sub-screen 1220. If the user wants to do this, the user exchanges the positions of the second image displayed on the main screen 1210 and the first image displayed on the sub screen 1220, so that the first image is displayed on the main screen 1110 and then sends data to the first image. Processing operations can be performed.

일 실시예에 따라 도 11의 1200B에 도시된 바와 같이 사용자가 메인 화면 1210에 표시된 제2영역에 대응하는 제2이미지에 대해서 되돌리기 동작을 반복적으로 수행함으로써 메인 화면 1210에 표시된 제2이미지가 모두 숨김 처리되어 메인 화면 1210에 표시할 제2이미지가 보이지 않는 경우에, 데이터 처리 장치 100는 자동적으로 서브 화면 1220의 이미지를 메인 화면 1210으로 이동시킬 수 있다. According to one embodiment, as shown in 1200B of FIG. 11, the user repeatedly performs a revert operation on the second image corresponding to the second area displayed on the main screen 1210, thereby hiding all second images displayed on the main screen 1210. When the second image to be processed and displayed on the main screen 1210 is not visible, the data processing device 100 may automatically move the image on the sub-screen 1220 to the main screen 1210.

도 13은 일 실시예에 따라 메인 화면 1210에 표시된 이미지가 모두 숨김 처리된 경우에 데이터 처리 장치 100가 자동적으로 서브 화면 1220의 이미지를 메인 화면 1210으로 이동시키는 동작을 설명하기 위한 참고도이다. FIG. 13 is a reference diagram for explaining an operation in which the data processing device 100 automatically moves the image of the sub-screen 1220 to the main screen 1210 when all images displayed on the main screen 1210 are hidden according to an embodiment.

도 13의 1300A를 참조하면, 디스플레이 장치 100는 메인 화면 1210에 표시된 제2영역에 대응하는 제2이미지에 대해서 되돌리기 동작을 반복적으로 수행함으로써 메인 화면 1210에 표시된 제2이미지가 모두 숨김 처리되어 메인 화면 1210에 표시할 제2이미지가 없는 경우에, 데이터 처리 장치 100는 자동으로 서브 화면 1220에 표시된 썸네일에 대응하는 제1이미지를 메인 화면 1210으로 이동시킬 수 있다. 그리고 이후 되돌리기 동작을 지시하는 사용자 입력에 대응하는 제어 신호를 수신한 경우 데이터 처리 장치 100는 메인 화면 1210에 표시된 제1이미지에 대응하는 삼차원 데이터에 대해서 숨김 처리를 수행할 수 있다. Referring to 1300A of FIG. 13, the display device 100 repeatedly performs a revert operation on the second image corresponding to the second area displayed on the main screen 1210, so that all second images displayed on the main screen 1210 are hidden and appear on the main screen. If there is no second image to display on 1210, the data processing device 100 may automatically move the first image corresponding to the thumbnail displayed on the sub screen 1220 to the main screen 1210. Then, when a control signal corresponding to a user input instructing a revert operation is received, the data processing device 100 may perform hiding processing on the three-dimensional data corresponding to the first image displayed on the main screen 1210.

본 개시의 일 실시예에 따른 구강 이미지의 처리 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 또한, 본 개시의 실시예는, 구강 이미지의 처리 방법을 실행하는 적어도 하나의 인스트럭션을 포함하는 하나 이상의 프로그램이 기록된 컴퓨터로 읽을 수 있는 저장 매체가 될 수 있다. The method of processing oral images according to an embodiment of the present disclosure may be implemented in the form of program instructions that can be executed through various computer means and recorded on a computer-readable medium. Additionally, an embodiment of the present disclosure may be a computer-readable storage medium on which one or more programs including at least one instruction for executing a method of processing oral images are recorded.

상기 컴퓨터 판독 가능 저장 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 여기서, 컴퓨터 판독 가능 저장 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 구성된 하드웨어 장치가 포함될 수 있다. The computer-readable storage medium may include program instructions, data files, data structures, etc., singly or in combination. Here, examples of computer-readable storage media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and floptical disks. Magneto-optical media such as magneto-optical media, and hardware devices configured to store and perform program instructions such as ROM, RAM, flash memory, etc. may be included.

여기서, 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적 저장매체'는 저장 매체가 실재(tangible)하는 장치임을 의미할 수 있다. 또한, '비일시적 저장매체'는 데이터가 임시적으로 저장되는 버퍼를 포함할 수 있다.Here, the device-readable storage medium may be provided in the form of a non-transitory storage medium. Here, 'non-transitory storage medium' may mean that the storage medium is a tangible device. Additionally, the 'non-transitory storage medium' may include a buffer where data is temporarily stored.

일 실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 구강 이미지의 처리 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포될 수 있다. 또는, 어플리케이션 스토어(예: 플레이 스토어 등)를 통해 또는 두 개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 구체적으로, 개시된 실시예에 따른 컴퓨터 프로그램 제품은 개시된 실시예에 따른 구강 이미지의 처리 방법을 수행하기 위해 적어도 하나의 인스트럭션을 포함하는 프로그램이 기록된 저장 매체를 포함할 수 있다. According to one embodiment, the oral image processing method according to various embodiments disclosed in this document may be included and provided in a computer program product. The computer program product may be distributed on a machine-readable storage medium (e.g., compact disc read only memory (CD-ROM)). Alternatively, it may be distributed (e.g., downloaded or uploaded) online, through an application store (e.g., Play Store, etc.) or directly between two user devices (e.g., smartphones). Specifically, the computer program product according to the disclosed embodiment may include a storage medium on which a program including at least one instruction for performing the method of processing an oral image according to the disclosed embodiment is recorded.

이상에서 실시예들에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속한다.Although the embodiments have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements made by those skilled in the art using the basic concept of the present invention defined in the following claims are also included in the scope of the present invention. belongs to

일부 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.Some embodiments may also be implemented in the form of a recording medium containing instructions executable by a computer, such as program modules executed by a computer. Computer-readable media can be any available media that can be accessed by a computer and includes both volatile and non-volatile media, removable and non-removable media. Additionally, computer-readable media may include computer storage media. Computer storage media includes both volatile and non-volatile, removable and non-removable media implemented in any method or technology for storage of information such as computer-readable instructions, data structures, program modules or other data.

개시된 실시예들은 컴퓨터로 읽을 수 있는 저장 매체(computer-readable storage media)에 저장된 명령어를 포함하는 S/W 프로그램으로 구현될 수 있다. The disclosed embodiments may be implemented as S/W programs including instructions stored in computer-readable storage media.

컴퓨터는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 개시된 실시예에 따른 동작이 가능한 장치로서, 개시된 실시예들에 따른 전자 장치를 포함할 수 있다.A computer is a device capable of calling instructions stored from a storage medium and performing operations according to the disclosed embodiments according to the called instructions, and may include an electronic device according to the disclosed embodiments.

컴퓨터로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, ‘비일시적’은 저장 매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.Computer-readable storage media may be provided in the form of non-transitory storage media. Here, ‘non-transitory’ only means that the storage medium does not contain signals and is tangible, and does not distinguish whether the data is stored semi-permanently or temporarily in the storage medium.

또한, 개시된 실시예들에 따른 제어 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다.Additionally, the control method according to the disclosed embodiments may be included and provided in a computer program product. Computer program products are commodities and can be traded between sellers and buyers.

컴퓨터 프로그램 제품은 S/W 프로그램, S/W 프로그램이 저장된 컴퓨터로 읽을 수 있는 저장 매체를 포함할 수 있다. 예를 들어, 컴퓨터 프로그램 제품은 디바이스의 제조사 또는 전자 마켓(예, 구글 플레이 스토어, 앱 스토어)을 통해 전자적으로 배포되는 S/W 프로그램 형태의 상품(예, 다운로더블 앱)을 포함할 수 있다. 전자적 배포를 위하여, S/W 프로그램의 적어도 일부는 저장 매체에 저장되거나, 임시적으로 생성될 수 있다. 이 경우, 저장 매체는 제조사의 서버, 전자 마켓의 서버, 또는 SW 프로그램을 임시적으로 저장하는 중계 서버의 저장매체가 될 수 있다.A computer program product may include a S/W program and a computer-readable storage medium in which the S/W program is stored. For example, a computer program product may include a product in the form of a S/W program (e.g., a downloadable app) distributed electronically by the device manufacturer or through an electronic marketplace (e.g., Google Play Store, App Store). . For electronic distribution, at least part of the S/W program may be stored in a storage medium or temporarily created. In this case, the storage medium may be a manufacturer's server, an electronic market server, or a relay server's storage medium that temporarily stores the SW program.

컴퓨터 프로그램 제품은, 서버 및 디바이스로 구성되는 시스템에서, 서버의 저장매체 또는 디바이스의 저장매체를 포함할 수 있다. 또는, 서버 또는 디바이스와 통신 연결되는 제 3 장치(예, 스마트폰)가 존재하는 경우, 컴퓨터 프로그램 제품은 제 3 장치의 저장매체를 포함할 수 있다. 또는, 컴퓨터 프로그램 제품은 서버로부터 디바이스 또는 제 3 장치로 전송되거나, 제 3 장치로부터 디바이스로 전송되는 S/W 프로그램 자체를 포함할 수 있다.A computer program product, in a system comprised of a server and a device, may include a storage medium of a server or a storage medium of a device. Alternatively, if there is a third device (eg, a smartphone) in communication connection with the server or device, the computer program product may include a storage medium of the third device. Alternatively, the computer program product may include a S/W program itself that is transmitted from a server to a device or a third device, or from a third device to the device.

이 경우, 서버, 디바이스 및 제 3 장치 중 하나가 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 수행할 수 있다. 또는, 서버, 디바이스 및 제 3 장치 중 둘 이상이 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 분산하여 실시할 수 있다.In this case, one of the server, the device, and the third apparatus may execute the computer program product to perform the method according to the disclosed embodiments. Alternatively, two or more of a server, a device, and a third apparatus may execute the computer program product and perform the methods according to the disclosed embodiments in a distributed manner.

예를 들면, 서버(예로, 클라우드 서버 또는 인공 지능 서버 등)가 서버에 저장된 컴퓨터 프로그램 제품을 실행하여, 서버와 통신 연결된 디바이스가 개시된 실시예들에 따른 방법을 수행하도록 제어할 수 있다.For example, a server (eg, a cloud server or an artificial intelligence server, etc.) may execute a computer program product stored on the server and control a device connected to the server to perform the method according to the disclosed embodiments.

또 다른 예로, 제 3 장치가 컴퓨터 프로그램 제품을 실행하여, 제 3 장치와 통신 연결된 디바이스가 개시된 실시예에 따른 방법을 수행하도록 제어할 수 있다. 제 3 장치가 컴퓨터 프로그램 제품을 실행하는 경우, 제 3 장치는 서버로부터 컴퓨터 프로그램 제품을 다운로드하고, 다운로드 된 컴퓨터 프로그램 제품을 실행할 수 있다. 또는, 제 3 장치는 프리로드 된 상태로 제공된 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 수행할 수도 있다.As another example, a third device may execute a computer program product to control a device communicatively connected to the third device to perform the method according to the disclosed embodiment. When the third device executes the computer program product, the third device may download the computer program product from the server and execute the downloaded computer program product. Alternatively, the third device may perform the methods according to the disclosed embodiments by executing the computer program product provided in a preloaded state.

또한, 본 명세서에서, "부"는 프로세서 또는 회로와 같은 하드웨어 구성(hardware component), 및/또는 프로세서와 같은 하드웨어 구성에 의해 실행되는 소프트웨어 구성(software component)일 수 있다.Additionally, in this specification, a “unit” may be a hardware component such as a processor or circuit, and/or a software component executed by the hardware component such as a processor.

전술한 본 개시의 설명은 예시를 위한 것이며, 본 개시가 속하는 기술분야의 통상의 지식을 가진 자는 본 개시의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.The foregoing description of the present disclosure is for illustrative purposes, and those skilled in the art will understand that the present disclosure can be easily modified into other specific forms without changing its technical idea or essential features. will be. Therefore, the embodiments described above should be understood in all respects as illustrative and not restrictive. For example, each component described as single may be implemented in a distributed manner, and similarly, components described as distributed may also be implemented in a combined form.

본 개시의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 개시의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present disclosure is indicated by the claims described below rather than the detailed description above, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts should be construed as being included in the scope of the present disclosure. do.

Claims (20)

데이터 처리 장치에 있어서,
디스플레이,
통신 인터페이스,
하나 이상의 인스트럭션을 포함하는 메모리, 및
상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고,
상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써,
대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고,
상기 스캔 데이터를 구성하는 프레임들에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 표시하도록 상기 디스플레이를 제어하고,
상기 이미지를 표시하는 동안, 상기 스캐너의 하나 이상의 사용자 인터페이스를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 상기 스캐너로부터 수신하도록 상기 통신 인터페이스를 제어하고,
상기 제어 신호에 따라 상기 디스플레이에 표시된 이미지에 대응하는 삼차원 데이터를 구성하는 프레임들 중 하나 이상의 프레임들을 숨김 처리함으로써 상기 숨김 처리된 하나 이상의 프레임들을 제외한 프레임들에 기반하여 조정된 삼차원 데이터를 획득하거나, 또는 숨김 처리되었던 하나 이상의 프레임들을 복구 처리함으로써 상기 복구 처리된 하나 이상의 프레임들을 포함한 프레임들에 기반하여 조정된 삼차원 데이터를 획득하고,
상기 조정된 삼차원 데이터를 이용하여 이미지를 표시하도록 상기 디스플레이를 제어하는, 데이터 처리 장치.
In the data processing device,
display,
communication interface,
a memory containing one or more instructions, and
Comprising a processor executing the one or more instructions,
The processor executes the one or more instructions,
Controlling the communication interface to receive scan data of the object obtained by scanning the object from a scanner,
Controlling the display to display an image corresponding to three-dimensional data generated based on frames constituting the scan data,
While displaying the image, control the communication interface to receive control signals from the scanner generated in response to user input sensed through one or more user interfaces of the scanner,
Obtain three-dimensional data adjusted based on frames excluding the one or more hidden frames by hiding one or more frames among the frames constituting three-dimensional data corresponding to the image displayed on the display according to the control signal, or Or, by recovering and processing one or more frames that were hidden, three-dimensional data adjusted based on the frames including the one or more recovered frames are obtained,
A data processing device that controls the display to display an image using the adjusted three-dimensional data.
제1항에 있어서,
상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리하는, 데이터 처리 장치.
According to paragraph 1,
The processor executes the one or more instructions,
A data processing device that hides a predetermined number of the most recently input frames among the frames constituting the three-dimensional data as the control signal corresponds to an undo command.
제2항에 있어서,
상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 제어 신호가 되살리기 (redo) 명령에 대응됨에 따라, 가장 최근에 숨김 처리되었던 미리 지정된 개수의 프레임들을 복구 처리하는, 데이터 처리 장치.
According to paragraph 2,
The processor executes the one or more instructions,
A data processing device that recovers a predetermined number of frames that were most recently hidden as the control signal corresponds to a redo command.
제3항에 있어서,
상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 제어 신호가 락킹 (locking) 명령에 대응됨에 따라, 상기 숨김 처리나 상기 복구 처리가 더 이상 허용되지 않도록 현재 상태의 삼차원 데이터를 구성하는 프레임들에 기반하여 삼차원 데이터를 확정 처리하는, 데이터 처리 장치.
According to paragraph 3,
The processor executes the one or more instructions,
A data processing device that determines and processes three-dimensional data based on the frames constituting the three-dimensional data in the current state so that the hiding process or the recovery process is no longer allowed as the control signal corresponds to a locking command. .
제1항에 있어서,
상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 대상체의 제1영역에 대응하는 스캔 데이터에 기반하여 생성된 제1삼차원 데이터에 대응하는 제1이미지를 서브 화면에 표시하도록 상기 디스플레이를 제어하고,
상기 제1영역과 이격된 상기 대상체의 제2영역에 대응하는 스캔 데이터에 기반하여 생성된 제2삼차원 데이터에 대응하는 제2이미지를 메인 화면에 표시하도록 상기 디스플레이를 제어하고,
상기 스캐너로부터 수신된 제어 신호에 따라 상기 메인 화면에 표시된 상기 제2이미지에 대응하는 삼차원 데이터를 조정하는 기능을 수행하고,
상기 조정된 삼차원 데이터를 이용하여 제2이미지를 표시하도록 상기 디스플레이를 제어하는, 데이터 처리 장치.
According to paragraph 1,
The processor executes the one or more instructions,
Controlling the display to display a first image corresponding to first three-dimensional data generated based on scan data corresponding to a first area of the object on a sub screen,
Controlling the display to display a second image corresponding to second three-dimensional data generated based on scan data corresponding to a second area of the object spaced apart from the first area on the main screen,
Performs a function of adjusting three-dimensional data corresponding to the second image displayed on the main screen according to a control signal received from the scanner,
A data processing device that controls the display to display a second image using the adjusted three-dimensional data.
제5항에 있어서,
상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 서브 화면에 표시된 상기 제1이미지에 대응하는 삼차원 데이터에 대해서 데이터 조정 기능이 수행되지 않도록 하는 락킹 기능을 설정하는, 데이터 처리 장치.
According to clause 5,
The processor executes the one or more instructions,
A data processing device that sets a locking function to prevent a data adjustment function from being performed on three-dimensional data corresponding to the first image displayed on the sub screen.
제5항에 있어서,
상기 프로세서는 상기 하나 이상의 인스트럭션을 실행함으로써,
상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 제2삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리하는 동작에 의해 상기 제2삼차원 데이터가 모두 숨김 처리되면, 상기 서브 화면에 대응하는 상기 제1삼차원 데이터에 대응하는 제1이미지를 상기 메인 화면에 표시하도록 상기 디스플레이를 제어하는, 데이터 처리 장치.
According to clause 5,
The processor executes the one or more instructions,
As the control signal corresponds to an undo command, all of the second three-dimensional data is hidden by hiding the most recently input predetermined number of frames among the frames constituting the second three-dimensional data. When processed, the data processing device controls the display to display a first image corresponding to the first three-dimensional data corresponding to the sub screen on the main screen.
스캐너에 있어서,
스캔 동작을 수행하는 광학부,
하나 이상의 센서,
통신 인터페이스, 및
프로세서를 포함하고,
상기 프로세서는,
상기 광학부를 이용하여 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 데이터 처리 장치로 전송하도록 상기 통신 인터페이스를 제어하고,
상기 하나 이상의 센서를 통해서 감지된 사용자 입력을 획득하고,
상기 사용자 입력에 따라 상기 스캔 동작을 멈추도록 상기 광학부를 제어하고,
상기 사용자 입력에 대응하는 기능을 수행하거나 또는 상기 사용자 입력에 대응하는 기능을 수행하도록 제어하는 제어 신호를 상기 데이터 처리 장치로 전송하도록 상기 통신 인터페이스를 제어하며,
상기 제어 신호에 따라 상기 데이터 처리 장치로 하여금, 상기 데이터 처리 장치의 디스플레이에 표시된 이미지에 대응하는 삼차원 데이터를 구성하는 프레임들 중 하나 이상의 프레임들을 숨김 처리함으로써 상기 숨김 처리된 하나 이상의 프레임들을 제외한 프레임들에 기반하여 조정된 삼차원 데이터, 또는 숨김 처리되었던 하나 이상의 프레임들을 복구 처리함으로써 상기 복구 처리된 하나 이상의 프레임들을 포함한 프레임들에 기반하여 조정된 삼차원 데이터를 이용하여 이미지를 표시하도록 하는, 스캐너.
In the scanner,
an optical unit that performs a scanning operation;
one or more sensors,
a communication interface, and
Includes a processor,
The processor,
Controlling the communication interface to transmit scan data of the object obtained by scanning the object using the optical unit to a data processing device,
Obtaining user input detected through the one or more sensors,
Controlling the optical unit to stop the scanning operation according to the user input,
Controlling the communication interface to perform a function corresponding to the user input or transmit a control signal for controlling the data processing device to perform a function corresponding to the user input,
The control signal causes the data processing device to hide one or more frames among the frames constituting three-dimensional data corresponding to the image displayed on the display of the data processing device, thereby excluding the one or more frames that have been hidden. A scanner that displays an image using three-dimensional data adjusted based on or three-dimensional data adjusted based on frames including one or more frames that have been hidden by recovering and processing one or more frames that have been hidden.
제8항에 있어서,
상기 하나 이상의 센서의 각 센서는 복수의 기능 중 하나 이상의 기능에 대응되는, 스캐너.
According to clause 8,
A scanner, wherein each sensor of the one or more sensors corresponds to one or more functions of a plurality of functions.
제9항에 있어서,
상기 복수의 기능은,
데이터 조정 기능, 락킹 기능, 상기 광학부의 설정을 조정하는 기능 중 적어도 하나를 포함하는, 스캐너.
According to clause 9,
The plurality of functions are:
A scanner comprising at least one of a data adjustment function, a locking function, and a function for adjusting settings of the optical unit.
데이터 처리 장치의 동작 방법에 있어서,
대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 스캐너로부터 수신하는 동작,
상기 스캔 데이터를 구성하는 프레임들에 기반하여 생성된 삼차원 데이터에 대응하는 이미지를 표시하는 동작,
상기 이미지를 표시하는 동안, 상기 스캐너의 하나 이상의 사용자 인터페이스를 통해서 감지된 사용자 입력에 따라 생성된 제어 신호를 상기 스캐너로부터 수신하는 동작,
상기 제어 신호에 따라 디스플레이에 표시된 이미지에 대응하는 삼차원 데이터를 구성하는 프레임들 중 하나 이상의 프레임들을 숨김 처리함으로써 상기 숨김 처리된 하나 이상의 프레임들을 제외한 프레임들에 기반하여 조정된 삼차원 데이터를 획득하거나, 또는 숨김 처리되었던 하나 이상의 프레임들을 복구 처리함으로써 상기 복구 처리된 하나 이상의 프레임들을 포함한 프레임들에 기반하여 조정된 삼차원 데이터를 획득하는 동작, 및
상기 조정된 삼차원 데이터를 이용하여 이미지를 표시하는 동작을 포함하는, 데이터 처리 장치의 동작 방법.
In a method of operating a data processing device,
An operation of receiving scan data of the object obtained by scanning the object from a scanner,
An operation of displaying an image corresponding to three-dimensional data generated based on frames constituting the scan data,
Receiving, from the scanner, a control signal generated according to user input detected through one or more user interfaces of the scanner while displaying the image;
By hiding one or more frames among the frames constituting the three-dimensional data corresponding to the image displayed on the display according to the control signal, three-dimensional data adjusted based on the frames excluding the one or more hidden frames are obtained, or An operation of recovering and processing one or more frames that have been hidden to obtain adjusted three-dimensional data based on frames including the one or more recovered frames, and
A method of operating a data processing device, comprising displaying an image using the adjusted three-dimensional data.
제11항에 있어서,
상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리하는 동작을 더 포함하는, 데이터 처리 장치의 동작 방법.
According to clause 11,
As the control signal corresponds to an undo command, the method further includes hiding a predetermined number of the most recently input frames among the frames constituting the three-dimensional data.
제12항에 있어서,
상기 제어 신호가 되살리기 (redo) 명령에 대응됨에 따라, 가장 최근에 숨김 처리되었던 미리 지정된 개수의 프레임들을 복구 처리하는 동작을 더 포함하는, 데이터 처리 장치의 동작 방법.
According to clause 12,
A method of operating a data processing device further comprising recovering a predetermined number of frames that were most recently hidden as the control signal corresponds to a redo command.
제13항에 있어서,
상기 제어 신호가 락킹 (locking) 명령에 대응됨에 따라, 상기 숨김 처리나 상기 복구 처리가 더 이상 허용되지 않도록 현재 상태의 삼차원 데이터를 구성하는 프레임들에 기반하여 삼차원 데이터를 확정 처리하는 동작을 더 포함하는, 데이터 처리 장치의 동작 방법.
According to clause 13,
As the control signal corresponds to a locking command, the operation of confirming the three-dimensional data based on the frames constituting the three-dimensional data in the current state so that the hiding process or the recovery process is no longer allowed is further included. A method of operating a data processing device.
제11항에 있어서,
상기 대상체의 제1영역에 대응하는 스캔 데이터에 기반하여 생성된 제1삼차원 데이터에 대응하는 제1이미지를 서브 화면에 표시하는 동작,
상기 제1영역과 이격된 상기 대상체의 제2영역에 대응하는 스캔 데이터에 기반하여 생성된 제2삼차원 데이터에 대응하는 제2이미지를 메인 화면에 표시하는 동작,
상기 스캐너로부터 수신된 제어 신호에 따라 상기 메인 화면에 표시된 상기 제2이미지에 대응하는 삼차원 데이터를 조정하는 기능을 수행하는 동작, 및
상기 조정된 삼차원 데이터를 이용하여 제2이미지를 표시하는 동작을 더 포함하는, 데이터 처리 장치의 동작 방법.
According to clause 11,
An operation of displaying a first image corresponding to first three-dimensional data generated based on scan data corresponding to a first area of the object on a sub-screen;
An operation of displaying a second image corresponding to second three-dimensional data generated based on scan data corresponding to a second area of the object spaced apart from the first area on the main screen;
An operation of performing a function of adjusting three-dimensional data corresponding to the second image displayed on the main screen according to a control signal received from the scanner, and
A method of operating a data processing device, further comprising displaying a second image using the adjusted three-dimensional data.
제15항에 있어서,
상기 서브 화면에 표시된 상기 제1이미지에 대응하는 삼차원 데이터에 대해서 데이터 조정 기능이 수행되지 않도록 하는 락킹 기능을 설정하는 동작을 더 포함하는, 데이터 처리 장치의 동작 방법.
According to clause 15,
A method of operating a data processing device, further comprising setting a locking function to prevent a data adjustment function from being performed on three-dimensional data corresponding to the first image displayed on the sub-screen.
제15항에 있어서,
상기 제어 신호가 되돌리기 (undo) 명령에 대응됨에 따라, 상기 제2삼차원 데이터를 구성하는 프레임들 중 가장 최근에 입력된 미리 지정된 개수의 프레임들을 숨김 처리하는 동작에 의해 상기 제2삼차원 데이터가 모두 숨김 처리되면, 상기 서브 화면에 대응하는 상기 제1삼차원 데이터에 대응하는 제1이미지를 상기 메인 화면에 표시하는 동작을 더 포함하는, 데이터 처리 장치의 동작 방법.
According to clause 15,
As the control signal corresponds to an undo command, all of the second three-dimensional data is hidden by hiding the most recently input predetermined number of frames among the frames constituting the second three-dimensional data. When processed, a method of operating a data processing device further comprising displaying a first image corresponding to the first three-dimensional data corresponding to the sub screen on the main screen.
광학부 및 하나 이상의 센서를 포함하는 스캐너의 동작 방법에 있어서,
상기 광학부를 이용하여 대상체를 스캔함으로써 획득한 상기 대상체의 스캔 데이터를 데이터 처리 장치로 전송하는 동작,
상기 하나 이상의 센서를 통해서 감지된 사용자 입력을 획득하는 동작,
상기 사용자 입력에 따라 상기 스캔 동작을 멈추도록 상기 광학부를 제어하는 동작,
상기 사용자 입력에 대응하는 기능을 수행하거나 또는 상기 사용자 입력에 대응하는 기능을 수행하도록 제어하는 제어 신호를 상기 데이터 처리 장치로 전송하는 동작, 및
상기 제어 신호에 따라 상기 데이터 처리 장치로 하여금, 상기 데이터 처리 장치의 디스플레이에 표시된 이미지에 대응하는 삼차원 데이터를 구성하는 프레임들 중 하나 이상의 프레임들을 숨김 처리함으로써 상기 숨김 처리된 하나 이상의 프레임들을 제외한 프레임들에 기반하여 조정된 삼차원 데이터, 또는 숨김 처리되었던 하나 이상의 프레임들을 복구 처리함으로써 상기 복구 처리된 하나 이상의 프레임들을 포함한 프레임들에 기반하여 조정된 삼차원 데이터를 이용하여 이미지를 표시하도록 하는 동작을 포함하는, 스캐너의 동작 방법.
In a method of operating a scanner including an optical unit and one or more sensors,
An operation of transmitting scanned data of the object obtained by scanning the object using the optical unit to a data processing device;
An operation of acquiring user input detected through the one or more sensors,
Controlling the optical unit to stop the scanning operation according to the user input,
An operation of performing a function corresponding to the user input or transmitting a control signal for controlling the data processing device to perform a function corresponding to the user input, and
The control signal causes the data processing device to hide one or more frames among the frames constituting three-dimensional data corresponding to the image displayed on the display of the data processing device, thereby excluding the one or more frames that have been hidden. Comprising an operation of displaying an image using three-dimensional data adjusted based on or three-dimensional data adjusted based on frames including one or more frames that have been recovered by recovering and processing one or more frames that have been hidden, How the scanner works.
제18항에 있어서,
상기 하나 이상의 센서의 각 센서는 복수의 기능 중 하나 이상의 기능에 대응되는, 스캐너의 동작 방법.
According to clause 18,
A method of operating a scanner, wherein each sensor of the one or more sensors corresponds to one or more functions among a plurality of functions.
제19항에 있어서,
상기 복수의 기능은,
데이터 편집 기능, 락킹 기능, 상기 광학부의 설정을 조정하는 기능 중 적어도 하나를 포함하는, 스캐너의 동작 방법.





According to clause 19,
The plurality of functions are:
A method of operating a scanner, comprising at least one of a data editing function, a locking function, and a function for adjusting settings of the optical unit.





KR1020210131884A 2021-04-07 2021-10-05 A data processing apparatus, a scanner, and methods for operating the same KR102626891B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2022/004974 WO2022216056A1 (en) 2021-04-07 2022-04-06 Data processing device, scanner, and method for operating same
EP22784965.0A EP4321128A1 (en) 2021-04-07 2022-04-06 Data processing device, scanner, and method for operating same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210045438 2021-04-07
KR20210045438 2021-04-07

Publications (2)

Publication Number Publication Date
KR20220139217A KR20220139217A (en) 2022-10-14
KR102626891B1 true KR102626891B1 (en) 2024-01-19

Family

ID=83599679

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210131884A KR102626891B1 (en) 2021-04-07 2021-10-05 A data processing apparatus, a scanner, and methods for operating the same

Country Status (1)

Country Link
KR (1) KR102626891B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190011996A1 (en) 2015-03-06 2019-01-10 Align Technology, Inc. Intraoral scanner with touch sensitive input

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009094576A1 (en) * 2008-01-23 2009-07-30 Sensable Technologies, Inc. Haptically enabled dental modeling system
KR101699250B1 (en) * 2014-05-14 2017-01-24 주식회사바텍 Dental three-dimensional scanner
KR101977181B1 (en) * 2016-03-30 2019-05-10 주식회사바텍 Dental intraoral scanner system
KR20180126166A (en) * 2017-05-17 2018-11-27 주식회사바텍 Intra-Oral Scanner Having Display And Intra-Oral Scanner System Comprising The Same

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190011996A1 (en) 2015-03-06 2019-01-10 Align Technology, Inc. Intraoral scanner with touch sensitive input

Also Published As

Publication number Publication date
KR20220139217A (en) 2022-10-14

Similar Documents

Publication Publication Date Title
US9014507B2 (en) Automatic tracking matte system
US20160103935A1 (en) Tools for customized design of dental restorations
JP2012094111A (en) Image processing device, image processing method and program
US20230062973A1 (en) Image processing apparatus, image processing method, and storage medium
KR102626891B1 (en) A data processing apparatus, a scanner, and methods for operating the same
US20230386119A1 (en) Oral image processing device and oral image processing method
KR102582709B1 (en) A method for processing a three-dimensional intraoral model, and an apparatus for performing the same method
EP4321128A1 (en) Data processing device, scanner, and method for operating same
KR102666198B1 (en) A data processing apparatus for processing an intraoral model, and a method for operating the data processing apparatus
US20240129447A1 (en) Data processing device and data processing method
KR102645173B1 (en) An intraoral image processing apparatus, and an intraoral image processing method
JP2020074108A (en) Information processing system, control method thereof, and program
KR20230007933A (en) A data processing apparatus for processing an intraoral model, and a method for operating the data processing apparatus
JP2017084215A (en) Information processing system, control method thereof, and program
KR20220122486A (en) A data processing apparatus, a data processing method
KR102527955B1 (en) An image processing apparatus, and an image processing method
KR102605094B1 (en) A data processing apparatus, a data processing method
KR102472127B1 (en) An intraoral image processing apparatus and an intraoral image processing method
KR102626888B1 (en) An three-dimensional intraoral model processing apparatus and three-dimensional intraoral model processing method
KR102631922B1 (en) A method for processing a 3D intraoral model, and an apparatus for performing the same method
KR102488096B1 (en) An intraoral image processing apparatus and an intraoral image processing method
KR20230054301A (en) An intraoral image processing apparatus, and an intraoral image processing method
KR20230014628A (en) An image processing apparatus, and an image processing method
KR20230141611A (en) An intraoral image processing apparatus, and an intraoral image processing method
CN116887785A (en) Data processing apparatus and data processing method

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant