WO2020075796A1 - 歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置 - Google Patents

歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置 Download PDF

Info

Publication number
WO2020075796A1
WO2020075796A1 PCT/JP2019/039984 JP2019039984W WO2020075796A1 WO 2020075796 A1 WO2020075796 A1 WO 2020075796A1 JP 2019039984 W JP2019039984 W JP 2019039984W WO 2020075796 A1 WO2020075796 A1 WO 2020075796A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
information
processing procedure
product
dental treatment
Prior art date
Application number
PCT/JP2019/039984
Other languages
English (en)
French (fr)
Inventor
直文 村田
里志 山口
Original Assignee
クラレノリタケデンタル株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by クラレノリタケデンタル株式会社 filed Critical クラレノリタケデンタル株式会社
Priority to EP19870774.7A priority Critical patent/EP3865090A4/en
Priority to JP2020551218A priority patent/JPWO2020075796A1/ja
Priority to US17/284,294 priority patent/US20210338400A1/en
Publication of WO2020075796A1 publication Critical patent/WO2020075796A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C5/00—Filling or capping teeth
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C19/00—Dental auxiliary appliances
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00—Impression cups, i.e. impression trays; Impression methods
    • A61C9/004—Means or methods for taking digitized impressions
    • A61C9/0046—Data acquisition means or methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00—ICT specially adapted for the handling or processing of medical references
    • G16H70/20—ICT specially adapted for the handling or processing of medical references relating to practices or guidelines
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00—ICT specially adapted for the handling or processing of medical references
    • G16H70/40—ICT specially adapted for the handling or processing of medical references relating to drugs, e.g. their side effects or intended usage
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30036—Dental; Teeth

Definitions

  • the present disclosure relates to a dental treatment support device, a dental treatment support system, a dental treatment support method, a dental treatment support program, and a dental product sales promotion device.
  • filling restoration materials such as filling composite resin and abutment building composite resin, or crown restoration of metal alloy, ceramics, resin material, etc. are usually performed. Material is used.
  • an adhesive material such as a bond or cement is generally used together to bond the filling restoration material and the crown restoration material to the tooth structure.
  • a bond is applied to the damaged tooth structure, dried by air blow for a predetermined time, polymerized and cured by light irradiation for a predetermined time using a light irradiator, and then filled with a filling composite resin.
  • a dental hygienist stands by to hand over the dental material to be used and mix the medicines to support the dentist.
  • the usage method differs for each product, it is necessary for the dentist or the like to store it in advance. If the memory cannot be stored, it is possible to confirm the procedure from the instruction manual, the Internet, an application, etc., but it is troublesome to confirm each treatment, and smooth treatment and support may be difficult. Also, when a new product is introduced, the usage will change to a new one, and it will be necessary to remember it again. Therefore, many dentists are not willing to introduce new products.
  • Patent Document 1 a dental care support system using an image of the inside of the oral cavity taken by a camera has been developed (see, for example, Patent Document 1).
  • the treatment support system described in Patent Document 1 is worn by a dentist by superimposing images of nerves, blood vessels, implants, etc. acquired on the basis of CT images and the like of a patient to an actual image of the oral cavity taken by a camera. By displaying on the head-mounted display, the dentist's treatment is supported.
  • Patent Document 1 does not guide a dentist or the like to the use procedure of the product necessary for the treatment step, and the use procedure still has to rely on the memory of the dentist or the like.
  • the present disclosure has been made in view of the above circumstances, and it is possible to accurately guide a processing procedure corresponding to a treatment step without relying on human memory or the like, and more appropriately support dental treatment. It makes it possible.
  • a dental treatment support apparatus is provided with a display unit, an input unit to which input information regarding at least one of a use purpose and a use product is input, a plurality of product information and each use purpose of each product.
  • Storage section for storing processing procedure information, a product information acquisition section for acquiring the product information and the processing procedure information corresponding to the input information input from the input section from the storage section, and the processing procedure information
  • a display image control unit for displaying the predetermined processing procedure selected from the above on the display unit.
  • the processing procedure of the product is displayed on the display unit. Therefore, the processing procedure of the product can be confirmed. Therefore, the processing procedure corresponding to the treatment step can be accurately guided without relying on human memory or the like, and dental treatment can be more appropriately supported.
  • FIG. 1 is a schematic diagram showing a hardware configuration example of a dental treatment support device according to a first embodiment of the present disclosure. It is a functional block diagram of the dental treatment support apparatus shown in FIG. It is explanatory drawing for demonstrating an example of the flow of the display image on the display part of the dental treatment assistance apparatus shown in FIG. It is explanatory drawing for demonstrating an example of the flow of the display image on the display part of the dental treatment assistance apparatus shown in FIG. It is explanatory drawing for demonstrating an example of the flow of the display image on the display part of the dental treatment assistance apparatus shown in FIG. It is a flowchart which shows an example of operation
  • FIG. 1 is a schematic diagram showing a hardware configuration of a dental treatment support device 10 according to this embodiment.
  • the dental treatment support device 10 mainly includes an imaging unit 1, an information processing unit (control device) 2, an input unit 3, a display unit 4, and a sound output unit 5. Is configured.
  • the dental treatment support device 10 may include a captured image captured by the imaging unit 1, a printer as an output destination for printing the dental treatment support result, a communication device for communicating with the outside, and the like.
  • the image capturing unit 1 is a device that captures an image of the inside of the oral cavity including the treatment target such as the tooth of the patient.
  • the imaging unit 1 is not particularly limited, and for example, a microscope, a wearable camera, a CCD camera, a digital video camera fixed to an examination table, or the like is preferably used. At least one imaging unit 1 may be provided, but a plurality of the same imaging units may be provided, or a plurality of different types may be combined and provided. When a plurality of treatment targets are used, it is possible to detect the treatment target and the treatment step in more detail, display the treatment target in 3D, and the like by photographing the treatment target under various angles and imaging conditions.
  • the image pickup unit 1 and the information processing unit 2 are connected by wire such as a connection cable or by a wireless LAN such as Wi-Fi (registered trademark).
  • the image signal of the treatment target captured by the image capturing unit 1 is output to the information processing unit 2 in real time.
  • the captured image may be a still image or a moving image. In this embodiment, a moving image is captured and output to the information processing unit 2 in real time.
  • the hardware configuration of the information processing unit 2 includes, as shown in FIG. 1, a CPU 11, a ROM 12, a RAM 13, an input I / F (interface) 14, an output I / F 15, an external device I / F 16, a storage unit 17, and the like.
  • a CPU 11 a central processing unit
  • ROM 12 a read-only memory
  • RAM 13 a random access memory
  • I / F (interface) 14 an output I / F
  • an external device I / F 16 a storage unit 17, and the like.
  • storage unit 17 and the like.
  • the configuration is not limited to this.
  • the CPU 11 is a central processing unit and controls the operation of the dental treatment support apparatus 10 as a whole.
  • the ROM 12 is a read-only memory and stores a control program executed by the CPU 11, a dental treatment support program, and the like.
  • the RAM 13 is a write / read memory at any time and is used as a work area for the CPU 11. That is, the CPU 11 uses the RAM 13 as a work area, executes the dental treatment support program stored in the ROM 12, and operates the dental treatment support apparatus 10.
  • the storage unit 17 is composed of a recording medium such as a hard disk and a flash memory.
  • the input I / F 14 is an interface for connecting the input unit 3 and the CPU 11.
  • the output I / F 15 is an interface for connecting the display unit 4 and the sound output unit 5 to the CPU 11.
  • the external device I / F 16 is an interface for connecting the external device and the CPU 11, and in the present embodiment, the image pickup unit 1 and the CPU 11 are connected.
  • the storage unit 17 stores in advance, as various information necessary for dental treatment support processing, product information of various products, processing procedure (usage procedure) information for each application of the product, and the like. Further, the storage unit 17 stores the captured image of the treatment performed by the image capturing unit 1 and the support result in association with each other. Further, the calculation result of each unit may be temporarily stored.
  • the product information includes, for example, the product name, the name of the dental material contained in the product, the component of each dental material, the use that can be used, and the information on the instruments and devices used for each use. These are categorized by product and stored in the storage unit 17.
  • the storage unit 17 also stores, as the product information, a list of products that can be used for each purpose, a product introduction document, product introduction information including a URL of a product-related site, and the like.
  • the product may be a product made of one dental material or a kit product made of a plurality of dental materials.
  • the dental material include bond, cement, filling composite resin, abutment building composite resin, metal alloy, ceramics, resin cured product, gypsum material, investment agent, grinding and polishing agent, and the like. It is not limited.
  • “Clearfill (registered trademark) Universal Bond” manufactured by Kurarenori Takedental Co., Ltd. is a dental filling composite resin (hereinafter referred to as "CR"). It can be used for filling repair of cavity, sealing of cavity, treatment of exposed root surface, repair of crown restoration by CR, planting of post, and various other treatments and procedures.
  • instruments and devices to be used and dental materials (CR and the like) to be used separately may be different depending on the application. Therefore, in order to support dental treatment, it is also necessary to have information on such applications and appliances used in each application. Therefore, as the processing procedure information, the processing step for each application of each product, the instruments and equipment used in each processing step, the processing time in each processing step, and the like are stored in the storage unit 17.
  • Assistance results refer to the actual treatment process and treatment results using the dental treatment support device 10.
  • As a result of support for example, information on the used product, its use, information on the actual treatment process in the treatment step and the execution result of the treatment process (for example, when drying takes 5 seconds but actually takes 10 seconds to dry) , Its real time, etc.) are stored in the storage unit 17.
  • such an information processing unit 2 is composed of a desktop personal computer (PC).
  • the information processing unit 2 is not limited to the desktop PC, and the display unit 4 may be a notebook PC integrally provided. Further, the display unit 4 is not limited to a PC or the like, and may be configured of a mobile information device such as a smartphone, a mobile phone, or a tablet terminal integrally provided with the display unit 4.
  • the input unit 3 is a device for inputting characters, numbers, various instructions, etc., and is operated by a dentist, a dental hygienist, and the like. Examples of the input unit 3 include a keyboard, a mouse, a ten-key pad, and the like. If the display unit 4 is a touch panel display, the touch panel screen also functions as the input unit 3.
  • the input unit 3 accepts input of input information such as intended use (contents of treatment steps), used product (dental material), and the like by a dentist, dental hygienist, or the like.
  • the signal of the input information is output to the information processing unit 2.
  • the display unit 4 is a device on which an input screen of the intended use and the used product, an image taken by the imaging unit 1, and a dental material processing procedure are displayed. Suitable examples of the display unit 4 include a liquid crystal display and an organic EL display. Further, when a portable information device is used as the information processing unit 2, the display unit 4 is a touch panel display, but when a PC is used, it may be a touch panel display.
  • At least one display unit 4 may be provided, but a plurality of display units 4 may be provided.
  • a plurality of display units 4 may be provided.
  • treatment and support can be provided while the dentist and the dental hygienist visually recognize the display parts 4 arranged at their respective work positions in an easy-to-see position. It can be carried out.
  • a person other than a dentist or a dental hygienist can visually recognize the state of treatment according to the usage procedure, for example, in a class or It can be suitably used for public treatment, demonstration of product introduction, etc.
  • the display unit (display) of the head mounted display may be the display unit 4 of the present embodiment. If the dentist wears such a head-mounted display, the dentist can perform treatment while observing the inside of the oral cavity through the head-mounted display and checking the processing procedure displayed on the display unit 4. Further, by attaching a wearable camera as the image pickup unit 1 to the head mounted display, it is possible to acquire a captured image corresponding to the line of sight of a dentist or the like.
  • the sound output unit 5 is a device that outputs a notification sound for giving a predetermined notification to a dentist or a dental hygienist, and examples thereof include a speaker and a buzzer.
  • the notification sound output from the sound output unit 5 is not particularly limited, and may be a buzzer sound, an alarm sound or the like for notifying the drying time of the dental material, the start or end of the light irradiation time.
  • a sound or voice for counting time may be emitted, or a lapse of time may be notified by sound or voice.
  • the content of the processing step such as "Please apply bond" or "Please irradiate light” may be notified by voice.
  • the information processing unit 2 serves as a captured image acquisition unit 21, a captured image analysis unit 22, an input information acquisition unit 23, a product information acquisition unit 24, a processing procedure control unit 25, and a display image control unit 26. Function.
  • the captured image acquisition unit 21 converts the image signal input from the image capturing unit 1 in real time into a digital signal, and passes the captured image subjected to appropriate image processing to the captured image analysis unit 22 and the display image control unit 26.
  • the captured image acquisition unit 21 may control the image capturing unit 1 so as to magnify and capture the detected vicinity of the treatment target, or use the object tracking technique to control the image capturing unit 1 and detect it.
  • the treatment target may be tracked and photographed.
  • the image pickup unit 1 may automatically detect the treatment target by using the autofocus function, the object recognition function, or the like of the image pickup unit 1 to focus, magnify, or track the treatment target.
  • the captured image analysis unit 22 analyzes the captured image received from the captured image acquisition unit 21, and detects a treatment target such as a dental caries, a cavity, or a root canal. For example, object recognition processing such as feature amount extraction and pattern matching is executed to detect caries, cavities, etc., and these are treated.
  • the treatment target may be detected according to the purpose input by the input unit 3. For example, if the application is filling restoration or sealing of a cavity, the cavity is detected from the captured image and is treated. More simply, a tooth or the like designated by a mouse click or a touch operation on a touch panel by a dentist or the like on the captured image displayed on the display unit 4 may be detected as a treatment target.
  • the photographed image analysis unit 22 analyzes the photographed image, and specifies the treatment step that the dentist performs (is trying to perform) on the treatment target based on the analysis result and the input information.
  • the detected treatment target information and the recognized treatment step information are passed to the processing procedure control unit 25.
  • a learning unit having artificial intelligence (AI) is provided, and more detailed and advanced treatment support is provided based on the information analyzed by the captured image analysis unit 22 by the learning unit and the teacher data stored in advance.
  • the captured image analysis unit 22 identifies a treatment target by image analysis, and inputs the feature amount of the treatment target and input information to the learning unit.
  • the learning unit is a feature amount that represents caries, cavities, root canals, etc.
  • the captured image analysis unit 22 may present a more appropriate material to be used to the dentist or the like according to the treatment step based on the output from the learning unit.
  • data that associates treatment steps with instruments is used as teacher data, and is used by dentists based on the analysis results of captured images.
  • the learning unit may determine the existing equipment (brush, instrument, etc.) and the material (property, color, etc.) to be used to determine which treatment step of the treatment step is being executed.
  • the input information acquisition unit 23 acquires the input information regarding the intended use, the product used, etc. input from the input unit 3.
  • the product information acquisition unit 24 acquires the applicable product information and the processing procedure information corresponding to the usage purpose from the storage unit 17 based on the usage purpose and the used product information acquired by the input information acquisition unit 23.
  • the acquired product information and processing procedure information are passed to the processing procedure control unit 25.
  • the processing procedure control unit 25 selects an arbitrary processing procedure corresponding to the input information from the processing procedure information acquired by the product information acquisition unit 24.
  • the processing procedure control unit 25 selects the processing procedure corresponding to the treatment step analyzed by the captured image analysis unit 22 in addition to the input information.
  • the processing procedure control unit 25 controls the display image control unit 26 so as to display the selected processing procedure information on the display unit 4.
  • the processing procedure control unit 25 measures the processing time when the processing is started and sets the predetermined processing time. When it reaches, the sound output unit 5 is caused to output an alarm sound or the like.
  • the processing procedure control unit 25 stores the captured image and the support result in the storage unit 17 in association with each other.
  • the support result is, for example, product information such as the name of the product used, the intended use, the actual processing execution result of the processing procedure (for example, the actual drying time or light irradiation time, a processing different from the predetermined processing). And the like), etc.
  • the processing procedure control unit 25 controls the display image control unit 26 as necessary to display the product introduction information screen on the display unit 4.
  • the introduction information screen may be, for example, a screen in which a detailed description of use of the product in use is described, or a screen in which a description of use of another product having the same purpose as the product in use is described. Good. By visually recognizing these screens, dentists and dental hygienists can recognize the usage procedure of the product again, know other uses of the product, etc. You can know the information of.
  • a screen including the URL of the site where the information of these products is disclosed and the site where the movie of the usage example of the product is disclosed may be displayed. By clicking such a URL, the user is guided to the site, and the dentist or the like can know more detailed information and use examples of the product or can consider purchasing the product.
  • the display image control unit 26 displays an image to be displayed on the display surface 4a of the display unit 4 (see FIG. 3, etc.), for example, the intended use selection screen 41, the used product selection screen 42, and FIGS. 4A and 4B shown in FIG.
  • the support screen 43 and the like are generated and displayed.
  • the support screen 43 includes a captured image display area 43a for displaying a real-time captured image captured by the imaging unit 1, a material etc. display area 43b for displaying an image of a dental material or an instrument to be used, and processing according to a treatment step. It has a processing procedure display area 43c for displaying each step of the procedure, and the like. Further, the counter image 43d (see FIG. 4A) may be displayed in the processing procedure display area 43c while the processing time is being measured.
  • An example of the dental treatment support process (dental treatment support method, dental treatment support program) executed by the dental treatment support apparatus 10 having the above-described configuration is an explanatory diagram of the flow of the display images in FIGS. 3, 4A, and 4B. 5 will be described with reference to the flowchart of FIG.
  • the dental hygienist supports the treatment of the dentist while visually recognizing the image displayed on the display surface 4a of the display unit 4.
  • the dental treatment support program is started up to activate the dental treatment support device 10, and the imaging unit 1 starts photographing the inside of the oral cavity of the patient.
  • the display image control unit 26 displays the intended use selection screen 41 in which a list of intended uses is displayed on the display surface 4a of the display unit 4 as shown in the upper diagram of FIG. 3 (step S1).
  • the dental hygienist or the like can select the intended use by clicking the mouse or touching the touch panel on the intended use of the intended use selection screen 41.
  • the input information acquisition unit 23 acquires the information on the selected intended use (step S2). Here, it is assumed that “filling repair” is selected.
  • the product information obtaining unit 24 obtains product information (here, a list of names, etc.) corresponding to the intended use from the storage unit 17 (step S3). Then, the display image control unit 26 displays the used product selection screen 42 on which a list of used products is displayed, as shown in the center diagram of FIG. 3 (step S4).
  • the input information acquisition unit 23 acquires information on the used product selected by the dental hygienist or the like from the used product selection screen 42 (step S5). Here, it is assumed that the product A is selected.
  • the intended use is selected first, and then the product is selected.
  • the present invention is not limited to this structure, and the product is first selected and displayed according to the product.
  • the configuration may be such that the intended use is selected from among the listed uses.
  • only the intended use may be input, and the product may be automatically selected according to the intended use, or only the used product may be selected, and the product may be selected based on the treatment step identified by the analysis of the captured image.
  • the intended use of the product used may be specified.
  • the product information acquisition unit 24 When the intended use is selected, the product information acquisition unit 24 then acquires the product information corresponding to the acquired used product from the storage unit 17. More specifically, the product information acquisition unit 24 acquires, from the storage unit 17, processing procedure information including information on the processing procedure of the product according to the intended use, necessary dental materials, instruments, etc. (above, step S6). ).
  • the captured image (moving image) captured by the image capturing unit 1 is acquired by the captured image acquisition unit 21 and analyzed by the captured image analysis unit 22 to detect the treatment target.
  • the picked-up image analysis unit 22 controls the image pickup unit 1 so as to magnify and photograph the treatment target, or to track and photograph the treatment target (above, step S7).
  • the captured image captured by the image capturing unit 1 is displayed on the display unit 4 in real time by the display image control unit 26. More specifically, the display image control unit 26 displays the acquired captured image in the captured image display area 43a as shown in the lower diagram of FIG. 3, and displays the image of the dental material or instrument to be used in the material etc. display area.
  • the support screen 43 displayed on the display screen 43b and displaying the image of the processing procedure in the processing procedure display area 43c is displayed on the display surface 4a of the display unit 4 (step S8).
  • An image in the vicinity of the treatment target may be displayed in the captured image display area 43a, or an enlarged image of the treatment target or the like may be displayed. Further, when images are taken by a plurality of image pickup units 1, one or a plurality of picked-up images may be appropriately selected and displayed as necessary.
  • the dental hygienist can confirm the treatment steps being performed by the dentist.
  • the material display area 43b necessary dental materials and instruments can be confirmed.
  • the processing procedure display area 43c it is possible to confirm a specific step of the processing procedure. Therefore, the dental hygienist can more appropriately and smoothly assist the treatment such as preparation of appliances, preparation and preparation of dental materials.
  • the captured image analysis unit 22 analyzes the captured image to detect a specific processing step of the treatment step by the dentist, and the processing procedure control unit 25 determines the dental material and the instrument according to the detected treatment step. Select a process.
  • the display image control unit 26 displays the selected dental material and instrument in the material etc. display area 43b, and displays the details of the processing procedure in the processing procedure display area 43c (above, step S9).
  • the sound output unit 5 may output the content of the step of the processing procedure, for example, a message such as “Apply the bond to the cavity” by voice.
  • the photographed image analysis unit 22 analyzes the photographed image and determines whether or not the process is started (step S10). While the process is not started (NO in step S10), the program waits until it is started, and when it is determined that the process is started (YES in step S10), the program proceeds to step S11. In the next step S11, the processing procedure control unit 25 counts the processing time if it is necessary to measure the processing time. At this time, the display image control unit 26 displays the counter image 43d in the processing procedure display area 43c. When the processing time is reached, the processing procedure control unit 25 controls the sound output unit 5 to output an alarm sound, an alarm message, etc., and notifies the alarm (step S12). By this alarm notification, not only the dental hygienist but also the dentist can more clearly know that the drying time has been reached.
  • the processing procedure control unit 25 may store the actual processing time. For example, it is conceivable that the prescribed treatment time is insufficient for drying and curing, and the treatment time is longer than the prescribed time at the judgment of the dentist. In this case, by collecting and examining data of the actual processing time, it can be used as a reference for changing the processing procedure to a more suitable one.
  • step S13 it is determined whether or not there is a next process step, and if there is a process step (YES in step S13), the process returns to step S9 and the steps S9 to S12 are repeated.
  • step S14 it is determined whether or not the treatment is completed. For example, when a dental hygienist or the like inputs an end instruction from the input unit 3, it is determined that the treatment has ended (YES in step S14), and the process proceeds to step S15.
  • step S14 if there is an instruction to continue from the input unit 3 or a return instruction to the intended use selection screen 41, it is determined to continue the treatment (NO in step S14), and the process returns to step S1 to The processing of steps S1 to S13 is repeated.
  • step S15 in response to the completion of the treatment, the processing procedure control unit 25 associates the captured image captured by the imaging unit 1 with the support result such as the used product, the intended use, and the actual processing step, and stores them in the storage unit 17.
  • the support result such as the used product, the intended use, and the actual processing step
  • step S16 the display image control unit 26 causes the display unit 4 to display the product introduction information.
  • information that introduces the product or leads to the purchase site may be displayed, or information that introduces another use of the product used this time may be displayed.
  • an introduction screen of another product used for the same purpose is displayed. Good.
  • product advertisement information may be displayed in a predetermined area of the display surface 4a.
  • FIG. 4A A specific example of the flow of the support screen 43 displayed on the display unit 4 will be described with reference to FIGS. 4A and 4B.
  • the bond application step is specified as a specific treatment step of the treatment step
  • images of the bond material and the applicator are displayed in the material etc. display area 43b, and the treatment procedure display area 43c is displayed as the treatment step.
  • the state where "bond application" is displayed is shown.
  • the photographed image analysis unit 22 detects the application of the bond by detecting the applicator or the liquid level of the bond in the photographed image. In response to this detection, for the next drying process, the display image control unit 26 displays the air nozzle, the processing step (air blow), and the processing time (5 seconds) on the support screen 43 as shown in the central figure of FIG. 4A. Or more) is displayed.
  • the processing procedure control unit 25 starts counting the processing time, and the display image control unit 26 counters as shown in the central diagram of FIG. 4A.
  • the image 43d is displayed.
  • the processing procedure control unit 25 outputs an alarm sound from the sound output unit 5.
  • the photographed image analysis unit 22 detects the end of the drying process, it proceeds to support the light irradiation process.
  • the display image control unit 26 displays the light irradiation device, the processing step (light irradiation step), and the processing time (10 seconds) on the support screen 43.
  • the processing procedure control unit 25 starts counting the processing time and displaying the counter image 43d.
  • the processing procedure control unit 25 causes the sound output unit 5 to output an alarm sound.
  • the upper part of FIG. 4B is a support screen 43 in the filling process of the photopolymerization type dental filling composite resin which is performed following the application of the bond.
  • a support screen 43 On the support screen 43, an image of the composite resin material to be used and a processing step (filling with the photopolymerizable composite resin) are displayed.
  • the display image control unit 26 causes the support screen 43 to display a light irradiator, a processing step (light irradiation step), and a processing time (Y seconds). Is displayed. Also in this case, the processing procedure control unit 25 counts the processing time and outputs an alarm sound. Subsequently, a support screen 43 such as a polishing process may be displayed.
  • the dental treatment support device 10 of the present embodiment is used for assisting the dental hygienist, but the present invention is not limited to such use.
  • the dentist may use the dentist himself / herself, and when the dental hygienist is absent, the dentist can perform the treatment while confirming the treatment process and the treatment time by himself / herself.
  • the captured image analysis unit 22 automatically displays the support screen 43 corresponding to each processing step of the treatment step and counts the processing time based on the treatment step detected by the image analysis.
  • the dental material to be used, the instrument, and the processing procedure can be grasped at a glance.
  • Assistance work can be performed.
  • a dentist or the like can perform treatment such as medical treatment while checking the display surface 4a.
  • the captured image analysis unit 22 does not have to be provided, and the dental treatment support device 10 can be made faster with a simpler configuration.
  • the procedure information may be acquired, and the real-time captured image and the acquired processing step may be displayed side by side on the display unit 4.
  • the dentist or the like can perform treatment or treatment assistance while confirming the processing steps.
  • the first processing step of the processing procedure information may be displayed on the display unit 4 side by side with the captured image (for example, the upper diagram of FIG. 4A), and the dentist or the like confirms the captured image and the processing step. While being able to provide treatment and treatment assistance.
  • the processing step is finished, for example, by clicking the “Next” button, the next processing step is changed to the screen displayed alongside the captured image, thereby performing the dental treatment.
  • Support can be provided more appropriately.
  • the captured image analysis unit 22 does not necessarily have to be provided.
  • a dental hygienist confirms the bond application by the dentist on the captured image of the display unit 4, and displays it on the processing procedure display area 43c of the support screen 43 in the lower diagram of FIG. Click "Apply bond" or touch to select. By this selection operation, the drying time may be counted and an alarm sound may be notified.
  • a dental hygienist or the like sequentially selects each processing step in the processing procedure display area 43c by clicking or the like in accordance with each step of the treatment step, so that the support screen 43 of either FIG. 4A or FIG. 4B is displayed. It may be configured as follows.
  • the image capturing unit 1 that captures an image of the inside of the oral cavity of the treatment target including the treatment target is provided, and the display image control unit 26 includes the predetermined processing procedure and imaging selected from the processing procedure information.
  • the configuration is such that captured images captured by the unit 1 are displayed side by side on the display unit 4.
  • a dental hygienist or the like can clearly confirm the progress of the treatment step by the treatment target or the dentist. Further, while visually confirming the photographed image, the assisting work such as preparation and delivery of dental materials and instruments can be performed more accurately and smoothly according to the processing procedure displayed on the display unit 4.
  • a dentist or the like can perform treatment or the like while visually recognizing the captured image of the display unit 4 and the processing procedure. Therefore, it is possible to accurately guide the processing procedure corresponding to the intended use, the used product, or the treatment step without relying on human memory or the like. As a result, it is possible to provide the dental treatment support device 10, the dental treatment support method, and the dental treatment support program that can more appropriately support the dental treatment.
  • a captured image analysis unit 22 that detects a treatment target in a captured image and identifies a treatment step to be performed on the treatment target, and a processing procedure corresponding to the treatment step from the processing procedure information. It further includes a processing procedure control unit 25 for selecting.
  • the processing procedure (usage procedure) corresponding to the progress state of the treatment step can be displayed on the display unit 4 together with the captured image. Therefore, it is not necessary for a dentist or the like to confirm the treatment step, and it is possible to display a more appropriate processing procedure corresponding to the actual progress state of the treatment step and more appropriately support the dental treatment.
  • the processing procedure control unit 25 is configured to count the processing time when a predetermined step of the processing procedure is executed and to notify an alarm when the processing time is reached. can do. With this configuration, not only the dental hygienist but also the dentist or the like can know more clearly that the processing time has elapsed, and the support effect can be further improved.
  • the processing procedure control unit 25 can be configured to notify the processing procedure by voice. With this configuration, not only the dental hygienist but also the dentist can know the processing procedure by voice, and the support effect can be further improved.
  • the processing procedure control unit 25 can be configured to store the support result including the input information, the product information, the processing procedure, and the execution result of the processing procedure in the storage unit 17.
  • the dentist or the like can confirm the treatment state and utilize it for future treatment by confirming the support result after the treatment is completed.
  • the processing procedure control unit 25 is configured to display, on the display unit 4, the introduction information of the used product or the introduction information of the product corresponding to the processing procedure based on the support result.
  • the dentist or the like can know the application of the product in more detail.
  • information on other products suitable for the application can be known, the resistance to new products can be eliminated, and new products can be actively introduced. Further, it also leads to the sales promotion of the in-house product for the product distributor side. Therefore, it is possible to provide the dental treatment support device 10 that can contribute to the active introduction and sales promotion of the product.
  • the dental treatment support device 10 may be configured to include a learning unit having an artificial intelligence (AI) function.
  • AI artificial intelligence
  • the dental treatment support device 10 may be configured to include a learning unit having an artificial intelligence (AI) function.
  • AI artificial intelligence
  • a dental treatment support apparatus 10A according to the second embodiment mainly includes a head mounted display 6 and an information processing unit (control device) 2 including a PC.
  • the information processing unit 2 includes an input unit 3, a display unit 4, and the like.
  • the configuration of the information processing unit 2 is the same as that of the first embodiment, and thus detailed description thereof will be omitted.
  • the head mounted display 6 includes a control unit 6a, a display unit 4A and the like.
  • the control unit 6a includes a CPU, a ROM, a RAM, a storage unit and the like, and controls the operation of the entire head mounted display 6.
  • the control unit 6a communicates with the information processing unit 2 by wire or wirelessly, and displays information for dental treatment support on the display unit 4A based on a control signal from the information processing unit 2.
  • the display unit 4A is transparent so that a treatment target can be visually recognized while displaying a processing procedure as information for supporting dental treatment.
  • An organic EL or the like is preferably used as the display unit 4A.
  • the display unit 4A can display information on the entire surface, in the present embodiment, a processing procedure display area for displaying a processing procedure is displayed on the upper right of the display surface 4a of the display unit 4A so as not to hinder the visual recognition of the treatment target. 43c is provided.
  • the position of the processing procedure display area 43c is not limited to the upper right of the display section 4A, but may be provided at an appropriate position according to the processing procedure, the purpose of treatment, and the like.
  • the head-mounted display 6 is not particularly limited, and may be provided with a display unit 4A capable of displaying information on dental treatment support, as long as the treatment target can be visually confirmed through the display unit 4A.
  • the form is not particularly limited, and any suitable form such as a goggle type, a helmet type, and an eyeglass type can be used.
  • the head mounted display is limited to the one having the display portions 4A and 4B which are transparent so that the treatment target can be visually recognized while displaying the processing procedure as in the second embodiment and the third embodiment described later. None.
  • a small display unit such as a liquid crystal display is attached to a fixture to the head or the like or a tip of an arm extending from the information processing unit fixed to the head or the like.
  • the configuration may be such that the display unit is arranged within the field of view of the wearer. Accordingly, the wearer can visually recognize the processing procedure and the like displayed on the display unit, and can further visually recognize the treatment target by changing the viewpoint.
  • the dental treatment support apparatus 10A of the second embodiment having the above-described configuration
  • a dentist or the like wears the head mounted display 6 on the head, and the treatment target is passed through the transparent display unit 4A. Visually check the teeth.
  • the information processing unit 2 acquires the product information and the processing procedure from the storage unit 17 based on these inputs, and the head A control signal for displaying the processing procedure is transmitted to the control unit 6a of the mount display 6.
  • the control unit 6a displays the processing procedure on the display unit 4A based on this control signal.
  • the processing procedure may be transmitted from the information processing unit 2, or an image or the like may be stored in the storage unit of the head mounted display 6 in advance and control may be performed based on a control signal from the information processing unit 2.
  • An image or the like corresponding to the unit 6a may be displayed on the display unit 4A.
  • the dentist can perform the treatment while visually confirming the processing procedure of the display unit 4A and the treatment target, and checking the processing procedure displayed on the display unit 4A.
  • the dental hygienist or the like can also confirm the processing procedure by displaying the processing procedure on the display unit 4 of the information processing unit 2.
  • the head mount display 6 may be worn by a dental hygienist or the like, and it is possible to assist the dentist while visually checking the treatment target and checking the processing procedure.
  • the head mounted display 6B includes an information processing unit 2B instead of the control unit 6a, and further includes an imaging unit 1B. It has the same basic configuration as the dental treatment support apparatus 10A according to the embodiment. Therefore, the same components as those in the second embodiment will be denoted by the same reference numerals as those in the second embodiment, and detailed description thereof will be omitted.
  • the information processing unit 2B included in the head mounted display 6B will be referred to as a “mobile information processing unit 2B” below.
  • the dental treatment support apparatus 10B is mainly configured to include a head mounted display 6B.
  • the head mounted display 6B mainly includes an image pickup unit 1B, a mobile information processing unit 2B, an input unit 3B, a display unit 4B, and a sound output unit 5B.
  • the image pickup unit 1B is installed on a side portion or an upper portion of the display unit 4B at a position where it is possible to take an image of the inside of the oral cavity from the wearer's eyes.
  • a wearable camera or the like similar to that of the first embodiment is preferably used.
  • This image capturing unit 1B a captured image corresponding to the line of sight of a dentist or the like can be acquired.
  • the photographed image taken is transmitted to, for example, the information processing unit 2'described later and displayed on the display unit 4'of the information processing unit 2'or the display unit 4B of the head mounted display 6B worn by a dental hygienist or the like. . This allows the dental hygienist or the like to confirm the treatment steps being performed by the dentist from the dentist's perspective.
  • the mobile information processing unit 2B is fixed to the main body of the head mounted display 6 (in the present embodiment, the temple portion of the spectacles type head mounted display 6B).
  • the mobile information processing unit 2B may be a detachable mobile information processing unit 2B that can be stored in a pocket of the wearer, and may be connected to the main unit by wire or wirelessly.
  • the mobile information processing unit 2B is a small-sized information processing device, and is configured to include a CPU such as a microprocessor and a storage unit 17B such as a RAM, a ROM, and a storage medium. Further, the mobile information processing unit 2B, like the information processing unit 2 of the first embodiment, the captured image acquisition unit 21, the captured image analysis unit 22, the input information acquisition unit 23, the product information acquisition unit 24, the processing procedure control unit. 25 and the display image control unit 26 (see FIG. 2).
  • a CPU such as a microprocessor
  • a storage unit 17B such as a RAM, a ROM, and a storage medium.
  • the mobile information processing unit 2B like the information processing unit 2 of the first embodiment, the captured image acquisition unit 21, the captured image analysis unit 22, the input information acquisition unit 23, the product information acquisition unit 24, the processing procedure control unit. 25 and the display image control unit 26 (see FIG. 2).
  • the head mounted display 6B is an information processing unit 2'comprising a PC including an input unit 3'such as a keyboard, a mouse and a numeric keypad, a display unit 4 ', and / or a mouse that can be operated by an operator's hands and feet.
  • an input unit 3' such as a keyboard, a mouse and a numeric keypad
  • a display unit 4 ' and / or a mouse that can be operated by an operator's hands and feet.
  • Is connected to the input unit 3 ′′ consisting of The input unit 3'of the information processing unit 2'and the input unit 3 '' composed of a mouse or the like function as the input unit 3B of the present embodiment. Therefore, the wearer or the like can select the intended use or the like by clicking the input unit 3B on the various selection screens displayed on the display unit 4B.
  • the input signal by this selection operation is output to the information processing unit 2B.
  • the storage unit 17B stores in advance information necessary for medical treatment support such as product information of various products and processing procedure (usage procedure) information for each application of the product. These pieces of information can be transferred from the information processing section 2'to the storage section 17B by operating the input section 3B (copying, uploading operation, etc.). Further, in the storage unit 17B, a captured image obtained by capturing the state of the treatment by the image capturing unit 1B, the support result, and the like may be stored in association with each other. This information can be transferred from the storage unit 17B to the information processing unit 2'by operating the input unit 3B (copying, downloading operation, etc.).
  • the display unit 4B is transparent so that the treatment target can be visually recognized while displaying the processing procedure, and like the display unit 4A of the second embodiment, an organic EL or the like is preferably used.
  • a processing procedure display area 43c is provided on the display surface 4a of the display unit 4B.
  • the sound output unit 5B is for giving a predetermined notification to the wearer.
  • the earphone-type sound output unit 5B that can be easily worn on the ear of the wearer is used, but the present invention is not limited to this, and a speaker or any other suitable device can be used.
  • the same operational effects as those of the first and second embodiments can be obtained. That is, the dentist wearing the head mounted display 6B can perform the treatment while visually recognizing the treatment target through the display surface 4a and checking the processing procedure displayed on the display unit 4A. Further, a dental hygienist or the like may wear the head mounted display 6B, and the dentist can assist while visually recognizing the treatment target and checking the processing procedure.
  • a dental hygienist or the like can assist while confirming the treatment target, the treatment steps, and the processing procedure from the same viewpoint as the dentist.
  • the small mobile information processing unit 2B can be attached to the head mounted display 6B or stored in a pocket or the like, a dental treatment support device 10B that is small and lightweight and excellent in portability is provided. it can.
  • a head mount display 6B that can be worn on the head of a dentist or the like and an input unit 3 ′ that can be operated by a foot, the dentist does not need to use his or her hands for operations, and both hands can be used. Can be freely treated and assisted.
  • the dental treatment support apparatus 10B further includes a sound input unit 3B ′ such as a microphone as shown by a broken line in FIG. 5B as an input unit, and the information processing unit 2B has voice analysis software (voice analysis). Part) etc. may be installed.
  • voice analysis software voice analysis software
  • the voice analysis software analyzes the voice
  • the information processing unit 2B performs each process according to the analysis result. To execute. Therefore, it is not necessary to use the limbs for the operation, and the dentist or the like can perform the treatment and the assist more freely and easily.
  • a dental treatment support system 100 is a server managed by a dental treatment support device 10 installed on the client side of a dental clinic or the like, and a provider or the like that provides a dental treatment support service. 30 and.
  • the dental treatment support device 10 and the server 30 are connected via a communication network N such as the Internet.
  • At least one dental treatment support device 10 may be provided, and it is more preferable that a plurality of dental treatment support devices 10 be provided, and more support results of various cases can be collected.
  • each dental treatment support device 10 is installed in each of a plurality of dental clinics or the like.
  • the dental treatment support devices 10A and 10B as in the second and third embodiments may be provided in any dental clinic or the like.
  • the dental treatment support apparatus 10 of the fourth exemplary embodiment has the same basic configuration as the dental treatment support apparatus 10 of the first exemplary embodiment, except that the functions of the respective units and the information stored in the storage unit 17 are partly different. ing. Therefore, the same components as those of the dental treatment support device 10 of the first embodiment are denoted by the same reference numerals as those of the first embodiment, and detailed description thereof will be omitted.
  • the server 30 determines the treatment step by analyzing the captured image, the processing procedure to display, the selection of product information, and the like.
  • the dental treatment support apparatus 10 of the fourth embodiment transmits the captured image and the input information to the server 30 via the communication network N, receives the treatment step, the processing procedure, the product information, etc. from the server 30, and based on these. Support dental treatment. Details of the function of each unit will be described together with the description of the operation using the flowchart of FIG. 7 described later.
  • the server 30 is composed of a server PC including a CPU, a RAM, a ROM, a storage medium, etc., but a general-purpose large computer (mainframe) or the like can also be used.
  • the server PC may use a cloud computing service, or may be a data center or a company's own server PC.
  • the server 30 mainly includes a learning unit 31 and a database 32, but in addition to this, it has a general configuration and functions as the server 30, such as a communication unit and an image display unit.
  • the database 32 stores product information, processing procedure information, and the like, and further stores various information used for object recognition and the like.
  • the database 32 also stores captured images, support results, etc. received from each dental treatment support apparatus 10. Further, the product information and the processing procedure stored in the database 32 are sequentially updated (upgraded) by rewriting by the learning unit 31 or by providing new information from the product distributor.
  • the updated information may be transmitted to each dental treatment support device 10 at a predetermined timing and reflected in the storage unit 17.
  • the learning unit 31 has an artificial intelligence function. For example, characteristic quantities representing caries, cavities, root canals, etc. in various states that require treatment, and actual treatment steps for caries, cavities, root canals, etc. in these various states, as well as processing steps and materials used.
  • the data associated with is used as teacher data, and a treatment step is output using a machine learning algorithm based on the input feature amount of the captured image, and further, a suitable processing step and material to be used are output. Therefore, more advanced analysis and judgment can be performed.
  • the learning unit 31 acquires product information and processing procedure information from the database 32 based on the input information received from each dental treatment support apparatus 10, and transmits the product information and processing procedure information to the dental treatment support apparatus 10.
  • the learning unit 31 analyzes the captured image transmitted from each dental treatment support apparatus 10 by using the object recognition technology, identifies the treatment step, and transmits the treatment step to the dental treatment support apparatus 10. Furthermore, the execution status of each processing step of the dental step (for example, dental material is applied, air is sprayed, light is irradiated, etc.) is discriminated, and display information or voice corresponding to the execution status is determined. It may have a function of confirming information and the like and transmitting the information to the dental treatment support device 10.
  • the learning unit 31 stores the product information of the used product, the processing procedure information, the support result, etc. in the database 32. Further, the learning unit 31 acquires product introduction information from the database 32 based on the support result and transmits it to the dental treatment support apparatus 10.
  • the learning unit 31 can also be configured to analyze the accumulated test results, derive a more suitable application or processing procedure, and reflect the result in the processing procedure or the like of the database 32.
  • step S20 When the dental treatment support program is started in the dental treatment support device 10, communication with the server 30 is started, and when the product information or the processing procedure information in the database 32 is updated, the updated information is updated in the server 30. And the storage unit 17 is updated (step S20).
  • step S21 the display image control unit 26 displays the intended use selection screen 41 (see FIG. 3) on the display unit 4.
  • step S22 the input information acquisition unit 23 acquires information on the selected intended use.
  • step S23 the product information acquisition unit 24 acquires a list of product names from the storage unit 17 according to the intended use, and in step S24, the display image control unit 26 displays the used product selection screen 42 on the display unit 4. (See Figure 3).
  • step S25 the input information acquisition unit 23 acquires information on the product used.
  • step S26 the information processing unit 2 transmits the captured image acquired by the captured image acquisition unit 21 and the input information including the acquired usage application information and the used product to the server 30.
  • step S27 the learning unit 31 of the server 30 identifies the treatment step by analyzing the received captured image while referring to the information on the intended use and the input information on the product used. Since the learning unit 31 has the artificial intelligence function, more accurate analysis is possible.
  • step S28 the learning unit 31 performs, based on the treatment step and the input information, a process including, from the database 32, a processing procedure corresponding to the treatment step and information such as dental materials and instruments used in each step of the processing procedure. Get procedure information.
  • step S29 the server 30 transmits the acquired processing procedure information to the dental treatment support apparatus 10.
  • the display image control unit 26 displays the real-time captured image in the captured image display area 43a and the image of the dental material and the appliance corresponding to the treatment step in the material etc. display area.
  • the support screen 43 in which the processing procedure and individual processing steps corresponding to the treatment step are displayed in the processing procedure display area 43c is generated in 43b and displayed on the display surface 4a of the display unit 4.
  • step S31 the captured image analysis unit 22 analyzes the captured image and determines whether or not the process has started. This determination may be performed by the learning unit 31 of the server 30, which enables more accurate determination. While the process is not started (determination in step S31 is NO), the program waits until it is started, and when it is determined that the process is started (determination in step S31 is YES), the processing procedure control unit 25 If it is necessary to measure the time, the process proceeds to step S32, the processing time is counted and the counter image 43d is displayed, and when the time is reached, an alarm is notified in step S33.
  • the processing procedure control unit 25 stores the actual processing time or procedure, so that This can be information useful for the learning unit 31 of the server 30 to analyze the support result.
  • step S34 the processing procedure control unit 25 determines whether or not there is a next processing step. If there is a processing step (YES), the process returns to step S26, and the captured image is transmitted to the server 30. Analysis of the photographed image in S27, acquisition of processing procedure information in step S28, transmission of processing procedure information to the dental treatment support device 10 in step S29, display of the support screen 43 on the display unit 4 in step S30, and step S31 Determination of execution of processing, counting of processing time in step S32, etc., if necessary, and alarm notification in step S33 are sequentially executed. The processing of these steps S26 to S33 is repeated until all the processing steps are completed (until the determination in step S34 is NO).
  • step S35 it is determined whether or not the treatment is completed. If the treatment is not completed (NO), the process returns to step S21 and the processes of the steps S21 to S34 are repeated for the next treatment step.
  • step S35 the processing procedure control unit 25 determines in step S36 that the captured image and the support result of the used product, the intended use, the actual processing procedure, and the like. And are stored in the storage unit 17 in association with each other and transmitted to the server 30.
  • step S37 the server 30 stores the received information in the database 32 in association with the identification number of the dental treatment support device 10 and analyzes the information as necessary. Based on this analysis, the content of the processing procedure may be changed to a more suitable one such as setting a more suitable processing time for drying or light irradiation, and the processing procedure information in the database 32 may be updated.
  • step S38 the product introduction information (see the introduction information of the first embodiment) is extracted from the database 32 and transmitted to the dental treatment support apparatus 10.
  • the display image control unit 26 displays the received introduction information on the display unit 4 in step S39.
  • the server 30 may collect the support results of a plurality of dental treatment support devices 10 and store them in the database 32, and the learning unit 31 may analyze and learn the stored support results. As a result, it is possible to know the products that the dentist or the like prefers to use, the tendency of their uses, etc., and it can be effectively used for sales strategy, product improvement, and new product development.
  • the dental treatment support system 100 includes the dental treatment support device 10, so that the display unit 4 visually recognized by the dentist, the dental hygienist, or the like can display the treatment target imaged by the imaging unit 1.
  • the real-time captured image of and the processing procedure corresponding to the used product and intended use are displayed.
  • the learning unit 31 having the artificial intelligence function the treatment step and its execution state can be specified in more detail and with high accuracy. Therefore, it is possible to provide a dental treatment support system 100 capable of accurately guiding a processing procedure corresponding to a treatment step without relying on human memory or the like and capable of more appropriately supporting dental treatment. it can.
  • the server 30 by connecting the server 30 to a plurality of dental treatment support devices 10, the support results of various cases can be collected on the server 30 side. By analyzing the collected support results, it is possible to understand the usage status of products and products preferred by dentists, etc., and to study more suitable products and usage procedures for treatment steps, and to improve products and develop new products. It is also possible to connect.
  • the dental product sales promotion apparatus of the fifth embodiment includes the dental treatment support apparatus 10 of the first embodiment shown in FIG. 1 and the like, and a sales promotion unit.
  • the processing procedure control unit 25 functions as a sales promotion unit.
  • the sales promotion unit (processing procedure control unit 25), based on the support result in the dental treatment support apparatus 10, information on the purchase site of the used product or information on the purchase site of another product having the same purpose as the used product. , And has a function of displaying on the display unit 4.
  • the processing procedure control unit 25 of the dental treatment support apparatus 10 functions as a sales promotion unit, but is not limited to this configuration.
  • a sales promotion unit may be provided separately from the processing procedure control unit 25, or the sales promotion unit may be provided in a server or the like connected via a communication network.
  • the dental material sales promotion method executed by the dental product sales promotion apparatus having such a configuration is based on the support results obtained by the same method as the dental treatment support method executed by the dental treatment support apparatus 10 of the first embodiment. Based on the information, the information on the purchase site of the used product or the information on the purchase site of another product having the same usage is displayed on the display unit 4. As such information of the purchase site, for example, the URL of the purchase site is displayed. By clicking this URL, it is possible to lead to the purchase site and more effectively promote the sales of the product required by the dentist or the like.

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Dentistry (AREA)
  • Veterinary Medicine (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Urology & Nephrology (AREA)
  • Toxicology (AREA)
  • Computer Graphics (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Surgery (AREA)
  • General Engineering & Computer Science (AREA)
  • Medicinal Chemistry (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Chemical & Material Sciences (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

人間の記憶等に頼らせることなく、治療ステップに対応する処理手順を的確にガイドすることができ、歯科治療をより適切に支援することを可能とする。　治療対象を含む被治療者の口腔内を撮影する撮像部（１）、使用用途及び使用製品に関する入力情報が入力される入力部（３）、撮影画像が表示される表示部（４）、複数の製品情報及び各製品の用途毎の処理手順情報が記憶される記憶部（１７）、使用用途及び使用製品に対応する製品情報及び処理手順情報を記憶部（１７）から取得する製品情報取得部（２４）、撮影画像中の治療対象を検出し、治療ステップを特定する撮影画像解析部（２２）、治療ステップに対応する処理手順を選定する処理手順制御部（２５）及び処理手順及び撮影画像を並べて表示部（４）に表示する表示画像制御部（２６）を備えた歯科治療支援装置（１０）である。

Description

歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置
　本開示は、歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置に関する。
　歯科臨床において、齲蝕や破折等により損傷した歯質の修復には、通常、充填用コンポジットレジン、支台築造用コンポジットレジン等の充填修復材料や金属合金、セラミックス、レジン材料等の歯冠修復材料が用いられる。加えて、充填修復材料や歯冠修復材料を歯質と接着させるためにボンドやセメント等の接着材料が一般的に併用される。一般的な治療手順の例として、損傷した歯質にボンドを塗布し、エアーブローにより所定時間乾燥後に光照射器を用いて所定時間の光照射によって重合・硬化させ、次いで充填用コンポジットレジンを充填し、光照射器を用いて所定時間の光照射によって重合・硬化させる。このような歯科医師による歯科治療の際には歯科衛生士が立ち合い、使用する歯科材料を手渡したり、薬剤を混合したりして歯科医師をサポートする。しかし、使用方法は、製品毎に異なることから、歯科医師等が予め記憶しておく必要がある。記憶しきれない場合は、説明書やインターネット、アプリ等で手順を確認することもできるが、治療の度に確認するのは煩わしく、円滑な治療やサポートが困難となる場合がある。また、新しい製品を導入すると新たな使用方法に変わってしまい、記憶し直す必要がある。そのため、新しい製品を導入することに積極的でない歯科医師も少なくない。
　また、治療対象の口腔内を歯科医師とともに歯科衛生士が直接観察することが難しく、治療行為においてどのステップに至ったか確認しにくいため、サポート作業に影響することがある。
　一方、カメラで口腔内を撮影した画像を用いた歯科診療の支援システムが開発されている（例えば、特許文献１参照）。特許文献１に記載の治療支援システムは、カメラで撮影した口腔内の実画像に、被治療者のＣＴ画像等に基づいて取得した神経、血管、インプラント等の画像を重畳して歯科医師が装着するヘッドマウントディスプレイに表示することで、歯科医師の治療を支援する。
　しかし、特許文献１に記載の従来技術では、歯科医師等に、治療ステップに必要な製品の使用手順をガイドするものではなく、使用手順は、依然として歯科医師等の記憶に頼らざるを得ない。
特開２０１７－２００５３７号公報
　本開示は、上記の事情に鑑みて為されたもので、人間の記憶等に頼らせることなく、治療ステップに対応する処理手順を的確にガイドすることができ、歯科治療をより適切に支援することを可能とするものである。
　上記の目的を達成するため、本願に係る歯科治療支援装置は、表示部と、使用用途及び使用製品の少なくとも一方に関する入力情報が入力される入力部と、複数の製品情報及び各製品の用途毎の処理手順情報が記憶される記憶部と、前記入力部から入力される前記入力情報に対応する前記製品情報及び前記処理手順情報を前記記憶部から取得する製品情報取得部と、前記処理手順情報から選択された所定の処理手順を前記表示部に表示する表示画像制御部と、を備えたことを特徴とする。
　本開示によれば、製品の処理手順が表示部に表示される。そのため、製品の処理手順を確認することができる。したがって、人間の記憶等に頼らせることなく、治療ステップに対応する処理手順を的確にガイドすることができ、歯科治療をより適切に支援することが可能となる。
本開示の第１実施形態に係る歯科治療支援装置のハードウェア構成例を示す概略図である。 図１に示す歯科治療支援装置の機能ブロック図である。 図１に示す歯科治療支援装置の表示部への表示画像の流れの一例を説明するための説明図である。 図１に示す歯科治療支援装置の表示部への表示画像の流れの一例を説明するための説明図である。 図１に示す歯科治療支援装置の表示部への表示画像の流れの一例を説明するための説明図である。 第１実施形態に係る歯科治療支援装置の動作の一例を示すフローチャートである。 第２実施形態に係る歯科治療支援装置の構成を示す模式図である。 第３実施形態に係る歯科治療支援装置の構成を示す模式図である。 第４実施形態に係る歯科治療支援システムの機能ブロック図である。 第４実施形態に係る歯科治療支援システムの動作の一例を示すフローチャートである。
（第１の実施形態）
　以下、本開示の第１の実施形態に係る歯科治療支援システムについて、図面を参照しながら説明する。図１は、本実施形態に係る歯科治療支援装置１０のハードウェア構成を示す概略図である。この図１に示すように、歯科治療支援装置１０は、撮像部１と、情報処理部（制御装置）２と、入力部３と、表示部４と、音出力部５と、を主に備えて構成されている。歯科治療支援装置１０は、この他にも、撮像部１で撮影された撮影画像や、歯科治療支援結果を印刷する出力先としてのプリンタ、外部と通信する通信機器などを備えていてもよい。
　撮像部１は、被治療者の歯等の治療対象を含む口腔内の画像を撮影する機器である。撮像部１としては、特に限定されるものではなく、例えば、マイクロスコープ、ウェアラブルカメラ、ＣＣＤカメラ、診察台等に固定されたデジタルビデオカメラ等が好適に用いられる。撮像部１は、少なくとも１台あればよいが、同じものが複数台あってもよいし、種類の異なるものが組み合わされて複数台あってもよい。複数台用いる場合は、治療対象を様々な角度や撮影条件で撮影することで、治療対象や治療ステップを、より詳細に検出することや、治療対象を３Ｄ表示すること等が可能である。
　撮像部１と情報処理部２とは、接続ケーブル等によって有線で接続されているか又はＷｉ－Ｆｉ（登録商標）等の無線ＬＡＮにより接続されている。撮像部１で撮影された治療対象の画像信号は、リアルタイムで情報処理部２へと出力される。なお、撮影画像は、静止画像であってもよいし、動画像であってもよい。本実施形態では動画像が撮影されて、リアルタイムで情報処理部２へと出力されるものとする。
　情報処理部２のハードウェア構成としては、図１に示すように、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、入力Ｉ／Ｆ（インタフェース）１４、出力Ｉ／Ｆ１５、外部機器Ｉ／Ｆ１６、記憶部１７等から構成されるが、この構成に限定されない。
　ＣＰＵ１１は中央演算処理装置であり、歯科治療支援装置１０全体の動作を制御する。ＲＯＭ１２は、読出専用メモリであり、ＣＰＵ１１が実行する制御プログラムや歯科治療支援プログラム等が記憶されている。ＲＡＭ１３は随時書込読出メモリであり、ＣＰＵ１１のワークエリアとして使用される。すなわち、ＣＰＵ１１は、ＲＡＭ１３をワークエリアとして、ＲＯＭ１２に記憶された歯科治療支援プログラムを実行して、歯科治療支援装置１０を動作させる。
　記憶部１７は、ハードディスク、フラッシュメモリ等の記録媒体から構成される。入力Ｉ／Ｆ１４は、入力部３とＣＰＵ１１とを接続するためのインタフェースである。出力Ｉ／Ｆ１５は、表示部４及び音出力部５とＣＰＵ１１とを接続するためのインタフェースである。外部機器Ｉ／Ｆ１６は、外部機器とＣＰＵ１１とを接続するためのインタフェースであり、本実施形態では、撮像部１とＣＰＵ１１とが接続されている。
　記憶部１７には、歯科治療支援処理に必要な各種情報として、各種製品の製品情報、製品の用途毎の処理手順（使用手順）情報等が予め記憶される。さらに、記憶部１７には、撮像部１で治療の様子を撮影した撮影画像と支援結果等が関連付けられて記憶される。また、各部での演算結果等が一時的に記憶されることもある。
　製品情報としては、例えば、製品名、製品に含まれる歯科材料名、各歯科材料の成分、使用可能な用途、各用途で使用される器具や機器の情報等が挙げられる。これらは、製品別に分類されて記憶部１７に記憶されている。また、記憶部１７には、製品情報として、用途毎に使用できる製品を対応付けた一覧表や、製品の紹介文書、製品関連サイトのＵＲＬ等からなる製品の紹介情報等も記憶されている。
　製品としては、一つの歯科材料からなる製品であってもよいし、複数の歯科材料等からなるキット製品であってもよい。歯科材料としては、例えば、ボンド、セメント、充填用コンポジットレジン、支台築造用コンポジットレジン、金属合金、セラミックス、レジン硬化物、石こう材、埋没剤、研削及び研磨剤等が挙げられるが、これらに限定されるものではない。
　ここで、一つの歯科材料でも、様々な用途があり、例えば、クラレノリタケデンタル株式会社製の「クリアフィル（登録商標）ユニバーサルボンド」は、歯科充填用コンポジットレジン（以下、「ＣＲ」という。）による窩洞の充填修復、窩洞シーリング、露出根面等の処置、ＣＲによる歯冠修復物の補修、ポストの植立、その他様々な治療や処置に用いることができる。また、用途に応じて、使用する器具や機器、別途用いる歯科材料（ＣＲ等）も異なる場合がある。そのため、歯科治療支援には、このような用途及び各用途で使用する器具等に関する情報も必要である。よって、処理手順情報として、各製品の用途毎の処理工程、各処理工程で使用する器具や機器、各処理工程での処理時間等が記憶部１７に記憶されている。
　支援結果とは、歯科治療支援装置１０を用いた実際の治療過程及び治療結果のことをいう。支援結果として、例えば、使用した製品、その用途に関する情報、治療ステップでの実際の治療過程及び処理工程の実行結果に関する情報（例えば、乾燥５秒のところ、実際は１０秒の乾燥時間を要した場合、その実時間等）が記憶部１７に記憶される。
　本実施形態では、このような情報処理部２を、デスクトップ型のパーソナルコンピュータ（ＰＣ）から構成している。なお、情報処理部２がデスクトップ型のＰＣに限定されるものではなく、表示部４が一体に設けられたノート型ＰＣで構成してもよい。また、ＰＣ等に限定されることもなく、表示部４が一体に設けられたスマートフォン、携帯電話、タブレット端末の携帯情報機器から構成することもできる。
　入力部３は、文字、数字、各種指示等を入力するための機器であり、歯科医師、歯科衛生士等によって操作される。入力部３としては、例えば、キーボード、マウス、テンキー等が挙げられる。また、表示部４がタッチパネルディスプレイの場合には、タッチパネル画面も入力部３として機能する。入力部３では、歯科医師や歯科衛生士等による使用用途（治療ステップの内容）、使用製品（歯科材料）等の入力情報の入力等を受け付ける。入力情報の信号は、情報処理部２へと出力される。
　表示部４は、使用用途及び使用製品の入力画面、撮像部１で撮影された撮影画像及び歯科材料の処理手順が表示される機器である。表示部４としては、例えば、液晶ディスプレイ、有機ＥＬディスプレイ等が好適に挙げられる。また、情報処理部２として携帯情報機器を用いる場合は、表示部４はタッチパネルディスプレイとするが、ＰＣを用いる場合も、タッチパネルディスプレイとしてもよい。
　表示部４は、少なくとも１つ設ければよいが、複数設けてもよい。例えば、歯科医師用と歯科衛生士用の表示部４を設ければ、歯科医師と歯科衛生士とがそれぞれの作業位置で、見易い位置に配置した表示部４を視認しながら、治療やサポートを行うことができる。さらに複数の表示部４を設けたり、大型のモニタを用いたりすることで、歯科医師や歯科衛生士以外の者も、使用手順に従った治療の様子を視認することができ、例えば、授業や公開治療、製品紹介のデモンストレーション等の際に好適に用いることができる。
　また、ヘッドマウントディスプレイの表示部（ディスプレイ）を本実施形態の表示部４としてもよい。このようなヘッドマウントディスプレイを歯科医師が装着すれば、歯科医師はヘッドマウントディスプレイを通して口腔内を観察しつつ、表示部４に表示された処理手順を確認しながら治療することも可能となる。また、ヘッドマウントディスプレイに撮像部１としてウェアラブルカメラを取り付けることで、歯科医師等の視線に対応した撮影画像を取得することができる。
　音出力部５は、歯科医師や歯科衛生士等に所定の通知をするための通知音を出力する機器であり、例えば、スピーカ、ブザー等が挙げられる。音出力部５から出力される通知音は、特に限定されるものではなく、歯科材料の乾燥時間、光照射時間の開始や終了を通知するブザー音やアラーム音等であってもよい。また、時間をカウントする音や音声を発したり、時間の経過を音や音声で通知したりしてもよい。また、「ボンドを塗布して下さい」、「光を照射して下さい」等、処理工程の内容を音声で通知してもよい。
　次に、図２の機能ブロック図を用いて、歯科治療支援装置１０の動作全体を制御する情報処理部２の機能について説明する。この図２に示すように、情報処理部２は、撮影画像取得部２１、撮影画像解析部２２、入力情報取得部２３、製品情報取得部２４、処理手順制御部２５及び表示画像制御部２６として機能する。
　撮影画像取得部２１は、撮像部１からリアルタイムで入力される画像信号をデジタル信号に変換し、適宜の画像処理を施した撮影画像を、撮影画像解析部２２及び表示画像制御部２６へ渡す。
　また、撮影画像取得部２１は、検出した治療対象近傍を拡大して撮影するように撮像部１を制御してもよいし、物体追跡技術を利用して、撮像部１を制御し、検出した治療対象を追跡して撮影させるようにしてもよい。または、撮像部１が有するオートフォーカス機能や物体認識機能等を利用して、撮像部１が自動で治療対象を検出して、治療対象のフォーカスや拡大撮影、追跡撮影する構成としてもよい。
　撮影画像解析部２２は、撮影画像取得部２１から受け取った撮影画像を解析して、例えば、齲歯、窩洞、根管等の治療対象を検出する。例えば、特徴量の抽出やパターンマッチング等の物体認識処理を実行して、齲歯、窩洞等を検出し、これを治療対象とする。このとき、入力部３で入力された用途に応じて治療対象を検出してもよい。例えば、用途が窩洞の充填修復やシーリングであれば、撮影画像から窩洞を検出して治療対象とする。より簡易には、表示部４に表示された撮影画像上での歯科医師等によるマウスクリックやタッチパネルのタッチ操作等によって指定された歯等を治療対象として検出してもよい。
　また、撮影画像解析部２２は、撮影画像を解析し、解析結果と入力情報に基づいて歯科医師が治療対象に対して行う（行おうとしている）治療ステップを特定する。検出した治療対象の情報と認識した治療ステップの情報は、処理手順制御部２５へと渡される。また、人工知能（ＡＩ；Artificial Intelligence）を有する学習部を備え、学習部により撮影画像解析部２２で解析した情報及び予め記憶した教師データに基づいて、より詳細で高度な治療支援を行ってもよい。例えば、撮影画像解析部２２が画像解析によって治療対象を特定し、当該治療対象の特徴量及び入力情報を学習部に入力する。学習部は、治療を必要とする様々な状態の齲歯、窩洞、根管等を表す特徴量と、これら様々な状態の齲歯、窩洞、根管等に対する実際の治療ステップ、処理工程、使用する製品情報等が対応付けられたデータを教師データとして用い、入力された治療対象の特徴量及び入力情報に基づいてニューラルネットワーク等の機械学習アルゴリズムを利用して、当該治療対象の窩洞の形態等を判断して治療ステップを特定し、対応する処理手順及び使用材料等を出力する。撮影画像解析部２２はこの学習部からの出力に基づいて、治療ステップに応じた、より適切な使用材料を歯科医師等に提示してもよい。また、治療ステップと、器具（ブラシ、インスツルメント等）及び材料（性状、色等）とを対応付けたデータを教師データとして用い、撮影画像の解析結果に基づいて、歯科医師が使用している器具（ブラシ、インスツルメント等）、使用する材料（性状、色等）を学習部が判別し、治療ステップのいずれの処理工程が実行されているか判断してもよい。
　入力情報取得部２３は、入力部３から入力された使用用途、使用製品等に関する入力情報を取得する。製品情報取得部２４は、入力情報取得部２３で取得した使用用途、使用製品の情報に基づいて、記憶部１７から該当する製品情報と、使用用途に対応する処理手順情報を取得する。取得された製品情報及び処理手順情報は、処理手順制御部２５へと渡される。
　処理手順制御部２５は、製品情報取得部２４で取得した処理手順情報から、入力情報に対応する任意の処理手順を選択する。第１実施形態では、処理手順制御部２５は入力情報に加え、撮影画像解析部２２で解析された治療ステップに対応する処理手順を選択している。また、処理手順制御部２５は、選択した処理手順情報を表示部４に表示するように、表示画像制御部２６を制御する。また、処理手順制御部２５は、処理時間の計測が必要な処理工程（例えば、乾燥工程や、光照射工程）の場合は、処理が開始されたら、処理時間を計測し、所定の処理時間に到達したときに、音出力部５にアラーム音等を出力させる。
　また、処理手順制御部２５は、治療が終了すると、撮影画像と支援結果とを関連付けて記憶部１７に記憶する。支援結果とは、例えば、使用した製品の名称等の製品情報、使用用途、処理手順の実際の処理実行結果（例えば、実際の乾燥時間や光照射時間、予め決められた処理とは別の処理を行った場合はその処理等）等が挙げられる。
　また、処理手順制御部２５は、必要に応じて、表示画像制御部２６を制御して、製品の紹介情報の画面を表示部４に表示させる。紹介情報の画面としては、例えば、使用製品の詳細な使用説明等が記載された画面であってもよいし、使用製品と用途が同じ別の製品の使用説明等が記載された画面であってもよい。これらの画面を視認することで、歯科医師や歯科衛生士が、製品の使用手順を改めて認識したり、製品の他の用途等を知ることができたり、使用用途に対して、より適した製品の情報を知ることができたりする。
　また、紹介情報の画面として、これらの製品の情報が公開されているサイト、製品の使用例の動画が公開されているサイトのＵＲＬを含む画面を表示してもよい。このようなＵＲＬをクリックすることで、当該サイトへ導かれ、歯科医師等は、製品のより詳細な情報や使用例を知ることができたり、製品の購入を検討したりすることができる。
　表示画像制御部２６は、表示部４の表示面４ａ（図３等参照）へ表示する画像、例えば、図３に示す使用用途選択画面４１、使用製品選択画面４２、図４Ａ，図４Ｂに示す支援画面４３等を生成して表示する。支援画面４３は、撮像部１で撮影されるリアルタイムの撮影画像を表示する撮影画像表示領域４３ａと、使用する歯科材料や器具の画像を表示する材料等表示領域４３ｂと、治療ステップに応じた処理手順の各工程を表示する処理手順表示領域４３ｃと、等を有している。また、処理時間の計測中は、処理手順表示領域４３ｃにカウンタ画像４３ｄ（図４Ａ参照）を表示してもよい。
　上述のような構成の歯科治療支援装置１０で実行される歯科治療支援処理（歯科治療支援方法、歯科治療支援プログラム）の一例を、図３、図４Ａ、図４Ｂの表示画像の流れの説明図、図５のフローチャートを参照しながら説明する。ここでは、表示部４の表示面４ａに表示された画像を視認しながら、歯科衛生士が歯科医師の治療のサポートを行う場面を想定して説明する。
　まず、情報処理部２としてのＰＣにおいて、歯科治療支援プログラムを立ち上げることで、歯科治療支援装置１０を起動させ、撮像部１での被治療者の口腔内の撮影を開始する。
　すると、表示画像制御部２６が表示部４の表示面４ａに、図３の上図に示すように、使用用途の一覧が表示された使用用途選択画面４１を表示する（ステップＳ１）。歯科衛生士等は、使用用途選択画面４１の所定の用途上で、マウスのクリックやタッチパネルのタッチ操作を行うことで、使用用途を選択することができる。選択された使用用途の情報を、入力情報取得部２３が取得する（ステップＳ２）。ここでは、「充填修復」が選択されたものとする。
　入力情報取得部２３で取得した使用用途に応じて、製品情報取得部２４は記憶部１７から、使用用途に対応する製品情報（ここでは、名称の一覧等）を取得する（ステップＳ３）。そして、表示画像制御部２６は、図３の中央の図に示すように、使用製品の一覧が表示された使用製品選択画面４２を表示する（ステップＳ４）。この使用製品選択画面４２から歯科衛生士等によって選択された使用製品の情報を、入力情報取得部２３が取得する（ステップＳ５）。ここでは、製品Ａが選択されたとする。
　なお、本実施形態では、使用用途を先に選択し、次いで製品を選択するように構成されているが、この構成に限定されるものではなく、まず製品を選択し、この製品に応じて表示された用途の中から、使用用途を選択する構成としてもよい。または、使用用途のみを入力して、使用用途に応じた製品を自動で選択する構成としてもよいし、使用製品のみを選択する構成とし、撮影画像の解析によって特定した治療ステップに基づいて、当該使用製品の用途を特定してもよい。
　使用用途が選択されると、次に、製品情報取得部２４は取得した使用製品に対応する製品情報を記憶部１７から取得する。より具体的には、製品情報取得部２４は、使用用途に応じた当該製品の処理手順、必要な歯科材料、器具等の情報を含む処理手順情報を記憶部１７から取得する（以上、ステップＳ６）。
　以上により、使用用途及び製品に応じた治療支援処理が開始される。撮像部１で撮影された撮影画像（動画像）は、撮影画像取得部２１によって取得され、撮影画像解析部２２によって解析されて治療対象が検出される。撮影画像解析部２２は、治療対象を拡大して撮影したり、治療対象を追跡して撮影したりするように、撮像部１を制御する（以上、ステップＳ７）。
　撮像部１で撮影した撮影画像は、表示画像制御部２６によって表示部４へリアルタイムに表示される。より具体的には、表示画像制御部２６は、図３の下図に示すように、取得された撮影画像を撮影画像表示領域４３ａに表示し、使用する歯科材料や器具の画像を材料等表示領域４３ｂに表示し、処理手順の画像を処理手順表示領域４３ｃに表示した支援画面４３を、表示部４の表示面４ａに表示する（以上、ステップＳ８）。撮影画像表示領域４３ａには、治療対象の近傍の画像を表示してもよいし、さらに治療対象の拡大画像等を表示してもよい。また、複数台の撮像部１で撮影している場合は、必要に応じてこれらでの撮影画像の１つ又は複数を適宜選択して表示してもよい。
　この支援画面４３の撮影画像表示領域４３ａに表示される撮影画像を視認することで、歯科衛生士は、歯科医師が行っている治療ステップを確認することができる。材料等表示領域４３ｂを視認することで、必要な歯科材料や器具を確認することができる。また、処理手順表示領域４３ｃを視認することで、処理手順の具体的な工程を確認することができる。そのため、歯科衛生士は、器具の準備、歯科材料の準備や調合など、治療のアシストをより的確かつ円滑に行うことができる。
　次いで、撮影画像解析部２２は、撮影画像を解析して、歯科医師による治療ステップの具体的な処理工程を検出し、処理手順制御部２５が、検出した治療ステップに応じた歯科材料と器具及び処理を選定する。表示画像制御部２６が、選定された歯科材料と器具を材料等表示領域４３ｂに表示し、処理手順の詳細を処理手順表示領域４３ｃに表示する（以上、ステップＳ９）。このとき、音出力部５により、処理手順の工程の内容、例えば、「ボンドを窩洞に塗布して下さい」等のメッセージを音声によって出力してもよい。
　そして、撮影画像解析部２２が撮影画像を解析して当該処理が開始されたか否かを判定する（ステップＳ１０）。処理が開始されない間は（ステップＳ１０の判定がＮＯ）、開始されるまでプログラムは待機し、処理が開始されたと判定したときは（ステップＳ１０の判定がＹＥＳ）、プログラムはステップＳ１１へと進む。次のステップＳ１１では、処理手順制御部２５は、処理時間の計測の必要があれば処理時間をカウントする。このとき、表示画像制御部２６は、処理手順表示領域４３ｃに、カウンタ画像４３ｄを表示する。処理時間に達したら、処理手順制御部２５は、音出力部５を制御してアラーム音やアラームメッセージ等を出力させ、アラームを通知する（ステップＳ１２）。このアラームの通知によって、歯科衛生士は勿論、歯科医師も、乾燥時間等に達したことを、より明確に知ることができる。
　なお、製品の販売元が予め設定した処理時間とは異なる時間で歯科医師が処理を行ったときは、処理手順制御部２５は、その実際の処理時間を記憶しておいてもよい。例えば、規定の処理時間では、乾燥や硬化が十分でなく、歯科医師の判断で規定よりも処理時間を長くした場合などが考えられる。この場合、実際の処理時間のデータを収集して検討することで、処理手順をより好適なものに変更するための参考とすることができる。
　次に、ステップＳ１３では、次の処理工程があるか否かを判定し、処理工程がある場合（ステップＳ１３の判定がＹＥＳ）、ステップＳ９に戻って当該ステップＳ９～Ｓ１２の工程を繰り返す。
　一方、処理工程がすべて完了した場合（ステップＳ１３の判定がＮＯ）、ステップＳ１４へと進み、治療終了か否かを判定する。例えば、歯科衛生士等によって、入力部３から終了の指示が入力されたときに治療終了と判定し（ステップＳ１４の判定がＹＥＳ）、ステップＳ１５へと進む。
　これに対して、入力部３から続行の指示や、使用用途選択画面４１への戻り指示等があった場合は、治療続行と判定し（ステップＳ１４の判定がＮＯ）、ステップＳ１に戻って当該ステップＳ１～Ｓ１３の処理を繰り返す。
　ステップＳ１５では、治療終了を受けて、処理手順制御部２５が、撮像部１で撮影した撮影画像と、使用製品、使用用途及び実際の処理工程等の支援結果とを対応付けて記憶部１７へ記憶する。
　また、必要に応じて、ステップＳ１６へと進み、表示画像制御部２６が製品の紹介情報を表示部４に表示させる。前述したように、製品の紹介又は購入サイトに導く情報を表示してもよいし、今回使用した製品の別の用途を紹介する情報を表示してもよい。また、記憶部１７に蓄積された支援結果に基づいて、当該歯科医師が、ある用途に、ある製品のみを使用している場合は、同じ用途に用いられる別の製品の紹介画面を表示してもよい。また、いわゆるリスティング広告のように、表示面４ａの所定の領域に製品の広告情報が表示されるようにしてもよい。
　図４Ａ、図４Ｂを参照して、表示部４に表示される支援画面４３の流れの具体例を説明する。図４Ａの上図では、治療ステップの具体的な処理工程としてボンド塗布工程が特定されたため、材料等表示領域４３ｂにボンド材料と塗布具の画像が表示され、処理手順表示領域４３ｃに処理工程として「ボンド塗布」が表示された状態を示す。
　撮影画像中から塗布具を検出したり、ボンドの液面を検出したりすることで、撮影画像解析部２２がボンドの塗布を検出する。この検出に応じて、次の乾燥工程のため、図４Ａの中央の図に示すように、表示画像制御部２６が支援画面４３に、エアーノズルと処理工程（エアーブロー）と処理時間（５秒以上）を表示する。撮影画像解析部２２が撮影画像からエアーノズルによるエアーの噴射等を検出すると、処理手順制御部２５による処理時間のカウントが始まり、図４Ａの中央図に示すように、表示画像制御部２６がカウンタ画像４３ｄを表示する。処理時間に達すると、処理手順制御部２５が音出力部５からアラーム音を出力する。
　撮影画像解析部２２が乾燥工程の終了を検知すると、光照射工程の支援へ進む。表示画像制御部２６により、図４Ａの下図に示すように、支援画面４３に光照射器と処理工程（光照射工程）と処理時間（１０秒）が表示される。撮影画像解析部２２が光照射を検知すると、処理手順制御部２５により処理時間のカウントとカウンタ画像４３ｄの表示が開始される。処理時間に達すると、処理手順制御部２５により音出力部５からアラーム音が出力される。
　また、図４Ｂの上図は、ボンドの塗布に続いて行われる光重合型の歯科充填用コンポジットレジンの充填工程の際の支援画面４３である。この支援画面４３には、使用するコンポジットレジン材料の画像と、処理工程（光重合コンポジットレジン充填）が表示されている。撮影画像解析部２２が充填の終了を検知すると、図４Ｂの下図に示すように、表示画像制御部２６により支援画面４３に光照射器と処理工程（光照射工程）と処理時間（Ｙ秒）が表示される。この場合も、処理手順制御部２５による処理時間のカウント等とアラーム音の出力が行われる。引き続いて、研磨工程等の支援画面４３を表示してもよい。
　なお、上記では、歯科衛生士のアシストのために本実施形態の歯科治療支援装置１０を用いているが、このような使用に限定されるものではない。例えば、歯科医師自身が使用してもよく、歯科衛生士が不在の場合などは、歯科医師が自身で処理工程や処理時間を確認しながら、治療を行うことができる。
（変形例）
　第１実施形態の変形例として、より簡易な実施形態を説明する。上記第１実施形態では、撮影画像解析部２２が画像解析によって検出した治療ステップに基づいて、自動で治療ステップの各処理工程に対応する支援画面４３の表示、処理時間のカウント等を行っているが、これに限定されるものではない。例えば、図３の下図の支援画面４３を表示面４ａに表示するだけでも、使用する歯科材料、器具、処理手順を、一目で把握することができる。そして、撮影画像表示領域４３ａに表示されるリアルタイムの撮影画像によって治療ステップを確認しながら、処理手順表示領域４３ｃに表示された処理工程に従って、器具の受け渡し、薬剤の混合、処理時間のカウント等のアシスト作業を行うことができる。又は、歯科医師等が、表示面４ａを確認しながら治療等の処置を行うことができる。この実施形態の場合、撮影画像解析部２２を設けなくてもよく、より簡易な構成で、より高速な歯科治療支援装置１０とすることができる。
　また、他の異なる実施形態（変形例）として、入力部３から入力された使用用途、使用製品等に関する入力情報に基づいて、製品情報取得部２４が記憶部１７から当該入力情報に対応する処理手順情報を取得し、リアルタイムの撮影画像と取得した処理工程とを並べて表示部４に表示するものであってもよい。これにより、歯科医師等は、その処理工程を確認しながら、治療や治療アシストを行うことができる。また、処理手順情報のうちの最初の処理工程を、撮影画像と並べて表示部４に表示してもよく（例えば、図４Ａの上図等）、歯科医師等は、撮影画像と処理工程を確認しながら治療や治療アシストを行うことができる。そして、当該処理工程が終わったら、例えば、「次へ」のボタンをクリックすること等により、次の処理工程が撮影画像と並んで表示された画面に遷移する構成とすることで、歯科治療の支援をより適切に行うことができる。この場合も撮影画像解析部２２を必ずしも設けなくてもよい。
　さらに異なる実施形態（変形例）として、例えば、歯科衛生士が、歯科医師によるボンド塗布を表示部４の撮影画像で確認して、図３の下図の支援画面４３の処理手順表示領域４３ｃ上で「ボンド塗布」をクリックやタッチ操作で選択する。この選択操作によって、乾燥時間がカウントされ、アラーム音が通知される構成としてもよい。または、治療ステップの各工程に応じて、歯科衛生士等が処理手順表示領域４３ｃの各処理工程を順次クリック等で選択することで、図４Ａ、図４Ｂのいずれか支援画面４３が表示されるように構成してもよい。
　以上、第１実施形態及び変形例によれば、使用用途又は使用製品の入力情報を入力することで、入力情報に対応する好適な処理手順（使用手順）が選択され、表示部４に表示される。これにより、歯科医師、歯科衛生士等が、製品の処理手順を確認することができる。また、第１実施形態及び変形例では、治療対象を含む被治療者の口腔内を撮影する撮像部１を備え、表示画像制御部２６は、処理手順情報から選択された所定の処理手順及び撮像部１で撮影される撮影画像を並べて表示部４に表示する構成である。よって、この表示部４に表示された撮影画像を視認することで、歯科衛生士等が、治療対象や歯科医師による治療ステップの進行状態を明確に確認することができる。また、撮影画像を視認しつつ、表示部４に表示された処理手順に従って、歯科材料や器具の準備、受け渡し等のアシスト作業を、より的確かつより円滑に行うことができる。又は、歯科医師等が表示部４の撮影画像と処理手順を視認しつつ、治療等を行うこともできる。したがって、人間の記憶等に頼らせることなく、使用用途、使用製品、又は治療ステップに対応する処理手順を的確にガイドすることができる。この結果、歯科治療をより適切に支援することを可能とする歯科治療支援装置１０、歯科治療支援方法及び歯科治療支援プログラムを提供することができる。
　また、第１実施形態では、撮影画像中の治療対象を検出し、当該治療対象に対して行う治療ステップを特定する撮影画像解析部２２と、治療ステップに対応する処理手順を、処理手順情報から選定する処理手順制御部２５とをさらに備えている。この構成とすれば、治療ステップの進行状態に対応した処理手順（使用手順）を、撮影画像とともに表示部４に表示することができる。そのため、歯科医師等が治療ステップを確認する必要がなく、実際の治療ステップの進行状態に対応した、より適切な処理手順を表示して、歯科治療をより適切に支援することが可能となる。
　また、第１実施形態において、処理手順制御部２５は、処理手順の所定の工程が実行されたときに、処理時間をカウントし、処理時間に達したときに、アラームの通知を行うように構成することができる。この構成とすれば、歯科衛生士は勿論、歯科医師等も、処理時間が経過したことを、より明確に知ることができ、支援効果をより向上させることができる。
　また、第１実施形態において、処理手順制御部２５は、処理手順を音声で通知するように構成することができる。この構成とすれば、歯科衛生士は勿論、歯科医師等も、音声で処理手順を知ることができ、支援効果をより向上させることができる。
　また、第１実施形態において、処理手順制御部２５は、入力情報、製品情報、処理手順及び処理手順の実行結果を含む支援結果を記憶部１７に記憶するように構成することができる。この構成とすれば、歯科医師等が、治療終了後に支援結果を確認することで、治療状態を確認したり、今後の治療に役立てたりすることができる。
　また、第１実施形態において、処理手順制御部２５は、支援結果に基づいて、使用した製品の紹介情報又は処理手順に対応する製品の紹介情報を、表示部４に表示するように構成することができる。この構成とすれば、歯科医師等が、製品の用途等をより詳細に知ることができる。さらに、用途により好適な他の製品の情報を知ることができ、新しい製品に対する抵抗感がなくなり、積極的に新しい製品を導入するようになり得る。また、製品の販売業者側にとっても、自社製品の販売促進につながる。よって、製品の積極的な導入や販売促進に貢献し得る歯科治療支援装置１０を提供することができる。
　また、歯科治療支援装置１０に、人工知能（ＡＩ；Artificial Intelligence）機能を有する学習部を備えた構成としてもよい。このような学習部を備えることで、撮影画像の解析、治療対象や治療ステップの特定、好適な治療工程の選択等を、より高精度に行うことができる。また、学習結果を蓄積し、これを利用することで、ユーザの要求に適応した高度な歯科治療支援が可能となる。
（第２実施形態）
　次に、第２実施形態に係る歯科治療支援装置１０Ａを、図５Ａを参照しながら説明する。図５Ａに示すように、第２実施形態に係る歯科治療支援装置１０Ａは、ヘッドマウントディスプレイ６と、ＰＣからなる情報処理部（制御装置）２と、を主に備えて構成される。情報処理部２は、入力部３及び表示部４等を備えている。情報処理部２の構成等は、第１実施形態と同様であるため、詳細な説明は省略する。
　ヘッドマウントディスプレイ６は、制御部６ａ、表示部４Ａ等を備えている。制御部６ａは、ＣＰＵ、ＲＯＭ、ＲＡＭ、記憶部等を備え、ヘッドマウントディスプレイ６全体の動作を制御する。制御部６ａは、情報処理部２と有線又は無線により通信し、情報処理部２からの制御信号に基づいて、表示部４Ａに歯科治療支援のための情報を表示する。
　表示部４Ａは、歯科治療支援のための情報としての処理手順を表示しつつ治療対象を視認可能に透過性を有している。表示部４Ａとして、例えば、有機ＥＬ等が好適に用いられる。表示部４Ａは、全面に情報を表示可能であるが、本実施形態では、治療対象の視認を妨げないように、表示部４Ａの表示面４ａの右上に、処理手順を表示する処理手順表示領域４３ｃが設けられている。この処理手順表示領域４３ｃの位置が表示部４Ａの右上に限定されるものではなく、処理手順や治療目的等に応じて、適宜の位置に設けることができる。
　ヘッドマウントディスプレイ６は、特に限定されることはなく、歯科治療支援の情報が表示できる表示部４Ａを備え、表示部４Ａを通して治療対象が視認できればよい。形態も特に限定されることはなく、例えば、ゴーグル型、ヘルメット型、眼鏡型等、適宜のものを使用することができる。また、ヘッドマウントディスプレイが第２実施形態及び後述の第３実施形態のように、処理手順を表示しつつ治療対象を視認可能に透過性を有する表示部４Ａ，４Ｂを備えたものに限定されることもない。他の異なる実施形態として、例えば、頭部等への固定具、または頭部等へ固定された情報処理部から延びるアームの先端に、液晶ディスプレイ等の小型の表示部（モニタ）を取り付け、この表示部を装着者の視野内に配置する構成でもよい。これにより、装着者は、表示部に表示された処理手順等を視認することができ、さらに視点を変えることで、治療対象を視認することができる。
　上述のような構成の第２実施形態の歯科治療支援装置１０Ａでは、例えば、歯科医師等（被装着者）がヘッドマウントディスプレイ６を頭部に装着し、透過性を有する表示部４Ａを通して治療対象の歯等を視認する。次いで、歯科医師又は歯科衛生士等が入力部３から使用用途、使用製品等を入力すると、これらの入力に基づいて、情報処理部２が記憶部１７から製品情報や処理手順を取得し、ヘッドマウントディスプレイ６の制御部６ａに処理手順の表示の制御信号を送信する。制御部６ａは、この制御信号に基づいて、処理手順を表示部４Ａに表示する。処理手順は、情報処理部２から送信されるものであってもよいし、ヘッドマウントディスプレイ６の記憶部に画像等を予め記憶しておき、情報処理部２からの制御信号に基づいて、制御部６ａが対応する画像等を表示部４Ａに表示してもよい。
　以上により、歯科医師は、表示部４Ａの処理手順等を視認及び治療対象を視認しつつ、かつ表示部４Ａに表示された処理手順を確認にしつつ、治療等を行うことができる。このとき、情報処理部２の表示部４にも処理手順等を表示することで、歯科衛生士等も処理手順を確認することができる。また、ヘッドマウントディスプレイ６を歯科衛生士等が装着してもよく、治療対象を視認しつつ、かつ処理手順を確認しながら歯科医師のアシストを行うことができる。
（第３実施形態）
　次に、第３実施形態に係る歯科治療支援装置１０Ｂを、図５Ｂを参照しながら説明する。第３実施形態に係る歯科治療支援装置１０Ｂは、ヘッドマウントディスプレイ６Ｂが、制御部６ａに代えて情報処理部２Ｂを備え、さらに撮像部１Ｂを備えていること以外は、図５Ａに示す第２実施形態に係る歯科治療支援装置１０Ａと同様の基本構成を備えている。このため、第２実施形態と同様の構成については第２実施形態と同様の符号を付し、詳細な説明は省略する。なお、ＰＣからなる情報処理部２と区別するため、ヘッドマウントディスプレイ６Ｂに備えられる情報処理部２Ｂを、以下では「モバイル情報処理部２Ｂ」という。
　図５Ｂに示すように、第３実施形態に係る歯科治療支援装置１０Ｂは、ヘッドマウントディスプレイ６Ｂを主に備えて構成される。ヘッドマウントディスプレイ６Ｂは、撮像部１Ｂと、モバイル情報処理部２Ｂと、入力部３Ｂと、表示部４Ｂと、音出力部５Ｂと、を主に備えて構成される。
　撮像部１Ｂは、表示部４Ｂの側部や上部に、被装着者の目線で口腔内の撮影等が可能な位置に設置されている。撮像部１Ｂは、ウェアラブルカメラ等、第１実施形態と同様のものが好適に用いられる。この撮像部１Ｂによって、歯科医師等の視線に対応した撮影画像を取得することができる。撮影した撮影画像は、例えば、後述の情報処理部２’に送信され、情報処理部２’の表示部４’や、歯科衛生士等が装着するヘッドマウントディスプレイ６Ｂの表示部４Ｂに表示される。これにより、歯科衛生士等が、歯科医師が行っている治療ステップを、歯科医師の目線で確認することができる。
　モバイル情報処理部２Ｂは、ヘッドマウントディスプレイ６の本体部（本実施形態では、眼鏡型のヘッドマウントディスプレイ６Ｂのテンプル部分）に固定されている。または、被装着者のポケット等に収納可能な、分離型のモバイル情報処理部２Ｂとし、本体部と有線又は無線により接続されるものであってもよい。
　モバイル情報処理部２Ｂは、小型の情報処理装置であって、マイクロプロセッサ等のＣＰＵと、ＲＡＭ、ＲＯＭ、記憶媒体等の記憶部１７Ｂを備えて構成される。また、モバイル情報処理部２Ｂは、第１実施形態の情報処理部２と同様に、撮影画像取得部２１、撮影画像解析部２２、入力情報取得部２３、製品情報取得部２４、処理手順制御部２５及び表示画像制御部２６として機能する（図２参照）。
　ヘッドマウントディスプレイ６Ｂは、キーボード、マウス、テンキー等の入力部３’及び表示部４’等を備えたＰＣからなる情報処理部２’、及び／又は操作者の手や足で操作可能なマウス等からなる入力部３’’と、有線又は無線によって接続されている。この情報処理部２’の入力部３’、マウス等からなる入力部３’’が、本実施形態の入力部３Ｂとして機能する。よって、被装着者等が、表示部４Ｂに表示された各種選択画面において、入力部３Ｂをクリック操作等することによって、使用用途等を選択することができる。この選択操作による入力信号が情報処理部２Ｂへと出力される。
　記憶部１７Ｂには、各種製品の製品情報、製品の用途毎の処理手順（使用手順）情報等の治療支援に必要な情報が予め記憶されている。これらの情報は、入力部３Ｂの操作（コピー、アップロード操作等）により、情報処理部２’から記憶部１７Ｂに転送することができる。さらに、記憶部１７Ｂには、撮像部１Ｂで治療の様子を撮影した撮影画像と支援結果等が関連付けられて記憶されてもよい。この情報は、入力部３Ｂの操作（コピー、ダウンロード操作等）により、記憶部１７Ｂから情報処理部２’に転送することができる。
　表示部４Ｂは、処理手順を表示しつつ治療対象を視認可能に透過性を有し、第２実施形態の表示部４Ａと同様に、有機ＥＬ等が好適に用いられる。表示部４Ｂの表示面４ａには、処理手順表示領域４３ｃが設けられている。音出力部５Ｂは、被装着者に所定の通知をするためのものである。本実施形態では、被装着者の耳に簡単に装着できるイヤホン型の音出力部５Ｂを用いているが、これに限定されることはなく、スピーカ等、適宜のものを用いることができる。
　上記構成の第３実施形態に係る歯科治療支援装置１０Ｂにおいても、第１、第２実施形態と同様の作用効果が得られる。すなわち、ヘッドマウントディスプレイ６Ｂを装着した歯科医師は、表示面４ａを介して治療対象を視認しつつ、かつ表示部４Ａに表示された処理手順を確認にしつつ、治療等を行うことができる。また、ヘッドマウントディスプレイ６Ｂを歯科衛生士等が装着してもよく、治療対象を視認しつつ、かつ処理手順を確認しながら歯科医師のアシストを行うことができる。また、撮像部１で撮影した撮影画像と処理手順等を、情報処理部２’の表示部４’や、歯科衛生士等が装着したヘッドマウントディスプレイ６Ｂの表示部４Ｂにも表示することで、歯科衛生士等が、治療対象、治療ステップ、及び処理手順を、歯科医師と同じ目線で確認しながらのアシストが可能となる。
　さらに、第３実施形態では、小型のモバイル情報処理部２Ｂを、ヘッドマウントディスプレイ６Ｂに取り付けるか、又はポケット等に収納可能としたため、小型で軽量、かつ携帯性に優れる歯科治療支援装置１０Ｂを提供できる。また、歯科医師等の頭部に装着できるヘッドマウントディスプレイ６Ｂと、さらに足で操作可能な入力部３’とを備えることで、歯科医師等が操作等に手を用いる必要がなく、両手を使って自由に治療やアシストを行うことができる。
　また、第３実施形態に係る歯科治療支援装置１０Ｂでは、さらに入力部として、図５Ｂに破線で示すようにマイク等の音入力部３Ｂ’を備え、情報処理部２Ｂに音声解析ソフトウェア（音声解析部）等をインストールした構成としてもよい。この構成により、歯科医師等が、音入力部から口頭（音声）で使用用途の選択を指示することで、音声解析ソフトウェアが音声を解析し、解析結果に応じて、情報処理部２Ｂが各処理を実行する。したがって、操作に手足を用いる必要がなく、歯科医師等は、より自由かつ手軽に治療やアシストを行うことができる。
（第４実施形態）
　次に、第４実施形態に係る歯科治療支援システム１００を、図６のブロック構成図、図７のフローチャートを参照しながら説明する。
　図６に示すように、第４実施形態に係る歯科治療支援システム１００は、歯科医院等のクライアント側に設置される歯科治療支援装置１０と、歯科治療支援サービスを提供する業者等が管理するサーバ３０と、を備えて構成される。歯科治療支援装置１０とサーバ３０とは、インターネット等の通信ネットワークＮを介して接続されている。
　歯科治療支援装置１０は少なくとも１台備えられていればよく、複数台備えられていることがより望ましく、様々な症例のより多くの支援結果を収集できる。複数台の場合は、各歯科治療支援装置１０が、複数の歯科医院等にそれぞれ１台又は複数台ずつ設置されている。また、歯科治療支援装置１０とともに、又はこれに代えて、第２、第３実施形態のような歯科治療支援装置１０Ａ，１０Ｂを何れかの歯科医院等に備えていてもよい。
　第４実施形態の歯科治療支援装置１０は、各部の機能と記憶部１７に記憶される情報とが一部異なること以外は、第１実施形態の歯科治療支援装置１０と同様の基本構成を備えている。そのため、第１実施形態の歯科治療支援装置１０と同様の構成部品には、第１実施形態と同様の符号を付し、詳細な説明は省略する。
　第４実施形態では、撮影画像の解析による治療ステップの特定、表示する処理手順、製品情報の選定等は、サーバ３０で行っている。第４実施形態の歯科治療支援装置１０は、撮影画像及び入力情報を、通信ネットワークＮを介してサーバ３０に送信し、サーバ３０から治療ステップ、処理手順、製品情報等を受信し、これらに基づいて歯科治療支援を行う。各部の機能の詳細は、後述する図７のフローチャートを用いた動作の説明のときに併せて説明する。
　サーバ３０は、ＣＰＵ、ＲＡＭ、ＲＯＭ、記憶媒体等を備えるサーバ用ＰＣから構成されるが、汎用大型コンピュータ（メインフレーム）等を用いることもできる。サーバ用ＰＣは、クラウドコンピューティングサービスを利用したものであってもよいし、データセンタや業者の自社のサーバ用ＰＣであってもよい。
　サーバ３０は、学習部３１と、データベース３２と、を主に備えているが、これ以外にも、通信部や画像表示部等、サーバ３０としての一般的な構成や機能を備えている。
　データベース３２には、製品情報、処理手順情報等が記憶され、さらに、物体認識等に用いる各種情報が記憶されている。また、データベース３２には、各歯科治療支援装置１０から受信した撮影画像、支援結果等が記憶される。また、データベース３２に記憶される製品情報や処理手順は、学習部３１による書き換え、又は製品販売業者からの新情報の提供によって逐次更新（バージョンアップ）される。更新された情報は、所定のタイミングで各歯科治療支援装置１０へ送信されて記憶部１７に反映されるものとしてもよい。
　学習部３１は、人工知能機能を有している。例えば、治療を必要とする様々な状態の齲歯、窩洞、根管等を表す特徴量と、これら様々な状態の齲歯、窩洞、根管等に対する実際の治療ステップ、さらには処理工程及び使用材料とが対応付けられたデータを教師データとして用い、入力された撮影画像の特徴量に基づいて、機械学習アルゴリズムを利用して治療ステップを出力し、さらには好適な処理工程や使用材料を出力する。そのため、より高度な解析や判断が可能となる。学習部３１は、各歯科治療支援装置１０から受信した入力情報に基づいて、データベース３２から製品情報、処理手順情報を取得し、歯科治療支援装置１０へ送信する。学習部３１は、各歯科治療支援装置１０から送信される撮影画像を、物体認識技術を用いて解析し、治療ステップを特定して歯科治療支援装置１０へ送信する。さらには、歯科ステップの各処理工程の実行状況（例えば、歯科材料が塗布された、エアーが噴射された、光照射がされた、等）を判別して、実行状況に対応する表示情報や音声情報等を確定し、歯科治療支援装置１０へ送信する機能を備えていてもよい。
　また、学習部３１は、使用製品の製品情報、処理手順情報、支援結果等をデータベース３２に記憶する。また、学習部３１は、支援結果に基づいて、データベース３２から製品紹介情報を取得し、歯科治療支援装置１０へ送信する。また、学習部３１は、蓄積される試験結果を分析して、より好適な用途や処理手順を導き出し、データベース３２の処理手順等に反映する構成とすることもできる。
　上述のような構成の歯科治療支援システム１００で実行される歯科治療支援処理の一例を、第１実施形態の各部との違いを明確にしつつ、図７のフローチャートを参照して説明する。
　歯科治療支援装置１０で、歯科治療支援プログラムが起動されると、サーバ３０との通信が開始され、データベース３２の製品情報や処理手順情報に更新があったときは、更新された情報をサーバ３０から受信し、記憶部１７を更新する（ステップＳ２０）。
　次に、ステップＳ２１では、表示画像制御部２６が使用用途選択画面４１（図３参照）を表示部４に表示する。ステップＳ２２で、入力情報取得部２３が、選択された使用用途の情報を取得する。ステップＳ２３で、使用用途に応じて、製品情報取得部２４が記憶部１７から製品名の一覧を取得し、ステップＳ２４で、表示画像制御部２６が使用製品選択画面４２を表示部４に表示する（図３参照）。ステップＳ２５で、入力情報取得部２３が使用製品の情報を取得する。
　ステップＳ２６では、情報処理部２は、撮影画像取得部２１が取得した撮影画像と、取得した使用用途の情報及び使用製品からなる入力情報を、サーバ３０へ送信する。ステップＳ２７では、サーバ３０の学習部３１が、使用用途の情報、使用製品に関する入力情報を参照しつつ、受信した撮影画像を解析して治療ステップを特定する。学習部３１が人工知能機能を備えているので、より高精度な解析が可能である。ステップＳ２８では、学習部３１が、治療ステップ及び入力情報に基づいて、データベース３２から、当該治療ステップに対応する処理手順、この処理手順の各工程で使用する歯科材料や器具等の情報を含む処理手順情報を取得する。
　次いで、ステップＳ２９では、サーバ３０が歯科治療支援装置１０へ取得した処理手順情報を送信する。これを受信した歯科治療支援装置１０では、ステップＳ３０で、表示画像制御部２６が、リアルタイムの撮影画像を撮影画像表示領域４３ａに、治療ステップに応じた歯科材料及び器具の画像を材料等表示領域４３ｂに、治療ステップに応じた処理手順や個々の処理工程を処理手順表示領域４３ｃに表示した支援画面４３を生成して表示部４の表示面４ａへ表示する。この支援画面４３を視認することで、歯科衛生士等は治療ステップ、必要な歯科材料、器具、処理手順を確認することができる。
　次いで、ステップＳ３１で、撮影画像解析部２２が撮影画像を解析して当該処理が開始されたか否かを判定する。この判定は、サーバ３０の学習部３１で行ってもよく、より高精度な判定が可能となる。処理が開始されない間は（ステップＳ３１の判定がＮＯ）、開始されるまでプログラムは待機し、処理が開始されたと判定したときは（ステップＳ３１の判定がＹＥＳ）、処理手順制御部２５は、処理時間の計測の必要があれば、ステップＳ３２に進んで処理時間のカウントやカウンタ画像４３ｄの表示を行い、時間になったらステップＳ３３でアラームを通知する。
　第４実施形態でも、予め設定した処理時間とは異なる時間や手順で歯科医師が処理を行ったときは、処理手順制御部２５は、実際の処理時間や手順を記憶しておくことで、後にサーバ３０の学習部３１が支援結果を分析するのに有用な情報とすることができる。
　次に、ステップＳ３４では、処理手順制御部２５が次の処理工程があるか否かを判定し、処理工程がある場合（ＹＥＳ）、ステップＳ２６に戻り、撮影画像のサーバ３０への送信、ステップＳ２７の撮影画像の解析、ステップＳ２８の処理手順情報の取得、ステップＳ２９の歯科治療支援装置１０への処理手順情報等の送信、ステップＳ３０の表示部４への支援画面４３の表示、ステップＳ３１の処理の実行の判定、必要に応じたステップＳ３２の処理時間のカウント等及びステップＳ３３のアラームの通知を順次実行する。これらのステップＳ２６～Ｓ３３の処理を、すべての処理工程が終わるまで（ステップＳ３４の判定がＮＯとなるまで）繰り返す。
　その後、ステップＳ３５に進んで、治療終了か否かを判定し、終了していない場合は（ＮＯ）、ステップＳ２１に戻って、次の治療ステップに関して、当該ステップＳ２１～Ｓ３４の処理を繰り返す。
　情報処理部２は、ステップＳ３５で治療が終了したと判定した場合（ＹＥＳ）、ステップＳ３６で、処理手順制御部２５が、撮影画像と、使用製品、使用用途及び実際の処理手順等の支援結果とを対応付けて記憶部１７へ記憶するとともにサーバ３０へ送信する。サーバ３０では、ステップＳ３７で、受信したこれらの情報を、歯科治療支援装置１０の識別番号等と対応付けてデータベース３２に記憶するとともに、必要に応じてこれらの情報を解析する。この解析に基づいて、乾燥や光照射のより適切な処理時間を設定する等、処理手順の内容を、より好適なものに変更し、データベース３２の処理手順情報を更新してもよい。
　また、必要に応じて、ステップＳ３８へと進み、データベース３２から製品の紹介情報（第１実施形態の紹介情報参照）を抽出し、歯科治療支援装置１０へ送信する。歯科治療支援装置１０では、ステップＳ３９で、表示画像制御部２６が、受信した紹介情報を表示部４に表示する。
　また、サーバ３０では、複数の歯科治療支援装置１０の支援結果を収集してデータベース３２へ蓄積し、蓄積した支援結果を、学習部３１に分析、学習させるようにしてもよい。これにより、歯科医師等が好んで使用する製品やその用途の傾向等を知ることができ、営業戦略、製品の改良及び新製品開発に有効に活用することができる。
　以上、第４実施形態の歯科治療支援システム１００では、歯科治療支援装置１０を備えていることで、歯科医師や歯科衛生士等が視認する表示部４に、撮像部１で撮影される治療対象のリアルタイムの撮影画像と、使用製品や使用用途に対応した処理手順とが表示される。また、人工知能機能を有する学習部３１を備えることで、治療ステップやその実行状態を、より詳細かつ高精度に特定することができる。そのため、人間の記憶等に頼らせることなく、治療ステップに対応する処理手順を的確にガイドすることができ、歯科治療をより適切に支援することが可能な歯科治療支援システム１００を提供することができる。
　また、サーバ３０と複数の歯科治療支援装置１０とを接続することで、様々な症例の支援結果をサーバ３０側で収集することができる。収集した支援結果を分析することで、製品の使用状況や歯科医師等の好む製品等の把握や、治療ステップに対するより好適な製品や使用手順の検討ができ、製品の改良や新製品の開発につなげることも可能となる。
（第５実施形態）
　次に、第５実施形態として、歯科製品販売促進装置及びこの歯科製品販売促進装置を用いた歯科製品販売促進方法について説明する。第５実施形態の歯科製品販売促進装置は、図１等に示す第１実施形態の歯科治療支援装置１０と、販売促進部と、を備えて構成される。本実施形態では、処理手順制御部２５を販売促進部として機能させている。
　販売促進部（処理手順制御部２５）は、歯科治療支援装置１０での支援結果に基づいて、使用した製品の購入サイトの情報又は使用した製品と用途が同じ別の製品の購入サイトの情報を、表示部４に表示する機能を有する。本実施形態では、歯科治療支援装置１０の処理手順制御部２５が、販売促進部として機能するが、この構成に限定されるものではない。変形例として、処理手順制御部２５とは別個に販売促進部を設けてもよいし、通信ネットワークを介して接続されたサーバ等に、販売促進部を設けてもよい。
　このような構成の歯科製品販売促進装置で実行される歯科材料販売促進方法は、第１実施形態の歯科治療支援装置１０で実行される歯科診療支援方法と同様の方法で得られた支援結果に基づいて、使用製品の購入サイトの情報又は使用用途が同じ別の製品の購入サイトの情報を、表示部４に表示する。このような購入サイトの情報として、例えば、購入サイトのＵＲＬを表示する。このＵＲＬをクリックすることで、購入サイトへと導くことができ、歯科医師等が必要とする製品の販売促進を、より効果的に行うことができる。
　以上、本開示の実施形態を図面により詳述してきたが、上記各実施形態は本開示の例示にしか過ぎないものであり、本開示は上記各実施形態の構成にのみ限定されるものではない。本開示の要旨を逸脱しない範囲の設計の変更等があっても、本開示に含まれることは勿論である。
関連出願への相互参照
　本出願は、２０１８年１０月１１日に日本国特許庁に出願された特願２０１８－１９２８６８に基づいて優先権を主張し、その全ての開示は完全に本明細書で参照により組み込まれる。

Claims (13)

  1. 　表示部と、
    　使用用途及び使用製品の少なくとも一方に関する入力情報が入力される入力部と、
    　複数の製品情報及び各製品の用途毎の処理手順情報が記憶される記憶部と、
    　前記入力部から入力される前記入力情報に対応する前記製品情報及び前記処理手順情報を前記記憶部から取得する製品情報取得部と、
    　前記処理手順情報から選択された所定の処理手順を前記表示部に表示する表示画像制御部と、
    を備えたことを特徴とする歯科治療支援装置。
  2. 　前記表示部が、ヘッドマウントディスプレイに設けられ、前記表示部は、前記処理手順を表示しつつ治療対象を視認可能に透過性を有していることを特徴とする請求項１に記載の歯科治療支援装置。
  3. 　前記処理手順の所定の工程が実行されたことを検出したときに、処理時間をカウントし、処理時間に達したときに、アラームを通知する処理手順制御部を備えていることを特徴とする請求項１又は２に記載の歯科治療支援装置。
  4. 　前記処理手順を音声で通知する処理手順制御部を備えていることを特徴とする請求項１～３のいずれか一項に記載の歯科治療支援装置。
  5. 　前記入力情報、前記製品情報、前記処理手順及び前記処理手順の実行結果を含む支援結果を前記記憶部に記憶する処理手順制御部を備えていることを特徴とする請求項１～４のいずれか一項に記載の歯科治療支援装置。
  6. 　前記支援結果に基づいて、使用した製品の紹介情報又は前記処理手順に対応する製品の紹介情報を、前記表示部に表示する処理手順制御部を備えていることを特徴とする請求項５に記載の歯科治療支援装置。
  7. 　治療対象を含む被治療者の口腔内を撮影する撮像部を備え、
    　前記表示画像制御部は、前記処理手順情報から選択された所定の処理手順及び前記撮像部で撮影される撮影画像を並べて前記表示部に表示することを特徴とする請求項１～６のいずれか一項に記載の歯科治療支援装置。
  8. 　前記撮影画像を解析して前記治療対象に対する治療ステップを特定する撮影画像解析部を備えていることを特徴とする請求項７に記載の歯科治療支援装置。
  9. 　人工知能機能を有する学習部を備えていることを特徴とする請求項１～８のいずれか一項に記載の歯科治療支援装置。
  10. 　歯科治療支援装置と、前記歯科治療支援装置と通信ネットワークを介して接続されるサーバと、を備え、
    　前記歯科治療支援装置は、
    　表示部と、
    　治療対象を含む被治療者の口腔内を撮影する撮像部と、
    　使用用途及び使用製品の少なくとも一方に関する入力情報が入力される入力部と、
    　前記撮像部で撮影された撮影画像及び前記入力部から入力される前記入力情報を前記サーバに送信する情報処理部と、を備え、
    　前記サーバは、人工知能機能を有する学習部と、
    　複数の製品情報及び各製品の用途毎の処理手順情報が記憶される記憶部と、を備え、
    　前記学習部は、前記歯科治療支援装置から前記通信ネットワークを介して前記撮影画像及び前記入力情報を取得し、前記撮影画像を解析して治療ステップを特定し、特定した前記治療ステップ及び前記入力情報に基づいて、前記記憶部から当該治療ステップに対応する前記処理手順情報を取得して前記歯科治療支援装置へ送信するように構成され、
    　前記歯科治療支援装置の前記情報処理部は、前記撮影画像と、前記学習部から取得した前記処理手順情報とを前記表示部に表示することを特徴とする歯科治療支援システム。
  11. 　請求項１～９のいずれか一項に記載の歯科治療支援装置で実行される歯科治療支援方法であって、
    　前記入力部から入力される前記入力情報に対応する前記製品情報及び前記処理手順情報を前記記憶部から取得する製品情報取得工程と、
    　前記処理手順情報から選択された所定の処理手順を前記表示部に表示する画像表示制御工程と、
    を有することを特徴とする歯科治療支援方法。
  12. 　コンピュータを、
    　製品情報及び処理手順情報が記憶される記憶手段、
    　治療対象を含む被治療者の口腔内が撮影された撮影画像を取得する撮影画像取得手段、　使用用途及び使用製品の少なくとも一方に関する入力情報を取得する入力情報取得手段、
    　前記入力情報に対応する前記製品情報及び前記処理手順情報を前記記憶手段から取得する製品情報取得手段、
    　前記処理手順情報から選択された所定の処理手順及び前記撮影画像を並べて表示手段に表示する表示画像制御手段として機能させるためのプログラム。
  13. 　請求項１～９のいずれか一項に記載の歯科治療支援装置と、
    　前記歯科治療支援装置での支援結果に基づいて、使用した製品の購入サイトの情報又は使用した製品と用途が同じ別の製品の購入サイトの情報を、前記表示部に表示する販売促進部と、
    を備えたことを特徴とする歯科製品販売促進装置。
PCT/JP2019/039984 2018-10-11 2019-10-10 歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置 WO2020075796A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP19870774.7A EP3865090A4 (en) 2018-10-11 2019-10-10 Dental treatment assistance device, dental treatment assistance system, dental treatment assistance method, dental treatment assistance program, and dental product sales promotion device
JP2020551218A JPWO2020075796A1 (ja) 2018-10-11 2019-10-10 歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置
US17/284,294 US20210338400A1 (en) 2018-10-11 2019-10-10 Dental treatment assistance device, dental treatment assistance system, dental treatment assistance method, dental treatment assistance program, and dental product sales promotion device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018192868 2018-10-11
JP2018-192868 2018-10-11

Publications (1)

Publication Number Publication Date
WO2020075796A1 true WO2020075796A1 (ja) 2020-04-16

Family

ID=70164614

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/039984 WO2020075796A1 (ja) 2018-10-11 2019-10-10 歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置

Country Status (4)

Country Link
US (1) US20210338400A1 (ja)
EP (1) EP3865090A4 (ja)
JP (1) JPWO2020075796A1 (ja)
WO (1) WO2020075796A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11842484B2 (en) 2021-01-04 2023-12-12 James R. Glidewell Dental Ceramics, Inc. Teeth segmentation using neural networks

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005267115A (ja) * 2004-03-17 2005-09-29 Masao Ito 歯科診療支援システム
JP2011212367A (ja) * 2010-04-01 2011-10-27 Toshimichi Mori 診断システム、３ｄ画像情報と実体との位置決め方法及び歯科診断システムを作動させるためのプログラム
JP2012203572A (ja) * 2011-03-24 2012-10-22 Morita Mfg Co Ltd 医療用診療装置
JP2015100437A (ja) * 2013-11-22 2015-06-04 京セラメディカル株式会社 外科手術用ナビゲーションシステム
US20160151117A1 (en) * 2014-12-02 2016-06-02 X-Nav Technologies, Inc. Visual Guidance Display For Surgical Procedure
JP2017200537A (ja) 2016-05-06 2017-11-09 岳 芳本 治療支援システム、治療支援装置、治療支援方法、及びコンピュータプログラム
JP2017202301A (ja) * 2016-05-10 2017-11-16 正樹 神原 歯肉診断支援装置および歯肉診断支援システム
JP2018153636A (ja) * 2017-03-17 2018-10-04 パロデクス・グループ・オサケユフティオ 撮像装置の自動プロトコル選択

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5974640B2 (ja) * 2012-06-01 2016-08-23 ソニー株式会社 歯用装置及び情報処理装置
FR3032282B1 (fr) * 2015-02-03 2018-09-14 Francois Duret Dispositif de visualisation de l'interieur d'une bouche
US20180036100A1 (en) * 2016-08-04 2018-02-08 eClear International Co., Ltd. Method and system for providing 3d teeth alignment image display services, and computer-readable medium on which the method is recorded
US10888399B2 (en) * 2016-12-16 2021-01-12 Align Technology, Inc. Augmented reality enhancements for dental practitioners
US11030746B2 (en) * 2018-01-18 2021-06-08 Chengdu Besmile Medical Technology Co., Ltd. Assisted dental beautification method and apparatus for implementing the same

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005267115A (ja) * 2004-03-17 2005-09-29 Masao Ito 歯科診療支援システム
JP2011212367A (ja) * 2010-04-01 2011-10-27 Toshimichi Mori 診断システム、３ｄ画像情報と実体との位置決め方法及び歯科診断システムを作動させるためのプログラム
JP2012203572A (ja) * 2011-03-24 2012-10-22 Morita Mfg Co Ltd 医療用診療装置
JP2015100437A (ja) * 2013-11-22 2015-06-04 京セラメディカル株式会社 外科手術用ナビゲーションシステム
US20160151117A1 (en) * 2014-12-02 2016-06-02 X-Nav Technologies, Inc. Visual Guidance Display For Surgical Procedure
JP2017200537A (ja) 2016-05-06 2017-11-09 岳 芳本 治療支援システム、治療支援装置、治療支援方法、及びコンピュータプログラム
JP2017202301A (ja) * 2016-05-10 2017-11-16 正樹 神原 歯肉診断支援装置および歯肉診断支援システム
JP2018153636A (ja) * 2017-03-17 2018-10-04 パロデクス・グループ・オサケユフティオ 撮像装置の自動プロトコル選択

Also Published As

Publication number Publication date
EP3865090A1 (en) 2021-08-18
JPWO2020075796A1 (ja) 2021-11-18
EP3865090A4 (en) 2022-06-29
US20210338400A1 (en) 2021-11-04

Similar Documents

Publication Publication Date Title
KR102093522B1 (ko) 환자에 의해 관리되는 물리 재활치료를 증강시키기 위한 비침습적 모션 추적 시스템, 장치, 및 방법
JP6878628B2 (ja) 生理学的モニタのためのシステム、方法、及びコンピュータプログラム製品
US20210166811A1 (en) Devices, Methods and Systems for Acquiring Medical Diagnostic Information and Provision of Telehealth Services
US10588486B2 (en) Multi-function video system with interchangeable medical tool
US20160270668A1 (en) Systems and apparatuses for monitoring blood pressure in real time
CN108430307A (zh) 视网膜图像捕获
JP2012157683A (ja) 歯科診療システム
GB2576479A (en) Dental care apparatus and method
KR20110125421A (ko) 구강 건강 관리 서비스 제공 시스템 및 구강 건강 관리 서비스 제공 방법
KR20180033106A (ko) 구강 내 x선 센서와 연동을 위한 휴대용 단말기 및 이를 이용한 구강 내 x선 촬영장치
WO2020075796A1 (ja) 歯科治療支援装置、歯科治療支援システム、歯科治療支援方法、歯科治療支援プログラム及び歯科製品販売促進装置
KR101519808B1 (ko) 3차원 공간 센서를 활용한 재활 치료 시스템
WO2014036546A1 (en) System for measuring skin hydration
US20220051406A1 (en) Dental imaging mixed reality system
JP2004283570A (ja) 健康管理システム
JP7209954B2 (ja) 眼振解析システム
US9560972B2 (en) Self-operated health monitoring device
TW202006508A (zh) 混合實境式動作功能評估系統
WO2023053260A1 (ja) 情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体
CN218567725U (zh) 一种增强影像系统
JP7131808B2 (ja) 装着型歯科診療装置および装着型歯科診療システム
CN114549524A (zh) 牙齿图像数据处理方法、电子设备及可读存储介质
WO2023022953A1 (en) System and method for intraoral identification
NZ624255A (en) Telemedicine device and related methods of use

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19870774

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020551218

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2019870774

Country of ref document: EP

Effective date: 20210511