JP6935036B1 - 統合されたカメラを有する歯科ミラーおよびそのアプリケーション - Google Patents

統合されたカメラを有する歯科ミラーおよびそのアプリケーション Download PDF

Info

Publication number
JP6935036B1
JP6935036B1 JP2021102213A JP2021102213A JP6935036B1 JP 6935036 B1 JP6935036 B1 JP 6935036B1 JP 2021102213 A JP2021102213 A JP 2021102213A JP 2021102213 A JP2021102213 A JP 2021102213A JP 6935036 B1 JP6935036 B1 JP 6935036B1
Authority
JP
Japan
Prior art keywords
image
mirror
image sensor
dental
item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021102213A
Other languages
English (en)
Other versions
JP2021154148A (ja
Inventor
オーデッド エラザール ギドン
オーデッド エラザール ギドン
ジドキアフ ハルカビ ダン
ジドキアフ ハルカビ ダン
イスラエル ワックスプレス ジョシュア
イスラエル ワックスプレス ジョシュア
ミリアム ハルカビ ヤエル
ミリアム ハルカビ ヤエル
Original Assignee
デンタル スマートミラー, インコーポレイテッド
デンタル スマートミラー, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by デンタル スマートミラー, インコーポレイテッド, デンタル スマートミラー, インコーポレイテッド filed Critical デンタル スマートミラー, インコーポレイテッド
Application granted granted Critical
Publication of JP6935036B1 publication Critical patent/JP6935036B1/ja
Publication of JP2021154148A publication Critical patent/JP2021154148A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000095Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00011Operational features of endoscopes characterised by signal transmission
    • A61B1/00016Operational features of endoscopes characterised by signal transmission using wireless means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00025Operational features of endoscopes characterised by power management
    • A61B1/00027Operational features of endoscopes characterised by power management characterised by power supply
    • A61B1/00032Operational features of endoscopes characterised by power management characterised by power supply internally powered
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00025Operational features of endoscopes characterised by power management
    • A61B1/00027Operational features of endoscopes characterised by power management characterised by power supply
    • A61B1/00032Operational features of endoscopes characterised by power management characterised by power supply internally powered
    • A61B1/00034Operational features of endoscopes characterised by power management characterised by power supply internally powered rechargeable
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00039Operational features of endoscopes provided with input arrangements for the user
    • A61B1/0004Operational features of endoscopes provided with input arrangements for the user for electronic operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00071Insertion part of the endoscope body
    • A61B1/0008Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00087Tools
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00105Constructional details of the endoscope body characterised by modular construction
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00195Optical arrangements with eyepieces
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0607Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for annular illumination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/063Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for monochromatic or narrow-band illumination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655Control therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0676Endoscope light sources at distal tip of an endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/24Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/24Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth
    • A61B1/247Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth with means for viewing areas outside the direct line of sight, e.g. dentists' mirrors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0004Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by the type of physiological signal transmitted
    • A61B5/0013Medical image data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/002Monitoring the patient using a local or closed circuit, e.g. in a room or building
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A61B5/0079Devices for viewing the surface of the body, e.g. camera, magnifying lens using mirrors, i.e. for self-examination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • A61B5/0086Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters using infrared radiation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/061Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/065Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/065Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
    • A61B5/067Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe using accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176Recognition of faces
    • A61B6/51
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C13/00Dental prostheses; Making same
    • A61C13/0003Making bridge-work, inlays, implants or the like
    • A61C13/0004Computer-assisted sizing or machining of dental prostheses
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C13/00Dental prostheses; Making same
    • A61C13/34Making or working of models, e.g. preliminary castings, trial dentures; Dowel pins [4]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C19/00Dental auxiliary appliances
    • A61C19/003Apparatus for curing resins by radiation
    • A61C19/004Hand-held apparatus, e.g. guns
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C19/00Dental auxiliary appliances
    • A61C19/04Measuring instruments specially adapted for dentistry
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C3/00Dental tools or instruments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00Impression cups, i.e. impression trays; Impression methods
    • A61C9/004Means or methods for taking digitized impressions
    • A61C9/0046Data acquisition means or methods
    • A61C9/0053Optical means or methods, e.g. scanning the teeth by a laser or light beam
    • A61C9/0073Interferometric means or methods, e.g. creation of a hologram
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21VFUNCTIONAL FEATURES OR DETAILS OF LIGHTING DEVICES OR SYSTEMS THEREOF; STRUCTURAL COMBINATIONS OF LIGHTING DEVICES WITH OTHER ARTICLES, NOT OTHERWISE PROVIDED FOR
    • F21V33/00Structural combinations of lighting devices with other articles, not otherwise provided for
    • F21V33/0064Health, life-saving or fire-fighting equipment
    • F21V33/0068Medical equipment
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/14Beam splitting or combining systems operating by reflection only
    • G02B27/144Beam splitting or combining systems operating by reflection only using partially transparent surfaces without spectral selectivity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0334Foot operated pointing devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20Finite element generation, e.g. wire-frame surface description, tesselation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/60Rotation of a whole image or part thereof
    • G06T5/92
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • G06T7/0016Biomedical image inspection using an image reference approach involving temporal comparison
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/51Housings
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60Context-dependent security
    • H04W12/69Identity-dependent
    • H04W12/73Access point logical identity
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B45/00Circuit arrangements for operating light-emitting diodes [LED]
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B45/00Circuit arrangements for operating light-emitting diodes [LED]
    • H05B45/20Controlling the colour of the light
    • H05B45/22Controlling the colour of the light using optical feedback
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/105Controlling the light source in response to determined parameters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0684Endoscope light sources using light emitting diodes [LED]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/04Constructional details of apparatus
    • A61B2560/0456Apparatus provided with a docking unit
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • A61B2576/02Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C2204/00Features not otherwise provided for
    • A61C2204/005Features not otherwise provided for using chip tag or any electronic identification mean, e.g. RFID
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F21LIGHTING
    • F21WINDEXING SCHEME ASSOCIATED WITH SUBCLASSES F21K, F21L, F21S and F21V, RELATING TO USES OR APPLICATIONS OF LIGHTING DEVICES OR SYSTEMS
    • F21W2131/00Use or application of lighting devices or systems not provided for in codes F21W2102/00-F21W2121/00
    • F21W2131/20Lighting for medical use
    • F21W2131/202Lighting for medical use for dentistry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/32Indexing scheme for image data processing or generation, in general involving image mosaicing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30036Dental; Teeth
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/22Cropping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation

Abstract

【課題】歯科器具を提供すること。【解決手段】開示される実施形態は、カメラを口腔内ミラーに統合する。カメラを口腔内ミラーに統合することは、ミラーにおいて医療提供者に見えるものを記録および表示するための効率的な方法を提供する。一実施形態において、歯科ミラーシステムは、歯科器具であって、歯科器具は、画像センサと、医療提供者が歯科器具をつかむことを可能にするハンドルと、ハンドルに取り付けられているミラー面とを備え、ミラー面は、医療提供者の視野の中に光を反射するように構成され、ミラー面は、少なくとも1つの側が画像センサに対して透明であるように構成されたパススルー面を備えている、歯科器具と、画像センサから画像を受信し、受信された画像内における医療提供者の場所を決定するように構成されている顔検出器モジュールと、画像分析器モジュールとを備えている。【選択図】図1

Description

(分野)
本分野は、概して、歯科器具に関する。
(関連技術)
マウスミラーとしても公知である、口腔内ミラーは、最も機能的であり、頻繁に使用される歯科器具である。口内の物体を直接視認することは、限定された、またはおそらく存在しない視線に起因して困難である。口腔内ミラーは、医療提供者(HCP)、例えば、歯科医、衛生学者、およびその他が、ミラーにおけるその反射を観察することによって、歯ならびに患者の歯肉および舌等の患者の口内の他の物体を間接的に視認することを可能にする。医療提供者は、限定ではないが、評価および診断、処置選択、さらには処置自体を補助することを含む、種々のタスクのために口腔内ミラーを使用する。医療提供者は、歯成形等の手技が直接可視ではないエリアにおいて実行されるとき、その手技を実行するために、ミラーと併せて歯科ハンドピース等の他のツールを使用し得る。
それらは、視覚援助として使用されるだけではなく、口腔内ミラーはまた、患者の口内の物体を操作または保護するための剛体ツールとして使用される。例えば、医療提供者は、患者の頬をシフトさせ、処置のための空間を作製する、または改良された可視性のために口空間を拡張するために、口腔内ミラーを使用し得る。加えて、口腔内ミラーは、口の他の部分が処置されている間、患者の口の軟組織および硬質組織構造を保護することができる。
口腔内ミラーは、患者のその口の内側の組織と接触するため、ミラーは、各処置後に滅菌を受ける。いくつかの場合では、滅菌は、「加圧滅菌」として公知のプロセスを使用して行われる。加圧滅菌は、おそらく蒸気を使用して、ミラーを高温および高圧に晒す。ミラーは、各処置後に滅菌されなければならないため、歯科オフィスは、複数のそのようなミラーを保有する。殆どがガラスおよび金属から作製されるミラーは、加圧滅菌プロセスに耐えることができる。しかし、頻繁な使用および滅菌に起因して、ミラーは、最終的に、その明瞭さおよびその反射性の一部を喪失し、したがって、交換を必要とする。
口腔内ミラーに加えて、口腔内カメラが、歯科診療所においてより普及してきている。口腔内カメラは、主として、2つの使用法を有する。第1に、口腔内カメラは、診断を描写し、可能性として考えられる処置を患者に説明するために使用される。例えば、診断または処置を説明するために、医療提供者は、患者の口部分(例えば、歯)の画像を患者に表示し得る。第2に、口腔内カメラは、患者の口の部分の状態を記録するために使用される。例えば、医療提供者は、処置の前後に患者の口の写真画像を捕捉し得る。
口腔内カメラは、一般的に、ペンとして成形され、その先端における画像捕捉デバイスが、横に向けられる。先端は、口の所望のエリアの画像を捕捉するために、カメラを位置付ける場所に関してHCPを正しい方向に導くことに役立つ。捕捉された画像は、ディスプレイにおいて提示され、ナビゲーションは、ディスプレイを使用して行われる。しかしながら、これらのディスプレイは、カメラのためのビューファインダにすぎないため、その使用は、歯科診察の時間を追加する。加えて、一般的な使用シナリオでは、医療提供者は、マウスミラーを使用して口検査を始め、画像を捕捉する必要性が生じた場合、HCPは、口腔内ミラーを口腔内カメラと切り替える必要があるであろう。これは、わずかな面倒に思える場合があるが、歯科診療所の忙しい環境では、これは、画像を捕捉する頻度を低減させる。
いくつかの歯科手技は、復元手技中、充填材を糊付けすること、または歯の上に構造を蓄積することを行うために、歯科複合樹脂材料を使用する。材料を適用した後、これは、ライトキュアと呼ばれる器具を使用して硬化される。ライトキュアは、可視青色から紫外線までのスペクトル内の光を用いて樹脂を照射するために使用される。この光は、眼に有害であり得、したがって、眼プロテクタが、ライトキュアを使用する間に医療提供者によって使用される。そのような手技を実施するために、医療提供者は、樹脂を歯に適用する。多くの場合では、着目歯を観察するために、医療提供者は、樹脂を適用しながらマウスミラーを使用する。完了すると、医療提供者は、器具をライトキュアに切り替え、樹脂が硬化するエリアを照射する。歯の上に材料を蓄積するとき、樹脂が適用され、硬化が続き、次いで、再び適用されるように、プロセスは、繰り返され、マウスミラーおよびライトキュア器具を繰り返し切り替えることを要求する。
歯科オフィスへの典型的な患者訪問中、医療提供者は、歯科歯カルテ記入としても公知の患者の現在の歯科ステータスを記録するであろう。歯科ステータスまたは歯科歯カルテは、人間の歯を描写する図であり、図内の各歯は、歯の条件の側面を示すようにマーキングされる。実施例では、マーキングは、歯が欠落している、過去に歯科処置を受けている、齲食病変を有している、または歯周疾患を有していることを示し得る。そのようなステータスは、患者の最新の条件を反映するために、時折更新される。図を検査することによって、医療提供者(HCP)は、患者の歯科健康ステータスについて迅速に精通し得る。
他の医療専門家のように、歯科医は、患者の歯科条件および処置を入念に記録ならびにアーカイブ化することによって、その作業を追跡する必要がある。そのような記録およびアーカイブ化を促進するために、コンピュータ化医療記録システムが存在する。概して、アーカイブ内にデータを追加する、またはその中のデータを修正する前に、医療提供者は、システムにログインし、処置を提供する人物として自身を識別する。ログイン後、医療提供者は、患者記録を選択し、現在の手技の説明、進行、および将来の処置に関する診断等、ファイル上の情報を読み出す、または追加の情報を患者の記録に追加することができる。患者の記録内の情報は、殆どがテキストである。画像も、記録され得るが、付随するテキストが、記録のために不可欠である。したがって、処置に関する入力は、通常、その終了時、便宜上および適切な衛生のための両方に関して、専門家がコンピュータキーボードを自由に使用することが可能なときに起こる。これらのコンピュータ化医療記録システムのいくつかは、現在のステータス図のデジタルバージョンを含み、種々の条件を表すために、種々のマークおよび色を用いて各歯をグラフで描写する。
患者の医療記録にデータを入力することは、時間がかかる。しかしながら、歯科オフィスを運営する際、効率が、重要である。管理タスクに費やされる時間が少ないことは、処置のためのより多くの時間をもたらす。良好に管理された診療所の特徴のうちの1つは、時間が効率的に使用されている程度である。その結果、いくつかの歯科医は、その歯科オフィスのための管理ツールとしてコンピュータ化システムを実装しているにもかかわらず、セッションのテキスト記述をシステムに入力するステップを避け、代わりに、手書きのメモを取り続けている。
歯科医学(歯列矯正学を含む)では、患者の口の3次元(3D)モデルを生成することを要求する複数の手技が存在する。現在、これらのモデルの多くは、石膏モデルのルーチン使用等の物理的材料を使用して作成される。最近では、3Dモデル化のデジタル表現の作成に関する技術および製品が、出現しており、そのモデルは、一般的に、「デジタル印象」と呼ばれる。これらの種々の製品は、それらが達成するデジタル3Dモデルの正確度において、および歯科医(または他の歯科医療提供者)が専用走査セッション中に費やす必要がある時間の量において変動する。
3D走査機械の一般的構造は、それから奥行き測度が抽出(計算)され得る口腔内測定を実施し、デジタルモデルを生産するために測定値を処理するコンピュータユニットに接続される、走査ヘッドから成る。口の3Dインプリントの作成は、このタスクのために具体的に分配された期間中、専用セッションにおいて必然的に実施される。
インプリントを生産するために必要とされる、プロセッサおよびメモリ容量等のコンピュータリソースは、相当なものである。奥行き測定値の取得は、区分において行われ、区分のそれぞれのサイズは、走査ヘッドによって取得され得る並行奥行き情報の量に従って決定される。次いで、概して、その区分の3Dモデルが、計算される。その後、種々の区分の位置合わせが、実施され、隣接するデジタル化された領域の1つの一貫したモデルへの「ステッチング」を可能にする。加えて、色が取得される場合、色付けする、および場合によっては、テクスチャを追加するプロセスが、実施される。追加のプロセスも、採用され得る。妥当な量の時間においてそのようなデジタルインプリントを生産するために要求されるコンピュータ処理能力は、したがって、相当なものである。
走査装置ヘッドにおいて実装される技術は、正確度および測度の両方に影響を及ぼす。これらの最も単純なものは、少なくとも電子コンポーネントの可用性の観点から測定されているとき、画像捕捉カメラを伴う走査装置ヘッドである。
画像のセットから奥行き情報を抽出するためのいくつかのアルゴリズムが存在し、合致点の識別または濃淡抽出もしくは他の概念を伴い、いわゆる「三角測量問題」の解決が続く。
実践では、短い期間における画像分析を通して正確な奥行き測定を達成することは、画像から抽出される情報の多くが、画像捕捉プロセスにおける歪みまたは口腔内物体の照明の不均一な反射のいずれかに起因する幾何学的雑音を呈する傾向にあるため、困難である。そのような不均一な照明の存在の理由のうちの1つは、一部のエリアがランバート反射を呈し得る一方、他のエリアが正反射を呈するためである。口腔内環境における唾液の存在は、これが、一部のエリアに、それらがそうでなければ呈さないであろう場合であっても、正反射を呈させ得るため、プロセスの正確度に対する、追加のかつ、時として、相当なハードルである。種々の角度からの口腔内物体の多数の捕捉された画像を使用することは、三角測量正確度を大幅に補助するであろうが、残念ながら、算出上の労力を増加させ、したがって、正確な計算のために要求される時間および処理能力の量を増加させるであろう。
患者の口からの患者画像を示し、患者の歯科ステータスを記録し、デジタル歯科印象を作成するためのより効率的な方法を提供するためのシステムおよび方法が、必要とされる。
(簡単な要約)
実施形態は、カメラを口腔内ミラーに統合する。カメラを口腔内ミラーに統合することは、ミラーにおいて医療提供者に見えるものを記録および表示するための効率的な方法を提供する。いくつかの実施形態では、口腔内ミラーから取得された画像は、歯科ステータスを捕捉し、デジタル歯科印象を生成するために使用される。
ある実施形態では、歯科ミラーシステムが、歯科器具と、顔検出器と、画像分析器とを含む。歯科器具は、画像センサと、医療提供者が歯科器具をつかむことを可能にするハンドルと、ハンドルに取り付けられ、医療提供者の視野の中に光を反射するミラー面とを含む。ミラー面は、少なくとも1つの側が画像センサに対して透明であるように構成されたパススルー面を含む。顔検出器は、画像センサから画像を受信し、受信された画像内の医療提供者の場所を決定する。顔検出器によって決定された場所に基づいて、画像分析器は、ミラー面上の医療提供者に見える画像センサからの画像の部分を決定する。
ある実施形態では、歯科器具は、加圧滅菌可能部分と、非加圧滅菌可能部分とを含む。加圧滅菌可能部分は、加圧滅菌されることが可能であり、ミラー面と、付属品とを含む。ミラー面は、医療提供者の視野の中に光を反射する。これは、少なくとも1つの側が歯科器具に取り付けられた画像センサに対して透明であるように構成されたパススルー面を含む。付属品は、ミラー面を患者の口の中に延長するためにミラー面に取り付けられる。非加圧滅菌可能部分は、加圧滅菌可能部分に取り外し可能に接続され、加圧滅菌されるように構成されない。これは、画像センサから捕捉された画像を伝送するように構成されたプロセッサと、プロセッサおよび画像センサに給電するように構成された電力供給源とを含む。
ある実施形態では、方法が、患者の歯科ステータスを表す画像を捕捉する。本方法では、患者の口の内部の複数の写真が、受信される。また、受信されるものは、それぞれの写真のための関連付けられた位置情報である。複数の写真は、歯科ミラーに取り付けられた画像センサから収集される。複数の写真の一つ一つは、少なくとも部分的に複数の写真のうちの別の1つと重複する。重複している部分において、複数の写真間で合致する特徴が、決定される。それぞれの写真のための関連付けられた位置情報および合致する特徴に基づいて、複数の写真は、一連の隣接する歯を表すために整列させられ、これは、歯の位置を合致させるように整列させられる。最後に、整列させられた写真は、患者の口の少なくとも一部の状態を表すパノラマ画像にステッチされる。
ある実施形態では、システムが、歯科医のオフィスの部屋内で歯科治療を提供する。本システムは、歯科ミラーと、ベースステーションとを備えている。歯科ミラーは、ハンドルと、反射面と、画像センサと、プロセッサと、電力供給源とを含む。ハンドルは、医療提供者が歯科ミラーをつかむことを可能にする。反射面は、患者の口の内部のビューを医療提供者に向かって反射するように構成される。画像センサは、反射面において医療提供者に見えるものを含む画像を捕捉することが可能である。プロセッサは、画像センサから収集された画像を伝送することが可能である。また、電力供給源は、プロセッサおよび画像センサに給電するように構成される。ベースステーションは、歯科ミラーと無線通信し、画像センサから収集された画像を受信する。ベースステーションは、歯科ミラーとドッキングし、接続されると、歯科ミラーの電力供給源を充電するように構成されたクレードルを備えている。
ある実施形態では、方法が、患者の口内の写真を捕捉する。本方法では、歯科ミラーに取り付けられた画像センサから捕捉された画像が、受信される。歯科ミラーは、複数の光源を有する。画像の一部が、画像の別の部分よりも暗いことを決定される。どの部分がより暗いと決定されたかに基づいて、ある光源が、これが他の部分よりもその部分をより明るく照射するように、複数の光源から選択される。選択された光源の輝度は、増加される。
別の実施形態では、方法が、歯科器具の電力消費を制御する。口腔内ミラーが、それが使用中ではないときを決定するように監視される。口腔内ミラーは、統合されたカメラを含む。歯科ミラーが使用中ではないと決定された場合、口腔内ミラーは、口腔内ミラーによって消費される電力の量を低減させるスタンバイモードに投入される。
ある実施形態では、歯科ミラーシステムが、患者の口を照射する。本システムは、歯科器具と、画像分析器モジュールと、まぶしさ回避モジュールとを含む。歯科器具は、画像センサと、複数の光源と、医療提供者が歯科器具をつかむことを可能にするハンドルと、ハンドルに取り付けられるミラー面とを含む。ミラー面の1つの側は、医療提供者の視野の中に光を反射するように構成された反射面と、画像センサに到達するようにミラー面の別の側に光を透過するパススルー面とを含む。画像分析器モジュールは、画像センサによって感知された画像内の物体を認識するように構成される。まぶしさ回避モジュールは、画像分析器モジュールによって認識された物体の場所に基づいて、複数の光源を設定し、光を向かわせ、医療提供者の目をまぶしくすることを回避するように構成される。
ある実施形態では、歯科器具が、歯科材料を硬化させるように構成される。歯科器具は、ハンドルと、ミラー面と、光源とを含む。ハンドルは、医療提供者が歯科器具をつかむことを可能にする。ミラー面は、ハンドルに取り付けられる。ミラー面の1つの側は、医療提供者の視野の中に光を反射するように構成された反射面を備えている。光源は、歯科材料を硬化させる光を放出するように構成される。歯科材料は、歯の上に適用されているとき、反射面上で医療提供者に見える。
ある実施形態では、方法が、患者の口の3次元モデルを捕捉する。患者の口の内部の複数の写真が、受信される。また、それぞれの写真のための関連付けられた位置情報が、受信される。複数の写真は、歯科ミラーに取り付けられた画像センサから収集される。複数の写真の一つ一つは、少なくとも部分的に複数の写真のうちの別の1つと重複する。重複する部分および位置情報は、内部の複数の写真に基づいて、分析され、表面点のセットを生成する。表面点のセットに基づいて、患者の歯の歯科印象を表す3次元モデルを生成する。
他のシステム、方法、およびコンピュータプログラム製品実施形態も、開示される。
本発明のさらなる実施形態、特徴、および利点、ならびに種々の実施形態の構造および動作が、付随の図面を参照して、下記に詳細に説明される。
本願明細書は、例えば、以下の項目も提供する。
(項目1)
歯科ミラーシステムであって、前記歯科ミラーシステムは、
歯科器具であって、前記歯科器具は、
画像センサと、
医療提供者が前記歯科器具をつかむことを可能にするハンドルと、
前記ハンドルに取り付けられているミラー面と
を備え、前記ミラー面は、前記医療提供者の視野の中に光を反射するように構成され、前記ミラー面は、少なくとも1つの側が前記画像センサに対して透明であるように構成されたパススルー面を備えている、歯科器具と、
前記画像センサから画像を受信し、前記受信された画像内における前記医療提供者の前記場所を決定するように構成されている顔検出器モジュールと、
画像分析器モジュールと
を備え、
前記画像分析器モジュールは、前記顔検出器モジュールによって決定された前記場所に基づいて、前記ミラー面において前記医療提供者に見える前記画像センサから受信された画像の部分を決定するように構成されている、歯科ミラーシステム。
(項目2)
前記画像分析器モジュールは、前記ミラー面上の入射点から前記医療提供者に向かって延長された第1の光線と前記ミラー面上の入射点から前記ミラー面において前記医療提供者に見える物体に向かって延長された第2の光線とが、前記入射点における前記ミラー面の法線に対して同様の角度を有するように、前記医療提供者に見える前記部分を決定するように構成されている、項目1に記載の歯科ミラーシステム。
(項目3)
前記顔検出器モジュールは、前記受信された画像内における前記医療提供者の座標を決定するように構成され、前記座標は、前記受信された画像の中心における原点に関連し、
前記画像分析器モジュールは、前記顔検出器モジュールによって決定された前記座標の逆数に基づいて、前記医療提供者に見える前記部分の座標を決定するように構成されている、項目1に記載の歯科ミラーシステム。
(項目4)
前記歯科器具は、前記歯科器具の向きを決定するためにデータを収集するように構成されている向き測定デバイスをさらに備え、
前記システムは、前記歯科器具の前記決定された向きに従って、前記画像分析器モジュールによって決定された前記部分を向け直す画像向きモジュールをさらに備えている、項目1に記載の歯科ミラーシステム。
(項目5)
前記顔検出器モジュールは、前記画像センサから受信された画像における前記医療提供者の眼の角度を決定するように構成され、前記システムは、前記医療提供者の眼の前記決定された角度に従って、前記画像分析器モジュールによって決定された前記部分を向け直すように構成されている画像向きモジュールをさらに備えている、項目1に記載の歯科ミラーシステム。
(項目6)
前記受信された画像における歯の場所を決定し、前記画像分析器モジュールによって決定された前記部分を向け直し、前記歯を縦置きの向きに向けるように構成されている画像向きモジュールをさらに備えている、項目1に記載の歯科ミラーシステム。
(項目7)
前記顔検出器モジュールは、前記受信された画像における複数の顔を検出し、前記医療提供者の顔を前記複数の顔のうちの1つとして認識するように構成され、前記顔検出器モジュールは、前記医療提供者の認識された顔の場所に基づいて、前記受信された画像内における前記医療提供者の前記場所を決定する、項目1に記載の歯科ミラーシステム。
(項目8)
前記顔検出器モジュールは、前記受信された画像における複数の顔を検出し、前記複数の顔のうちのどれが前記受信された画像内において最も大きいかを決定し、前記顔検出器モジュールは、前記複数の顔のうちの前記最も大きいものの場所に基づいて、前記受信された画像内における前記医療提供者の前記場所を決定する、項目1に記載の歯科ミラーシステム。
(項目9)
前記画像分析器モジュールは、前記画像を捕捉することに続いて、前記画像センサから捕捉された別の画像を受信し、前記顔検出器モジュールによって決定された前記場所に基づいて、前記ミラー面において前記医療提供者に見える前記他の画像の部分を決定するように構成されている、項目1に記載の歯科ミラーシステム。
(項目10)
患者への提示のために、前記医療提供者に見えていることを前記画像分析器モジュールによって決定された前記部分をクロッピングするように構成されている画像クロッパモジュールをさらに備えている、項目1に記載の歯科ミラーシステム。
(項目11)
前記歯科器具は、前記医療提供者の顔の少なくとも一部と前記医療提供者に見える患者の口の一部との両方を同時に捕捉するために十分に広い視野を有するレンズをさらに備えている、項目1に記載の歯科ミラーシステム。
(項目12)
前記画像分析器モジュールは、前記レンズの前記視野によって引き起こされる歪みを補正するように構成されている、項目11に記載の歯科ミラーシステム。
(項目13)
歯科器具であって、前記歯科器具は、
画像センサと、
医療提供者の視野の中に光を反射するように構成されているミラー面であって、前記ミラー面は、少なくとも1つの側が前記画像センサに対して透明であるように構成されたパススルー面を備えている、ミラー面と、
医療提供者が前記歯科器具をつかむことを可能にするハンドルと、
前記パススルー面と前記画像センサとの間に置かれているレンズと
を備え、
前記レンズは、前記医療提供者の顔の少なくとも部分と前記医療提供者に見える患者の口の部分との両方を同時に捕捉するために十分に広い視野を有し、
前記画像センサは、画像を捕捉するように構成され、前記捕捉された画像内における前記医療提供者の場所が、決定され、前記ミラー面において前記医療提供者に見える前記画像センサからの前記画像の部分が、前記医療提供者の前記決定された場所に基づいて決定される、歯科器具。
(項目14)
前記画像内における前記医療提供者の座標が、顔検出器モジュールによって決定され、前記医療提供者の前記座標は、前記画像の中心における原点に関連し、前記医療提供者に見える画像の前記部分の座標は、前記顔検出器モジュールによって決定された前記座標の逆数であるように決定される、項目13に記載の歯科器具。
(項目15)
前記歯科器具の向きを決定するためにデータを収集するように構成されている向き測定デバイスと、
前記歯科器具の前記決定された向きに従って、画像分析器によって決定された前記部分を向け直すように構成されている画像向きモジュールと
をさらに備えている、項目13に記載の歯科器具。
(項目16)
前記患者の口の前記部分を照射するように向けられる照明デバイスをさらに備え、前記患者の口の前記部分は、前記医療提供者に見える、項目13に記載の歯科器具。
(項目17)
患者の口の画像を捕捉するためのコンピュータ実装方法であって、前記方法は、
歯科ミラーを使用する医療提供者の少なくとも部分および前記歯科ミラーにおいて前記医療提供者に見える物体の両方を含む画像を受信することであって、前記画像は、前記歯科ミラーに取り付けられた画像センサから捕捉される、ことと、
前記受信された画像内における前記医療提供者の顔の場所を検出することと、
前記医療提供者の顔の前記検出された場所に基づいて、前記画像のどの部分が前記歯科ミラーにおいて前記医療提供者に見えるかを決定することと
を含む、方法。
(項目18)
前記決定することは、前記歯科ミラーの表面上の入射点から前記医療提供者に向かって延長された第1の光線と前記歯科ミラーの表面上の入射点から前記物体に向かって延長された第2の光線とが、前記入射点における前記歯科ミラーの表面の法線に対して同様の角度を有するように、前記医療提供者に見える部分を決定することを含む、項目17に記載の方法。
(項目19)
前記検出することは、前記受信された画像内における前記医療提供者の座標を決定することを含み、前記座標は、前記受信された画像の中心における原点に関連し、
前記決定することは、前記医療提供者の前記座標の逆数に基づいて、前記医療提供者に見える前記部分の座標を決定することを含む、項目17に記載の方法。
(項目20)
前記歯科ミラーの向きを受信することと、
前記歯科ミラーの前記向きに従って、決定された前記画像の前記部分を向けることと
をさらに含む、項目17に記載の方法。
(項目21)
歯科ミラーシステムであって、前記歯科ミラーシステムは、
歯科器具であって、前記歯科器具は、
画像センサと、
医療提供者が前記歯科器具をつかむことを可能にするハンドルと、
前記ハンドルに取り付けられているミラー面であって、前記ミラー面は、前記医療提供者の視野の中に光を反射するように構成され、前記ミラー面は、少なくとも1つの側が前記画像センサに対して透明であるように構成されたパススルー面を備えている、ミラー面と、
前記歯科器具の向きを決定するためにデータを収集するように構成されている向き測定デバイスと
を備えている、歯科器具と、
前記歯科器具の前記決定された向きに従って、前記画像センサによって捕捉された画像を向け直すように構成されている画像向きモジュールと
を備えている、歯科ミラーシステム。
(項目22)
歯科器具であって、前記歯科器具は、
画像センサと、
加圧滅菌されることが可能である加圧滅菌可能部分であって、前記加圧滅菌可能部分は、
医療提供者の視野の中に光を反射するためのミラー面であって、少なくとも1つの側が前記画像センサに対して透明であるように構成されたパススルー面を備えている、ミラー面と、
前記ミラー面を患者の口の中に延長するために前記ミラー面に取り付けられている付属品と
を備えている、加圧滅菌可能部分と、
前記加圧滅菌可能部分に取り外し可能に接続され、加圧滅菌されるように構成されていない非加圧滅菌可能部分と
を備え、
前記非加圧滅菌可能部分は、
前記画像センサから捕捉された画像を伝送するように構成されているプロセッサと、
前記プロセッサおよび前記画像センサに給電するように構成されている電力供給源と
を備えている、歯科器具。
(項目23)
前記加圧滅菌可能部分は、前記画像センサの視野の少なくとも一部を照射するために前記ミラー面の周辺に取り付けられた複数の照明デバイスをさらに備えている、項目22に記載の歯科器具。
(項目24)
前記非加圧滅菌可能部分は、前記画像センサを備え、前記加圧滅菌可能部分は、前記患者の口の中に挿入されるように前記非加圧滅菌可能部分の一部を封入する少なくとも2つの部品に取り外し可能である、項目22に記載の歯科器具。
(項目25)
前記加圧滅菌可能部分は、少なくとも1つの側が前記画像センサに対して透明であるように構成された前記パススルー面の後方に置かれたレンズをさらに備えている、項目22に記載の歯科器具。
(項目26)
前記加圧滅菌可能部分は、前記画像センサを備えている、項目25に記載の歯科器具。(項目27)
前記付属品は、
前記非加圧滅菌可能部分から電力を受電することが可能であり、前記画像センサから収集されたデータを前記非加圧滅菌可能部分に伝送するためのコネクタと、
前記コネクタを覆うことが可能であり、加圧滅菌プロセス中に水を通さない蓋と
を含む、項目26に記載の歯科器具。
(項目28)
前記非加圧滅菌可能部分は、前記画像センサを備え、
前記加圧滅菌可能部分は、前記パススルー面から前記画像センサに向かって光を透過する光パイプまたはプリズムを備えている、項目22に記載の歯科器具。
(項目29)
前記加圧滅菌可能部分は、ジャイロスコープと、加速度計とを備え、前記ジャイロスコープおよび前記加速度計は、前記付属品の内部に取り付けられている、項目28に記載の歯科器具。
(項目30)
前記付属品は、中空空洞を含み、
前記非加圧滅菌可能部分は、前記中空空洞の中に挿入されるように構成されたアームを備え、前記画像センサは、前記アームに取り付けられ、前記アームが前記中空空洞の中に挿入されると、前記光パイプまたはプリズムと結合する、項目22に記載の歯科器具。
(項目31)
前記加圧滅菌可能部分は、ジャイロスコープを備え、前記ジャイロスコープは、前記付属品の内部に取り付けられている、項目22に記載の歯科器具。
(項目32)
前記加圧滅菌可能部分は、加速度計を備え、前記加速度計は、前記付属品の内部に取り付けられている、項目22に記載の歯科器具。
(項目33)
前記非加圧滅菌可能部分は、ジャイロスコープと、加速度計とを備え、前記非加圧滅菌可能部分は、前記加圧滅菌可能部分に取り付けられているとき、それが前記加圧滅菌可能部分に対して移動させられることができないように前記加圧滅菌可能部分に取り付けられている、項目22に記載の歯科器具。
(項目34)
前記非加圧滅菌可能部分は、ジャイロスコープを備え、前記非加圧滅菌可能部分は、前記加圧滅菌可能部分に取り付けられているとき、それが前記加圧滅菌可能部分に対して移動させられることができないように前記加圧滅菌可能部分に取り付けられている、項目22に記載の歯科器具。
(項目35)
前記非加圧滅菌可能部分は、加速度計を備え、前記非加圧滅菌可能部分は、前記加圧滅菌可能部分に取り付けられているとき、それが前記加圧滅菌可能部分に対して移動させられることができないように前記加圧滅菌可能部分に取り付けられている、項目22に記載の歯科器具。
(項目36)
前記非加圧滅菌可能部分は、画像が前記画像センサから捕捉されるべきときを示す前記医療提供者からの入力を収集するように構成されているボタンを備えている、項目22に記載の歯科器具。
(項目37)
前記非加圧滅菌可能部分は、前記医療提供者が前記歯科器具をつかむためのハンドルを備えている、項目22に記載の歯科器具。
(項目38)
加圧滅菌可能な歯科器具の装置であって、前記装置は、
医療提供者の視野の中に光を反射するミラー面であって、前記ミラー面は、少なくとも1つの側が前記歯科器具に取り付けられた画像センサに対して透明であるように構成されたパススルー面を備えている、ミラー面と、
前記ミラー面を患者の口の中に延長するために前記ミラー面に取り付けられている付属品であって、前記ミラー面および前記付属品は、加圧滅菌されることが可能である、付属品と、
前記付属品に取り付けられているコネクタと
を備え、
前記コネクタは、加圧滅菌されるように構成されていない部分に取り外し可能に接続されるように適合され、前記部分は、前記画像センサから捕捉された画像を伝送するように構成されたプロセッサと、前記プロセッサおよび前記画像センサに給電するように構成された電力供給源とを備えている、装置。
(項目39)
光を前記画像センサに向かって屈折させるために前記パススルー面の後方に置かれているレンズをさらに備え、前記レンズは、前記医療提供者の顔および前記医療提供者に見える前記患者の口の一部の両方を同時に捕捉するために十分に広い視野を有する、項目38に記載の装置。
(項目40)
前記コネクタは、加圧滅菌されるように構成されていない部分に電気的に接続するように適合されている、項目38に記載の装置。
(項目41)
前記画像センサの視野の少なくとも一部を照射するために前記ミラー面の周辺に取り付けられた複数の照明デバイスをさらに備えている、項目40に記載の装置。
(項目42)
前記画像センサをさらに備えている、項目40に記載の装置。
(項目43)
加速度計をさらに備え、前記加速度計は、前記付属品の内部に取り付けられている、項目40に記載の装置。
(項目44)
ジャイロスコープをさらに備え、前記ジャイロスコープは、前記付属品の内部に取り付けられている、項目40に記載の装置。
(項目45)
前記コネクタを覆うことが可能であり、加圧滅菌プロセス中に水を通さない蓋をさらに備えている、項目38に記載の装置。
(項目46)
前記付属品は、中空空洞を含み、
前記非加圧滅菌可能部分は、前記中空空洞の中に挿入されるように構成されたアームをさらに備え、前記画像センサは、前記アームに取り付けられ、前記アームが前記中空空洞の中に挿入されると、前記パススルー面と結合する、項目38に記載の装置。
(項目47)
歯科器具のためのハンドルであって、前記ハンドルは、
前記歯科器具に取り付けられた画像センサから捕捉された画像を伝送するように構成されているプロセッサと、
前記プロセッサおよび前記画像センサに給電するように構成されている電力供給源と、
加圧滅菌可能部分に取り外し可能に接続するように適合されているコネクタと
を備え、
前記加圧滅菌可能部分は、
医療提供者の視野の中に光を反射するミラー面であって、前記ミラー面は、少なくとも1つの側が前記画像センサに対して透明であるように構成されたパススルー面を備えている、ミラー面と、
前記ミラー面を患者の口の中に延長するために前記ミラー面に取り付けられている付属品と
を備え、
前記ミラー面および前記付属品は、加圧滅菌されることが可能である、ハンドル。
(項目48)
画像が前記画像センサから捕捉されるべきときを示す前記医療提供者からの入力を収集するように構成されたボタンをさらに備えている、項目47に記載のハンドル。
(項目49)
ジャイロスコープまたは加速度計をさらに備えている、項目47に記載のハンドル。
(項目50)
マイクロホンをさらに備え、前記プロセッサは、前記マイクロホンによって捕捉された音声を伝送するように構成されている、項目47に記載のハンドル。
(項目51)
複数の照明デバイスをさらに備え、前記加圧滅菌可能部分は、前記複数の照明デバイスからの光を透過し、前記画像センサの視野の少なくとも一部を照射するようにさらに適合されている、項目47に記載のハンドル。
(項目52)
患者の歯科ステータスを表す画像を捕捉する方法であって、前記方法は、
(a)(i)患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報とを受信することであって、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、少なくとも部分的に前記複数の写真のうちの別の1つと重複している、ことと、
(b)前記重複している部分において、複数の写真間で合致する特徴を決定することと、
(c)前記それぞれの写真のための関連付けられた位置情報と前記合致する特徴とに基づいて、前記複数の写真を整列させ、一連の隣接する歯を表すことと、
(d)前記患者の口の内部の前記複数の写真を前記患者の口の少なくとも一部の状態を表すパノラマ画像にステッチすることと
を含む、方法。
(項目53)
(a)において受信された前記患者の口の内部の前記複数の写真は、前記患者の口の歯科処置の前に取得され、
前記方法は、
(e)(i)前記歯科処置後の前記患者の口の内部の別の複数の写真と、(ii)前記それぞれの他の写真のための関連付けられた位置情報とを受信することであって、前記他の複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記他の複数の写真の一つ一つは、少なくとも部分的に前記他の複数の写真のうちの別の1つと重複している、ことと、
(f)前記他の複数の写真の重複している部分において、(e)において受信された複数の写真間で合致する特徴を決定することと、
(g)前記それぞれの他の写真のための前記関連付けられた位置情報と、(f)において決定された前記合致する特徴とに基づいて、前記他の複数の写真を整列させ、一連の隣接する歯を表すことと、
(h)前記患者の口の内部の前記他の複数の写真を前記患者の口の少なくとも一部の状態を表す別のパノラマ画像にステッチし、前記歯科処置の前後の前記患者の口を比較することと
をさらに含む、項目52に記載の方法。
(項目54)
(e)前記パノラマ画像が実質的に均一な輝度を有するように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間の輝度における変動を考慮することをさらに含む、項目52に記載の方法。
(項目55)
(e)前記パノラマ画像が前記患者の口を比例的に表すように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間のスケールにおける変動を考慮することをさらに含む、項目52に記載の方法。
(項目56)
ステップ(a)−(d)は、前記歯科ミラーから遠隔のサーバ上で起こり、前記受信すること(a)は、コンピュータネットワークを介して前記複数の写真および関連付けられた位置情報を受信することを含む、項目52に記載の方法。
(項目57)
前記患者の口の内部の前記複数の写真は、複数の異なる歯科往診中に収集される、項目52に記載の方法。
(項目58)
(e)前記ステッチされたパノラマ画像上の点を前記患者の口内における前記点が表す場所を表す別の画像に関連付けることをさらに含む、項目52に記載の方法。
(項目59)
前記他の画像は、X線画像である、項目58に記載の方法。
(項目60)
患者の歯科ステータスを表す画像を捕捉する方法を実施するための少なくとも1つの機械によって実行可能な命令のプログラムを有形に具現化するプログラム記憶デバイスであって、前記方法は、
(a)(i)患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報とを受信することであって、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、少なくとも部分的に前記複数の写真のうちの別の1つと重複している、ことと、
(b)前記重複している部分において、複数の写真間で合致する特徴を決定することと、
(c)前記それぞれの写真のための前記関連付けられた位置情報と前記合致する特徴とに基づいて、前記複数の写真を整列させ、一連の隣接する歯を表すことと、
(d)前記患者の口の内部の前記複数の写真を前記患者の口の少なくとも一部の状態を表すパノラマ画像にステッチすることと
を含む、プログラム記憶デバイス。
(項目61)
(a)において受信された前記患者の口の内部の前記複数の写真は、前記患者の口の歯科処置の前に取得され、前記方法は、
(e)(i)前記歯科処置後の前記患者の口の内部の別の複数の写真と、(ii)前記それぞれの他の写真のための関連付けられた位置情報とを受信することであって、前記他の複数の写真は、前記歯科ミラーに取り付けられた画像センサから収集され、前記他の複数の写真の一つ一つは、少なくとも部分的に前記他の複数の写真のうちの別の1つと重複している、ことと、
(f)前記他の複数の写真の重複している部分において、(e)において受信された複数の写真間で合致する特徴を決定することと、
(g)前記それぞれの他の写真のための前記関連付けられた位置情報と、(f)において決定された前記合致する特徴とに基づいて、前記他の複数の写真を整列させ、一連の隣接する歯を表すことと、
(h)前記患者の口の内部の前記他の複数の写真を前記患者の口の少なくとも一部の状態を表す別のパノラマ画像にステッチし、前記歯科処置の前後の前記患者の口を比較することと
をさらに含む、項目60に記載のプログラム記憶デバイス。
(項目62)
前記方法は、(e)前記パノラマ画像が実質的に均一な輝度を有するように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間の輝度における変動を考慮することをさらに含む、項目60に記載のプログラム記憶デバイス。
(項目63)
前記方法は、(e)前記パノラマ画像が前記患者の口を比例的に表すように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間のスケールにおける変動を考慮することをさらに含む、項目60に記載のプログラム記憶デバイス。
(項目64)
ステップ(a)−(d)は、前記歯科ミラーから遠隔のサーバ上で起こり、前記受信すること(a)は、コンピュータネットワークを介して前記複数の写真および関連付けられた位置情報を受信することを含む、項目60に記載のプログラム記憶デバイス。
(項目65)
前記患者の口の内部の前記複数の写真は、複数の異なる歯科往診中に収集される、項目60に記載のプログラム記憶デバイス。
(項目66)
前記方法は、(e)前記ステッチされたパノラマ画像上の点を前記患者の口内の同一の場所を表すX線画像に関連付けることをさらに含む、項目60に記載のプログラム記憶デバイス。
(項目67)
患者の歯科ステータスを表す画像を捕捉するためのシステムであって、前記システムは、
プロセッサと、
患者の口の履歴パノラマ画像を含む履歴患者ステータス情報を記憶する患者ステータスデータベースと、
前記プロセッサ上で実行されるサーバであって、前記サーバは、(i)前記患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報とを受信し、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、少なくとも部分的に前記複数の写真のうちの別の1つと重複する、サーバと
を備え、
前記サーバは、パノラマステッチャモジュールを備え、前記パノラマステッチャモジュールは、
(i)前記重複している部分において、複数の写真間で合致する特徴を決定することと、
(ii)前記それぞれの写真のための前記関連付けられた位置情報と前記合致する特徴とに基づいて、前記複数の写真を整列させ、一連の隣接する歯を表すことと、
(iii)前記患者の口の内部の前記複数の写真を前記患者の口の少なくとも一部の状態を表すパノラマ画像にステッチすることと
を行う、システム。
(項目68)
前記パノラマステッチャモジュールは、前記パノラマ画像が前記患者の口を比例的に表すように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間のスケールにおける変動を考慮する、項目67に記載のシステム。
(項目69)
前記パノラマステッチャモジュールは、前記パノラマ画像が実質的に均一な輝度を有するように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間の輝度における変動を考慮する、項目67に記載のシステム。
(項目70)
患者の歯科ステータスを表す没入型写真を捕捉する方法であって、前記方法は、
(a)(i)患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報とを受信することであって、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、少なくとも部分的に前記複数の写真のうちの別の1つと重複し、前記複数の写真は、前記患者の口の内側の同一の場所の周りで、種々の角度において捕捉される、ことと、
(b)前記重複している部分において、複数の写真間で合致する特徴を決定することと、
(c)前記それぞれの写真のための前記関連付けられた位置情報と前記合致する特徴とに基づいて、前記複数の写真を前記写真が捕捉された種々の角度を表す球体上にマッピングすることと、
(d)球体としてモデル化され、前記患者の口の少なくとも一部の状態を表す没入型写真に前記患者の口の内部の前記複数の写真をステッチすることと
を含む、方法。
(項目71)
(a)において受信された前記患者の口の内部の前記複数の写真は、前記患者の口の歯科処置の前に取得され、
前記方法は、
(e)(i)前記歯科処置後の前記患者の口の内部の別の複数の写真と、(ii)前記それぞれの他の写真のための関連付けられた位置情報とを受信することであって、前記他の複数の写真は、前記歯科ミラーに取り付けられた画像センサから収集され、前記他の複数の写真の一つ一つは、少なくとも部分的に前記他の複数の写真のうちの別の1つと重複し、前記他の複数の写真は、前記患者の口の内側の同一の場所の周りで、種々の角度において捕捉される、ことと、
(f)前記他の複数の写真の重複している部分において、(e)において受信された複数の写真間で合致する特徴を決定することと、
(g)前記それぞれの他の複数の写真のための前記関連付けられた位置情報と、(f)において決定された前記合致する特徴とに基づいて、前記他の複数の写真を前記写真が捕捉された種々の角度を表す球体上にマッピングすることと、
(h)球体としてモデル化され、前記患者の口の少なくとも一部の状態を表す別の写真に前記患者の口の内部の前記他の複数の写真をステッチし、前記歯科処置の前後の前記患者の口を比較することと
をさらに含む、項目70に記載の方法。
(項目72)
各々が中心点の周囲の前記患者の口の少なくとも一部の状態を表す球体としてモデル化された没入型写真のセットを前記患者の口の内側の前記中心点の場所を表す点のセットにマッピングすることをさらに含む、項目70に記載の方法。
(項目73)
(e)前記ステッチされた没入型写真が実質的に均一な輝度を有するように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間の輝度における変動を考慮することをさらに含む、項目70に記載の方法。
(項目74)
(e)前記ステッチされた没入型写真が前記患者の口を比例的に表すように、前記患者の口の内部の前記複数の写真を調節し、前記複数の写真間のスケールにおける変動を考慮することをさらに含む、項目70に記載の方法。
(項目75)
ステップ(a)−(d)は、前記歯科ミラーから遠隔のサーバ上で起こり、前記受信すること(a)は、コンピュータネットワークを介して前記複数の写真および関連付けられた位置情報を受信することを含む、項目70に記載の方法。
(項目76)
前記患者の口の内部の前記複数の写真は、複数の異なる歯科往診中に収集される、項目70に記載の方法。
(項目77)
(e)前記没入型写真上の点を前記患者の口内における前記点が表す場所を表す画像に関連付けることをさらに含む、項目70に記載の方法。
(項目78)
歯科医のオフィスの部屋内で歯科治療を提供するためのシステムであって、前記システムは、
歯科ミラーであって、前記歯科ミラーは、
医療提供者が前記歯科ミラーをつかむことを可能にするハンドルと、
患者の口の内部のビューを前記医療提供者に向かって反射するように構成された反射面と、
前記反射面において前記医療提供者に見えるものを含む画像を捕捉することが可能である画像センサと、
前記画像センサから収集された画像を伝送することが可能であるプロセッサと、
前記プロセッサおよび前記画像センサに給電するための電力供給源と
を備えている、歯科ミラーと、
前記歯科ミラーと無線通信するベースステーションと
を備え、
前記ベースステーションは、前記画像センサから捕捉された画像を受信するように構成され、前記ベースステーションは、クレードルを備え、前記クレードルは、前記歯科ミラーとドッキングし、接続されると、前記歯科ミラーの電力供給源を充電するように構成されている、システム。
(項目79)
前記ベースステーションは、インターフェースをさらに備え、前記インターフェースは、(i)別の歯科ミラーと電気的に接続することと、(ii)接続されると、電力を前記他の歯科ミラーに提供することと、(iii)前記他の歯科ミラーに取り付けられた別の画像センサから収集された別の画像を受信することとを行うように構成されている、項目78に記載のシステム。
(項目80)
前記ベースステーションと通信するコンピュータ上で実行されるユーザインターフェースアプリケーションをさらに備え、前記ユーザインターフェースアプリケーションは、前記画像センサから収集された画像を患者に表示することが可能であり、
前記ベースステーションは、表示のために前記画像を前記コンピュータに伝送する、項目78に記載のシステム。
(項目81)
前記プロセッサは、前記画像センサから捕捉されたビデオを前記ベースステーションにストリーミングし、前記ベースステーションは、
前記ビデオをバッファリングするように構成されたメモリと、
前記ビデオの少なくとも一部をクロッピングし、前記反射面において前記医療提供者に見えているものをより厳密に表すように構成された画像分析器モジュールと、
前記ユーザインターフェースアプリケーションによる表示のために、前記クロッピングされたビデオを前記コンピュータにストリーミングするように構成されたデータストリーマと
をさらに備えている、項目80に記載のシステム。
(項目82)
前記歯科ミラーは、
加速度計またはジャイロスコープと、
前記加速度計から収集された加速度情報または前記ジャイロスコープから収集された方向情報を積分し、前記歯科ミラーの位置を示す向き情報を計算するように構成された向き計算モジュールと
をさらに備え、
前記プロセッサは、前記計算された向き情報を前記ベースステーションにストリーミングするように構成され、前記ビデオは、複数のフレームを備え、各フレームは、各フレームが捕捉されたときの前記歯科ミラーの向きを表す対応する向き情報に関連付けられており、前記画像分析器モジュールは、前記歯科ミラーの位置に基づいて、前記ビデオにおける前記歯科ミラーの回転を補正するように構成されている、項目81に記載のシステム。(項目83)
前記プロセッサは、前記画像センサから捕捉されたビデオを前記ベースステーションにストリーミングし、前記ベースステーションは、
前記ビデオをバッファリングするように構成されたメモリと、
前記ビデオの少なくとも一部を回転させ、前記反射面において前記医療提供者に見えているものをより厳密に表すように構成された画像分析器モジュールと、
前記ユーザインターフェースアプリケーションによる表示のために、前記回転させられたビデオを前記コンピュータにストリーミングするように構成されたデータストリーマと
をさらに備えている、項目80に記載のシステム。
(項目84)
前記歯科ミラーは、
加速度計またはジャイロスコープと、
前記加速度計から収集された加速度情報または前記ジャイロスコープから収集された方向情報を積分し、前記歯科ミラーの位置を示す向き情報を計算するように構成された向き計算モジュールと
をさらに備え、
前記プロセッサは、前記計算された向き情報を前記ベースステーションにストリーミングするように構成され、前記ビデオは、複数のフレームを備え、各フレームは、各フレームが捕捉されたときの前記歯科ミラーの向きを表す対応する向き情報に関連付けられており、前記画像分析器モジュールは、前記歯科ミラーの位置に基づいて、前記ビデオにおける前記歯科ミラーの回転を補正するように構成されている、項目83に記載のシステム。(項目85)
前記歯科ミラーは、前記医療提供者からのユーザ入力を受け取るように構成されたボタンをさらに備え、前記プロセッサは、前記ボタンが押されると、前記ボタンが押されたときの時間を示すメッセージを前記ベースステーションに伝送するように構成され、
前記ベースステーションは、画像分析器モジュールをさらに備え、前記画像分析器モジュールは、患者の医療記録への入力のために、前記ボタンが捕捉するために押されたときの時間に先立つ少なくとも1つのフレームを複数のフレームから選択するように構成されている、項目78に記載のシステム。
(項目86)
前記画像分析器モジュールは、(i)前記複数のフレームから、前記ボタンが押されたときの時間に先立つフレームのセットを選択することと、(ii)前記患者の医療記録への入力のために、前記フレームのセットを合成画像に一体化することとを行うように構成されている、項目85に記載のシステム。
(項目87)
前記歯科ミラーは、マイクロホンをさらに備え、前記プロセッサは、前記マイクロホンから収集されたオーディオを前記ベースステーションにストリーミングするように構成され、前記ベースステーションは、音声/テキストコンバータモジュールをさらに備え、前記音声/テキストコンバータモジュールは、患者の医療記録への入力のために、前記ストリーミングされたオーディオをテキストに変換する、項目78に記載のシステム。
(項目88)
前記ベースステーションと無線で通信し、ユーザ入力を前記ベースステーションに提供するように構成されたフットペダルをさらに備え、前記フットペダルは、押されると、前記フットペダルが押されていることおよび前記フットペダルが押されたときを示すメッセージを前記ベースステーションに伝送し、
前記音声/テキストコンバータモジュールは、前記フットペダルが押されると、前記ストリーミングされたオーディオをテキストに変換し、前記変換されたテキストを前記患者の医療記録に入力する、項目87に記載のシステム。
(項目89)
前記ベースステーションと無線で通信し、ユーザ入力を前記ベースステーションに提供するように構成されたフットペダルをさらに備え、前記フットペダルは、押されると、前記フットペダルが押されていることおよび前記フットペダルが押されたときを示すメッセージを前記ベースステーションに伝送し、
前記ベースステーションは、画像分析器モジュールをさらに備え、前記画像分析器モジュールは、前記患者の医療記録への入力のために、前記フットペダルが捕捉するために押された時間に従って、少なくとも1つのフレームを複数のフレームから選択するように構成されている、項目78に記載のシステム。
(項目90)
前記歯科ミラーは、
加速度計と、
ジャイロスコープと、
前記加速度計および前記ジャイロスコープから収集された情報に基づいて、前記歯科ミラーの向きを示す向き情報を計算するように構成された向き計算モジュールと
をさらに備え、
前記クレードルは、前記歯科ミラーが前記ベースステーションにドッキングされると、向き情報の将来の計算が新しい積分であるように、較正するためのメッセージを前記歯科ミラーの向き計算モジュールに伝送するように構成されている、項目78に記載のシステム。
(項目91)
前記ベースステーションは、構成器モジュールをさらに備え、前記構成器モジュールは、前記歯科ミラーが前記ベースステーションに近接しているとき、前記歯科ミラーと前記ベースステーションとの間の無線通信を構成するために必要な構成情報を前記歯科ミラーに伝送するように構成されている、項目78に記載のシステム。
(項目92)
前記構成器モジュールは、前記歯科ミラーが前記クレードル内にドッキングされると、前記構成情報を伝送するように構成されている、項目91に記載のシステム。
(項目93)
前記構成器モジュールは、前記歯科ミラーが近距離無線通信のための範囲内にあるとき、前記構成情報を伝送するように構成されている、項目91に記載のシステム。
(項目94)
前記構成器モジュールは、ユーザインターフェースアプリケーションを実行するためのコンピュータが前記ベースステーションに近接しているとき、前記コンピュータと前記ベースステーションとの間の無線通信を構成するために必要な構成情報を前記コンピュータに伝送するように構成されている、項目91に記載のシステム。
(項目95)
前記構成器モジュールは、前記コンピュータが前記ベースステーションに電気的に接続されると、前記構成情報を伝送するように構成されている、項目94に記載のシステム。(項目96)
前記構成器モジュールは、前記コンピュータが近距離無線通信のための範囲内にあるとき、前記構成情報を伝送するように構成されている、項目94に記載のシステム。
(項目97)
歯科医のオフィスの部屋において歯科治療を提供するためのベースステーションであって、前記ベースステーションは、
歯科ミラーとドッキングし、接続されると、前記歯科ミラーに電力を提供するように構成されているクレードルであって、前記歯科ミラーは、医療提供者が前記歯科ミラーをつかむためのハンドルと、患者の口の内部のビューを前記医療提供者に向かって反射するための反射面と、前記反射面において前記医療提供者に見えるものを含む画像を収集することが可能な画像センサと、前記画像センサから収集された画像を伝送することが可能なプロセッサと、前記プロセッサおよび前記画像センサに給電するための電力供給源とを備えている、クレードルと、
前記歯科ミラーと無線通信するように構成されている無線インターフェースと、
前記無線インターフェースを介して前記画像センサから収集された画像を受信するように構成されているプロセッサと
を備えている、ベースステーション。
(項目98)
別のクレードルをさらに備え、前記別のクレードルは、別の歯科ミラーと電気的に接続し、接続されると、電力を前記他の歯科ミラーに提供し、前記他の歯科ミラーに取り付けられた別の画像センサから収集された別の画像を受信するように構成されている、項目97に記載のベースステーション。
(項目99)
前記無線インターフェースは、前記画像センサから収集された画像を表示することが可能なユーザインターフェースアプリケーションを実行するコンピュータと無線通信し、
前記ベースステーションは、表示のために前記画像を前記コンピュータに伝送する、項目97に記載のベースステーション。
(項目100)
前記プロセッサは、前記画像センサから捕捉されたビデオを前記ベースステーションにストリーミングし、前記ベースステーションは、
前記ビデオをバッファリングするように構成されたメモリと、
前記ビデオの少なくとも一部をクロッピングし、前記反射面において前記医療提供者に見えているものをより厳密に表すように構成された画像分析器モジュールと、
前記ユーザインターフェースアプリケーションによる表示のために前記クロッピングされたビデオを前記コンピュータにストリーミングするように構成されているストリーマモジュールと
をさらに備えている、項目99に記載のベースステーション。
(項目101)
前記無線インターフェースは、前記歯科ミラーから、前記歯科ミラーの向き情報を受信し、前記ビデオは、複数のフレームを備え、前記複数のフレームの各々は、前記フレームが捕捉されたときの前記歯科ミラーの位置を表す対応する向き情報に関連付けられており、前記画像分析器モジュールは、前記向き情報に基づいて、前記ビデオにおける前記歯科ミラーの回転を補正する、項目100に記載のベースステーション。
(項目102)
前記プロセッサは、前記画像センサから捕捉されたビデオを前記ベースステーションにストリーミングし、前記ベースステーションは、
前記ビデオをバッファリングするように構成されたメモリと、
前記ビデオの少なくとも一部を回転させ、前記反射面において前記医療提供者に見えているものをより厳密に表すように構成された画像分析器モジュールと、
前記ユーザインターフェースアプリケーションによる表示のために前記回転させられたビデオを前記コンピュータにストリーミングするように構成されているストリーマモジュールと
をさらに備えている、項目99に記載のベースステーション。
(項目103)
前記無線インターフェースは、前記歯科ミラーから、前記歯科ミラーの向き情報を受信し、前記ビデオは、複数のフレームを備え、前記複数のフレームの各々は、各フレームが捕捉されたときの前記歯科ミラーの位置を表す対応する向き情報に関連付けられており、前記画像分析器モジュールは、前記向き情報に基づいて、前記ビデオにおける前記歯科ミラーの回転を補正する、項目102に記載のベースステーション。
(項目104)
前記無線インターフェースは、前記歯科ミラーから、前記歯科ミラー上のボタンが押されたときの時間を示す入力を受信し、
前記ベースステーションは、画像分析器モジュールをさらに備え、前記画像分析器モジュールは、(i)前記ボタンが押されたときの時間に先立つ複数のフレームを選択することと、(ii)患者の医療記録への入力のために前記複数のフレームを合成画像に一体化することとを行うように構成されている、項目97に記載のベースステーション。
(項目105)
前記無線インターフェースは、前記歯科ミラーから、オーディオストリームを受信し、
前記ベースステーションは、音声/テキストコンバータをさらに備え、前記音声/テキストコンバータは、前記患者の医療記録への入力のために、前記ストリーミングされたオーディオをテキストに変換する、項目97に記載のベースステーション。
(項目106)
患者の口内の写真を捕捉する方法であって、前記方法は、
(a)歯科ミラーに取り付けられた画像センサから捕捉された画像を受信することであって、前記歯科ミラーは、複数の光源を有する、ことと、
(b)前記画像の一部が前記画像の別の部分よりも暗いことを決定することと、
(c)(b)においてどの部分がより暗いと決定されたかに基づいて、前記複数の光源からある光源を選択することであって、前記光源は、前記他の部分よりも前記決定された部分をより明るく照射するように選択される、ことと、
(d)(c)において選択された前記光源の輝度を増加させることと
を含む、方法。
(項目107)
(e)ユーザが自動化照明を無効にしているかどうかを決定することと、
(f)前記ユーザが自動化照明を無効にしていないと決定された場合、ステップ(a)−(d)を実施することと、
(g)前記ユーザが自動化照明を無効にしていると決定された場合、ユーザ設定に従って前記複数の光源の輝度を設定することと
をさらに含む、項目106に記載の方法。
(項目108)
(e)ソフトウェアモジュールが自動化照明を無効にしているかどうかを決定することと、
(f)前記ソフトウェアモジュールが自動化照明を無効にしていないと決定された場合、ステップ(a)−(d)を実施することと、
(g)前記ソフトウェアモジュールが自動化照明を無効にしていると決定された場合、前記ソフトウェアモジュールの出力に従って前記複数の光源の輝度を設定することと
をさらに含む、項目106に記載の方法。
(項目109)
(e)前記歯科ミラーを監視し、それが使用中ではないときを決定することと、
(f)前記歯科ミラーが使用中ではないと決定された場合、低減された量の電力を消費するスタンバイモードに入ることと
をさらに含む、項目106に記載の方法。
(項目110)
前記監視すること(e)は、前記歯科ミラー上の向き測定デバイスを監視し、ある期間が実質的移動を伴わずに経過した場合を決定することを含む、項目109に記載の方法。(項目111)
前記監視すること(e)は、前記歯科ミラー上の画像センサを監視し、ある期間が実質的移動を伴わずに経過した場合を決定することを含む、項目109に記載の方法。
(項目112)
患者の口内の写真を捕捉する方法を実施するための少なくとも1つの機械によって実行可能な命令のプログラムを有形に具現化するプログラム記憶デバイスであって、
前記方法は、
(a)歯科ミラーに取り付けられた画像センサから捕捉された画像を受信することであって、前記歯科ミラーは、複数の光源を有する、ことと、
(b)前記画像の一部が前記画像の別の部分よりも暗いことを決定することと、
(c)(b)においてどの部分がより暗いと決定されたかに基づいて、前記複数の光源からある光源を選択することであって、前記光源は、前記他の部分よりも前記決定された部分をより明るく照射するように選択される、ことと、
(d)(c)において選択された前記光源の輝度を増加させることと
を含む、プログラム記憶デバイス。
(項目113)
前記方法は、
(e)ユーザが自動化照明を無効にしているかどうかを決定することと、
(f)前記ユーザが自動化照明を無効にしていないと決定された場合、ステップ(a)−(d)を実施することと、
(g)前記ユーザが自動化照明を無効にしていると決定された場合、ユーザ設定に従って前記複数の光源の輝度を設定することと
をさらに含む、項目112に記載のプログラム記憶デバイス。
(項目114)
前記方法は、
(e)ソフトウェアモジュールが自動化照明を無効にしているかどうかを決定することと、
(f)前記ソフトウェアモジュールが自動化照明を無効にしていないと決定された場合、ステップ(a)−(d)を実施することと、
(g)前記ソフトウェアモジュールが自動化照明を無効にしていると決定された場合、前記ソフトウェアモジュールの出力に従って前記複数の光源の輝度を設定することと
をさらに含む、項目112に記載のプログラム記憶デバイス。
(項目115)
(e)前記歯科ミラーを監視し、前記歯科ミラーが使用中ではないときを決定することと、
(f)前記歯科ミラーが使用中ではないと決定された場合、低減された量の電力を消費するスタンバイモードに入ることと
をさらに含む、項目112に記載のプログラム記憶デバイス。
(項目116)
前記監視すること(e)は、前記歯科ミラー上の向き測定デバイスを監視し、ある期間が実質的移動を伴わずに経過した場合を決定することを含む、項目115に記載のプログラム記憶デバイス。
(項目117)
前記監視すること(e)は、前記歯科ミラー上の画像センサを監視し、ある期間が実質的移動を伴わずに経過した場合を決定することを含む、項目115に記載のプログラム記憶デバイス。
(項目118)
患者の口内の写真を捕捉するためのデバイスであって、前記デバイスは、
複数の光源を有する歯科ミラーと、
前記歯科ミラーに取り付けられ、画像を捕捉する画像センサと、
照明制御モジュールと
を備え、
前記照明制御モジュールは、(i)前記画像の一部が前記画像の別の部分よりも明るいことを決定することと、(ii)(i)においてどの部分がより明るいと決定されたかに基づいて、前記複数の光源からある光源を選択することであって、前記光源は、他の部分よりも前記決定された部分をより暗く照射するように選択される、ことと、(iii)(ii)において選択された前記光源の輝度を減少させることとを行う、デバイス。
(項目119)
歯科器具の電力消費を制御する方法であって、前記方法は、
(a)口腔内ミラーを監視し、それが使用中ではないときを決定することであって、前記口腔内ミラーは、統合されたカメラを備えている、ことと、
(b)前記口腔内ミラーが使用中ではないと決定された場合、前記口腔内ミラーを前記口腔内ミラーによって消費される電力の量を低減させるスタンバイモードにすることと
を含む、方法。
(項目120)
前記監視すること(a)は、前記口腔内ミラー上の向き測定デバイスを監視し、前記口腔内ミラーが実質的に移動することなくある期間が経過した場合を決定することを含む、項目119に記載の方法。
(項目121)
前記監視すること(a)は、画像センサを監視し、前記口腔内ミラーが実質的に移動することなくある期間が経過した場合を決定することを含む、項目119に記載の方法。
(項目122)
前記監視すること(a)は、画像センサによって捕捉された画像内の変化を評価することをさらに含む、項目119に記載の方法。
(項目123)
(c)前記口腔内ミラーが使用中であることを検出することと、
(d)前記口腔内ミラーが使用中であると(c)において検出された場合、前記スタンバイモードを終了することと
をさらに含む、項目119に記載の方法。
(項目124)
患者の口を照射するための歯科ミラーシステムであって、前記歯科ミラーシステムは、
歯科器具であって、前記歯科器具は、
画像センサと、
医療提供者が前記歯科器具をつかむことを可能にするハンドルと、
前記ハンドルに取り付けられているミラー面であって、前記ミラー面の1つの側は、前記医療提供者の視野の中に光を反射するように構成された反射面と、前記画像センサに到達するように前記ミラー面の別の側に光を透過するパススルー面とを備えている、ミラー面と、
複数の光源と
を備えている、歯科器具と、
前記画像センサによって感知された画像内の物体を認識するように構成されている画像分析器モジュールと、
まぶしさ回避モジュールと
を備え、
前記まぶしさ回避モジュールは、前記画像分析器モジュールによって認識された前記物体の場所に基づいて、前記医療提供者の目をまぶしくすることを回避するように光を向けるように前記複数の光源を設定するように構成されている、歯科ミラーシステム。
(項目125)
前記画像分析器モジュールは、前記患者の口の内側の前記物体を示す前記画像のエリアを決定するように構成されているセグメント化モジュールを備え、
前記まぶしさ回避モジュールは、光を前記物体に向けるように前記複数の光源を設定するように構成されている、項目124に記載の歯科ミラーシステム。
(項目126)
前記セグメント化モジュールは、前記画像を口腔内および口腔外区分にセグメント化するように構成され、
前記まぶしさ回避モジュールは、光を前記口腔内区分に向けるように前記複数の光源を設定するように構成されている、項目125に記載の歯科ミラーシステム。
(項目127)
前記セグメント化モジュールは、(i)前記複数の光源から放出される可変強度の光を用いて、実質的に同一の位置から前記画像センサによって取得される複数の写真を受信することと、(ii)複数の画像間の複数の異なる部分における輝度を比較することと、(iii)前記複数の画像間の輝度の相違に基づいて前記口腔内区分を前記複数の異なる部分における一部として決定することとを行うように構成され、
前記まぶしさ回避モジュールは、光を前記口腔内区分に向けるように前記複数の光源を設定するように構成されている、項目126に記載の歯科ミラーシステム。
(項目128)
前記画像分析器モジュールは、前記医療提供者の顔を示す前記画像のエリアを決定するように構成されている顔検出モジュールを備え、
前記まぶしさ回避モジュールは、光を前記医療提供者の顔を避けて向けるように前記複数の光源を設定するように構成されている、項目124に記載の歯科ミラーシステム。
(項目129)
前記複数の光源は、光を異なる方向に向けるように前記歯科器具に取り付けられ、
前記まぶしさ回避モジュールは、前記複数の光源の各々のそれぞれの強度を設定するように構成されている、項目124に記載の歯科ミラーシステム。
(項目130)
前記複数の光源の各々は、光を可変方向に向けるように構成され、
前記まぶしさ回避モジュールは、前記複数の光源の各々の光を向けるための前記それぞれの方向を設定するように構成されている、項目124に記載の歯科ミラーシステム。
(項目131)
患者の口を照射するためのコンピュータ実装方法であって、前記方法は、
(a)歯科器具に取り付けられた画像センサから画像を捕捉することであって、前記歯科器具は、(i)医療提供者が前記歯科器具をつかむことを可能にするハンドルと、(ii)前記ハンドルに取り付けられているミラー面であって、前記ミラー面の1つの側は、前記医療提供者の視野の中に光を反射するように構成された反射面と、前記画像センサに到達するように前記ミラー面の別の側に光を透過するパススルー面とを備えている、ミラー面と、(iii)複数の光源とをさらに備えている、ことと、
(b)前記画像センサによって感知された画像内の物体を認識することと、
(c)(b)において認識された前記物体の場所に基づいて、前記医療提供者の目をまぶしくすることを回避するように光を向けるように前記複数の光源を設定することと
を含む、方法。
(項目132)
前記認識すること(b)は、前記患者の口の内側の前記物体を示す前記画像のエリアを決定することを含み、
前記設定すること(c)は、光を前記物体に向けるように前記複数の光源を設定することを含む、項目131に記載の方法。
(項目133)
前記認識すること(b)は、前記画像を口腔内および口腔外区分にセグメント化することを含み、
前記設定すること(c)は、光を前記口腔内区分に向けるように前記複数の光源を設定することを含む、項目132に記載の方法。
(項目134)
前記認識すること(b)は、
(i)前記複数の光源から放出される可変強度の光を用いて、実質的に同一の位置から前記画像センサによって取得される複数の画像を受信することと、
(ii)前記複数の画像間の複数の異なる部分における輝度を比較することと、
(iii)前記複数の画像間の輝度の相違に基づいて、前記口腔内区分を前記複数の異なる部分における一部として決定することと
を含む、項目133に記載の方法。
(項目135)
前記認識すること(b)は、前記医療提供者の顔を示す前記画像のエリアを検出することを含み、
前記設定すること(c)は、前記顔を避けて光を向けるように前記複数の光源を設定することを含む、項目131に記載の方法。
(項目136)
前記複数の光源は、光を異なる方向に向けるように前記歯科器具に取り付けられ、
前記設定すること(c)は、前記複数の光源の各々のそれぞれの強度を設定するように構成されている、項目131に記載の方法。
(項目137)
患者の口を照射する方法を実施するための少なくとも1つの機械によって実行可能な命令のプログラムを有形に具現化するプログラム記憶デバイスであって、前記方法は、
(a)歯科器具に取り付けられた画像センサから画像を捕捉することであって、前記歯科器具は、(i)医療提供者が前記歯科器具をつかむことを可能にするハンドルと、(ii)前記ハンドルに取り付けられているミラー面であって、前記医療提供者の視野の中に光を反射するように構成された反射面と、前記画像センサに到達するように前記ミラー面の別の側に光を透過するパススルー面とを備えている、ミラー面と、(iii)複数の光源とをさらに備えている、ことと、
(b)前記画像センサによって感知された画像内の物体を認識することと、
(c)(b)において認識された前記物体の場所に基づいて、前記医療提供者の目をまぶしくすることを回避するように光を向けるように前記複数の光源を設定することと
を含む、プログラム記憶デバイス。
(項目138)
前記認識すること(b)は、前記患者の口の内側の前記物体を示す前記画像のエリアを決定することを含み、
前記設定すること(c)は、光を前記物体に向けるように前記複数の光源を設定することを含む、項目137に記載のプログラム記憶デバイス。
(項目139)
前記認識すること(b)は、前記画像を口腔内および口腔外区分にセグメント化することを含み、
前記設定すること(c)は、光を前記口腔内区分に向けるように前記複数の光源を設定することを含む、項目137に記載のプログラム記憶デバイス。
(項目140)
前記認識すること(b)は、
(i)前記複数の光源から放出される可変強度の光を用いて、実質的に同一の位置から前記画像センサによって取得される複数の画像を受信することと、
(ii)前記複数の画像間の複数の異なる部分における輝度を比較することと、
(iii)前記複数の画像間の輝度の相違に基づいて、前記口腔内区分を前記複数の異なる部分における一部として決定することと
を含む、項目139に記載のプログラム記憶デバイス。
(項目141)
前記認識すること(b)は、前記医療提供者の顔を示す前記画像のエリアを検出することを含み、
前記設定すること(c)は、前記顔を避けて光を向けるように前記複数の光源を設定することを含む、項目137に記載のプログラム記憶デバイス。
(項目142)
前記複数の光源は、光を異なる方向に向けるように前記歯科器具に取り付けられ、
前記設定すること(c)は、前記複数の光源の各々のそれぞれの強度を設定するように構成されている、項目137に記載のプログラム記憶デバイス。
(項目143)
歯科材料を硬化させるように構成されている歯科器具であって、前記歯科器具は、
医療提供者が前記歯科器具をつかむことを可能にするハンドルと、
前記ハンドルに取り付けられているミラー面であって、前記ミラー面のある側は、前記医療提供者の視野の中に光を反射するように構成された反射面を備えている、ミラー面と、
前記歯科材料を硬化させる光を放出するように構成されている光源と
を備え、
前記歯科材料は、歯の上に適用されているとき、前記反射面において前記医療提供者に見える、歯科器具。
(項目144)
前記歯科材料は、歯科複合樹脂材料である、項目143に記載の歯科器具。
(項目145)
前記歯科複合樹脂材料は、復元手技中、充填材を糊付けすること、または歯の上に構造を蓄積することを行うために使用される、項目144に記載の歯科器具。
(項目146)
前記光源は、可視青色から紫外線までのスペクトル内の光を用いて前記歯科材料を照射するように構成されている、項目143に記載の歯科器具。
(項目147)
光を放出し、前記医療提供者による観察のために前記歯科材料を照射するように構成されている別の光源をさらに備えている、項目143に記載の歯科器具。
(項目148)
画像センサをさらに備え、前記ミラー面は、前記画像センサには透明であるような表面を備え、前記医療提供者は、前記画像センサから収集された画像を表示するコンピュータディスプレイ上で前記歯科材料硬化を観察する、項目147に記載の歯科器具。
(項目149)
歯科材料を硬化させる方法であって、前記方法は、
前記歯科材料を患者の歯に適用することと、
光源から光を放出し、前記歯科材料を硬化させることと
を含み、
前記光源は、歯科器具に取り付けられており、前記歯科器具は、(i)医療提供者が前記歯科器具をつかむことを可能にするハンドルと、(ii)前記ハンドルに取り付けられているミラー面であって、前記ミラー面のある側は、前記医療提供者の視野の中に光を反射するように構成された反射面を備えている、ミラー面とをさらに備えている、方法。
(項目150)
前記歯科材料は、歯科複合樹脂材料である、項目149に記載の方法。
(項目151)
前記歯科複合樹脂材料は、復元手技中、充填材を糊付けすること、または歯の上に構造を蓄積することを行うために使用される、項目150に記載の方法。
(項目152)
前記光源は、可視青色から紫外線までのスペクトル内の光を用いて前記歯科材料を照射するように構成されている、項目149に記載の方法。
(項目153)
前記歯科器具に取り付けられた別の光源から光を放出し、前記医療提供者による観察のために前記歯科材料を照射することをさらに含む、項目149に記載の方法。
(項目154)
前記歯科ミラーに取り付けられた画像センサから画像を捕捉することをさらに含み、前記ミラー面は、前記画像センサには透明であるような表面を備え、前記医療提供者は、前記画像センサから収集された画像を表示するタブレット上で前記歯科材料硬化を観察する、項目149に記載の方法。
(項目155)
歯科システムであって、前記歯科システムは、
歯科器具であって、前記歯科器具は、
画像センサと、
医療提供者が前記歯科器具をつかむことを可能にするハンドルと、
前記ハンドルに取り付けられているミラー面であって、前記ミラー面のある側は、前記医療提供者の視野の中に光を反射するように構成された反射面と、前記画像センサに到達するように前記ミラー面の別の側に光を透過するパススルー面とを備えている、ミラー面と、
歯科材料を硬化させる光を放出するように構成されている光源と
を備え、前記歯科材料は、歯の上に適用されているとき、前記反射面において前記医療提供者に見える、歯科器具と、
前記医療提供者が、前記画像センサから収集された画像を表示するタブレット上で前記歯科材料硬化を観察することを可能にするように構成されているディスプレイと
を備えている、歯科システム。
(項目156)
患者の口の3次元モデルを捕捉する方法であって、前記方法は、
(a)(i)患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報とを受信することであって、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、少なくとも部分的に前記複数の写真のうちの別の1つと重複している、ことと、
(b)前記患者の口の内部の前記複数の写真に基づいて、前記重複する部分および位置情報を分析し、表面点のセットを生成することと、
(c)前記表面点のセットに基づいて、前記患者の歯の歯科印象を表す3次元モデルを生成することと
を含む、方法。
(項目157)
(d)前記複数の写真におけるそれぞれの写真のために、関連付けられた写真が取得されたときの前記画像センサの視野に投影される光の方向を示す照明情報を受信することをさらに含み、
前記分析すること(b)は、前記複数の写真におけるそれぞれの写真のために、
(i)前記写真において、陰影が位置している場所を決定することと、
(ii)前記写真のための前記照明情報と前記陰影が位置していると決定された場所とに基づいて、前記画像センサの視野内に見える物体のための形状情報を決定することと
を含む、項目156に記載の方法。
(項目158)
前記光は、赤外光である、項目157に記載の方法。
(項目159)
前記光は、前記歯科ミラーの周辺に取り付けられた複数の光源からのある光源から投影され、照明情報は、前記複数の写真におけるそれぞれの写真が前記複数の光源におけるそれぞれの光源からの異なる輝度を用いて取得されたことを示す、項目157に記載の方法。
(項目160)
前記分析すること(b)は、放射線データの飛行時間を測定することを含む、項目156に記載の方法。
(項目161)
前記放射線データは、LIDARデータである、項目160に記載の方法。
(項目162)
前記複数の写真および前記関連付けられた位置情報は、ルーチン歯科処置中に捕捉される、項目156に記載の方法。
(項目163)
前記複数の写真および前記関連付けられた位置情報は、一連の複数のルーチン歯科処置にわたって捕捉される、項目162に記載の方法。
(項目164)
ステップ(a)−(c)は、前記歯科ミラーから遠隔のサーバ上で起こり、前記受信すること(a)は、コンピュータネットワークを介して前記複数の写真および関連付けられた位置情報を受信することを含む、項目156に記載の方法。
(項目165)
前記3次元モデルは、義歯、インレー、プラスチックキャスト、歯冠、ブリッジ、補綴、または歯科インプラントを作製するために使用される、項目156に記載の方法。
(項目166)
前記3次元モデルは、診断、口腔外科手術、または顎顔面外科手術のために使用される、項目156に記載の方法。
(項目167)
患者の口の3次元モデルを捕捉する方法を実施するための少なくとも1つの機械によって実行可能な命令のプログラムを有形に具現化するプログラム記憶デバイスであって、前記方法は、
(a)(i)患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報とを受信することであって、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、少なくとも部分的に前記複数の写真のうちの別の1つと重複している、ことと、
(b)前記患者の口の内部の前記複数の写真に基づいて、前記重複する部分および位置情報を分析し、表面点のセットを生成することと、
(c)前記表面点のセットに基づいて、前記患者の歯の歯科印象を表す3次元モデルを生成することと
を含む、プログラム記憶デバイス。
(項目168)
前記方法は、
(d)前記複数の写真におけるそれぞれの写真のために、前記関連付けられた写真が取得されたときの前記画像センサの視野に投影される光の方向を示す照明情報を受信することをさらに含み、
前記分析すること(b)は、前記複数の写真におけるそれぞれの写真のために、
(i)前記写真において、陰影が位置している場所を決定することと、
(ii)前記写真のための照明情報と前記陰影が位置していると決定された場所とに基づいて、前記画像センサの視野内に見える物体のための形状情報を決定することと
を含む、項目167に記載のプログラム記憶デバイス。
(項目169)
前記光は、赤外光である、項目168に記載のプログラム記憶デバイス。
(項目170)
前記光は、前記歯科ミラーの周辺に取り付けられた複数の光源からのある光源から投影され、照明情報は、前記複数の写真におけるそれぞれの写真が前記複数の光源におけるそれぞれの光源からの異なる輝度を用いて取得されたことを示す、項目168に記載のプログラム記憶デバイス。
(項目171)
前記分析すること(b)は、放射線データの飛行時間を測定することを含む、項目167に記載のプログラム記憶デバイス。
(項目172)
前記放射線データは、LIDARデータである、項目171に記載のプログラム記憶デバイス。
(項目173)
前記複数の写真および前記関連付けられた位置情報は、ルーチン歯科処置中に捕捉される、項目167に記載のプログラム記憶デバイス。
(項目174)
前記複数の写真および前記関連付けられた位置情報は、一連の複数のルーチン歯科処置にわたって捕捉される、項目173に記載のプログラム記憶デバイス。
(項目175)
ステップ(a)−(c)は、前記歯科ミラーから遠隔のサーバ上で起こり、前記受信すること(a)は、コンピュータネットワークを介して前記複数の写真および関連付けられた位置情報を受信することを含む、項目167に記載のプログラム記憶デバイス。
(項目176)
前記3次元モデルは、義歯、インレー、プラスチックキャスト、歯冠、ブリッジ、補綴、または歯科インプラントを作製するために使用される、項目167に記載のプログラム記憶デバイス。
(項目177)
前記3次元モデルは、診断、口腔外科手術、または顎顔面外科手術のために使用される、項目167に記載のプログラム記憶デバイス。
(項目178)
患者の口の3次元モデルを捕捉するためのシステムであって、前記システムは、
プロセッサと、
前記プロセッサ上に実装されているサーバであって、前記サーバは、(i)患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報とを受信し、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、少なくとも部分的に前記複数の写真のうちの別の1つと重複する、サーバと、
歯科印象発生器と
を備え、
前記歯科印象発生器は、前記患者の口の内部の前記複数の写真に基づいて、前記重複する部分および位置情報を分析し、表面点のセットを生成し、前記表面点のセットに基づいて、前記患者の歯の歯科印象を表す3次元モデルを生成する、システム。
(項目179)
前記サーバは、前記複数の写真におけるそれぞれの写真のために、前記関連付けられた写真が取得されたときの前記画像センサの視野に投影される光の方向を示す照明情報を受信し、
前記歯科印象発生器は、前記複数の写真におけるそれぞれの写真のために、前記写真において、陰影が位置する場所を決定し、前記写真のための照明情報と前記陰影が位置していると決定された場所とに基づいて、前記画像センサの視野内に見える物体のための形状情報を決定する、項目178に記載のシステム。
(項目180)
可変照明を用いて複数の画像を捕捉する方法であって、前記方法は、
(a)(i)患者の口の内部の複数の写真と、(ii)前記それぞれの写真のための関連付けられた位置情報および照明情報とを受信することであって、前記複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、前記複数の写真の一つ一つは、前記複数の写真のうちの別の1つと実質的に重複し、前記複数の写真の各々は、前記複数の写真のうちの別の1つと異なるように照射され、前記それぞれの照明情報は、前記関連付けられた写真が照射される方法を示す、ことと、
前記複数の写真の各々のために、
(b)前記写真において、陰影が位置している場所を決定することと、
(c)前記写真のための前記関連付けられた照明情報と前記陰影が位置していると決定された場所とに基づいて、前記画像センサの視野内に見える物体のための形状情報を決定することと
を含む、方法。
本明細書に組み込まれ、本明細書の一部を形成する、付随の図面は、本開示を図示し、説明とともに、さらに、本開示の原理を説明し、当業者が、本開示を作製および使用することを可能にする役割を果たす。
図1は、ある実施形態による、統合されたカメラを含む口腔内ミラーの構成要素を図示する図である。 図2は、口腔内ミラーのミラー部分の断面を図示する図である。 図3は、医療提供者の視点から患者の口を検査するために使用されている口腔内ミラーを図示する図である。 図4は、患者の口からの光がミラーの反射面から反射され、医療提供者によって観察される様子を図示する図である。 図5A−Cは、口腔内ミラーの向きが、医療提供者がこれを回転させるにつれて変化し得る様子を図示する図である。 図6Aは、口腔内ミラーの反射面上で医療提供者に見える広角カメラによって捕捉された画像の部分が決定される様子を図示する。 図6Bは、医療提供者に見えると決定された部分が口腔内ミラーの回転を調節するために回転される様子を図示する。 図7A−Cは、まぶしさが最小限にされる様子を図示する。 図7A−Cは、まぶしさが最小限にされる様子を図示する。 図7A−Cは、まぶしさが最小限にされる様子を図示する。 図8Aは、口腔内ミラーにおいて医療提供者に見えているものを表示するためのシステムを含む歯科医オフィスの部屋を図示する。 図8Bは、図8Aのシステムのアーキテクチャ図である。 図9は、統合されたカメラを含む口腔内ミラーのブロック図である。 図10は、図8Aのシステムの例示的動作を図示するフローチャートである。 図11は、図8Aのシステムのコンポーネントをさらに詳述するブロック図である。 図12は、医療提供者に見える口腔内ミラーにおける画像センサによって捕捉された画像の部分を推定する方法を図示するフローチャートである。 図13および14は、口腔内ミラーの向きを調節するために画像を回転させる方法を図示する。 図13および14は、口腔内ミラーの向きを調節するために画像を回転させる方法を図示する。 図15A−Bは、口腔内ミラーデバイスからデータを読み出すための代替方法を図示する。 図16は、口腔内ミラーからのビデオ内の画像のストリームからの画像が捕捉のために選択される様子を図示する図である。 図17Aは、患者の口の内部からの特徴が異なる視点からの口腔内ミラーから取得された異なる画像において見える様子を図示する図である。 図17Bは、合致した特徴が、患者の歯科ステータスを示すパノラマにステッチされるように異なる画像を整列させるために使用される様子を図示する図である。 図17Cは、画像センサから捕捉された画像を患者の歯科ステータスを示すパノラマにステッチすることを図示する図である。 図18A−Cは、没入型パノラマを捕捉し、奥行きの感覚を伴ってこれをレンダリングする方法を図示する図である。 図18A−Cは、没入型パノラマを捕捉し、奥行きの感覚を伴ってそれをレンダリングする方法を図示する図である。 図18A−Cは、没入型パノラマを捕捉し、奥行きの感覚を伴ってこれをレンダリングする方法を図示する図である。 図19Aおよび19Bは、口腔内ミラーからの可変照明が患者の歯の3次元形状に関する情報を提供し得る様子を図示する図である。 図20は、スマートミラーデバイスが手技中に移動させられ得る様子を図示する図である。 図21A−Bは、歯科ステータスおよび印象の漸増生成のための方法を図示するフローチャートである。 図21A−Bは、歯科ステータスおよび印象の漸増生成のための方法を図示するフローチャートである。 図22は、患者の歯科ステータスを示すパノラマをステッチし、歯科印象を生成するためのサーバを伴うシステムを図示する。 図23は、口腔内ミラーの照明を変動させる方法を図示する。 図24は、口腔内ミラーからの照明を自動的に調節する方法を図示する。 図25は、口腔内ミラーの使用を監視する方法を図示する。 図26は、画像センサがミラーの非加圧滅菌可能部分上に配置される口腔内ミラーの代替構成を図示する図である。 図27は、画像センサがミラーの非加圧滅菌可能部分の接合される付属品上に配置される口腔内ミラーの代替構成を図示する図である。 図28は、加圧滅菌可能部分が2つの部品に取り外される口腔内ミラーの代替構成を図示する図である。 図29は、スマートミラーの代替実施形態を図示するブロック図である。
ある要素が最初に現れる図面は、典型的には、最も左の数字または対応する参照番号内の数字によって示される。図面では、同様の参照番号は、同じまたは機能的に類似する要素を示し得る。
(詳細な説明)
続く詳細な説明は、10個の節に分割される。第1に、統合されたカメラを伴う口腔内ミラーが、図1および2に関して説明される。第2に、口腔内ミラーがカメラのためのビューファインダとして使用される様子が、図3、4、5A−C、6A−B、および図7A−Cに関して説明される。第3に、口腔内ミラーを利用するシステムおよび方法が、図8−16に関して説明される。第4に、口腔内ミラーが患者の歯科ステータスを捕捉するために使用される様子が、図17A−Cおよび18A−Cに関して説明される。第5に、口腔内ミラーが患者の歯科印象を捕捉するために使用される様子が、図19A−Bに関して説明される。第6に、ステータスおよび印象が漸増的に生成される様子が、図20および図21A−Bに関して説明される。第7に、患者のステータスを捕捉し、患者の歯科印象を生成するためのシステムが、図22に関して説明される。第8に、口腔内ミラーの照明を調節するための種々の方法が、図23および24に関して説明される。第9に、口腔内ミラーの電力を節約するための使用を監視する方法が、図25に関して説明される。第10および最後に、口腔内ミラーの代替実施形態が、図26−29に関して説明される。
(A.統合されたカメラを伴う口腔内ミラー)
図1は、ある実施形態による、本明細書ではスマートミラーデバイスと称される、統合されたカメラを含む口腔内ミラーの構成要素を図示する図である。特に、図1は、スマートミラーデバイス100の物理的構成要素を図示する。
スマートミラーデバイス100は、2つの別個の取り外し可能な物理的構成要素、すなわち、オーラルピース102と、ハンドピース110とを含む。ハンドピースおよびオーラルピース102および110はさらに、小部品に取り外し可能であり得る。オーラルピース102は、患者の口に進入し得るスマートミラーデバイス100の部分であり得る。オーラルピース102は、加圧滅菌されることを通して滅菌され得るスマートミラーデバイス100の部分を含み得る。加圧滅菌されるために、オーラルピース102は、オートクレーブ機械内に配置されることに耐えることができ、これは、高温および周囲空気圧とは異なる圧力を要求する産業プロセスを実行するために使用される圧力チャンバである。多くのオートクレーブは、負荷のサイズおよび含有量に応じて、約15〜20分にわたって、121〜132℃(249〜270°F)における高圧飽和蒸気にそれらを晒すことによって、機器および供給品を滅菌するために使用される。加えて、オーラルピース102は、例えば、繰り返しの使用および滅菌の結果として起こり得る、ビューファインダミラー103の反射面が損傷した状態になる場合、または電子機器コンポーネント故障に起因して、交換可能であり得る。
オーラルピース102と対照的に、ハンドピース110は、患者の口と接触するように適合されない。ハンドピース110は、患者の口と接触しないため、これは、オーラルピース102と同程度に滅菌状態である必要はない場合がある。ハンドピース110は、加圧滅菌されることに耐えることができないスマートミラーデバイス100の部分を含み得る。例えば、ハンドピース110は、オートクレーブ機械内の熱、圧力、および水分によって損傷し得る感受性電子機器ならびに電力供給源を含み得る。また、構成要素は、それらが繰り返しの使用および滅菌を通して摩耗した状態になる際にそれらを交換する必要性を回避するために、オーラルピース102と対照的に、ハンドピース110上に配置され得る。
オーラルピース102に再び目を向けると、オーラルピース102は、ビューファインダミラー103と、付属品104と、コネクタ105とを含む。ビューファインダミラー103は、ミラーであり、したがって、反射面を有する。ビューファインダミラー103は、形状が丸形であり得る。ビューファインダミラー103の反射面は、半反射面101を含む。半反射面101は、スマートミラーデバイス100の外側から反射するように見える。しかし、半反射面101の後方からは、表面101は、透明である。ある実施形態では、表面101は、医療提供者が、反射面を観察するとき、反射のクリアなビューを有することを可能にするために十分に小さい透明な特徴である。したがって、半反射面101の後方に、画像センサ(図示せず)が、隠蔽され得る。一実施形態では、ビューファインダミラー103は、丸形であり、半反射面101は、ミラーの中心に位置する。ビューファインダミラー画像103は、表面101の後方に隠蔽されるセンサによって捕捉された画像内に含まれ得る物体についてユーザに視覚ガイダンスを提供する。したがって、スマートミラー100が口腔内環境において医療提供者によって使用されているとき、表面101の後方に隠蔽される画像センサは、その反射がビューファインダミラー103において観察され得る物体の少なくともいくつかを含む画像を捕捉し得る。
半反射面101に加えて、ビューファインダミラー103はまた、複数の光源107を含み得る。光源107は、ビューファインダミラー103の周辺の周囲に取り付けられ、場合によってはその反射面の後方に隠蔽される。光源107は、口腔内環境を照射し得る。いくつかの実施形態では、光源107は、可視光スペクトル、例えば、日光の類似する色相の光において照射し、これは、自然色の視覚的知覚(ならびに画像の捕捉)を可能にする、または、いくつかの場合では、人間の眼により快適な照明を生産する、いわゆる「暖色性白」色であり得る。いくつかの実施形態では、光源107は、不可視光放射において、例えば、赤外スペクトル内の周波数において照射する。
付属品104は、ビューファインダミラー103に取り付けられ、ビューファインダミラー103の快適な口腔内使用を可能にしながら、ハンドピース110が口腔内環境に接触することを防ぐ。付属品104は、形状の一方の端部に取り付けられるビューファインダミラー103を伴う伸長形状を有し、ビューファインダミラー103を患者の口の中に延長する。いくつかの実施形態では、付属品104は、管または円筒の形状を有するが、非丸形断面を伴うものを含む他の形状も、可能である。いくつかの実施形態では、付属品104の少なくとも一部は、中空であり、電子コンポーネントのための空間を可能にする。いくつかの実施形態では、電子コンポーネントは、別の場所に位置するが、本発明は、そのように限定されない。
付属品104の一方の端部は、ビューファインダミラー103に取り付けられる一方、対向する端部は、コネクタ105に取り付けられる。コネクタ105は、オーラルピース102をハンドピース110と接続するための物理的かつ電気的コネクタである。いくつかの実施形態では、コネクタ105は、付属品104の内部にある。例えば、ハンドピース110は、ハンドピース110をコネクタ105に取り付けるために、付属品104の中空部分の中にスライドする、または部分的にスライドすることができる。不浸透性蓋(図示せず)が、オーラルピース102が加圧滅菌されるとき、コネクタ105をシールするために使用され得る。付属品104は、スマートミラー100の使用中、オーラルピース102およびハンドピース110の分離を回避するために、ハンドピース110と相互係止し得る。ハンドピース110と相互係止するための、2つの部品は、例えば、互いに螺合し得る、または付属品104の中にスライドするハンドピース110からの圧力が、使用中に2つの部品をともに保持し得る。
上記に言及されるように、ハンドピース110は、加圧滅菌されることが可能ではない構成要素を含み得る。したがって、オーラルピース102は、これが加圧滅菌され得るように、ハンドピース110から取り外され得る。ハンドピース110は、コネクタ113と、ハンドル112と、ボタン114とを含む。コネクタ113は、オーラルピース102のコネクタ105と結合するように適合される。結合は、電気的であり得る。例えば、コネクタ113は、コネクタ105を通してオーラルピース102に電力を供給し得る。加えて、ハンドピース110およびオーラルピース102は、コネクタ113および105を介して互いにデータを伝送および受信し得る。
ハンドル112は、医療提供者がスマートミラーデバイス100をつかむことを可能にする。付属品104のように、ハンドル112は、円筒等の伸長形状を有し得、電子コンポーネントを隠蔽するために、内側が中空であり得る。例えば、ハンドル112は、電力供給源、プロセッサ、および加速度計またはジャイロスコープを隠蔽し得る。ハンドル112上にボタン114があり、これは、医療提供者からの入力を受け取る。いくつかの実施形態では、ハンドル112は、付属品104によって完全に被覆され、したがって、医療提供者は、スマートミラーデバイス100が使用中であるとき、これを文字通りつかまない。
図2は、図1に示されるスマートミラーデバイス100のビューファインダミラー103の断面を図示する図である。ビューファインダミラー103は、医療提供者の視野の中に光を反射するミラー面206を含む。図1に関して上記に言及されるように、ミラー面206は、部分反射面101を備え、これは、1つの側が医療提供者に反射するように見え、別の側が画像センサ204に対して透明であるように構成される。また、図1に関して上記に言及されるように、ミラー面206の周辺の周囲に、複数の光源107A−107Bがあり得る。光源107は、発光ダイオード等の照明デバイスであり得る。画像センサ204のように、光源107は、部分反射面(図示せず)の後方に置かれ得る。
画像センサ204と部分反射面101と間に置かれるものは、レンズ202である。レンズ202は、視野208から画像センサ204に光を屈折させ得る。レンズ202の視野208は、医療提供者の顔の一部および殆どの口腔内使用条件において医療提供者に見える患者の口の一部の両方を同時に捕捉するために十分に広い視野角を有する。
種々の実施形態では、ビューファインダミラー103は、いくつかのレンズを有し得る。複数のレンズは、異なる距離における焦点を可能にするように移動または調節し得る。自動焦点のための機構、またはミラー面とセンサとの間で1つ以上のレンズを追加もしくは除去するための機構が存在し得る。
追加の実施形態では、表面101からの光が、レンズおよびセンサの複数の構造に分割され得る。加えて、表面101からの光は、プリズムを使用して、これが画像センサ204に到達する前に折畳され得る。下記に議論されるであろうように、画像センサ204は、付属品またはハンドピース内に位置し得る。
(B.ビューファインダとしての口腔内ミラーの使用)
図3は、医療提供者の視点から患者の口を検査するために使用されている口腔内ミラーを図示する図300を示す。特に、図300は、ミラー面304を有するスマートミラーデバイス302を含む。図300では、スマートミラーデバイス302は、歯306を検査するために使用されている。図300では、ミラー面304は、医療提供者の視点からの歯306の舌面(歯の後部)を示すために位置付けられる。とりわけ、医療提供者の視点から可視であるものは、画像センサの視点から可視であるものと異なり得る。これは、例えば、図4に図示される。
図4は、患者の口からの光がミラーの反射面から反射され、医療提供者によって観察される様子を図示する図400を示す。図400は、スマートミラーデバイス302のミラー面304が、歯306の舌面から医療提供者412の眼に光を反射する様子を示す。特に、光線414から光線416に及ぶ複数の光線が、歯306からミラー面304に進行する。入射光線と呼ぶものとする光線はそれぞれ、ある入射角においてミラー面304に到達し、例えば、光線422は、入射角404において到達する。次いで、いわゆる「反射の法則」に従って、光線は、ミラー面304から反射され、したがって、各反射された光線、それぞれの入射光線、および入射点(入射点424と標識化される)における表面の法線は全て、同一平面上にある。さらに、反射の角度は、入射の角度に等しい。医療提供者412に向かって反射することになった反射された光線の組み合わせは、ミラーにおいて観察されているものを定義する。例えば、入射光線422は、ミラー面304上の入射点において、かつ入射角404においてミラー面304に到達し、医療提供者412に向かうその反射された光線420は、入射角404に等しい反射角402にある。したがって、歯306の舌面は、医療提供者412に可視であり、医療提供者412は、図3に図示される視点を観察する。
図2に関して上で説明されるように、スマートミラーデバイス302は、画像センサを含み、画像センサは、視野208を伴うレンズによって屈折される光を捕捉する。図400に図示されるように、視野208は、医療提供者412がミラーの中心から外れた入射点に焦点を合わせている場合であっても、ミラー面304上で医療提供者412に可視である歯306の舌面を捕捉するために十分に広い。したがって、医療提供者は、スマートミラーデバイス302を使用し、別個の口腔内カメラ器具に切り替えることによって処置を中断することなく画像スナップショットを捕捉し得る。それにもかかわらず、捕捉された画像は、結果が医療提供者412がミラー面304において観察するものと一致するように処理されなければならない。本処理は、口腔内ミラーの向きが、医療提供者がこれを回転させるにつれて変化し得るため、また、場合によっては、医療提供者412に可視であるよりもスマートミラーデバイス302内の画像センサにより可視であるため、例えば、視野208は、医療提供者412の顔の一部を捕捉するために十分に広い一方、医療提供者412は、ミラー面304における自身の反射を目撃しない場合があるため、要求される。したがって、ビューファインダとしての口腔内ミラーの使用を改良するために、医療提供者412によって観察されている、画像センサによって捕捉された画像の部分が、決定されなければならない。
視野208のどの部分が医療提供者412によって観察されているかを決定するために、医療提供者412の顔が、画像センサによって捕捉された画像内で検出され得る。次いで、反射の法則に従って、後方のみで、医療提供者412からミラーの入射点に向かって延長される光線420が、決定される。光線420は、角度402を有し得る。図400は、明確化および簡易化のために、平面上の光線420および光線420に関する入射ならびに反射の角度のみを識別するが、当業者は、幾何学形状が、3次元であり、図面が、入射点424における反射面に垂直である、入射平面上のこれらの光線に関する角度を説明することを認識するであろう。光線420に基づいて、ミラー面からミラー面上で医療提供者に見える物体に向かって延長される光線422が、決定される。光線422は、角度402に等しい角度404を有することによって決定される。医療提供者412の注視の中心に対応する入射点424が、視野208からの着目部分の中心を定義する。注視の中心は、眼追跡方法によって決定され得る。妥当な近似は、医療提供者412がミラーの中心における物体を観察していると仮定することである。
上記の計算を実行するための種々の方法が存在する。計算を近似するための1つ方法が、図6Aに図示される。図6Aは、スマートミラーデバイス内の画像センサから捕捉された画像620を図示する図600を示す。画像620は、歯612と、医療提供者の顔610とを含む。当業者は、図3のスマートミラーデバイスの向きを所与として、画像センサから実際に捕捉された画像が、画像620内に提示されるものから回転され得ることを認識するであろう。
顔検出アルゴリズムが、画像のどの部分が医療提供者の顔610を含むかを識別するために適用され得る。アルゴリズムはさらに、医療提供者の顔を識別するだけではなく、医療提供者の眼のみをより具体的に識別するように規定され得る。図600では、アルゴリズムは、中心点604を有する領域602内の顔を検出する。
座標点(0,0)を有する起点が、画像の中心において決定される。これは、ミラー面の中心の法線である光が捕捉される点であり得る。中心点604は、(X,Y)座標として起点に対して決定され得る。実施例として、XおよびY値は、起点に対するピクセル値であり得る。XおよびY距離は、他の方法でも同様に表わされ得る。
次に、画像620内の点606が、逆座標(−X,−Y)を有する点として決定される。点606は、医療提供者によって可視であると決定される部分の中心であり得る。中心における点606を用いて、領域608が、決定される。領域608は、これがミラー面上で可視である画像620の一部614を含むように決定されるべきである。領域608のサイズは、ミラーサイズまたは標的ディスプレイに従って固定され得る。代替として、これは、視認されている物体とミラー面との間の距離または画像内の関連情報の量に従って調節され得る。
それらが領域608内に見える際の物体の向きは、それらが画像620内に見える際の物体の向きに依存し、それらが画像620内に見える際の物体の向きは、画像センサの向きに依存し、画像センサの向きは、スマートミラーデバイスの向きに依存する。医療提供者は、観察されている物体に対する角度においてスマートミラーデバイスを保持する。角度は、これが異なる物体の、場合によってはまた、同一の物体の観察間で変化する際の変動を受ける。画像の反射を見ている医療提供者は、より良好な視認を適応させるために、角度を変化させ得る。そのような観察者にとって、ミラー位置または角度のわずかな変化は、口内の物体のビューを有意に改変し得ない。
逆に、該ミラーの中心における画像捕捉デバイスに関して、捕捉されている画像は、角度の小さい変化であっても、続けて劇的に変化し、口腔内ミラーに近接近し得る、歯等のミラーにおいて観察されている物体の画像内のサイズおよび場所の変化を引き起こし得る。画像内で捕捉される視覚情報は、角度が変化すると、変化するであろう。
物体を反射する丸形ミラーは、その中心の周囲で回転し得、観察者にとって、反射におけるいかなる明白な変化も存在しないであろう。反射の人間の解釈は、概して、上向きの自然な向きを有する。逆に、該ミラーの中心における画像捕捉デバイスに関して、回転の変化はまた、画像センサが「上向き」と見なす方向を変化させる。したがって、捕捉されている画像は、ミラーにおいて観察される画像とは実質的に異なるように見え、場合によっては該ミラーの画像捕捉のためのビューファインダとしての使用を妨害し得る。
これらの問題に対処するために、よりスマートなデバイスは、歯科器具の向きを決定するためにデータを収集する、ジャイロスコープ等の向き測定デバイスを含み得る。ジャイロスコープから収集された情報に基づいて、画像は、図5A−Cおよび図6Bに図示されるように、向け直され得る。
図5A−Cは、口腔内ミラーの向きが、医療提供者がこれを回転させるにつれて変化し得る様子を図示する図である。図5Aは、本発明によって対処されている問題の幾何学形状を図示する図500を示す。図500は、ビューファインダミラー103と、医療提供者がミラーをつかむために使用するハンドルを含む、またはそれに接続される付属品104とを含む、図1に説明されるスマートミラーデバイス100の一部を図示する。ビューファインダミラー103は、画像センサ204に結合される。
図500では、スマートミラーデバイス100は、初期位置において垂直に配置され得る。ある実施形態では、初期位置は、充電ステーション上のクレードル内であり得、本デバイスの向きは、把握される。スマートミラーデバイス100は垂直であるため、スマートミラーデバイス100の上部から、ビューファインダミラー103の中心を通して、ハンドルに向かって延設される直径と一致する軸505が、上下に真っ直ぐに面することが把握される。ここから、向き測定デバイスは、較正され得る。下向き投影507が、付属品104に向かって下方に示され得る。この向きでは、画像センサ204は、これが物体520の画像を捕捉すると、物体520が捕捉された画像の底部において見えるように向けられ得る。
図500では、法線506が、その中心においてビューファインダ103に垂直であり、これは、ある実施形態によると、画像センサ204が位置する場所である。法線506は、画像捕捉センサ204が向いている方向に向き、したがって、画像を捕捉すると、法線506の方向に位置する物体は、画像の中心において見えるであろう。
図5Bおよび図5Cは、図5Aのスマートミラーデバイス100が物体520に対して向きを変化させ得る様子を描写する図を示す。
図5Bは、スマートミラーデバイス100が法線506の周囲で回転される様子を示す。図5Bに示されるように、物体520は、画像センサ204に対して異なる場所において見える。補正なしでは、物体520は、画像センサ204から捕捉された結果として生じる画像内の面倒な場所において見える場合がある。
物体520の場所を補正するために、画像センサ204から収集された任意の画像が、線507が継続して下向きに投影することを確実にするために、線507と軸505との間の角度540だけ回転され得る。角度540は、軸505と下向き投影507との間の法線506の周囲の方位角であり得る。
上記に言及されるように、角度540は、スマートミラーデバイス100内の向き測定デバイスによって感知され得る。上記に言及されるように、向き測定デバイスは、スマートミラーデバイス100のヨー、ピッチ、およびロールの変化を測定することが可能なジャイロスコープであり得る。それらの変化を積分することによって、向き測定デバイスは、スマートミラーデバイス100のヨー、ピッチ、およびロール角を決定することができる。スマートミラーデバイス100内のジャイロスコープの位置に応じて、ロール角は、軸505と下向き投影507との間の角度540を決定するために設定される、または少なくとも使用され得る。
図5Cは、さらに回転されているスマートミラーデバイス100を示す図560である。スマートミラーデバイス100がさらに回転されるにつれて、向き測定デバイスは、スマートミラーデバイス100がさらに転動されていることを感知し、方位角570として図560に図示される、軸505と下向き投影507との間の角度がより大きいことを決定する。本方位角に基づいて、画像センサ204から捕捉された画像は、回転される。特に、画像センサ204から捕捉された画像(または少なくともその一部)は、向き測定デバイスによる測定に基づいて計算されたロール(図5Bでは角度540または図5Cでは角度570)だけ回転される。これは、例えば、図6Bに図示される。
図6Bは、ミラーにおいて医療提供者に見えるとして識別された領域が回転される様子を図示する図650を示す。図6Aの図600と同様に、図650は、スマートミラー画像センサの視点から取得された画像620を示す。画像620は、再び、医療提供者610と、歯612とを含む。再度、図600では、領域608が、ミラー面上で医療提供者610に可視であるものに対応すると決定される。本図示では、医療提供者610がスマートミラーデバイスを保持する方法に従って回転されるような領域も、示される。領域608が決定されると、これは、領域652として図650に図示されるものを生産するために、スマートミラーの向き測定デバイスによって決定された方位角だけその中心の周囲で回転される。領域652は、画像からクロッピングされ、スマートミラーの表面上で医療提供者610に可視である画像として識別され得る。
このように、スマートミラーデバイスの画像センサによって捕捉された画像内の顔を検出し、スマートミラーデバイスの向きを検出することによって、ミラー面上で医療提供者に見えるものに対応する、スマートミラーデバイスの画像センサによって捕捉された画像の一部が、決定され、したがって、より広い視野からミラー面上で可視である部分を決定することができる。
図3に戻ると、スマートミラーデバイス302はまた、患者の口を照射する。そのような照明は、医療提供者に対する口のビューを改良し、また、よりクリアな画像を捕捉するために十分な光が画像センサに到着することを可能にする。しかしながら、患者の口を検査しながらミラーを注視するとき、光源107のいくつかは、医療提供者に可視であり、場合によってはまぶしさ(すなわち、グレア)によってその視覚を妨げ得る。したがって、ビューファインダとしての口腔内ミラーの使用を改良するために、スマートミラー302の光源107からのどの光源が点灯されるべきであり、どれが点灯されるべきではないかが、決定されなければならない。
光源の107のどれが点灯されるべきであり、どれが点灯されるべきではないかを決定するために、医療提供者の顔が、画像センサによって捕捉された画像内で検出され得る。図6Aを参照すると、画像620では、中心点604と(0,0)における画像の中心との間の距離は、その中心におけるミラーの法線と医療提供者の顔に向かう方向との間の角度を表す。故に、その方向に光を放出し得る光源107は、まぶしさを回避するためにオフにされ得る。方向の角度は、球形であり得る。
光源107のどれが点灯されるべきであり、どれが点灯されるべきではないかを決定するための別の方法は、口腔内物体を含有する、画像620の部分または区画を見出すことである。これを行うための1つの方法は、同一の位置においてであるが、異なる照明を用いて取得された2つの画像、例えば、光源107の全てがオンにされた1つと、光源107の全てがオフにされた第2のものとを比較することである。照明の強度が光源からの距離の2乗に反比例することを述べる、いわゆる「逆2乗の法則」に起因して、より近接する口腔内物体に対する照明をオンにする効果は、相当なものであろう一方、より遠くの口腔外物体に対する効果は、たとえ顕著である場合でも、はるかに小さいであろう。したがって、画像は、本差異を分析することによって、口腔内および口腔外区分にセグメント化され得る。同様に、光源107のいくつかがオンにされるときであっても、着色光の使用または追加が、使用され得、例えば、緑色または青色光の照明を交互に行い、異なる画像に対する効果を比較することが、そのようなセグメント化を生成するために使用され得る、またはさらには、赤外線等の人間の眼に可視ではない周波数の光が、使用され得る。
口腔内物体を含有する画像620の区画を見出すための別の方法は、画像処理および分析技法の使用によるものである。例えば、歯を位置特定するために色をフィルタ処理することによって、または歯の咬合縁を見出すことによって、口腔内と口腔外との間の分離線を位置特定する。
最後に、より単純なセグメント化が、スマートミラーの向きを使用して実施され得る。特に、部屋の床に平行な水平面とその中心におけるミラーの表面の法線との間の角度を評価し、ある閾値に基づいて、上向きまたは下向き照明をオンにするように決定することによるものである。例えば、20度を上回ると、下向き照明を選択し、したがって、ミラーの下側区分における物体を照射し、20度を下回ると、上向き照明を選択し、上側区分における物体を照射する。加えて、どの光源が点灯されるかの選択はまた、本値がどの光源が上向きであり、どれが下向きであるかを決定するため、その中心の周囲でのミラーの回転に依存する。
図7A−Cに図示されるように、照明を要求する区画が決定されると、区画内に含まれる物体の方向に光を放出する光源107が、オンにされ得、区画の外側に光を放出する光源107が、オフにされ得る。
図7Aは、複数の光源107A−Bを含むビューファインダミラー103を伴う図700を図示する。光源107A−Bは、第1の角度において光を放出し得る。図700では、ビューファインダミラー103はまた、第1の角度とは異なる第2の角度において光を放出する、複数の光源707A−Bを含む。加えて、角度は、可変であり得る。ビューファインダミラー103内のアクチュエータ(図示せず)が、それぞれの光源107および707が種々の角度における光を放出することを可能にし得る。固定または可変を問わず、異なる角度における異なる光源を有することは、本デバイスが放出される光の方向を選択することを可能にする。また、放出される光の方向を選択することによって、スマートミラーデバイスは、光を向かわせ、着目物体を照射し、医療提供者の目をまぶしくする、医療提供者に向かって輝く光を回避し得る。
着目物体を照射するために、異なる光源107A−Bまたは707A−Bから放出される光の種々のビームは、物体において収束し得る。図700では、光源707Aおよび光源107Bが、物体702を照射するように選択される。光のビーム708Aが、光源707Aから放出され、光のビーム708Bが、光源107Bから放出される。両方のビームは、物体702において収束する。
同様に、図7Bは、物体732を照射するように選択されている光源107Aおよび光源707Bを図示する図730を示す。光のビーム738Aが、光源107Aから放出され、光のビーム738Bが、光源707Bから放出される。再び、両方のビームは、物体732において収束する。
上で説明されるように、物体702および732は、顔検出および画像処理技法を含む、種々の技法で決定され得る。このように、着目物体を含有すると決定された画像の部分を照射するために光の方向を選択することによって、実施形態は、図7Cの図760に図示されるように、医療提供者に見える画像センサの視野の部分を照射することができる。
(C.口腔内ミラーを利用するシステムおよび方法)
上記に議論されるように、実施形態は、口腔内ミラー上に統合されるべきカメラを提供し、ミラーがカメラのためのビューファインダとして作用することを可能にする。ここでは、口腔内ミラーを利用する種々のシステムおよび方法が、説明される。
図8Aは、口腔内ミラーにおいて医療提供者に見えているものを表示するためのシステムを含む、歯科オフィスの部屋800を図示する。部屋800は、患者808を検査するためにスマートミラーデバイス100を利用する医療提供者810を示す。タブレット806は、スマートミラーデバイス100において医師に可視であるものを示す。また、部屋800の内側に、ベースステーション804がある。ベースステーション804は、クレードル812および814を含む。ベースステーション804は、複数のスマートミラー(図示せず)が同一の部屋800内で使用されることを可能にする。例えば、助手が、患者に対して1つのミラーを使用し得る一方、歯科医が、同一の患者に対して別のものを使用する。ベースステーション804は、複数のスマートミラーがドッキングすることを可能にするための複数のクレードルを含む。
医療提供者810がもはやスマートミラーデバイス100を使用しなくなると、医療提供者は、これをクレードル812および814のうちの1つの上に配置し得る。スマートミラーデバイス100がクレードル812または814とドッキングされると、ベースステーション804は、スマートミラーデバイス100を充電し得る。また、上で説明されるように、クレードル812または814とドッキングされると、スマートミラーデバイス100は、そのジャイロスコープおよび加速度計を較正し得る。
ベースステーション804はまた、スマートミラーデバイス100との通信を提供する。特に、スマートミラーデバイス100は、画像および他の情報をベースステーション804に伝送し、これは、タブレット806上での表示のために情報を伝送する。通信経路は、図8Bに図示される。
図8Bは、図8Aのシステムのアーキテクチャ図850である。図8Aの構成要素に加えて、図850は、フットペダル852、医療記録サーバ856、および医療記録データベース858を示す。
スマートミラーデバイス100、タブレット806、およびフットペダル852は、Wi−Fi等の無線接続を使用して接続され得る。特に、ベースステーション804は、Wi−Fiルータとして作用し、ネットワークルーティングおよびアドレス情報をスマートミラーデバイス100、タブレット806、およびフットペダル852に提供し得る。
フットペダル852は、医療提供者がハンズフリー様式で情報を入力する方法を提供する。例えば、画像スナップショットまたはビデオクリップの捕捉を要求する。一実施形態では、スマートミラーデバイス100は、マイクロホンを含み得、医療提供者は、自身がマイクロホンから情報を記録することを所望するとき、フットペダル852を押下することによってこれを示し得る。
ベースステーション804は、インターネット等の1つ以上のネットワーク854を介して、医療記録サーバ856に接続される。ベースステーション804は、歯科オフィス内の無線LANまたは有線LANのいずれかを通してインターネットに接続され得る。サーバ856は、1つ以上の遠隔サーバコンピュータにおいて起動するように適合されるコンピュータ化プロセスである。サーバ856は、例えば、クラウドサーバであり得る。サーバ856はさらに、アーカイブ医療記録データベース858に接続される。医療記録データベース858は、スマートミラーデバイス100から収集された歯科ステータス情報を含む、医療記録情報を記憶する。
図9は、スマートミラーデバイス100の可能性として考えられる構成を図示するブロック図900である。上記に議論されるように、スマートミラーデバイス100は、2つの分離可能な構成要素である、オーラルピース102と、ハンドピース110とを有し、オーラルピース102は、ビューファインダミラー103と、画像センサ204と、光源107と、コネクタ105とを含む。
複数の信号ラインまたはバス917が存在し得、したがって、異なるコンポーネントが、異なる信号ラインまたはバス917によってリンク付けられ得、概略図に描写される信号ラインまたはバス917は、複数のそのようなものを表し得ることが、当業者に理解され得る。
図1に関して上記に議論されるように、ビューファインダミラー103は、ミラーであり、したがって、反射エリアを有する。ビューファインダミラー103からの反射は、画像センサ204によって捕捉された画像内に含まれ得る物体についてユーザに視覚ガイダンスを提供する。上記に言及されるように、ビューファインダミラー103は、丸形であり得る。いくつかの実施形態では、ビューファインダミラー103は、平面である。いくつかの実施形態では、ビューファインダミラー103は、湾曲する、凹状である、または凸状である。いくつかの実施形態では、ビューファインダミラー103は、球形形状を有する。いくつかの実施形態では、ビューファインダミラー103は、長方形形状を有する。スマートミラーデバイス100は、本発明の精神から逸脱することなく、異なる形状のビューファインダミラー103および/または複数のビューファインダミラー103を用いて具現化され得ることが、当業者によって理解されることができる。
ビューファインダミラー103は、パススルー914を含む。パススルー914は、光または視覚情報の通過を可能にし、光または視覚情報が画像センサ204に到達する(したがって、それぞれの画像が捕捉され得る)ことを可能にする、または光源107からの光による物体の照射を可能にする。いくつかの実施形態では、パススルー914は、ビューファインダミラー103における開口部である。いくつかの実施形態では、パススルー914は、ビューファインダミラー103における透明または半もしくは部分的透明エリアである。いくつかの実施形態では、パススルー914は、光学レンズを含む。いくつかの実施形態では、パススルー914は、場合によっては、ある閾値を上回る強度の光が存在するとき、透明または部分的に透明になる、ビューファインダミラー103のエリアの区分である。いくつかの実施形態では、パススルー914は、電流または電圧が存在するとき、透明または部分的に透明になる、ビューファインダミラー103のエリアの区分である。パススルー914は、ビューファインダミラー103の中心またはその周辺、もしくはその他の場所に位置することができる。いくつかの実施形態では、パススルー914は、オーラルピース102が口腔内環境において動作しているとき、または滅菌中、もしくは同等物の環境から、オーラルピース102の構成要素の他のもの、例えば、画像センサへの物理的分離を提供する。
複数のパススルー914が、存在し得る。例えば、スマートミラーデバイス100は、その中心における1つのパススルー914(視覚情報が画像センサ204に到達することを可能にする)と、その周辺に沿って等距離の複数のパススルー914(複数の光源107からの光が照明を提供することを可能にする)とを有する、丸形ビューファインダミラー103を含み得る。
画像センサ204は、静止またはビデオデジタル画像を捕捉する。いくつかの実施形態では、画像センサ204は、電荷結合素子(CCD)または相補型金属酸化膜半導体(CMOS)センサ、もしくは同等物等、ピクセルアレイを含む画像センサまたは複数の画像センサである。画像センサの実施例は、ON Semiconductor(Phoenix, Arizona)から利用可能なMT9V023である。いくつかの実施形態では、画像センサ204は、画像感知能力を伴うシステムオンチップ(SOC)の一部である。SOCは、メモリおよび/または画像信号プロセッサ(ISP)もしくは他のコンポーネントを含み得る。そのようなSOCに関する実施例は、OmniVision Technologies Inc.(Santa Clara, California)から利用可能なOV5640である。
上で説明されるように、画像センサ204は、ビューファインダミラー103において反射される物体の少なくともいくつかが、画像センサ204に直接可視であるように、ビューファインダミラー103に対して位置する(したがって、それらは、捕捉された画像内に見える)。いくつかの実施形態では、画像センサ204は、ビューファインダミラー103において反射される物体の少なくともいくつかが、画像センサ204に間接的に可視であるように、ビューファインダミラー103に対して位置する。いくつかの実施形態では、画像センサ204は、ビューファインダミラー103の反射面の少なくとも一部が、画像センサ204に可視であるように、ビューファインダミラー103に対して位置する。いくつかの実施形態では、画像センサ204は、ビューファインダミラー103の反射エリア上、またはそれに隣接して位置する。いくつかの実施形態では、画像センサ204は、ビューファインダミラー103に統合される。いくつかの実施形態では、画像センサ204は、パススルー914に隣接する。いくつかの実施形態では、レンズおよび/または光ファイバ等の光パイプが、視覚情報を画像センサ204に伝送する。いくつかの実施形態では、画像センサ204は、パススルー914によって環境(例えば、口腔内環境または滅菌環境)から物理的に分離される。
光源107は、スマートミラーデバイス100に近接する物体を照射する。いくつかの実施形態では、光源107は、ビューファインダミラー103において反射される、または画像センサ204によって捕捉される画像を改良するために、人物の口のエリアを照射する。いくつかの実施形態では、複数の光源107が、含まれる。いくつかの実施形態では、光源107は、光を放出する。いくつかの実施形態では、光源107は、スマートミラーデバイス100における別の場所に放出された光を透過する。いくつかの実施形態では、光源107によって放出または透過された光の強度は、制御されることができる。いくつかの実施形態では、複数の光源107による照明の強度は、並行して制御される。いくつかの実施形態では、複数の光源107の各光源107の強度は、独立して制御される。いくつかの実施形態では、複数の光源107は全て、同一または類似する光波長(または色)を放出する、もしくは透過する。いくつかの実施形態では、異なる波長(または色)が、複数の光源107によって放出または透過され得る。いくつかの実施形態では、光源107は、発光ダイオード(LED)である。いくつかの実施形態では、光源107は、光ファイバケーブルまたは同等物等の光パイプである。他のデバイスも、本発明の精神から逸脱することなく、口のエリアを照射するための光源107として使用され得ることを理解されたい。いくつかの実施形態では、光源107は、単色光(レーザ)である。いくつかの実施形態では、光源107は、レーザによって放出される光を透過する。いくつかの実施形態では、光源107は、ビューファインダミラー103の周辺に位置する。いくつかの実施形態では、光源107は、ビューファインダミラー103の異なる場所および/またはオーラルピース102における別の場所に位置し得る。いくつかの実施形態では、光源107によって放出および/または透過される光は、パススルー914を通過する。いくつかの実施形態では、光源107は、パススルー914によって環境(例えば、口腔内環境または滅菌環境)から物理的に分離される。いくつかの実施形態では、光源107は、ビューファインダミラー103の(非反射エリアからより遠い)ビューファインダミラー103の「後部」に位置する、またはそれに向けられ、周囲照明を提供し、ならびにより広い環境空間を照射する。
オーラルピース102のコネクタ105は、ハンドピース110のコネクタ922に(物理的かつ/もしくは電気的に)接続する。コネクタ922は、図1に図示されるコネクタ113であり得る。画像センサ204および光源107は、コネクタ105を通してハンドピース110から電力を受電する。加えて、制御および信号伝達が、コネクタ105を通して画像センサ204および光源107に、ならびにそれらから渡される。例えば、画像センサ204は、捕捉された画像をバス917を介してコネクタ105に伝送し得、これは、画像をハンドピース110に伝送する。同様に、コネクタ105は、画像センサ204を起動させるとき、およびそれを起動させるかどうかを示す制御情報を受信し、伝え得る。光源107に関して、コネクタ105は、どの光源107を起動させるか、ならびにそれらを起動させるときおよび方法に関するコマンドを受信し得る。コネクタ105は、ハンドピース110におけるコネクタ922に接続するように適合される。いくつかの実施形態では、コネクタ105およびコネクタ922は、光コネクタを含み、ハンドピース110とオーラルピース102との間の光の透過を可能にし得る。
ハンドピース110に目を向けると、ハンドピース110は、向き測定デバイス912と、ユーザインターフェース924と、プロセッサ923と、ベースステーションコネクタ958と、コネクタ922と、通信サブシステム929と、電力サブシステム921と、メモリ930とを含む。
ベースステーションコネクタ958は、オーラルピース102に取り付けられ得る、または取り付けられていない場合があるハンドピース110が、ベースステーションとドッキングすることを可能にする。ドッキングは、事前定義された向きにおいてハンドピース110を保持する物理的接続を通して起こり得る。加えて、ドッキングは、USBまたは近距離無線通信接続もしくは同等物を通して起こり得る。ベースステーションとドッキングすると、ハンドピース110は、ベースステーションコネクタ958を通して電力を受電し得、これは、電力サブシステム921を充電するために使用され得る。加えて、ハンドピース110は、ベースステーションコネクタ958を通して制御および信号伝達情報を受信し得る。例えば、ベースステーションコネクタ958は、ハンドピース110とベースステーションとの間に無線通信接続を構成するために必要とされる情報を受信し得る。ベースステーションコネクタ958は、下記に議論されるように、無線構成情報(サービスセット識別子およびパスワード等)を通信サブシステム929に提供し得る。また、ベースステーションにドッキングされると、ベースステーションコネクタ958は、較正するように向き測定デバイス912またはメモリ930内のソフトウェアに信号伝達し得る。
電力サブシステム921は、スマートミラーデバイス100のための電力を貯蔵し、電力をスマートミラーデバイス100の他の構成要素に提供する。電力サブシステム921は、AAAAバッテリ等のバッテリまたはコンデンサを含み得る。
向き測定デバイス912は、ビューファインダミラー103の向き(x、y、z位置およびヨー、ピッチ、ロール方向を含む)を測定する、またはビューファインダミラー103の向きを計算することを可能にするデータを生成する。いくつかの実施形態では、向き測定デバイス912は、加速度計である。加速度計の実施例は、NXP Semiconductors N.V.(Eindhoven, Netherlands)から利用可能なMMA8453Qである。いくつかの実施形態では、向き測定デバイス912は、ジャイロスコープである。ジャイロスコープの実施例は、また、NXP Semiconductors N.V.から利用可能なFXAS21002Cである。
ユーザインターフェース924は、オーディオ入力925と、オーディオ出力926と、入力/出力制御装置927とを含む。オーディオ入力925は、聴覚情報を捕捉する。いくつかの実施形態では、オーディオ入力925は、マイクロホンを含む。いくつかの実施形態では、オーディオ入力925は、例えば、医療提供者が患者の医療記録のために観察を口述筆記させることを可能にするために、人間の声を捕捉する。ハンドピース110は、音声を放出するオーディオ出力926を含む。いくつかの実施形態では、オーディオ出力926は、1つ以上のスピーカを含む。いくつかの実施形態では、オーディオ出力926は、ヘッドホンジャックおよび/またはヘッドホンを含む。
入力/出力制御装置927は、ユーザが、スマートミラーデバイス100におけるプロセスに関連するフィードバックを制御および/または受信するために、例えば、オーディオ記録もしくは画像捕捉を開始する、または照明の強度を設定するために、ボタン、ライト、ノブ、容量センサ、触覚フィードバックのためのアクチュエータ、または同等物を含むことができる。
通信サブシステム929は、ハンドピース110が、例えば、ベースステーション、またはパーソナルコンピュータ、スマートフォン、タブレット、もしくは類似物等の汎用算出デバイス、または別のスマートミラーデバイスもしくは遠隔スピーカ等の専用算出デバイス、もしくは同等物を含む、1つ以上の遠隔算出デバイスに接続することを可能にする。いくつかの実施形態では、通信サブシステム929は、限定ではないが、WiFiおよび/またはBluetooth(登録商標)を含む、無線ネットワークに接続するように適合される。いくつかの実施形態では、通信サブシステム929は、限定ではないが、イーサネット(登録商標)、USB、またはthunderboltを含む、有線ネットワークに取り付けるように適合される。
メモリ930は、ランダムアクセスメモリ(RAM)を含み得、また、読取専用メモリ(ROM)および/またはフラッシュメモリ等の非揮発性メモリを含み得る。メモリ430は、独立したメモリコンポーネントとして具現化され得、また、プロセッサ923および/もしくは画像センサ204等の別のコンポーネント内に埋設され得る、または独立ならびに埋設の組み合わせとして具現化され得る、ならびに/または複数のメモリコンポーネントが存在するが、本発明は、そのように限定されない。メモリ930は、ソフトウェアモジュールを含むように適合される(モジュールは、命令のセットである)。特に、メモリ930は、ストリーマモジュール953と、識別モジュール954と、電力モニタモジュール955と、HTTPサーバモジュール956と、照明コントローラモジュール950と、画像制御モジュール951と、向き計算器モジュール968とを含む。
プロセッサ923は、メモリ930内に記憶された命令を起動するように適合される。プロセッサ923は、マイクロコントローラユニット(MCU)、デジタル信号プロセッサ(DSP)、および/または画像/ビデオ処理ユニット、もしくは命令を起動する同様のコンポーネントであり得る。MCUの実施例は、Texas Instruments
Inc.(Dallas, Texas)から利用可能なMSP432P401xである。DPSの実施例は、Texas Instruments Inc.(Dallas, Texas)から利用可能なC5000である。画像/ビデオプロセッサの実施例は、Texas Instruments Inc.(Dallas, Texas)から利用可能なOMAP3525である。1つ以上のプロセッサ923が、存在し得る。プロセッサ923は、独立したコンポーネントであり得る、これはまた、画像センサ204等の別のコンポーネント内に埋設され得る、またはそれらの任意の組み合わせである。
照明コントローラモジュール950は、光源107の動作を制御する。いくつかの実施形態では、照明モジュール950は、光源107の照明の強度を設定する。いくつかの実施形態では、照明モジュール950は、ユーザ要求を受信し、照明を増加または低減させる。いくつかの実施形態では、照明モジュール950は、ユーザ要求を受信し、光源107のいくつかまたは全てをオンもしくはオフにする。いくつかの実施形態では、照明コントローラモジュール950は、他のソフトウェアモジュールから要求を受信し、光源107のうちの1つ以上のものの照明を増加および/または減少させる。いくつかの実施形態では、ユーザ入力ならびに該要求は、照明の強度を決定するために使用される。
向き計算器モジュール968は、向き測定デバイス912からのデータを読み取る。向き計算器モジュール968は、例えば、ジャイロスコープおよび加速度計からのデータを積分し、場所(例えば、x、y、z座標において)および方向(例えば、ヨー、ピッチ、およびロール)を決定し得る。向き計算器モジュール968は、スマートミラーデバイス100の場所および方向を決定するために積分を使用するため、ジャイロスコープおよび加速度計からの誤差が、経時的に蓄積されることができる。しかしながら、上で説明されるように、ベースステーションコネクタ958は、ハンドピース110を既知の角度において位置付けるようにベースステーションとドッキングし得る。ベースステーションコネクタ958が、ベースステーションとドッキングされると、ベースステーションコネクタ958は、較正するように向き計算器モジュール968に信号伝達し得る。較正するために、向き計算器モジュール968は、x、y、zならびにヨー、ピッチ、およびロール値を値ゼロ等の固定値に設定し得る。したがって、ハンドピース110が周囲で移動させられるとき、向き計算器モジュール968が決定する座標および方向値は、ベースステーションにおいて設定された座標および方向値に関連し得る。
画像制御モジュール951は、画像およびビデオの捕捉を制御し、出力画像品質に影響を及ぼす。いくつかの実施形態では、画像制御モジュール951は、例えば、照明モジュール950への要求によって、照明の強度を制御し、例えば、より良好な画像捕捉品質のために照明条件を改良する。いくつかの実施形態では、画像制御モジュール951は、時間連続的画像のセットを処理し、例えば、限定ではないが、セットから1つの画像を選択することによって、または各部分がセット内の画像からのものである、画像の部分を組み合わせることによって、改良された視覚品質を有する単一の出力画像を作成する。いくつかの実施形態では、画像が捕捉されたときの画像センサ204の加速度を示す値が、例えば、限定ではないが、最も小さい加速度を伴う画像を選択する、または異なる加速度の2つもしくはそれを上回る画像の部分間を補間することによって、出力画像の品質を改良するために使用される。いくつかの実施形態では、画像制御モジュール951は、レンズのアパーチャおよび/または焦点を制御する。いくつかの実施形態では、画像制御モジュール951は、それぞれ、異なる照明を用いた画像のシーケンスの捕捉をトリガする。いくつかの実施形態では、画像制御モジュール951は、それぞれ、照射するように設定された光源107のうちの1つ以上のものの場合によっては異なる群を用いた画像のシーケンスの捕捉をトリガする一方、光源107のうちの他の1つ以上のものは、照射するように設定されない。いくつかの実施形態では、画像制御モジュール951は、例えば、向き計算器モジュール968によって生成された回転値に基づいて、画像を回転させる。
識別モジュール954は、遠隔算出デバイスに対してスマートミラーデバイス100を識別する。いくつかの実施形態では、識別モジュール954は、識別がネットワークセッションにわたって起こる、認証ハンドシェイクプロトコルを実装する。いくつかの実施形態では、識別モジュール954は、データが遠隔算出デバイスに転送されることに先立って、識別をデータに結合する。識別は、ハンドピース110に関するグローバル一意IDを含み得る。これはまた、タイムスタンピングされ、デジタル的に署名され得る。
電力モニタモジュール955は、電力サブシステムによって利用可能なエネルギーの量およびスマートミラーデバイス100の電力使用を監視する。いくつかの実施形態では、電力モニタモジュール955は、向き測定デバイス912によって生成される運動インジケーション、例えば、限定ではないが、加速度インジケーションを受信する。いくつかの実施形態では、電力モニタモジュール955は、スマートミラーデバイス100がある閾値よりも長い時間間隔にわたって使用されていないとき、スマートミラーデバイス100をスタンバイモードに設定する。スマートミラーデバイス100が低減された量の電力を消費するスタンバイモードを設定するために、電力モニタモジュール955は、スマートミラーデバイス100のコンポーネントのいくつかへの電力供給を低減させる、もしくは完全にシャットダウンする、および/またはスマートミラーデバイス100のソフトウェアプロセスのいくつかを改変する、もしくは完全に一時停止する、または同等物であり得る。いくつかの実施形態では、電力モニタモジュール955は、例えば、スマートミラーデバイス100の使用のインジケーションが存在するとき、スマートミラーデバイス100のコンポーネントのいくつかへの電力を再開する、またはスマートミラーデバイス100のプロセスのいくつかの実行を再開することによって、スタンバイモードを終了する。いくつかの実施形態では、電力モニタ955は、他のパラメータまたはインジケーションに基づいて、スタンバイモードに入る、もしくはそれを終了するが、本発明は、そのように限定されない。いくつかの実施形態では、電力モニタ955は、使用されていないインジケーションがある閾値よりも長い時間間隔にわたって存在するとき、または他のパラメータもしくはインジケーションに基づいて、シャットダウンを実施し、スマートミラーデバイス100のコンポーネントの(スタンバイモードと比較したときに)より多くのもの、またはさらには全てへの電力を遮断する。
ストリーマモジュール953は、遠隔算出デバイスへのデータを準備および/またはストリーミングする。データは、画像センサ204から収集されたビデオ、向き計算器モジュール968から収集されたスマートミラーデバイス100の向きおよび場所、オーディオ入力925から収集されたオーディオ入力、入力/出力制御装置927から収集された任意のデータ、電力モニタ955から収集された電力関連データ、ならびに照明コントローラモジュール950からの光源107が照射される方法の仕様を含むことができる。ストリーマモジュール953は、これらの種々のソースから収集されたデータを互いに関連付け得る。異なるソースから収集されたデータを関連付けるために、ストリーマモジュール953は、タイムスタンプを添付し得る。例えば、ビデオ画像センサ204における各フレームは、収集されるタイムスタンプを含み得る。同様に、向き、オーディオ、電力、および入力制御情報は、その情報が収集されたときを示すタイムスタンプを有し得、照明情報は、光源107が規定される様式で照射されたときを示すタイムスタンプを有し得る。
いくつかの実施形態では、ストリーマモジュール953は、通信サブシステム929を介して、遠隔算出デバイス上で実行するアプリケーションにストリーミングするためのフォーマットにおいて画像、ビデオ、オーディオ、および他のデータをフォーマットする。いくつかの実施形態では、ストリーマモジュール953は、インターネットブラウザにストリーミングするために好適なフォーマット、例えば、限定ではないが、HTTPストリーミング、HTML、 HTML5、RTSP、WebRTCにおいて画像、ビデオ、オーディオ、および他のデータをフォーマットする。いくつかの実施形態では、ストリーマモジュール953は、限定ではないが、JPG、JPG 2000、MPEG−4、H.264、H.265、AAC、PCM、G.711、G.726、および同等物等の圧縮フォーマットおよび/またはフォーマットコンテナを用いて画像、ビデオ、オーディオ、および他のデータをフォーマットする。いくつかの実施形態では、専用フォーマットが、使用されるが、本発明は、そのように限定されない。
ストリーマモジュール953に加えて、ハンドピース110は、HTTPサーバ956を使用してデータを伝送し得る。いくつかの実施形態では、HTTPサーバ956は、遠隔算出デバイスに由来するHTTP要求に応答する。
図7に戻ると、ある実施形態では、スマートミラーデバイス100のビューファインダミラーは、樹脂の硬化を可能にするスペクトル内の光源を含む。医療提供者は、スマートミラーデバイスの光を使用して樹脂を照射しながら、タブレット806において硬化プロセスの進行を観察し得る。医療提供者の自身の眼に有害であり得る光への暴露を回避することに加えて、これは、器具を切り替えることを要求することなく、構造蓄積のプロセスを直ちに継続することを可能にする。
図10は、画像および場合によってはまた、補足データの分散取得ならびにパノラマもしくは没入型写真の作成またはデジタル歯科印象の生成等の後続処理のためのその記憶に関する、図8Aのシステムの例示的方法1000を図示するフローチャートである。
方法1000は、ステップ1001において、歯科医、衛生学者、またはその他等の医療提供者(HCP)が口腔内手技を実施しているときに開始され、その時間の少なくとも一部の間、HCPは、スマートミラーのビューファインダミラーにおいて着目口腔内環境エリアの反射を観察する。これは、口腔内ミラーが頻繁に使用される器具であるため、限定ではないが、歯の検査または専門家による歯の清掃等の一般的手技を含む種々のそのような手技において起こり得る。これはまた、必要ではないが、例えば、デジタル印象を生成するための専用画像取得セッションであり得る。
ステップ1002において、スマートミラーは、画像(静止またはビデオ)を捕捉する。いくつかの実施形態では、時間タグ補足データが、随意に、画像に割り当てられる。時間タグは、画像捕捉の時間を示す。いくつかの実施形態では、スマートミラー光源のいくつかまたは全てが、アクティブであり、画像が捕捉されるとき、口腔内環境を照射する。いくつかの実施形態では、光源は、人間の眼に可視である光、例えば(限定ではないが)、電子カメラフラッシュにおいて一般的な5,500K〜6,000Kの色温度を有する「日光」を用いて照射する。いくつかの実施形態では、複数の画像を捕捉する間、アクティブな光源は、変動し、それぞれ、固有の照明条件を用いて捕捉される、口腔内環境における物体(または複数の物体)の画像をもたらす。照明条件が異なるそのような複数の画像は、例えば、存在する異なる陰影に起因して、捕捉されている風景の3D再構成のために有用な情報を提供し得る。いくつかの実施形態では、照明条件の変動は、HCPが複数の照明条件を観察し得るようなものである。いくつかの実施形態では、照明条件の変動は、急速なペースで、人間の眼によって知覚され得るよりも速く起こり、したがって、場合によってはHCPにとって、照明は、定常に見える。いくつかの実施形態では、光源は、人間の可視光スペクトル内ではない光、例えば、(約700〜1,600nmの波長の)赤外光を用いて照射し、したがって、HCPは、そのような照明またはそのような照明における変動を知覚することができないが、そのような光に感受性があるセンサによる画像の捕捉を可能にする。
ステップ1003において、デバイス識別補足データが、画像に割り当てられる。デバイス識別は、特定のスマートミラーデバイスを識別する。デバイス識別は、1つ以上のシリアル番号、および/またはエンコードされたメッセージ(例えば、暗号化されたメッセージ)、ならびに/もしくは認証キー(例えば、公開キー)、もしくはその他であり得る。
ステップ1004において、位置および/または方向補足データを含む向きデータが、画像に割り当てられる。位置補足データは、スマートミラー上の着目点の空間的場所、例えば、基準場所に対するビューファインダミラーの中心の位置または画像捕捉デバイスの中心の位置を規定する、またはそれを計算するために使用されることができる。方向補足データは、角度位置に関連する1つ以上の角度を規定し、着目点の周囲の幾何学的回転、例えば、基準方向に対するビューファインダミラーの中心の周囲の回転または画像捕捉デバイスの中心の周囲の回転を表す。いくつかの実施形態では、画像捕捉の時間における位置および/または方向が、画像に割り当てられる。いくつかの実施形態では、位置および/または方向は、該位置および/または方向に到達した時間を規定する時間タグを用いてタグ付けされる。いくつかの実施形態では、複数の位置および/または方向が、そのそれぞれの時間タグとともに、1つ以上の画像に割り当てられる。追加の実施形態が、本発明の精神から逸脱することなく、画像が捕捉された時間に到達した位置および/または方向に関する情報を用いて画像を補足することを可能にし得ることが、当業者によって理解され得る。
いくつかの実施形態では、画像への補足データの割当は、補足データを用いて画像のデジタル表現を修正することによって、例えば(限定ではないが)、画像のEXIFファイル(交換可能画像ファイルフォーマット)にフィールドを追加することによって達成される。いくつかの実施形態では、画像への補足データの割当は、画像および補足データを相関する情報と結合することによって達成される。例えば、限定ではないが、画像のデジタル表現および補足データは、患者の識別および相関する時間タグ(例えば、同一の時間基準に関連する)と結合される。追加の実施形態が、本発明の精神から逸脱することなく、補足データを画像に割り当てることを可能にし得ることが、当業者によって理解され得る。
ステップ1005において、照明条件補足データが、随意に、画像に割り当てられる。照明条件補足データは、光源のどれがアクティブであるか(および/またはどれがアクティブではないか)および場合によっては光源毎に、どの強度、色、もしくは同様の属性にあるかを含む、スマートミラーの光源に関する情報を規定する。いくつかの実施形態では、画像捕捉の時間において存在する照明条件が、画像に割り当てられる。いくつかの実施形態では、対応する照明条件を伴う時間タグのセットが、該条件が変化しないままである間隔を説明し、照明の時間的変化を効果的に説明する。いくつかの実施形態では、複数の照明条件が、そのそれぞれの時間タグとともに、1つ以上の画像に割り当てられる。追加の実施形態が、本発明の精神から逸脱することなく、画像が捕捉された照明条件に関する情報を用いて画像を補足することを可能にし得ることが、当業者によって理解され得る。
ステップ1006において、画像および補足データが、サーバに伝送される。サーバへの伝送は、ベースステーションを通して起こり得る。
ステップ1007において、サーバにおいて受信された画像および他のデータが、口腔内測定値データベース1015内に記憶される(データベースが、これが容易にアクセス可能であるようにデータを編成する)。
図11は、図8Bのシステムのコンポーネントをさらに詳述するブロック図1100を図示する。図8Bのように、図1100は、スマートミラーデバイス100と、タブレット806と、医療記録サーバ856と、フットペダル852とを含み、全てが、ベースステーション804と通信する。フットペダル852、スマートミラーデバイス100、およびタブレット806は、無線インターフェース1136を介してベースステーション804と通信し得る。
図9に詳述されるように、スマートミラーデバイス100は、オーラルピース102と、スマートミラーデバイス100からベースステーション804にデータをストリーミングするストリーマモジュール953を含むハンドピース110とを含む。図1100に示されるように、ストリーマモジュール953は、いくつかのサブモジュールを含み、それぞれ、異なるタイプのデータをベースステーション804にストリーミングする。特に、ストリーマモジュール953は、ビデオデータをストリーミングするビデオストリーマ1102と、オーディオデータをストリーミングするオーディオストリーマ1104と、向きおよび場所データをストリーミングする向きストリーマ1106と、照明データをストリーミングする照明ストリーマ1108と、電力監視データをストリーミングする電力ストリーマ1112と、ボタンを押す等のスマートミラーデバイス100からのユーザ入力をストリーミングするトリガストリーマ1110とを含む。上記に議論されるように、これらのデータストリームはそれぞれ、例えば、時間タグと相関され得る。ストリーマモジュール953は、これらの種々のデータストリームをベースステーション804にストリーミングする。
ベースステーション804は、画像分析器モジュール1122と、顔検出器モジュール1128と、データストリーマモジュール1120と、ハンドピースコネクタ1124と、構成器モジュール1126と、STTコンバータ1134と、無線インターフェース1136と、まぶしさ回避モジュール1139とを含む。画像分析器モジュール1122は、着信するビデオストリームを分析し、スマートミラーデバイス100のミラー面上で医療提供者に見えるものを捕捉する。着信するビデオストリームを分析するために、画像分析器モジュール1122は、画像クロッパモジュール1130と、画像向きモジュール1132と、セグメント化モジュール1138とを含む。
顔検出器モジュール1128は、画像センサから画像を受信し、受信された画像内の医療提供者の顔の場所を決定する。加えて、顔検出器モジュール1128は、受信された画像内の顔のサイズを決定し得る。顔の場所およびサイズを決定することによって、顔検出器モジュール1128は、医療提供者の顔を含む画像の領域を決定し得る。顔検出器モジュール1128は、医療提供者の眼等の医療提供者の顔の具体的特徴を位置特定するように訓練され得る。顔検出器モジュール1128は、任意の顔検出アルゴリズムを使用し得る。例えば、顔検出器モジュール1128は、遺伝的アルゴリズム、顔を識別するように訓練されるニューラルネットワーク、または固有顔アルゴリズムを使用し得る。ある実施形態では、画像分析器モジュール1122は、それぞれの向きデータとともに、顔検出器モジュール1128によって生成されるデータを使用し、医療提供者の顔に向かう方向を決定する。結果は、最新の既知の方向として記録され、その後、それらが画像内に明確に見えない場合に、医療提供者の顔の位置を推定するために使用され得る。
顔検出器モジュール1128は、受信された画像における複数の顔を検出し得る。その場合では、顔検出器モジュール1128は、どの顔が医療提供者に対応するかを決定する必要があり得る。顔検出器モジュール1128は、医療提供者の顔が受信された画像内で最大のものであると決定し得る。代替として、顔検出器モジュール1128は、医療提供者の顔に向かう最新の記録された方向をその選択のための入力として使用し得る。また、顔検出器モジュール1128は、顔認識アルゴリズムを使用して、医療提供者の顔を認識し得る。顔認識アルゴリズムは、画像内の顔の特徴を検出し、医療提供者の既知の特徴と比較することによって動作し得る。加えて、顔認識アルゴリズムは、スマートミラーデバイス100を使用する医療提供者を識別および認証するために使用され得る。
顔検出器モジュール1128によって決定された医療提供者の顔の場所に基づいて、画像分析器モジュール1122は、ミラー面上で医療提供者に見える画像の部分を決定する。画像分析器モジュール1122は、顔検出器モジュール1128によって検出されたものに続けて、追加の画像にクロッピング等の分析を適用し得る。画像分析器モジュール1122は、図4、6A、およびBに関して上で説明されるように動作し得る。
加えて、画像分析器モジュール1122は、スマートミラーデバイス100のレンズの視野角によって引き起こされる歪みを補正する。上記に言及されるように、スマートミラーデバイス100のレンズは、広角レンズであり得る。広角レンズは、樽形歪みを引き起こし得、直線が、樽の形状において内向きに湾曲する。画像分析器モジュール1122は、例えば、これらの樽形歪みを補正し得る。
画像分析器モジュール1122が、いずれの歪みも補正し、受信されたビデオストリームからの画像のどの部分が着目されるかを決定すると、画像分析器モジュール1122の画像クロッパモジュール1130は、画像から決定された部分をクロッピングし得る。このように、画像分析器モジュール1122は、受信されたビデオのフレームをクロッピングし、スマートミラーデバイス100の反射面上で医療提供者に見えているものをより厳密に表す。
画像分析器モジュール1122の画像向きモジュール1132は、スマートミラーデバイス100の向きを補正し得る。画像向きモジュール1132は、ビデオからの画像に相関する、スマートミラーデバイス100から受信された向き情報に基づいて、スマートミラーデバイス100の向きを補正し得る。向き情報を使用して、画像向きモジュール1132は、図5A−Cおよび6Bに関して上で説明されるように、スマートミラーデバイス100の向きを補正し得る。
画像分析器モジュール1122は、スマートデバイス100からストリーミングされたビデオの全てのフレームをクロッピングおよび向けるために、上記の動作を実行し得る。画像がクロッピングおよび向けられた後、ベースステーション804のデータストリーマモジュール1120は、メモリ内でバッファリングし、ユーザへの表示のために情報をタブレット806にストリーミングし得る。加えて、ベースステーション804のデータストリーマモジュール1120は、メモリ内でバッファリングし、分析またはアーカイブ化のために画像および他の情報を医療記録サーバ856にストリーミングし得る。ベースステーション804はまた、スマートミラーデバイス100から受信された場所、照明、および他のデータとともにフルサイズの画像をバッファリングする。
画像分析器モジュール1122は、画像センサによって感知された画像内の物体を認識し得る。例えば、画像分析器モジュール1122は、患者の口の内側の物体を示す画像のエリアを決定するように構成されているセグメント化モジュール1138を含む。セグメント化モジュール1138は、画像を口腔内および口腔外区分にセグメント化するように構成される。画像を口腔内および口腔外区分にセグメント化するために、セグメント化モジュール1138は、最初に、複数の光源から放出される可変強度の光を用いて、実質的に同一の位置から画像センサによって取得された複数の写真を受信し得る。次いで、セグメント化モジュール1138は、複数の画像間の複数の異なる部分における輝度を比較し得る。最後に、セグメント化モジュール1138は、複数の画像間の輝度の相違に基づいて、口腔内区分を複数の異なる部分における一部として決定し得る。例えば、セグメント化モジュール1138は、輝度のより大きい分散が、スマートミラーデバイスに近接する表面にあり得ると決定する。
まぶしさ回避モジュール1139は、スマートミラーデバイスによって放出される光を向かわせ、医療提供者の目をまぶしくすることを回避する。まぶしさ回避モジュール1139は、セグメント化モジュール1138によって検出される口腔内部分に向かって、または顔検出器1128によって検出される医療提供者の顔から離れるように光を向かわせ得る。光を向けるために、まぶしさ回避モジュール1139は、図7A−Cに関して上で説明されるように、その光源によって放出される光の方向または強度を調節するために、コマンドをスマートミラーデバイス100に送信し得る。
タブレット806は、ベースステーション804と無線通信する、ユーザインターフェースアプリケーション1140を実行する。ユーザインターフェースアプリケーション1104は、画像センサから収集された画像を患者に表示することが可能である。
ビデオをストリーミングすることに加えて、医療提供者は、特定の時点において画像を捕捉することに関心があり得る。このように画像を捕捉するために、医療提供者は、スマートミラーデバイス100のハンドピース110上に存在するボタンを選択し得る。医療提供者が、ボタンを選択すると、トリガストリーマ1110は、ベースステーション804に、ボタンが選択されたときに相関する時間タグを伴うトリガメッセージを伝送する。
ベースステーション804が、トリガメッセージを受信すると、画像分析器モジュール1122は、ビデオ内の複数のフレームから、ボタンが押されたときの時間に先立つ複数のフレームを選択する。ボタンが押されるとき、スマートミラーデバイス100は、移動させられる可能性が高い。ボタンが押されたときの時間の直前のフレームを選択することによって、選択されたフレームは、医療提供者が捕捉するように追求した目的物をより正確に表し得る。画像分析器モジュール1122が複数のフレームを選択すると、画像分析器モジュール1122は、複数のフレームを合成画像に一体化する。合成画像を生成する本プロセスは、下記で図16に関してより詳細に説明される。合成画像は、ユーザおよびユーザインターフェースアプリケーション1140に提示され得、医療記録サーバ856内にアーカイブ化され得る。
スマートミラーデバイス100上のトリガボタンに加えて、フットペダル852も、入力のために、例えば、画像の捕捉をトリガするために使用され得る。一実施形態では、スマートミラーデバイス100上のボタンは、画像を捕捉するために使用され得る一方、フットペダル852は、オーディオを捕捉するために使用され得る。フットペダル852は、ベースステーションと無線で通信し、ユーザ入力をベースステーションに提供するように構成されたフットペダル852は、トリガストリーマモジュール1150を含む。
押されると、トリガストリーマ1150は、フットペダル852が押されていることおよびフットペダル852が押されたときを示すメッセージをベースステーション804に伝送し得る。本情報を使用して、ベースステーション804は、スマートミラーデバイス100上のオーディオストリーマモジュール1104から受信されたオーディオと相関することができる。
フットペダルが押されている間に入力された適切なオーディオが決定されると、音声/テキストコンバータ1134が、決定されたオーディオをテキストに変換することができる。音声/テキストコンバータ1134は、オーディオを、転記を提供するクラウドサービスに伝送し得る。転記は、次いで、医療記録サーバ856内のデータベースエントリ内に記憶され得る。音声/テキストコンバータ1134は、構造化フォーマットにおいてテキストを認識し得る。例えば、医療提供者は、歯の名称を暗唱し、歯の名称に続けて、その条件を暗唱し得る。例えば、医療提供者は、「右上顎第2小臼歯」と口述し、「虫歯」と口述し得る。本口述を認識すると、音声/テキストコンバータ1134は、右上顎第2小臼歯に対応する医療記録サーバ856内のデータベースエントリ内に虫歯と記載し得る。
テキストへの変換のためにオーディオ入力を提供することに加えて、スマートミラーデバイス100のオーディオ入力は、声コマンドによってアクションをトリガすることを可能にする。オーディオ入力において捕捉されたオーディオは、ベースステーションにストリーミングされ、音声/テキストコンバータ1134は、これを分析し、あるキーワード、例えば、「スナップショット」または「音声変換」という単語を探し出す。そのようなキーワードが認識される場合、対応するアクションが、起こる。例えば、患者の医療記録への入力のために、スナップショットが、取得される、または音声が、テキストに変換される。
構成器モジュール1126は、歯科ミラーがベースステーションに近接しているとき、スマートミラーデバイス100に、歯科ミラーとベースステーションとの間の無線通信を構成するために必要な構成情報を伝送するように構成される。一実施形態では、構成器モジュール1126は、歯科ミラーがハンドピースコネクタ1124とドッキングされると、構成情報を伝送するように構成される。別の実施形態では、構成器モジュール1126は、歯科ミラーが近距離無線通信(NFC)のための範囲内にあるとき、構成情報を伝送するように構成される。
構成器モジュール1126は、必要な構成情報をタブレット806およびフットペダル852にも同様に提供するように動作する。タブレット806またはフットペダル852がベースステーションに近接しているとき、構成器モジュール1126は、タブレット806またはフットペダル852に、タブレット806またはフットペダル852間の無線通信を構成するために必要な構成情報を伝送する。構成器モジュール1126は、これがNFC範囲内にあるとき、またはこれがUSBケーブル等のワイヤによって電気的に接続されると、構成情報を伝送し得る。
図12は、医療提供者に見える、口腔内ミラーにおける画像センサによって捕捉された画像の部分を推定するためのプロセス1200を図示するフローチャートである。特に、プロセス1200は、本発明のいくつかの実施形態による、ビューファインダミラーを使用して捕捉された画像内の着目中心の平行移動調節を計算する。プロセス1200は、例えば、図11の画像分析器モジュール1122の動作において使用され得る。
プロセス1200は、ステップ1201において、画像が受信されるときに開始される。次いで、ステップ1202において、画像のフレーム内の観察者の位置の場所(座標)の推定が、計算される。いくつかの実施形態では、観察者の位置の座標は、画像の最も鮮明なエリアを見出し、そのエリアにおける中心を計算することによって推定される(ビューファインダミラーを使用して、口腔内環境において捕捉された画像内で、最も鮮明なエリアは、人物の口の外側から到着する光の存在を示すと仮定する)。いくつかの実施形態では、門歯(前歯)のパターンが、認識され、上側および下側門歯の中心の位置間の間隙の中心が、観察者の位置の推定として使用される。いくつかの実施形態では、眼の虹彩または瞳孔等の人間の顔における一部のパターンが、認識され、画像内のその中心の位置が、観察者の位置の推定として使用される。ステップ1203において、画像の中心と推定された観察者の位置との間の、画像フレーム座標におけるシフトまたは差異が、計算される。ステップ1204において、計算されたシフトが、平行移動調節を計算するために使用される。シフトおよび平行移動調節は、図6Aに関して上で説明されるように計算され得る。
図13および14は、口腔内ミラーの向きを調節するために画像を回転させる方法を図示する。図13および14は、図11の画像向きモジュール1132の動作において採用され得る。図13は、本発明のいくつかの実施形態による、ビューファインダミラーの向きを計算するためのプロセス1300を図示するフロー図である。
プロセス1300は、ステップ1301において、計算がトリガされるときに開始される。いくつかの実施形態では、計算は、向き測定デバイスによって、例えば、そのようなデバイスが向きの変化を感知すると、トリガされる。いくつかの実施形態では、計算は、タイマによって、例えば、所与の時間間隔の終了時にトリガされる。いくつかの実施形態では、計算は、向きの測度が別のプロセスによって要求されると、トリガされる。
トリガされると、ステップ1302において、1つ以上の向き測定デバイスからのデータが、受信される。ステップ1303において、データが、処理される。いくつかの実施形態では、該データ処理は、該データを、プロセス1300の1回またはそれを上回る先行する実行サイクルにおいて取得された結果と組み合わせることを含む。いくつかの実施形態では、該データ処理は、経時的な該データの統合を含む。いくつかの実施形態では、該データ処理は、データにわたる移動ウィンドウ平均の計算を含む。いくつかの実施形態では、該データ処理は、信号処理フィルタ、例えば、ローパスフィルタを適用することを含む。いくつかの実施形態では、いかなるフィルタ処理も、要求されず、該データは、受信されたまま使用される。いくつかの実施形態では、該データおよび/または該データ処理の結果は、プロセス1300の1回もしくはそれを上回るさらなる実行サイクルによる、および/または別のプロセスによる使用のために適合される。いくつかの実施形態では、他のフィルタ処理技法も、プロセス1300の出力を平滑化することを目的として使用される。いくつかの実施形態では、上記のうちの複数のものおよび/または組み合わせが、使用される。1304において、結果(または複数の結果)が、別のプロセスによる、またはプロセス1300の将来の実行サイクルによる使用のために記憶される。
図14は、いくつかの実施形態による、ビューファインダミラーの向きの調節を計算するためのプロセス1400を図示するフロー図である。
プロセス1400は、ステップ1401において、向き計算がトリガされるときに開始される。ステップ1401は、図13のステップ1301と類似する。ステップ1402において、歯(口腔内またはその他)の画像が、受信される。ステップ1403において、画像処理が、画像に適用され(例えば、限定ではないが、縁検出および特徴検出技法)、以下のパターンのうちの少なくとも1つを見出す。
(1)上部歯の底縁によって形成されるライン(時として、「スマイルアーク」と呼ばれる、上顎前歯の切縁の輪郭または上側臼歯の咬合平面)、
(2)底部歯の上縁によって形成されるライン(下側門歯または臼歯の咬合平面)、または、
(3)歯間の鼓形空隙および/または可視ライン(隣接面の接触エリアである「コネクタ」)もしくは歯間の間隙。
各パターンは、次いで、ベクトルとして表される。
ステップ1404において、見出されたパターンの(どのパターンがそれぞれの画像補足デバイスにより近接し、どれがそれからより遠いかを定義する)空間的幾何学形状が、以下のうちの少なくとも1つを使用することによって推定される。
(1)見出されたパターンの相対的寸法
(2)物体の相対的寸法
(3)患者の歯および口構造の事前知識
(4)標準寸法の事前知識
ステップ1405において、値が、各パターンに割り当てられる。値は、向き調節の計算におけるそれぞれのパターンの重みとしての役割を果たす。いくつかの実施形態では、より近接近すると見出されるパターンは、より高い重みを受ける。いくつかの実施形態では、画像の中心におけるパターンは、より高い重みを受ける。いくつかの実施形態では、ビューファインダミラーの中心を表すように推定される画像内のエリアにおけるパターンは、より高い重みを受ける。いくつかの実施形態では、いくつかのパターンは、1の重みを受け、ゼロ、1つ以上のものは、0の重みを受ける。
ステップ1406において、ステップ1404において生成された空間的幾何学形状およびステップ1405において生成された重みは、画像の向きを調節するために使用する推定角度を計算するために、組み合わせられる。角度は、歯が縦方向を有するように、画像の上部または底部に向かって歯を位置付けるように計算される。
ステップ1407において、角度は、ステップ1303に関して上で説明されるように処理され、ステップにおいて、結果として生じる角度は、ステップ1304に関して上で説明されるように、ステップ1408において記憶される。
図15A−Bは、口腔内ミラーデバイスからデータを読み出すための代替方法を図示する。図15は、算出デバイスにおいて実行するインターネットブラウザを使用する、スマートミラーとのユーザ相互作用のプロセス1500を図示するフロー図である。
プロセス1500は、ステップ1501において、スマートミラーによって公開されるネットワークが選択されるときに開始される。いくつかの実施形態では、ネットワークは、WiFiネットワークであり、スマートミラーは、WiFiルータまたはゲートウェイもしくは同等物をエミュレートするサービスセット識別子(SSID)をブロードキャストし、したがって、ユーザは、これを選択し得る。いくつかの実施形態では、ユーザは、算出デバイスに既知のネットワークを選択する。いくつかの実施形態では、算出デバイスは、ルータとしてスマートミラーを自動的に選択する。いくつかの実施形態では、ユーザは、別様にネットワークを選定するが、本発明は、そのように限定されない。いくつかの実施形態では、ステップ1501において、スマートミラーおよび算出デバイスは、ルータによって公開されるローカルエリアネットワーク(LAN)に接続される。
ステップ1502において、インターネットブラウザが、HTTP要求をスマートミラーに送信する。いくつかの実施形態では、ユーザは、ブラウザが要求をスマートミラーに送信することに先立って、ユニフォームリソースロケータ(URL)および/またはユニフォームリソース識別子(URI)をブラウザに入力する。いくつかの実施形態では、ブラウザは、その実行中にURLまたはURIもしくは同等物を送信する。いくつかの実施形態では、ブラウザは、その実行の開始中にURLまたはURIもしくは同等物を送信する。いくつかの実施形態では、ブラウザは、非同期メッセージ、例えば、非同期Java(登録商標)scriptおよびXML(AJAX)を送信する。
ステップ1503において、スマートミラーは、HTTP要求を受信し、ウェブページまたは他のデータに応答する。いくつかの実施形態では、スマートミラーによって受信されたデータは、処理され、あるアクションをトリガし得、例えば、スマートミラーは、以下を行い得る。
(1)ユーザおよびパスワードを受信し、追加のユーザ要求を可能にするモードに入る、(2)ユーザおよびパスワードを受信し、その内部メモリ内にこれを記憶する、
(3)ローカルエリアネットワーク(LAN)の選択および該ネットワークへのログインデータを受信する、
(4)種々の構成パラメータを受信し、その内部メモリ内にこれを記憶する、
(5)画像および/またはオーディオならびに/もしくはその他をストリーミングする要求を受信し、その後、そのような要求に応答するための1つ以上のステップ、例えば、限定ではないが、プロセス1000(図10)に説明されるステップを実施する、
(6)その独自の識別の一部として使用するための名称を受信し、その内部メモリ内にこれを記憶する。スマートミラーにおいて実装されるHTTPサーバが実施し得る、種々のアクションが存在することを理解されたい。
ステップ1504において、インターネットブラウザは、スマートミラーから受信されたデータを解析し、適切な表現を作成する。
図15Bは、スマートミラーデバイス1521と、アプリケーション1522とを備えているシステムの実施形態を描写する。アプリケーション1522は、以下のコンピュータ化プロセスのうちの1つ以上のものを実装する際、遠隔算出デバイスのメモリ内に記憶される、または一時的に記憶されるモジュールのセット(命令のセット)である。
(1)1つ以上のスマートミラーデバイスを検索する、
(2)スマートミラーデバイスへの接続を作成する、
(3)スマートミラーからビデオおよび/またはオーディオならびに/もしくは他のデータのストリームを受信する、または、
(4)構成パラメータをスマートミラーデバイスに送信する、および同様のプロセス。そのようなシステムは、(図15Aのプロセス1500に説明されるような)インターネットブラウザの使用の代替を提供し、場合によっては、改良されたユーザ体験を提供する。
図16は、口腔内ミラーからのビデオ内の画像のストリームからの画像が、捕捉のために選択される様子を図示する図1600である。図1600は、画像1602A−Eの時間的シーケンスを含む。画像1602A−Eは、スマートミラーデバイスから収集されたビデオからのフレームであり得る。特に、画像1602A−Eは、スマートミラーデバイスの観察者に見えているものを反映するために、上記に議論されるように処理、クロッピング、および回転されているフレームであり得る。
時間1604において、スマートミラーデバイスのユーザは、画像が捕捉されることを要求する入力を行う。時間1604は、画像1602Dが捕捉された後、フレーム1602Eが捕捉される前に起こる。入力は、例えば、スマートミラーデバイス上のボタンを押すことであり得る。ボタンを押すことは、スマートミラーデバイスが、ユーザが捕捉することを意図する物体から離れるように移動させられるようにし得る。これは、例えば、フレーム1602Eに図示される。この理由から、フレーム1602Eは、捕捉のために選択されない。代わりに、前の画像1602A−Dのうちの少なくとも1つが、捕捉され得る。
さらに、前の画像のいくつかは、捕捉された画像を生成するために使用され得る。照明、明瞭さ、および焦点は、画像毎に変動し得る。したがって、種々の画像の部分が、選択され、ともに一体化され得る。図1600では、画像1602Aの部分1606、画像1602Bの部分1608、および画像1602Cの部分1610が、選択される。選択された部分は、ともに一体化され、捕捉される最終合成画像を形成する。
このように、統合されたカメラを伴う口腔内ミラーを利用する種々のシステムおよび方法が、提示される。
(D.患者ステータスを生成するための口腔内ミラーの利用)
統合されたカメラを伴う口腔内ミラーが、ルーチン歯科処置中に捕捉された画像を使用して、患者の口のパノラマ2D写真(モザイクとも呼ばれる)および/または没入型写真(360度写真または時として、仮想現実写真とも呼ばれる)において患者の歯科ステータスを捕捉するために利用されることができる。パノラマまたは没入型写真は、続けて、患者のステータスについて迅速に精通するために、歯科医または他の歯科医療提供者(HCP)によって使用され得る。さらに、数年の歯科処置全体を通して作成されたそのような写真のタイムドシーケンスが、患者の歯科ステータスの履歴ログとして使用され得る。
歯科手技がセッション中である間に作成されたそのような写真(またはその一部)はまた、患者を識別するために使用され得、それらの場合では、以前の処置からの患者のパノラマおよび/または没入型写真(またはその一部)が存在する。処置中に生成された写真(またはその一部)は、以前に記録されたものと比較され、続けて、患者識別のために使用され得る。処置されている患者の認識が達成される場合、本システムは、その後、処置中に収集された任意の写真および/または他の情報を患者に割り当て、患者の記録を効果的に選択し得る。
本発明の追加の側面は、パノラマまたは没入型写真の作成のために使用される画像および他のデータの取得が、場合によっては、複数のHCPおよび/または複数のセッション間で分散され得ることである。したがって、ここで説明される発明は、パノラマおよび/または没入型写真の生成が増分ステップにおいて実施されることを可能にする。
使用シナリオおよび実施形態は、後で規定されるシステムおよび方法の理解を補助するために説明され、本発明の精神から逸脱しない他の実施形態からの限定として見なされるべきではない。
図17Aは、患者の口の内部からの特徴が、異なる視点からの口腔内ミラーから取得された異なる画像において見える様子を図示する図1700である。特に、図1700は、患者の口1708を示し、カメラが、例えば、視点1702および1704によって示される、異なる視点からの画像を取得する様子を描写する。視点1702および1704から捕捉された画像は、患者の口の内部の写真画像1732および1734として示される。画像1732および1734は、それぞれ、視点1702および1704によって表される位置情報に関連付けられる。画像1732および1734は、歯科ミラーに取り付けられた画像センサから収集され、画像1732および1734の少なくとも一部が互いに重複するように取得された。
特徴検出アルゴリズムが、画像1732および1734の両方の重複する部分において見える特徴を識別するために適用され得る。スケール不変特徴変換(SIFT)または高速化ロバスト特徴(SURF)を含む、任意のタイプの特徴検出アルゴリズムが、使用され得る。このように、共通の特徴が、画像1732および1734間で識別された。共通の特徴は、画像1732内の点1722において、および画像1734内の点1724において見える。
点1722および1724を使用して、表面点が、決定され得る。特に、視点1702および1704の焦点から、光線1712および1714が、トラバース点1722および1724に延長され得る。光線1712および1714は、関連付けられる画像1732および1734が取得される視野角に従って延長され得る。光線1712および1714の交差点は、表面点1708であると決定される。
図17Bは、ある例示的実施形態による、生成される合致する特徴が、患者の歯科ステータスを示すパノラマにステッチされるように異なる画像を整列させるために使用される様子を図示する図1730である。図1730は、複数の画像を示す。特に、図1730は、図17Aに表される画像1732および1734を示す。加えて、図1730は、画像1736、1738、1740、1742、および1744を示す。
それぞれの写真のための関連付けられた位置情報および合致する特徴に基づいて、画像1732、1734、1736、1738、1740、1742、および1744は、一連の隣接する歯を表すために整列させられる。特に、画像1732−1744は、重複する部分が類似して見えるように調節され得る。調節は、結果として生じるパノラマ画像が患者の口を比例的に表すように、画像1732−1744間のスケールにおける変動を考慮するためであり得る。画像1732−1744はまた、画像1732−1744の重複する部分が類似する位置において見えるように、2次元平面上に配列される。例えば、画像1732および1734は、特徴1748、特徴1749、および図17Aに関して上で説明されるように決定される点群において表面点1708を推論するために使用される特徴を含む、いくつかの特徴を示す重複する部分1740を有する。画像1732および1734は、特徴1748、特徴1749、および表面点1708が、2次元グリッド上の同一の場所において見えるように、スケール変更され、位置付けられ、向けられる。このように、画像1732および1734は、それらが整列させられる場所に位置合わせされる。
画像1732−1744が整列させられると、それらは、図17Cに図示されるようなパノラマにともにステッチされることができる。
図17Cは、画像センサから捕捉された画像を患者の歯科ステータスを示すパノラマ1762にステッチするステップを図示する図1750である。このように画像をともにステッチするステップは、画像を一体化するステップを伴い得る。画像を一体化するために、それらは、パノラマ画像1762が実質的に均一な輝度を有するように、複数の写真間の輝度における変動を考慮するように調節され得る。言い換えると、輝度は、ブロックノイズがある外観を回避し、パノラマ画像1762が単一の写真であるように見えるように、画像を横断して平滑化される。輝度を調節することに加えて、ステッチするステップは、再び、ブロックノイズがある外観を回避し、パノラマ画像1762が単一の写真のように見えるようにするために、画像の色相を調節するステップを伴い得る。
そのようなパノラマ画像は、患者の歯の種々の表面に関して作成されることができる。上側および下側歯に関する前部、上部、および後部(顔面/頬側、口蓋/舌側、切縁/咬合)に関して作成される。
パノラマ画像1762が作成されると、パノラマ画像1762上の異なる点が、異なる医療観察に関連付けられ得る。例えば、各歯の履歴は、別個に記録され、歯の位置およびパノラマ画像1762に関連付けられ得る。これは、パノラマ画像1762上の点を、患者の口内の同一の場所を表す別の画像に関連付けるステップを伴い得る。他の画像は、例えば、X線画像であり得る。
図18Aは、患者の口の内側の同一の場所から種々の角度において捕捉される画像を示す図1800を図示する。特に、図1800は、患者の口1808を示し、カメラが、同一の場所からであるが、例えば、視点1802および1804によって示される、異なる角度において画像を取得する様子を描写する。視点1802および1804から捕捉された画像は、患者の口の内部の写真画像1832および1834として示される。画像1832および1834は、それぞれ、視点1802および1804によって表される角度に関連付けられる。画像1832および1834は、歯科ミラーに取り付けられた画像センサから収集され、画像1832および1834の少なくとも一部が互いに重複するように取得された。
それぞれの写真のための関連付けられた位置情報および合致する特徴に基づいて、画像1832、1834、1836、および1838は、図18Bに示されるように、それぞれ、画像センサ場所を表す球体の中心に対する、これが捕捉された角度に従って、球体にマッピングされる。
図18Bは、画像1832、1834、1836、および1838からのピクセルがこれにマッピングされる、球体1842を伴う図1840を示す。球体1842を使用して、図18Cに図示されるように、奥行きの感覚を提供する画像が、ユーザにレンダリングされることができる。
図18Cは、レンダリングを目的とする仮想カメラ1862が球体の中心において配置される、そのような没入型写真のレンダリングのための幾何学形状を図示する図1860を示す。医療提供者は、仮想カメラに関する角度を選定し、適宜、ビューポート1864が、決定される。球体のピクセルは、表示のために画像を生産するために、ビューポート1864にマッピングされる。医療提供者は、同一の中心点の周囲の口の種々の角度を表示するために、中心点の周囲でカメラを「回転」させ、ビューポートも同様に回転させるようにそれらを選定し得る。
複数のそのような球体が、患者の口の内側の種々の場所における中心点を用いて作成され、医療提供者が、仮想カメラを配置するために、中心点の位置、したがって、医療提供者が関心がある口内の位置を選定することを可能にする。
仮想カメラが視点を変更すると、異なる球体1804が、選択される、または球体1804の異なる部分が、ビューポート1802にマッピングされ、没入型画像から異なる目的物をレンダリングすることをもたらす。
(E.歯科印象を生成するための口腔内ミラーの利用)
歯科ステータスを生成することに加えて、実施形態は、奥行き測定のためのソースが画像である場合であっても、非常に正確なデジタル歯科3D印象を生成する。これは、歯科医(または他の医療提供者)が口腔内データ取得のために長い期間を費やすことを要求することなく、デジタル歯科3D印象を生成する。専用取得セッションを要求する代わりに、印象を生成するために必要とされるデータは、ルーチン歯科処置中に収集される。加えて、データは、1人またはそれを上回る医療提供者への一連の複数の患者訪問にわたって収集され得る。
図17Aに示されるように、点1722および1724を使用して、2つまたはそれを上回る画像によって捕捉された物体における表面点1708の場所が、決定され得る。特に、視点1702および1704の焦点間の距離を測定し、光線1712および1714の角度を抽出することは、縁1722、1724、および1708を伴う三角形の測度、したがって、表面点1708の場所を計算することを可能にする。患者の口の内側の物体上に位置する複数の表面点が、その後、口の3次元メッシュモデルを作成するために使用される。物体の表面点の場所を決定する他の方法、例えば、LIDAR等の放射線の飛行時間を測定すること、または陰影からの形状も、使用され得る。
物体によって投じられる陰影の量は、概して、物体の微細構成に関連する。口内の物体の形状を決定するとき、2次元画像において記録されるような物体が投じる陰影は、その3次元形状についての情報を提供し得る。陰影からの形状と称される技法を採用して3D印象を生成するためにデータを収集するために、実施形態は、図19Aおよび19Bに図示されるように、可変照明画像捕捉を含む。
図19AおよびBは、口腔内ミラーからの可変照明が、患者の歯の3次元形状に関する情報を提供し得る様子を図示する図である。図19Aは、スマートミラーデバイス1901を伴う図1900を示す。スマートミラーデバイス1901は、その中心における画像センサ1906と、その周辺における複数の光源とを有する。複数の光源は、光源1902と、光源1902に対向する、光源1904とを含む。スマートミラーデバイス1901は、患者の歯1910、特に、歯1909の画像を捕捉するように位置付けられる。
図1900では、光源1904は、照射される一方、光源1902は、照射されない。可変照明のため、歯1909は、陰影1908を投じる。画像センサ1906は、歯1909および陰影1908の両方を含む画像を捕捉する。画像から、歯1909の3次元形状についての情報が、決定されることができる。特に、画像の輝度が、陰影1908が位置する場所を決定するために分析されることができる。陰影1908を占有する画像の場所は、光源1904の視点から歯1910の3D形状によって目立たなくされている一方、画像の残りは、そうではない。
図19Bは、図19Aの図1900とは異なるように照射したスマートミラーデバイス1901を図示する図1950を示す。図1900および1950では、スマートミラーデバイス1901は、歯1910に関して実質的に同一の位置および向きを有する。図1900では、光源1904は、照射される一方、光源1902は、照射されない。しかし、図1950では、その反対が当てはまり、光源1902は、照射される一方、光源1904は、照射されない。異なる照明は、歯1909上に異なる陰影1952を投じる。再び、陰影1952から、形状情報が、決定される。陰影1952を占有する画像の場所は、光源1902の視点から歯1910の3D形状によって目立たなくされている一方、画像の残りは、そうではない。
種々の光源間の照明は、迅速に変動し得、人間の眼にとって迅速すぎ、検出することができない。照明が変動するにつれて、形状情報は、患者の口、特に、歯1910の表面を表す表面点のメッシュを生成するために集約され得る。加えて、または代替として、光源は、赤外光等の可視スペクトル外の光を放出し得る。また、検出される陰影は、本不可視光スペクトル内の陰影であり得る。
(F.ステータスおよび印象の漸増生成)
スマートミラーデバイスにおいて取得され、捕捉された画像に関連付けられた位置情報は、例えば、ステッチプロセス中にそれらを整列させるために、画像の位置付けを補助する。関連付けられた位置情報は、図5Aに説明されるように、時折較正される基準点に対する値である。さらに、異なる歯科オフィス部屋における異なる医療提供者によって取得された同一の患者の捕捉された画像は、それぞれ、異なる基準点に対する位置情報値を呈するであろう。種々のセッションにおいて捕捉された画像を使用するために、画像の位置への整合が、決定されなければならない。
図20は、1つのセッションにおいて取得された位置情報を、別のセッションにおいて取得された位置情報に整列させる方法を図示する。その後、整列させられた情報は、患者ステータスまたは印象を生成するために使用される。
本発明のいくつかの側面では、処置中、HCPは、スマートミラーを、例えば、トレイから、患者の口内の最も左のエリアの中にシフトさせ、次いで、口腔を中心としてシフトさせ、トレイに戻るようにシフトさせる。本実施例は、図20において、トレイ2005から、患者808の口の中への、口腔の周囲の、および口の外へのスマートミラー100のルートを追跡する想像線である経路2003を図示する図上に図示される。スマートミラーの相対的位置は、例えば、経時的に加速度測定値を積分することによって計算される。結果は、相対的位置およびその対応する時間を含む、位置測定値のセットである。人間の口腔は、限定された寸法以内である。スマートミラーが、口腔に挿入されるとき、これは、ある寸法以内の開口部である口を通過しなければならない。着目要素、口腔、口開口部、および同等物を体積要素と呼ぶものとする。
図21A−Bは、あるセッションにおいて取得された位置情報を、以前の1つ以上のセッションにおいて取得された位置情報に整列させる方法を図示するフローチャートである。それらは、体積要素を識別し、整列させるために位置測定値の点群を分析し、続けて重複する画像における特徴検出を使用するより微細な整合によって、そのように行う。整列させられた位置情報は、次いで、1つの漸増的に生成される点群モデルに併合される。その後、点群モデルは、漸増的に更新される患者ステータスまたは印象モデルを生成するために使用される。
ステップ2101において、本プロセスが、開始される。いくつかの実施形態では、プロセス2100の開始は、サーバがアイドル状態であるとき、またはサーバのリソース利用(算出能力、メモリ、I/O等)がある閾値を下回って十分に小さくなったときにトリガされる。いくつかの実施形態では、プロセス2100の開始は、クロックによってトリガされる。いくつかの実施形態では、プロセス2100の開始は、ユーザ要求によってトリガされる。いくつかの実施形態では、写真生成の開始は、別様にトリガされるが、本発明は、そのように限定されない。
ステップ2102において、口腔内測定値データベース2121内に記録される口腔内画像のセットおよび補足データのセットが、モデルを作成または更新することを目的として選択される。いくつかの実施形態では、セットは、例えば、プロセス1000(図10)のステップ1007において示されるように、HCPによって実施された単一の処置セッションにおいて捕捉された画像および補足データのいくつかまたは全てを備えている。いくつかの実施形態では、セットは、同一の患者に関連し、1人またはそれを上回るHCPによって実施された複数の口腔内手技において捕捉された画像のいくつかもしくはさらには場合によっては全ておよび/または補足データのいくつかもしくはさらには場合によっては全てから成る。
ステップ2103において、点群が、画像および/または補足データに関して生成される。点群は、位置の集合および場合によってはまた、対応する回転を表す。いくつかの実施形態では、(ステップ2102において選択された)補足データのセットのサブセットが、点群を生成するために使用される。いくつかの実施形態では、点群における各要素は、画像が捕捉された時間に対応する。点群は、図20に関して上で説明されるように取得され得る。
ステップ2104において、ステップ2013において生成された点群(これを新しい点群と呼ぶものとする)またはその一部は、患者モデルデータベースから読み出される1つ以上の以前のセッションにおいて生成された点群またはその一部(これを以前の点群と呼ぶものとする)に整列させられる(図21Bのプロセスもまた参照)。図21Bは、図21Aのステップ2104のサブステップのいくつかを詳述する。図21Bは、体積要素を見出し、点(位置)をこれらの体積要素に分類するための点群の分析を詳述する。行われると、体積要素は、データベースモデルに整列させられることができる。例えば、口の開口部であると決定される体積要素が、見出される。次いで、口開口部は、以前のセッションからすでに見出されたものに整列させられる。いくつかの実施形態では、整合に続けて、新しい点群は、以前の点群に併合される。点群を組み合わせることによって、結果として生じる組み合わせられた群は、よりノイジーではなく、より正確であり得る、または患者の口のより広い部分を網羅し得る。
ステップ2105において、空間的に近接する物体の画像が、選択される。いくつかの実施形態では、該画像のうちの1つ以上のものは、(ステップ2102)の口腔内画像のセットから選択される。いくつかの実施形態では、該画像のうちの1つ以上のものは、口腔内測定値のセットのデータベース2121から選択される(したがって、1つ以上の処置セッションにおいて捕捉されている場合がある)。いくつかの実施形態では、空間的近接は、ステップ2104の併合された点群を参照することによって決定される。いくつかの実施形態では、空間的近接は、画像分析方法を使用して、複数の画像内に検出された特徴を合致させることによって決定される。空間的に近接する画像内の合致する特徴が、図17Aに図示される。
ステップ2106において、画像が、位置合わせされ、したがって、画像整合が、達成される。画像が捕捉されるとき、それらは、スケールおよび視点において異なり得る。位置合わせ中、画像は、同一の物体が隣接する画像の重複する部分において実質的に同一に見えるように、画像を整列させるように調節される。これは、画像のスケールもしくは視点を変更するステップまたは任意の歪みを補正するステップを伴い得る。種々の画像が整列させられる様子の実施例が、図17Bに関して上記に描写される。
ステップ2107において、無関係の画像が、破棄される。いくつかの実施形態では、無関係の画像は、位置合わせを失敗した画像を含む。いくつかの実施形態では、無関係の画像は、着目物体を示していない画像を含む。いくつかの実施形態では、無関係の画像は、より低い品質の画像を含む。画像を無関係として分類する他の理由が存在することが、当業者によって理解され得るが、本発明は、そのように限定されない。
ステップ2108において、ステータスを更新するとき、画像が、パノラマ画像および/または没入型写真に一体化される。いくつかの実施形態では、一体化するステップは、隣接する画像間での照明(輝度)または色相の平滑化を含む。一体化するステップの実施例が、図17Cにおいて上記に図示される。
また、ステップ2108において、印象を更新するとき、奥行き情報が、空間的に近接する画像を使用して抽出され、印象モデルに併合される。いくつかの実施形態では、空間的近接ならびに類似する回転を有する画像が、奥行き情報を抽出するために使用される。いくつかの実施形態では、該画像のセットは、捕捉の時間において存在する照明条件において変動し、したがって、そのような画像は、口腔内物体が投じる陰影の変動を示し、(画像捕捉の時間における位置および向きとして定義される)それぞれの画像捕捉ポーズから物体の形状を効果的にエンコードする。したがって、複数のポーズが、複数の方向から形状情報をエンコードし、物体の3次元モデルをレンダリングする。画像を捕捉するための可変照明の実施例が、図19Aおよび19Bに関して上記に図示される。
ステップ2109において、達成されたモデル、および/または写真、もしくはその一部が、患者のモデルデータベース2120内に記憶される。いくつかの実施形態では、モデル情報は、写真にフィットするように捕捉された画像に対して適用されるべき計算および/または変換を含む。
ステップ2110において、画像および/または補足データの処理が使い切られる場合、本プロセスは、終了する。そうでなければ、これは、ステップ2105に反復的に進む。
いくつかの実施形態では、追加の条件が、プロセス2150を終了させる、または一時休止させ得、例えば、サーバは、より高い優先順位の他のタスクによって、または本プロセスに分配された時間間隔の経過および同等物に続いて、ビジーになり得る。
図21Bは、体積要素によって位置を分類するためのプロセス2100を図示するフロー図である。いくつかの実施形態では、そのような分類は、点群上に定義される体積要素を整列させることによって、点群を整列させる際のプロセスである。
ステップ2160において、(点群内に含まれ得る)位置および場合によっては方向のセットが、時間に従ってソートされる。セットは、単一のセッションまたはその一部からの測定値から成り、したがって、その期間中、患者の口および口腔は、同一の位置を中心とする。
ステップ2161において、ベクトルのセットが、定義される。各ベクトルは、2つまたはそれを上回る時間的に連続的な位置測定値に基づく。その後、ベクトルは、空間における線分および場合によってはまた、方向を定義する(方向は、例えば、運動のおおよその方向であろう)。
ステップ2162において、セットにおけるベクトル間の空間的距離が、計算される。いくつかの事例では、空間的距離は、各点がベクトルのうちの1つの上にある、任意の2つの点間の最も小さい可能性として考えられる距離である。いくつかの実施形態では、空間的距離は、(そのような交差点が存在するとき)2つのベクトルと交差する平面上の距離である。いくつかの実施形態では、空間的距離は、ベクトルの中間点間の距離である。いくつかの実施形態では、空間的距離は、ベクトルの最初または最後の点間の距離である。ベクトル間の距離を定義するための他の可能性が、本発明の精神から逸脱することなく使用され得ることが、当業者によって理解され得る。
ステップ2163において、ベクトルからの複数のサブセットが、見出され、各サブセットは、その距離がより高い限度よりも小さい(また、それに等しくあり得る)、および場合によってはまた、より低い限度よりも大きい(また、それに等しくあり得る)ように、セットにおける全てのベクトルを含む。限度は、例えば、人間の口の最も大きい開口部を表し得る、または、例えば、人間の口腔の最も大きい直径を表す、もしくは、例えば、本器具が静止する(すなわち、歯科トレイ上にある)ことを示す小さい体積を表す、および同等物である。それによって、各サブセットは、1つ以上の体積要素を表し得る。サブセットによる体積要素の各表現は、解と呼ばれるものとする。
ステップ2164において、解のうちの1つ以上のものが、拒絶される。いくつかの実施形態では、解は、それぞれのサブセット内にないベクトルが存在する場合、拒絶されるが、より高い限度がより大きい、および/またはより低い限度がより小さかった場合、サブセット内に含まれているであろう。いくつかの実施形態では、解は、これが別の解および/またはサブセットに近接する場合、拒絶される。いくつかの実施形態では、解は、これが別の解および/またはサブセットに近接しない場合、拒絶される。いくつかの実施形態では、サブセットは、画像分析に基づいて拒絶され、例えば、サブセットは、可能性として考えられる口腔に対応するが、それぞれの捕捉された画像は、口腔内視覚特性(すなわち、あるエリアにおける色、色ヒストグラム、動的範囲、物体等)を示さない。解および/またはサブセットを拒絶するための他の可能性が、本発明の精神から逸脱することなく使用され得ることが、当業者によって理解され得る。
ステップ2165において、適切な解が、体積要素の表現として選択され、それによって、点群上の体積要素を定義する。
その後、ステップ2166において、点群の点が、体積要素に割り当てられることができ、したがって、点群の点が、体積要素、例えば、口腔の内側にあるかどうかが、決定されることができる。
(G.患者ステータスおよび歯科印象を生成するためのシステム)
歯科印象を生成することまたは患者ステータスを生成することは、有意な算出能力を要求し得る。例えば、奥行き測定値抽出および画像位置合わせは、有意なメモリまたは処理能力を要求し得る。これに対処するために、実施形態は、データ取得から印象およびステータス生成を分離する。特に、データは、歯科オフィス内でスマートミラーデバイスおよびベースステーションを使用して取得され得、ベースステーションは、図22に図示されるように、処理のために遠隔サーバにデータを伝送し得る。
図22は、患者の歯科ステータスを示すパノラマおよび没入型写真をステッチし、歯科印象を生成するためのサーバを伴うシステム2200を図示する。図8のシステムのように、システム2200は、スマートミラーデバイス100と、タブレット806と、1つ以上のネットワーク854によって医療記録サーバ856に接続されるベースステーション804とを含む。記録サーバ856は、パノラマステッチャモジュール2212と、点群発生器モジュール2214と、歯科印象発生器モジュール2216と、没入型写真ステッチャモジュール2218とを含む。医療記録サーバ856はまた、患者ステータスデータベース2220および患者モデルデータベース2222に結合される。
医療記録サーバ856は、(i)患者の口の内部の複数の写真、(ii)それぞれの写真のための関連付けられた位置情報、および(iii)それぞれの写真が照射された様子を説明する情報を受信する。複数の写真は、歯科ミラーに取り付けられた画像センサから収集され、少なくとも部分的に複数の写真のうちの別の1つと重複する。収集されると、それらは、測定値データベース2220内に記憶される。
点群発生器モジュール2214は、位置情報から点群を生成し、これを以前に生成された点群に整列させ、異なる歯科セッションにおいて捕捉された画像の整合を可能にする。点群発生器モジュール2214は、図20、21に関して上で説明されるように動作し得る。
パノラマステッチャモジュール2212は、複数の写真間で合致する、重複する部分における特徴を決定する。それぞれの写真のための関連付けられた位置情報および合致する特徴に基づいて、パノラマステッチャモジュール2212は、一連の隣接する歯を表すために、複数の写真を整列させる。最後に、パノラマステッチャモジュール2212は、患者の口の内部の複数の写真を患者の口の少なくとも一部の状態を表すパノラマ画像にステッチする。パノラマステッチャモジュール2212は、図17A−Cに関して上で説明されるように動作し得る。
生成されると、パノラマステッチャモジュール2212は、パノラマ画像を患者モデルデータベース2222内に記憶する。患者モデルデータベース2222は、患者の口の履歴パノラマ画像を含む履歴患者ステータス情報を記憶する。患者モデルデータベース2222は、パノラマ画像の部分を互いに相関させ、患者の口の類似するエリアの他の画像と相関させ得る。他の画像は、例えば、X線画像であり得る。
生成および記憶されると、パノラマ画像は、表示のために読み出され得る。例えば、パノラマ画像は、ユーザインターフェースアプリケーション(図示せず)をおそらく使用して、タブレット806上に表示され得る。
没入型写真ステッチャモジュール2218は、同一の中心点位置から種々の角度において捕捉された複数の写真間で合致する、重複する部分における特徴を決定する。それぞれの写真のための関連付けられた位置情報および合致する特徴に基づいて、没入型写真ステッチャモジュール2218は、複数の写真を球体の形状上にマッピングする。次いで、没入型写真ステッチャモジュール2218は、患者の口の内部の複数の写真を中心点の周囲の捕捉された画像を表す没入型画像にステッチする。最後に、没入型写真ステッチャモジュール2218は、その中心点に従って複数のそのような球体を編成し、患者の口内の位置を球体にマッピングする。没入型写真ステッチャモジュール2218は、図18A−Cに関して上で説明されるように動作し得る。
生成されると、没入型写真ステッチャモジュール2218は、没入型写真を患者モデルデータベース2222内に記憶する。患者モデルデータベース2222は、患者の口の履歴没入型画像を含む履歴患者モデル情報を記憶する。患者モデルデータベース2222は、没入型画像の部分を互いに相関させ、患者の口の類似するエリアの他の画像と相関させ得る。他の画像は、例えば、X線画像であり得る。
生成および記憶されると、没入型画像は、表示のために読み出され得る。例えば、没入型画像は、ユーザインターフェースアプリケーション(図示せず)をおそらく使用して、タブレット806上に表示され得る。
医療記録サーバ856は、患者ステータスを示すパノラマおよび没入型写真を生成することができるだけではなく、医療記録サーバ856はまた、歯科印象を生成することができる。歯科印象を生成するために、医療記録サーバ856は、例えば、図17Aに示されるように、口内の物体の表面上の点を決定する歯科印象発生器2216を使用し、これはまた、上記に議論される、陰影からの形状技法を含む、画像分析技法を使用し得る。
表面点から、歯科印象発生器2216は、患者の口の歯科印象を生成する。歯科印象は、表面点にフィットする3次元メッシュであり得る。
このように、統合されたカメラを伴う口腔内ミラーを使用して、3次元歯科印象が、ルーチン歯科検査に続いて生成され得る。歯科印象は、例えば、歯科補綴学(義歯、インレー、およびプラスチックキャストの作製等)、歯列矯正学、修復歯科医学(例えば、歯冠またはブリッジ等の間接的な外側性修復物を受容するように準備されている歯の印象を作製するため)、顎顔面補綴(外傷、先天的欠損、および腫瘍の外科手術切除に起因する口腔内および口腔外欠損の補綴リハビリテーション)修復、診断、ならびに口腔内および/または口腔外目標(例えば、歯科インプラント)の両方のための顎顔面外科手術のために使用され得る。
(H.患者の口の照射)
上で説明されるように、口腔内ミラーは、複数の光源を有し得る。光源が制御される方法が、図23および24に関して下記に説明される。
図23は、統合されたカメラを伴う口腔内ミラーの照明を設定する方法2300を図示する。
ステップ2342において、複数の光源構成要素からの光源のセットが、選択される。ステップ2343において、セットにおける各光源が、起動(照射するように設定)され、全ての他の光源は、無効に(照射しないように設定)される。ステップ2344において、1つ以上の画像が、捕捉される。ステップ2345において、1つ以上の画像が、メモリ内に記憶される、または遠隔算出デバイスに伝送される。ステップ2346において、より多くの光源のセットが要求されるかどうかのチェックが存在し、該当する場合、捕捉プロセスが、新しいセットを用いて繰り返される。
上記のプロセスは、種々の照明の設定を伴うが、(多かれ少なかれ)同一の物体を含む画像のセットを生産する。その結果、(多かれ少なかれ)同一の物体は、異なる陰影および/または濃淡を含み、これは、改良された視覚品質を伴う画像の生産を可能にする、および/またはいわゆる陰影からの形状(または濃淡からの形状)技法を使用して、物体の3次元モデルを再構成し得る。特に、人物の口腔内環境において、スマートミラーを用いて捕捉されたそのような画像のセットは、画像捕捉デバイスに比較的に近接近する着目物体によって特徴付けられ、複数の光源が丸形ミラーの周辺上に位置する実施形態では、そのような幾何学形状に起因して、そのような物体の陰影は、そのようなプロセスに役立つように十分に異なることが予期されることができる。いくつかの実施形態では、照明の強度はまた、光源セット間で変動し得る。
図24は、口腔内ミラーからの照明を調節するためのプロセス2400を図示する。
ステップ2482において、ユーザが照明強度を無効にし得るかどうかが、決定される。これは、例えば、ユーザプロファイルまたは構成ファイルにおいて設定され得る。ユーザが照明を無効にする場合、プロセス2400は、ステップ2483および2495に進む。ステップ2483において、強度値が、ユーザの要求に従って設定される。ステップ2495において、1つ以上の光源が、それぞれ、照射するように、および/または照射しないように設定される。いくつかの実施形態では、ユーザは、スマートミラーのユーザインターフェース入力/出力制御装置、例えば、ボタンまたはノブを使用して、要求される強度を設定する。いくつかの実施形態では、ユーザは、声要求を使用して、要求される強度を設定する。いくつかの実施形態では、ユーザは、事前定義された構成を使用して、要求される強度を設定する。いくつかの実施形態では、ユーザは、遠隔算出デバイスを使用して、要求される強度を設定する。
ユーザが無効にできない場合、プロセス2400は、ステップ2484に進み、プロセス2400は、別の入力が照明を無効にするかどうかをチェックし、例えば、無効化は、別のソフトウェアプロセス(例えば、図23のプロセス2300等に図示される、照明の制御を要求するプロセス)によって生成されることができる。該当する場合、プロセス2400は、ステップ2485および2495に進む。ステップ2485において、強度値が、該要求に従って設定される。
ユーザまたは他の出力のいずれも、照明を無効にしない場合、プロセス2400は、ステップ2486に進む。ステップ2486において、1つ以上の画像の捕捉および画像処理が、1つ以上の光源に関する所望の照明強度を確立するように実施される。そのような処理は、限定ではないが、ある閾値を上回る、または下回る強度を有する画像のエリアを識別するステップ、画像から推定するステップまたは撮像センサから飽和および/もしくはブルーミングデータを受信するステップ、複数の画像を場合によっては可変照明と比較するステップ、ならびに同等物を含み得る。
ステップ2487において、所望の照明が、計算される。これは、ステップ2486において捕捉および処理された画像が暗すぎると決定されるとき、強度を増加させるステップと、ステップ2486において捕捉および処理された画像が明るすぎると決定されるとき、強度を減少させるステップとを伴い得る。所望の照明は、光源によって変動し得る。例えば、ステップ2486において、画像の特定のエリアが残りよりも暗いと決定される場合、そのエリアに近接する光源は、強度において増加し得る。逆に、ステップ2486において、画像の特定のエリアが残りよりも明るいと決定される場合、そのエリアに近接する光源は、強度において減少し得る。
ステップ2489において、ステップ2488においてチェックされる条件である、そのような入力が存在し、照明に影響を及ぼすように選択される場合、計算された値が、ユーザ入力に従って調節される。ステップ2491において、ステップ2490においてチェックされる条件である、そのような入力が存在し、照明に影響を及ぼすように選択される場合、計算された値が、別の入力に従って調節される。ステップ2492において、既存の照明が最適なものと異なるかどうかがチェックされ、該当する場合、これは、(ステップ2493において)調節される。ステップ2494において、結果が、フィルタ処理され、したがって、照明の変化が、徐々に導入される。ステップ2495において、1つ以上の光源の照明強度が、設定される。
このように、統合されたカメラを伴う口腔内ミラー上の光源は、照明の変動を調節するように変動的かつ自動的に制御されることができる。
(I.電力を節約するための口腔内ミラーの使用の監視)
図25は、電力を節約するために口腔内ミラーの使用を監視するためのプロセス2500を図示する。
ステップ2522において、スマートミラーデバイスが使用されていない時間間隔の長さを示す、「使用されていない間隔」タイマが、リセットされる。ステップ2525において、使用検出が、検証される。いくつかの実施形態では、使用検出は、運動検出を含む。いくつかの実施形態では、運動検出は、1つ以上の軸におけるスマートミラーの加速度の測定値を処理することによって実施される。いくつかの実施形態では、運動検出は、1つ以上の軸に対するスマートミラーの角度の変化の測定値を処理することによって実施される。いくつかの実施形態では、運動検出は、スマートミラーによって捕捉された時間的に連続的な画像のセットを処理する、例えば、画像間の変化を識別することによって実施される。スマートミラーの運動を検出するための種々の方法が存在することが、理解され得るが、本発明は、そのように限定されない。いくつかの実施形態では、使用検出は、スマートミラーの向きを分析するステップ、例えば、これが水平に置かれているかどうかをチェックするステップを含む(該当する場合、これは、台またはトレイ上に放置されている場合がある)。いくつかの実施形態では、使用検出は、例えば、ビューファインダミラーが口腔内環境内にあることを主張するために、スマートミラーによって捕捉された画像を処理するステップを含む。いくつかの実施形態では、複数のそのような条件検証が、スマートミラーが使用中であるかどうかを決定するために使用される。
ステップ2526において、使用は、検出されておらず、使用されていない間隔が、決定される。ステップ2527において、該間隔が、ある閾値と比較される。ステップ2528において、該間隔が、ある閾値を上回り、スマートミラーが、スタンバイ状態に設定され、そのエネルギー消費は、例えば、そのコンポーネントのうちの1つ以上のものへのエネルギー供給を低減もしくは分断する、および/またはそのソフトウェアプロセスのうちの1つ以上のものを抑制もしくは改変することによって低減される。
ステップ2529において、使用検出が、さらに検証される。ステップ2530において、スマートミラーがスタンバイモードにある周期にわたって、使用が、検出されておらず、使用されていない間隔が、計算される。ステップ2531において、該間隔が、ある閾値と比較される。間隔がある閾値を上回る場合、スマートミラーは、シャットダウンし、例えば、そのコンポーネントのうちの1つ以上のものもしくは全てへのエネルギー供給を低減もしくは分断する、および/またはそのソフトウェアプロセスのうちの1つ以上のものもしくは全てを抑制もしくは改変することによって、そのエネルギー消費をさらに低減させる。ステップ2523において、使用が、検出され、電力モードがスタンバイ中であるかが、チェックされる。
ステップ2524において、スマートミラーが、限定ではないが、そのコンポーネントのうちの1つ以上のものへの電力を再開することおよび/またはそのソフトウェアプロセスのうちの1つ以上のものを再開することを含め、スタンバイモードを終了する。
(J.口腔内ミラーの代替実施形態)
図26は、画像センサがミラーの非加圧滅菌可能部分上に配置される、口腔内ミラーの代替構成を図示する図2600である。
図2600では、ハンドピース110は、開口部2606を通して、オーラルピース102の付属品104の中空部分の中にスライドするように適合される、インサート2604を含む。いくつかの実施形態では、本構成は、例えば、オーラルピース102の代わりに、ハンドピース110内に電子コンポーネントを含むことを可能にし、したがって、それらに滅菌プロセスをもたらさないことによって、滅菌プロセスに対するオーラルピース102の改良された復元力を可能にする。例証的実施例として、いくつかの実施形態では、ハンドピース110(または特に、インサート2604)は、センサがオーラルピース102内に含まれる代わりに、画像センサ2602を含み得る。本実施例では、オーラルピース102の内部のプリズムまたは光パイプもしくはスマートミラー(図示せず)は、半反射面101から画像センサ2602に光を輸送し得る。
口腔内ミラーでは、丸形ミラーが、ある角度においてハンドルに取り付けられることが一般的である。その角度の存在は、処置中の口腔内のより快適な動作を可能にする。しかしながら、ビューファインダミラー103は、付属品104に対して平角にあり得、管2604は、画像センサ2602を半反射面101まで延在させ、光パイプの必要性を不要にし得る。ジョイントも、画像センサ2602を半反射面101まで延長するために使用され、ミラー103が、光パイプの必要性なく、付属品104に対して角度付けられることを可能にし得る。これは、図27に図示される。
図27は、画像センサがミラーの非加圧滅菌可能部分の接合される付属品上に配置される、口腔内ミラーの代替構成を図示する図2700である。
特に、図2700では、オーラルピース102は、ビューファインダミラー103が管104(の少なくとも一部)とある角度にあるように構成される。ハンドピース110のインサート2706は、固定区分2710を回転区分2712と接続するジョイント2704を有する。いくつかの実施形態では、回転区分2712は、固定区分2710に対して可変角度にあり得る。このように、図26および27に図示されるように、画像センサは、スマートミラーデバイスの非加圧滅菌可能部分上に配置され得る。
図28は、オーラルピースがいかなる電子機器も含まない、口腔内ミラーの代替構成を図示する図2800である。図2800では、ハンドピース110は、スマートミラーデバイスの全長に延在する。患者の口に進入するハンドピース110の部分は、2つのオーラルピース、すなわち、前部2802および後部2804によって封入される。前部2802および後部2804は、不浸透性シールを形成するように取り付けられ、ハンドピース110を被覆し、ハンドピース110が患者の口と接触しないことを確実にする。ハンドピース110は、おそらく、透明窓によって被覆される、ライト107および画像センサ2806を含む。前部2802は、ミラー面2808と、光が画像センサ2806まで通過することを可能にするための半反射または透明面101と、光がライト107から放出されることを可能にする窓または光パイプ2810とを含む。
別の実施形態では、反射ミラーは、ディスプレイによって置換され得、センサからの、おそらく上で説明されるように処理された画像が、表示される。同様に、半反射ミラーは、ディスプレイを隠蔽し得、したがって、例えば、医療提供者は、反射ミラーにおいて歯を観察し、X線が、例えば、歯根を示すために表示される。
別の実施形態では、図29に図示されるように、スマートミラーデバイスの経口加圧滅菌可能部分においてより多くのハードウェアおよび処理を有することが、望ましくあり得る。
図29は、スマートミラー2900の代替実施形態を図示するブロック図である。スマートミラー2900は、主として2つの点において上で説明されるスマートミラーデバイス100と異なる。第1に、向き測定デバイス912が、ハンドピース110の代わりに、オーラルピース102上に配置される。第2に、オーラルピース102は、追加の処理能力を含む。オーラルピース102は、プロセッサ923と、メモリ930とを含む。
プロセッサ923は、メモリ930上に記憶されるソフトウェアを実行する。ソフトウェアは、図1に関して上で説明されるように、照明コントローラモジュール950と、画像制御モジュール951と、向き計算器モジュール968とを含む。
(K.結論)
本明細書に開示されるデータベースは、永続メモリを含む、任意の記憶タイプの構造化メモリであり得る。実施例では、本データベースは、リレーショナルデータベースまたはファイルシステムとして実装され得る。
図9、11、22、ならびに29のプロセッサおよびモジュールはそれぞれ、コンピューティングデバイス上に実装されるハードウェア、ソフトウェア、ファームウェア、またはそれらの任意の組み合わせにおいて実装され得る。コンピューティングデバイスは、限定ではないが、命令を実行および記憶するために、非一過性メモリを含む、プロセッサおよびメモリを有するデバイスを含むことができる。メモリは、データおよびプログラム命令を有形に具現化し得る。ソフトウェアは、1つ以上のアプリケーションと、オペレーティングシステムとを含み得る。ハードウェアは、限定ではないが、プロセッサ、メモリ、およびグラフィカルユーザインターフェースディスプレイを含むことができる。コンピューティングデバイスはまた、複数のプロセッサと、複数の共有される、または別個のメモリコンポーネントとを有し得る。例えば、コンピューティングデバイスは、クラスタ化もしくは分散コンピューティング環境またはサーバファームの一部もしくは全部であり得る。
「(a)」、「(b)」、「(i)」、「(ii)」等の識別子が、時として、異なる要素またはステップのために使用される。これらの識別子は、明確化のために使用され、必ずしも、要素またはステップに関する順序を指定するわけではない。
本発明は、規定される機能およびその関係の実装を例証する機能的な基礎的要素を用いて上で説明された。これらの機能的な基礎的要素の境界は、説明の便宜上、本明細書において恣意的に定義されている。代替境界が、規定される機能およびその関係が適切に実施される限り、定義されることができる。
具体的実施形態の前述の説明は、本発明の一般的性質を完全に明らかにするため、当業者は、当分野内の知識を適用することによって、過度の実験を伴わず、本発明の一般的概念から逸脱することなく、種々の用途のためにそのような具体的実施形態を容易に修正および/または適合することができる。したがって、そのような適合および修正は、本明細書に提示される教示および指針に基づいて、開示される実施形態の均等物の意味ならびに範囲内にあるように意図される。本明細書における語句または専門用語は、限定ではなく、説明を目的とし、したがって、本明細書の専門用語または語句は、当業者によって教示および指針に照らして解釈されるべきであることを理解されたい。
本発明の範疇および範囲は、上で説明される例示的実施形態のいずれかによって限定されるべきではなく、以下の請求項およびその均等物のみに従って定義されるべきである。

Claims (26)

  1. 歯科器具であって、前記歯科器具は、
    画像センサと、
    加圧滅菌されることが可能である加圧滅菌可能部分であって、前記加圧滅菌可能部分は、
    医療提供者の視野の中に光を反射するミラー面であって、前記ミラー面は、少なくとも1つの側が前記画像センサに対して透明であるように構成されたパススルー面を備える、ミラー面と、
    中空空洞を含む付属品であって、前記付属品は、前記ミラー面を患者の口の中に延長するために前記ミラー面に取り付けられている、付属品と
    を備える、加圧滅菌可能部分と、
    前記加圧滅菌可能部分に取り外し可能に接続され、加圧滅菌されるように構成されていない非加圧滅菌可能部分であって、前記非加圧滅菌可能部分は、
    前記画像センサから捕捉された画像を伝送するように構成されたプロセッサと、
    前記中空空洞の中に挿入されるように構成されたアームであって、前記画像センサは、前記アームに取り付けられ、前記アームが前記中空空洞の中に挿入されると、前記パススルー面と結合する、アームと、
    前記プロセッサおよび前記画像センサに給電するように構成された電力供給源と
    を備える、非加圧滅菌可能部分と
    を備える、歯科器具。
  2. 前記加圧滅菌可能部分は、前記画像センサの視野の少なくとも一部を照射するために前記ミラー面の周辺に取り付けられた複数の照明デバイスをさらに備える、請求項1に記載の歯科器具。
  3. 前記非加圧滅菌可能部分は、前記画像センサを備え、前記加圧滅菌可能部分は、前記患者の口の中に挿入されるように前記非加圧滅菌可能部分の一部を封入する少なくとも2つの部品に取り外し可能である、請求項1に記載の歯科器具。
  4. 前記加圧滅菌可能部分は、少なくとも1つの側が前記画像センサに対して透明であるように構成された前記パススルー面の後方に置かれたレンズをさらに備える、請求項1に記載の歯科器具。
  5. 前記付属品は、蓋を含み、前記蓋は、コネクタを覆うことが可能であり、加圧滅菌プロセス中に水を通さない、請求項1に記載の歯科器具。
  6. 前記非加圧滅菌可能部分は、前記画像センサを備え、
    前記加圧滅菌可能部分は、前記パススルー面から前記画像センサに向かって光を透過する光パイプまたはプリズムを備えている、請求項1に記載の歯科器具。
  7. 前記加圧滅菌可能部分は、ジャイロスコープと、加速度計とを備え、前記ジャイロスコープおよび前記加速度計は、前記付属品の内部に取り付けられている、請求項6に記載の歯科器具。
  8. 前記加圧滅菌可能部分は、ジャイロスコープを備え、前記ジャイロスコープは、前記付属品の内部に取り付けられている、請求項1に記載の歯科器具。
  9. 前記加圧滅菌可能部分は、加速度計を備え、前記加速度計は、前記付属品の内部に取り付けられている、請求項1に記載の歯科器具。
  10. 前記非加圧滅菌可能部分は、ジャイロスコープと、加速度計とを備え、前記非加圧滅菌可能部分は、前記加圧滅菌可能部分に取り付けられているとき、前記非加圧滅菌可能部分が前記加圧滅菌可能部分に対して移動させられることができないように前記加圧滅菌可能部分に取り付けられている、請求項1に記載の歯科器具。
  11. 前記非加圧滅菌可能部分は、ジャイロスコープを備え、前記非加圧滅菌可能部分は、前記加圧滅菌可能部分に取り付けられているとき、前記非加圧滅菌可能部分が前記加圧滅菌可能部分に対して移動させられることができないように前記加圧滅菌可能部分に取り付けられている、請求項1に記載の歯科器具。
  12. 前記非加圧滅菌可能部分は、加速度計を備え、前記非加圧滅菌可能部分は、前記加圧滅菌可能部分に取り付けられているとき、前記非加圧滅菌可能部分が前記加圧滅菌可能部分に対して移動させられることができないように前記加圧滅菌可能部分に取り付けられている、請求項1に記載の歯科器具。
  13. 前記非加圧滅菌可能部分は、画像が前記画像センサから捕捉されるべきときを示す前記医療提供者からの入力を収集するように構成されたボタンを備える、請求項1に記載の歯科器具。
  14. 前記非加圧滅菌可能部分は、前記医療提供者が前記歯科器具をつかむためのハンドルを備える、請求項1に記載の歯科器具。
  15. 歯科器具の装置であって、前記装置は、加圧滅菌されることが可能であり、前記装置は、
    医療提供者の視野の中に光を反射するミラー面であって、前記ミラー面は、少なくとも1つの側が前記歯科器具に取り付けられた画像センサに対して透明であるように構成されたパススルー面を備える、ミラー面と、
    中空空洞を含む付属品であって、前記付属品は、前記ミラー面を患者の口の中に延長するために前記ミラー面に取り付けられており、前記ミラー面および前記付属品は、加圧滅菌されることが可能である、付属品と、
    前記付属品に取り付けられているコネクタであって、前記コネクタは、加圧滅菌されるように構成されていない部分に取り外し可能に接続されるように適合され、前記部分は、前記画像センサから捕捉された画像を伝送するように構成されたプロセッサと、前記プロセッサおよび前記画像センサに給電するように構成された電力供給源と、前記中空空洞の中に挿入されるように構成されたアームとを備え、前記画像センサは、前記アームに取り付けられ、前記アームが前記中空空洞の中に挿入されると、前記パススルー面と結合する、コネクタと
    を備える、装置。
  16. 光を前記画像センサに向かって屈折させるために前記パススルー面の後方に置かれているレンズをさらに備え、前記レンズは、前記医療提供者の顔および前記医療提供者に見える前記患者の口の一部の両方を同時に捕捉するために十分に広い視野を有する、請求項15に記載の装置。
  17. 前記コネクタは、加圧滅菌されるように構成されていない部分に電気的に接続するように適合されている、請求項15に記載の装置。
  18. 前記画像センサの視野の少なくとも一部を照射するために前記ミラー面の周辺に取り付けられた複数の照明デバイスをさらに備える、請求項17に記載の装置。
  19. 加速度計をさらに備え、前記加速度計は、前記付属品の内部に取り付けられている、請求項17に記載の装置。
  20. ジャイロスコープをさらに備え、前記ジャイロスコープは、前記付属品の内部に取り付けられている、請求項17に記載の装置。
  21. 前記コネクタを覆うことが可能であり、加圧滅菌プロセス中に水を通さない蓋をさらに備える、請求項15に記載の装置。
  22. 歯科器具のためのハンドルであって、前記ハンドルは、
    前記歯科器具に取り付けられた画像センサと、
    前記画像センサから捕捉された画像を伝送するように構成されたプロセッサと、
    前記画像センサに取り付けられたアームと、
    前記プロセッサおよび前記画像センサに給電するように構成された電力供給源と、
    加圧滅菌可能部分に取り外し可能に接続するように適合されているコネクタと
    を備え、
    前記加圧滅菌可能部分は、
    医療提供者の視野の中に光を反射するミラー面であって、前記ミラー面は、少なくとも1つの側が前記画像センサに対して透明であるように構成されたパススルー面を備える、ミラー面と、
    前記ミラー面を患者の口の中に延長するために前記ミラー面に取り付けられている付属品であって、前記ミラー面および前記付属品は、加圧滅菌されることが可能であり、前記付属品は、中空空洞を含み、前記アームは、前記中空空洞の中に挿入されるように構成され、前記アームが前記中空空洞の中に挿入されると、パススルー面と結合する、付属品と
    を備える、ハンドル。
  23. 画像が前記画像センサから捕捉されるべきときを示す前記医療提供者からの入力を収集するように構成されたボタンをさらに備える、請求項22に記載のハンドル。
  24. ジャイロスコープまたは加速度計をさらに備える、請求項22に記載のハンドル。
  25. マイクロホンをさらに備え、前記プロセッサは、前記マイクロホンによって捕捉された音声を伝送するように構成されている、請求項11に記載のハンドル。
  26. 複数の照明デバイスをさらに備え、前記加圧滅菌可能部分は、前記複数の照明デバイスからの光を透過し、前記画像センサの視野の少なくとも一部を照射するようにさらに適合されている、請求項22に記載のハンドル。
JP2021102213A 2016-05-26 2021-06-21 統合されたカメラを有する歯科ミラーおよびそのアプリケーション Active JP6935036B1 (ja)

Applications Claiming Priority (25)

Application Number Priority Date Filing Date Title
US201662341629P 2016-05-26 2016-05-26
US62/341,629 2016-05-26
US201662343034P 2016-05-30 2016-05-30
US62/343,034 2016-05-30
US201662354273P 2016-06-24 2016-06-24
US62/354,273 2016-06-24
US201662354694P 2016-06-25 2016-06-25
US62/354,694 2016-06-25
US15/360,497 US9757020B1 (en) 2016-05-26 2016-11-23 Using an intraoral mirror with an integrated camera to record dental impressions, and applicants thereof
US15/360,470 2016-11-23
US15/360,470 US9681799B1 (en) 2016-05-26 2016-11-23 Controlling an intraoral mirror with an integrated camera, and applications thereof
US15/360,497 2016-11-23
US15/360,516 2016-11-23
US15/360,560 2016-11-23
US15/360,479 2016-11-23
US15/360,305 2016-11-23
US15/360,477 US9585549B1 (en) 2016-05-26 2016-11-23 Avoiding dazzle from lights affixed to an intraoral mirror, and applications thereof
US15/360,342 US9636008B1 (en) 2016-05-26 2016-11-23 Using an intraoral mirror as a camera viewfinder, and applications thereof
US15/360,516 US9629532B1 (en) 2016-05-26 2016-11-23 System for in-room use of an intraoral mirror with an integrated camera, and applications thereof
US15/360,479 US10238277B2 (en) 2016-05-26 2016-11-23 Curing dental material using lights affixed to an intraoral mirror, and applications thereof
US15/360,305 US9655504B1 (en) 2016-05-26 2016-11-23 Autoclavable intraoral mirror with an integrated camera, and applications thereof
US15/360,477 2016-11-23
US15/360,342 2016-11-23
US15/360,560 US9907463B2 (en) 2016-05-26 2016-11-23 Using an intraoral mirror with an integrated camera to record immersive dental status, and applications thereof
JP2020084033A JP2020127790A (ja) 2016-05-26 2020-05-12 統合されたカメラを有する歯科ミラーおよびそのアプリケーション

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020084033A Division JP2020127790A (ja) 2016-05-26 2020-05-12 統合されたカメラを有する歯科ミラーおよびそのアプリケーション

Publications (2)

Publication Number Publication Date
JP6935036B1 true JP6935036B1 (ja) 2021-09-15
JP2021154148A JP2021154148A (ja) 2021-10-07

Family

ID=58163408

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2018562195A Active JP6905540B2 (ja) 2016-05-26 2017-05-22 統合されたカメラを有する歯科ミラーおよびそのアプリケーション
JP2020084033A Withdrawn JP2020127790A (ja) 2016-05-26 2020-05-12 統合されたカメラを有する歯科ミラーおよびそのアプリケーション
JP2021102213A Active JP6935036B1 (ja) 2016-05-26 2021-06-21 統合されたカメラを有する歯科ミラーおよびそのアプリケーション
JP2022107646A Pending JP2022130677A (ja) 2016-05-26 2022-07-04 統合されたカメラを有する歯科ミラーおよびそのアプリケーション

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2018562195A Active JP6905540B2 (ja) 2016-05-26 2017-05-22 統合されたカメラを有する歯科ミラーおよびそのアプリケーション
JP2020084033A Withdrawn JP2020127790A (ja) 2016-05-26 2020-05-12 統合されたカメラを有する歯科ミラーおよびそのアプリケーション

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022107646A Pending JP2022130677A (ja) 2016-05-26 2022-07-04 統合されたカメラを有する歯科ミラーおよびそのアプリケーション

Country Status (5)

Country Link
US (14) US9629532B1 (ja)
EP (1) EP3463033A1 (ja)
JP (4) JP6905540B2 (ja)
CN (1) CN109414153A (ja)
IL (2) IL296207A (ja)

Families Citing this family (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014202438A1 (de) 2013-06-19 2014-12-24 Benjamin Ohmer Verfahren zur bestimmung von bewegungsmustern bei einer zahnbehandlung
WO2015164180A1 (en) * 2014-04-24 2015-10-29 3M Innovative Properties Company A dental light irradiation device
WO2016081886A1 (en) * 2014-11-20 2016-05-26 Stayclear Dental Mirror, Llc Multi-purpose dental instrument
US10285776B1 (en) 2016-02-23 2019-05-14 Michael Feldman Unitary cordless dental drive apparatus
US9629532B1 (en) * 2016-05-26 2017-04-25 Dental Smartmirror, Inc. System for in-room use of an intraoral mirror with an integrated camera, and applications thereof
US20180263483A1 (en) * 2016-05-26 2018-09-20 Dental Smartmirror, Inc. Dental Mirror Device with Affixed Camera
WO2018036400A1 (zh) * 2016-08-23 2018-03-01 欧普照明股份有限公司 智能镜子及其控制方法
US10285578B2 (en) * 2016-09-02 2019-05-14 Vigilias LLC Dental exam tool
CN109982616B (zh) * 2016-09-27 2021-10-08 皇家飞利浦有限公司 用于支持至少一个用户执行个人护理活动的装置和方法
EP3585254B1 (en) 2017-02-24 2024-03-20 Masimo Corporation Medical device cable and method of sharing data between connected medical devices
WO2018156809A1 (en) * 2017-02-24 2018-08-30 Masimo Corporation Augmented reality system for displaying patient data
DE102017204503A1 (de) * 2017-03-17 2018-09-20 Schott Ag Beleuchtungssystem mit flachem Leuchtabschnitt
EP3375406A1 (de) * 2017-03-17 2018-09-19 a.tron3d GmbH Vorrichtung und verfahren zum optischen erfassen von dreidimensionalen oberflächengeometrien
US10229563B2 (en) * 2017-04-05 2019-03-12 Lighthouse Worldwide Solutions, Inc. Illuminated handle for portable instruments
JP7159208B2 (ja) 2017-05-08 2022-10-24 マシモ・コーポレイション ドングルを使用することによって医療システムをネットワークコントローラとペアリングするためのシステム
CN107370961B (zh) * 2017-06-16 2019-06-21 Oppo广东移动通信有限公司 图像曝光处理方法、装置及终端设备
US10376149B2 (en) * 2017-07-11 2019-08-13 Colgate-Palmolive Company Oral care evaluation system and process
US10687917B2 (en) * 2017-07-14 2020-06-23 Dental Smartmirror, Inc. Using immersive photographs to guide placement of orthodontic brackets, and applications thereof
US11439839B2 (en) * 2017-08-09 2022-09-13 Acuity Innovation And Design, Llc Hand-held treatment device using LED light sources with interchangeable emitters
KR102052723B1 (ko) * 2017-11-30 2019-12-13 주식회사 룰루랩 포터블 피부 상태 측정 장치, 및 피부 상태 진단 및 관리 시스템
US20190183620A1 (en) * 2017-12-14 2019-06-20 Garrison Dental Solutions, Llc Curing light with integrated feedback sensor
EP3735167A4 (en) * 2018-01-02 2021-09-08 Dentaleer Ltd. MIRROR KIT INTENDED TO BE USED IN DENTISTRY
WO2019149720A1 (de) 2018-02-01 2019-08-08 Kaltenbach & Voigt Gmbh Verfahren und system zum aufbau einer drahtlosen datenkommunikationsverbindung zwischen einer dentaleinheit und einem zusätzlichen gerät
USD876101S1 (en) * 2018-02-05 2020-02-25 Royal Brush Manufacturing, Inc. Make-up brush
USD861355S1 (en) * 2018-02-05 2019-10-01 Royal Brush Manufacturing, Inc. Make-up brush body
USD870463S1 (en) * 2018-02-05 2019-12-24 Royal Brush Manufacturing, Inc. Make-up brush body
US10779917B2 (en) * 2018-02-20 2020-09-22 Ivoclar Vivadent Ag Computer implemented method for modifying a digital three-dimensional model of a dentition
FI20187045A1 (en) 2018-03-16 2019-09-17 Athlos Oy Wireless intraoral X-ray imaging sensor
US10835352B2 (en) * 2018-03-19 2020-11-17 3D Imaging and Simulation Corp. Americas Intraoral scanner and computing system for capturing images and generating three-dimensional models
US20190313086A1 (en) * 2018-04-09 2019-10-10 Kristina Contreras System and method for generating virtual objects in a reflective augmented reality system
CN108597004A (zh) * 2018-05-08 2018-09-28 南京齿贝犀科技有限公司 基于局部优化算法的牙齿咬合面全景图像拼接方法
USD879291S1 (en) * 2018-05-22 2020-03-24 Dental Smartmirror, Inc. Dental instrument with light display
USD868976S1 (en) 2018-05-22 2019-12-03 Dental Smartmirror, Inc. Stand for dental instrument
USD869654S1 (en) * 2018-05-22 2019-12-10 Dental Smartmirror, Inc. Dental instrument
DE102018211366A1 (de) * 2018-07-10 2020-01-16 Sirona Dental Systems Gmbh Optisches Messverfahren sowie optische Messvorrichtung
US20210307597A1 (en) * 2018-07-23 2021-10-07 The Regents Of The University Of California Oral and oropharyngeal cancer screening system and methods of use
WO2020072328A1 (en) * 2018-10-02 2020-04-09 Convergascent Llc Endoscope with inertial measurement units and/or haptic input controls
EP3649978A1 (de) * 2018-11-07 2020-05-13 W & H Dentalwerk Bürmoos GmbH Verfahren zur webbasierten datenübertragung für ein dentales oder dentalchirurgisches behandlungs- oder diagnosesystem und derartiges behandlungs- oder diagnosesystem
CN109495310A (zh) * 2018-11-28 2019-03-19 上海世滨电子商务有限公司 一种智能设备的配网方法和系统
BG67398B1 (bg) 2018-12-19 2021-11-30 Георгиев Петров Любомир Метод за създаване, обработване, поддържане и използване на база данни от лицево-челюстни статуси и метод за изработване на зъбни гарнитури
EP3897450A1 (en) * 2018-12-20 2021-10-27 Empident GmbH Method and system for oral hygiene inspection
US20200202521A1 (en) 2018-12-21 2020-06-25 The Procter & Gamble Company Apparatus and method for operating a personal grooming appliance or household cleaning appliance
CN109645944B (zh) * 2019-01-17 2021-08-10 吉林大学 一种口腔镜
US10893175B2 (en) * 2019-02-27 2021-01-12 Bendix Commercial Vehicle Systems Llc Shadowless camera housing
EP3708115A1 (en) * 2019-03-11 2020-09-16 I-DENT Innovations for Dentistry SA Dental instrument
CN109995977A (zh) * 2019-03-31 2019-07-09 郑州大学 一种舌部图像采集装置
CN110179502A (zh) * 2019-06-06 2019-08-30 深圳大学 手术器械及使用方法
US20210045625A1 (en) * 2019-08-14 2021-02-18 B&L Biotech USA, Inc. Dental retractor with micro mirror
TWI744687B (zh) * 2019-09-03 2021-11-01 奇鋐科技股份有限公司 可更換檢測頭的口腔檢測裝置
US20210169319A1 (en) * 2019-12-04 2021-06-10 University Of Washington Nasopharyngeal Mirror Device
KR20210075673A (ko) * 2019-12-13 2021-06-23 삼성전자주식회사 사용자의 피부 상태를 측정하는 전자 장치와 이의 동작 방법
EP3838117A1 (en) * 2019-12-20 2021-06-23 Koninklijke Philips N.V. Illumination compensation in imaging
WO2021129826A1 (zh) * 2019-12-27 2021-07-01 成都牙讯科技有限公司 一种牙科图片排列方法、系统、设备及存储介质
WO2021155230A1 (en) * 2020-01-31 2021-08-05 James R. Glidewell Dental Ceramics, Inc. Teeth segmentation using neural networks
US11931213B2 (en) 2020-01-31 2024-03-19 James R. Glidewell Dental Ceramics, Inc. Semi-automatic system and method using boundary loop segments for segmenting teeth
US11842484B2 (en) * 2021-01-04 2023-12-12 James R. Glidewell Dental Ceramics, Inc. Teeth segmentation using neural networks
US20210244502A1 (en) * 2020-02-11 2021-08-12 Align Technology, Inc. At home progress tracking using phone camera
USD928960S1 (en) * 2020-02-19 2021-08-24 Dental Smartmirror, Inc. Dental instrument
WO2021256222A1 (ja) * 2020-06-19 2021-12-23 株式会社村田製作所 口腔用本体装置
US11278197B1 (en) * 2020-06-19 2022-03-22 King Saud University Combination cheek retractor/mouth mirror attachment for dental tool
JP7456311B2 (ja) 2020-07-02 2024-03-27 コニカミノルタ株式会社 口腔内測定装置
DE102020208368A1 (de) 2020-07-03 2022-01-05 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung eingetragener Verein Verfahren und Vorrichtung zur Ermittlung einer dreidimensionalen Form
CA3125845C (en) * 2020-07-24 2023-12-12 Bola Technologies, Inc. Systems and methods for voice assistant for electronic health records
CN114074294B (zh) * 2020-08-19 2022-11-18 宝山钢铁股份有限公司 一种用于圆钢修磨质量检测系统的抑制炫光方法
KR20220036712A (ko) * 2020-09-16 2022-03-23 (주)아모레퍼시픽 스마트 미러, 이의 제어 방법 및 화장품 구매 시스템
CN112294241A (zh) * 2020-10-12 2021-02-02 北京大学第一医院 一种肠造口探查装置
CN112378323A (zh) * 2020-11-09 2021-02-19 兰州大学 一种口腔修复牙预备体轴面聚合度检查器
WO2022113995A1 (ja) * 2020-11-27 2022-06-02 パナソニックIpマネジメント株式会社 歯列画像撮影システムおよび歯列画像撮影方法
US20220318989A1 (en) * 2021-03-31 2022-10-06 James R. Glidewell Dental Ceramics, Inc. Automatic Clean Up of Jaw Scans
USD973204S1 (en) * 2021-04-18 2022-12-20 Richard Green Dental tool
EP4113273A1 (de) * 2021-07-01 2023-01-04 Ivoclar Vivadent AG Dentalgerätesystem
US11278198B1 (en) * 2021-07-09 2022-03-22 Dental Smartmirror, Inc. Medical device having a valve for autoclavability
WO2023062663A1 (en) * 2021-10-17 2023-04-20 Jordan University Of Science And Technology A spring-loaded dental mirror
US20230146194A1 (en) * 2021-11-08 2023-05-11 Acme Tooling Technology Co., Ltd. Dental mirror structure capable of spraying air
WO2023178585A1 (en) * 2022-03-24 2023-09-28 The Procter & Gamble Company Digital image stitching systems and methods for generating one or more panoramic image views
WO2023242389A1 (en) * 2022-06-17 2023-12-21 3Shape A/S An intraoral scanning device and method of intraoral scanning device communication
WO2023242392A1 (en) * 2022-06-17 2023-12-21 3Shape A/S Dental system, devices and method of securing communication for a user application

Family Cites Families (144)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2393319A (en) * 1943-03-31 1946-01-22 Bertha Freedman Surgical instrument
US2428975A (en) * 1944-08-19 1947-10-14 Anthony H Lamb Illuminated mirror
US3300859A (en) * 1964-01-15 1967-01-31 Milton V Sanden Dental mirror
US3382781A (en) * 1965-02-10 1968-05-14 William L. Hamilton Camera
US3614415A (en) * 1969-05-19 1971-10-19 Vicon Products Corp Fiber illuminator
US3884222A (en) * 1974-03-11 1975-05-20 George Paul Moore Laryngoscope
SE442817B (sv) * 1981-04-01 1986-02-03 Hans Ingmar Bjelkhagen Anordning for att okulert kunna faststella en diskrepans i en tandytas luminiscensformaga
US4516195A (en) * 1983-12-28 1985-05-07 Dentsply Research & Development Corp. Multi-function dental operating light source
JPS60152904A (ja) * 1984-01-20 1985-08-12 Nippon Denso Co Ltd 車両運転者位置認識装置
US4629425A (en) * 1985-01-16 1986-12-16 Detsch Steven G Dental mirror
DE3680876D1 (de) * 1985-12-05 1991-09-19 Univ Nebraska Geraet zur zahnaerztlichen beobachtung.
US5115307A (en) * 1987-03-05 1992-05-19 Fuji Optical Systems Electronic video dental camera
US4727416A (en) * 1987-03-05 1988-02-23 Fuji Optical Systems, Inc. Electronic video dental camera
US4900253A (en) * 1987-07-15 1990-02-13 Landis Timothy J Dental mirror having ultraviolet filter
US5139421A (en) * 1987-09-03 1992-08-18 Verderber Gregory R Mirror light
US4915626A (en) * 1989-01-18 1990-04-10 Lemmey Edgar S Dental inspection and display apparatus
US4993945A (en) * 1989-08-01 1991-02-19 D-O Scientific Products, Inc. Heated dental mirror
US5027138A (en) * 1990-07-23 1991-06-25 Gandrud S Garfield Dental camera system
US5281134A (en) * 1991-11-19 1994-01-25 Schultz Allen J Fiber optic illumination system for dental instruments
US5181848A (en) * 1991-12-12 1993-01-26 Griffith Walter L Dental mirror
US5230621A (en) * 1991-12-26 1993-07-27 Bennett Jacoby Endoscopic method and device for subgingival dental procedures
DE4200741C2 (de) * 1992-01-14 2000-06-15 Kaltenbach & Voigt Einrichtung zum Erkennen von Karies an Zähnen
US5348470A (en) * 1993-01-29 1994-09-20 Mcgowan Nancy J Fiber-optic illuminated dental mirror
US5616141A (en) * 1993-04-09 1997-04-01 Ion Laser Technology Laser system for use in dental procedures
US5702249A (en) * 1995-05-19 1997-12-30 Cooper; David H. Modular intra-oral imaging system video camera
US5743731A (en) * 1995-06-07 1998-04-28 Lares Research Instrument holder with integrated camera capability and interchangeable instrument tips
WO1997001298A1 (fr) * 1995-06-28 1997-01-16 Philips Electronics N.V. Brosse a dents electrique munie de moyens pour localiser une plaque dentaire
DE19541686B4 (de) * 1995-11-08 2009-08-06 Kaltenbach & Voigt Gmbh & Co. Kg Vorrichtung zum Erkennen von Karies, Plaque oder bakteriellem Befall an Zähnen
US6254385B1 (en) * 1997-01-02 2001-07-03 Lj Laboratories, Llc Apparatus and method for measuring optical characteristics of teeth
US5741132A (en) * 1996-03-13 1998-04-21 Usui Kokusai Sangyo Kaisha Ltd. Mirror for dental examination
US6002424A (en) * 1997-06-12 1999-12-14 Schick Technologies, Inc. Dental imaging system with white balance compensation
US6217512B1 (en) * 1997-12-12 2001-04-17 Program For Appropriate Technology In Health Self-illuminated, non-invasive, visual cervical inspection apparatus and method
US6276934B1 (en) * 1998-02-19 2001-08-21 Miratech Dental Imaging, Ltd. Dental camera
US5957687A (en) * 1998-07-21 1999-09-28 Plak-Lite Company Llc Apparatus and method for detecting dental plaque
US6626825B2 (en) * 1998-11-25 2003-09-30 Jory Tsai Medical inspection device
US6594539B1 (en) * 1999-03-29 2003-07-15 Genex Technologies, Inc. Three-dimensional dental imaging method and apparatus having a reflective member
US6050939A (en) * 1999-06-03 2000-04-18 Pak Wai; Martin Throat mirror
EP1101436B1 (en) * 1999-11-19 2004-03-03 Matsushita Electric Industrial Co., Ltd. Tooth brush with video device
US6325623B1 (en) * 2000-03-31 2001-12-04 Ivan Melnyk Dental light curing and diagnosing device
US6958766B2 (en) * 2000-04-06 2005-10-25 Gendex Corporation Dental video imaging system
US6544036B1 (en) * 2000-06-16 2003-04-08 Steven J. Brattesani Illuminating dental/medical examination mirror
IT1320124B1 (it) * 2000-12-20 2003-11-18 Faro Spa Dispositivo perfezionato per gli interventi odontoiatrici.
US7139016B2 (en) * 2001-02-28 2006-11-21 Eastman Kodak Company Intra-oral camera system with chair-mounted display
US6443729B1 (en) * 2001-03-29 2002-09-03 Jeffrey A. Watson Illuminated dental mirror
US20020151941A1 (en) * 2001-04-16 2002-10-17 Shinichi Okawa Medical illuminator, and medical apparatus having the medical illuminator
EP1392155B1 (en) * 2001-05-17 2012-09-05 Oticon A/S Method and apparatus for obtaining position data relating to a probe in the ear canal
US20030016856A1 (en) * 2001-06-29 2003-01-23 Walker James K. Method and apparatus for image processing and display
US6672868B1 (en) * 2001-11-23 2004-01-06 Electro-Optical Sciences Inc. Method of transillumination imaging of teeth
JP3490707B2 (ja) * 2002-03-26 2004-01-26 淳 高橋 Ccdカメラ付きデンタルミラー
US7813787B2 (en) * 2002-07-31 2010-10-12 Inspektor Research Systems Bv Dental implement and method for tooth surface inspection
US7021798B2 (en) * 2002-10-21 2006-04-04 Efraim Tsimerman Dental mirror
DE102004001856B4 (de) * 2003-01-14 2019-05-23 J. Morita Mfg. Corp. Bilderstellungsgerät für Diagnosezwecke
US6908307B2 (en) * 2003-02-03 2005-06-21 Schick Technologies Dental camera utilizing multiple lenses
US7713058B2 (en) 2003-07-28 2010-05-11 Atsushi Takahashi Dental mirror, and an intraoral camera system using the same
US20050043970A1 (en) * 2003-08-21 2005-02-24 Kent Hsieh Electronic imaging dental record management system
US7349104B2 (en) * 2003-10-23 2008-03-25 Technest Holdings, Inc. System and a method for three-dimensional imaging systems
US7354402B2 (en) * 2004-04-02 2008-04-08 Hoarau Yves R Intraoral data input tool
US20080017787A1 (en) * 2004-04-30 2008-01-24 J. Morita Manufacturing Corporation Living Body Observing Apparatus, Intraoral Imaging Apparatus and Medical Treatment Appliance
US7509043B2 (en) * 2004-05-25 2009-03-24 Nikon Corporation Illuminating device for photographing and camera
US20060110701A1 (en) * 2004-11-19 2006-05-25 Sunstar Americas, Inc. Dental kit
US7494338B2 (en) * 2005-01-11 2009-02-24 Duane Durbin 3D dental scanner
US20060166162A1 (en) * 2005-01-24 2006-07-27 Shao-Chieh Ting Multifunctional dental mirror
JP4505740B2 (ja) * 2005-05-16 2010-07-21 ソニー株式会社 撮像装置及びその起動方法
JP4115467B2 (ja) * 2005-06-01 2008-07-09 富士フイルム株式会社 撮影装置
JP2006341025A (ja) * 2005-06-10 2006-12-21 Olympus Corp 歯科用撮像装置
US7312924B2 (en) * 2005-09-01 2007-12-25 Richard G Trissel Polarizing multiplexer and methods for intra-oral scanning
US8184367B2 (en) * 2006-02-15 2012-05-22 University Of Central Florida Research Foundation Dynamically focused optical instrument
TW200735837A (en) * 2006-03-22 2007-10-01 Ind Tech Res Inst Medical inspection device
US20080096154A1 (en) * 2006-09-12 2008-04-24 Miras Mirror Imaging Solutions Ltd. Dental camera with enhanced features
US8360771B2 (en) * 2006-12-28 2013-01-29 Therametric Technologies, Inc. Handpiece for detection of dental demineralization
US20090017416A1 (en) * 2007-03-28 2009-01-15 Bao Luu Nguyen In situ illuminator system for dental use
CN101286241A (zh) * 2008-04-17 2008-10-15 西北工业大学 基于立体像对的一种三维建筑物快速建模方法
US8184147B2 (en) * 2008-07-24 2012-05-22 Kevin Crucs Apparatus and methods for full-mouth intraoral image acquisition
KR20100044542A (ko) * 2008-10-22 2010-04-30 삼성전자주식회사 디지털 영상 처리기의 절전 장치 및 방법
CN101923844A (zh) * 2009-06-16 2010-12-22 廖礼士 图像呈现方向的校正方法及系统
CN101639933B (zh) * 2009-07-16 2013-03-27 上海合合信息科技发展有限公司 图像旋转校正方法及系统、电子设备
DE102009026248A1 (de) * 2009-07-24 2011-01-27 Degudent Gmbh Generierung eines Gesamtdatensatzes
EP2604180A4 (en) * 2010-08-09 2017-07-05 National University Corporation Shizuoka University Gaze point detection method and gaze point detection device
CN102376081A (zh) * 2010-08-25 2012-03-14 北京中科亚创科技有限责任公司 自动修正图像的方法及装置
GB2486413B (en) * 2010-12-13 2013-06-19 Mordechi Shahak Dental implant detector
DE102010063124A1 (de) * 2010-12-15 2012-06-21 Sirona Dental Systems Gmbh Vorrichtung und Verfahren zur Bearbeitung eines virtuellen 3D-Models mittels eines virtuellen Werkzeugs
NZ611792A (en) * 2010-12-22 2014-12-24 Spark Dental Technology Ltd Dental charting system
JP5651132B2 (ja) * 2011-01-11 2015-01-07 株式会社アドバンス 口腔内撮影表示システム
AU2012206109B2 (en) * 2011-01-11 2015-02-19 Kabushiki Kaisya Advance Oral imaging and display system
JP2012143484A (ja) * 2011-01-14 2012-08-02 Panasonic Corp 歯画像表示方法と、それを用いた歯画像表示装置、およびそれに用いる記録媒体
KR101806891B1 (ko) * 2011-04-12 2017-12-08 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어방법
FR2977469B1 (fr) * 2011-07-08 2013-08-02 Francois Duret Dispositif de mesure tridimensionnelle utilise dans le domaine dentaire
AU2011205223C1 (en) * 2011-08-09 2013-03-28 Microsoft Technology Licensing, Llc Physical interaction with virtual objects for DRM
US10019962B2 (en) * 2011-08-17 2018-07-10 Microsoft Technology Licensing, Llc Context adaptive user interface for augmented reality display
CA2750287C (en) * 2011-08-29 2012-07-03 Microsoft Corporation Gaze detection in a see-through, near-eye, mixed reality display
US9025252B2 (en) * 2011-08-30 2015-05-05 Microsoft Technology Licensing, Llc Adjustment of a mixed reality display for inter-pupillary distance alignment
US9480539B2 (en) * 2011-11-03 2016-11-01 James Ortlieb Viewing system and viewing method for assisting user in carrying out surgery by identifying a target image
JP6169832B2 (ja) * 2011-11-29 2017-07-26 東芝メディカルシステムズ株式会社 X線撮影装置
US20130137076A1 (en) * 2011-11-30 2013-05-30 Kathryn Stone Perez Head-mounted display based education and instruction
WO2013104420A1 (en) * 2012-01-12 2013-07-18 Brainlab Ag Method and system for medical tracking using a plurality of camera positions
WO2013109282A1 (en) * 2012-01-20 2013-07-25 Empire Technology Development Llc Mirror array display system
KR101873750B1 (ko) * 2012-02-02 2018-07-03 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2013119776A1 (en) * 2012-02-07 2013-08-15 Braun Gmbh Oral health detection device
WO2013132091A1 (en) * 2012-03-09 2013-09-12 3Shape A/S 3d scanner with steam autoclavable tip containing a heated optical element
JP6006519B2 (ja) * 2012-04-16 2016-10-12 キヤノン株式会社 眼科装置
JP5974640B2 (ja) * 2012-06-01 2016-08-23 ソニー株式会社 歯用装置及び情報処理装置
US9150238B2 (en) * 2012-06-04 2015-10-06 GM Global Technology Operations LLC System and method for automatically adjusting a steering tilt position
US20130330684A1 (en) * 2012-06-06 2013-12-12 Ormco Corporation Multifunction wand for an intra-oral imaging system
JP5642114B2 (ja) * 2012-06-11 2014-12-17 株式会社モリタ製作所 歯科用光計測装置及び歯科用光計測診断器具
US9492065B2 (en) * 2012-06-27 2016-11-15 Camplex, Inc. Surgical retractor with video cameras
US8736692B1 (en) 2012-07-09 2014-05-27 Google Inc. Using involuntary orbital movements to stabilize a video
TW201405443A (zh) * 2012-07-17 2014-02-01 Wistron Corp 手勢輸入系統及方法
US10374863B2 (en) * 2012-12-05 2019-08-06 Origin Wireless, Inc. Apparatus, systems and methods for event recognition based on a wireless signal
PL2903505T3 (pl) * 2012-10-01 2021-05-31 Inspektor Research Systems B.V. Kompensacja widma filtra fluorescencyjnego
US9454846B2 (en) * 2012-12-24 2016-09-27 Dentlytec G.P.L. Ltd. Device and method for subgingival measurement
US9087056B2 (en) * 2013-01-28 2015-07-21 Gary M. Cohen System and method for providing augmented content
US20140227655A1 (en) * 2013-02-12 2014-08-14 Ormco Corporation Integration of model data, surface data, and volumetric data
US10368719B2 (en) * 2013-03-14 2019-08-06 Ormco Corporation Registering shape data extracted from intra-oral imagery to digital reconstruction of teeth for determining position and orientation of roots
US11363938B2 (en) * 2013-03-14 2022-06-21 Ormco Corporation Feedback control mechanism for adjustment of imaging parameters in a dental imaging system
US20140272766A1 (en) * 2013-03-14 2014-09-18 Ormco Corporation Head mounted display for an intra-oral imaging system
DE102013208815A1 (de) * 2013-05-14 2014-11-20 Robert Bosch Gmbh Projektor und verfahren zum steuern eines erfindungsgemässen projektors
US20150004557A1 (en) * 2013-07-01 2015-01-01 Ormco Corporation Method, system, and article of manufacture for the usage of dental imagery received over a network from a dental device
US9513702B2 (en) * 2013-07-15 2016-12-06 Lg Electronics Inc. Mobile terminal for vehicular display system with gaze detection
KR102191139B1 (ko) * 2013-08-19 2020-12-15 바스프 에스이 광학 검출기
US9662000B2 (en) * 2013-08-28 2017-05-30 Hankookin, Inc. Visualization apparatus and system for enhanced hand-eye coordination
CN103431832A (zh) * 2013-08-29 2013-12-11 田茂洲 —种手术腔镜摄像处理器纠正腔镜旋转保持正位成像装置
TWI532413B (zh) * 2013-09-11 2016-05-01 晶睿通訊股份有限公司 照明補光系統及方法
CN203574764U (zh) * 2013-11-26 2014-04-30 盐城市科成光电科技有限公司 一种工业内窥镜镜头系统
JP6026447B2 (ja) * 2014-01-17 2016-11-16 富士フイルム株式会社 タッチパネル用積層体、フラットパネルディスプレイ
US10111714B2 (en) * 2014-01-27 2018-10-30 Align Technology, Inc. Adhesive objects for improving image registration of intraoral images
WO2015119444A1 (en) * 2014-02-06 2015-08-13 Samsung Electronics Co., Ltd. Electronic device and method for controlling displays
US20150216418A1 (en) * 2014-02-06 2015-08-06 Dentsply International Inc. Inspection of dental roots and the endodontic cavity space therein
US20150256764A1 (en) * 2014-03-05 2015-09-10 Guy M. Besson Active-tracking based systems and methods for generating mirror image
EP3160356A4 (en) * 2014-06-25 2018-01-24 Carestream Dental Technology Topco Limited Intra-oral imaging using operator interface with gesture recognition
US20160011657A1 (en) * 2014-07-14 2016-01-14 Futurewei Technologies, Inc. System and Method for Display Enhancement
JP6384188B2 (ja) * 2014-08-12 2018-09-05 ソニー株式会社 車両用表示装置と表示制御方法および後方モニタリングシステム
US9714037B2 (en) * 2014-08-18 2017-07-25 Trimble Navigation Limited Detection of driver behaviors using in-vehicle systems and methods
JP6346525B2 (ja) * 2014-08-29 2018-06-20 アルプス電気株式会社 視線検出装置
EP3040809B1 (en) * 2015-01-02 2018-12-12 Harman Becker Automotive Systems GmbH Method and system for controlling a human-machine interface having at least two displays
CN204291178U (zh) * 2015-01-06 2015-04-22 深圳市大疆创新科技有限公司 一种成像装置及系统
US10136970B2 (en) * 2015-01-18 2018-11-27 Dentlytec G.P.L.Ltd System, device, and method for dental intraoral scanning
US9924079B2 (en) * 2015-02-26 2018-03-20 John Do Combination mirror and camera device
US9451873B1 (en) * 2015-03-06 2016-09-27 Align Technology, Inc. Automatic selection and locking of intraoral images
WO2016145093A1 (en) * 2015-03-09 2016-09-15 D4D Technologies, Llc Intra-oral scanner with color tip assembly
KR102311688B1 (ko) * 2015-06-17 2021-10-12 엘지전자 주식회사 이동단말기 및 그 제어방법
CN105125160B (zh) * 2015-08-27 2017-01-18 李翔 一种口腔内窥镜检测系统及其检测方法
US20180263483A1 (en) * 2016-05-26 2018-09-20 Dental Smartmirror, Inc. Dental Mirror Device with Affixed Camera
US9629532B1 (en) * 2016-05-26 2017-04-25 Dental Smartmirror, Inc. System for in-room use of an intraoral mirror with an integrated camera, and applications thereof
EP3538049A1 (en) * 2016-11-08 2019-09-18 Optimus Licensing AG Integrated operating room lighting and patient warming system - design and components

Also Published As

Publication number Publication date
IL262983B2 (en) 2023-02-01
US10238277B2 (en) 2019-03-26
US9636008B1 (en) 2017-05-02
JP6905540B2 (ja) 2021-07-21
US9757020B1 (en) 2017-09-12
US20180184891A1 (en) 2018-07-05
US9681799B1 (en) 2017-06-20
US20170340196A1 (en) 2017-11-30
US10188278B2 (en) 2019-01-29
US9655504B1 (en) 2017-05-23
US9585549B1 (en) 2017-03-07
US20170340197A1 (en) 2017-11-30
JP2019517864A (ja) 2019-06-27
US9775504B1 (en) 2017-10-03
US20220409036A1 (en) 2022-12-29
IL262983B (en) 2022-10-01
US11412922B2 (en) 2022-08-16
US9861269B2 (en) 2018-01-09
EP3463033A1 (en) 2019-04-10
IL262983A (en) 2018-12-31
US11889991B2 (en) 2024-02-06
US9629532B1 (en) 2017-04-25
US20210177252A1 (en) 2021-06-17
JP2022130677A (ja) 2022-09-06
JP2020127790A (ja) 2020-08-27
US10779719B2 (en) 2020-09-22
IL296207A (en) 2022-11-01
JP2021154148A (ja) 2021-10-07
US20190150724A1 (en) 2019-05-23
US9907463B2 (en) 2018-03-06
CN109414153A (zh) 2019-03-01
US20170340198A1 (en) 2017-11-30

Similar Documents

Publication Publication Date Title
JP6935036B1 (ja) 統合されたカメラを有する歯科ミラーおよびそのアプリケーション
US11612326B2 (en) Estimating a surface texture of a tooth
US11903794B2 (en) Digital dental tray for dental arch model generation
US10888399B2 (en) Augmented reality enhancements for dental practitioners
WO2017205294A1 (en) A dental mirror with an integrated camera, and applications thereof
KR20190000488A (ko) 구강 모니터링 치경
JP2022508372A (ja) 口腔内スキャナを使用して3dデータを取得する混合方法
EP4328862A2 (en) Dental treatment simulation data generation apparatus, data generation method, and data generation program
KR101854728B1 (ko) 인공치아 통합 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210621

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20210621

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210726

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210824

R150 Certificate of patent or registration of utility model

Ref document number: 6935036

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150