JP2019107451A - Ｅｎｔの骨距離が色符号化された顔のマップ - Google Patents

Ｅｎｔの骨距離が色符号化された顔のマップ Download PDF

Info

Publication number
JP2019107451A
JP2019107451A JP2018236163A JP2018236163A JP2019107451A JP 2019107451 A JP2019107451 A JP 2019107451A JP 2018236163 A JP2018236163 A JP 2018236163A JP 2018236163 A JP2018236163 A JP 2018236163A JP 2019107451 A JP2019107451 A JP 2019107451A
Authority
JP
Japan
Prior art keywords
image
skin
minimum distance
threshold
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018236163A
Other languages
English (en)
Other versions
JP7184626B2 (ja
Inventor
アクラム・ゾアビ
Zoabi Akram
ファディ・マサルウィ
Massarwi Fady
リオール・ザール
Zar Lior
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Biosense Webster Israel Ltd
Original Assignee
Biosense Webster Israel Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Biosense Webster Israel Ltd filed Critical Biosense Webster Israel Ltd
Publication of JP2019107451A publication Critical patent/JP2019107451A/ja
Application granted granted Critical
Publication of JP7184626B2 publication Critical patent/JP7184626B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5205—Devices using data or image processing specially adapted for radiation diagnosis involving processing of raw data to produce diagnostic data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/24—Surgical instruments, devices or methods, e.g. tourniquets for use in the oral cavity, larynx, bronchial passages or nose; Tongue scrapers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A61B6/032—Transmission computed tomography [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/505—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of bone
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5217—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/187—Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101—Computer-aided simulation of surgical operations
    • A61B2034/105—Modelling of the patient, e.g. for ligaments or bones
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2051—Electromagnetic tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2068—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2072—Reference field transducer attached to an instrument or patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A61B2034/254—User interfaces for surgical systems being adapted depending on the stage of the surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/367—Correlation of different images or relation of image positions in respect to the body creating a 3D dataset from 2D images using position information
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/376—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • A61B2090/3762—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10081—Computed x-ray tomography [CT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20101—Interactive definition of point of interest, landmark or seed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30008—Bone
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30088—Skin; Dermal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/41—Medical
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2012—Colour editing, changing, or manipulating; Use of colour codes

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Theoretical Computer Science (AREA)
  • Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Optics & Photonics (AREA)
  • Biophysics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Robotics (AREA)
  • Physiology (AREA)
  • Human Computer Interaction (AREA)
  • Pulmonology (AREA)
  • Architecture (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Dentistry (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Gynecology & Obstetrics (AREA)
  • Otolaryngology (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Primary Health Care (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)

Abstract

【課題】 磁気的に追跡される外科器具とＣＴ画像との改良された位置合わせをするための方法を提供すること。【解決手段】 方法は、被験者の身体の部分のボクセルを含むコンピュータ断層撮影（ＣＴ）画像を受け取ることと、画像をセグメント化して画像内の皮膚の表面及び骨の表面を識別することと、皮膚の表面上の複数の点から骨までのそれぞれの最小距離を測定することと、皮膚の表面の画像をレンダリングしながらレンダリング済み画像を視覚的に符号化することでそれぞれの最小距離を示すことと、を含む。【選択図】 図１

Description

本発明は、一般に、画像誘導手術、特に磁気的に追跡された器具とコンピュータ断層撮影（ＣＴ）画像との位置合わせに関する。
画像誘導手術（ＩＧＳ）では、医師は、リアルタイムで追跡される器具を使用することで外科手術中に器具の位置及び／又は向きを患者の解剖学的構造の画像上に示すことができる。場合によっては、患者の解剖学的構造の追跡とイメージングの両方を、透視診断法などの１つの様式で実行することができる。しかしながら、透視診断法は電離放射線を用いるものであるため、その利用は最小限に留められるべきである。その結果、多くのシナリオにおいて、患者の画像は、磁気共鳴イメージング法（ＭＲＩ）又はコンピュータ断層撮影（ＣＴ）透視診断法などの１つの様式で準備され、器具追跡では電磁気追跡などの異なる様式が用いられている。
米国特許第５，３３５，１７３号は、検査及び診断される被験者の頭蓋骨及び頭蓋骨の外側表面を覆う皮膚上のそれぞれの３次元画像情報を変換するステップを含む医療診断用画像表示方法について記載している。
米国特許第６，０８１，７３９号は、音響又は光学３次元スキャニング検出器及びカラービデオ検出器を有し、パノラマＸ線データが得られる際に、被験者の皮膚の表面の３次元の輪郭及び被験者の皮膚の外側の視覚的外観も関連するデータ群として得られる、従来のデジタルパノラマＸ線撮影装置について記載している。
米国特許第５，８１３，９８４号は、先進的診断放射線学様式の利用により、被害者のオンライン顔再構成及び行方不明の子供の経年似顔レンダリングに使用される法医学頭蓋骨及び軟組織データベースを作成するための方法及び装置について記載している。
欧州特許ＥＰ０５８１７０４Ｂ１号は、少なくとも２個の画像生成装置に対して被験者の臓器の位置を決定するための方法について記載している。
米国特許第６，５２４，２５０号は、外科医が容易に使用して脂肪吸引処置の前、その間、又はその後の変化を測定及び監視し、対称的な身体の輪郭の生成を補助することができる装置について記載している。
以下に述べられる本発明の実施形態は、磁気的に追跡される外科器具とＣＴ画像との改良された位置合わせをするための方法を提供するものである。
したがって、本発明の一実施形態によれば、被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信することと、画像をセグメント化して画像内の皮膚の表面及び骨の表面を識別することと、皮膚の表面上の複数の点から骨までのそれぞれの最小距離を測定することと、皮膚の表面の画像をレンダリングしながらレンダリング済み画像を視覚的に符号化することでそれぞれの最小距離を表示することと、を含む、方法が提供される。
一実施形態では、レンダリング済み画像を視覚的に符号化することは、最小距離が所定の閾値を上回らない皮膚の第１の領域に第１の画像特性を適用することと、最小距離が所定の閾値を上回る皮膚の第２の領域に第２の画像特性を適用することと、を含む。
別の実施形態では、第１及び第２の画像特性は、２つの区別可能な色である。代替的には、第１及び第２の画像特性は、２つの区別可能なパターンである。更に代替的には、第１及び第２の画像特性は、２つの区別可能なグレーレベルである。
更なる一実施形態では、レンダリング済み画像を視覚的に符号化することは、最小距離が所定の第１の閾値を上回る皮膚の表面の画像の第１の領域に第１の画像特性を適用することと、最小距離が所定の第２の閾値を上回らない皮膚の表面の画像の第２の領域に第２の画像特性を適用することと、最小距離が第１の閾値を上回らないが第２の閾値を上回る皮膚の表面の画像の第３の領域に第３の画像特性を適用することと、を含む。
更に別の実施形態では、第１、第２、及び第３の画像特性は、３つの区別可能な色である。
更なる別の実施形態では、第３の画像特性の色は、第１及び第２の画像特性の色の組み合わせである。組み合わせ中の第１及び第２の色の相対的重みは、第２の差に対する第１の差の比から求められ、第１の差は第１の閾値と最小距離との差であり、第２の差は最小距離と第２の閾値との差である。代替的に、第１及び第２の画像特性は２つの区別可能なグレーレベルであり、第３の画像特性は第３のグレーレベルである。第３のグレーレベルは、第１及び第２の画像特性のグレーレベルの間の補間されたグレーレベルであり、補間されたグレーレベルは、それぞれ、最小距離と第１及び第２の閾値との差によって決定される。
別の実施形態では、身体の部分は頭部である。
更なる一実施形態では、複数の点のそれぞれの最小距離は、複数の点のそれぞれにおける骨の表面に対する法線に沿って確立される。
本発明の一実施形態によれば、ディスプレイ装置と、プロセッサと、を有する装置であって、プロセッサは、被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信し、画像をセグメント化して画像内の皮膚の表面及び骨の表面を識別し、皮膚の表面上の複数の点から骨までのそれぞれの最小距離を測定し、ディスプレイ装置上の皮膚の表面の画像をレンダリングしながらレンダリング済み画像を視覚的に符号化することでそれぞれの最小距離を示すように構成されている、装置も提供される。
一実施形態では、画像を視覚的に符号化することは、最小距離が所定の閾値を上回らない皮膚の第１の領域に第１の画像特性を適用することと、最小距離が所定の閾値を上回る皮膚の第２の領域に第２の画像特性を適用することと、を含む。
更なる一実施形態では、第１及び第２の画像特性は、２つの区別可能な色である。代替的には、第１及び第２の画像特性は、２つの区別可能なパターンである。更に代替的には、第１及び第２の画像特性は、２つの区別可能なグレーレベルである。
別の実施形態では、画像を視覚的に符号化することは、最小距離が所定の第１の閾値を上回る皮膚の表面の画像の第１の領域に第１の画像特性を適用することと、最小距離が所定の第２の閾値を上回らない皮膚の表面の画像の第２の領域に第２の画像特性を適用することと、最小距離が第１の閾値を上回らないが第２の閾値を上回る皮膚の表面の画像の第３の領域に第３の画像特性を適用することと、を含む。
更に別の実施形態では、第１、第２、及び第３の画像特性は、３つの区別可能な色である。
更なる別の実施形態では、第３の画像特性の色は、第１及び第２の画像特性の色の組み合わせである。組み合わせ中の第１及び第２の色の相対的重みは、第２の差に対する第１の差の比から求められ、第１の差は第１の閾値と最小距離との差であり、第２の差は最小距離と第２の閾値との差である。代替的に、第１及び第２の画像特性は２つの区別可能なグレーレベルであり、第３の画像特性は第３のグレーレベルである。第３のグレーレベルは、第１及び第２の画像特性のグレーレベルの間の補間されたグレーレベルであり、補間されたグレーレベルは、それぞれ、最小距離と第１及び第２の閾値との差によって決定される。
別の実施形態では、複数の点のそれぞれの最小距離は、複数の点のそれぞれにおける骨の表面に対する法線に沿って確立される。
本発明の一実施形態によれば、プログラム命令が格納された非一時的なコンピュータ可読媒体を含むコンピュータソフトウェア製品も提供される。命令は、コンピュータにより読み取られる際にコンピュータに、被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信させ、画像をセグメント化して画像内の皮膚の表面及び骨の表面を識別させ、皮膚の表面上の複数の点から骨までのそれぞれの最小距離を測定させ、皮膚の表面の画像をレンダリングしながらレンダリング済み画像を視覚的に符号化することでそれぞれの最小距離を表示させる。
本発明は、以下の発明を実施するための形態を図面と併せて考慮すると、より完全に理解されるであろう。
本発明の一実施形態に係る、表面整合システムの概略図である。 本発明の一実施形態に係る、位置合わせプロセスのフローチャートである。 本発明の一実施形態に係る、画像レンダリングステップにおいて画像をレンダリングするプロセスのフローチャートである。 本発明の一実施形態に係る、被験者の顔の軟組織の厚さを示すマップを示す。 本発明の一実施形態に係る、予備位置合わせの間のスクリーン上の画像を示す。 本発明の一実施形態に係る、最終的な位置合わせの開始時のスクリーン上の画像を示す。 本発明の一実施形態に係る、最終的な反復位置合わせの間のスクリーン上の画像を示す。 本発明の代替的な一実施形態に係る、画像レンダリングステップにおいて画像をレンダリングするプロセスのフローチャートである。 本発明の代替的な実施形態に係る、被験者の顔の軟組織の厚さを示す画像を示す。
概説
被験者の体内の手術器具の位置及び向きの決定は、磁気追跡を利用して行うことができる。耳鼻咽喉（ＥＮＴ）手術では、最初に、被験者の頭部に対して磁気追跡システムが位置合わせされる。この位置合わせ手順は、通常、被験者の頭部の予め記録されたＣＴ画像を使用する。位置合わせ手順の予備段階では、外科医は、位置合わせプローブを有するワンド状のプローブを用いて被験者の顔の数カ所、通常は４つの点に触れる。位置合わせプローブの位置及び向きが、磁気追跡システムによって認識される。これら４つの点に基づき、プロセッサが、位置合わせアルゴリズムを用いて磁気追跡システム内の各点の位置をＣＴ画像内のそれらの位置に当てはめることによって、初期位置合わせを行う。
得られた位置合わせは、外科器具の位置及び向きの正確な決定を行うには通常はまだ充分ではない。位置合わせ手順の第２の段階では、外科医は被験者の顔の複数の点にワンドで触れる。このプロセスの間、プロセッサは、位置合わせアルゴリズムを用いて顔のこれらの追加の点に基づいて位置合わせを反復して、改善する。
位置合わせアルゴリズムはＣＴ画像の外側（皮膚）輪郭に追加の点を当てはめることに基づいているため、外科医がワンドを軟組織内に押し込むことによって生じるあらゆる誤差が位置合わせの誤差を生じる。位置合わせの誤差は、更に、外科医が被験者の鼻腔内にガイドワイヤを挿入し、位置合わせアルゴリズムによって与えられるガイドワイヤの位置と、例えば外科医のその位置の触れた感覚との間のずれをみつけた後にようやく外科医が検出することができる。
この場合、外科医は通常、ガイドワイヤを引き抜き、位置合わせの第２の段階を再び行うため、手術に遅延を生じる。
本明細書に述べられる本発明の実施形態は、被験者の顔の画像をレンダリングすることによりこの問題を解決するものであり、顔の骨を覆う軟組織の厚さが例えば異なる色のような視覚的な符号化により表される。
本発明の実施形態では、プロセッサは、被験者の身体の部分のボクセルで構成されたコンピュータ断層撮影（ＣＴ）画像を受信する。プロセッサはこの画像をセグメント化して、画像内の皮膚の表面及び骨の表面を識別し、皮膚の表面上の複数の点から骨までのそれぞれの最小距離を測定する。この最小距離は、骨の表面に対する法線に沿った距離に相当する。次いで、プロセッサは、皮膚の表面の画像をレンダリングしながらこの画像を視覚的に符号化することでそれぞれの最小距離を表示する。この画像を、被験者に手術を行っている外科医に対してスクリーン上に提示することができる。
画像の視覚的符号化は一般的に、最小距離が所定の閾値を上回らない皮膚の第１の領域に色又は陰影などの第１の画像特性を適用することと、最小距離が所定の閾値を上回る皮膚の第２の領域に別の色又は陰影などの第２の画像特性を適用することとを含む。
あるいは、画像の視覚的符号化は、最小距離が所定の第１の閾値を上回る皮膚の第１の領域に第１の色又は陰影などの第１の画像特性を適用することと、最小距離が所定の第２の閾値を上回らない皮膚の第２の領域に第２の色又は陰影などの第２の画像特性を適用することと、皮膚の第３の領域に第３の画像特性を適用することとを含む。一実施形態では、第３の画像特性は、第１の画像特性と第２の画像特性との組み合わせを一般的に含み、第１の画像特性と第２の画像特性との相対重みは補間により決定される。
上記の実施形態は、被験者の頭部に対するＥＮＴ手術について述べたものであるが、他の実施形態は被験者の身体の他の部分に適用される医学的手技を含む。
システムの説明
図１は、本発明の一実施形態に従った、表面整合システム１０の概略図である。システム１０は、本明細書において、例として、被験者１４のコンピュータ断層撮影（ＣＴ）画像を備えると想定される、磁気追跡システム１２を画像と位置合わせさせるために用いられる。追跡システム１２は、被験者に実施される医学的手技の間に被験者１４に挿入される、カテーテル又はガイドワイヤなどの１つ又は２つ以上の器具の位置及び配向を追跡するために用いられる。以下に記載されるように、追跡システム１２は、被験者の外側にある位置合わせプローブ１６の位置及び向きを追跡することもできる。プローブ１６は、システム１０の使用中に、専門家２０（通常は外科医）が保持することができるハンドル１８に固定的に接続されている。プローブ１６とハンドル１８との組み合わせは、専門家２０による所望の位置へのプローブの配置を容易にする剛性プローブアセンブリ２２を形成する。
以下の説明では、明確さ及び簡潔さのために、上記に言及された医学的手技は、表面整合システム１０及び磁気追跡システム１２が、鼻洞の領域内及びその周囲で動作するように構成されていると想定されるように、被験者１４の鼻洞への侵襲的手技を含むものと想定される。しかしながら、システム１０及び１２は、腎臓又は腹部などの被験者の他の領域内及び周囲で動作するように構成されてもよいことが理解され、当業者であれば、本明細書における記載をかかる他の領域に適応させることができるであろう。
追跡システム１２は、プローブ追跡モジュール２８と通信する処理ユニット２６を備えるシステムプロセッサ２４によって操作される。モジュール２８の機能を以下に記載する。プロセッサ２４は、マウス又はトラックボールなどのポインティングデバイスを典型的に含む動作制御部３２を備えるコンソール３０内に実装され得る。専門家２０は動作制御部を用いてプロセッサ２４と対話し、このプロセッサは、以下に記載されるように、システム１０及び１２によって生成される結果を、本明細書ではスクリーン３４とも呼ばれるディスプレイ装置３４上で専門家に対して提示するために用いられ得る。
プロセッサ２４は、プロセッサのメモリに格納されたソフトウェアを用いてシステム１０を操作する。ソフトウェアは、例えば、ネットワークを介して、電子的形態でプロセッサ２４にダウンロードされてもよく、又はこれに代えて又はこれに加えて、磁気メモリ、光メモリ、若しくは電子メモリなどの、非一時的な有形媒体上に提供され、及び／又は記憶されてもよい。
上記に言及された被験者１４内の器具を追跡するため、またプローブ１６を追跡するために、処理ユニット２６は、プローブ追跡モジュール２８を用い、ケーブル３５を介して複数の磁界発生器３６（通常はコイル）を操作する。被験者１４が麻酔され、ベッド４０上で臥位に固定された頭部３８を有する場合に一般的に適用可能な一実施形態では、図１に示されるような発生器３６が、ベッド上で被験者の頭部の脇に通常配置されるフレーム４２に固定される。被験者１４が麻酔されない場合に適用可能な代替的な一実施形態（図示せず）では、発生器３６は互いに対して、また、頭部３８に取り付けられたフレームに対して固定される。３軸基準コイル４１が頭部３８に固定され、ケーブル４３により処理ユニット２６に接続されている。
発生器３６は、被験者１４の頭部３８の内側及び外側に交番磁界を放射し、これらの磁界が、器具内及びプローブ１６内の磁気検出器内で信号を発生させる。信号は、典型的にプローブ１６の場合では、プローブをコンソール３０に接続するケーブル４４を介して処理ユニット２６及びプローブ追跡モジュール２８に戻され、プロセッサとモジュールとは共に信号を分析して、発生器３６に対する器具及びプローブ１６の位置及び向きを提供する。磁界発生器３６が磁気追跡システム１２の基準座標フレーム４６を定義することは理解されるであろう。
カリフォルニア州アーバイン所在のＢｉｏｓｅｎｓｅ Ｗｅｂｓｔｅｒ社により製造されるＣａｒｔｏ（登録商標）システムは、本明細書に記載されるものと同様の追跡システムを用いて、被験者内に挿入されたプローブの遠位先端部の位置及び向きを追跡する。
システムプロセッサ２４は、被験者１４の頭部３８のデジタル化ＣＴ画像４８を格納する。デジタル化ＣＴ画像４８は、システム１０の位置合わせに使用するため、また、特に被験者の頭部３８の画像５０をスクリーン３４上に生成するために、処理ユニット２６によってアクセスされ得る。位置合わせのプロセスの間、プローブ１６は、被験者１４の表面５２と（すなわち被験者の皮膚と）接触させられるため、表面５２は本明細書では皮膚５２とも呼ばれる。
図２は、本発明の一実施形態に係る位置合わせプロセスのフローチャートである。データ取得ステップ６０及び画像レンダリングステップ６２において、画像９４（図４に示される）が準備される。データ取得ステップ６０において、ＣＴ画像４８がシステムプロセッサ２４によって読み取られる。画像レンダリングステップ６２については、図３のフローチャート及び図４の説明で更に詳しく説明する。予備位置合わせステップ６４において、ＣＴ画像４８と追跡システム１２とが、図５を参照して説明するように、専門家２０によって本明細書でワンド２２とも呼ばれる剛性プローブアセンブリ２２を使用して取得された少数、通常は４個の点に基づいて、互いに対して位置合わせされる。最終位置合わせは、高密度サンプリングステップ６６、更新ステップ６８、及び決定ステップ７０において多数の点を取得することを含む。ステップ６６、６８、及び７０については、図６〜７を参照して説明する。
図３は、本発明の一実施形態に係る、図２の画像レンダリングステップ６２において画像９４を生成するためのプロセスのフローチャートである。画像９４は、本明細書ではレンダリング済み画像９４とも呼ばれる。システムプロセッサ２４は、割当ステップ７６において、デジタル化ＣＴ画像４８と同じ寸法を有する３Ｄデータアレイ７７を割当て、移行ステップ７８においてこのＣＴ画像をデータアレイ内に移行する。データアレイ７７の各点はボクセル７９と呼ばれる。識別ステップ８０において、システムプロセッサ２４は、データアレイ７７内で各ボクセル及びその周囲のボクセルに関連付けられた放射線密度に基づいて、皮膚５２に関連付けられたボクセル７９を識別し、これらのボクセルは「皮膚ボクセル」８１と呼ばれる。
ステップ８２〜９２において、システムプロセッサ２４は、すべての皮膚ボクセル８１についてループし、距離ステップ８６において、皮膚ボクセルから下層の骨の最も近い点までの距離を決定する。比較ステップ８８において、システムプロセッサ２４は、皮膚ボクセル８１から骨までの決定された距離を、専門家２０により０．５〜３ｍｍの範囲内で選択される所定の閾値と比較する。この閾値は、最小許容可能皮膚−骨距離と仮定される。距離がこの閾値以下である場合、すなわち、最小皮膚−骨距離以下である場合、緑関連付けステップ９０において、皮膚ボクセル８１に緑色が関連付けられる。距離が閾値よりも大きい場合、赤色関連付けステップ９２において、皮膚ボクセル８１に赤色が関連付けられる。システムプロセッサ２４がすべての皮膚ボクセル８１を通じてループした後、プロセスは、画像生成ステップ９３においてシステムプロセッサが皮膚ボクセル８１の画像をそれらに関連付けられた色とともに生成することで終了する。
図４は、本発明の一実施形態に係る、被験者１４の顔の軟組織の厚さを示す画像９４を示している。磁気追跡システム１２とデジタル化ＣＴ画像４８との位置合わせに備え、システムプロセッサ２４は、以下に述べるように、軟組織の厚さを表示する画像９４をレンダリングする。以下に述べる実施形態では、視覚符号化は、異なる色に基づく。
図３のフローチャートについて上記に述べたように、システムプロセッサ２４は、デジタル化ＣＴ画像４８内で皮膚ボクセル８１を識別する。各皮膚ボクセル８１について、システムプロセッサ２４は、ＣＴ画像４８をセグメント化して被験者の骨物資を識別し、皮膚５２から下層の骨までの距離を測定する。この距離が所定の閾値を上回らない場合、画像９４上の皮膚ボクセル８１の画像は緑に色付けされる。しかしながら、この距離が所定の閾値を上回った場合、皮膚ボクセル８１の画像は赤く色付けされる。（「緑」及び「赤」色は、図４において、また、これに続く図において、２つの異なる陰影により、それぞれ領域９６及び領域９８として示されている。）得られた画像９４において、領域９６は軟組織の厚さが所定の閾値を上回らない骨質領域であり、領域９８は軟組織の厚さが閾値を上回る肉質領域である。
図４に示される実施形態では、領域９４を符号化するために緑と赤を用いているが、他の色を用いることもできる。他の実施形態では、複数の所定の閾値を用いてもよく、２つの連続した閾値の間のそれぞれの厚さの間隔に異なる色が指定される。更なる他の実施形態では、グレーレベルを用いて厚さを表示することができる。更に他の実施形態では、パターン、又はパターンの組み合わせ、色、及びグレーレベルを用いて厚さを表示することができる。
図５〜７は、本発明の一実施形態に係る、図２のフローチャートによって説明される位置合わせプロセスの間のスクリーン３４上の画像を示す。
図５は、本発明の一実施形態に係る、予備位置合わせステップ６４（図２）の間のスクリーン３４上の画像１００を示す。予備位置合わせの目的では、システムプロセッサ２４は、スクリーン３４上に、皮膚ボクセル８１を識別することによりデジタル化ＣＴ画像４８から抽出された被験者の皮膚５２に対応する被験者１４の顔画像１０２を表示する。更に、システムプロセッサ２４は、４個の点１０６ａ〜ｄを表示する概略的な顔の描図１０４を提示する。点１０６ａ〜ｄは、顔面上でそれらの明確な位置のために、また、これらの位置に一般にみられる骨質領域のために選択された、予備位置合わせを行ううえで推奨される位置である。
専門家２０は、プローブアセンブリ２２を使用して、専門家の判断によって推奨点１０６ａ〜ｄに最も近く一致する被験者１４の顔の皮膚５２の４個の点に位置合わせプローブ１６で触れる。４個の点のそれぞれに触れた時点で、専門家２０は、プローブアセンブリ２２の制御部（制御部は示されていない）又は操作制御部３２を使用してシステムプロセッサ２４に信号を送ることでプローブ１６の位置及び向きを記録する。
４個の点におけるプローブ１６の位置及び向きを記録した後、システムプロセッサ２４は、磁気追跡システム１２の基準座標フレーム４６内の４個の点と、デジタル化ＣＴ画像４８との間の座標変換を計算して４個の点と皮膚ボクセル８１との間の最良の空間的フィットを得る。この座標変換によって、磁気追跡システム１２とデジタル化ＣＴ画像４８との間の予備位置合わせが与えられる。
図６は、本発明の一実施形態に係る、最終位置合わせ（図２のフローチャートに関して上記に述べたもの）の開始時のスクリーン３４上の画像１１０を示す。最終位置合わせの目的では、システムプロセッサ２４はスクリーン３４上にレンダリング済み画像９４及び顔画像１０２の２つの画像を表示する。３軸基準コイル４１の位置を表すアイコン１０３が、磁気追跡システム１２とデジタル化ＣＴ画像４８との間の予備位置合わせに基づいて顔画像１０２上に示されている。
最終位置合わせを行うには、専門家２０は被験者１４の顔上の複数の点に位置合わせプローブ１６で触れ、これらの点をその後に続く位置合わせ計算のために受け容れるようにシステムプロセッサ２４に信号を送る。更に、これらの座標が、皮膚５２の歪みが最小となる表面を表すように、一実施形態において、専門家２０は画像９４の案内にしたがって骨質領域９６における皮膚に位置合わせプローブ１６で触れる。
図７は、本発明の一実施形態に係る、最終的な反復位置合わせの間のスクリーン３４上の画像１２０を示す。この最終的な反復位置合わせは、図２のフローチャートのステップ６６、６８、及び７０に相当する。
被験者１４の顔の皮膚５２上の点１２２は、専門家２０が、通常は領域９６（緑に色付けされた部分）内において、位置合わせプローブ１６で顔に触れた点を表示している。点１２２の座標を表す信号がシステムプロセッサ２４に送られる。説明を分かりやすくするため、図７には、少ない数の点１２２のみが示されている。システムプロセッサ２４は、数多くの点、通常は２０個についての信号を受信した後、デジタル化ＣＴ画像４８と、磁気追跡システム１２によって収集された点との間の座標変換を再計算する。更なる２０個の点の後、システムプロセッサ２４は座標変換を再び再計算する。画像９４の案内にしたがって更なる点１２２をサンプリングすることにより、また、骨質領域９６内の点を収集することにより、専門家２０は磁気追跡システム１２の基準座標フレーム４６とデジタル化ＣＴ画像４８との間の位置合わせの精度を制御する。
図２のフローチャートの説明を再び参照し、決定ステップ７０において、専門家２０は位置合わせが充分に正確であるか否かを決定する。この目的では、専門家２０は、被験者の鼻の先端のような被験者１４の明確に規定された位置にプローブ１６で触れる。被験者１４の画像上のプローブの位置の表示の視覚的観察に基づき、専門家２０は、得られた位置合わせの精度について主観的な決定を行う。
図８は、図２の画像レンダリングステップ６２において画像１５０を生成するためのプロセスのフローチャートであり、図９は、本発明の代替的な一実施形態に係る、本明細書ではレンダリング済み画像１５０とも呼ばれるこの画像を概略的に示す。フローチャートの最初の３つのステップは図３に示されるものとほぼ同じである。すなわち、システムプロセッサ２４が、割当ステップ７６において、デジタル化ＣＴ画像４８と同じ寸法を有する３Ｄデータアレイ７７を割当て、移行ステップ７８においてこのＣＴ画像をデータアレイ内に移行する。図３と同様、データアレイ７７の各点はボクセル７９と呼ばれる。識別ステップ８０において、システムプロセッサ２４は、データアレイ７７内で各ボクセル及びその周囲のボクセルに関連付けられた放射線密度に基づいて、皮膚５２に関連付けられたこれらのボクセル７９を識別し、これらのボクセルは図３と同様、「皮膚ボクセル」８１と呼ばれる。
ステップ１３０〜１４２において、システムプロセッサ２４は、すべての皮膚ボクセル８１についてループし、距離ステップ１３２において、皮膚ボクセルから下層の骨の最も近い点までの距離を決定する。第１の比較ステップ１３４において、システムプロセッサ２４は、皮膚ボクセル８１から骨までの決定された距離を、専門家２０により通常、１０ｍｍとして選択される所定の第１の閾値と比較する。距離が閾値よりも大きい場合、赤色関連付けステップ１３６において、皮膚ボクセル８１に赤色が関連付けられる。第２の比較ステップ１３８において、この距離は、専門家２０により通常、０〜０．５ｍｍとして選択される所定の第２の閾値と比較される。距離が第２の閾値を上回った場合（しかし、第１の比較ステップ１３４に基づき、第１の閾値を上回らない場合）、システムプロセッサ２４は、補間ステップ１４０において、それぞれ、第１及び第２の閾値からの皮膚ボクセル８１の距離の比に基づいて補間された赤と緑との混合を基に色を決定する。更に、補間ステップ１４０において、得られた混合色は皮膚ボクセル８１と関連付けられる。第２の比較ステップ１３８においてシステムプロセッサ２４は、距離が第２の閾値以下であると判定した場合、システムプロセッサにより、緑色関連付けステップ１４２において皮膚ボクセル８１に対して緑色が関連付けられる。システムプロセッサ２４がすべての皮膚ボクセル８１を通じてループした後、プロセスは、画像生成ステップ１４４においてシステムプロセッサが皮膚ボクセル８１の画像をそれらに関連付けられた色とともに生成することで終了する。
図９は、本発明の代替的な実施形態に係る、被験者１４の顔の軟組織の厚さを表示する画像１５０を示している。
図４と同様、磁気追跡システム１２とデジタル化ＣＴ画像４８との位置合わせに備え、システムプロセッサ２４は、以下に述べるように、軟組織の厚さを表示する画像１５０をレンダリングする。以下に述べる実施形態では、視覚符号化は、異なる色に基づく。
図８のフローチャートについて上記に述べたように、システムプロセッサ２４は、デジタル化ＣＴ画像４８内で皮膚ボクセル８１を識別する。各皮膚ボクセル８１について、システムプロセッサ２４は、ＣＴ画像４８をセグメント化して被験者の骨物資を識別し、皮膚５２から下層の骨までの距離を測定する。システムプロセッサ２４は、各皮膚ボクセル８１の色を以下のように決定する。すなわち、距離が所定の第１の閾値（通常は１０ｍｍ）を上回る場合、皮膚ボクセルは赤く色付けされる。距離が所定の第２の閾値（通常は０〜０．５ｍｍ）を上回らない場合、皮膚ボクセル８１は緑に色付けされる。距離が第２の閾値を上回るが、第１の閾値を上回らない場合、皮膚ボクセル８１は緑と赤の混合で色付けされ、緑と赤の相対量はそれぞれ第１及び第２の閾値からの皮膚ボクセルの相対距離に基づいている。緑、赤、及び混合色は、図９に、それぞれ領域１５４、１５２、及び１５６におけるような異なる陰影によって表されている。したがって、画像１５０において、領域１５４は軟組織の厚さが第２の閾値以下である骨質領域であり、領域１５２は軟組織の厚さが第１の閾値を上回る肉質領域であり、領域１５６は軟組織の厚さが２つの閾値の間である領域である。領域１５６において、相対的な「緑っぽさ」及び「赤っぽさ」は、各ボクセルの２つの閾値までの相対的「距離」を表示する。
図８〜９に述べられる代替的な実施形態では、画像１５０を用いて図６〜７の画像９４を置き換える。この場合、専門家２０は、画像１５０の案内によって皮膚の骨質領域１５４に、及び場合により、軟組織が薄いことが色によって示される領域１５６のそれらの部分の中に位置合わせプローブ１６で触れる。
上に述べた実施形態は例として挙げたものであり、本発明は上記に具体的に示し、説明したものに限定されない点は理解されよう。むしろ、本発明の範囲は、本明細書の上文に記載された様々な特徴の組み合わせ及び部分組み合わせの両方、並びに前述の説明を一読すると当業者が想起すると思われる、先行技術に開示されていないそれらの変形及び改変を含む。
〔実施の態様〕
（１） 被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信することと、
前記画像をセグメント化して前記画像内の皮膚の表面及び骨の表面を識別することと、
前記皮膚の前記表面上の複数の点から前記骨までのそれぞれの最小距離を測定することと、
前記皮膚の前記表面の画像をレンダリングしながら前記レンダリング済み画像を視覚的に符号化することで前記それぞれの最小距離を表示することと、を含む、方法。
（２） 前記レンダリング済み画像を視覚的に符号化することは、前記最小距離が所定の閾値を上回らない前記皮膚の第１の領域に第１の画像特性を適用することと、前記最小距離が前記所定の閾値を上回る前記皮膚の第２の領域に第２の画像特性を適用することと、を含む、実施態様１に記載の方法。
（３） 前記第１及び第２の画像特性が、２つの区別可能な色である、実施態様２に記載の方法。
（４） 前記第１及び第２の画像特性が、２つの区別可能なパターンである、実施態様２に記載の方法。
（５） 前記第１及び第２の画像特性が、２つの区別可能なグレーレベルである、実施態様２に記載の方法。
（６） 前記レンダリング済み画像を視覚的に符号化することは、前記最小距離が所定の第１の閾値を上回る前記皮膚の前記表面の前記画像の第１の領域に第１の画像特性を適用することと、前記最小距離が所定の第２の閾値を上回らない前記皮膚の前記表面の前記画像の第２の領域に第２の画像特性を適用することと、前記最小距離が前記第１の閾値を上回らないが前記第２の閾値を上回る前記皮膚の前記表面の前記画像の第３の領域に第３の画像特性を適用することと、を含む、実施態様１に記載の方法。
（７） 前記第１、第２、及び第３の画像特性が、３つの区別可能な色である、実施態様６に記載の方法。
（８） 前記第３の画像特性の前記色が、前記第１及び第２の画像特性の前記色の組み合わせであり、前記組み合わせ中の前記第１及び第２の色の相対的重みが、第２の差に対する第１の差の比から求められ、前記第１の差が前記第１の閾値と前記最小距離との差であり、前記第２の差が前記最小距離と前記第２の閾値との差である、実施態様７に記載の方法。
（９） 前記第１及び第２の画像特性が２つの区別可能なグレーレベルであり、前記第３の画像特性が第３のグレーレベルであり、前記第３のグレーレベルが、前記第１及び第２の画像特性の前記グレーレベルの間の補間されたグレーレベルであり、前記補間されたグレーレベルが、それぞれ、前記最小距離と前記第１及び第２の閾値との差によって決定される、実施態様６に記載の方法。
（１０） 前記身体の部分が頭部を含む、実施態様１に記載の方法。
（１１） 前記複数の点のそれぞれの前記最小距離が、前記複数の点のそれぞれにおける前記骨の前記表面に対する法線に沿って確立される、実施態様１に記載の方法。
（１２） ディスプレイ装置と、
プロセッサであって、被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信し、前記画像をセグメント化して前記画像内の皮膚の表面及び骨の表面を識別し、前記皮膚の前記表面上の複数の点から前記骨までのそれぞれの最小距離を測定し、前記ディスプレイ装置上の前記皮膚の前記表面の画像をレンダリングしながら前記レンダリング済み画像を視覚的に符号化することで前記それぞれの最小距離を示すように構成されている、プロセッサと、を備える、装置。
（１３） 前記画像を視覚的に符号化することは、前記最小距離が所定の閾値を上回らない前記皮膚の第１の領域に第１の画像特性を適用することと、前記最小距離が前記所定の閾値を上回る前記皮膚の第２の領域に第２の画像特性を適用することと、を含む、実施態様１２に記載の装置。
（１４） 前記第１及び第２の画像特性が、２つの区別可能な色である、実施態様１３に記載の装置。
（１５） 前記第１及び第２の画像特性が、２つの区別可能なパターンである、実施態様１３に記載の装置。
（１６） 前記第１及び第２の画像特性が、２つの区別可能なグレーレベルである、実施態様１３に記載の装置。
（１７） 前記画像を視覚的に符号化することは、前記最小距離が所定の第１の閾値を上回る前記皮膚の前記表面の前記画像の第１の領域に第１の画像特性を適用することと、前記最小距離が所定の第２の閾値を上回らない前記皮膚の前記表面の前記画像の第２の領域に第２の画像特性を適用することと、前記最小距離が前記第１の閾値を上回らないが前記第２の閾値を上回る前記皮膚の前記表面の前記画像の第３の領域に第３の画像特性を適用することと、を含む、実施態様１２に記載の装置。
（１８） 前記第１、第２、及び第３の画像特性が、３つの区別可能な色である、実施態様１７に記載の装置。
（１９） 前記第３の画像特性の前記色が、前記第１及び第２の画像特性の前記色の組み合わせであり、前記組み合わせ中の前記第１及び第２の色の相対的重みが、第２の差に対する第１の差の比から求められ、前記第１の差が前記第１の閾値と前記最小距離との差であり、前記第２の差が前記最小距離と前記第２の閾値との差である、実施態様１８に記載の装置。
（２０） 前記第１及び第２の画像特性が２つの区別可能なグレーレベルであり、前記第３の画像特性が第３のグレーレベルであり、前記第３のグレーレベルが、前記第１及び第２の画像特性の前記グレーレベルの間の補間されたグレーレベルであり、前記補間されたグレーレベルが、それぞれ、前記最小距離と前記第１及び第２の閾値との差によって決定される、実施態様１７に記載の装置。
（２１） 前記複数の点のそれぞれの前記最小距離が、前記複数の点のそれぞれにおける前記骨の前記表面に対する法線に沿って確立される、実施態様１２に記載の装置。
（２２） 前記身体の部分が頭部を含む、実施態様１２に記載の装置。
（２３） プログラム命令が格納された非一時的なコンピュータ可読媒体を含むコンピュータソフトウェア製品であって、前記命令が、コンピュータにより読み取られる際に前記コンピュータに、被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信させ、前記画像をセグメント化して前記画像内の皮膚の表面及び骨の表面を識別させ、前記皮膚の前記表面上の複数の点から前記骨までのそれぞれの最小距離を測定させ、前記皮膚の前記表面の画像をレンダリングしながら前記レンダリング済み画像を視覚的に符号化することで前記それぞれの最小距離を表示させる、コンピュータソフトウェア製品。

Claims (23)

  1. ディスプレイ装置と、
    プロセッサであって、被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信し、前記画像をセグメント化して前記画像内の皮膚の表面及び骨の表面を識別し、前記皮膚の前記表面上の複数の点から前記骨までのそれぞれの最小距離を測定し、前記ディスプレイ装置上の前記皮膚の前記表面の画像をレンダリングしながら前記レンダリング済み画像を視覚的に符号化することで前記それぞれの最小距離を示すように構成されている、プロセッサと、を備える、装置。
  2. 前記画像を視覚的に符号化することは、前記最小距離が所定の閾値を上回らない前記皮膚の第１の領域に第１の画像特性を適用することと、前記最小距離が前記所定の閾値を上回る前記皮膚の第２の領域に第２の画像特性を適用することと、を含む、請求項１に記載の装置。
  3. 前記第１及び第２の画像特性が、２つの区別可能な色である、請求項２に記載の装置。
  4. 前記第１及び第２の画像特性が、２つの区別可能なパターンである、請求項２に記載の装置。
  5. 前記第１及び第２の画像特性が、２つの区別可能なグレーレベルである、請求項２に記載の装置。
  6. 前記画像を視覚的に符号化することは、前記最小距離が所定の第１の閾値を上回る前記皮膚の前記表面の前記画像の第１の領域に第１の画像特性を適用することと、前記最小距離が所定の第２の閾値を上回らない前記皮膚の前記表面の前記画像の第２の領域に第２の画像特性を適用することと、前記最小距離が前記第１の閾値を上回らないが前記第２の閾値を上回る前記皮膚の前記表面の前記画像の第３の領域に第３の画像特性を適用することと、を含む、請求項１に記載の装置。
  7. 前記第１、第２、及び第３の画像特性が、３つの区別可能な色である、請求項６に記載の装置。
  8. 前記第３の画像特性の前記色が、前記第１及び第２の画像特性の前記色の組み合わせであり、前記組み合わせ中の前記第１及び第２の色の相対的重みが、第２の差に対する第１の差の比から求められ、前記第１の差が前記第１の閾値と前記最小距離との差であり、前記第２の差が前記最小距離と前記第２の閾値との差である、請求項７に記載の装置。
  9. 前記第１及び第２の画像特性が２つの区別可能なグレーレベルであり、前記第３の画像特性が第３のグレーレベルであり、前記第３のグレーレベルが、前記第１及び第２の画像特性の前記グレーレベルの間の補間されたグレーレベルであり、前記補間されたグレーレベルが、それぞれ、前記最小距離と前記第１及び第２の閾値との差によって決定される、請求項６に記載の装置。
  10. 前記複数の点のそれぞれの前記最小距離が、前記複数の点のそれぞれにおける前記骨の前記表面に対する法線に沿って確立される、請求項１に記載の装置。
  11. 前記身体の部分が頭部を含む、請求項１に記載の装置。
  12. プログラム命令が格納された非一時的なコンピュータ可読媒体を含むコンピュータソフトウェア製品であって、前記命令が、コンピュータにより読み取られる際に前記コンピュータに、被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信させ、前記画像をセグメント化して前記画像内の皮膚の表面及び骨の表面を識別させ、前記皮膚の前記表面上の複数の点から前記骨までのそれぞれの最小距離を測定させ、前記皮膚の前記表面の画像をレンダリングしながら前記レンダリング済み画像を視覚的に符号化することで前記それぞれの最小距離を表示させる、コンピュータソフトウェア製品。
  13. 被験者の身体の部分のボクセルを含んだコンピュータ断層撮影（ＣＴ）画像を受信することと、
    前記画像をセグメント化して前記画像内の皮膚の表面及び骨の表面を識別することと、
    前記皮膚の前記表面上の複数の点から前記骨までのそれぞれの最小距離を測定することと、
    前記皮膚の前記表面の画像をレンダリングしながら前記レンダリング済み画像を視覚的に符号化することで前記それぞれの最小距離を表示することと、を含む、方法。
  14. 前記レンダリング済み画像を視覚的に符号化することは、前記最小距離が所定の閾値を上回らない前記皮膚の第１の領域に第１の画像特性を適用することと、前記最小距離が前記所定の閾値を上回る前記皮膚の第２の領域に第２の画像特性を適用することと、を含む、請求項１３に記載の方法。
  15. 前記第１及び第２の画像特性が、２つの区別可能な色である、請求項１４に記載の方法。
  16. 前記第１及び第２の画像特性が、２つの区別可能なパターンである、請求項１４に記載の方法。
  17. 前記第１及び第２の画像特性が、２つの区別可能なグレーレベルである、請求項１４に記載の方法。
  18. 前記レンダリング済み画像を視覚的に符号化することは、前記最小距離が所定の第１の閾値を上回る前記皮膚の前記表面の前記画像の第１の領域に第１の画像特性を適用することと、前記最小距離が所定の第２の閾値を上回らない前記皮膚の前記表面の前記画像の第２の領域に第２の画像特性を適用することと、前記最小距離が前記第１の閾値を上回らないが前記第２の閾値を上回る前記皮膚の前記表面の前記画像の第３の領域に第３の画像特性を適用することと、を含む、請求項１３に記載の方法。
  19. 前記第１、第２、及び第３の画像特性が、３つの区別可能な色である、請求項１８に記載の方法。
  20. 前記第３の画像特性の前記色が、前記第１及び第２の画像特性の前記色の組み合わせであり、前記組み合わせ中の前記第１及び第２の色の相対的重みが、第２の差に対する第１の差の比から求められ、前記第１の差が前記第１の閾値と前記最小距離との差であり、前記第２の差が前記最小距離と前記第２の閾値との差である、請求項１９に記載の方法。
  21. 前記第１及び第２の画像特性が２つの区別可能なグレーレベルであり、前記第３の画像特性が第３のグレーレベルであり、前記第３のグレーレベルが、前記第１及び第２の画像特性の前記グレーレベルの間の補間されたグレーレベルであり、前記補間されたグレーレベルが、それぞれ、前記最小距離と前記第１及び第２の閾値との差によって決定される、請求項１８に記載の方法。
  22. 前記身体の部分が頭部を含む、請求項１３に記載の方法。
  23. 前記複数の点のそれぞれの前記最小距離が、前記複数の点のそれぞれにおける前記骨の前記表面に対する法線に沿って確立される、請求項１３に記載の方法。
JP2018236163A 2017-12-19 2018-12-18 Ｅｎｔの骨距離が色符号化された顔のマップ Active JP7184626B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/847,646 US10660707B2 (en) 2017-12-19 2017-12-19 ENT bone distance color coded face maps
US15/847,646 2017-12-19

Publications (2)

Publication Number Publication Date
JP2019107451A true JP2019107451A (ja) 2019-07-04
JP7184626B2 JP7184626B2 (ja) 2022-12-06

Family

ID=64744626

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018236163A Active JP7184626B2 (ja) 2017-12-19 2018-12-18 Ｅｎｔの骨距離が色符号化された顔のマップ

Country Status (11)

Country Link
US (1) US10660707B2 (ja)
EP (1) EP3501398B1 (ja)
JP (1) JP7184626B2 (ja)
KR (1) KR20190074226A (ja)
CN (1) CN109998676A (ja)
AU (1) AU2018274910A1 (ja)
BR (1) BR102018076393A2 (ja)
CA (1) CA3027389A1 (ja)
IL (1) IL263606B (ja)
MX (1) MX2018016050A (ja)
RU (1) RU2018144110A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021087665A (ja) * 2019-12-05 2021-06-10 炳碩生醫股▲フン▼有限公司 手術支援システムおよびその表面情報を取得する方法
US11298186B2 (en) 2018-08-02 2022-04-12 Point Robotics Medtech Inc. Surgery assistive system and method for obtaining surface information thereof

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112022348A (zh) * 2020-09-11 2020-12-04 杭州微引科技有限公司 一种在ct和ai双引导下的穿刺消融术中导航系统
EP4368137A1 (en) * 2022-11-08 2024-05-15 Stryker European Operations Limited Technique for determining a surface registration based on mechanically acquired tissue surface data

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63204480A (ja) * 1987-02-20 1988-08-24 Hitachi Medical Corp 関係輪郭点デ−タの作成方法
JPH03232077A (ja) * 1990-02-08 1991-10-16 Toshiba Corp 画像処理装置
CN1801213A (zh) * 2005-09-30 2006-07-12 铁岭市公安局213研究所 三维颅骨身源鉴定方法及设备
US20140155730A1 (en) * 2010-12-17 2014-06-05 The Trustees Of Columbia University In The City Of New York Apparatus, method and computer-accessible medium for diagnosing and subtyping psychiatric diseases
KR20140132525A (ko) * 2013-05-08 2014-11-18 (주)약침학회 3차원 영상 촬영 장치를 이용한 경혈 위치 및 자침 깊이 결정 방법

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6006126A (en) * 1991-01-28 1999-12-21 Cosman; Eric R. System and method for stereotactic registration of image scan data
JPH05120451A (ja) 1991-08-08 1993-05-18 Hitachi Medical Corp 医用診断画像装置
FR2694881B1 (fr) 1992-07-31 1996-09-06 Univ Joseph Fourier Procede de determination de la position d'un organe.
US5813984A (en) 1997-03-07 1998-09-29 University Radiologists, Inc. Forensic skull and soft tissue database and on-line facial reconstruction of victims and age progession portrait rendering of missing children through utilization of advance diagnostic radiologic modalities
US6081739A (en) 1998-05-21 2000-06-27 Lemchen; Marc S. Scanning device or methodology to produce an image incorporating correlated superficial, three dimensional surface and x-ray images and measurements of an object
US8781557B2 (en) 1999-08-11 2014-07-15 Osteoplastics, Llc Producing a three dimensional model of an implant
US6524250B1 (en) 2000-09-19 2003-02-25 Pearl Technology Holdings, Llc Fat layer thickness mapping system to guide liposuction surgery
US7113617B2 (en) * 2000-12-12 2006-09-26 Hewlett-Packard Development Company, L.P. Method of computing sub-pixel Euclidean distance maps
WO2012117381A1 (en) * 2011-03-03 2012-09-07 Koninklijke Philips Electronics N.V. System and method for automated initialization and registration of navigation system
CN104883974B (zh) * 2012-10-26 2019-03-19 瓦里安医疗系统公司 Nir图像引导的靶向
US9576107B2 (en) 2013-07-09 2017-02-21 Biosense Webster (Israel) Ltd. Model based reconstruction of the heart from sparse samples
US9775578B2 (en) 2013-08-12 2017-10-03 Biosense Webster (Israel) Ltd. Unmapped region visualization
JP2017511726A (ja) * 2014-03-05 2017-04-27 ブルー・ベルト・テクノロジーズ・インコーポレーテッド コンピュータ支援によるプロテーゼの位置合わせ
US9633482B2 (en) * 2014-08-12 2017-04-25 Toshiba Medical Systems Corporation Apparatus and method for restricting image data visualization
US20160180520A1 (en) * 2014-12-17 2016-06-23 Carestream Health, Inc. Quantitative method for 3-d joint characterization
KR102329862B1 (ko) * 2015-02-10 2021-11-23 삼성전자주식회사 영상의 컬러 변환 방법 및 전자 장치
US10188465B2 (en) 2015-08-26 2019-01-29 Biosense Webster (Israel) Ltd. Automatic ENT surgery preplanning using a backtracking maze problem solution
US9652890B2 (en) * 2015-09-29 2017-05-16 Disney Enterprises, Inc. Methods and systems of generating an anatomically-constrained local model for performance capture

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63204480A (ja) * 1987-02-20 1988-08-24 Hitachi Medical Corp 関係輪郭点デ−タの作成方法
JPH03232077A (ja) * 1990-02-08 1991-10-16 Toshiba Corp 画像処理装置
CN1801213A (zh) * 2005-09-30 2006-07-12 铁岭市公安局213研究所 三维颅骨身源鉴定方法及设备
US20140155730A1 (en) * 2010-12-17 2014-06-05 The Trustees Of Columbia University In The City Of New York Apparatus, method and computer-accessible medium for diagnosing and subtyping psychiatric diseases
KR20140132525A (ko) * 2013-05-08 2014-11-18 (주)약침학회 3차원 영상 촬영 장치를 이용한 경혈 위치 및 자침 깊이 결정 방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
森紀子他: "三次元ＣＴ画像を用いた現代日本人成人男女の頭部生体計測と顔面標準三次元物理モデルの構築", ANTHROPOLOGICAL SCIENCE (JAPANESE SERIES), vol. Vo. 111, No.1, JPN6022030513, 2003, pages 35 - 49, ISSN: 0004833743 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11298186B2 (en) 2018-08-02 2022-04-12 Point Robotics Medtech Inc. Surgery assistive system and method for obtaining surface information thereof
JP2021087665A (ja) * 2019-12-05 2021-06-10 炳碩生醫股▲フン▼有限公司 手術支援システムおよびその表面情報を取得する方法

Also Published As

Publication number Publication date
US20190183578A1 (en) 2019-06-20
EP3501398B1 (en) 2020-06-03
JP7184626B2 (ja) 2022-12-06
KR20190074226A (ko) 2019-06-27
BR102018076393A2 (pt) 2019-07-09
AU2018274910A1 (en) 2019-07-04
IL263606B (en) 2022-02-01
RU2018144110A3 (ja) 2020-06-15
IL263606A (en) 2019-03-31
MX2018016050A (es) 2019-08-29
CN109998676A (zh) 2019-07-12
CA3027389A1 (en) 2019-06-19
EP3501398A1 (en) 2019-06-26
RU2018144110A (ru) 2020-06-15
US10660707B2 (en) 2020-05-26

Similar Documents

Publication Publication Date Title
EP1837828B1 (en) Image registration using locally-weighted fitting
JP7184626B2 (ja) Ｅｎｔの骨距離が色符号化された顔のマップ
US7450743B2 (en) Method and system of affine registration of inter-operative two dimensional images and pre-operative three dimensional images
US7010080B2 (en) Method for marker-free automatic fusion of 2-D fluoroscopic C-arm images with preoperative 3D images using an intraoperatively obtained 3D data record
US7778686B2 (en) Method and apparatus for medical intervention procedure planning and location and navigation of an intervention tool
US7346381B2 (en) Method and apparatus for medical intervention procedure planning
EP1719078B1 (en) Device and process for multimodal registration of images
EP2925216B1 (en) Stenosis therapy planning
US20090281418A1 (en) Determining tissue surrounding an object being inserted into a patient
US20090306497A1 (en) Calibration method for catheter tracking system using medical imaging data
US20090012390A1 (en) System and method to improve illustration of an object with respect to an imaged subject
US20180253838A1 (en) Systems and methods for medical imaging of patients with medical implants for use in revision surgery planning
KR20140096919A (ko) 의료 영상 정합 방법 및 장치
KR20150118484A (ko) 의료 영상 정합 방법 및 장치
CN114746901A (zh) 图像与跟踪系统的配准
CN114845655A (zh) 3d路径探测可视化
CN111369675B (zh) 基于肺结节脏层胸膜投影的三维可视模型重建方法及装置
JP6703470B2 (ja) データ処理装置及びデータ処理方法
CN114283179A (zh) 基于超声图像的骨折远近端空间位姿实时获取与配准系统
Lee et al. Determining the operative line of resection for image‐guided emphysema surgery using a laser scanner and non‐rigid registration

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221024

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221124

R150 Certificate of patent or registration of utility model

Ref document number: 7184626

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150