JP2017536144A - 視覚的追跡システムと追跡マーカーとの間でデータを伝送するための、可視光通信システム - Google Patents

視覚的追跡システムと追跡マーカーとの間でデータを伝送するための、可視光通信システム Download PDF

Info

Publication number
JP2017536144A
JP2017536144A JP2017516677A JP2017516677A JP2017536144A JP 2017536144 A JP2017536144 A JP 2017536144A JP 2017516677 A JP2017516677 A JP 2017516677A JP 2017516677 A JP2017516677 A JP 2017516677A JP 2017536144 A JP2017536144 A JP 2017536144A
Authority
JP
Japan
Prior art keywords
data
tracking
led
tracker
photosensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017516677A
Other languages
English (en)
Other versions
JP6712994B2 (ja
Inventor
ジョエル ズハース
ジョエル ズハース
サリー タバンディー
サリー タバンディー
Original Assignee
シンク サージカル, インコーポレイテッド
シンク サージカル, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シンク サージカル, インコーポレイテッド, シンク サージカル, インコーポレイテッド filed Critical シンク サージカル, インコーポレイテッド
Publication of JP2017536144A publication Critical patent/JP2017536144A/ja
Application granted granted Critical
Publication of JP6712994B2 publication Critical patent/JP6712994B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/114Indoor or close-range type systems
    • H04B10/116Visible light communication
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00221Electrical control of surgical instruments with wireless transmission of data, e.g. by infrared radiation or radiowaves
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3937Visible markers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3937Visible markers
    • A61B2090/3945Active visible markers, e.g. light emitting diodes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/397Markers, e.g. radio-opaque or breast lesions markers electromagnetic other than visible, e.g. microwave
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3983Reference marker arrangements for use with image guided surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/11Arrangements specific to free-space transmission, i.e. transmission through air or vacuum
    • H04B10/112Line-of-sight transmission over an extended range

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pathology (AREA)
  • Robotics (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Optical Communication System (AREA)
  • Surgical Instruments (AREA)

Abstract

光学追跡システムは、1〜2,000MB/sのデータを発生および光学的に受信するための、少なくとも1つの追跡アレイを備える。また、光学的に伝送される1〜2,000MB/sのデータを光学的に受信するための、少なくとも1つのトラッカーも提供される。追跡システムは、目的物を追跡して追跡情報をすぐに送信するためだけでなく、ユーザーまたは手術室内の他のコンポーネントに、コンピューター支援デバイスのような外部デバイスと関連するさらなるデータを提供するためにも用いられる。膝関節全置換術(TKA)のような整形外科の外科的手順は、光学追跡システムを用いて、より効率的かつより良好な結果で実施される。

Description

[関連出願]
本出願は、2014年11月21日に出願された米国仮出願第62/083,052号の優先権の利益を主張するものであり;その内容は、参照により本明細書中に援用される。
[技術分野]
本開示は、概して可視光通信システムに関し、具体的には、外科的状況における、追跡システムと追跡マーカーとの間のデータ伝送に関する。
目的物を空間内に正確に配置、追跡、およびナビゲートするために、追跡およびナビゲーションシステムが様々な適用において用いられている。医療分野では、追跡システムは、医療機器とともに使用されて、外科医が正確な外科的処置を行なうのを助ける。
手術室内で目的物を追跡する典型的な構成および方法は、当技術分野でよく知られている。1つのそのような方法は、光学シグナル(光、高周波、赤外線、音など)および受光器(フォトダイオード、CMOSまたはCCDカメラ)を利用して、患者の解剖学的構造に対して医療機器の位置および方位を示す。光学追跡システムは、一般に、それらの精度および適応性に起因して用いられる。
光学追跡システムは、一般に、以下のものを備える。光学シグナルを放射または反射する3以上のアクティブまたはパッシブのマーカーは、追跡アレイ上に、公知の幾何学で配置される。2以上の受光器は、手術室において、患者から離れて収容されて、マーカーから放射または反射されるシグナルを受信する。受光器に電気的に接続された処理装置は、入ってくるシグナルを分析して、追跡アレイの位置および方位を計算する。
追跡アレイは、患者の解剖学的構造および医療機器の両方に対して固定される。当技術分野でよく知られている技術を用いて、光学センサー、追跡アレイ、患者の解剖学的構造、および医療機器の座標フレームを、互いに対して計算することができる。外科的処置中、マーカーは、光学センサーにより捕捉されて処理がされるシグナルを定期的に放射または反射して、目的の患者の解剖学的構造に対する医療機器の位置および方位を計算する。
記載の追跡システムは、様々な医療用途に利用されている。例えば、マーカーアレイは、Stryker製のES2 Spinal Systemなどのハンドヘルドデバイスに取り付けられている。外科医は、OR内の表示モニター上に、患者椎骨に対する椎弓根スクリューの配置を視覚化することができる。別の適用は、股関節全置換術における寛骨臼の用意中にリーマーの位置および方位に関する視覚的なフィードバックを提供する、Mako製のRIO Robotic Arm Interactive Orthopedic Systemなどの半アクティブコンピューター支援デバイスとともに、追跡システムを使用することである。同様に、追跡システムを、完全にアクティブのコンピューター支援デバイスとともに用いて、患者の解剖学的構造に対するデバイスの動作をガイドする制御装置へ送信される位置情報を提供することができる。
現在のところ、マーカーから放射または反射されるシグナルは、空間におけるマーカー位置を正確に検出するための手段を単に提供し、マーカーをバックグラウンドから識別するだけである(信号対雑音)。しかしながら、特に医療現場における複数の貴重な用途に役立つことのできる、これまで実行可能なものよりも高速にデータを伝送する手段を提供する発光ダイオード(LED)技術には、近年の進歩が存在している。
最近になって、1.6Gbit/sを超えるデータ速度が、CCDまたはCMOSカメラのような光学センサーおよびLEDから放射される可視光を用いて示されている。必要とされるコンポーネントのサイズが小さくて、電気接続を通して長い距離をシグナル送信する能力があるので、いくつかの新たな適用が、この技術に関して毎日生じている。例えば、LEDは、今では、家、ショッピングセンター、デパートまたはオフィスの職場の様々な場所に置かれて、コンピューター、携帯電話、ファックスなどにデータを伝送することができる。ストリームされたデータは、ユーザーをインターネットに接続することや、広告を送信することや、位置情報を提供することなどができる。
加えて、伝統的な無線周波とは対照的に、可視光を用いてデータを伝送することには多くの利点が存在する。電波は、周囲の電子装置と電磁気干渉を引き起こし得て、壁を通過し得て、それは潜在的にセキュリティリスクがある。しかしながら光は、視線に限局され、電磁干渉のリスクを保有せず、電波と比較して、およそ10,000倍広い帯域幅が利用可能である。
LEDマーカーおよび光学センサーを既に備える伝統的な光学追跡システムを考慮すると、システムは、追跡およびさらなる情報を、500Mb/秒を超過する理論速度で伝送するように変更して、複数の機能を果たすことができる。残念ながら、外科的処置と関連する高い耐性および外科的状況の複雑性が、外科的状況におけるLEDデータ伝送を阻止している。
したがって、光に基づくデータ伝送システムの必要性が存在する。ロボット外科的処置の関連におけるそのようなシステムの必要性がさらに存在する。
光学追跡システムは、1〜2,000MB/sのデータを発生および光学的に伝送するための、少なくとも1つの追跡アレイを備える。また、光学的に伝送される1〜2,000MB/sのデータを光学的に受信するための、少なくとも1つのトラッカーも提供される。追跡システムは、目的物を追跡して追跡情報をすぐに送信するためだけでなく、ユーザーまたは手術室内の他のコンポーネントに、コンピューター支援デバイスのような外部デバイスと関連するさらなるデータを提供するためにも用いられる。膝関節全置換術(TKA)のような整形外科の外科的手順は、光学追跡システムを用いて、より効率的かつより良好な結果で実施される。
本発明の追跡アレイおよびそれと関係がある様々な構成の処理装置を備える外部デバイスを示す。 本明細書に開示のエレメントを備える本発明の追跡システムの例を示す。 手術室内の外科用ライトに取り付けられたフォトセンサーの本発明の配置を示す。 本発明の追跡アレイおよびその中に取り付けられた処理装置および/またはフォトセンサーを備える外部デバイスの様々な例を示す。 データ伝送のための発光ダイオードと関連するフォトセンサーの配置の本発明の例である。 データ・リンク・ターゲッティンに利用することのできるLEDおよび/またはフォトセンサーを備える、マルチフェイスの本発明の追跡アレイを示す。 データターゲッティングのためのフォトセンサーの周辺の物理的バリアの箇所を示す。
本明細書に開示の発明は、概して、追跡システム、LEDマーカー、および、医療現場または医療現場内の患者において使用される他の外部デバイスの間で、伝送データを、より明確かつ高速にデータ伝送するための、追跡システムの既存のコンポーネントを使用するための方法およびデバイスとして有用性がある。
値の範囲が与えられる場合、その範囲は、明確にその範囲とともに含まれてその範囲の最後の有効数字が変化するように、その範囲のエンドポイント値だけでなく、その範囲の中間値も含むことを意図することが理解されるべきである。例として、1〜4と挙げられた範囲は、1〜2、1〜3、2〜4、3〜4、および1〜4を含むことが意図される。
本明細書において用いられる「高速」は、1Mb/秒よりも大きな速度を含むデータ伝送に関して定義されるが、LED作動は、現在のところ、1〜2,000Mb/秒の範囲内の速度を含み得ることが当技術分野で知られている。
本明細書に開示の発明を使用する主な利点は、目的物を追跡して追跡情報をすぐに送信するためだけでなく、ユーザーまたは手術室内の他のコンポーネントに、コンピューター支援デバイスのような外部デバイスと関連するさらなるデータを提供するためにも用いられる、追跡システムの能力である。そのようなコンピューター支援デバイスは、例示的に、ロボット、外科用鋸、外科用ドリル、触覚的に制御されるデバイス、自律的および半自律的外科的デバイス、およびそれらの組み合わせを備える。
例として、膝関節全置換術(TKA)は、遠位大腿骨および近位脛骨を切断して、補綴の膝移植のための膝を用意する必要がある。切断の位置、傾きおよび方位は、補綴が正確に合うのを確実にさせて膝関節の配置を復元するのに決定的な意味を持つ。TKA手順は、一般に、以下を含む。外科医は、患者のMRIまたはCTスキャンをレビューして、疾患の程度を評価して、手術前に手順を計画する。手術中に、外科医は、膝関節を曝露させて、典型的に患者特有のジグの補助とともに外科用鋸を用いて、大腿および脛骨を正確に切断する。切断をした後に、試験移植片を用いて、患者の動作範囲および移植片の適合を評価する。動作範囲および適合が外科医により許容される場合は、補綴を移植して膝を閉じる。
本明細書に記載のマーカーは、一般に、可視光、高周波、赤外線、音、および電磁気シグナルなどのシグナルを反射または放射することが可能な、任意のパッシブまたはアクティブの伝送機を指す。より具体的には、本発明は、データを追跡および/または伝送するためのアクティブのLEDマーカー、特に、データを伝送するためのLEDマーカーの使用は、任意のスペクトル/周波数の光であるが好ましくは320ナノメートル〜760ナノメートルの範囲の波長を放射し得ることを開示する。本明細書において用いられる追跡アレイは、複数のマーカーの構成を考慮する。
本明細書において用いられる発光ダイオード(LED)は、エレクトロルミネセンスを電気的に変調することが可能な任意の光源として定義される。
本発明において作動するLEDは、当技術分野で知られている複数の半導体材料で容易に作られて、任意のスペクトル/周波数で光を生じる。そのような材料の例は、例示的に、リン化ガリウム砒素、リン化インジウムガリウムアルミニウム、リン化ガリウム(III)、セレン化亜鉛、ケイ素、炭化ケイ素、窒化インジウムガリウム、前述のいずれかのナノ結晶−または色素−増感型、およびそれらの任意の組み合わせを含む。また、任意の波長を生じることが可能なLEDが商業上容易に入手されることもまた、本明細書において定義されることも理解されよう。例えば、赤、緑および青色のLEDの組み合わせは、白色光を放射することが知られていて、または、当該分野では、H.S.Chen,C.K.Hsu,and H.Y.Hong,“InGaN−CdSe−ZnSe quantum dots white LEDs,”IEEE Photon.Technol.Lett.18(1),193−195(2006)により明らかにされたように、単一の白色光LEDも知られている。
米国特許第6,061,644号に記載されるもののような、医療分野で用いられる追跡システムまたはトラッカーのタイプは、当技術分野でよく知られている。光学追跡システムの精度および信頼性は、特定の設計挑戦であり、マーカー構成、フォトセンサーのタイプ、シグナル処理方法、および、マーカーとフォトセンサーとの間の距離などの、多くの変数の関数である。各変数の記載は、開示の発明の範囲を超えるが、本明細書に記載の実施態様は、任意の追跡システム構成に適用し得ることが理解されるべきである。
追跡アレイおよび外部デバイスデータ伝送
ここで図1Aを参照して、本発明の光学追跡システムは、データ伝送のための少なくとも1つのLED 103を備え、時間または周波数領域の変調技術を用いてLED(単数または複数)103を作動させて高速でデータを伝送する少なくとも1つの処理装置102を備える、追跡アレイ101を備える。伝送されるデータは、追跡アレイ101の内部処理装置102により作成される。本発明の少なくとも一実施態様では、伝送されるデータは、追跡アレイ101と外部デバイス104との間の電気接続を用いて、追跡アレイ101によって外部デバイス104から受信されて、ここで、内部プロセッサ102は、LEDを作動させて、外部デバイスから受信される、生成されたままの(as−developed)、処理前の、または処理された形態でデータを送信することができる。処理装置102は、様々なシグナル処理操作、例えば、制限されないが、FFT/IFFTをコードする、変調する、インターリーブするなどのエラー訂正コードを実行することが可能である。また、プロセッサは、所望のシグナルでLEDを駆動するための、少なくとも1つの発光エレメント駆動回路を備える。加えて、処理装置102は、例えば、制限されないが、オンオフキーイング変調、振幅変調、パルス幅変調、M−レベル直角位相振幅変調などの技術を用いて、シグナルを変調することが可能である。処理装置102は、例えば、制限されないが、周波数分割多重化、時分割多重化、オルトゴナル周波数分割多重化、およびそれらの組み合わせを用いて、シグナルを多重化することが可能である。特定の本発明の実施態様では、処理装置102は、シグナルを多重化および変調することがさらに可能である。
例として、本出願の譲受人に割り当てられ、その全体で参照により本明細書中に援用される、国際出願PCT/US2015/051713に記載の2自由度(2DOF)のハンドヘルドドリルのような外部デバイスは、ドリルに取り付けられて電気的に接続されることにより、本発明の追跡アレイを具備する。本発明の一実施態様では、追跡アレイの内部プロセッサは、LED(単数または複数)103を通して、内部プロセッサで生産されたデータを送信することができる(例えば、データは、追跡アレイの識別コードであり、または、データは、追跡アレイ自体に本来備わっているものであり、または、追跡アレイ上のIMUデータである)。一方で、別の本発明の実施態様では、2DOFドリル由来のデータは、内部プロセッサに送信されて、それはLEDを作動させて、ドリルに本来備わっているデータ(例えば、ドリル先端の切断速度、ユーザープロンプト、ドリルにより受けた力に関するデータ、および以下に記載の他のデータ)をワイヤレス伝送する。
本発明の特定の実施態様では、追跡アレイは、高速データ伝送のための少なくとも1つのLED 103、および、可視光、高周波、赤外線、音、または電磁気シグナルのような光学シグナルを放射または反射し得る2以上のアクティブおよび/またはパッシブのマーカーを備える。2以上のアクティブおよび/またはパッシブのマーカーは、特に伝統的な追跡に用いられ得て、一方で、作動されたLED 103は、特にデータ伝送に用いられる。本発明の特定の実施態様では、追跡アレイは、図1A〜Cに示されるように、高速でデータを伝送することが可能な2以上のLED 103を備える。データ伝送が可能なLED(単数または複数)103は、追跡アレイおよびそれに取り付けられた任意の目的物、例えば外部デバイス104を追跡するための光学的トラッカーに関するソースとしても用いられ得ることが理解されるべきである。
本発明の特定の実施態様では、内部処理装置102は、外部デバイス104の中/上に収容または配置されて、個々のLED 103に電気的に接続されて、図1Bに示すように作動を制御する。また、外部デバイス104は、シグナル処理のための少なくとも1つのプロセッサを収容し得て、図1Cに示すように、電気接続によって追跡アレイ101の内部プロセッサ102に接続される。また、外部デバイス104の中/上に収容されるプロセッサ102も、外部デバイス104を制御し得る。
トラッカーデータ受信機
ここで図2を参照して、LED 103から伝送されるデータ112は、トラッカー109の少なくとも1つのフォトセンサー106によって受信される。また、トラッカー109は、これらのフォトセンサー106および当技術分野で知られている任意の標準的な追跡、較正および登録方法を用いて、追跡アレイ101およびそれに取り付けられた任意の目的物の位置および方位を判定することが可能である。少なくとも1つのフォトセンサー106は、当技術分野で知られている任意の検出センサー、例えば、制限されないが、フォトダイオード、CCDおよび/またはCMOSカメラであり得ることが理解されるべきである。デバイスの少なくとも一実施態様では、2以上のフォトセンサー106が、トラッカー109内の公知の構成に配置される。特定の実施態様では、追跡に特化した2以上のフォトセンサー106および伝送されたデータ112の受信に特化した1つまたは複数のさらなるフォトセンサーが存在する。少なくとも一実施態様では、トラッカー109は、図2に示されるように、手術室(operating suite)内に置くことのできる土台を備える剛性構造に取り付けられる。
本発明の少なくとも一実施態様では、トラッカー109が取り付けられた剛性構造は、少なくとも1自由度の物理的座標系で、フォトセンサー106が配置されたトラッカー109を調節するためのコンポーネント(図示せず)を備える。自由度の動作に関する座標系は、例示的に、デカルトおよび球状を含む。本発明の少なくとも一実施態様では、コンポーネントは、ユーザーにより手作業で、フォトセンサー106が配置されたトラッカー109を調節するように操作される。本発明の少なくとも一実施態様では、フォトセンサー106が配置されたトラッカー109を調節するためのコンポーネントは、トラッカー処理装置および/またはコンピューター111、または、追跡アレイ101、コンピューター111、および/または他の外部デバイス上のLED 103から生じるデータに基づいてトラッカー109を移動および/または回転させることが可能な他の処理装置(図示せず)によって制御され得る。本発明の少なくとも一実施態様では、複数のトラッカー109が、手術室じゅう(about the room)に配置される。
本発明の少なくとも一実施態様では、フォトセンサー106を備えるトラッカー109は、手術室内の他の目的物に取り付けられる。トラッカー109の取り付けのための目的物は、制限されないが、手術室の壁、手術室の天井、手術室の床、医療機器、外科用ライト、およびそれらの組み合わせであり得る。少なくとも一実施態様では、トラッカー109は、手術室内の特定の目的物、例えば、図3Aに示されるように外科用ライト116に取り付けるように構成され得て、または、図3Bに示されるように外科用ライト116’の中に直接作られ得る。
フォトセンサー106は、トラッカー処理装置に電気的に接続されて、LED(単数または複数)103から伝送されるデータ112を逆処理し、OR内の任意の追跡された目的物のPOSEを決定するプロセッサであってもよい。トラッカー処理装置は、異なるシグナル処理技術、例えば、制限されないが、復調、FFT/IFFT、エラー訂正、脱インターリーブ、およびそれらの組み合わせを用いて、受信データを復元することが可能である。本発明の少なくとも一実施態様では、フォトセンサー106は、デジタルまたは物理的フィルターを用いて、特定のLEDおよび/またはデータ周波数を抜き出す。例示的に、物理的フィルターのタイプは、制限されないが、吸収フィルター、二色性フィルター、単色、ロングパス、バンドパス、ショートパス、偏光子などを含んでよい。デジタルフィルトレーションのタイプは、制限されないが、FFT/IFFT、バンドパス、Kalmanフィルター、Besselフィルター、ハイ−パス、ロー−パス、およびそれらの組み合わせを含んでよい。
トラッカー処理装置は、トラッカー109の中/上に配置されてよく、および/または、コンピューター111の一部であり、および/または、トラッカー109が取り付けられた剛性構造の土台上に配置され、および/または、外部デバイス上に配置される。
追跡アレイおよび外部デバイスデータ受信機
図4に関して、追跡アレイ101は、データ受信機として働く少なくとも1つのフォトセンサー113を備える。フォトセンサー113は、フォトダイオード、CCDおよび/またはCMOSカメラを例示的に含む、任意の光検出センサーである。フォトセンサー113により受信されるデータは、本発明の一部の実施態様では、逆処理されて、内部プロセッサ102(図4A)により復元され、またはあるいは、データは、外部デバイス上に配置されたプロセッサに、マーカーと外部デバイス(図4B)との間の電気接続を用いて伝達される。本発明の少なくとも一実施態様では、追跡アレイ101は、図4Cに示されるように、入ってくるデータの逆処理のみに供されるフォトセンサー113に電気的に接続された、さらなる処理装置114を備える。
本発明の少なくとも一実施態様では、フォトセンサー113は、外部デバイス104上に配置されて、図4Dに示されるように、外部デバイス上の処理装置を用いて逆処理および復元できるデータを受信する。本発明の少なくとも一実施態様では、外部デバイス104上に配置された少なくとも1つのフォトセンサー113から受信されるデータは、図4Eに示されるように、逆処理および復元される追跡アレイ101上の内部処理装置102に、電気接続を経由して伝達され得る。少なくとも一実施態様では、追跡アレイおよび外部デバイスの両方とも、図4Fに示されるように、電気接続を経由して追跡アレイと外部デバイスとの間を伝送され得るデータを受信および処理することのできる、1つのフォトセンサーおよび少なくとも1つの処理装置をそれぞれ備える。
少なくとも一実施態様では、外部デバイス104および/または追跡アレイ101上の処理装置102は、フォトセンサー113による受信シグナルを逆処理するためのコンポーネントを備える。処理装置102および/または114は、シグナル処理技術、例えば、制限されないが、復調、FFT/IFFT、エラー訂正、脱インターリーブなどを用いて、受信データを復元することが可能である。本発明の少なくとも一実施態様では、データは、追跡アレイ101上のフォトセンサー113により受信されて、処理装置102および/または114により逆処理されて、ここで、処理されたデータはそれから、電気接続を介して外部デバイス104に送信されて、外部デバイス104により使用される。他の実施態様では、データは、外部デバイス104上のフォトセンサー113により受信されて、処理装置102および/または114により逆処理されて、ここで、処理されたデータはそれから、追跡アレイ101のLED 103を用いて高速で伝達される。
図4A〜Fに示される実施態様は、様々な構成のフォトセンサー(単数または複数)および/または処理装置113、114を示す。本明細書に開示の発明は、図4A〜Fに示す例の任意の組み合わせを含み得て、例示を意図し、限定することを意味しない。
少なくとも一実施態様では、図4A〜Fに示される処理装置102は、LEDを作動させてデータを伝送することができ、ならびに、フォトセンサー113により受信される、入ってくるデータを処理することができる。ここで、伝送されるデータは、追跡アレイ101上の処理装置102によって、外部デバイス104から、外部デバイス102の処理装置から、および/または、少なくとも1つのフォトセンサー113により受信されるデータから、およびそれらの任意の組み合わせから、作ることができる。追跡アレイ101、外部デバイス104、トラッカー109、外部デバイス110、コンピューター111、および、電気的に接続され、および/または、追跡アレイ101を備える、任意の他のデバイスの間の、データ回復/伝送、処理/逆処理の様々な組み合わせを使用してよいことが理解されるべきである。
トラッカーデータ伝送
図5に関して、トラッカー109は、少なくとも1つのLED 115を備えてよい。LED 115は、トラッカー109上に配置されて、外部デバイス104および/または追跡アレイ101上に配置されたフォトセンサー113に、データを高速で伝送する。本発明の少なくとも一実施態様では、LED 115は、フォトセンサー(単数または複数)106の近くに配置され得るが以前に記載のようにケージング内に収容されない。例えば、LED 115は、図3A〜Bに示されるもののような外科用ライトに取り付けられた同一のトラッカー109上に配置することができる。
本発明の少なくとも一実施態様では、LED 115を作動させて、追跡アレイ101の処理装置102に関して記載した方法およびコンポーネントを用いて高速でデータを伝送することができる。本発明の他の実施態様では、LEDは、トラッカー処理装置、および/またはコンピューター111、および/または外部デバイス、および/または、トラッカー109内に配置または外部で電気的に接続されたさらなる処理装置(図示せず)により作動される。
トラッカー109上のLED(単数または複数)115から伝達されるデータは、複数のソースから作られ得る。例として、制限されることを意味せずに、データは、トラッカー処理装置により内部的に作られ得て、処理装置は、モニター109、コンピューター111、キーボード107およびマウスを経由してユーザーからデータを受信することができ、データは、USBのようなメモリ保管デバイス(図示せず)、またはCDのような伝達メディアにより作られ得て、データは、トラッカー処理装置に電気的に接続された外部デバイスから作られ得て、および/または、データは、追跡アレイ101または外部デバイス104により送信されるデータから作られ得る。
データのタイプおよび機能
複数のデバイス、追跡アレイ、または追跡システムにより伝送/受信されるデータのタイプは、複数の異なる機能に用いられる複数の異なる情報を含み得る。伝送/受信されるデータのタイプは、以下の情報を例として含み得て、限定または強制を決して意味しない。例えば、データは、特定のLEDの識別および位置、外部デバイスの操作状態、患者の解剖学的構造の位置および方位、外部デバイスを制御するためのプロンプト、外部デバイスのハードウェアまたはソフトウェアバージョン、外部デバイスによりログが取られたデータ、外部デバイスの操作パラメーター、速度特性、位置および方位、加速、電流、温度、電池寿命、デバイスにより、またはデバイス上に発揮される力、警告、遮断、故障、手術前計画の状態、手術計画、手術計画に関する医療画像データ、手術計画アプリケーション、例えば実行可能なプログラム、および、二成分の流れのデータを含み得る。当業者は、特にコンピューター支援の医療機器に関して、本発明により伝送することのできる情報およびデータタイプの多元的可能性を理解するであろう。
本発明の少なくとも一実施態様では、伝送されるデータを用いてマーカーLEDの動きを追跡する。ドップラーアルゴリズムの使用を通して、空間内の装置の3次元の動き、体の動き、体の方向、呼吸速度などのような、いくつかのタイプの動きを測定し得ることが理解されよう。本発明により生じる三次元データは、患者の体の構造、装置、およびそれらの組み合わせ;その間の動的な相互作用;座標空間における少なくとも1つのマーカーの位置;マーカー間の動的な位置的変化;および前述の組み合わせを例示的に含む、イメージを含む。
少なくとも一実施態様では、LEDマーカーを用いて、睡眠時無呼吸を監視し得る。本発明の少なくとも一実施態様では、マーカーLEDの動きは、リアルタイムで監視される。本発明の他の実施態様では、LEDマーカーを用いて、リアルタイムで患者の動きを医療機器に対して同期させる。本発明の少なくとも一実施態様では、LEDマーカーを用いて、患者の動きを1つまたは複数の医療用直線加速器の動きに同期させて、放射線治療ビームを患者の動きに合わせることにより、治療される腫瘍のターゲッティングを最大にして、その結果、腫瘍部位への放射線量を最大にして、一方で、周辺組織および臓器に対する副次的ダメージを最小限にする。
同様に、複数のデバイス、追跡アレイ、追跡システム、および/またはそれらの組み合わせにより伝送/受信されるデータを、複数の異なる機能に用いることができる。例えば、限定または強制を決して意味しないが、少なくとも1つの実施態様では、データは、モニター109に直接表示され、または、他の外部デバイスに中継され、データは、ユーザーにタスクを実行するように指示することができ、データは、手術計画などを実行するための外部デバイスに関する指示のセットであり、データは、手術野内の外部デバイスに、追跡アレイ101を備える別のデバイスおよび/または外部デバイス104の位置および/または方位に基づいて動くように指示することができ、外部デバイスは、追跡されている患者の解剖学的構造の位置および方位に基づいて動くように指示され得る。
データターゲッティング
本発明の少なくとも一実施態様では、伝送/受信されるデータは、特定のフォトセンサーおよびLEDへ/からターゲッティングすることができる。特定の追跡アレイ、LED、および/またはフォトセンサーのターゲッティングは、多くの異なる方法により達成することができる。少なくとも一実施態様では、LED(単数または複数)およびまたはフォトセンサー(単数または複数)の視野は、特定の範囲に制限される。例えば、LEDの典型的な放射場は、円錐型に120度である。LEDおよび/またはフォトセンサー、またはそれらの組み合わせは、図6に示されるもののような多数の面を有する追跡アレイ上に、様々な構成で配置することができる。LED/フォトセンサーの放射/受信場は、放射/受信シグナルが追跡アレイの方位に基づいてより高い強度である位置を作る。データを高速で伝達する能力に起因して、シグナルをより高い強度で放射/受信する面は、「アクティブ」面としてターゲッティングされ得る。したがって、伝送/受信されるデータは、「アクティブ」面へ/から向けられ得る。
本発明の少なくとも一実施態様では、ターゲッティングは、データリンクを視線内のフォトセンサー(単数または複数)およびLED(単数または複数)のみに限定することにより達成される。処理装置は、フォトセンサーの視線から遮断されているLEDからのデータリンクの不存在を計算し得る。遮断されたLED/フォトセンサーから放射/受信されるデータは、中止することができ、伝送/受信されるデータは、より「アクティブ」である別のLEDおよび/またはフォトセンサーに伝達/ターゲッティングされ得る。したがって、データは、単独または組み合わせて、また、特定のLED、フォトセンサー、追跡アレイ、追跡アレイ面、外部デバイス、およびトラッカーに/からターゲッティングする少なくとも1つとともに用いられて、手術室内の計算デバイスへ伝達され得る。
本発明の少なくとも一実施態様では、LEDは、同時に作動されて、冗長伝送システムを作り、1つのマーカーがフォトセンサーによって見られない場合でさえ、データはなおも正確に伝送される。例えば、LED(単数または複数)を、各フォトセンサーと共配置して、冗長マルチ−フォトセンサーシステムを作ることができる。したがって、1つまたは複数のフォトセンサーは、それらの関係があるLEDとブロックされる場合は、他のLEDがなお使用されてデータを追跡および伝送することができる。別の例では、多数のフォトセンサーは、トラッカー上に共配置されて、別の冗長マルチ−フォトセンサーシステムを作ることができる。1つのフォトセンサーがブロックされると、トラッカー上に配置された別のフォトセンサーがなお可視であり得て、伝送LEDによってデータを受信する。
加えて、LEDは、独立に作動されて、データ伝送速度を増大し得る。少なくとも一実施態様では、個々のLEDは、他のLEDとは独立に、異なるタイプのデータを伝送することができる。例として、1つのLEDは、外部デバイス104の操作状態を継続的に送信して、一方で、隣接LEDは、外部デバイス104の速度データを継続的に送信する。本発明の少なくとも一実施態様では、LEDは、連続して作動されて、特定のデータを伝送して、1つまたは複数のLEDがフォトセンサー106から遮断されるようになる場合にデータが受信されるチャンスを改善する。例えば、第一のLEDは、外部デバイスの操作状態を所定の期間伝送して、それから、外部デバイスの操作状態は、第二のLEDにより別の期間伝送されて、それから、データは、第三のLEDにより伝送されて、必要であり得るさらなるLEDにより伝送され続ける。したがって、第一および第二のLEDがフォトセンサー106の視線から遮断される状況では、最終的に、第三のLED、またはいくつかの他のLEDが、外部デバイスの操作状態を伝送する。
少なくとも一実施態様では、データ伝達速度の2以上のモードまたは設定が存在する。例示的に、1つのモードは、約1Mb/sの速度でデータを送信することができ、一方で、別のモードは、約10Mb/sの速度でデータを送信することができる。1Mb/sでのモードは、例示的に、追跡アレイまたはLEDの一致性などのデータおよび他の「バックグラウンド」情報を送信することができ、10Mb/sでの他のモードは、追跡情報を送信することができる。また、10Mb/sでのモードは、例示的に、手術計画、ソフトウェアのアップグレードのためのアプリケーション実行可能な伝達、および、より大きなパケットの形態であり得る他のデータなどの、データを送信するために用いることができる。一実施態様では、1つのモードから別のモードへの変更は、伝達されるデータのサイズによって自動的になされ得る。例示的に、コンピューターは、送達されるデータのサイズを知っていて、プロセッサ107と通信して、データが大きい場合には、10Mb/sデータ伝達モードに切り替える。プロセッサ107は、追跡アレイのフォトセンサー113およびプロセッサ102へLED 115を作動させることにより、最初のシグナルを送信して受信モードに切り替えることができ、その結果、適切なデータ速度でデータを収集および解読することができる。
別の実施態様では、データは、並行して2以上のモードで送信される。例として、追跡アレイは、一方の1Mb/sのモードで一致性情報を送信して、一方で、他方のモードの10Mb/sで追跡情報をさらに送信する。1Mb/sおよび10Mb/s例としてここに与えられているので、当業者は、本発明によって、より高いまたはより低いデータ速度が達成され得ることを理解するであろう。
また、多チャネル伝送は、異なる波長を有することにより、または、伝送LEDのそれぞれに関する異なるタイプの変調を有することにより、達成され得る。1つのLEDは、第一の波長でデータを伝送し得て、同一の追跡アレイまたは別個の追跡アレイのいずれかの上の別のLEDは、第二の波長でデータを伝送し得る。これは、別個の追跡アレイ/外部デバイスを区別する、または異なるタイプのデータを送信するために用いることのできる、多チャネル伝送システムを作る。
特定の実施態様では、データは、フォトセンサーの周りに配置された物理的バリアを用いてターゲッティングされ得る。図7に関して、トラッカー109は、トラッカー109のフォトセンサーの周りに配置された円錐型の物理的バリア117とともに示される。物理的バリア117は、伝送LED(単数または複数)の放射場よりも小さい円錐型の角度を有し得る。トラッカー109が上述の機構を介して調節可能である場合は、トラッカーのフォトセンサーは、OR内の伝送LEDまたは特定の追跡アレイに向けられ得る。したがって、これらのLEDからのデータのみが、トラッカー109へ伝送される。物理的バリアは、任意の形状またはサイズであってよく、トラッカー、追跡アレイ、または外部デバイス(単数または複数)上の任意のフォトセンサーの周りに配置されてよい。
本明細書に開示の発明は、複数のデバイス、患者の解剖学的構造、追跡アレイ、および、手術室内の多数の追跡システムの間に高速データネットワークを作ることができることが理解されよう。加えて、データは、多くの適用において有用であり得る特定の伝送機/受信機に/からターゲッティングされ得て、それ自体を典型的な光忠実性(LiFi)構想から区別する。
さらなる追跡装置
本発明の少なくとも一実施態様では、当技術分野で知られているさらなる追跡コンポーネントを追跡アレイ101に取り付けて、位置および方位に関するさらなる情報を提供することができる。例として、開始の参照位置が提供される回転および移動の動きを計算するための、ジャイロスコープおよび加速度計を含む慣性計測装置(IMU)が用いられ得る。IMUからのデータは、追跡アレイの内部プロセッサ102により処理され得て、LED 103によって追跡システムのフォトセンサー106および続いて他の外部デバイスに伝送され得る。IMUからのデータおよび追跡アレイ上のLEDの検出位置は融合され得て、現在の光学追跡システムで見られる待ち時間を改善することのできる処理装置107により処理され得る。現在の追跡システムに加えて、1つだけのLED 103がフォトセンサー106の視線内にある場合は、他のLEDの位置および方位は、プロセッサ107により計算されるそれらの以前の位置および速度ベクトルに基づいて推定される。IMUからのさらなる位置および方位の情報を用いることにより、および、そのLEDから高速でデータをさらに伝達する能力を有することにより、推定された位置および方位の精度が上がる。したがって、IMU、伝統的な追跡システムおよびデータを高速で伝達する能力を用いることにより、コンピューター支援の医療機器を追跡、ナビゲーションおよびガイドする待ち時間および精度の両方とも、非常に改善される。
IMUは、最初の参照位置がドリフトし始める時にエラーを蓄積するという内部問題を有することを理解すべきである。ドリフトは、空間内のトラッカーアレイの真の位置および方位のエラーを引き起こし得る。少なくとも一実施態様では、IMUドリフトを克服するために、さらなるGPS装置がIMUに接続されて、全体的な参照位置を提供する。少なくとも一実施態様では、追跡システムは、LEDがフォトセンサーにより可視であり、GPS装置を必要としない場合、IMUの参照位置をリセットすることができる。
本発明は、その詳細な説明と合わせて説明されているが、前述の説明は、例証を目的としており、添付の特許請求の範囲により定義される本発明の範囲を制限しないことが理解されるべきである。他の態様、利点、および改変は、以下の特許請求の範囲内である。
光学追跡システムは、患者の解剖学的構造および触覚的にガイドされるハンドヘルド外科用鋸とともに用いられて、ユーザーが膝関節全置換術を行なうのを支援する。1つの追跡アレイ101は、外科用鋸104に電気的に接続されて、一方で、さらなる追跡アレイ101は、外科的部位付近で患者の大腿骨および脛骨に固定される。ユーザーは、触覚的にガイドされる外科用鋸を、露出した大腿骨および脛骨の周りの全身領域に配置する。外科医は、モニターを経由して、手術室において、手術前または手術中の手術計画を確認する。手術計画データは、プロセッサ107によって変調および/または多重化されて、それから、トラッカー109上のLED 115を作動させて、その結果、データを高速で送信する。データは、フォトセンサー113または114により受信されて、外科用鋸上の追跡アレイ101の追跡プロセッサ102により解読される。手術計画データが解読されて、外科用鋸内で触覚フィードバック機構の起動を引き起こし、ユーザーの方位および位置を正確な箇所に調節して、計画に従って大腿または脛骨を切断する。
また、患者上の追跡アレイと外科用鋸上の追跡アレイとの間のデータは、外科用鋸を正確に配置するのにも役立つことができる。追跡アレイの方位が患者の解剖学的構造に対して分かっていて、追跡アレイの方位が外科用鋸上で分かっている場合、その結果、追跡アレイの異なる面の間のシグナル強度は、正しい箇所に配置するのを助け得る。特定の面が追跡アレイの間に配置される場合、その結果、2つの間のデータのシグナル強度は、配置に用いることができる(LEDデータターゲッティング。加えて、触覚フィードバック機構は、鋸の位置および方位を調節するのを助けるので、フィードバック機構の操作に関するデータは、鋸上の追跡アレイ101によりトラッカーに戻して中継することができ、内部プロセッサ102によるLED 103の適切な作動を介してモニター上に表示される。トラッカー装置と外科用鋸との間に電気接続は必要とされない。
外科用鋸が規定された面を切断しているとき、追跡アレイ101は、LED 103を介して、操作速度、鋸の先で受ける力、どれくらいの量の骨が取り除かれているか、平面切断の位置および方位の精度、および、デバイスが軟組織に遭遇した場合の警告を含む、外科用鋸の操作データを送信する。患者の解剖学的構造上の追跡アレイは、外科用鋸が配置される、間違って配置される、または、特定の構造を危険にさらすデータを受信して、データを追跡システムおよび外科用鋸に伝送して、正確な配置を確認し、外科用鋸が間違って配置されている場合にそれを訂正およびまたは休止し、または、潜在的な安全性懸念が存在する場合はユーザーに警告を送信する。外科用鋸がそのタスクを完了した後に、外科用鋸は、新たな指示を求めるプロンプトをユーザーに伝送する。
少なくとも1つの例示的な実施態様がこの前述の詳細な説明に示されているが、膨大な数の変型が存在することが理解されるべきである。また、例示的な実施態様(単数または複数)は単なる例示であり、説明された実施態様の範囲、適用性、または構成を限定することを決して意図しないことも理解されるべきである。むしろ、前述の詳細な説明は、例示的な実施態様(単数または複数)を実施するための便利な手引きを当業者に提供する。添付の特許請求の範囲およびその法律的な同等物に記載の範囲を逸脱せずに、様々な変更がエレメントの機能および配置においてなされ得ることが理解されるべきである。加えて、医療用途が本明細書において示されたので、この技術は、他の産業においても実施できることが理解されるべきである。

Claims (14)

  1. 光学追跡システムであって、
    前記システムは、
    1〜2,000MB/sのデータを発生および光学的に伝送するための、少なくとも1つの追跡アレイ;および、
    前記の光学的に伝送される1〜2,000MB/sのデータを光学的に受信するための、少なくとも1つのトラッカー、
    を備える、
    システム。
  2. 請求項1のシステムであって、
    前記の少なくとも1つの追跡アレイは、少なくとも1つの光学センサーおよび少なくとも1つの内部処理装置をさらに備える、
    システム。
  3. 請求項1のシステムであって、
    前記処理装置は、FFT/IFFTを、コードする、変調する、多重化する、インターリーブする、エラー訂正コードまたはそれらの組み合わせを提供する、
    システム。
  4. 請求項2のシステムであって、
    前記処理装置は、前記の少なくとも1つの光学センサーを作動させる、
    システム。
  5. 請求項2から4のいずれかのシステムであって、
    前記処理装置は、時間/周波数領域の変調を用いてデータを伝送する、
    システム。
  6. 請求項2から4のいずれかのシステムであって、
    前記の少なくとも1つの光学センサーは、複数の光学センサーである、
    システム。
  7. 請求項2から4のいずれかのシステムであって、
    前記の少なくとも1つの光学センサーは、LEDである、
    システム。
  8. 請求項2から4のいずれかのシステムであって、
    高速データ伝送のための少なくとも1つのLED、および、光学シグナル、例えば、可視光、高周波、赤外線、または音を放射または反射するための、少なくとも2つのマーカーを、さらに備える、
    システム。
  9. 請求項1のシステムであって、
    前記の少なくとも1つの追跡アレイは、少なくとも1つのフォトセンサーを備える、
    システム。
  10. 請求項9のシステムであって、
    前記のフォトセンサーは、フォトダイオード、CCD、CMOSカメラ、またはそれらの組み合わせである、
    システム。
  11. 請求項10のシステムであって、
    前記の少なくとも1つの追跡アレイは、光学的に伝送されるデータを解読、移動および追跡するための機械可読な命令を有するコンピューターおよびトラッカー処理装置をさらに備える、
    システム。
  12. 請求項2から4のいずれかのシステムであって、
    前記の少なくとも1つの追跡アレイは、高速データ伝送のための少なくとも1つのLEDを備える、
    システム。
  13. 請求項1から4のいずれかのシステムであって、
    前記の少なくとも1つのトラッカーは、複数のトラッカーである、
    システム。
  14. 請求項1から4のいずれかのシステムであって、
    前記追跡アレイは、少なくとも1つのトラッカーからデータを受信するためのフォトセンサーをさらに備える、
    システム。
JP2017516677A 2014-11-21 2015-11-23 視覚的追跡システムと追跡マーカーとの間でデータを伝送するための、可視光通信システム Active JP6712994B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462083052P 2014-11-21 2014-11-21
US62/083,052 2014-11-21
PCT/US2015/062107 WO2016081931A1 (en) 2014-11-21 2015-11-23 Visible light communication system for transmitting data between visual tracking systems and tracking markers

Publications (2)

Publication Number Publication Date
JP2017536144A true JP2017536144A (ja) 2017-12-07
JP6712994B2 JP6712994B2 (ja) 2020-06-24

Family

ID=56014628

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017516677A Active JP6712994B2 (ja) 2014-11-21 2015-11-23 視覚的追跡システムと追跡マーカーとの間でデータを伝送するための、可視光通信システム

Country Status (7)

Country Link
US (3) US10507063B2 (ja)
EP (1) EP3185811A4 (ja)
JP (1) JP6712994B2 (ja)
KR (2) KR20220166880A (ja)
CN (1) CN107072740B (ja)
AU (1) AU2015349700B2 (ja)
WO (1) WO2016081931A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020065240A (ja) * 2018-05-31 2020-04-23 株式会社クオンタムドライブ 光無線メッシュネットワーク通信システム

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9993273B2 (en) 2013-01-16 2018-06-12 Mako Surgical Corp. Bone plate and tracking device using a bone plate for attaching to a patient's anatomy
EP4309613A3 (en) 2013-01-16 2024-03-06 Stryker Corporation Navigation systems for indicating line-of-sight errors
EP3261571B1 (en) 2015-02-25 2023-03-08 Mako Surgical Corporation Navigation systems and methods for reducing tracking interruptions during a surgical procedure
CN108348294A (zh) 2015-11-24 2018-07-31 思想外科有限公司 用于全膝关节置换术中的主动式机器人钉配置
US10537395B2 (en) 2016-05-26 2020-01-21 MAKO Surgical Group Navigation tracker with kinematic connector assembly
US20190175283A1 (en) * 2016-08-10 2019-06-13 Think Surgical, Inc. Pinless femoral tracking
US10993771B2 (en) * 2016-09-12 2021-05-04 Synaptive Medical Inc. Trackable apparatuses and methods
FR3057757B1 (fr) 2016-10-21 2021-04-16 Medtech Dispositif et procede de recalage automatique pour des images intra operatoires 3d
US11622814B2 (en) * 2017-08-31 2023-04-11 Smith & Nephew, Inc. Intraoperative implant augmentation
US10555781B2 (en) * 2017-11-15 2020-02-11 Stryker Corporation High bandwidth and low latency hybrid communication techniques for a navigation system
KR102089747B1 (ko) * 2017-12-22 2020-03-16 계명대학교 산학협력단 사용자로부터의 입력신호에 따라 자동으로 제어되는 수술등 시스템 및 그 제어방법
US11154369B2 (en) 2018-01-24 2021-10-26 Think Surgical, Inc. Environmental mapping for robotic assisted surgery
CN108186048B (zh) * 2018-02-02 2021-01-29 深圳市圣祥高科技有限公司 一种无线超声探头管理系统及其方法
WO2019200154A1 (en) * 2018-04-13 2019-10-17 Think Surgical, Inc. A rollable digitizer for computer-assisted surgery
US10955236B2 (en) * 2019-04-05 2021-03-23 Faro Technologies, Inc. Three-dimensional measuring system
US11439411B2 (en) 2019-05-24 2022-09-13 Think Surgical, Inc. System and method to improve surgical cutting in the presence of surgical debris
US20220338886A1 (en) 2019-06-19 2022-10-27 Think Surgical, Inc. System and method to position a tracking system field-of-view
US11832892B2 (en) * 2019-07-10 2023-12-05 Mako Surgical Corp. Navigation systems for communicating tracker status conditions
CA3210881A1 (en) 2019-09-26 2021-03-26 Ascension Technology Corporation Reconfigurable transmitter array for electromagnetic tracking systems
USD939364S1 (en) * 2019-10-01 2021-12-28 Think Surgical, Inc. Tracker
EP3815643A1 (en) 2019-10-29 2021-05-05 Think Surgical, Inc. Two degree of freedom system
CN114469343B (zh) * 2019-10-31 2023-06-23 武汉联影智融医疗科技有限公司 标定件、手术导航坐标系配准系统、方法、设备和介质
US11931578B2 (en) * 2020-04-10 2024-03-19 The Alfred E. Mann Foundation For Scientific Research Acoustic sensing for respiration detection
CA3121670A1 (en) * 2020-06-12 2021-12-12 Ascension Technology Corporation Distortion correction for electromagnetic fields using inside-out tracking
WO2021258113A1 (en) * 2020-06-19 2021-12-23 Remedy Robotics, Inc. Systems and methods for guidance of intraluminal devices within the vasculature
US11844697B2 (en) 2020-09-03 2023-12-19 Globus Medical, Inc. Systems and methods for knee arthroplasty
US11707332B2 (en) 2021-07-01 2023-07-25 Remedy Robotics, Inc. Image space control for endovascular tools
CA3222522A1 (en) 2021-07-01 2023-01-05 David James Bell Vision-based position and orientation determination for endovascular tools

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002510803A (ja) * 1998-04-03 2002-04-09 イメージ・ガイディッド・テクノロジーズ・インコーポレイテッド 位置測定のためのワイヤレス光学機器
US20090183740A1 (en) * 2008-01-21 2009-07-23 Garrett Sheffer Patella tracking method and apparatus for use in surgical navigation
WO2011113482A1 (en) * 2010-03-17 2011-09-22 Brainlab Ag Marker for a medical navigation system with a laser tracker
US20140039520A1 (en) * 2006-06-16 2014-02-06 Hani Haider Method and apparatus for computer aided surgery

Family Cites Families (97)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4396945A (en) * 1981-08-19 1983-08-02 Solid Photography Inc. Method of sensing the position and orientation of elements in space
CA1297952C (en) * 1987-10-05 1992-03-24 Diagnospine Research Inc. Method and equipment for evaluating the flexibility of a human spine
US5198877A (en) * 1990-10-15 1993-03-30 Pixsys, Inc. Method and apparatus for three-dimensional non-contact shape sensing
US6405072B1 (en) * 1991-01-28 2002-06-11 Sherwood Services Ag Apparatus and method for determining a location of an anatomical target with reference to a medical apparatus
US6675040B1 (en) * 1991-01-28 2004-01-06 Sherwood Services Ag Optical object tracking system
US5662111A (en) * 1991-01-28 1997-09-02 Cosman; Eric R. Process of stereotactic optical navigation
AU6666894A (en) * 1993-04-22 1994-11-08 Pixsys, Inc. System for locating relative positions of objects
US5961456A (en) * 1993-05-12 1999-10-05 Gildenberg; Philip L. System and method for displaying concurrent video and reconstructed surgical views
US5617857A (en) * 1995-06-06 1997-04-08 Image Guided Technologies, Inc. Imaging system having interactive medical instruments and methods
SE510810C2 (sv) 1997-01-13 1999-06-28 Qualisys Ab Rörelseanalyssystem
US5921992A (en) * 1997-04-11 1999-07-13 Radionics, Inc. Method and system for frameless tool calibration
US5907395A (en) * 1997-06-06 1999-05-25 Image Guided Technologies, Inc. Optical fiber probe for position measurement
US6548967B1 (en) 1997-08-26 2003-04-15 Color Kinetics, Inc. Universal lighting network methods and systems
US6324296B1 (en) * 1997-12-04 2001-11-27 Phasespace, Inc. Distributed-processing motion tracking system for tracking individually modulated light points
US6061644A (en) 1997-12-05 2000-05-09 Northern Digital Incorporated System for determining the spatial position and orientation of a body
EP1051123A1 (en) 1998-01-28 2000-11-15 Eric Richard Cosman Optical object tracking system
US6273896B1 (en) * 1998-04-21 2001-08-14 Neutar, Llc Removable frames for stereotactic localization
US6801637B2 (en) 1999-08-10 2004-10-05 Cybernet Systems Corporation Optical body tracker
US6630915B1 (en) * 1999-01-26 2003-10-07 Lsa. Inc. Wireless transmission system for transmitting data to a simulation system user
CA2377190A1 (en) * 1999-07-23 2001-02-01 University Of Florida Ultrasonic guidance of target structures for medical procedures
WO2001035842A1 (en) * 1999-11-15 2001-05-25 Synthes Ag Chur Method and device for the determination of reduction parameters for the subsequent reduction of a fractured bone
US20010034530A1 (en) 2000-01-27 2001-10-25 Malackowski Donald W. Surgery system
US20010025183A1 (en) * 2000-02-25 2001-09-27 Ramin Shahidi Methods and apparatuses for maintaining a trajectory in sterotaxi for tracking a target inside a body
US6725080B2 (en) * 2000-03-01 2004-04-20 Surgical Navigation Technologies, Inc. Multiple cannula image guided tool for image guided procedures
US8188878B2 (en) 2000-11-15 2012-05-29 Federal Law Enforcement Development Services, Inc. LED light communication system
EP1216651A1 (de) * 2000-12-21 2002-06-26 BrainLAB AG Kabelloses medizinisches Erfassungs- und Behandlungssystem
US20020131121A1 (en) * 2001-03-13 2002-09-19 Muthu Jeganathan Transceiver, system, and method for free-space optical communication and tracking
US20030043435A1 (en) * 2001-08-27 2003-03-06 Oettinger Eric Gregory Method and apparatus for re-acquisition after link disruption in an optical wireless link
JP3918813B2 (ja) * 2001-10-23 2007-05-23 ソニー株式会社 データ通信システム、データ送信装置、並びにデータ受信装置
US7634306B2 (en) * 2002-02-13 2009-12-15 Kinamed, Inc. Non-image, computer assisted navigation system for joint replacement surgery with modular implant system
US8010180B2 (en) * 2002-03-06 2011-08-30 Mako Surgical Corp. Haptic guidance system and method
GB2390792B (en) * 2002-07-08 2005-08-31 Vision Rt Ltd Image processing system for use with a patient positioning device
US6892090B2 (en) * 2002-08-19 2005-05-10 Surgical Navigation Technologies, Inc. Method and apparatus for virtual endoscopy
US7166114B2 (en) * 2002-09-18 2007-01-23 Stryker Leibinger Gmbh & Co Kg Method and system for calibrating a surgical tool and adapter thereof
EP1858179A1 (en) * 2002-10-24 2007-11-21 Nakagawa Laboratories, Inc. Illumination light communication device
US7869861B2 (en) * 2002-10-25 2011-01-11 Howmedica Leibinger Inc. Flexible tracking article and method of using the same
US20110015521A1 (en) * 2003-03-27 2011-01-20 Boulder Innovation Group, Inc. Means of Tracking Movement of Bodies During Medical Treatment
US20040243148A1 (en) * 2003-04-08 2004-12-02 Wasielewski Ray C. Use of micro- and miniature position sensing devices for use in TKA and THA
JP4460857B2 (ja) * 2003-06-23 2010-05-12 オリンパス株式会社 外科手術用システム
US20050041980A1 (en) * 2003-08-18 2005-02-24 Fuji Xerox Co., Ltd. Wireless optical system
US20050116821A1 (en) 2003-12-01 2005-06-02 Clifton Labs, Inc. Optical asset tracking system
US7771436B2 (en) 2003-12-10 2010-08-10 Stryker Leibinger Gmbh & Co. Kg. Surgical navigation tracker, system and method
US20060067707A1 (en) * 2004-09-30 2006-03-30 Selvan Maniam System and method for increasing data communication bandwidth in a light communication system
US9526587B2 (en) * 2008-12-31 2016-12-27 Intuitive Surgical Operations, Inc. Fiducial marker design and detection for locating surgical instrument in images
EP1946243A2 (en) 2005-10-04 2008-07-23 Intersense, Inc. Tracking objects with markers
JP4604971B2 (ja) 2005-11-11 2011-01-05 トヨタ自動車株式会社 車両用通信装置
US8672922B2 (en) * 2005-12-20 2014-03-18 Intuitive Surgical Operations, Inc. Wireless communication in a robotic surgical system
US20070239153A1 (en) * 2006-02-22 2007-10-11 Hodorek Robert A Computer assisted surgery system using alternative energy technology
US8009192B2 (en) 2006-05-17 2011-08-30 Mitsubishi Electric Research Laboratories, Inc. System and method for sensing geometric and photometric attributes of a scene with multiplexed illumination and solid states optical devices
CA2654261C (en) * 2006-05-19 2017-05-16 Mako Surgical Corp. Method and apparatus for controlling a haptic device
CN101495023A (zh) * 2006-07-26 2009-07-29 航生医疗公司 用于进行微创外科手术的系统
US7594933B2 (en) * 2006-08-08 2009-09-29 Aesculap Ag Method and apparatus for positioning a bone prosthesis using a localization system
US8565853B2 (en) * 2006-08-11 2013-10-22 DePuy Synthes Products, LLC Simulated bone or tissue manipulation
DE602007012450D1 (de) * 2006-10-02 2011-03-24 Hansen Medical Inc System für dreidimensionale ultraschall-abbildung
US7256899B1 (en) * 2006-10-04 2007-08-14 Ivan Faul Wireless methods and systems for three-dimensional non-contact shape sensing
DE502006007337D1 (de) * 2006-12-11 2010-08-12 Brainlab Ag Mehrbandtracking- und Kalibrier-System
WO2008097540A2 (en) * 2007-02-02 2008-08-14 Hansen Medical, Inc. Robotic surgical instrument and methods using bragg fiber sensors
US9179984B2 (en) 2007-02-19 2015-11-10 Medtronic Navigation, Inc. Multi-configuration tracking array and related method
US8082064B2 (en) * 2007-08-24 2011-12-20 Elite Engineering Corporation Robotic arm and control system
JP5161176B2 (ja) * 2008-09-26 2013-03-13 太陽誘電株式会社 可視光通信用送信機及び可視光通信システム
DE102009002677A1 (de) 2009-04-27 2010-10-28 Ergoneers Gmbh Blickfelderfassungseinheit sowie Verfahren zur automatisierten Blickdatenauswertung
EP2578178A3 (de) * 2009-04-28 2014-12-31 Brainlab AG Verfahren zur Ansteuerung einer behandlungsunterstützenden Software
WO2011128766A2 (en) * 2010-04-13 2011-10-20 Picard Frederic Methods and systems for object tracking
CA2797302C (en) * 2010-04-28 2019-01-15 Ryerson University System and methods for intraoperative guidance feedback
WO2011154949A2 (en) 2010-06-10 2011-12-15 Audhumbla Ltd. Optical tracking system and method for herd management therewith
US8702592B2 (en) * 2010-09-30 2014-04-22 David Allan Langlois System and method for inhibiting injury to a patient during laparoscopic surgery
GB2484979A (en) 2010-10-29 2012-05-02 Cassim Ladha Tracking and identifying physical objects in an interactive surface or vision system
US9112606B2 (en) * 2010-12-15 2015-08-18 Electronics And Telecommunications Research Institute Method and apparatus for transmitting and receiving data using visible light communication
US20120308239A1 (en) * 2011-06-03 2012-12-06 Sheth Samir S Active Tracking for Free-Space Optical Communication Systems
US8248467B1 (en) 2011-07-26 2012-08-21 ByteLight, Inc. Light positioning system using digital pulse recognition
US20130033700A1 (en) * 2011-08-05 2013-02-07 Abdelbasset Hallil Radiation dosimeter with localization means and methods
US10299773B2 (en) * 2011-08-21 2019-05-28 Transenterix Europe S.A.R.L. Device and method for assisting laparoscopic surgery—rule based approach
US9936896B2 (en) * 2012-01-12 2018-04-10 Siemens Medical Solutions Usa, Inc. Active system and method for imaging with an intra-patient probe
TWI467935B (zh) * 2012-03-06 2015-01-01 Ind Tech Res Inst 可見光通訊收發器與系統
US9450671B2 (en) * 2012-03-20 2016-09-20 Industrial Technology Research Institute Transmitting and receiving apparatus and method for light communication, and the light communication system thereof
KR20130116483A (ko) * 2012-04-05 2013-10-24 한국전자통신연구원 가시광 무선 통신 송수신 장치 및 방법
CA2879414A1 (en) * 2012-08-03 2014-02-06 Stryker Corporation Systems and methods for robotic surgery
US8918202B2 (en) 2012-08-21 2014-12-23 Amazon Technologies, Inc. Controlling mobile drive units with active markers
US9008757B2 (en) * 2012-09-26 2015-04-14 Stryker Corporation Navigation system including optical and non-optical sensors
US20140161466A1 (en) * 2012-11-30 2014-06-12 Nabeel Agha Riza Multiple mode wireless data link design for robust energy efficient operation
US9203524B2 (en) * 2012-12-18 2015-12-01 North Carolina State University Methods, systems, and computer readable media for providing smart underwater free space optical communications
US8942571B2 (en) * 2012-12-24 2015-01-27 Industrial Technology Research Institute Apparatus and method for data embedding in light communication and the light communication system and method thereof
CN203167127U (zh) 2012-12-27 2013-08-28 天津森宇科技发展有限公司 一种led灯光控制及远程图像监控装置
CN103117802B (zh) 2013-02-05 2016-04-20 西安电子科技大学 可见光通信系统中基于自适应速率适配的通信方法
EP2767232A1 (en) * 2013-02-15 2014-08-20 Koninklijke Philips N.V. System and method for determining a vital sign of a subject
WO2014136110A1 (en) * 2013-03-05 2014-09-12 Shilat Optical Systems Ltd Free space optical communication system
US10390737B2 (en) * 2013-09-30 2019-08-27 Stryker Corporation System and method of controlling a robotic system for manipulating anatomy of a patient during a surgical procedure
US10510267B2 (en) * 2013-12-20 2019-12-17 Intuitive Surgical Operations, Inc. Simulator system for medical procedure training
EP3100378B1 (en) * 2014-01-28 2019-09-04 Sa Photonics, Inc. Free space optical communication tracking with electronic boresight compensation and co-boresighted transmit and receive optics
EP2901957A1 (en) * 2014-01-31 2015-08-05 Universität Basel Controlling a surgical intervention to a bone
WO2015121154A1 (en) * 2014-02-14 2015-08-20 Koninklijke Philips N.V. Coded light
WO2015148562A1 (en) * 2014-03-25 2015-10-01 Osram Sylvania Inc. Commissioning a luminaire with location information
WO2016042152A1 (en) * 2014-09-18 2016-03-24 KB Medical SA Robot-mounted user interface for interacting with operation room equipment
KR102511541B1 (ko) 2014-09-23 2023-03-16 씽크 써지컬, 인크. 다평면의 가변형상 지그재그 절단 접이식 드릴 시스템
US10441366B2 (en) * 2014-10-22 2019-10-15 Think Surgical, Inc. Actively controlled optical tracker with a robot
US9455787B2 (en) * 2014-10-28 2016-09-27 Cisco Technology, Inc. Light emitting diode (LED)-based multi-bitrate data links
US10130430B2 (en) * 2016-11-14 2018-11-20 Intai Technology Corp. No-touch surgical navigation method and system thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002510803A (ja) * 1998-04-03 2002-04-09 イメージ・ガイディッド・テクノロジーズ・インコーポレイテッド 位置測定のためのワイヤレス光学機器
US20140039520A1 (en) * 2006-06-16 2014-02-06 Hani Haider Method and apparatus for computer aided surgery
US20090183740A1 (en) * 2008-01-21 2009-07-23 Garrett Sheffer Patella tracking method and apparatus for use in surgical navigation
WO2011113482A1 (en) * 2010-03-17 2011-09-22 Brainlab Ag Marker for a medical navigation system with a laser tracker

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020065240A (ja) * 2018-05-31 2020-04-23 株式会社クオンタムドライブ 光無線メッシュネットワーク通信システム
US11115122B2 (en) 2018-05-31 2021-09-07 Quantum Drive Co., Ltd. Optical wireless mesh network communication system

Also Published As

Publication number Publication date
KR102477470B1 (ko) 2022-12-13
AU2015349700A1 (en) 2017-03-16
KR20170087878A (ko) 2017-07-31
AU2015349700B2 (en) 2019-11-07
CN107072740B (zh) 2020-05-22
US11229487B2 (en) 2022-01-25
EP3185811A4 (en) 2018-05-23
US20200100848A1 (en) 2020-04-02
CN107072740A (zh) 2017-08-18
US10507063B2 (en) 2019-12-17
WO2016081931A1 (en) 2016-05-26
EP3185811A1 (en) 2017-07-05
US20170245945A1 (en) 2017-08-31
KR20220166880A (ko) 2022-12-19
JP6712994B2 (ja) 2020-06-24
US20220142717A1 (en) 2022-05-12

Similar Documents

Publication Publication Date Title
US11229487B2 (en) Optical communication system
US11786206B2 (en) Augmented reality guidance for imaging systems
US11071596B2 (en) Systems and methods for sensory augmentation in medical procedures
US10398514B2 (en) Systems and methods for sensory augmentation in medical procedures
WO2019141704A1 (en) An augmented reality surgical guidance system
JP6944939B2 (ja) 仮想オブジェクトにより規定される患者の標的部位に対して外科手術を行うシステムおよび方法
JP2022116157A (ja) 医療処置における感覚増強のためのシステム
KR102274277B1 (ko) 수술 절차들을 위한 준비시 수술실에 대상들을 배치하는 시스템
US11589926B2 (en) Mobile surgical tracking system with an integrated fiducial marker for image guided interventions
CA3007720A1 (en) Hologram lens for positioning an orthopedic implant
AU2017201866A1 (en) On-board tool tracking system and methods of computer assisted surgery
US10555781B2 (en) High bandwidth and low latency hybrid communication techniques for a navigation system
WO2018032084A1 (en) Wireless active tracking fiducials
US11701180B2 (en) Surgical instrument system
CA3007774A1 (en) Positioning tool for an orthopedic implant
US11510738B2 (en) Surgical instrument system
US20240138926A1 (en) Systems and methods for enhanced registration using radar-based tracking probe
CN117460464A (zh) 用于成像系统和机器人手术的增强现实引导
Sarvestani Basic principles of fluoro-navigation

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181102

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190828

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190902

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191216

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200313

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200511

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200602

R150 Certificate of patent or registration of utility model

Ref document number: 6712994

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250