JP6240234B2 - 4つのledのパターンによるポーズの決定 - Google Patents
4つのledのパターンによるポーズの決定 Download PDFInfo
- Publication number
- JP6240234B2 JP6240234B2 JP2016026243A JP2016026243A JP6240234B2 JP 6240234 B2 JP6240234 B2 JP 6240234B2 JP 2016026243 A JP2016026243 A JP 2016026243A JP 2016026243 A JP2016026243 A JP 2016026243A JP 6240234 B2 JP6240234 B2 JP 6240234B2
- Authority
- JP
- Japan
- Prior art keywords
- led
- pose
- leds
- group
- uncovered
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
Description
2005年のBoschetti他は、自由な外科的遠隔操作の任務の5レベルの実行中に、オペレータを導く問題に取り組んでいる。この研究は、触覚マスタ、スレーブロボット、光学追跡装置、及び主制御装置で構成される脊椎手術遠隔ロボットシステムの実現可能性に重点を置いている。このシステムを使用して、外科医は、遠隔ロボット装置を使用して、触覚フィードバックにより導かれながら、穴を開ける作業を実行する。脊椎骨が動くとすぐに、追跡装置は脊椎骨のポーズを測定する。適当な力がオペレータの手に与えられて、手術道具の位置と方向をオペレータに調整させる。さらに、触覚マスタは、遠隔操作に関連した力のフィードバックを生成する。この文書は、この触覚システムの設計と実施、特に制御システム構造に関し、重点を置いている。
2000年のDario他は、従来の関節鏡検査のための高性能の道具と、コンピュータを使用した関節鏡検査のためのシステムの主要構成要素の両方である、関節鏡検査のためのメカトロニクスの道具を記載している。メカトロニクスの関節鏡は、ケーブルで作動され、サーボモータで駆動される、多関節の機械的構造を持ち、先端の方向を測定するための位置センサと、膝の繊細な組織との可能性のある接触を検出するための力センサとを備えていて、センサの信号の処理と、モータの駆動と、外科医とインターフェースをとるための埋め込み式のマイクロコントローラ、及び/又はシステム制御部を組み込んでいる。コンピュータを使用した関節鏡検査システムは、術前のCT又はMR画像の分割と3Dの復元のための画像処理モジュールと、膝関節の位置を測定して、操作している道具の軌道を追跡し、術前と術中の画像をマッチングするための登録モジュールと、拡張現実のシナリオと、メカトロニクスの関節鏡からのデータを友好的及び直感的な方法で表示するヒューマン・マシン・インターフェースと、を含む。術前と術中の画像と、メカトロニクス関節鏡により提供される情報とを統合することにより、システムは、計画段階での膝関節の仮想ナビゲーションと、介入中の拡張現実によるコンピュータガイダンスとを可能にする。この文書は、メカトロニクス関節鏡の特性と、コンピュータを使用した関節鏡検査のためのシステムの特性とを詳細に記載していて、道具とシステムの暫定版を使用して得られた実験結果を論じている。
2000年のHoff/Vincentは、ヘッドマウントディスプレイを備えた拡張現実システムにおいて、オブジェクトに対する頭の相対的な位置と方向(ポーズ)の精度を分析するための方法が開発されたことを開示している。光学追跡センサのエラーの確率的推定から、共分散行列の形式で、オブジェクトに対する頭のポーズの不確実性が計算されうる。位置の不確実性は、3D楕円体として可視化されうる。不確実性の明確な表現を持つ一つの有用な利点は、全体的な登録の制度を改善するために、固定のセンサとヘッドマウントセンサの組み合わせにより、センサデータを結合できることである。方法は、光学透過ヘッドマウントディスプレイと、ヘッドマウントCCDカメラと、固定の光学追跡センサとを組み込む実験的な拡張現実システムの分析に適用された。ヘッドマウントディスプレイに対して移動可能なオブジェクトのポーズの不確実性が分析された。
提案した方法を使用して、ポーズを決定するために使用されるLEDの全てを識別することができる。また、提案した方法は、LEDの3Dの位置とそれらのそれぞれの2Dの投影との対応問題を解決するために使用されるLED群の選択の仕方に関する一連のステップを含む。
現在のLED群を点灯するステップ(101)と、
現在のLED群のうちの4つのLEDの全てがカメラで見えるかどうかを判断するステップ(102)と、
現在のLED群のうちの全てのLEDが見える場合、中央LEDを識別するステップ(103)と、
中央LEDが不明瞭かどうかを判断するステップ(104)と、
中央LEDが不明瞭でない場合、側部LEDを識別するステップ(105)と、
上部LEDと下部LEDを識別するステップ(106)と、
計算された対応を使用して、追跡されるオブジェクトのポーズを計算するステップ(107)と、
計算されたポーズが不明瞭かどうかを判断するステップ(108)と、
現在のLED群のうちの全てのLEDが見えない、又は中央LEDが不明瞭である、又は計算されたポーズが不明瞭である場合、新しいLED群に切り替えるステップ(109)と、
を含む。
アクティブなマーカーの位置を表すメッシュデータと、動いている状況下で追跡されるオブジェクトの可能性のあるポーズを表すポーズデータと、1つのカメラの位置及び方向とを取得するステップ(201)と、
カバーされていないポーズセットを取得したポーズデータに初期化するステップ(202)と、
「T」形のパターンの4つのLED群の全てを列挙し(生成し)、非選択のLED群のセットに追加するステップ(203)と、
現在のカバーされていないポーズセットのポーズ毎に、カメラ配置データを使用して、非選択のLED群を2D空間に投影するステップ(204)と、
(非選択のLED群、現在のカバーされていないポーズセットのポーズの)各ペアについて、4つ全てのLEDが見える場合、非選択のLED群にポーズを登録するステップと(205)、
非選択のLED群の中から、最も多くのカバーされていないポーズをカバーするLED群を識別して、選択されたLED群に加えるステップ(206)と、
カバーされていないポーズセットからカバーされたポーズを除去し、且つ非選択のLED群のセットから選択されたLED群を除去するステップ(207)と、
終了条件が満たされたかどうかを判断し、そうであれば終了するステップ(208)と、
を含む。
200 対応問題を解決するために使用されるLED群を選択する方法
C カメラ
O0 オブジェクトの仰角(0)
O1 オブジェクトの仰角(−45)
O2 オブジェクトの仰角(45)
B0 オブジェクトの仰角0度での下部LEDの投影
B1 オブジェクトの仰角−45度での下部LEDの投影
B2 オブジェクトの仰角45度での下部LEDの投影
T0 オブジェクトの仰角0度での上部LEDの投影
T1 オブジェクトの仰角−45度での上部LEDの投影
T2 オブジェクトの仰角45度での上部LEDの投影
C0 オブジェクトの仰角0度での中央LEDの投影
C1 オブジェクトの仰角−45度での中央LEDの投影
C2 オブジェクトの仰角45度での中央LEDの投影
F0 オブジェクトの仰角0度での側部LEDの投影
F1 オブジェクトの仰角−45度での側部LEDの投影
F2 オブジェクトの仰角45度での側部LEDの投影
Claims (5)
- 対応問題を解決する(100)ために使用されるLED群を選択する方法(200)であって、
アクティブなマーカーの位置を表すメッシュデータと、動いている状況下で追跡されるオブジェクトの可能性のあるポーズを表すポーズデータと、1つのカメラの位置及び方向とを取得するステップ(201)を含み、
カバーされていないポーズセットを取得したポーズデータに初期化するステップ(202)と、
可能性のあるLED位置のメッシュから、「T」形のパターンの4つのLED群の全てを取得し、非選択のLED群のセットに追加するステップ(203)と、
現在のカバーされていないポーズセットのポーズ毎に、カメラの位置及び方向を使用して、非選択のLED群を2D空間に投影するステップ(204)と、
各ペアについて、オブジェクトの座標系に対するLEDの法線と、LED照明の円錐角と、オブジェクトの既知のポーズとに基づく可視性の計算によって4つ全てのLEDが見える場合、非選択のLED群にポーズを登録するステップ(205)と、
非選択のLED群の中から、最も多くのカバーされていないポーズをカバーするLED群を識別して、選択されたLED群に加えるステップ(206)と、
カバーされていないポーズセットからカバーされたポーズを除去し、且つ非選択のLED群のセットから選択されたLED群を除去するステップ(207)と、
終了条件が満たされたかどうかを判断し、そうであれば終了するステップ(208)と、
を含むことを特徴とする、LED群を選択する方法(200)。 - カバーされていないポーズセットは、選択されたLED群によってカバーされていないポーズの集まりであり、実行の開始時に、動いている状況下で追跡されるオブジェクトの可能性のあるポーズを表すポーズデータに初期化される、請求項1に記載のLED群を選択する方法(200)。
- 4つからなる「T」形のLED群の全てが、候補LED群として列挙される、請求項1又は請求項2に記載のLED群を選択する方法(200)。
- 現在の残りのカバーされていないポーズセットのポーズ毎に、カメラの位置及び方向を使用して、非選択LED群が投影される、請求項1又は請求項2に記載のLED群を選択する方法(200)。
- カバーされていないポーズセットが空になるか、所定数のLED群が選択されるか、又はいずれのLED群も少なくとも1つのカバーされていないポーズをカバーすることができないときに、方法の終了が発生する、請求項1から請求項4のいずれかに記載のLED群を選択する方法(200)。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016026243A JP6240234B2 (ja) | 2016-02-15 | 2016-02-15 | 4つのledのパターンによるポーズの決定 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016026243A JP6240234B2 (ja) | 2016-02-15 | 2016-02-15 | 4つのledのパターンによるポーズの決定 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016518590A Division JP6240320B2 (ja) | 2013-06-11 | 2013-06-11 | 4つのledのパターンによるポーズの決定 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016176927A JP2016176927A (ja) | 2016-10-06 |
JP6240234B2 true JP6240234B2 (ja) | 2017-11-29 |
Family
ID=57069666
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016026243A Active JP6240234B2 (ja) | 2016-02-15 | 2016-02-15 | 4つのledのパターンによるポーズの決定 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6240234B2 (ja) |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5828770A (en) * | 1996-02-20 | 1998-10-27 | Northern Digital Inc. | System for determining the spatial position and angular orientation of an object |
JP3470119B2 (ja) * | 2002-02-14 | 2003-11-25 | コナミ株式会社 | コントローラ、コントローラの姿勢遠隔測定装置及びビデオゲーム装置 |
-
2016
- 2016-02-15 JP JP2016026243A patent/JP6240234B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016176927A (ja) | 2016-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6240320B2 (ja) | 4つのledのパターンによるポーズの決定 | |
Lin et al. | Video‐based 3D reconstruction, laparoscope localization and deformation recovery for abdominal minimally invasive surgery: a survey | |
US7561733B2 (en) | Patient registration with video image assistance | |
CN112652016B (zh) | 点云预测模型的生成方法、位姿估计方法及其装置 | |
KR101650161B1 (ko) | 이미지 내에서 수술기기를 찾기 위한 기준 마커 디자인 및 탐지 | |
JP5803367B2 (ja) | 自己位置推定装置、自己位置推定方法およびプログラム | |
US20130106833A1 (en) | Method and apparatus for optical tracking of 3d pose using complex markers | |
Labbé et al. | Single-view robot pose and joint angle estimation via render & compare | |
JP2012526334A (ja) | 可変姿勢を含む画像シーケンスのリアルタイム利用可能なコンピュータ支援分析方法 | |
CN102341054A (zh) | 用于器械跟踪的构造标记设计和检测 | |
Gratal et al. | Visual servoing on unknown objects | |
US10902610B2 (en) | Moving object controller, landmark, and moving object control method | |
Fiala et al. | Robot navigation using panoramic tracking | |
JP2018195070A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US20220392084A1 (en) | Scene perception systems and methods | |
JP6240234B2 (ja) | 4つのledのパターンによるポーズの決定 | |
Watanabe et al. | A new 2D depth-depth matching algorithm whose translation and rotation freedoms are separated | |
WO2021202341A1 (en) | Systems and methods for facilitating automated operation of a device in a surgical space | |
US20240185432A1 (en) | System, method, and apparatus for tracking a tool via a digital surgical microscope | |
Roberti | Medical SLAM in an autonomous robotic system | |
US20230005174A1 (en) | Method and system for optically detecting the pose of at least one instrument in an operating theater | |
Tukra et al. | AI in Surgical Robotics | |
US20230334691A1 (en) | Employing patterned light to determine relative poses | |
CN117934593A (zh) | 一种目标物体位姿估计方法、系统及计算机可读存储介质 | |
WO2023163769A1 (en) | Image alignment using corner and line features |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170519 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171010 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171102 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6240234 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |