JP2011528252A5 - - Google Patents

Download PDF

Info

Publication number
JP2011528252A5
JP2011528252A5 JP2011518675A JP2011518675A JP2011528252A5 JP 2011528252 A5 JP2011528252 A5 JP 2011528252A5 JP 2011518675 A JP2011518675 A JP 2011518675A JP 2011518675 A JP2011518675 A JP 2011518675A JP 2011528252 A5 JP2011528252 A5 JP 2011528252A5
Authority
JP
Japan
Prior art keywords
image
images
camera chip
tool
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011518675A
Other languages
English (en)
Other versions
JP5525521B2 (ja
JP2011528252A (ja
Filing date
Publication date
Priority claimed from EP20080160646 external-priority patent/EP2145575A1/en
Application filed filed Critical
Publication of JP2011528252A publication Critical patent/JP2011528252A/ja
Publication of JP2011528252A5 publication Critical patent/JP2011528252A5/ja
Application granted granted Critical
Publication of JP5525521B2 publication Critical patent/JP5525521B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (26)

  1. ユーザによる3次元環境の検査のためのシステムであって、該システムは:
    −前記3次元環境の近傍に案内されるように構成されるツールであって、前記ツールは、前記3次元環境内に存在するオブジェクトの、それぞれの視点を有する複数のイメージを生成するように構成される少なくとも1つのカメラチップを含む、ツールと;
    −前記複数のイメージからの少なくとも1つのイメージを受信するように構成されるディスプレイユニットと;
    −前記ディスプレイ上にイメージを表示するべく前記少なくとも1つのカメラチップから前記イメージを選択または生成するために前記ユーザの観察位置を判定するように構成される運動追跡システムであって、前記イメージは前記観察位置に対応する視点を有する、運動追跡システムと、を含み、
    −それぞれの視点を有する前記複数のイメージを生成するために前記少なくとも1つのカメラチップが変位可能である、
    システム。
  2. 前記ツールに対する変位を可能とするために前記少なくとも1つのカメラチップにモータが取り付けられる、請求項1に記載のシステム。
  3. 前記少なくとも1つのカメラチップが、前記ツールに対して変位可能な支持体上に配置される、請求項1に記載のシステム。
  4. 前記視点を有する前記イメージを生成するために前記運動追跡システムが前記少なくとも1つのカメラチップの変位を制御するようにさらに構成される、請求項1、2または3に記載のシステム。
  5. 前記少なくとも1つのカメラチップがカメラチップのアレイまたはマトリクスを含む、上記の請求項のうちいずれか1項に記載のシステム。
  6. 個々のイメージをそれぞれ生成することができるサブ領域に分割される単独のカメラチップを含む、請求項5に記載のシステム。
  7. 前記サブ領域と協働するための複数レンズ構造をさらに含む、請求項5または6に記載のシステム。
  8. 前記カメラチップまたは前記サブ領域を光学的に隔てるための光バリアをさらに含む、請求項5または6に記載のシステム。
  9. カメラチップの前記アレイまたは前記マトリクスが同心状に配置される、上記の請求項5ないし8のうちいずれか1項に記載のシステム。
  10. カメラチップの前記アレイまたはマトリクスが同心状の線上または同心状の領域上に配置される、請求項9に記載のシステム。
  11. 前記ユーザの観察位置のために、前記観察位置に対応する、視差付き立体イメージを前記ディスプレイ上に表示するべく前記複数のイメージのうちの2つのイメージを選択するように構成された制御ユニットをさらに含む、上記の請求項のうちいずれか1項に記載のシステム。
  12. 前記ディスプレイが、3次元視像を可能とするように構成される、請求項11に記載のシステム。
  13. 前記複数のイメージの間を補間する中間イメージ群を再構築するための処理ユニットをさらに含む、上記の請求項のうちいずれか1項に記載のシステム。
  14. 前記ツールが内視鏡を含む、上記の請求項のうちいずれか1項に記載のシステム。
  15. 前記カメラチップが前記内視鏡の遠位端にまたは遠位端の近傍に配置される、請求項14に記載のシステム。
  16. ユーザによる3次元環境の検査を可能とする方法であって、該方法は:
    −複数の異なる視点から前記3次元環境の複数のイメージを生成することと;
    −前記複数のイメージからイメージを選択するために、またはイメージを生成するために、前記ユーザの観察位置の運動を追跡することであって、前記イメージは、前記観察位置に対応する視点を有する、追跡することと;
    −前記視点を有する前記イメージをディスプレイ上に表示することと;
    を含む方法。
  17. 前記複数の異なる視点が少なくとも1つのカメラチップによって可能とされる、請求項16に記載の方法。
  18. 前記少なくとも1つのカメラチップが変位可能であり、前記方法が、前記視点を有する前記イメージを少なくとも生成するために前記少なくとも1つのカメラチップを変位させるステップを含む、請求項16または17に記載の方法。
  19. 前記少なくとも1つのカメラチップを変位させるために前記運動追跡に関するデータを用いるステップをさらに含む、請求項18に記載の方法。
  20. 前記方法が:
    −前記複数のイメージからの前記イメージの間を補間することによって中間イメージ群を再構築するステップと;
    −前記中間イメージ群および前記複数のイメージを表示するステップと;
    をさらに含む、上記の請求項16ないし19のうちいずれか1項に記載の方法。
  21. 前記方法が:
    −前記複数のイメージから前記ユーザの位置に対応する2つのイメージを選択するステップと;
    −立体視を可能とするために前記2つのイメージを表示するステップと;
    をさらに含む、上記の請求項16ないし20のうちいずれか1項に記載の方法。
  22. ユーザによる3次元環境の検査を可能とするためのコンピュータプログラム製品であって、前記コンピュータプログラム製品は、上記の請求項16ないし21のうちいずれか1項に記載の方法のステップをプロセッサに実行させるための命令を含む、コンピュータプログラム製品。
  23. 上記の請求項1ないし15のうちいずれか1項に記載のシステムに用いるツール。
  24. 上記の請求項1ないし15のうちいずれか1項に記載のシステムに用いるディスプレイユニットであって、
    −ディスプレイと;
    −ユーザの少なくとも一部分の観察位置を判定する運動追跡システムと;
    −前記ユーザの前記観察位置に関する情報を受信し、イメージソースに前記観察位置に対応する視点を有するイメージを選択させるまたは生成させるトリガ信号を生成するように構成される制御システムと;
    を含むディスプレイユニット。
  25. 上記の請求項1ないし15のうちいずれか1項に記載のシステムにおいて異なる視点を有する複数のイメージを提供するための、ツールの遠位端にまたは遠位端の近傍に配置される少なくとも1つのカメラチップを含む前記ツールの利用。
  26. 前記ツールとして内視鏡が選択される、請求項25に記載の利用。
JP2011518675A 2008-07-17 2009-07-17 ユーザによる3次元環境の検査のための内視鏡システム Expired - Fee Related JP5525521B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP20080160646 EP2145575A1 (en) 2008-07-17 2008-07-17 A system, a method and a computer program for inspection of a three-dimensional environment by a user
EP08160646.9 2008-07-17
PCT/NL2009/050444 WO2010008292A1 (en) 2008-07-17 2009-07-17 A system, a method and a computer program for inspection of a three-dimensional environment by a user

Publications (3)

Publication Number Publication Date
JP2011528252A JP2011528252A (ja) 2011-11-17
JP2011528252A5 true JP2011528252A5 (ja) 2012-08-30
JP5525521B2 JP5525521B2 (ja) 2014-06-18

Family

ID=39877955

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011518675A Expired - Fee Related JP5525521B2 (ja) 2008-07-17 2009-07-17 ユーザによる3次元環境の検査のための内視鏡システム

Country Status (4)

Country Link
US (1) US9138135B2 (ja)
EP (2) EP2145575A1 (ja)
JP (1) JP5525521B2 (ja)
WO (1) WO2010008292A1 (ja)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9201185B2 (en) 2011-02-04 2015-12-01 Microsoft Technology Licensing, Llc Directional backlighting for display panels
DE102011005256A1 (de) * 2011-03-08 2012-09-13 Olympus Winter & Ibe Gmbh Verfahren und System zur Darstellung videoendoskopischer Bilddaten eines Videoendoskops mit diskreten Blickrichtungen
CA2859998A1 (en) * 2011-11-15 2013-05-23 Naoki Suzuki Photographic device and photographic system
US9354748B2 (en) 2012-02-13 2016-05-31 Microsoft Technology Licensing, Llc Optical stylus interaction
USRE48963E1 (en) 2012-03-02 2022-03-08 Microsoft Technology Licensing, Llc Connection device for computing devices
US9870066B2 (en) 2012-03-02 2018-01-16 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US8873227B2 (en) 2012-03-02 2014-10-28 Microsoft Corporation Flexible hinge support layer
US9064654B2 (en) 2012-03-02 2015-06-23 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9075566B2 (en) 2012-03-02 2015-07-07 Microsoft Technoogy Licensing, LLC Flexible hinge spine
US9298236B2 (en) 2012-03-02 2016-03-29 Microsoft Technology Licensing, Llc Multi-stage power adapter configured to provide a first power level upon initial connection of the power adapter to the host device and a second power level thereafter upon notification from the host device to the power adapter
US9134807B2 (en) 2012-03-02 2015-09-15 Microsoft Technology Licensing, Llc Pressure sensitive key normalization
US9360893B2 (en) 2012-03-02 2016-06-07 Microsoft Technology Licensing, Llc Input device writing surface
US9426905B2 (en) 2012-03-02 2016-08-23 Microsoft Technology Licensing, Llc Connection device for computing devices
US20130300590A1 (en) 2012-05-14 2013-11-14 Paul Henry Dietz Audio Feedback
US8947353B2 (en) 2012-06-12 2015-02-03 Microsoft Corporation Photosensor array gesture detection
US9459160B2 (en) 2012-06-13 2016-10-04 Microsoft Technology Licensing, Llc Input device sensor configuration
US9684382B2 (en) 2012-06-13 2017-06-20 Microsoft Technology Licensing, Llc Input device configuration having capacitive and pressure sensors
US9256089B2 (en) 2012-06-15 2016-02-09 Microsoft Technology Licensing, Llc Object-detecting backlight unit
US8964379B2 (en) 2012-08-20 2015-02-24 Microsoft Corporation Switchable magnetic lock
US8654030B1 (en) 2012-10-16 2014-02-18 Microsoft Corporation Antenna placement
CN104870123B (zh) 2012-10-17 2016-12-14 微软技术许可有限责任公司 金属合金注射成型突起
DE102013200898A1 (de) * 2013-01-21 2014-07-24 Siemens Aktiengesellschaft Endoskop, insbesondere für die minimal-invasive Chirurgie
US9497380B1 (en) 2013-02-15 2016-11-15 Red.Com, Inc. Dense field imaging
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
AU2014236718B2 (en) 2013-03-14 2018-07-05 Sri International Compact robotic wrist
EP2967521B1 (en) 2013-03-15 2019-12-25 SRI International Electromechanical surgical system
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
US9759854B2 (en) 2014-02-17 2017-09-12 Microsoft Technology Licensing, Llc Input device outer layer and backlighting
WO2015133608A1 (ja) * 2014-03-07 2015-09-11 国立大学法人京都大学 手術支援システムおよびこれに用いるカメラユニット
US10120420B2 (en) 2014-03-21 2018-11-06 Microsoft Technology Licensing, Llc Lockable display and techniques enabling use of lockable displays
EP3125806B1 (en) 2014-03-28 2023-06-14 Intuitive Surgical Operations, Inc. Quantitative three-dimensional imaging of surgical scenes
CN111184577A (zh) 2014-03-28 2020-05-22 直观外科手术操作公司 器械在视野中的定量三维可视化
EP3125809B1 (en) 2014-03-28 2020-09-09 Intuitive Surgical Operations, Inc. Surgical system with haptic feedback based upon quantitative three-dimensional imaging
KR102373714B1 (ko) 2014-03-28 2022-03-15 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 멀티포트 투시에 의한 수술 장면의 정량적 3차원 영상화
EP3122281B1 (en) * 2014-03-28 2022-07-20 Intuitive Surgical Operations, Inc. Quantitative three-dimensional imaging and 3d modeling of surgical implants
US10324733B2 (en) 2014-07-30 2019-06-18 Microsoft Technology Licensing, Llc Shutdown notifications
US9424048B2 (en) 2014-09-15 2016-08-23 Microsoft Technology Licensing, Llc Inductive peripheral retention device
JP6930062B2 (ja) 2015-05-12 2021-09-01 レビー、エイブラハム 動的視野内視鏡
US10416799B2 (en) 2015-06-03 2019-09-17 Microsoft Technology Licensing, Llc Force sensing and inadvertent input control of an input device
US10222889B2 (en) 2015-06-03 2019-03-05 Microsoft Technology Licensing, Llc Force inputs and cursor control
CN108025445A (zh) 2015-07-23 2018-05-11 斯里国际 机器人臂及机器人手术系统
US10061385B2 (en) 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
DE102019118508B3 (de) * 2019-07-09 2020-12-24 Carl Zeiss Meditec Ag Optische Abbildungsvorrichtung und Verfahren zur Verbesserung dargestellter Bilder
US20220400195A1 (en) * 2021-06-15 2022-12-15 RZP Holdings, Inc. Electronic visual food probe

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63274911A (ja) * 1987-05-07 1988-11-11 Toshiba Corp 電子内視鏡装置
JPH0255907A (ja) 1988-08-20 1990-02-26 Juki Corp 形状認識装置
JPH0642644Y2 (ja) * 1988-10-15 1994-11-09 オリンパス光学工業株式会社 内視鏡湾曲装置
JPH03179994A (ja) * 1989-12-08 1991-08-05 Nippon Hoso Kyokai <Nhk> 画像表示方法および装置
US5287437A (en) * 1992-06-02 1994-02-15 Sun Microsystems, Inc. Method and apparatus for head tracked display of precomputed stereo images
JP3257640B2 (ja) * 1992-06-09 2002-02-18 オリンパス光学工業株式会社 立体視内視鏡装置
US5381784A (en) * 1992-09-30 1995-01-17 Adair; Edwin L. Stereoscopic endoscope
JPH0735989A (ja) * 1993-07-26 1995-02-07 Olympus Optical Co Ltd 立体視内視鏡
JPH07296139A (ja) * 1994-04-25 1995-11-10 Canon Inc 画像処理方法及びその装置
JPH08237687A (ja) * 1995-02-24 1996-09-13 Matsushita Electric Ind Co Ltd 疑似立体画像表示装置
US5776050A (en) * 1995-07-24 1998-07-07 Medical Media Systems Anatomical visualization system
JP4054104B2 (ja) * 1998-04-10 2008-02-27 オリンパス株式会社 内視鏡画像処理装置
US6292221B1 (en) * 1998-11-17 2001-09-18 Vista Medical Technologies, Inc. Motorized focusing device and viewing system utilizing same
US7343195B2 (en) * 1999-05-18 2008-03-11 Mediguide Ltd. Method and apparatus for real time quantitative three-dimensional image reconstruction of a moving organ and intra-body navigation
US6767321B2 (en) * 1999-10-04 2004-07-27 Robert Czarnek Stereo laparoscope with discrete working distance
US6652452B1 (en) * 1999-10-25 2003-11-25 Advanced Medical Electronics Corporation Infrared endoscope with sensor array at the distal tip
US6603907B2 (en) * 2001-03-16 2003-08-05 Neutron Media, Llc Communications network and method of installing the same
US6679837B2 (en) * 2001-06-01 2004-01-20 Intlas Ltd. Laser light irradiation apparatus
US8369607B2 (en) * 2002-03-27 2013-02-05 Sanyo Electric Co., Ltd. Method and apparatus for processing three-dimensional images
US6801325B2 (en) * 2002-06-25 2004-10-05 Intuitive Surgical, Inc. Method and devices for inspecting and calibrating of stereoscopic endoscopes
JP4476905B2 (ja) * 2005-08-31 2010-06-09 株式会社東芝 立体表示画像データの構造、立体表示画像データの記録方法、表示再生方法、記録プログラム、および表示再生プログラム
JP2008165136A (ja) * 2007-01-05 2008-07-17 Seiko Epson Corp プロジェクタ
US8105233B2 (en) * 2007-10-24 2012-01-31 Tarek Ahmed Nabil Abou El Kheir Endoscopic system and method for therapeutic applications and obtaining 3-dimensional human vision simulated imaging with real dynamic convergence
US20090219224A1 (en) * 2008-02-28 2009-09-03 Johannes Elg Head tracking for enhanced 3d experience using face detection
US20100053151A1 (en) * 2008-09-02 2010-03-04 Samsung Electronics Co., Ltd In-line mediation for manipulating three-dimensional content on a display device
US8192015B2 (en) * 2009-01-09 2012-06-05 Oakley, Inc. Eyeglass with enhanced ballistic resistance
US8469510B2 (en) * 2009-01-09 2013-06-25 Oakley, Inc. Eyewear with enhanced ballistic resistance
US8641621B2 (en) * 2009-02-17 2014-02-04 Inneroptic Technology, Inc. Systems, methods, apparatuses, and computer-readable media for image management in image-guided medical procedures
US8798158B2 (en) * 2009-03-11 2014-08-05 Industry Academic Cooperation Foundation Of Kyung Hee University Method and apparatus for block-based depth map coding and 3D video coding method using the same
CA2761844C (en) * 2009-05-14 2017-11-28 University Health Network Quantitative endoscopy
US9465226B2 (en) * 2011-08-09 2016-10-11 Sony Computer Entertainment Inc. Automatic shutdown of 3D based on glasses orientation
US20130225078A1 (en) * 2012-02-24 2013-08-29 Karl-Anders Reinhold JOHANSSON Method and apparatus for interconnected devices

Similar Documents

Publication Publication Date Title
JP2011528252A5 (ja)
EP2303097B1 (en) A system, a method and a computer program for inspection of a three-dimensional environment by a user
Munz et al. The benfits of stereoscopic vision in robotic-assisted performance on bench models
JP2017056212A5 (ja)
RU2017106184A (ru) Направляющая система для позиционирования пациента для медицинской визуализации
KR20160138233A (ko) 정량적 3차원 영상화에 기초한 햅틱 피드백을 갖는 수술 시스템
JP2010081010A5 (ja)
JP2014010664A5 (ja)
JP2018142164A5 (ja) 画像処理装置、情報処理方法及びプログラム
JP2018512665A (ja) 視標追跡システム
JP2012510102A5 (ja)
JP2014526927A5 (ja)
US20170272704A1 (en) Image generation device, image generation method, recording medium, and method
RU2008110492A (ru) Стереоскопическое устройство отображения информации
JP2018078880A (ja) 画像生成装置、画像生成方法およびプログラム
CN104969547B (zh) 用于3d视觉内容的自动化评估的技术
US10295525B2 (en) Image generation device, image generation method, recording medium, and processing method
JP2015041884A5 (ja)
JP2016158911A5 (ja)
Marton et al. Natural exploration of 3D massive models on large-scale light field displays using the FOX proximal navigation technique
JP2017129950A5 (ja) 画像処理装置、撮像装置、画像処理方法、画像処理プログラムおよび記憶媒体
JP2007086716A5 (ja)
WO2013021440A1 (ja) 画像処理装置、画像表示装置、画像処理方法およびプログラム
Zhang et al. 35.1: A novel in‐situ interactive 3D floating autostereoscopic display system with aerial imaging plate
JP2008099740A5 (ja)