JP2016182228A5 - - Google Patents

Download PDF

Info

Publication number
JP2016182228A5
JP2016182228A5 JP2015063824A JP2015063824A JP2016182228A5 JP 2016182228 A5 JP2016182228 A5 JP 2016182228A5 JP 2015063824 A JP2015063824 A JP 2015063824A JP 2015063824 A JP2015063824 A JP 2015063824A JP 2016182228 A5 JP2016182228 A5 JP 2016182228A5
Authority
JP
Japan
Prior art keywords
abnormality
image
occurrence
notification information
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015063824A
Other languages
English (en)
Other versions
JP6485694B2 (ja
JP2016182228A (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from JP2015063824A external-priority patent/JP6485694B2/ja
Priority to JP2015063824A priority Critical patent/JP6485694B2/ja
Priority to US15/535,206 priority patent/US10966590B2/en
Priority to EP16714028.4A priority patent/EP3258827A1/en
Priority to PCT/JP2016/001454 priority patent/WO2016152087A1/en
Priority to CN201680016388.1A priority patent/CN107427207B/zh
Publication of JP2016182228A publication Critical patent/JP2016182228A/ja
Publication of JP2016182228A5 publication Critical patent/JP2016182228A5/ja
Publication of JP6485694B2 publication Critical patent/JP6485694B2/ja
Application granted granted Critical
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

前記通知情報生成部は、前記内視鏡の視野内領域内で作業を行う術者以外の監視者に対して、前記異常検出部により検出された異常に関する通知を行う監視者用通知情報をさらに生成することができる。
異常発生方向通知生成部224は、異常発生位置特定部222により特定された異常の発生場所の位置が内視鏡121の視野内領域の外(視野外領域内)である場合、その異常の発生場所の方向に関する通知を行う通知情報を生成する。より具体的には、例えば、異常発生方向通知生成部224が、異常の発生場所に関する通知を行う通知情報として、その異常の発生場所の方向を示す画像を生成するようにしてもよい。例えば、異常発生方向通知生成部224が、視野内領域の画像上においてその異常の発生場所の方向を示す画像を生成するようにしてもよい。また、例えば、異常発生方向通知生成部224が、異常の発生場所に関する通知を行う通知情報として、その異常の発生場所の方向を示す音声を生成するようにしてもよい。
<3.第3の実施の形態>
<監視装置等の主な構成例>
異常の発生についての通知は、作業を行う術者以外に対して行うようにしてもよい。例えば、術者だけでなく、異常の発生を監視する監視者が、ユーザとして、この内視鏡手術支援システム100を利用するようにし、内視鏡手術支援システム100が、その監視者に対して異常の発生についての通知を行うようにしてもよい。もちろん、術者と監視者の両方に通知を行うようにしてもよい。また、その場合、術者に対する通知方法と監視者に対する通知方法とが互いに異なるようにしてもよい。
ステップS353において、異常発生通知生成部221は、術者用の異常発生通知を生成する。
<異常検出処理の流れ>
次に、26のステップS421において実行される、この場合の異常検出処理の流れの例を、図27のフローチャートを参照して説明する。
(39) 前記センシング領域に対して前記センシングを行うセンサ部をさらに備え、
前記異常検出部は、前記センサ部による前記センシングの結果に基づいて前記異常の発生を検出する
(1)に記載の情報処理装置。
(40) 前記センサ部は、画像、光、電気、音、振動、加速度、速度、角速度、姿勢、力、温度、湿度、流量、磁気、化学物質、および匂いの内、少なくともいずれか1つをセンシングする
(39)に記載の情報処理装置。
(41) 前記センサ部は、さらに、前記センサ部の姿勢をセンシングする
(40)に記載の情報処理装置。
(62) 前記異常検出部は、前記画像生成部により生成された前記監視対象画像を解析して、出血の発生を前記異常の発生として検出する
(58)に記載の情報処理装置。

Claims (20)

  1. 内視鏡の視野外領域の少なくとも一部を含むセンシング領域のセンシングの結果に基づいて前記視野外領域における異常の発生を検出する異常検出部と、
    前記異常検出部により検出された異常に関する通知を行う通知情報を生成する通知情報生成部と
    を備える情報処理装置。
  2. 前記通知情報生成部は、前記異常検出部により検出された異常の発生場所に関する通知を行う通知情報を生成する
    請求項1に記載の情報処理装置。
  3. 前記センシング領域は、前記内視鏡の視野内領域の少なくとも一部も含み、
    前記異常検出部は、前記センシング領域のセンシングの結果に基づいて、前記視野内領域における異常の発生をさらに検出する
    請求項2に記載の情報処理装置。
  4. 前記通知情報生成部は、前記異常の発生場所の位置が前記視野内領域内であるか否かに応じた方法で、前記異常の発生場所に関する通知を行う通知情報を生成する
    請求項3に記載の情報処理装置。
  5. 前記通知情報生成部は、前記異常の発生場所の位置が前記視野内領域内である場合、前記通知情報として、前記視野内領域の画像上において前記異常の発生場所を示す画像、若しくは、前記異常の発生場所を示す音声を生成する
    請求項4に記載の情報処理装置。
  6. 前記通知情報生成部は、前記異常の発生場所の位置が前記視野外領域内である場合、前記通知情報として、前記視野内領域の画像上において前記異常の発生場所の方向を示す画像、若しくは、前記異常の発生場所の方向を示す音声を生成する
    請求項4または請求項5に記載の情報処理装置。
  7. 前記通知情報生成部は、前記異常の発生場所の位置を、前記視野内領域の位置からの相対位置として特定し、特定した前記異常の発生場所の位置が前記視野内領域内であるか否かの判定を行い、前記判定の結果に応じた方法で、前記異常の発生場所に関する通知を行う通知情報を生成する
    請求項4乃至請求項6のいずれかに記載の情報処理装置。
  8. 前記視野内領域の位置を推定する視野位置推定部をさらに備え、
    前記通知情報生成部は、前記異常の発生場所の位置を、前記視野位置推定部により推定された前記視野内領域の位置からの相対位置として特定する
    請求項7に記載の情報処理装置。
  9. 前記通知情報生成部は、前記通知情報として、前記異常検出部により異常が検出されたことに関する通知、若しくは、前記異常検出部により検出された前記異常の内容に関する通知、または両方の前記通知を行う画像若しくは音声を生成する
    請求項1乃至請求項8のいずれかに記載の情報処理装置。
  10. 前記異常検出部は、出血の発生、術具の温度異常の発生、臓器の温度異常の発生、若しくは、術具と臓器の接触の発生を前記異常の発生として検出する
    請求項1乃至請求項9のいずれかに記載の情報処理装置。
  11. 前記通知情報生成部は、前記内視鏡の視野内領域内で作業を行う術者以外の監視者に対して、前記異常検出部により検出された異常に関する通知を行う監視者用通知情報をさらに生成する
    請求項1乃至請求項10のいずれかに記載の情報処理装置。
  12. 前記通知情報生成部は、前記監視者用通知情報として、前記異常が検出されたことに関する通知を行う画像若しくは音声を生成する
    請求項11に記載の情報処理装置。
  13. 前記通知情報生成部は、前記監視者用通知情報として、前記異常の内容に関する通知を行う画像若しくは音声を生成する
    請求項11または請求項12に記載の情報処理装置。
  14. 前記通知情報生成部は、前記監視者用通知情報として、前記異常の発生場所に関する通知を行う画像若しくは音声を生成する
    請求項11乃至請求項13のいずれかに記載の情報処理装置。
  15. 前記内視鏡の撮像部により撮像されて得られた撮像画像の一部を抽出して表示用画像とし、前記撮像画像の全体を前記センシングの結果として前記異常検出部による前記異常の発生の検出に利用される監視対象画像とする画像生成部をさらに備える
    請求項1乃至請求項14のいずれかに記載の情報処理装置。
  16. 前記画像生成部は、前記内視鏡の撮像部により撮像されて得られた撮像画像の一部を抽出して拡大画像の表示用画像とし、前記撮像画像の前記拡大画像の表示用画像よりも広範囲を、前記拡大画像の表示用画像の一部に重畳させて表示される俯瞰画像の表示用画像とし、前記撮像画像の全体を、前記センシングの結果として前記異常検出部による前記異常の発生の検出に利用される監視対象画像とする
    請求項15に記載の情報処理装置。
  17. 所定の術具の位置に応じて、前記撮像部による撮像の画角を制御することにより、前記画像生成部により生成される前記俯瞰画像の表示用画像の画角を制御する画角制御部をさらに備える
    請求項16に記載の情報処理装置。
  18. 前記通知情報生成部により生成された前記通知情報を出力する出力部をさらに備える
    請求項1乃至請求項17のいずれかに記載の情報処理装置。
  19. 前記センシング領域に対して、画像、光、電気、音、振動、加速度、速度、角速度、姿勢、力、温度、湿度、流量、磁気、化学物質、および匂いの内、少なくともいずれか1つをセンシングするセンサ部をさらに備え、
    前記異常検出部は、前記センサ部による前記センシングの結果に基づいて前記異常の発生を検出する
    請求項1乃至請求項18のいずれかに記載の情報処理装置。
  20. 内視鏡の視野外領域の少なくとも一部を含むセンシング領域のセンシングの結果に基づいて前記視野外領域における異常の発生を検出し、
    検出された異常に関する通知を行う通知情報を生成する
    情報処理方法。
JP2015063824A 2015-03-26 2015-03-26 情報処理装置および方法 Active JP6485694B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2015063824A JP6485694B2 (ja) 2015-03-26 2015-03-26 情報処理装置および方法
CN201680016388.1A CN107427207B (zh) 2015-03-26 2016-03-15 手术系统、信息处理装置和方法
EP16714028.4A EP3258827A1 (en) 2015-03-26 2016-03-15 Surgical system, information processing device, and method
PCT/JP2016/001454 WO2016152087A1 (en) 2015-03-26 2016-03-15 Surgical system, information processing device, and method
US15/535,206 US10966590B2 (en) 2015-03-26 2016-03-15 Surgical system, information processing device, and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015063824A JP6485694B2 (ja) 2015-03-26 2015-03-26 情報処理装置および方法

Publications (3)

Publication Number Publication Date
JP2016182228A JP2016182228A (ja) 2016-10-20
JP2016182228A5 true JP2016182228A5 (ja) 2017-03-09
JP6485694B2 JP6485694B2 (ja) 2019-03-20

Family

ID=55650633

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015063824A Active JP6485694B2 (ja) 2015-03-26 2015-03-26 情報処理装置および方法

Country Status (5)

Country Link
US (1) US10966590B2 (ja)
EP (1) EP3258827A1 (ja)
JP (1) JP6485694B2 (ja)
CN (1) CN107427207B (ja)
WO (1) WO2016152087A1 (ja)

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11871901B2 (en) 2012-05-20 2024-01-16 Cilag Gmbh International Method for situational awareness for surgical network or surgical network connected device capable of adjusting function based on a sensed situation or usage
WO2016199273A1 (ja) * 2015-06-11 2016-12-15 オリンパス株式会社 内視鏡装置及び内視鏡装置の作動方法
JP6833978B2 (ja) * 2017-03-30 2021-02-24 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
US11759224B2 (en) 2017-10-30 2023-09-19 Cilag Gmbh International Surgical instrument systems comprising handle arrangements
US11911045B2 (en) 2017-10-30 2024-02-27 Cllag GmbH International Method for operating a powered articulating multi-clip applier
US11801098B2 (en) 2017-10-30 2023-10-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11896322B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Sensing the patient position and contact utilizing the mono-polar return pad electrode to provide situational awareness to the hub
US11678881B2 (en) 2017-12-28 2023-06-20 Cilag Gmbh International Spatial awareness of surgical hubs in operating rooms
US11937769B2 (en) 2017-12-28 2024-03-26 Cilag Gmbh International Method of hub communication, processing, storage and display
US11832899B2 (en) 2017-12-28 2023-12-05 Cilag Gmbh International Surgical systems with autonomously adjustable control programs
US11896443B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Control of a surgical system through a surgical barrier
US11998193B2 (en) 2017-12-28 2024-06-04 Cilag Gmbh International Method for usage of the shroud as an aspect of sensing or controlling a powered surgical device, and a control algorithm to adjust its default operation
US10758310B2 (en) 2017-12-28 2020-09-01 Ethicon Llc Wireless pairing of a surgical device with another device within a sterile surgical field based on the usage and situational awareness of devices
US11666331B2 (en) 2017-12-28 2023-06-06 Cilag Gmbh International Systems for detecting proximity of surgical end effector to cancerous tissue
US20190201146A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Safety systems for smart powered surgical stapling
US11257589B2 (en) 2017-12-28 2022-02-22 Cilag Gmbh International Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes
US11969142B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Method of compressing tissue within a stapling device and simultaneously displaying the location of the tissue within the jaws
US11166772B2 (en) 2017-12-28 2021-11-09 Cilag Gmbh International Surgical hub coordination of control and communication of operating room devices
US11864728B2 (en) 2017-12-28 2024-01-09 Cilag Gmbh International Characterization of tissue irregularities through the use of mono-chromatic light refractivity
US11844579B2 (en) 2017-12-28 2023-12-19 Cilag Gmbh International Adjustments based on airborne particle properties
US11786251B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Method for adaptive control schemes for surgical network control and interaction
US11109866B2 (en) 2017-12-28 2021-09-07 Cilag Gmbh International Method for circular stapler control algorithm adjustment based on situational awareness
US11202570B2 (en) 2017-12-28 2021-12-21 Cilag Gmbh International Communication hub and storage device for storing parameters and status of a surgical device to be shared with cloud based analytics systems
US11903601B2 (en) 2017-12-28 2024-02-20 Cilag Gmbh International Surgical instrument comprising a plurality of drive systems
US11013563B2 (en) 2017-12-28 2021-05-25 Ethicon Llc Drive arrangements for robot-assisted surgical platforms
US11389164B2 (en) 2017-12-28 2022-07-19 Cilag Gmbh International Method of using reinforced flexible circuits with multiple sensors to optimize performance of radio frequency devices
US11969216B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution
US10892995B2 (en) 2017-12-28 2021-01-12 Ethicon Llc Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US11132462B2 (en) 2017-12-28 2021-09-28 Cilag Gmbh International Data stripping method to interrogate patient records and create anonymized record
US11786245B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Surgical systems with prioritized data transmission capabilities
US11026751B2 (en) 2017-12-28 2021-06-08 Cilag Gmbh International Display of alignment of staple cartridge to prior linear staple line
US11659023B2 (en) 2017-12-28 2023-05-23 Cilag Gmbh International Method of hub communication
US11857152B2 (en) * 2017-12-28 2024-01-02 Cilag Gmbh International Surgical hub spatial awareness to determine devices in operating theater
US11771487B2 (en) 2017-12-28 2023-10-03 Cilag Gmbh International Mechanisms for controlling different electromechanical systems of an electrosurgical instrument
US11744604B2 (en) 2017-12-28 2023-09-05 Cilag Gmbh International Surgical instrument with a hardware-only control circuit
US11633237B2 (en) 2017-12-28 2023-04-25 Cilag Gmbh International Usage and technique analysis of surgeon / staff performance against a baseline to optimize device utilization and performance for both current and future procedures
US11818052B2 (en) 2017-12-28 2023-11-14 Cilag Gmbh International Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
CN108652675A (zh) * 2018-02-11 2018-10-16 江苏金羿智芯科技有限公司 一种基于人工智能的内窥镜图像去雾系统
US11701162B2 (en) 2018-03-08 2023-07-18 Cilag Gmbh International Smart blade application for reusable and disposable devices
US11707293B2 (en) 2018-03-08 2023-07-25 Cilag Gmbh International Ultrasonic sealing algorithm with temperature control
US11259830B2 (en) 2018-03-08 2022-03-01 Cilag Gmbh International Methods for controlling temperature in ultrasonic device
US11259806B2 (en) 2018-03-28 2022-03-01 Cilag Gmbh International Surgical stapling devices with features for blocking advancement of a camming assembly of an incompatible cartridge installed therein
US11090047B2 (en) 2018-03-28 2021-08-17 Cilag Gmbh International Surgical instrument comprising an adaptive control system
JP7179837B2 (ja) * 2018-04-17 2022-11-29 富士フイルム株式会社 内視鏡装置、内視鏡画像表示方法及び内視鏡装置の作動方法
EP3797730B1 (en) 2018-05-22 2022-06-29 Sony Group Corporation Surgery information processing device, information processing method, and program
JP7286948B2 (ja) * 2018-11-07 2023-06-06 ソニーグループ株式会社 医療用観察システム、信号処理装置及び医療用観察方法
CN109767451A (zh) * 2019-01-16 2019-05-17 吴艳红 诊断数据高亮显示系统
US11751872B2 (en) 2019-02-19 2023-09-12 Cilag Gmbh International Insertable deactivator element for surgical stapler lockouts
US11298129B2 (en) 2019-02-19 2022-04-12 Cilag Gmbh International Method for providing an authentication lockout in a surgical stapler with a replaceable cartridge
US11026561B2 (en) * 2019-03-21 2021-06-08 Verb Surgical Inc. Method and system for automatically repositioning a viewable area within an endoscope video view
US20230210579A1 (en) * 2021-12-30 2023-07-06 Verb Surgical Inc. Real-time surgical tool presence/absence detection in surgical videos

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5769792A (en) * 1991-07-03 1998-06-23 Xillix Technologies Corp. Endoscopic imaging system for diseased tissue
CA2106408A1 (en) * 1991-11-08 1993-05-09 Stuart D. Edwards Systems and methods for ablating tissue while monitoring tissue impedance
JPH09149876A (ja) * 1995-11-30 1997-06-10 Olympus Optical Co Ltd 内視鏡装置
US5647368A (en) * 1996-02-28 1997-07-15 Xillix Technologies Corp. Imaging system for detecting diseased tissue using native fluorsecence in the gastrointestinal and respiratory tract
JPH10328136A (ja) * 1997-06-05 1998-12-15 Shimadzu Corp 内視鏡
DE19800312A1 (de) * 1998-01-07 1999-07-08 Wolf Gmbh Richard Diagnosegerät zur bildgebenden Aufnahme fluoreszierender biologischer Gewebebereiche
US6462770B1 (en) * 1998-04-20 2002-10-08 Xillix Technologies Corp. Imaging system with automatic gain control for reflectance and fluorescence endoscopy
ATE309739T1 (de) * 1999-01-26 2005-12-15 Newton Lab Inc Vorrichtung zur autofluoreszensbildgebung für ein endoskop
JP2001104246A (ja) * 1999-10-08 2001-04-17 Olympus Optical Co Ltd 医療用顔面装着型映像表示システム
US6582363B2 (en) * 2000-08-25 2003-06-24 Pentax Corporation Video endoscope system and illumination optical system
JP4916114B2 (ja) * 2005-01-04 2012-04-11 オリンパス株式会社 内視鏡装置
JP2007151594A (ja) * 2005-11-30 2007-06-21 Olympus Corp 内視鏡システム
JP5499426B2 (ja) 2006-09-01 2014-05-21 ソニー株式会社 内視鏡カメラおよび内視鏡カメラシステム
JP2008132321A (ja) * 2006-10-26 2008-06-12 Olympus Corp 内視鏡装置
ES2620816T3 (es) * 2007-11-12 2017-06-29 Novineon Healthcare Technology Partners Gmbh Dispositivo para la detección de hemorragias
JP2011010841A (ja) * 2009-07-01 2011-01-20 Hoya Corp 内視鏡装置
EP2425761B1 (en) * 2010-05-10 2015-12-30 Olympus Corporation Medical device
US20110301414A1 (en) 2010-06-04 2011-12-08 Robert Hotto Intelligent endoscopy systems and methods
US9901297B2 (en) * 2012-02-08 2018-02-27 Biop Medical Ltd. Method and apparatus for tissue disease diagnosis
US20140206951A1 (en) * 2013-01-24 2014-07-24 Arthrex, Inc. Arthroscope Sheath System With Sensors
JP5807853B2 (ja) 2014-11-06 2015-11-10 タイヨーエレック株式会社 回胴式遊技機
JP6001219B1 (ja) * 2014-11-06 2016-10-05 オリンパス株式会社 内視鏡システム

Similar Documents

Publication Publication Date Title
JP2016182228A5 (ja)
JP6485694B2 (ja) 情報処理装置および方法
JP2014515291A5 (ja)
JP2020520752A5 (ja)
JP2017067666A5 (ja)
JP5333477B2 (ja) 現場作業支援システム、装置、方法及びプログラム
JP2019125112A5 (ja)
JP2013157795A5 (ja)
JP2007018426A5 (ja)
JP2015228955A5 (ja)
EP2526869A3 (en) Image processing device, radiographic image capture system, image processing method and image processing program storage medium
JP5324606B2 (ja) 人及び動物識別装置及び方法
JP2015133078A5 (ja)
JPWO2016151950A1 (ja) 監視システム、監視方法および監視プログラム
US20180213203A1 (en) Image acquisition system
JP2018082281A5 (ja) 情報処理装置、制御方法およびプログラム
JP2018112753A5 (ja)
JP2008225801A (ja) 不審者検知システム及び方法
JP2015225276A5 (ja)
JP2017158867A5 (ja)
JP2018138140A5 (ja)
JP2017010385A (ja) 携帯端末、警告出力方法、及び、プログラム
JP2020069572A (ja) ロボットシステム
WO2019087269A1 (ja) 内視鏡システム
KR101449485B1 (ko) 사람 및 동물 식별 장치 및 방법