JP5945644B1 - 医療システム - Google Patents

医療システム Download PDF

Info

Publication number
JP5945644B1
JP5945644B1 JP2015562975A JP2015562975A JP5945644B1 JP 5945644 B1 JP5945644 B1 JP 5945644B1 JP 2015562975 A JP2015562975 A JP 2015562975A JP 2015562975 A JP2015562975 A JP 2015562975A JP 5945644 B1 JP5945644 B1 JP 5945644B1
Authority
JP
Japan
Prior art keywords
displayed
endoscopic image
display device
display
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015562975A
Other languages
English (en)
Other versions
JPWO2016021232A1 (ja
Inventor
康裕 奥澤
康裕 奥澤
上 邦彰
邦彰 上
浩一 田代
浩一 田代
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Application granted granted Critical
Publication of JP5945644B1 publication Critical patent/JP5945644B1/ja
Publication of JPWO2016021232A1 publication Critical patent/JPWO2016021232A1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00039Operational features of endoscopes provided with input arrangements for the user
    • A61B1/00042Operational features of endoscopes provided with input arrangements for the user for mechanical operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/07Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00203Electrical control of surgical instruments with speech control or speech recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00982Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body combined with or comprising means for visual or photographic inspections inside the body, e.g. endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • A61B2034/254User interfaces for surgical systems being adapted depending on the stage of the surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • A61B2090/3612Image-producing devices, e.g. surgical cameras with images taken automatically
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/372Details of monitor hardware
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/04Constructional details of apparatus
    • A61B2560/0437Trolley or cart-type apparatus
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Biophysics (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Robotics (AREA)
  • Gynecology & Obstetrics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Mechanical Engineering (AREA)
  • Endoscopes (AREA)

Abstract

医療システム1は、内視鏡画像51を得るための光源を体腔内に供給する光源装置16と、内視鏡画像51を表示する術野モニタ3と、複数の被制御機器を制御するシステムコントローラ21とを有する。システムコントローラ21は、内視鏡画像51が術野モニタ3に表示されているか否かを判別する判別部40と、内視鏡画像51が術野モニタ3に表示されている場合には、被制御機器の操作を指示する音声操作メイン画面52と内視鏡画像51とを術野モニタ3に表示し、内視鏡画像51が術野モニタ3に表示されていない場合には、被制御機器の動作状態の確認及び被制御機器の操作の指示をする音声操作画面54を術野モニタ3に表示するように制御する制御部36とを有する。

Description

本発明の実施形態は、医療システムに関し、特に、複数の機器を集中制御する医療システムに関する。
近年、技術の発展と共に、医療機器の種類は豊富となっており、また、その機能も充実してきている。また、手術室にはこれらの医療機器の他に、ルームライトや各種の表示装置、医療画像を撮像する内視鏡や、記録装置などの各種機器が配置されている。これらの装置を含む各種医療機器を、集中制御装置(システムコントローラ)で集中制御管理する医療システムも開発されている。
この種の医療システムの集中制御装置では、タッチ信号を受信する操作パネルにより、被制御機器のパラメータ等を設定したり変更したりするのが一般的である。操作パネルは不潔域に設置されたラックやトロリーに載置されることが多く、術者が直接操作パネルを操作することができない場合が多い。このため、不潔域に常在する看護師などに指示を出して、術者に代わって看護師に操作パネルを操作させる方法が用いられている。
術中、術者は内視鏡画像など医療画像が映し出された術野モニタを見ながら手技を行い、必要に応じて看護師などに被制御機器の操作指示を行う。そして、看護師は、術者からの指示に従い、操作パネルを操作して被制御機器のパラメータなどの設定や変更を行う(例えば、特開2007−175231号公報参照)。
しかしながら、特開2007−175231号公報に記載された医療システムでは、看護師は操作パネル上に医療画像を映し出すことができるため、手技を確認しながら被制御機器の操作を行うことが可能であるが、術者が参照する術野モニタには医療画像しか表示できない。すなわち、術者は、術中に被制御機器の設定値や操作コマンドを確認したい場合、術野モニタから操作パネルに視線を移動させたり、看護師に設定値や操作コマンドを聞いたりする必要があった。このため、術者は手技に集中できなかったり、看護師に負担がかったりしてしまうという問題があった。また、一つの画面において、医療画像と操作コマンドとを手動で切り替えて表示させる技術も開発されているが、術者が都度、画面を切り替える操作を行う必要があり、切り替え操作に手間がかかってしまったり、誤操作により医療画像が見られなくなってしまったりするという問題があった。
そこで、本発明は、術者が医療画像と操作画面とを術野モニタで同時に参照することができ、操作性を向上させることができる医療システムを提供することを目的とする。
本発明の一態様の医療システムは、内視鏡画像を得るための光源を体腔内に供給する光源装置と、前記内視鏡画像を表示する表示装置と、複数の被制御機器を制御する制御装置と、を有し、前記制御装置は、前記内視鏡画像が前記表示装置に表示されているか否かを判別する判別部と、前記判別部により前記内視鏡画像が前記表示装置に表示されていると判別されたときに前記被制御機器の操作を指示するための第一の操作指示画面と前記内視鏡画像とを前記表示装置に表示し、前記判別部により前記内視鏡画像が前記表示装置に表示されていない判別されたときに前記被制御機器の動作状態の確認及び前記被制御機器の操作の指示をするための第二の操作指示画面を前記表示装置に表示するように制御する制御部と、を有する。
本発明の一態様の医療システムは、内視鏡画像を得るための光源を体腔内に供給する光源装置と、前記内視鏡画像を表示する表示装置と、複数の被制御機器を制御する制御装置と、を有し、前記制御装置は、前記内視鏡画像が前記表示装置に表示されているか否かを判別する判別部と、前記判別部により前記内視鏡画像が前記表示装置に表示されていないと判別されたときに前記被制御機器の動作状態の確認及び前記被制御機器の操作の指示をするための操作指示画面を前記表示装置に表示するように制御する制御部と、を有する。
本発明の実施形態に係わる医療システム1の全体構成の一例を説明する図。 システムコントローラ21の詳細な構成を説明する図。 内視鏡画像のみが表示されている術野モニタ3の一例を説明する図。 音声操作メイン画面と内視鏡画像とが表示されている術野モニタ3の一例を説明する図。 音声操作サブ画面と内視鏡画像とが表示されている術野モニタ3の一例を説明する図。 音声操作画面のみが表示されている術野モニタ3の一例を説明する図。 被制御装置の操作手順と術野モニタ3の画面切替を説明するフローチャート。
以下、図面を参照して実施形態を説明する。
図1は、本発明の実施形態に係わる医療システム1の全体構成の一例を説明する図である。図1に示すように、本実施形態の医療システム1は、手術室2に配置される。手術室2内には、医療システム1とともに、患者48が横たわる患者ベッド10、無影灯6などが配置される。医療システム1は、被制御装置である医療機器として例えば電気メス装置13、気腹装置14、内視鏡用カメラ装置15、及び光源装置16等の装置類が載置されたトロリー11を有している。
また、トロリー11には、集中制御装置であるシステムコントローラ21も載置されている。このシステムコントローラ21には、無影灯6と、電気メス装置13と、気腹装置14と、内視鏡用カメラ装置15と、光源装置16とが、図示しない通信線を介して接続されている。また、システムコントローラ21には、滅菌域に設置された術野モニタ3も、図示しない信号線を介して接続されている。
術野モニタ3は、例えば液晶ディスプレイ等の表示装置であり、システムコントローラ21を介して内視鏡用カメラ装置15から入力された映像信号、すなわち患部等の内視鏡画像などが表示される。また、術野モニタ3には、内視鏡画像だけでなく、システムコントローラ21に接続された各装置を制御するための操作指示画面を表示させることができる。
電気メス装置13は、アクティブ電極17と患者48の体下に設置されている患者プレート18と接続されており、体表面や患部等の焼灼を行う。気腹装置14には、図示しない炭酸ガスボンベが接続されており、トロッカー22を介して、患者48の腹部内に炭酸ガスが供給されるようになっている。
内視鏡用カメラ装置15は、カメラケーブル31aを介して内視鏡31に接続されている。内視鏡31の挿入部の基端側には、撮像素子を備えたカメラヘッドが装着され、患部等の光学像をカメラヘッド内の撮像素子で撮像する。この撮像素子で撮像された撮像信号は、カメラケーブル31aを介して内視鏡用カメラ装置15に伝送される。内視鏡用カメラ装置15は、伝送された撮像信号に所定の信号処理を施し、映像信号を生成する。そして、内視鏡用カメラ装置15は、生成した映像信号を、システムコントローラ21を介して術野モニタ3や集中表示パネル19に出力する。
光源装置16は、ランプ16aから照射された照明光を伝送するライトガイドケーブル31bを介して内視鏡31に接続されている。光源装置16からの照明光は内視鏡31に供給され、内視鏡31の挿入部が挿入された患者48の腹部内の患部等を照明する。
更に、トロリー11には、集中表示パネル19、操作パネル20等が載置されている。集中表示パネル19は、手術中のあらゆるデータを選択的に表示させることが可能な表示手段となっている。操作パネル20は、例えば液晶ディスプレイ等の表示部とこの表示部上に一体的に設けられた例えばタッチセンサにより構成され、非滅菌域にいる看護師等が操作する集中操作装置になっている。操作パネル20によって指示された操作情報は、システムコントローラ21に入力され、システムコントローラ21に接続されている各装置の制御が行われる。
また、システムコントローラ21に接続されている各装置の制御は、非滅菌域にいる看護師等によって操作パネル20から行うだけでなく、マイク33から入力された音声を認識し、滅菌域にいる術者の音声により各装置を制御できるようになっている。
なお、図1では、内視鏡下外科手術が行われる手術室に設けられた医療システム1を例示したが、医療システム1の用途は内視鏡下外科手術に限られず、他の手術や診察のために用いられてもよい。また、医療システム1は、診察室など手術室以外に設けられてもよい。医療システム1は、さらに、図1では図示しない種々の装置及び設備を含んでもよい。例えば、内視鏡画像などを記録するビデオテープレコーダ(VTR)などを含んでもよく、これらをシステムコントローラ21で制御してもよい。
次に、システムコントローラ21の詳細な構成について、図2を用いて説明する。図2は、システムコントローラ21の詳細な構成を説明する図である。図2に示すように、システムコントローラ21は、術野モニタ3、電気メス装置13、気腹装置14、内視鏡用カメラ装置15、光源装置16など、被制御装置との間で通信を行う機器通信インタフェース部(以下、機器通信I/F部と示す)34と、操作パネル20との間で通信を行う操作パネルインタフェース部(以下、操作パネルI/F部と示す)39とを備えている。また、システムコントローラ21は、被制御装置の設定値や種々のパラメータ、術野モニタ3に出力する画面のデータなどが格納されている記録部35と、システムコントローラ21全体の動作を制御する制御部36と、術野モニタ3に対し、表示させる画像を送信する表示画像送信部37と、マイク33から入力された音声を認識する音声認識部38とを備えている。
機器通信I/F部34には、システムコントローラ21に接続されており集中制御が可能になされている被制御装置から、各種データや設定パラメータが入力される。また、機器通信I/F部34には、内視鏡31で撮像した患者の体腔内における患部等の光学像を、内視鏡用カメラ装置15で加工した映像信号が入力される。これらのデータやパラメータ、映像信号などは、制御部36に出力される。さらに、機器通信I/F部34は、被制御装置を操作するために制御部36で生成された新たな設定パラメータなどを、所定の被制御装置に対して出力する。
記録部35には、例えば、システムコントローラ21を動作させるためのプログラムやその他プログラムの実行に必要な各種データやパラメータ、術野モニタ3に表示させる画面を構成するためのデータなどが格納されている。
音声認識部38は、マイク33に入力された術者からの音声に基づき、システムコントローラ21に接続されており集中制御が可能になされている被制御装置の操作を行うための音声を識別する。
制御部36には、機器通信I/F34を介して被制御装置から各種データや設定パラメータなどが入力される。また、音声認識部38から被制御装置に対する音声操作情報が入力される。また、操作パネルI/F部39から被制御装置に対する操作情報が入力される。さらに、制御部36は、光源装置16のランプ16aが点灯しているか否かを判別する判別部40を有する。制御部36は、判別部40の判別結果に基づいて術野モニタ3に表示させる画面を構成し、表示画像送信部37を介して術野モニタ3に出力し、表示させる。
なお、術野モニタ3には、表示画像送信部37からの入力のほかに、内視鏡用カメラ装置15から内視鏡画像が入力される。表示画像送信部37からの入力がない場合、術野モニタ3には内視鏡用カメラ装置15から入力された内視鏡画像が表示される。表示画像送信部37からの入力がある場合、入力内容に従って画面を表示する。
すなわち、術野モニタ3には、判別部40の判別結果など、状況に応じて異なる画面が表示される。術野モニタ3に表示される画面について、図3から図6を用いて説明する。図3は、内視鏡画像のみが表示されている術野モニタ3の一例を示している。図4は、音声操作メイン画面と内視鏡画像とが表示されている術野モニタ3の一例を示している。図5は、音声操作サブ画面と内視鏡画像とが表示されている術野モニタ3の一例を示している。図6は、音声操作画面のみが表示されている術野モニタ3の一例を示している。
判別部40により光源装置16のランプ16aが点灯していると判別され、かつ、音声認識部38に音声により被制御装置の操作を行う旨の音声入力がなされていない場合(操作パネル20を用いて被制御装置の操作を行う場合)、術野モニタ3には図3に示すような画面が表示される。すなわち、術野モニタ3の中央部に内視鏡画像51が表示され、内視鏡画像51の表示領域以外のスペースに患者ID、名前、及び性別など、患者に関する基本情報が表示される。
判別部40により光源装置16のランプ16aが点灯していると判別され、かつ、音声認識部38に被制御装置の操作を行う旨の音声入力がなされている場合、術野モニタ3には図4に示すような画面が表示される。すなわち、図3において術野モニタ3の中央部に表示されていた内視鏡画像51が、画面の片側(図4では画面の右側方向)に移動する。そして、内視鏡画像51の表示領域以外のスペース(図4では内視鏡画像51の左側の領域)に、被制御装置の操作を指示するための第一の操作指示画面としての音声操作メイン画面52が表示される。
音声操作メイン画面52には、音声入力による操作が可能な被制御装置がメニュー表示されている。例えば、電気メス装置13と、無影灯6と、気腹装置14とが音声入力により操作可能である場合、図4に示すように、音声操作メイン画面52には、電気メスのコマンドエリア52a、無影灯のコマンドエリア52b、及び気腹装置のコマンドエリア52cの3つのコマンドエリアが表示される。
音声操作メイン画面52が表示された状態において、操作を行う装置を選択すると、術野モニタ3は図5に示すような画面に自動的に切り替わる。すなわち、内視鏡画像51や患者に関する基本情報の表示はそのままで、音声操作メイン画面52が音声操作サブ画面53に切り替わる。この音声操作サブ画面53は、音声操作メイン画面52において選択された装置について、操作を指示するための第三の操作指示画面である。図5では、気腹装置14が選択された場合における、音声操作サブ画面53の一例を示している。音声操作サブ画面53では、選択された装置の現在の状態(設定値や計測値など)が表示される。従って術者は、画面に表示されている現在の状態を参照しながら、音声入力によって気腹装置14の圧力設定値を上昇させたり下降させたりし、所望の値に設定することができる。
なお、判別部40により光源装置16のランプ16aが点灯していないと判別される場合、術野モニタ3には何も表示されない。この状態で、音声認識部38に被制御装置の操作を行う旨の音声入力がなされると、術野モニタ3には図6に示すような画面が表示される。すなわち、術野モニタ3には、被制御装置の動作状態の確認と操作指示を行うための第二の操作画面である、音声操作画面54のみが表示される。
音声操作画面54は、音声入力による操作が可能な被制御装置がメニュー表示され、かつ、それぞれの被制御装置について現在の状態(設定値や計測値など)も併せて表示される。例えば、電気メス装置13と、無影灯6と、気腹装置14とが音声入力により操作可能である場合、図6に示すように、電気メス装置13についてのコマンドエリア54a、無影灯6についてのコマンドエリア54b、気腹装置14についてのコマンドエリア54cが音声操作画面54に表示される。そして、各コマンドエリア54a、54b、54cには、それぞれの装置の現在の状態が表示される。術者は、画面に表示された現在の状態を確認しながら、音声入力により操作対象の装置を選択して所望の操作を指示することができる。
次に、本実施形態における医療システム1における被制御装置の操作と術野モニタ3の画面遷移について、図7を用いて説明する。図7は、被制御装置の操作手順と術野モニタ3の画面切替を説明するフローチャートである。
まず、術野モニタ3には何も表示されてない状態で手術が開始される。そして、内視鏡31で撮像した患者の体腔内における患部等の光学像を、内視鏡用カメラ装置15で加工した映像信号がシステムコントローラ21に入力されると、術野モニタ3には、図3に示すような内視鏡画像51が表示される。この状態で、「メニュー」など音声操作を開始するトリガーとなる所定のキーワードを術者が発声し、マイク33を介して音声認識部38が同音声を認識すると、被制御装置が音声入力により操作可能な状態になる。(ステップS1)。
次に、システムコントローラ21の制御部36の判別部40において、光源装置16のランプ16aの点灯状態を確認する(ステップS2)。光源装置16のランプ16a点灯していないと判別された場合(ステップS3、No)、システムコントローラ21の制御部36は、記録部35に格納されているデータなどを用いて音声操作画面54を生成する(ステップS12)。そして、生成された音声操作画面54は、表示画像送信部37を介して術野モニタ3に出力される(ステップS13)。
また、システムコントローラ21の制御部36は、機器通信I/F部34を介して術野モニタ3に対し、画面の表示切替信号を送信する(ステップS14)。術野モニタ3は、システムコントローラ21から表示切替信号を受信すると、内視鏡画像51が配置されていた領域に、ステップS13において入力された音声操作画面54を配置して、内視鏡未使用時における音声操作画面(例えば図6に示すような画面)を表示する(ステップS15)。音声操作画面54のみが術野モニタ3に表示されている場合、ステップS2に戻って光源装置16のランプ16aの状態を確認する。
一方、ランプ16aが点灯していると判別された場合(ステップS3、YES)、システムコントローラ21の制御部36は、記録部35に格納されているデータなどを用いて音声操作メイン画面52を生成する(ステップS4)。そして、生成された音声操作メイン画面52は、表示画像送信部37を介して術野モニタ3に出力される(ステップS5)。
また、システムコントローラ21の制御部36は、機器通信I/F部34を介して術野モニタ3に対し、画面の表示切替信号を送信する(ステップS6)。術野モニタ3は、システムコントローラ21から表示切替信号を受信すると、内視鏡画像51の表示位置を調整し、内視鏡画像51が表示されていない領域にステップS4において入力された音声操作メイン画面52を配置して、内視鏡使用時における音声操作メイン画面(例えば図4に示すような画面)を表示する(ステップS7)。
続いて、術者が、術野モニタ3の音声操作メイン画面52に表示されている制御可能な装置の中から音声入力により特定の装置を選択し、音声認識部38が同音声を認識すると(ステップS8)、術野モニタ3に表示されている音声操作メイン画面52が、選択された装置に関する音声操作サブ画面53に切り替わり、術野モニタ3には内視鏡使用時における音声操作サブ画面が表示される(ステップS9)。
ステップS9は、具体的にはまず、システムコントローラ21の制御部36が、記録部35に格納されているデータなどを用いて、音声入力により特定された装置に関する音声操作サブ画面53を生成する。次に、生成された音声操作サブ画面53は、音声操作メイン画面52にかわり、表示画像送信部37を介して術野モニタ3に出力される。最後に、術野モニタ3は、システムコントローラ21から音声操作サブ画面53が入力されると、それまで音声操作メイン画面52が配置されていた領域に音声操作サブ画面53を配置して、内視鏡使用時における音声操作サブ画面を表示する。
例えば、ステップS8において、気腹装置14の音声操作を開始するためのトリガーとなる所定のキーワード(例えば「気腹装置」など)を術者が発声し、マイク33を介して音声認識部38が同音声を認識すると、ステップS9に進み、術野モニタ3に例えば図5に示すような画面が表示される。
続いて、術者が、音声操作サブ画面53に表示されている装置について、所望の操作を音声入力により指示し、音声認識部38が同音声を認識すると(ステップS10)、制御部36は、対象の装置に対して指示された操作を実行するよう、機器通信I/F部34を介して所定の装置に制御信号を出力する(ステップS11)。
例えば、気腹装置14が音声入力による操作対象として選択されている場合、ステップS10において、「アップ」など圧力を現在の設定値から上昇させる操作のキーワードを術者が発声し、マイク33を介して音声認識部38が同音声を認識すると、ステップS11に進み、制御部36は気腹装置14に対し、圧力値を現在の設定値から所定の値だけ上昇させるよう制御信号を出力する。以上の一連の処理により、音声入力による被制御装置の操作を終了する。
このように、本実施形態によれば、判別部40により光源装置16のランプ16aの点灯状態を識別し、ランプ16aが点灯している場合には、術野モニタ3の表示を自動的に切り替えて、内視鏡画像51と被制御装置の操作画面とを併せて表示させる。従って、術者は、内視鏡画像51から視線を外すことなく自身で被制御装置を操作することができ、操作性を向上させることができる。
なお、上述の実施形態においては、音声認識により清潔域にいる術者が自ら被制御装置を操作する場合について説明したが、音声に限定されるものではなく、例えば視線認識やジェスチャー認識など他の手法を用いてもよい。
また、上述の実施形態においては、光源装置16のランプ16aの点灯状態によって、術野モニタ3に内視鏡画像51と音声操作メイン画面52や音声操作サブ画面53を併せて表示させるか、それとも、音声操作画面54のみを表示させるか、の制御を行っている。内視鏡画像51が取得され術野モニタ3に出力されているか否かを判別して、術野モニタ3の表示を自動で切り替えるよう制御すればよいので、ランプ16aの点灯状況に限定されるのではなく、例えば内視鏡用カメラ装置15からの映像信号の入力有無によって、表示の切り替えを行うようにしてもよい。
さらに、上述の実施形態においては、内視鏡画像51表示時においては音声操作の入力画面を2階層設け、音声操作メイン画面52で被制御対象機器を選択し、音声操作サブ画面53で具体的な操作指示ができるようにしている。音声操作の入力画面は2階層に限定されるものではなく、3階層以上設けて順次切り替えて表示させるようにしてもよい。S
本明細書における各「部」は、実施の形態の各機能に対応する概念的なもので、必ずしも特定のハードウェアやソフトウエア・ルーチンに1対1には対応しない。従って、本明細書では、実施の形態の各機能を有する仮想的回路ブロック(部)を想定して実施の形態を説明した。また、本実施の形態における各手順の各ステップは、その性質に反しない限り、実行順序を変更し、複数同時に実行し、あるいは実行毎に異なった順序で実行してもよい。さらに、本実施の形態における各手順の各ステップの全てあるいは一部をハードウェアにより実現してもよい。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として例示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
本発明の医療システムによれば、術者が医療画像と操作画面とを術野モニタで同時に参照することができ、操作性を向上させることができる。
本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。
本出願は、2014年8月4日に日本国に出願された特願2014−158917号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲に引用されるものとする。

Claims (9)

  1. 内視鏡画像を得るための光源を体腔内に供給する光源装置と、
    前記内視鏡画像を表示する表示装置と、
    複数の被制御機器を制御する制御装置と、
    を有し、
    前記制御装置は、
    前記内視鏡画像が前記表示装置に表示されているか否かを判別する判別部と、
    前記判別部により前記内視鏡画像が前記表示装置に表示されていると判別されたときに前記被制御機器の操作を指示するための第一の操作指示画面と前記内視鏡画像とを前記表示装置に表示し、前記判別部により前記内視鏡画像が前記表示装置に表示されていない判別されたときに前記被制御機器の動作状態の確認及び前記被制御機器の操作の指示をするための第二の操作指示画面を前記表示装置に表示するように制御する制御部と、
    を有することを特徴とする、医療システム。
  2. 前記判別部は、前記光源装置のランプの点灯状態を識別し、前記ランプが点灯していると識別した場合には前記内視鏡画像が前記表示装置に表示されていると判別し、前記ランプが点灯していないと識別した場合には前記内視鏡画像が前記表示装置に表示されていないと判別することを特徴とする、請求項1に記載の医療システム。
  3. 前記制御装置は、前記判別部により前記内視鏡画像が前記表示装置に表示されていると判別されたときに、前記表示装置における前記内視鏡画像の表示位置を移動させることを特徴とする、請求項1に記載の医療システム。
  4. 前記制御装置は、前記表示装置において前記内視鏡画像の表示されていない領域に前記第一の操作指示画面を配置することを特徴とする、請求項1に記載の医療システム。
  5. 前記制御装置は、前記表示装置に前記第一の操作指示画面が表示されている状態において一の前記被制御機器が選択されると、前記選択された被制御機器についての動作状態の確認及び前記選択された被制御機器の操作の指示をするための第三の操作指示画面を前記表示装置に表示することを特徴とする、請求項1に記載の医療システム。
  6. 前記制御装置は、前記表示装置に前記第一の操作指示画面が表示されている状態において一の前記被制御機器が選択されると、前記第一の操作指示画面に換えて前記第三の操作指示画面を前記表示装置に表示することを特徴とする、請求項5に記載の医療システム。
  7. 前記制御装置は、音声認識部を備えており、音声入力により前記被制御機器を制御することを特徴とする、請求項1に記載の医療システム。
  8. 前記判別部は、前記音声認識部に所定の音声が入力されると、前記内視鏡画像が前記表示装置に表示されているか否かを判別することを特徴とする、請求項7に記載の医療システム。
  9. 内視鏡画像を得るための光源を体腔内に供給する光源装置と、
    前記内視鏡画像を表示する表示装置と、
    複数の被制御機器を制御する制御装置と、
    を有し、
    前記制御装置は、
    前記内視鏡画像が前記表示装置に表示されているか否かを判別する判別部と、
    前記判別部により前記内視鏡画像が前記表示装置に表示されていないと判別されたときに前記被制御機器の動作状態の確認及び前記被制御機器の操作の指示をするための操作指示画面を前記表示装置に表示するように制御する制御部と、
    を有することを特徴とする、医療システム。
JP2015562975A 2014-08-04 2015-04-01 医療システム Active JP5945644B1 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014158917 2014-08-04
JP2014158917 2014-08-04
PCT/JP2015/060363 WO2016021232A1 (ja) 2014-08-04 2015-04-01 医療システム

Publications (2)

Publication Number Publication Date
JP5945644B1 true JP5945644B1 (ja) 2016-07-05
JPWO2016021232A1 JPWO2016021232A1 (ja) 2017-04-27

Family

ID=55263517

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015562975A Active JP5945644B1 (ja) 2014-08-04 2015-04-01 医療システム

Country Status (5)

Country Link
US (1) US10130240B2 (ja)
EP (1) EP3095378B1 (ja)
JP (1) JP5945644B1 (ja)
CN (1) CN106061354B (ja)
WO (1) WO2016021232A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI20175247A (fi) * 2017-03-17 2018-09-18 Planmeca Oy Hammashoitokoneen operaatiovalaisin
JP6990292B2 (ja) * 2018-02-21 2022-01-12 オリンパス株式会社 医療システムおよび医療システムの作動方法
JP2020005751A (ja) * 2018-07-04 2020-01-16 オリンパス株式会社 内視鏡システム
WO2020110218A1 (ja) * 2018-11-28 2020-06-04 オリンパス株式会社 医療画像記録制御システム
US20220265384A1 (en) * 2019-07-05 2022-08-25 Sony Group Corporation Medical display system, control device, and control method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004105533A (ja) * 2002-09-19 2004-04-08 Olympus Corp 内視鏡外科システム
JP2004165728A (ja) * 2002-11-08 2004-06-10 Olympus Corp 制御システム
JP2012065698A (ja) * 2010-09-21 2012-04-05 Fujifilm Corp 手術支援システムおよびそれを用いた手術支援方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003070804A (ja) * 2001-09-05 2003-03-11 Olympus Optical Co Ltd 遠隔医療支援システム
US20050033117A1 (en) * 2003-06-02 2005-02-10 Olympus Corporation Object observation system and method of controlling object observation system
JP4698966B2 (ja) * 2004-03-29 2011-06-08 オリンパス株式会社 手技支援システム
JP5160025B2 (ja) * 2005-04-14 2013-03-13 オリンパスメディカルシステムズ株式会社 手術システム
JP2007175231A (ja) 2005-12-27 2007-07-12 Olympus Medical Systems Corp 医療用システム
US20080091065A1 (en) * 2006-10-04 2008-04-17 Olympus Medical Systems Corporation Medical image processing apparatus, endoscope system and medical image processing system
JP2008086666A (ja) * 2006-10-04 2008-04-17 Olympus Medical Systems Corp 内視鏡システム
JP2009119062A (ja) * 2007-11-15 2009-06-04 Olympus Medical Systems Corp 動作システム
US20090189978A1 (en) * 2008-01-29 2009-07-30 Olympus Medical Systems Corp. Medical support control system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004105533A (ja) * 2002-09-19 2004-04-08 Olympus Corp 内視鏡外科システム
JP2004165728A (ja) * 2002-11-08 2004-06-10 Olympus Corp 制御システム
JP2012065698A (ja) * 2010-09-21 2012-04-05 Fujifilm Corp 手術支援システムおよびそれを用いた手術支援方法

Also Published As

Publication number Publication date
CN106061354B (zh) 2018-12-21
EP3095378A1 (en) 2016-11-23
CN106061354A (zh) 2016-10-26
US20160338570A1 (en) 2016-11-24
WO2016021232A1 (ja) 2016-02-11
JPWO2016021232A1 (ja) 2017-04-27
EP3095378A4 (en) 2017-11-08
EP3095378B1 (en) 2018-12-19
US10130240B2 (en) 2018-11-20

Similar Documents

Publication Publication Date Title
JP5945644B1 (ja) 医療システム
JP5911655B1 (ja) 医療システム
JP2008000282A (ja) 手技画像記録制御システム及び手術システム
WO2018096987A1 (ja) 情報処理装置および方法、並びにプログラム
JP7188083B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP2006000538A (ja) 手術室制御システム
US11883120B2 (en) Medical observation system, medical signal processing device, and medical signal processing device driving method
JP6374263B2 (ja) 医療システム
US20190346743A1 (en) Light emission control apparatus, light emission control method, program, light emission apparatus, and imaging apparatus
CN110913787A (zh) 手术支持系统、信息处理方法和信息处理装置
US9782060B2 (en) Medical system
WO2021010193A1 (ja) 医療機器制御システム、制御装置、および制御方法
JP2016067692A (ja) 医療システム
US11812181B2 (en) Video routing in an operating theater
WO2020195186A1 (ja) ケーブル、報知方法
JP2006000537A (ja) 内視鏡システム
JP4127769B2 (ja) 医療制御システム
JP2006288956A (ja) 手術システム
JP2005245961A (ja) 画像処理装置
WO2019202808A1 (ja) 集中制御装置
WO2022014035A1 (ja) 集中制御装置及びデータログの表示方法
WO2019150743A1 (ja) 撮像装置、イメージセンサユニット、カメラユニット及び制御方法
JP2006218128A (ja) 手術システム

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20160422

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160530

R151 Written notification of patent or utility model registration

Ref document number: 5945644

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250