JP2003005777A - 手術システム制御装置 - Google Patents

Abstract

(57)【要約】 【課題】 音声入力された各種操作コマンドの音声認識
内容を告知することで、操作コマンドの誤認識による機
器の機能変更を確実に防止する。 【解決手段】 システムコントローラ１２は、音声認識
処理部４０とシステム制御部４１とからなり、音声認識
処理部４０は、マイク３１からの音声入力信号をデジタ
ル変換し記憶する音声データ記憶部４２と、音声データ
記憶部４２に記憶した音声データを認識処理する演算処
理部４３と、複数の標準音声データが格納されている標
準音声データ格納部４４とを備えて構成される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は手術システム制御装
置、更に詳しくは音声により機器を操作する音声操作部
分に特徴のある手術システム制御装置に関する。

【０００２】

【従来の技術】近年では内視鏡装置を用いた外科手術な
ども行われており、この内視鏡外科手術では、腹腔内を
膨張させるために用いる気腹装置や手技を行うための処
置装置であり、生体組織を切除、あるいは凝固する高周
波焼灼装置などの手術機器を前述の装置に加えることに
よって、内視鏡で観察しながら各種処置が行える。

【０００３】また、これら複数の各種機器を備えた内視
鏡手術システムにおいて、複数の装置を容易に操作、制
御することができ、システムの操作力性を向上させるた
め、術者が滅菌域で各種機器の設定状態を確認するため
の表示手段として液晶パネルなどの表示パネルや、術者
が滅菌域で操作し各種機器の機能または設定値を変更す
るための遠隔操作手段としてリモコン（リモートコント
ローラ）などの遠隔操作装置、さらには術者の指示に従
ってナース等の補助者が非滅菌域で操作し各種機器の機
能または設定値を変更するための各機器の操作スイッチ
をタッチパネルに設けた集中操作パネル、各種機器を音
声で操作するためのマイク等を備えている。

【０００４】

【発明が解決しようとする課題】しかしながら、従来の
内視鏡手術システムにおいて音声にて各種機器を操作す
る場合、術者が入力した音声情報を内視鏡手術システム
が正確に認識したかどうかを術者は把握できず、術者が
操作コマンドを発声しても、その操作コマンドを誤認識
した場合、術者が意図しない制御を行う虞があり、使い
勝手が悪いといった問題があった。

【０００５】本発明は、上記事情に鑑みてなされたもの
であり、音声入力された各種操作コマンドの音声認識内
容を告知することで、操作コマンドの誤認識による機器
の機能変更を確実に防止することのできる手術システム
制御装置を提供することを目的としている。

【０００６】

【課題を解決するための手段】本発明の手術システム制
御装置は、操作者の音声を電気信号である音声データに
変換して出力する音声入力手段と、前記音声入力手段よ
り入力した前記音声データを認識し認識結果に基づき被
制御手術装置を制御するための操作信号を生成すると共
に前記認識結果を告知するための告知用音声情報を出力
する音声認識処理手段と、前記告知用音声情報を音声に
変換して出力する音声出力手段と、前記操作信号に基づ
く制御信号を生成し前記被制御手術装置を制御する制御
手段とを備えて構成される。

【０００７】

【発明の実施の形態】以下、図面を参照しながら本発明
の実施の形態について述べる。

【０００８】図１ないし図７は本発明の第１の実施の形
態に係わり、図１は内視鏡外科手術システムの全体構成
を示す構成図、図２は図１の内視鏡外科手術システムの
各機器の接続関係を示すブロック図、図３は図２のシス
テムコントローラの構成を示すブロック図、図４は図３
の標準音声データ格納部の構成を示すブロック図、図５
は図３の演算処理部の処理の流れを示すフローチャー
ト、図６は図５の確認処理の流れを示すフローチャー
ト、図７は図５及び図６のエラー処理の流れを示すフロ
ーチャートである。

【０００９】図１及び図２に示すように、内視鏡外科手
術システムは、患者が横たわる手術用ベッド１の両側に
配置した第１のカート２及び第２のカート３には複数の
被制御装置である内視鏡周辺機器が搭載されている。

【００１０】前記第１のカート２には、内視鏡カメラ装
置４、光源装置５、高周波焼灼装置（電気メス）６、気
腹装置７、ＶＴＲ８、第１モニタ９、集中表示パネル１
０、看護婦などが遠隔的に操作する集中操作パネル１１
及び、手術システム制御装置であるシステムコントロー
ラ１２が搭載されている。

【００１１】それぞれの機器は、図示しないシリアルイ
ンターフェイスケーブルで前記システムコントローラ１
２に接続されて、双方向の通信を行えるようになってい
る。

【００１２】また、内視鏡カメラ装置４には内視鏡カメ
ラヘッド１３が、光源装置５にはライトガイド１４が接
続されており、これら内視鏡カメラヘッド１３、ライト
ガイド１４は内視鏡１５にそれぞれ接続されている。前
記気腹装置７にはＣＯ２ボンベ１６が接続され、気腹装
置７から患者に伸びた気腹チューブ１７により、患者の
腹腔内にＣＯ２ガスが供給されるようになっている。

【００１３】一方、第２カート３には内視鏡カメラ装置
１８、光源装置１９、超音波診断装置２０、画像処理装
置２１、第２モニタ２２、集中表示パネル１０、及び中
継ユニット２３が搭載され、それぞれの内視鏡周辺機器
は図示しないシリアルインターフェイスケーブルで前記
中継ユニット２３に接続されて、双方向の通信を行える
ようになっている。

【００１４】また、内視鏡カメラ装置１８には内視鏡カ
メラヘッド２４が、光源装置１９にはライトガイド２５
が接続されており、これら内視鏡カメラヘッド２４、ラ
イトガイド２５は内視鏡２６にそれぞれ接続されてい
る。

【００１５】また、前記コントローラ１２と前記中継ユ
ニット２３とはシステムインターフェイスケーブル２７
で接続されて双方向の通信を行えるようになっている。

【００１６】前記集中操作パネル１１は液晶ディスプレ
イ等の表示部と、この表示部の上に一体的に設けられた
タッチセンサとにより構成され、各装置の状態表示や、
操作スイッチなどを設定画面として表示する表示機能と
ともに、タッチセンサの所定領域を触れることで操作ス
イッチによる操作機能を有し、この遠隔的な操作で、シ
ステムコントローラ１２を介して各内視鏡周辺機器の操
作を直接行うのと同等の操作を行うことができるように
なっている。

【００１７】また、システムコントローラ１２には、音
声入力を行うマイク３１及び音声出力を行うイヤホン３
２が一体的に構成され術者頭部に搭載可能な音声入出力
装置３３が接続できるようになっており、システムコン
トローラ１５はマイク３１から入力された音声を後述す
る音声認識処理部４０（図３参照）により認識し、ま
た、認識した音声をイヤホン３２により音声出力するこ
とで、術者の音声による各機器の制御を確実に行うこと
ができるようになっている。

【００１８】この音声入出力装置３３は、術者が頻繁に
使用する周辺機器を集中的に遠隔操作するための遠隔操
作手段として用いられ、頻繁に使用する内視鏡周辺機器
の設定や操作を、滅菌領域にいながらにして術者自身が
音声により自在に行うためのものである。

【００１９】システムコントローラ１２は、図３に示す
ように、音声認識処理部４０とシステム制御部４１とか
らなり、音声認識処理部４０は、マイク３１からの音声
入力信号をデジタル変換し記憶する音声データ記憶部４
２と、音声データ記憶部４２に記憶した音声データを認
識処理する演算処理部４３と、複数の標準音声データが
格納されている標準音声データ格納部４４とを備えて構
成される。

【００２０】この演算処理部４３は、入力された音声デ
ータを音声データ記憶部４２に記憶させ、また、標準音
声データ格納部４４に格納されている複数の標準音声デ
ータに基づき音声データ記憶部４２に記憶した音声デー
タを認識処理し、認識した音声データの標準音声データ
を音声データ記憶部４２に記憶させ、音声データ記憶部
４２に記憶した標準音声データを用いてイヤホン３２に
音声出力し、さらに認識した音声データに応じた操作信
号をシステム制御部４１に出力するようになっている。
そして、システム制御部４１では操作信号に基づき、制
御対象機器に対して制御信号を送信するようになってい
る。

【００２１】図４に示すように、標準音声データ格納部
４４は、機器操作用標準音声データを格納した機器操作
用標準音声データ格納部４４ａ、確認用標準音声データ
を格納した確認用標準音声データ格納部４４ｂ、対話用
標準音声データを格納した対話用標準音声データ格納部
４４ｃ、音声認識失敗告知用標準音声データを格納した
音声認識失敗告知用標準音声データ格納部４４ｄからな
り、各格納部には図に示すような複数の文言に対応した
複数の標準音声データが格納されている。

【００２２】次にこのように構成された本実施の形態の
作用について説明する。

【００２３】図５に示すように、演算処理部４３は、ス
テップＳ１で内部のタイマー（図示せず）をリセットし
タイマー動作を停止する、また音声データ記憶部４２の
内容をクリアするといった初期設定処理を実行する。そ
して、ステップＳ２でタイマーの値が所定値以上かどう
か判断する。最初のステップＳ２の処理では、タイマー
の値は０であるので、ステップＳ３に進みマイク３１か
らの音声入力を待つ。

【００２４】そして、術者によりマイク３１から音声入
力がされると、ステップＳ４で音声データ記憶部４２に
標準音声データが記憶されているか否かを判断する。最
初のステップＳ４の処理では、音声データ記憶部４２が
クリアされているので、ステップＳ５に進み、ステップ
Ｓ５で入力された音声入力をデジタル変換し音声データ
記憶部４２に記憶させる。

【００２５】つぎに、ステップＳ６において、音声デー
タ記憶部４２に記憶した入力音声データと、標準音声デ
ータ格納部４４の機器操作用標準音声データ格納部４４
ａに格納されている複数の機器操作用標準音声データと
を順次比較し、ステップＳ７で音声データ記憶部４２に
記憶した入力音声データとの類似度が所定値以上の機器
操作用標準音声データがあるかどうかを判断して音声認
識処理を行い、類似度が所定値以上の機器操作用標準音
声データがある場合にはステップＳ８に進み、類似度が
所定値以上の機器操作用標準音声データがない場合には
ステップＳ９で後述するエラー処理を行いステップＳ１
に戻る。

【００２６】すなわち、術者が例えば「光量アップ」と
音声入力すると、この機器操作用の入力音声信号である
「光量アップ」がデジタル変換され入力音声データとし
て音声データ記憶部４２に記憶される（ステップＳ
５）。そして、音声データ記憶部４２に記憶した「光量
アップ」という入力音声データが機器操作用標準音声デ
ータ格納部４４ａに格納されている複数の機器操作用標
準音声データと順次比較され（ステップＳ６）、「光量
アップ」という入力音声データとの類似度が所定値以上
の機器操作用標準音声データがあるかどうかを判断する
（ステップＳ７）。この場合、「光量アップ」という機
器操作用標準音声データが機器操作用標準音声データ格
納部４４ａに格納されているので、ステップＳ８に進む
ことになる。

【００２７】そして、ステップＳ８で音声データ記憶部
４２に記憶されている機器操作用の入力音声データを類
似度が所定値以上の機器操作用標準音声データで更新
し、音声データ記憶部４２に類似度が所定値以上の機器
操作用標準音声データを記憶させる。

【００２８】次に、ステップＳ１０で音声データ記憶部
４２に記憶されている類似度が所定値以上の機器操作用
標準音声データに、標準音声データ格納部４４の対話用
標準音声データ格納部４３ｃに格納されている対話用標
準音声データを付加して音声出力データを生成し、ステ
ップＳ１１で生成した音声出力データに基づきイヤホン
３２に音声出力を行い、術者に対して認識結果を告知
し、ステップＳ１２でタイマーの動作を開始してステッ
プＳ２に戻ることで、認識結果に対する術者からの確認
のための音声入力を待つ。

【００２９】すなわち、上述したように例えば音声デー
タ記憶部４２に記憶されたデータが「光量アップ」とい
う入力音声データの場合、音声データ記憶部４２が「光
量アップ」という機器操作用標準音声データにより更新
され、音声データ記憶部４２に「光量アップ」という機
器操作用標準音声データが記憶される（ステップＳ
８）。そして、「光量アップ」という機器操作用標準音
声データに対話用標準音声データ格納部４４ｃに格納さ
れている「ですね？」という対話用標準音声データが付
加され、「光量アップですね？」という音声出力データ
が生成され（ステップＳ１０）、イヤホン３２より術者
に対して「光量アップですね？」という音声出力で認識
結果が告知され、ステップＳ１２を介してステップＳ２
に戻ることになる。

【００３０】そして、ステップＳ２及びＳ３でタイマー
が所定値以上になる前（所定時間の経過前）の音声入力
を待つ。タイマーが所定値以上になると、ステップＳ１
３でステップＳ９と同様後述するエラー処理を実行しス
テップＳ１に戻る。

【００３１】そして、ステップＳ３において音声入力が
あると、ステップＳ４で音声データ記憶部４２に標準音
声データが記憶されているか否かを判断する。認識結果
の告知後においては、音声データ記憶部４２には機器操
作用標準音声データが記憶されているので、ステップＳ
１４の後述する確認処理がなされ、ステップＳ１に戻
る。

【００３２】すなわち、機器操作用標準音声データに基
づく告知後に所定時間内に音声入力がない場合はエラー
処理（ステップＳ１３）が実行され、所定時間内に音声
入力があった場合には確認処理（ステップＳ１４）がな
されることになる。

【００３３】次に、上記ステップＳ１４の確認処理につ
いて説明する。図６に示すように、確認処理では、ま
ず、ステップＳ２１で入力された入力音声データを音声
データ記憶部４２に記憶し、ステップＳ２２で音声デー
タ記憶部４２に記憶された入力音声データと、標準音声
データ格納部４４の確認用標準音声データ格納部４４ｂ
に格納されている複数の確認用標準音声データとを順次
比較する。

【００３４】すなわち、ステップＳ２１において、音声
データ記憶部４２に記憶される入力音声データは、確認
用の入力音声データであって、「はい」あるいは「いい
え」という確認用の入力音声データとなるので、ステッ
プＳ２２では「はい」あるいは「いいえ」という確認用
の入力音声データが確認用標準音声データ格納部４４ｂ
に格納されている複数の確認用標準音声データと順次比
較される。

【００３５】そして、ステップＳ２３で確認用標準音声
データとの比較結果により、確認用の入力音声データと
「はい」という確認用標準音声データとの類似度が所定
値以上であって、かつ確認用の入力音声データが「いい
え」という確認用標準音声データの類似度以上かどうか
の認識、すなわち、「はい」と認識できたかどうかを判
断し、「はい」と認識できない場合はステップＳ２４で
後述するエラー処理を行い図５のステップＳ１に戻り、
「はい」と認識できた場合にはステップＳ２５に進む。

【００３６】次に、ステップＳ２５で音声データ記憶部
４２に記憶されている機器操作用標準音声データを解析
し、ステップＳ２６で解析した機器操作用標準音声デー
タに対応した操作信号をシステム制御部４１に出力し、
ステップＳ２７で音声データ記憶部４２内のデータをク
リアして図５のステップＳ１に戻る。

【００３７】続いて、上記エラー処理について説明す
る。図７に示すように、エラー処理では、ステップＳ３
１で標準音声データ格納部４４の音声認識失敗告知用標
準音声データ格納部４４ｄに格納されている音声認識失
敗告知用標準音声データを音声データ記憶部４２に記憶
し、ステップＳ３２で音声データ記憶部４２に記憶され
た音声認識失敗告知用標準音声データにより音声出力デ
ータを生成し、ステップＳ３３で生成した音声出力デー
タに基づきイヤホン３２に音声出力を行い、術者に対し
て認識失敗を告知し、ステップＳ３４で音声データ記憶
部４２内のデータをクリアして処理を終了する。

【００３８】すなわち、機器操作用の音声入力が認識で
きない場合、あるいは機器操作用の音声入力が認識され
た場合においても、所定時間内の確認用の音声入力がな
い場合、さらには確認用の音声入力が「はい」といった
肯定する確認用の音声入力でない場合に上記エラー処理
が実行され、音声認識失敗告知用標準音声データにより
例えば「最初からお願いします」といった音声出力で認
識失敗が術者に告知される。

【００３９】このように本実施の形態では、術者が音声
入力した入力音声データの認識結果を、認識した音声の
標準音声データによる音声出力で告知するので、認識さ
れた音声データを容易且つ確実に認知できるので、操作
コマンドの誤認識による機器の機能変更を確実に防止す
ることができる。

【００４０】また、対話用標準音声データを付加して音
声出力で告知するので、認識結果の判別が容易になる。

【００４１】さらには、認識結果の音声による告知後
に、確認用の音声入力を待つことで、より確実に操作コ
マンドの誤認識による機器の機能変更を防止することが
できる。

【００４２】図８ないし図１１は本発明の第２の実施の
形態に係わり、図８は標準音声データ格納部の構成を示
すブロック図、図９は図８の標準音声データ格納部を用
いた演算処理部の処理の流れを示すフローチャート、図
１０は図９の動作制御内容認識処理の流れを示すフロー
チャート、図１１は図１０の確認処理の流れを示すフロ
ーチャートである。

【００４３】第２の実施の形態は、第１の実施の形態と
ほとんど同じであるので、異なる点のみ説明し、同一の
構成には同じ符号をつけ説明は省略する。

【００４４】図８に示すように、本実施の形態の標準音
声データ格納部４４は、機器操作用標準音声データ格納
部４４ａの代わりに、制御機能用標準音声データを格納
した制御機能用標準音声データ格納部４４ｅ及び動作制
御内容用標準音声データを格納した動作制御内容用標準
音声データ格納部４４ｆを備えている。各格納部には図
に示すような複数の文言に対応した複数の標準音声デー
タが格納されている。その他の構成は第１の実施の形態
と同じである。

【００４５】次に、このように構成された本実施の形態
の作用について説明する。

【００４６】図９に示すように、演算処理部４３は、ス
テップＳ５１で内部のタイマー（図示せず）をリセット
しタイマー動作を停止する、また音声データ記憶部４２
の内容をクリアするといった初期設定処理を実行する。
そして、ステップＳ５２でタイマーの値が所定値以上か
どうか判断する。最初のステップＳ５２の処理では、タ
イマーの値は０であるので、ステップＳ５３に進みマイ
ク３１からの音声入力を待つ。

【００４７】そして、術者によりマイク３１から機器操
作用の音声入力がされると、ステップＳ５４で音声デー
タ記憶部４２に標準音声データが記憶されているか否か
を判断する。最初のステップＳ５４の処理では、音声デ
ータ記憶部４２がクリアされているので、ステップＳ５
５に進み、ステップＳ５５で入力された音声入力をデジ
タル変換し音声データ記憶部４２に記憶させる。

【００４８】つぎに、ステップＳ５６において、音声デ
ータ記憶部４２に記憶した入力音声データと、標準音声
データ格納部４４の制御機能用標準音声データ格納部４
４ｅに格納されている複数の制御機能用標準音声データ
とを順次比較し、ステップＳ５７で音声データ記憶部４
２に記憶した入力音声データとの類似度が所定値以上の
制御機能用標準音声データがあるかどうかを判断して音
声認識処理を行い、類似度が所定値以上の制御機能用標
準音声データがある場合にはステップＳ５８に進み、類
似度が所定値以上の制御機能用標準音声データがない場
合にはステップＳ５９で第１の実施の形態で説明したエ
ラー処理を行いステップＳ５１に戻る。

【００４９】すなわち、術者が例えば「光量」と音声入
力すると、この制御機能用の入力音声信号である「光
量」がデジタル変換され入力音声データとして音声デー
タ記憶部４２に記憶される（ステップＳ５５）。そし
て、音声データ記憶部４２に記憶した「光量」という入
力音声データが制御機能用標準音声データ格納部４４ｅ
に格納されている複数の制御機能用標準音声データと順
次比較され（ステップＳ５６）、「光量」という入力音
声データとの類似度が所定値以上の制御機能用標準音声
データがあるかどうかを判断する（ステップＳ５７）。
この場合、「光量」という制御機能用標準音声データが
制御機能用標準音声データ格納部４４ｅに格納されてい
るので、ステップＳ５８に進むことになる。

【００５０】そして、ステップＳ５８で音声データ記憶
部４２に記憶されている制御機能用の入力音声データを
類似度が所定値以上の制御機能用標準音声データで更新
し、音声データ記憶部４２に類似度が所定値以上の制御
機能用標準音声データを記憶させる。

【００５１】次に、ステップＳ６０で音声データ記憶部
４２に記憶されている類似度が所定値以上の制御機能用
標準音声データによる音声出力データを生成し、ステッ
プＳ６１で生成した音声出力データに基づきイヤホン３
２に音声出力を行い、術者に対して制御機能の認識結果
を告知し、ステップＳ６２でタイマーの動作を開始して
ステップＳ５２に戻ることで、認識結果に対する術者か
らの動作制御のための音声入力を待つ。

【００５２】すなわち、上述したように例えば音声デー
タ記憶部４２に記憶されたデータが「光量」という入力
音声データの場合、音声データ記憶部４２が「光量」と
いう制御機能用標準音声データにより更新され、音声デ
ータ記憶部４２に「光量」という制御機能用標準音声デ
ータが記憶される（ステップＳ５８）。そして、「光
量」という制御機能用標準音声データによる「光量」と
いう音声出力データが生成され（ステップＳ６０）、イ
ヤホン３２より術者に対して「光量」という音声出力で
制御機能の認識結果を告知され、ステップＳ６２を介し
てステップＳ５２に戻ることになる。

【００５３】そして、ステップＳ５２及びＳ５３でタイ
マーが所定値以上になる前（所定時間の経過前）の音声
入力を待つ。タイマーが所定値以上になると、ステップ
Ｓ５９で第１の実施の形態で説明したエラー処理を実行
しステップＳ５１に戻る。

【００５４】そして、ステップＳ５３において音声入力
があると、ステップＳ５４で音声データ記憶部４２に標
準音声データが記憶されているか否かを判断する。制御
機能の認識結果の告知後においては、音声データ記憶部
４２には制御機能用標準音声データが記憶されているの
で、ステップＳ６３の後述する動作制御内容認識処理が
なされ、ステップＳ５２に戻る。

【００５５】すなわち、制御機能用標準音声データに基
づく告知後に所定時間内に音声入力がない場合はエラー
処理（ステップＳ５９）が実行され、所定時間内に音声
入力があった場合には動作制御内容認識（ステップＳ６
３）がなされることになる。

【００５６】次に、上記ステップＳ６３の動作制御内容
処理について説明する。図１０に示すように、動作制御
内容処理では、まず、ステップＳ７１で入力された入力
音声データを音声データ記憶部４２に記憶し、ステップ
Ｓ７２で音声データ記憶部４２に記憶された入力音声デ
ータと、標準音声データ格納部４４の動作制御内容用標
準音声データ格納部４４ｆに格納されている複数の動作
制御内容用標準音声データとを順次比較する。

【００５７】すなわち、ステップＳ７１において、音声
データ記憶部４２に記憶される入力音声データは動作制
御内容用の入力音声データであって、ステップＳ７２で
例えば「アップ」という動作制御内容用の入力音声デー
タが動作制御内容用標準音声データ格納部４４ｆに格納
されている複数の動作制御内容用標準音声データと順次
比較される。

【００５８】そして、入力音声データと動作制御内容用
標準音声データとの比較結果により、ステップＳ７３で
入力音声データとの類似度が所定値以上の動作制御内容
用標準音声データがあるかどうか判断し、ある場合には
ステップＳ７４に進み、ない場合はステップＳ７５で後
述する確認処理を実行し図９のステップＳ５２に戻る。

【００５９】そして、ステップＳ７４で音声データ記憶
部４２に記憶されている動作制御内容用の入力音声デー
タを類似度が所定値以上の動作制御内容用標準音声デー
タで更新し、音声データ記憶部４２に類似度が所定値以
上の動作制御内容用標準音声データを記憶させる。

【００６０】次に、ステップＳ７６で音声データ記憶部
４２に記憶されている類似度が所定値以上の動作制御内
容用標準音声データに、標準音声データ格納部４４の対
話用標準音声データ格納部４３ｃに格納されている対話
用標準音声データを付加して音声出力データを生成し、
ステップＳ７７で生成した音声出力データに基づきイヤ
ホン３２に音声出力を行い、術者に対して認識結果を告
知し、ステップＳ７８でタイマーをリセットすると共に
タイマーの動作を開始して図９のステップＳ５２に戻る
ことで、認識結果に対する術者からの確認のための音声
入力を待つ。

【００６１】すなわち、上述したように例えば音声デー
タ記憶部４２に記憶されたデータが「アップ」という入
力音声データの場合、音声データ記憶部４２が「アッ
プ」という動作制御内容用標準音声データにより更新さ
れ、音声データ記憶部４２に「アップ」という動作制御
内容用標準音声データが記憶される（ステップＳ７
４）。そして、「アップ」という動作制御内容用標準音
声データに対話用標準音声データ格納部４４ｃに格納さ
れている「ですね？」という対話用標準音声データが付
加され、「アップですね？」という音声出力データが生
成され（ステップＳ７６）、イヤホン３２より術者に対
して「アップですね？」という音声出力で動作制御内容
の認識結果を告知され、ステップＳ７８を介して図９の
ステップＳ５２に戻ることになる。

【００６２】そして、再びステップ図９のＳ５２及びＳ
５３でタイマーが所定値以上になる前（所定時間の経過
前）の音声入力を待つ。タイマーが所定値以上になる
と、ステップＳ５９で第１の実施の形態で説明したエラ
ー処理を実行しステップＳ５１に戻る。

【００６３】そして、ステップＳ５３において音声入力
があると、ステップＳ５４で音声データ記憶部４２に標
準音声データが記憶されているか否かを判断する。動作
制御内容の認識結果の告知後においては、音声データ記
憶部４２には制御機能用及び動作制御内容用標準音声デ
ータが記憶されているので、再びステップＳ６３の図１
０の動作制御内容処理がなされ、ステップＳ５２に戻
る。

【００６４】そして、図１０の動作制御内容処理におい
て、上述したように、ステップＳ７１で入力された入力
音声データを音声データ記憶部４２に記憶し、ステップ
Ｓ７２で音声データ記憶部４２に記憶された入力音声デ
ータと、標準音声データ格納部４４の動作制御内容用標
準音声データ格納部４４ｆに格納されている複数の動作
制御内容用標準音声データとを順次比較する。

【００６５】すなわち、動作制御内容の認識結果の告知
後のステップＳ７１においては、音声データ記憶部４２
に記憶される入力音声データは確認用の入力音声データ
であって、ステップＳ７２で例えば「はい」という確認
用の入力音声データが動作制御内容用標準音声データ格
納部４４ｆに格納されている複数の動作制御内容用標準
音声データと順次比較される。

【００６６】そして、入力音声データと動作制御内容用
標準音声データとの比較結果により、動作制御内容の認
識結果の告知後においては、ステップＳ７３で入力音声
データとの類似度が所定値以上の動作制御内容用標準音
声データがないと判断され、ステップＳ７５の確認処理
を実行され、図９のステップＳ５２に戻る。

【００６７】次に、ステップＳ７５の確認処理について
説明する。図１１に示すように、まず、ステップＳ８１
で音声データ記憶部４２に記憶された入力音声データ
と、標準音声データ格納部４４の確認用標準音声データ
格納部４４ｂに格納されている複数の確認用標準音声デ
ータとを順次比較する。

【００６８】すなわち、音声データ記憶部４２に記憶さ
れる入力音声データは、確認用の入力音声データであっ
て、「はい」あるいは「いいえ」、「キャンセル」とい
う確認用の入力音声データとなるので、ステップＳ８１
では「はい」あるいは「いいえ」、「キャンセル」とい
う確認用の入力音声データが確認用標準音声データ格納
部４４ｂに格納されている複数の確認用標準音声データ
と順次比較される。

【００６９】そして、ステップＳ８２で確認用標準音声
データとの比較結果により、確認用の入力音声データと
「はい」という確認用標準音声データとの類似度が所定
値以上であって、かつ確認用の入力音声データが他の確
認用標準音声データの類似度以上かどうかの認識、すな
わち、「はい」と認識できたかどうかを判断し、「は
い」と認識できない場合はステップＳ８３で第１の実施
の形態で説明したエラー処理を行いステップＳ８７に進
み、「はい」と認識できた場合にはステップＳ８４に進
む。

【００７０】次に、ステップＳ８４で音声データ記憶部
４２に記憶されている制御機能用及び動作制御内容用標
準音声データを解析し、ステップＳ８５で解析した制御
機能用及び動作制御内容用標準音声データに対応した操
作信号をシステム制御部４１に出力し、ステップＳ８６
で音声データ記憶部４２内のデータをクリアして、ステ
ップＳ８７でタイマーをリセットすると共にタイマーの
動作を停止してステップＳ５２に戻る。

【００７１】このように本実施の形態によれば、第１の
実施の形態の効果に加え、認識結果の告知回数を増やす
ことで、より確実に操作コマンドの誤認識による機器の
機能変更を防止することができる。

【００７２】

【発明の効果】以上説明したように本発明によれば、音
声入力された各種操作コマンドの音声認識内容を告知す
ることで、操作コマンドの誤認識による機器の機能変更
を確実に防止することができるという効果がある。

【図面の簡単な説明】

【図１】本発明の第１の実施の形態に係る内視鏡外科手
術システムの全体構成を示す構成図

【図２】図１の内視鏡外科手術システムの各機器の接続
関係を示すブロック図

【図３】図２のシステムコントローラの構成を示すブロ
ック図

【図４】図３の標準音声データ格納部の構成を示すブロ
ック図

【図５】図３の演算処理部の処理の流れを示すフローチ
ャート

【図６】図５の確認処理の流れを示すフローチャート

【図７】図５及び図６のエラー処理の流れを示すフロー
チャート

【図８】本発明の第２の実施の形態に係る標準音声デー
タ格納部の構成を示すブロック図

【図９】図８の標準音声データ格納部を用いた演算処理
部の処理の流れを示すフローチャート

【図１０】図９の動作制御内容認識処理の流れを示すフ
ローチャート

【図１１】図１０の確認処理の流れを示すフローチャー
ト

【符号の説明】

１…手術用ベッド ２…第１のカート ３…第２のカート ４…内視鏡カメラ装置 ５…光源装置 ６…高周波焼灼装置（電気メス） ７…気腹装置 ８…ＶＴＲ ９…第１モニタ １０…集中表示パネル １１…集中操作パネル １２…システムコントローラ １３…内視鏡カメラヘッド １４…ライトガイド １５…内視鏡 １６…ＣＯ２ボンベ １７…気腹チューブ １８…内視鏡カメラ装置 １９…光源装置 ２０…超音波診断装置 ２１…画像処理装置 ２２…第２モニタ ２３…中継ユニット ２４…内視鏡カメラヘッド ２５…ライトガイド ２６…内視鏡 ２７…システムインターフェイスケーブル ３１…マイク ３２…イヤホン ３３…音声入出力装置 ４１…音声認識処理部 ４２…音声データ記憶部 ４３…演算処理部 ４４…標準音声データ格納部 ４４ａ…機器操作用標準音声データ格納部 ４４ｂ…確認用標準音声データ格納部 ４４ｃ…対話用標準音声データ格納部 ４４ｄ…音声認識失敗告知用標準音声データ格納部

フロントページの続き (72)発明者 藤田 征哉 東京都渋谷区幡ヶ谷２丁目43番２号 オリ ンパス光学工業株式会社内 (72)発明者 内久保 明伸 東京都渋谷区幡ヶ谷２丁目43番２号 オリ ンパス光学工業株式会社内 (72)発明者 本田 吉隆 東京都渋谷区幡ヶ谷２丁目43番２号 オリ ンパス光学工業株式会社内 (72)発明者 安永 浩二 東京都渋谷区幡ヶ谷２丁目43番２号 オリ ンパス光学工業株式会社内 (72)発明者 中野 忠博 東京都渋谷区幡ヶ谷２丁目43番２号 オリ ンパス光学工業株式会社内 (72)発明者 中村 剛明 東京都渋谷区幡ヶ谷２丁目43番２号 オリ ンパス光学工業株式会社内 Ｆターム(参考） 4C061 HH51 JJ17 5D015 KK01 LL03 LL06

Claims (5)

【特許請求の範囲】
1. 【請求項１】 操作者の音声を電気信号である音声デー
   タに変換して出力する音声入力手段と、 前記音声入力手段より入力した前記音声データを認識
   し、認識結果に基づき被制御手術装置を制御するための
   操作信号を生成すると共に、前記認識結果を告知するた
   めの告知用音声情報を出力する音声認識処理手段と、 前記告知用音声情報を音声に変換して出力する音声出力
   手段と、 前記操作信号に基づく制御信号を生成し前記被制御手術
   装置を制御する制御手段とを備えたことを特徴とする手
   術システム制御装置。
2. 【請求項２】 前記音声認識処理手段は、 前記音声データを認識するために類似度を比較する複数
   のコマンド用標準音声データを格納した標準音声データ
   格納手段を有し、 前記標準音声データ格納手段内に前記音声データと所定
   値以上の類似度を有する前記コマンド用標準音声データ
   がある場合、前記所定値以上の類似度を有する前記コマ
   ンド用標準音声データを前記告知用音声情報とすること
   を特徴とする請求項１に記載の手術システム制御装置。
3. 【請求項３】 前記音声認識処理手段は、 前記標準音声データ格納手段内に前記音声データと所定
   値以上の類似度を有する前記コマンド用標準音声データ
   がある場合、前記所定値以上の類似度を有する前記コマ
   ンド用標準音声データを解析し前記操作信号を生成する
   ことを特徴とする請求項２に記載の手術システム制御装
   置。
4. 【請求項４】 前記標準音声データ格納手段は、対話用
   標準音声データを有し、 前記音声認識処理手段は、前記所定値以上の類似度を有
   する前記コマンド用標準音声データに前記対話用標準音
   声データを付加して前記告知用音声情報とすることを特
   徴とする請求項２または３に記載の手術システム制御装
   置。
5. 【請求項５】 前記標準音声データ格納手段は、認証用
   標準音声データを有し、 前記音声認識処理手段は、前記音声出力手段の前記告知
   用音声情報の音声出力後に、前記音声入力手段からの前
   記音声データと前記認証用標準音声データとの類似度を
   比較し、前記音声データと前記認証用標準音声データと
   の類似度が所定値以上の場合に、前記所定値以上の類似
   度を有する前記コマンド用標準音声データを解析し前記
   操作信号を生成することを特徴とする請求項２に記載の
   手術システム制御装置。