JP2004077601A

JP2004077601A - 音声入力機能を有する稼働装置

Info

Publication number: JP2004077601A
Application number: JP2002234939A
Authority: JP
Inventors: Yasuhiko Yamaguchi; 山口　恭彦
Original assignee: Konica Minolta Inc
Current assignee: Konica Minolta Inc
Priority date: 2002-08-12
Filing date: 2002-08-12
Publication date: 2004-03-11

Abstract

【課題】動作音が発生する装置において音声入力による操作指令をできるだけ誤りなく行うことを可能にする。
【解決手段】音声入力部２３と、音声認識部２４と、音声認識結果に基づいて操作指令を特定する操作指令特定部２５と、特定された操作指令に基づいて装置の動作を制御する制御部と、動作音を動作シーケンスに関連付けて記憶する動作音データ記憶部２６０とを有している。音声認識部２４は、動作シーケンス情報に基づいて対応する動作音データを動作音データ記憶部から取出し、該動作音データに基づいて前記音データから音声データを抽出して音声認識を行う。
【効果】動作によって異なる動作音が発生したり、動作音が刻々と変化する場合にも、高精度で入力音声の認識を行って確実に操作の指令を行うことできる。
【選択図】　　　　図４

Description

【０００１】
【発明の属する技術分野】
本発明は、非健常者に対しても操作性が問題とならず、音声入力によって複合機、画像形成装置、ＭＦＰ、ファクシミリ、複写機、コピー等の操作指令を可能とする音声入力機能を有する稼働装置に関するものである。
【０００２】
【従来の技術】
画像形成装置等の各種装置を動作させる際には、手動で操作パネルや操作スイッチを操作して装置への操作指令を行うのが一般的である。また、最近では、このような操作が困難な非健常者に対しても音声入力によって操作を可能としたユニバーサルデザインの機器も提供されるようになっている。
上記のように音声入力による操作指令を可能とする装置では、図７に示すように、一般に、操作者の音声を入力するマイクロホン１と該マイクロホン１で得られる信号をＡ／Ｄ変換するＡ／Ｄ変換部２とにより音声入力部が構成されている。該音声入力部で取得された音声データは音声認識部３に送られる。音声認識部３には音声データが記憶された音声データ記憶部４が備えられている。音声認識部３では、音声データ記憶部４に記憶された音声データを用いて入力音声データから入力音声を認識する。認識結果は操作指令特定部５に送られる。該操作指令特定部５には指令に関するデータが記憶された操作指令データ記憶部６が備えられている。操作指令特定部５では、上記認識結果に基づいて操作指令データ記憶部６に記憶された操作指令データを取り出して音声入力による操作指令を特定する。特定された操作指令は、制御部７に送られる。該制御部７では、操作指令内容に従って装置本体を制御して動作させる。すなわち、この装置では、対応する指令データを記憶させておくことにより音声入力に従って所望の操作指令を行うことができる。
【０００３】
また、音声入力の適切化を図るため、距離検知手段によって携帯情報端末装置と使用者との距離を検知し、検知した距離に応じて音声入力装置の音声入力感度を調整するものが提案されている（特開平１１−３０５９８４号）。この調整方法を上記画像形成装置等に適用して、より適切な音声入力を可能にすることもできる。
【０００４】
ところで、上記した入力音声の認識では、装置の周辺で騒音が発生していると、操作者が発生した音声に周囲の騒音が取り込まれた状態でマイクロホン等に入力されるため、この騒音によって入力音声の認識率が低下するという問題がある。特に画像形成装置のように稼働部分を有する装置では、稼働に伴って動作音が発生し、この動作音が音声とともに取り込まれることで音声認識率を一層低下させる。上記のような距離に応じた調整方法では、音声感度とともに騒音の感度も調整されてしまうので、音声の認識率を高めることは困難である。
そこで、予測される動作音等の騒音をデータ化しておき、この騒音データをマイクロホン等で入力した音データから除外するようにして音声の認識率を向上させる方法が提案されている。
【０００５】
【発明が解決しようとする課題】
上記のように騒音データを除外する方法では、定量的な騒音の場合には、適切な騒音データを記憶しておくことにより、音声の認識率も相当に改善することが期待される。しかし、画像形成装置でコピーやプリンタ、スキャナ動作を実施しているような場合、装置は一連のプロセスシーケンスに従って動作しており、給紙やドラム駆動等の動作が順次行われる。この動作に際しては給紙時の紙捌き音やドラム駆動のモータ音等の動作音が強弱変化したり異なる動作音として発生する。このため、動作シーケンスに従って動作音が発生する稼働装置では、上記のようにして騒音データを除外する従来の方法によっても音声認識の精度を十分に高めることができず、操作者が発声する音声の誤認識が発生してしまうという問題がある。
【０００６】
本発明は、上記事情を背景としてなされたものであり、動作シーケンスに従って稼働する装置において音声入力による操作指令を高精度に認識して実行することを可能にする、音声入力機能を有する稼働装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
上記課題を解決するため本発明の音声入力機能を有する稼働装置のうち請求項１記載の発明は、操作者の発声に基づく音声入力により操作指令を可能とするとともに、装置が動作シーケンスに伴って稼働する際に発生する動作音を予め動作音データとしてデータ化しておき、前記入力音声を認識して操作指令を判別する際に、動作シーケンスに対応する前記動作音データを参照して前記音声入力において取得された音データから音声データを抽出し、該音声データに基づいて入力音声を認識することを特徴とする。
【０００８】
請求項２記載の音声入力機能を有する稼働装置の発明は、操作者の発声に基づく音声を入力する音声入力部と、該音声入力部で得られた音データに基づいて音声を認識する音声認識部と、該音声認識部で得られた認識結果に基づいて操作指令を特定する操作指令特定部と、該操作指令特定部で特定された操作指令に基づいて装置の動作を制御する制御部と、該制御部により制御される動作シーケンスに従って発生する動作音を、予め前記動作シーケンスに関連付けて記憶しておく動作音データ記憶部とを有しており、前記音声認識部では、前記制御部から与えられる動作シーケンス情報に基づいて対応する動作音データを前記動作音データ記憶部から取出し、取り出された動作音データに基づいて前記音データから音声データを抽出して入力音声の認識を行うことを特徴とする。
【０００９】
請求項３記載の音声入力機能を有する稼働装置の発明は、請求項２記載の発明において、前記動作音データ記憶部は、一つの仕向地に対応する動作音データを一群として、複数の仕向地に応じて複数の動作音データ群が記憶されていることを特徴とする。
【００１０】
請求項４記載の音声入力機能を有する稼働装置は、請求項３記載の発明において、前記音声認識部は、音声情報と関連付けて音声データを記録した音声データ記録部を備えているとともに、音声入力部で入力された音声データと、前記音声データ記録部に記録された記録音声データとを照合し、適合する記録音声データを判別してこれに関連する音声情報から入力音声を認識するものであることを特徴とする。
【００１１】
請求項５記載の音声入力機能を有する稼働装置は、請求項４記載の発明において、前記音声データ記憶部には、一つの言語に対応する音声データを一群として、複数の言語に応じて複数の音声データ群が記憶されていることを特徴とする。
【００１２】
請求項６記載の音声入力機能を有する稼働装置の発明は、請求項２〜５のいずれかに記載の発明において、前記音声認識部での音声認識が不可であった場合に、操作者に通知する認識不可通知手段を有することを特徴とする。
【００１３】
請求項７記載の音声入力機能を有する稼働装置の発明は、請求項２〜６のいずれかに記載の発明において、前記操作指令特定部での操作指令の特定内容が不正であった場合に、操作者に通知する指令不可通知手段を有することを特徴とする。
【００１４】
請求項８記載の音声入力機能を有する稼働装置は、請求項１〜７のいずれかに記載の発明において、前記動作音データは、一連の動作シーケンスに対応して時間変化に対しデータが変化するものであることを特徴とする。
【００１５】
請求項９記載の音声入力機能を有する稼働装置は、請求項１〜８のいずれかに記載の音声入力機能を有する稼働装置において、前記動作音データが、音量に関するものであることを特徴とする。
【００１６】
請求項１０記載の音声入力機能を有する稼働装置は、請求項１〜９のいずれかに記載の音声入力機能を有する稼働装置において、前記動作音データが、音質に関するものであることを特徴とする。
【００１７】
請求項１１記載の音声入力機能を有する稼働装置は、請求項１〜１０のいずれかに記載の発明において、前記音データから音声データを抽出する際には、前記音データから前記動作音データを除去して音声データとすることを特徴とする。
【００１８】
請求項１２記載の音声入力機能を有する稼働装置は、請求項１〜１１のいずれかに記載の発明において、前記音データから音声データを抽出する際には、前記音データと前記動作音データとの差分を音声データとすることを特徴とする。
【００１９】
請求項１３記載の音声入力機能を有する稼働装置は、請求項１〜１２のいずれかに記載の発明において、前記音データから音声データを抽出する際には、前記音データの内、動作音データに相当するデータ分を相対的に低量化して音声データとすることを特徴とする。
【００２０】
請求項１４記載の音声入力機能を有する稼働装置は、請求項１〜１３のいずれかに記載の発明において、画像形成部を備えることを特徴とする。
【００２１】
請求項１５記載の音声入力機能を有する稼働装置は、請求項１〜１４のいずれかに記載の発明において、音声認識に際しての音データの調整量を表示する調整量表示部を備えることを特徴とする。
【００２２】
請求項１６記載の音声入力機能を有する稼働装置は、請求項１〜１５に記載の発明において、装置近傍で発生する音を検知する周囲音検知手段を備え、該周囲音検知手段によって得られた周囲音データから周囲の騒音データを取得し、該騒音データを前記動作音データとともに参照して前記音データから音声データを抽出することを特徴とする。
【００２３】
請求項１７記載の音声入力機能を有する稼働装置は、請求項１６記載の発明において、前記騒音データと前記動作音データとを参照する際に、騒音データに含まれる動作音に関するデータ分を除外することを特徴とする。
【００２４】
すなわち本発明によれば、シーケンス動作に伴って発生する動作音に関する動作音データが予め記憶されているので、音声入力に際し、動作シーケンスに従って記録されている動作音データを取出し、この動作音データを用いて音声入力により得た音データから音声データを抽出し、音声認識を行う。この音声認識に際しては動作シーケンスに従って刻々と変化する動作音データが参照されるので、音データから排除すべき騒音分を動作シーケンス情報に従って正確に把握して音声データを抽出することができ、音声認識精度が大幅に向上して装置に対する的確な操作指令を実行することができる。
【００２５】
なお、本発明で対象とされる稼働装置は、代表的には、複合機、画像形成装置、ＭＦＰ、ファクシミリ、複写機、コピー等の画像形成部を備えるものを示すことができる。これら装置では、画像形成部を含めた各部の動作において種々の動作音が発生しており、しかも動作音は刻々変化することもあり、従来の音声入力方法では精度の高い音声認識が困難であったものである。ただし、本発明としては適用される装置が上記に限定されるものではなく、動作シーケンスに従って動作し、稼働時に予測可能な動作音が発生するとともに、動作シーケンス情報が得られる装置であれば広く適用可能である。
【００２６】
動作シーケンスに従って発生する動作音データは、音声入力認識の精度を向上させるために、予め動作シーケンスに従った動作状態、動作音を検知／認識しておき、動作シーケンスに関連付けて、種々の記憶手段に読み出し可能に記憶しておく。なお、記憶手段は特に限定されるものではなく、ハードディスク、フラッシュメモリ等、適宜の記憶手段に記憶させておけばよい。また、ネットワークを介してデータが提供されるものでもよい。
【００２７】
動作音データの記憶に際しては、例えば、画像形成プロセス等の動作時に発生する騒音レベルを時間軸にてＴａｂｌｅ化して、そのＴａｂｌｅ値から参照する可変騒音レベルにより、音データから音声データを抽出する際の調整量を可変にする。動作音データとしては、音量に関しデータ化したものでもよいが、発生する騒音は、音量のみでなく、音の高低や音質も特有なものがあるため、これらの特性まで含めて動作音データとしてデータ化することも可能である。
前記動作音データは、仕向地毎に動作音データ群を設定して、仕向地に応じて一つの動作音データ群を選定するようにしてもよい。また、仕向地毎の動作音群データをホストやフラッシュメモリ等に用意しておき、仕向地に合わせて必要な動作音データ群を選定し、該群に含まれる動作音データを利用するようにしてもよい。
【００２８】
音声データを抽出する際の調整方法の一つとしては、音データから動作音データを除去して、残余を音声データとする方法が挙げられる。また、他の方法としては、音データと動作音データとの差分を音声データとする方法が挙げられる。さらに、音データの内、動作音データに相当するデータ分を相対的に低量化して音声データを抽出することもできる。ただし、本発明としては、音声データの抽出方法が上記に限定されるものではなく、動作シーケンスに従って刻々と変化する動作音データによって調整量を定め、動作シーケンスに従って変化する該調整量によって効果的に音データから音声データを抽出できるものであればよい。したがって、動作音の性質等によって各方法で抽出効果が異なるような場合には、動作音によってより抽出効果が高い方法を選定すればよい。また、一つの稼働装置において、複数の動作シーケンスを有する場合、該動作シーケンスの内容によって異なる抽出方法を採択することもできる。
【００２９】
また、上記音声データの抽出に際しては、装置近傍で発生する音を検知する周囲音検知手段を設け、該検知手段によって得られた周囲音データから周囲の騒音データを取得し、該騒音データを前記動作音データとともに参照して認識精度を改善することもできる。この方法によれば、装置の動作音以外の周囲の騒音も音データから排除できるので、認識精度の向上が期待できる。
なお、騒音データに動作音に関するデータ分も含まれるような場合には、騒音データから動作音データ分を除外することで動作音データが重複して排除されるのを避けることができる。
【００３０】
なお、本発明で音声を入力する手段としては、従来公知の音声入力部を用いることができる。該音声入力部は、通常、マイクロホン等の音入力を行う機器と、得られた音をＡ／Ｄ変換するＡ／Ｄ変換部とを有している。なお、音声が入力されるマイクロホン等の音入力機器は、動作音が発生する原稿送り装置、操作ブザー等の近傍をさけて、設置する方が良い。
なお、音声入力を行う際には、上記動作音データによる調整量をレベル表示することにより、操作者に注意を喚起することができる。操作者は、調整量が大きい場合には、入力音声が勝るように十分に大きな音量で発音したり明瞭に発声することにより認識精度を上げることができる。一方、調整量がそれ程大きくない場合には、通常の音量で音声入力をしても高い認識精度が得られるため、必要以上の配慮をして、大きな声等で音声入力を行う必要がない。
【００３１】
上記構成により音声入力部でデジタル音信号が得られる。該デジタル音信号は、上記のように動作音データを参照して音声データが抽出され、該音声データに対し認識処理がなされ、入力音声が認識される。認識処理に際しては、予め音声情報と関連付けて音声データを記憶しておき、入力音声データと照合することにより合致する音声データを探知し、これに関連付けた音声情報から入力音声の認識を行うことができる。なお、記録された音声データに合致するか否かは、正にデータが合致する場合の他、所定の類似度で両データが類似する場合にも合致するものと判定することができる。類似度は、誤認識の程度等を勘案して適宜定めることができる。また、各種レベルをユーザーが設定できるような構成とすることもできる。
【００３２】
なお、音声データは複数の言語に対応できるように、前記音声データ記憶部には、一つの言語に対応する音声データを一群として、複数の音声データ群を記憶しておくこともできる。音声データ群は操作者が選択してもよく、また、仕向地に応じて使用する音声データ群を設定しておいてもよい。
さらに複数の言語に応じて音声データ群をホスト等、フラッシュメモリに用意しておき、該ホスト等から必要な音声データ群が得られるようにしてもよい。
【００３３】
入力音声を認識した後、認識結果に基づいて操作指令が特定される。認識結果は音声情報として得られるものでもよく、また文字情報に変換したものであってもよく、要は入力音声に対応する情報が得られるものであればよい。操作指令の特定では、認識結果で用いられる情報に対応する形で操作指令内容データを記憶しておき、認識結果に基づいて対応する操作指令データを検索して操作指令を決定することができる。操作指令データは、全ての操作指令に対応するものでもよく、また、音声入力を許容する一部の操作指令に対応するものでもよい。
操作指令を特定した後は、特定された操作指令に基づいて装置の動作制御がなされる。操作指令は、装置を稼働させる指令であってもよく、また稼働のための設定等を行う指令であってもよい。
【００３４】
上記音声認識において不明瞭な発声や雑音の混入によって、音声認識が正常に行われなかったときや、操作指令の特定が不可であったときに、装置の表示部に不可情報を表示したり、ＬＥＤの点滅で操作者への通知を実施することが可能である。これにより操作者は、指令が実行されなかった原因を知って適切な対応を行うことができる。また、音声認識が正常に行われない可能性が高いような環境では、予め、その旨を表示しても良い。
【００３５】
【発明の実施の形態】
以下に、本発明の一実施形態を説明する。この実施形態では、稼働装置として画像形成装置に適用する場合について説明する。
図１は、本発明の画像装置をブロック図で示すものであり、図２は、操作部およびタッチパネルを含む操作パネルを示す図であり、図３は、タッチパネルに表示された画面の一例を示すものである。
【００３６】
画像形成装置１０は、該装置の各部を制御するＣＰＵ１１を備えており、該ＣＰＵ１１は、フラッシュロム１２に格納されたプログラムによって定められた手順に従って動作する。また画像形成装置１０は、手動で操作指令を行うための操作部１３と各種情報を表示するためのＬＣＤ１４とを有している。前記操作部１３は、図２に示すように画像形成装置１０の前面操作パネルに設けられた操作キー群１３ａとタッチパネル１４ａとで構成されており、タッチパネル１４ａはＬＣＤ１４上で入力を可能とするものである。すなわちタッチパネル１４ａは、図３に示すように、適宜のメッセージ、設定内容等の表示が可能になっているとともに、手動で操作指令を行うことができるようにタッチ入力が可能になっている。ＬＣＤ１４上の表示内容は、上記ＣＰＵ１１から与えられ、操作部１３による入力情報はＣＰＵ１１に送られて、所定の処理がなされる。
【００３７】
また、画像形成装置１０は、原稿読み取り部１５を有しており、上記ＣＰＵ１１に接続されている。該原稿読み取り部１５は、上記ＣＰＵ１１により制御されつつ原稿を読み取り、画像データを得る手段である。この原稿読み取り部１５は、一般に、原稿台に置かれた原稿に光照射して、反射光をＣＣＤで受けて画像データを得るものであり、所望によりＡＤＦ（自動原稿送り装置）を備えることもできる。また、画像形成装置１０は、不揮発ＲＡＭ１６を備えており、該不揮発ＲＡＭ１６には、画像読み取り条件等、画像形成装置１０の動作において必要な設定事項が記憶されており、該記憶内容は書き換え可能になっている。ＣＰＵ１１は、上記原稿の読み取りに際し、不揮発ＲＡＭ１６から設定事項を読み出し、操作指令によって設定事項に変更がなければ、この読み出された設定事項に従って原稿の読み取りを行う。原稿読み取り部１５で読み取られた画像データは、ＲＡＭ１７に一時保存される。また上記画像データは、所望により後述するハードディスク２６に記録することもできる。
【００３８】
また、画像形成装置１０は、ＣＰＵ１１で制御される画像形成部１８を備えている。この実施形態の画像形成部１８は、上記原稿読み取り部１５で得た画像データに対し必要に応じて適宜の信号処理を行い、このデータに基づいて電子写真プロセスにより画像を形成するものである。画像形成部１８は、一般に、画像データに基づいて潜像させる感光体ドラムを備えている。該潜像は、レーザ書き込みにより感光体ドラムを露光することにより行われる。
【００３９】
さらに画像形成装置１０は、上記感光体ドラムに形成された潜像（トナー像）を転写するための転写部１９を備えている。該転写部１９では、搬送されてくる記録紙に前記感光体ドラムからトナー像を転写し、該記録紙を感光体ドラムから分離した後、記録紙上のトナー像を定着させる動作を行う。
給紙部２０は、複数枚の記録紙を積層状態で格納しておいて、必要に応じて上記転写部１９に記録紙を供給するものである。なお、給紙部２０を複数備え、それぞれにサイズの異なる用紙を格納するものであってもよい。
【００４０】
ネットワーク制御部２１は、ＬＡＮインターフェースを備え、所定の通信プロトコルによりＬＡＮとの通信を行うように構成されている。
ＦＡＸ制御部２２は、モデムを備え、所定の通信プロトコルにより電話回線を通じた通信を行うように構成されている。
【００４１】
さらに画像形成装置１０は、音声入力部２３と音声認識部２４と操作指令特定部２５を備えている。該音声入力部２３は、図４に示すように音声を入力するマイクロホン２３０とマイクロホン２３０で得たアナログ音信号をデジタル音信号に変換するＡ／Ｄ変換部２３１とを備えている。なお、マイクロホン２３０は、図２に示すように操作パネルの適所に設けることができ、これにより音声入力による処理状況をタッチパネル１４ａの表示を通して容易に知ることができる。
【００４２】
音声認識部２４は、音声入力部で得た音データから入力音声を認識するものであり、前記したＣＰＵ１１とプログラムとによって構成することができる。またハードディスク２６には動作音データベース２６０と音声データ２６１ベースとが設けられている。動作音データベース２６０では、動作シーケンスに関連付けて動作音データが記録されており、音声データベース２６１では、音声情報に関連付けて音声データベースが記録されている。すなわちハードディスク２６は、音声データ記憶部および動作音データ記憶部の役割を有している。音声認識部２４は、音声データ抽出部２４０と音声データ認識部２４１とを有している。音声データ抽出部２４０は、ハードディスク２６にアクセスして動作音データベース２６０から動作音データを取り出すことができ、音声データ認識部２４１は、ハードディスク２６にアクセスして音声データベース２６１から音声データを取り出すことができるように構成されている。
【００４３】
操作指令特定部２５は、音声認識部２４で認識された入力音声に基づいて操作指令を特定するものであり、前記したＣＰＵ１１とプログラムとによって構成することができる。またハードディスク２６には操作指令を特定するため操作指令データベース２６２が設けられている。該操作指令データベース２６２では、音声情報に関連付けて操作指令データが記憶されている。すなわちハードディスク２６は、操作指令データ記憶部の役割を有している。操作指令特定部２５で特定された操作指令は、ＣＰＵ１１によって所定の操作制御がなされる。
【００４４】
また、画像形成装置１０は、上記音声データ抽出部２４０で動作音データによって音データを調整する際の調整量を示すことができる調整量ＬＥＤ３０が、前記した操作パネルに設けられている。この実施形態の調整量ＬＥＤ３０は、調整量が所定値以上（動作音データの排除分が大きい）になった際に点灯して調整量が大きいことを示すようにされている。
【００４５】
次に、上記画像形成装置１０において音声入力によって操作指令を行う際の手順を図５のフローチャート図を参照しつつ説明する。
画像形成装置１０では、図３に示すように、初期画面が表示されており、初期設定事項が網掛けで表示されている。
この状態で音声入力によって「ゲンコウヨミコミ」を実行したり、設定内容を変更するために「サイズエーヨン」等の設定変更を行うことができる。音声入力可能な指令事項は、手動で操作可能のものの全てを対象にすることもでき、また、特定の指令事項のみ音声入力で操作可能としてもよい。
操作者は、必要に応じて音声入力を行う。この際に、画像形成装置１０において誤入力が生じないように、「オンセイニュウリョク」等の開始コマンドを音声で指示することを必須にしておくこともできる。
【００４６】
画像形成装置１０で音声入力を検知すると、音声入力による操作指令タスクが実行される。
操作者が発生した音声は、マイクロホン２３０で感知され入力音に対応してアナログ音信号が生成される。該アナログ信号は、Ａ／Ｄ変換部２３１でデジタル化され、音データが音声認識部２４へと送られる。音声認識部２４では、ＣＰＵ１１から与えられる動作シーケンス情報が取得されている。該動作シーケンス情報は、動作の内容情報と、シーケンスの進行情報とからなり、進行情報は刻々と変化しつつ音声認識部２４で取得されている。音声認識部２４の音声データ抽出部２４０では、上記動作シーケンス情報に従って動作音データベース２６０から動作音データが読み出される。この際には、動作シーケンスの内容に従って刻々と変化する一連の動作音データを取得すればよい。そして、音声データ抽出部２４０では、上記動作シーケンスの進行情報に従って、該進行情報に合致する動作音データを抽出する。音声データ抽出部２４０では、この動作音データを参照して音データを調整して音声データを抽出する。音データの調整は、この実施形態では動作音データを音量および音質の観点から除去する方法により行う。このときの調整量が大きい（相対的に動作音データ分が大きくなっている状態）場合、所定値を超えると前記した調整量ＬＥＤ３０を点灯させて操作者に注意を促す。
【００４７】
また、動作シーケンス情報に従えば、動作音の発生を無視できる状態（動作音がないか、ごく小さい動作音である場合）では、動作音データの参照を行わず、音データをそのまま音声データとして音声データ認識部２４１に受け渡すこともできる。
音声データ抽出部２４０で抽出された音声データは、次いで音声データ認識部２４１に送られる。音声データ認識部２４１では、得られた音声データを基に、音声データベース２６１から類似する音声データを検索する。この検索に際しては、例えば音声データをパラメータ化して、適宜の類似度を有するものを見出すようにして行うことができる。ただし、本発明としては検索方法が特に限定されるものではない。
【００４８】
上記検索によって、合致する音声データが見出された場合には、該音声データに関連する音声情報を認識結果として操作指令特定部２５に送出する。一方、認識が不可であった場合には、不可通知部２７に不可結果を伝える。不可通知部２７では、音声認識ができなかったことを操作者に通知する。通知方法は特に限定されないが、例えばブザーによって通知したり、前記ＬＣＤ１４に不可結果を表示したり、ＬＥＤの点滅で通知したりする。認識が不可である場合には、再度、音声入力を行うこともできる。適正に認識結果が得られた場合、操作指令特定部２５は認識結果を受けて操作指令を特定する。すなわち、認識結果を基に、操作指令特定データベース２６２から操作指令データを検索する。検索の結果、適正な操作指令データが見出された場合、該データに基づいて操作指令が特定され、該操作指令がＣＰＵ１１に対し発行される。また、操作指令データベース２６２で、合致する操作指令データが見出されない場合、上記と同様に不可通知部２７に特定不可通知が伝えられる。操作指令の特定が不可な場合としては、許容されない操作指令がなされた場合が挙げられる。不可通知部２７では、操作指令が特定されなかったことを上記認識不可通知と同様に操作者に通知する。
【００４９】
操作指令の発行がなされると、画像形成装置１０では、手動で操作がなされたときと同様にＣＰＵ１１で操作制御がなされ、設定の変更がなされたり、所定の動作の実行がなされたりする。例えば図３の表示画面では、設定事項の変更に関する指令がなされた場合には、手動で操作した場合と同様に設定が変更された事項に網掛け表示がなされるように、表示の変更がなされる。
また、所定の動作を指令する場合には、上記した原稿読み取りや画像形成等がなされ、また、ＬＡＮとの通信を制御する指令においては、ネットワーク制御部２１を介して所望の通信がなされる。また、ＦＡＸに関する操作指令がなされる場合には、上記原稿読み取りがなされたり、ＦＡＸ制御部２２および電話回線を介してデータの送受信がなされる。
【００５０】
なお、この実施形態では、稼働装置として画像形成装置について説明したが、本発明の稼働装置が該画像形成装置に限定されないことは勿論であり、画像形成部を有していない他の稼働装置においても同様に音声入力による操作指令を行うことができる。また、この実施形態では、手動による操作部を備える装置について説明したが、本発明としては手動による操作指令を行わず、音声入力による操作指令のみを行う装置を対象とするものであってもよい。
【００５１】
また、上記実施形態では説明していないが、画像形成装置に周囲音を検知するマイクロホンを図６に示すように設けることもできる。該マイクロホン２８０は、音声入力用の前記マイクロホン２３０からは離して音声が入り込まないようにするのが望ましい。これにより騒音をより多く取り込んだ騒音データを得ることができる。該音とデータはＡ／Ｄ変換部２８１で変換され、上記音声データ抽出部２４０に送られる。音声データ抽出部２４０では、音声データの抽出に際し、騒音データを除去することにより音声データの抽出をより精度よく行うことができる。なお、騒音には動作音も含まれていることから、騒音データから動作音データ音を除去した分について、上記音データから除去するのが望ましい。
【００５２】
【発明の効果】
以上説明したように、本発明の音声入力機能を有する稼働装置によれば、操作者の発声に基づく音声入力により操作指令を可能とするとともに、装置が動作シーケンスに伴って稼働する際に発生する動作音を予め動作音データとしてデータ化しておき、前記入力音声を認識して操作指令を判別する際に、動作シーケンスに対応する前記動作音データを参照して前記音声入力において取得された音データから音声データを抽出し、該音声データに基づいて入力音声を認識するので、動作によって異なる動作音が発生したり、動作音が刻々と変化する場合にも、該動作音を除いた音声データを抽出して高い精度で入力音声の認識を行って確実に操作指令を行うことができる。
【図面の簡単な説明】
【図１】本発明の一実施形態の画像形成装置を示すブロック図である。
【図２】同じく操作パネルを示す図である。
【図３】同じくタッチパネルの表示画面の一例を示す図である。
【図４】同じく音声入力による操作指令タスクを行うブロック図である。
【図５】同じく音声入力による操作指令タスクを示すフローチャート図である。
【図６】本発明の他の実施形態の音声入力による操作指令タスクを行うブロック図である。
【図７】従来の音声入力機能付き画像形成装置を示すブロック図である。
【符号の説明】
１０　　画像形成装置
１１　　ＣＰＵ
１２　　フラッシュロム
１３　　操作部
１４　　ＬＣＤ
１５　　原稿読み取り部
１６　　不揮発ＲＡＭ
１７　　ＲＡＭ
１８　　原稿形成部
１９　　転写部
２０　　給紙部
２１　　ネットワーク制御部
２２　　ＦＡＸ制御部
２３　　音声入力部
２３０　マイクロホン
２４　　音声認識部
２４０　音声データ抽出部
２４１　音声データ認識部
２５　　操作指令特定部
２６　　ハードディスク
２７　　マイクロホン
３０　　調整量ＬＥＤ
２６０　動作音データベース
２６１　音声データベース
２６２　操作指令データベース

Claims

操作者の発声に基づく音声入力により操作指令を可能とするとともに、装置が動作シーケンスに伴って稼働する際に発生する動作音を予め動作音データとしてデータ化しておき、前記入力音声を認識して操作指令を判別する際に、動作シーケンスに対応する前記動作音データを参照して前記音声入力において取得された音データから音声データを抽出し、該音声データに基づいて入力音声を認識することを特徴とする音声入力機能を有する稼働装置。
操作者の発声に基づく音声を入力する音声入力部と、該音声入力部で得られた音データに基づいて音声を認識する音声認識部と、該音声認識部で得られた認識結果に基づいて操作指令を特定する操作指令特定部と、該操作指令特定部で特定された操作指令に基づいて装置の動作を制御する制御部と、該制御部により制御される動作シーケンスに従って発生する動作音を、予め前記動作シーケンスに関連付けて記憶しておく動作音データ記憶部とを有しており、前記音声認識部では、前記制御部から与えられる動作シーケンス情報に基づいて対応する動作音データを前記動作音データ記憶部から取出し、取り出された動作音データに基づいて前記音データから音声データを抽出して入力音声の認識を行うことを特徴とする音声入力機能を有する稼働装置。
前記動作音データ記憶部は、一つの仕向地に対応する動作音データを一群として、複数の仕向地に応じて複数の動作音データ群が記憶されていることを特徴とする請求項２記載の音声入力機能を有する稼働装置。
前記音声認識部は、音声情報と関連付けて音声データを記録した音声データ記録部を備えているとともに、音声入力部で入力された音声データと、前記音声データ記録部に記録された記録音声データとを照合し、適合する記録音声データを判別してこれに関連する音声情報から入力音声を認識するものであることを特徴とする請求項３記載の音声入力機能を有する稼働装置。
前記音声データ記憶部には、一つの言語に対応する音声データを一群として、複数の言語に応じて複数の音声データ群が記憶されていることを特徴とする請求項４記載の音声入力機能を有する稼働装置。
前記音声認識部での音声認識が不可であった場合に、操作者に通知する認識不可通知手段を有することを特徴とする請求項２〜５のいずれかに記載の音声入力機能を有する稼働装置。
前記操作指令特定部での操作指令の特定内容が不正であった場合に、操作者に通知する指令不可通知手段を有することを特徴とする請求項２〜６のいずれかに記載の音声入力機能を有する稼働装置。
前記動作音データは、一連の動作シーケンスに対応して時間変化に対しデータが変化するものであることを特徴とする請求項１〜７のいずれかに記載の音声入力機能を有する稼働装置。
前記動作音データが、音量に関するものであることを特徴とする請求項１〜８のいずれかに記載の音声入力機能を有する稼働装置。
前記動作音データが、音質に関するものであることを特徴とする請求項１〜９のいずれかに記載の音声入力機能を有する稼働装置。
前記音データから音声データを抽出する際には、前記音データから前記動作音データを除去して音声データとすることを特徴とする請求項１〜１０のいずれかに記載の音声入力機能を有する稼働装置。
前記音データから音声データを抽出する際には、前記音データと前記動作音データとの差分を音声データとすることを特徴とする請求項１〜１１のいずれかに記載の音声入力機能を有する稼働装置。
前記音データから音声データを抽出する際には、前記音データの内、動作音データに相当するデータ分を相対的に低量化して音声データとすることを特徴とする請求項１〜１２のいずれかに記載の音声入力機能を有する稼働装置。
画像形成部を備えることを特徴とする請求項１〜１３のいずれかに記載の音声入力機能を有する稼働装置。
音声認識に際しての音データの調整量を表示する調整量表示部を備えることを特徴とする請求項１〜１４のいずれかに記載の音声入力機能を有する稼働装置。
装置近傍で発生する音を検知する周囲音検知手段を備え、該周囲検知手段によって得られた周囲音データから周囲の騒音データを取得し、該騒音データを前記動作音データとともに参照して前記音データから音声データを抽出することを特徴とする請求項１〜１５に記載の音声入力機能を有する稼働装置。
前記騒音データと前記動作音データとを参照する際に、騒音データに含まれる動作音に関するデータ分を除外することを特徴とする請求項１６記載の音声入力機能を有する稼働装置。