JP2015145938A - 構音訓練用録画・録音装置 - Google Patents

Abstract

【課題】 この発明は、口蓋に対する舌の当たる位置までを含めた構音訓練が行える装置を提供する。
【解決手段】 この発明は、音声を集音するマイクと、患者を撮影するカメラと、訓練用の構音対象となる文字又はイラストを記憶する記憶手段と、画像を表示するディスプレイと、マイクで集音したデータと撮影手段で撮影したデータを訓練用条件に対応したデータであることを識別する情報と共に格納するデータ記憶手段と、訓練用条件に対応してディスプレイの表示を制御すると共に、前記データ記憶手段に格納されたデータを訓練用条件に対応してディスプレイに録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃとして表示する制御手段と、録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃとして表示されたデータから選択したデータを再生する再生手段と、を備えた。
【選択図】 図１２

Description

この発明は、構音訓練用録画・録音装置に関して、特に、エレクトロパラトグラフィ（ＥＰＧ）を用いて構音訓練を行う構音訓練用録画・録音装置に関するものである。

口蓋裂術後症は、構音障害を生じさせることがある。当該構音障害は、言語聴覚士等の指導者による直接の構音指導、及び家庭での反復練習によって治療される。それには、治療前に良好な記録の採取と検査が不可欠である。

構音障害の治療では、患者毎に必要な構音訓練の内容が異なる。そして、構音障害の治療は、家庭において、正しい構音を繰り返すことが重要である。しかし、家庭では、正しい構音であったか否かを患者自身が確認することができず、指導者による構音訓練と同様の環境を再現することは困難であった。

そこで、特許文献１においては、家庭での構音訓練を効率的に行うことができる情報処理装置が提案されている。

この特許文献１の情報処理装置は、音声を集音するマイクと、所定の構音に対応する参照音声波形を記憶する記憶手段と、画像を表示する表示手段と、前記マイクで集音した音声の波形を取得して、当該取得した音声の波形、前記参照音声波形、及び前記所定の構音に対応する口形の画像、を前記表示手段に表示させる制御手段と、を備えている。

特開２０１３−６１３６９号公報

ところで、話し言葉は、口の動きは同じなのに、聞こえてくる音が異なるものが多々存在する。これは、舌が口蓋に接触する位置によって、発生する音が異なるからである。

上記した特許文献１おいては、口形の画像を表示するように構成しているが、口形では、十分な構音の訓練を行うことはできないという問題がある。

また、患者が発音した様子を録画・録音したデータを再生して、患者が発音した様子を確認することにより、構音訓練がどの程度進捗しているかを判断することができる。しかし、再生したデータが、患者がいつどのような条件で発音した様子を録画・録音したデータであるかが分からないと、正確に構音訓練の進捗状況を判断することができない。

この発明は、上記した従来の問題点を解消するためになされたものにして、口蓋に対する舌の当たる位置までを含めた構音訓練が行える装置を提供することを目的とする。

また、この発明は、いつどのような条件で患者が発音した様子を録画・録音したデータであるかが容易に判別することができ、所望の条件で患者が発音した様子を録画・録音したデータを容易に再生することができることにより、患者に対して適切な構音訓練を行うことができる装置を提供することを目的とする。

この発明は、音声を集音する集音手段と、患者を撮影する撮影手段と、訓練用の構音対象となる文字又は絵を記憶する記憶手段と、画像を表示する表示手段と、前記集音手段で集音したデータと撮影手段で撮影したデータを訓練用条件に対応したデータであることを識別する情報と共に格納するデータ記憶手段と、訓練用条件に対応して前記表示手段の表示を制御すると共に、前記データ記憶手段に格納されたデータを訓練用条件に対応して前記表示手段にインジケータ表示する制御手段と、前記インジケータ表示されたデータから選択したデータを再生する再生手段と、を備えたことを特徴とする構音訓練用録画・録音装置である。

また、前記インジケータ表示は、訓練用条件に応じて色を変えて表示させるように構成するとよい。

また、所定の構音に対応する患者の口蓋に対する舌の接触位置を教示する教示パターンを記憶する記憶手段と、患者の口蓋に対する舌の接触位置を検出するデータ入力手段と、を備え、前記教示パターンとデータ入力手段で得られた舌の接触位置を表すパターンとを前記表示手段に表示させるように構成することができる。

また、前記表示手段は、訓練用の構音対象となる文字又は絵、前記教示パターン、舌の接触位置を表すパターンの表示が可能であり、前記訓練用条件は、前記教示パターンを前記表示手段に表示する第１の条件と、前記教示パターンをマスクして、かつ、舌の接触位置を表すパターンを表示した状態で前記表示手段に表示させる第２条件と、前記教示パターンと舌の接触位置を表すパターンとをマスクした状態で前記表示手段に表示する第３条件と、からなり、訓練用条件に基づいて前記制御手段は表示手段の表示を変更するように構成することができる。

また、前記撮影手段で、患者が発音している口形の画像を撮影して、前記表示手段に前記教示パターン、舌の接触した位置を示すパターンと口形を含む患者の画像を表示させるように構成することができる。

また、前記教示パターン、舌の接触した位置を示すパターンとの状態に対応して、前記口形を含む患者の画像を表示させると共に集音手段から集音した音声を再生するように構成することができる。

この発明は、表示に基づいて、いつどのような条件で患者が発音した様子を録画・録音したデータかが判別することができ、所望の条件での患者が発音した様子を録画・録音したデータを再生することができることにより、患者に対して適切な構音訓練を行うことができる。

この発明にかかる構音訓練用録画・録音装置の構成を示すブロック図である。 この発明に用いられるタブレット型パーソナルコンピュータ装置を示す模式図である。 この発明に用いられるＥＰＧ人工口蓋床からなるＥＰＧデータ入力装置を示す説明図である。 この発明に用いられるＥＰＧコントローラの外観を示しており、（ａ）は上面図、（ｂ）は正面図である。 この発明に用いられるハンドグリップを示す斜視図である。 この発明に用いられるＵＳＢコントローラを示す模式図である。 この発明のディスプレイに表示される画面の例を示す図である。 この発明のディスプレイに表示される画面の顔検出ランプを示す図である。 この発明のディスプレイに表示されるインジケータ部を示す図である。 この発明のディスプレイに表示される画面の例を示す図である。 この発明のディスプレイに表示される画面の例を示す図である。 この発明のディスプレイに表示される画面の例を示す図である。 この発明のディスプレイに表示される画面の例を示す図である。 この発明のディスプレイに表示される画面の例を示す図である。 この発明の制御部の動作を示すフローチャートである。

以下、この実施の形態について図面を参照しながら詳細に説明する。なお、図中同一又は相当部分には同一符号を付して、説明の重複を避けるためにその説明は繰返さない。

図１は、この発明にかかる構音訓練用録画・録音装置の構成を示すブロック図であり、図２は、この発明に用いられるタブレット型パーソナルコンピュータ装置を示す模式図である。この構音訓練用録画・録音装置は、例えば、図２に示すように、タブレット型パーソナルコンピュータ装置１を用いて構成されている。このタブレット型パーソナルコンピュータ装置１は、制御部１０、ディスプレイ１１、入力装置１２、マイク１３、スピーカ１４、カメラ１５、通信インターフェース（Ｉ／Ｆ）１６、ＵＳＢインターフェース（Ｉ／Ｆ）１７、ＲＯＭ１８及びＲＡＭ１９を備えたパーソナルコンピュータ装置である。

制御部１０は、タブレット型パーソナルコンピュータ装置１を統括的に制御するものであり、マイクロコンピュータで構成されている。そして、制御部１０では、各部で入力された操作信号に基づいて各部で収集されたデータを処理する。制御部１０には、ディスプレイ１１、入力装置１２、マイク１３、スピーカ１４、カメラ１５、通信Ｉ／Ｆ１６、ＵＳＢＩ／Ｆ１７、ＲＯＭ１８及びＲＡＭ１９が接続されている。

ディスプレイ１１は、制御部１０で処理された画像データを表示する表示装置である。入力装置１２は、操作者が入力した操作を操作信号にして、制御部１０に送信する入力装置である。図２に示すように、タブレット型パーソナルコンピュータ装置１に備えられたディスプレイ１１と入力装置１２がタッチパネル液晶で構成される場合には、ディスプレイ１１と入力装置１２が一体として構成される。

マイク１３は、患者が発音した音声を収集するために使用する集音装置である。スピーカ１４は、制御部１０が処理した音声データを再生するために使用する拡声装置である。カメラ１５は、患者が発音したときの顔の動きを撮影するために使用する撮影装置である。

通信Ｉ／Ｆ１６には、ＥＰＧコントローラ２が接続され、ＥＰＧコントローラ２との間でデータ等の送受信が行われる。通信Ｉ／Ｆ１６とＥＰＧコントローラ２は、例えば、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）の規格に基づいた近距離無線通信により、データの送受が行われる。なお、無線通信であればブルートゥース以外の無線通信規格であっても構わない。

ＵＳＢＩ／Ｆ１７には、ＵＳＢデバイスとしてのＵＳＢコントローラ３が接続され、ＵＳＢコントローラ３から各種操作信号が制御部１０に与えられる。

ＲＯＭ１８とＲＡＭ１９はともに記憶媒体であり、ＲＯＭ１８に記憶されている各種プログラムをＲＡＭ１９に展開して、制御部１０で処理することにより種々の動作を行う。ただし、タブレット型パーソナルコンピュータ装置１が制御部１０によって統括的に制御されるものであればよいので、各種プログラムとＲＯＭ１８、ＲＡＭ１９との構成はどの様な構成であってもよい。

例えば、ＲＯＭ１８には、タブレット型パーソナルコンピュータ装置１を起動するためのＯＳ等を格納しておき、その格納したＯＳ等を読み出して、ＲＡＭ１９にＯＳ等を展開して、各種機能を実現するように構成してもよい。

また、ＲＡＭ１９は、ハードディスク等の不揮発性メモリとワークＲＡＭ等で構成して、ＲＡＭ１９の不揮発性メモリに各種ソフトを格納して、その格納した各種ソフトを読み出して、ワークＲＡＭ等に各種ソフトを展開して、各種機能を実現するように構成してもよい。

ＥＰＧコントローラ２は、後述するＥＰＧ人工口蓋床からなるＥＰＧデータ入力装置２１からの信号をタブレット型パーソナルコンピュータ装置１に与えるために使用する。ＥＰＧコントローラ２は、ＥＰＧデータ入力装置２１からのセンサ出力が入力され、このデータを無線通信により、通信Ｉ／Ｆ１６を介して制御部１０に与える。

図３は、ＥＰＧ人工口蓋床からなるＥＰＧデータ入力装置２１の構成を示した図である。ＥＰＧデータ入力装置２１は、樹脂で成形された口蓋プレート２１０を備える。口蓋プレート２１０に、複数のセンサ２１１が設けられている。このセンサ２１１は出力線２１２と接続して、この出力線２１２は出力端子２１ａと接続している。

出力端子２１ａは、ＥＰＧデータ入力装置２１からの信号をＥＰＧコントローラ２に与えるために使用する。出力端子２１ａの先端端子部２１ｂをＥＰＧコントローラ２の挿入口に差し込み、ＥＰＧコントローラ２にＥＰＧデータ入力装置２１の各センサ２１１の出力を与える。

制御部１０は、入力されたＥＰＧデータ入力装置２１からのデータに基づき、患者が発音したときに、どのセンサ２１１に患者の舌が接触したかを判断した情報をＲＡＭ１９に格納する。

口蓋プレート２１０には、患者の口蓋４に装着するために、患者の歯牙４１に取り付けられるクリップ２１３が設けられ、このクリップ２１３を用いて患者の口蓋に口蓋プレート２１０を取り付ける。患者の舌がセンサ２１１に接触すると、そのセンサ２１１の出力が出力端子２１ａから出力される。

図４（ａ）、（ｂ）は、ＥＰＧコントローラ２の構成を示した図である。ＥＰＧコントローラ２は、上部に出力端子２１ａの先端端子部２１ｂが挿入される差し込み口２０が設けられている。差し込み口２０に先端端子部２１ｂを差し込むことで、ＥＰＧデータ入力装置２１からのデータをＥＰＧコントローラ２が受け取ることができる。

側面には、ＥＰＧコントローラ２のオン・オフを操作するスイッチであるスイッチ２３、ＥＰＧコントローラ２が起動していることを示すランプであるスイッチランプ２４とハンドグリップ２２のコネクタ２２ｂ（図５参照）が差し込まれる差し込み口２５が設けられている。

図５は、ハンドグリップ２２の構成を示した図である。ハンドグリップ２２は、患者に通電させて、ＥＰＧデータ入力装置２１が作動してＥＰＧデータを生成させるために使用する。患者がハンドグリップ２２を握ることで、センサ２１１の１つに舌が接触したときに、患者とセンサ２１１、ハンドグリップ２２との間で電気回路が形成される。

即ち、ＥＰＧコントローラ２の差し込み口２０に出力端子２１ａの先端端子部２１ｂを差し込み、ハンドグリップ２２のコネクタ２２ｂを差し込み口２５に差し込む。次に、患者がＥＰＧデータ入力装置２１を装着して、ハンドグリップ２２を握る。そして、患者が発音したときにセンサ２１１の１つに患者の舌が接触する。舌は人体の一部であるので、センサ２１１との間で通電する。舌から流れた電気が人体の中を通り、患者の掌とハンドグリップ２２との間で通電する。そして、患者とＥＰＧコントローラ２、ＥＰＧデータ入力装置２１、ハンドグリップ２２との間で電気回路が形成される。これにより、患者が発音したときに、患者の舌がどのセンサ２１１に接触しているかが検出でき、その接触したセンサ２１１からの出力が出力端子２１ａからＥＰＧコントローラ２に与えられる。

図６は、ＵＳＢコントローラ３の構成を示した図である。ＵＳＢコントローラ３は、ディスプレイ１１に表示するプロンプトを切り替えるためや録画・録音・再生のために使用する。ＵＳＢコントローラ３は、選択するプロンプトを切り替える上ボタン３１、下ボタン３２と録画・録音のオン・オフボタン３３を有する。これらボタン３１〜ボタン３３を押すことで制御信号を発生して、その制御信号を制御部１０へ与える。

この発明にかかる構音訓練用録画・録音装置において、録画・録音を行っていないときにこのオン・オフボタン３３を押すと録画・録音が開始して、録画・録音を行っているときにこのオン・オフボタン３３を押すと録画・録音が停止する。

次に、構音障害の治療を補助するための構音訓練用アプリケーションプログラム（以下、構音訓練用ソフトＡＰという。）について、説明する。構音訓練用ソフトＡＰは、この実施の形態では、ＲＯＭ１８に格納されている。制御部１０は、ＲＯＭ１８に格納されている構音訓練用ソフトＡＰを読み出して、ＲＡＭ１９に展開することにより、以下のような機能を実現する。即ち、制御部１０は、マイク１３を用いた録音機能、スピーカ１４を用いた音声再生機能、カメラ１５を用いた撮影機能、マイク１３で集音した音声の時間軸波形を取得する波形取得機能、後述するＥＰＧデータ入力装置２１で検出した口蓋に対する舌の接触位置を取得するＥＰＧパターン取得機能、患者に対する舌の接触位置を教示する教示パターン機能、ＥＰＧパターン、教示パターン、音声波形等をディスプレイ１１に表示する表示機能等を実現する。訓練用の構音対象となる文字又は絵は構音訓練用ソフトＡＰと共にＲＯＭ１８に格納されている。

制御部１０は、マイク１３を用いて録音した音声データ、カメラ１５を用いて撮影した画像データ、ＥＰＧデータ入力装置２１で検出した口蓋に対する舌の接触位置を取得したＥＰＧパターンデータをＲＡＭ１９に格納する。ＲＡＭ１９に格納された各データは、記録した日時、記録した状態等を識別可能にしておく。これにより、各データの読み出しは、日時、記録状況などに基づいて容易に選択して、再生することができる。

ところで、構音障害の治療においては、まず、患者が発音したとき音声の問題点を記録する必要がある。そして、この記録した情報に基づいて、構音訓練をどのように行っていくかを決める。このため、この実施形態では、後述するように、どのような条件で患者が発音した様子の録画・録音を行ったかが分かるように、ディスプレイ１１に条件に対応した録画・録音状態を表示するようにしている。

また、この構音訓練用ソフトＡＰは、手本となる舌の接触位置を示す教示パターンと患者が実際に接触した舌の位置を示すＥＰＧパターンをディスプレイ１１に表示するとともに、マイク１３で集音した患者が発音した音声の音声波形、カメラ１５で撮影した画像をディスプレイ１１に表示することができる。これにより、患者は聴覚的なフィードバックだけでなく、構音に必要な舌の接触位置などを視覚的なフィードバックが得られるため、家庭での構音訓練、また、家庭で行った構音訓練に対する適切な指導を行うことができる。

以下、ディスプレイ１１に表示される具体的な表示内容とそれに伴う動作について説明する。

図７、図１０〜図１４は、ディスプレイ１１に表示される表示画面１１ａの例を示す図である。患者がタッチパネルである入力装置１２を操作して、構音訓練用ソフトＡＰを立ち上げると、図７に示すように、ディスプレイ１１に表示画面１１ａが表示される。

表示画面１１ａには、ブルートゥース接続ボタン１１１、レコードボタン１１４、ストップボタン１１５、プレイボタン１１６、プロンプト選択欄１１８（１１８ａ〜１１８ｃ）、録画・録音データ選択欄１１９（１１９ａ〜１１９ｃ）等の操作アイコンや、顔検出ランプ１１２、顔検出インジケータ１１３、プロンプト表示欄１１７、教示パターン表示欄１２０、ＥＰＧパターン表示欄１２１、動画表示欄１２２、音声波形表示欄１２３、ＥＰＧパターン連続表示欄１２４等の画像表示欄が表示される。

ブルートゥース接続ボタン１１１は、タブレット型パーソナルコンピュータ装置１とＥＰＧコントローラ２とをブルートゥースにより接続させるためのボタンである。

構音訓練用ソフトＡＰを立ち上げた後、ＥＰＧコントローラ２の電源をオンにする。そして、ブルートゥース接続ボタン１１１をタップして、タブレット型パーソナルコンピュータ装置１とＥＰＧコントローラ２とを接続させる。このとき、タブレット型パーソナルコンピュータ装置１とＥＰＧコントローラ２との接続を構築するときは、例えば、ブルートゥース接続ボタン１１１が黄色に変化して、タブレット型パーソナルコンピュータ装置１とＥＰＧコントローラ２との接続の構築が完了したときは、例えば、ブルートゥース接続ボタン１１１が青色に変化する。

患者の口蓋内に口蓋プレート２１０を装着して、患者にＥＰＧデータ入力装置２１をセットする。ＥＰＧデータ入力装置２１の出力端子２１ａの先端端子部２１ｂをＥＰＧコントローラ２の差し込み口２０に差し込み、ハンドグリップ２２のコネクタ２２ｂを差し込み口２５に差し込む。患者がハンドグリップ２２を握ることで、ＥＰＧデータ入力装置２１を用いた患者の口蓋における舌の接触位置を検出することができる。

顔検出ランプ１１２は、カメラ１５で検出された患者の顔の位置が正常な範囲に収まっているかどうかを患者に知らせるランプである。図８は、表示画面１１ａに表示される顔検出ランプ１１２の変化の様子を示す図である。図７に示すように、構音訓練用ソフトＡＰを立ち上げると、表示画面１１ａに、顔検出ランプ１１２が表示される。カメラ１５で検出された患者の顔の位置が正常な範囲に収まっていない場合には、顔検出ランプ１１２が赤色（図８に示す１１２ａで示すハッチングの状態）になる。一方、カメラ１５で検出された患者の顔の位置が正常な範囲に収まっている場合には、顔検出ランプ１１２が緑色（図８に示す１１２ｂで示すクロスハッチングの状態）になる。この顔検出ランプ１１２が赤色（１１２ａ）から緑色（１１２ｂ）になるように、カメラ１５を患者の顔の前で移動させる。

また、この実施の形態では、表示画面１１ａに、顔検出インジケータ１１３が表示される。図９は、表示画面１１ａに表示される顔検出インジケータ１１３の変化の様子を示す図である。顔検出インジケータ１１３は、カメラ１５で検出された患者の顔が正常な範囲に収まっているかどうかを患者に知らせるインジケータである。図９（ａ）、（ｂ）に示すように、顔検出インジケータ１１３には、インジケータ枠１１３ａが表示される。インジケータ枠１１３ａで囲まれた範囲はカメラ１５で検出された患者の顔の範囲である。インジケータ枠１１３ａが顔検出インジケータ１１３の中央部に収まれば、患者の顔が正常な範囲に収まっていると判断できる。即ち、インジケータ枠１１３ａが顔検出インジケータ１１３の中央部に収まるようにタブレット型パーソナルコンピュータ装置１を移動させると、顔検出を正常に完了させることができる。このように、顔検出ランプ１１２と顔検出インジケータ１１３を用いることで、患者を録画するための顔位置に容易に設定することができる。

レコードボタン１１４は、患者が発音した様子を録画・録音するためのボタンである。録画・録音を開始する場合には、レコードボタン１１４をタップする。ＵＳＢコントローラ３のオン・オフボタン３３を押すことで録画・録音を開始することもできる。ストップボタン１１５は、患者が発音した様子の録画・録音を停止するためのボタンである。録画・録音を停止する場合には、ストップボタン１１５をタップする。ＵＳＢコントローラ３のオン・オフボタン３３を押すことで録画・録音を停止することもできる。

プレイボタン１１６は、患者が発音した様子を録画・録音したデータを再生するためのボタンである。所望する録画・録音データを選択して、選択した録画・録音データを再生する場合には、プレイボタン１１６をタップする。ＵＳＢコントローラ３のオン・オフボタン３３を押すことで録画・録音の再生を開始することができる。選択した録画・録音データの再生を停止する場合には、ストップボタン１１５をタップする。ＵＳＢコントローラ３のオン・オフボタン３３を押すことで録画・録音データの再生を停止することもできる。

プロンプト表示欄１１７は、プロンプトとして文字又は絵が表示される表示欄である。プロンプト選択欄１１８は、プロンプト表示欄１１７に表示させたい文字又は絵を選択する選択欄である。本実施形態では、プロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃと３個の選択欄を設けているが、プロンプト選択欄の個数は任意に増減できる。プロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃのうち、プロンプト表示欄１１７に表示させたい文字又は絵が表示されているプロンプト選択欄１１８をタップする。タップされたプロンプト選択欄１１８に表示されている文字又は絵がプロンプト表示欄１１７に表示される。このプロンプト表示欄１１７に表示された文字又は絵を見て患者が想起する言葉を患者が発音することにより構音訓練が行われる。

図７は、プロンプト表示欄１１７に文字が表示された一例であり、「あた」という文字が４個表示されている。プロンプト表示欄１１７に表示された文字である「あた」を患者が見て、患者が想起する言葉である「あた」を患者が発音する。患者が発音した「あた」について、マイク１３で患者の発音の集音を行い、カメラ１５で患者が発音したときの顔の動きの撮影を行い、ＥＰＧデータ入力装置２１で患者が発音したときの口蓋に対する患者の舌の接触位置の収集を行う。

マイク１３で集音した音声データ、カメラ１５による患者の動画データ及びＥＰＧデータ入力装置２１からの口蓋に対する舌の接触位置のＥＰＧデータがＲＡＭ１９に記憶される。ストップボタン１１５のタップ又はＵＳＢコントローラ３のオン・オフボタン３３を押すことにより録画・録音を停止させることができる。

ストップボタン１１５のタップ又はＵＳＢコントローラ３のオン・オフボタン３３が押されていない状態、即ち、録画・録音を停止させていない状態で、所定の時間が経過した場合には、第２のプロンプト選択欄１１８ｂに移動して、第２のプロンプト選択欄１１８ｂに設定された文字等をプロンプト表示欄１１７に表示させることもできる。

この場合、第１のプロンプト選択欄１１８ａから第２のプロンプト選択欄１１８ｂに移動して、第２のプロンプト選択欄１１８ｂに設定された文字等がプロンプト表示欄１１７に表示される。新たにプロンプト表示欄１１７に表示された文字等を患者が見て、患者が想起する言葉を患者が発音すると、マイク１３で集音した音声データ、カメラ１５による患者の動画データ及びＥＰＧデータ入力装置２１からの口蓋に対する舌の接触位置のＥＰＧデータがＲＡＭ１９に記憶される。

なお、第２のプロンプトにおける録画・録音について、ストップボタン１１５のタップ又はＵＳＢコントローラ３のオン・オフボタン３３が押されていない状態、即ち、録画・録音を停止させていない状態で、所定の時間が経過した場合には、第３のプロンプト選択欄１１８ｃに移動して、第３のプロンプト選択欄１１８ｃに設定された文字等をプロンプト表示欄１１７に表示させることもできる。

プロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃを任意に変更するときには、該当するプロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃをタップするか、ＵＳＢコントローラ３の上ボタン３１又は下ボタン３２を押すことにより、選択されているプロンプト選択欄を変更することができる。

録画・録音データ選択欄１１９は、患者が発音した様子を録画・録音したデータを選択する選択欄である。録画・録音データ選択欄１１９は、図７に示すように、プロンプト選択欄１１８のそれぞれ隣の領域に丸アイコンとして設けられている。この丸アイコンの行数は、本実施形態では３行になっており、プロンプト選択欄１１８ａに録音データ選択欄１１９ａの丸アイコンを、プロンプト選択欄１１８ｂに録音データ選択欄１１９ｂの丸アイコンを、プロンプト選択欄１１８ｃに録音データ選択欄１１９ｃの丸アイコンというようにそれぞれ対応付けて設けているが、プロンプト選択欄１１８の増減に対応付けて、増減する。この丸アイコンの列数は、本実施形態では６列になっているが、任意に増減することができる。録画・録音データ選択欄１１９は、患者が発音した様子の録画・録音が行われると、どの条件で患者が発音した様子を録画・録音したかが分かるように、丸アイコンの色が変わるように構成されている。

例えば、後述する教示パターン表示欄１２０に教示パターン１２０ａが表示されている状態で録画・録音したデータのときには、赤色に表示される。教示パターン表示欄１２０をマスクして、後述するＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａを表示した状態で録画・録音したデータのときには、青色に表示される。教示パターン表示欄１２０とＥＰＧパターン表示欄１２１の両方をマスクした状態で録画・録音したデータのときには、黒色に表示される。

録画・録音データ選択欄１１９の丸アイコンに付された色で、どのような条件で患者が発音した様子を録画・録音したデータかが判別することができる。色分けされた丸アイコンの中で、該当の色の丸アイコンをタップすることで、所望の条件での録画・録音されたデータを再生することができる。

教示パターン表示欄１２０は、プロンプト表示欄１１７に表示されている文字等を構音するときの舌の接触位置を教示パターン１２０ａとして表示するための欄である。教示パターン１２０ａにおいて、患者が発音したときに舌が接触すべき位置に対応する箇所の色が濃くなるように構成されている。プロンプト選択欄１１８で選択されたプロンプトに該当する教示パターン１２０ａは、ＲＯＭ１８又はＲＡＭ１９に保存されている。患者は、教示パターン表示欄１２０に表示された教示パターン１２０ａを参考にして、口蓋への舌の接触を意識しつつ発音する。

ＥＰＧパターン表示欄１２１には、患者がプロンプトに表示されている文字等を構音するときに舌が接触した位置をＥＰＧパターン１２１ａとして表示するための欄である。図１０に示すように、ＥＰＧパターン１２１ａは、患者が発音したときに舌が接触した位置に対応する箇所の色が変わり、接触した累計が多いほど色が濃くなるように構成している。

図１１に示すように、ＥＰＧパターン１２１ａは、ディスプレイ１１に表示された区間において、舌が接触したセンサ２１１のコマ数のパーセンテージを表示するようにも構成している。即ち、舌が接触した状態の累積状態を制御部１０が算出して、そのパーセンテージに基づいて表示する。“０”は全く舌が接触しなかったセンサ２１１に対応する位置を示しており、数値が大きく色が濃くなるにつれて舌の接触が多かったことを示している。このように数値に基づく接触位置の確認もできる。

そして、教示パターン１２０ａ、ＥＰＧパターン１２１ａとして表示されるパターンは、ディスプレイ１１の上側が口蓋の前方部、即ち、前歯側であり、下側が口蓋の後方部である。この実施の形態は、上方の２列が前方部、前方部より下側の３列が中間部、中間部より下側の３列が後方部である。構音訓練する対象に応じて、口蓋のどこに舌を接触させるかを教示パターン１２０ａに表示させる。この教示パターン１２０ａとＥＰＧパターン１２１ａとを比較することで、構音における舌が口蓋の正しい位置に接触しているか否かが判別できる。

動画表示欄１２２は、カメラ１５で撮影した画像を表示する表示欄である。患者が発音した様子を録画・録音するときに、カメラ１５で撮影した画像をそのまま表示したり、患者が発音した様子を録画・録音したデータを再生するときに、患者が発音した様子の画像を表示したりすることができる。

また、動画表示欄１２２を上から下へ撫でる動作により、動画表示欄１２２のマスクを設定させたり、動画表示欄１２２を下から上へ撫でる動作により、マスクされた動画表示欄１２２のマスクを解除したりすることができる。動画表示欄１２２を表示した場合は、発音者が正確な発音をしているときの発音者の顔の動きを参照して、患者が構音訓練をすることができる。動画表示欄１２２をマスクした場合は、発音者の顔の動きという視覚情報が聴覚情報に影響を及ぼすというマガーク効果の影響を排除することができる。

音声波形表示欄１２３は、マイク１３で集音した音声を制御部１０が解析した音声波形を表示する欄である。患者が発音した様子を録画・録音しているとき、マイクで集音した音声の波形が音声波形表示欄１２３に表示される。音声波形は、画像データとして生成されており、音声波形表示欄１２３は、横軸が時間、縦軸がレベル（振幅）に対応している。また、音声波形表示欄１２３は時系列的に表示されており、音声波形表示欄１２３の左側から右側に向かって時間が経過しているように音声波形を表示している。

ＥＰＧパターン連続表示欄１２４は、ＥＰＧパターンを時系列的に表示する表示欄である。患者が発音したときの患者の舌が口蓋へ接触した位置を示すＥＰＧパターンは、ＥＰＧデータ入力装置２１から得られるＥＰＧデータに基づきＲＡＭ１９に格納される。ＥＰＧパターンのＥＰＧデータは、例えば、１秒間に１００コマ記録してＲＡＭ１９に格納される。そして、口蓋への接触状態の累計をＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａとして主に表示する。ＥＰＧパターン連続表示欄１２４はＥＰＧパターンを時系列的に表示されており、ＥＰＧパターン連続表示欄１２４の左側から右側に向かって時間が経過しているようにＥＰＧパターンを表示している。単位時間当たりのＥＰＧパターンが連続してＥＰＧパターン連続表示欄１２４に表示される。

再生領域選択ボタン１２５は、患者が発音した様子を録画・録音したデータを再生するときにおいて、再生したい範囲を選択することができるボタンである。再生したい範囲を右から左又は左から右に再生領域選択ボタン１２５をそれぞれなぞることにより、選択範囲を指定することで、再生したい範囲の部分再生の選択を行うことができる。

音声波形表示欄１２３とＥＰＧパターン連続表示欄１２４は時系列的に対応して表示している。具体的には、音声波形表示欄１２３で表示している表示範囲の横幅とＥＰＧパターン連続表示欄の表示範囲の横幅が同じであり、録画・録音時間に対応している。

患者が発音した様子の録画・録音につき説明する。構音障害の治療においては、患者が発音したときの問題点を記録する必要がある。そして、この記録した情報に基づき、構音訓練をどのように行うかを決める。このため、この実施形態では、３つの条件による録画・録音が行えるように構成している。

具体的には、上述したように、教示パターン表示欄１２０に教示パターン１２０ａが表示されている状態で録画・録音したデータのときを第１条件として、ＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａを表示して、教示パターン表示欄１２０をマスクした状態で録画・録音したデータのときを第２条件として、教示パターン表示欄１２０とＥＰＧパターン表示欄１２１の両方をマスクした状態で録画・録音したデータのときを第３条件として録画・録音が行えるように構成している。どの条件で録画・録音を行ったことが分かるように、録画・録音データ選択欄１１９の丸アイコンの色を変える。即ち、第１条件の場合は赤色に表示され、第２条件の場合は青色に表示され、第３条件の場合は黒色に表示される。

構音訓練を開始する前に、患者が発音したときの問題点を記録する必要がある。そのためには、図１２に示すように、教示パターン表示欄１２０及びＥＰＧパターン表示欄１２１をマスクした状態である第３条件での録画・録音を行う。

この場合には、制御部１０は、図１２に示すように、教示パターン表示欄１２０及びＥＰＧパターン表示欄１２１をマスクしておき、患者が見る文字等をプロンプト表示欄１１７に表示するようにディスプレイ１１を制御する。

制御部１０は、第３条件であると判断すると、この状態で録画・録音されるデータは第３条件であることを識別するフラグを設定する。患者がプロンプト表示欄１１７に表示された文字等を見て、患者が想起する言葉を発音して、その患者が発音した様子の画像と音声等を制御部１０は第３条件であることを識別するフラグとともにＲＡＭ１９に格納する。制御部１０は、このフラグに基づいて、録画・録音データ選択欄１１９の丸アイコンを該当する色で表示する。この実施形態では、黒色（図１２においては、横線が施されている）に表示される。

練習の初期の状態では、図１３に示すように、教示パターン表示欄１２０に教示パターン１２０ａを表示させた状態である第１条件での録画・録音を行う。この場合には、ＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａを表示させてもよい。制御部１０は、図１３に示すように、教示パターン表示欄１２０に教示パターン１２０ａを、ＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａを表示しておき、患者が見る文字等をプロンプト表示欄１１７に表示するようにディスプレイ１１を制御する。

制御部１０は、第１条件であると判断すると、この状態で録画・録音されるデータは第１条件であることを識別するフラグを設定する。患者がプロンプト表示欄１１７に表示された文字等を見て、患者が想起する言葉を発音して、その患者が発音した様子の画像と音声等を制御部１０は第１条件であることを識別するフラグとともにＲＡＭ１９に格納する。制御部１０は、このフラグに基づいて、録画・録音データ選択欄１１９の丸アイコンを該当する色で表示する。この実施例では赤色（図１３においては、点を施した状態）に表示される。

練習の中期の状態では、図１４に示すように、教示パターン表示欄１２０をマスクさせた状態であって、ＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａを表示させている状態である第２条件での録画・録音を行う。この場合には、制御部１０は、図１４に示すように、教示パターン表示欄１２０をマスクしておき、ＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａを表示しておき、患者が見る文字等をプロンプト表示欄１１７に表示するようにディスプレイ１１を制御する。

制御部１０は、第２条件であると判断すると、この状態で録画・録音されるデータは第２条件であることを識別するフラグを設定する。患者がプロンプト表示欄１１７に表示された文字等を見て、患者が想起する言葉を発音して、その患者が発音した様子の画像と音声等を制御部１０は第２条件であることを識別するフラグとともにＲＡＭ１９に格納する。制御部１０は、このフラグに基づいて、録画・録音データ選択欄１１９の丸アイコンを該当する色で表示する。この実施形態では青色（図１４においては、ハッチングを施した状態）に表示される。

練習の仕上げの状態では、図１２に示すように、教示パターン表示欄１２０及びＥＰＧパターン表示欄１２１をマスクした状態である第３条件での録画・録音を行う。この場合には、制御部１０は、図１２に示すように、教示パターン表示欄１２０及びＥＰＧパターン表示欄１２１をマスクしておき、患者が見る文字等をプロンプト表示欄１１７に表示するようにディスプレイ１１を制御する。

制御部１０は、第３条件であると判断すると、この状態で録画・録音されるデータは第３条件であることを識別するフラグを設定する。患者がプロンプト表示欄１１７に表示された文字等を見て、患者が想起する言葉を発音して、その患者が発音した様子の画像と音声等を制御部１０は第３条件であることを識別するフラグとともにＲＡＭ１９に格納する。制御部１０は、このフラグに基づいて、録画・録音データ選択欄１１９の丸アイコンを該当する色で表示する。この実施形態では黒色（図１２においては、横線が施されている）に表示される。

このように、患者が発音する様子を録画・録音することで、録画・録音データ選択欄１１９の丸アイコンの色で、どのような条件で録画・録音したデータかが判別することができる。また、色分けされた丸アイコンの中で、該当の色の丸アイコンをタップすることで、所望の条件での録画・録音されたデータを選択することができる。

次に、患者が発音した様子を録画・録音した動画の再生につき説明する。まず、再生したいデータが録画・録音された日付を指定する。日付を指定すると、制御部１０は、その日付に該当する録画・録音データを検索する。

検索の結果、その日付に該当する録画・録音データをプロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃに、そのプロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃに対応するそれぞれの条件を識別する色分けされた丸アイコンが録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃに表示される。

そして、録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃの丸アイコンをタップして再生したい録画・録音データの丸アイコンを選択状態にする。制御部１０は選択された丸アイコンに該当するＲＡＭ１９に保存されている動画、音声、音声波形、教示パターン１２０ａ、ＥＰＧパターン１２１ａを再生可能な状態にする。

プレイボタン１１６又は動画表示欄１２２をタップすると、録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃの丸アイコンで選択されたデータに基づいて、ディスプレイ１１において、表示画面１１ａにおけるＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａが、表示画面１１ａにおける動画表示欄１２２に動画が、表示画面１１ａの音声波形表示欄１２３に音声波形が、表示画面１１ａにおけるＥＰＧパターン連続表示欄１２４にＥＰＧパターン１２１ａの連続表示がそれぞれ表示される。

このＥＰＧパターン１２１ａと教示パターン１２０ａを比較したとき、そのＥＰＧパターン１２１ａが教示パターン１２０ａと形状が近いときは、所望の様に患者が口蓋に舌を当てているときであるので、所望の構音ができていることが判る。このときには、集音した音声をスピーカ１４で再生して、そして、この時の口の動き等は動画表示欄１２２で確認することができる。

また、このＥＰＧパターン１２１ａと教示パターン１２０ａが異なり、所望の構音ができていないときには、動画表示欄１２２の表示をなくして、音声を再生させて、音声の確認をすることができる。これは、発音者の顔の動きという視覚情報が聴覚情報に影響を及ぼすというマガーク効果の影響を生じさせずに、音声波形、音の確認を行うためである。

また、録画・録音データの全体ではなく、ある一定の範囲を再生したい場合は、再生したい範囲を指定することで部分再生を行うことができる。再生したい範囲を右から左又は左から右に再生領域選択ボタン１２５でそれぞれなぞることにより、部分再生する場所を特定して、プレイボタン１１６又は動画表示欄１２２をタップすることで制御部１０は該当部分の動画を再生することができる。

次に、図１５を参照してこの発明の制御部１０の動作を説明する。図１５は、制御部１０の動作を説明するフローチャートである。

まず、制御部１０は、患者がタッチパネルである入力装置１２を操作して、構音訓練用ソフトＡＰを立ち上げると、図７に示すように、ディスプレイ１１に表示画面１１ａが表示される。この表示画面１１ａにおいて、制御部１０は、教示パターン表示欄１２０がマスクされているか否かを判断する（ステップＳ１）。

教示パターン表示欄１２０がマスクされていない、即ち、教示パターン表示欄１２０が表示されていると制御部１０が判断した場合は、制御部１０は、第２条件での録画・録音のフラグを設定して（ステップＳ２）、ステップＳ６に進む。

一方、教示パターン表示欄１２０がマスクされていると制御部１０が判断した場合は、制御部１０は、ＥＰＧパターン表示欄１２１がマスクされているか否かを判断する（ステップＳ３）。

ＥＰＧパターン表示欄１２１がマスクされていないと制御部１０が判断した場合は、制御部１０は、第２条件での録画・録音のフラグを設定して（ステップＳ４）、ステップＳ６に進む。

ＥＰＧパターン表示欄１２１がマスクされていると、制御部１０が判断した場合は、制御部１０は、第３条件での録画・録音のフラグを設定して（ステップＳ５）、ステップＳ６に進む。

続いて、制御部１０は、患者が対象とするプロンプトの選択を受け付ける（ステップＳ６）。制御部１０は、プロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃの中から患者が選択したプロンプトに関する教示パターンなどのＲＯＭ１８又はＲＡＭ１９に格納されたデータを読み出す。表示画面１１ａのプロンプト表示欄１１７に、プロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃに対応する文字又は絵を表示する（ステップＳ７）。

そして、制御部１０は、フラグを参照して、録画・録音する条件が第１条件か否かを判断する（ステップＳ８）。制御部１０が録画・録音する条件が第１条件であると判断した場合は、制御部１０は、教示パターン表示欄１２０、ＥＰＧパターン表示欄１２１の表示を行い、選択されたプロンプトに対応する教示パターン１２０ａを教示パターン表示欄１２０に表示する（ステップＳ９）。

制御部１０は、フラグを参照して、録画・録音する条件が第１条件でないと判断した場合は、ステップＳ１０に進み、制御部１０は、録画・録音する条件が第２条件であるか否かを判断する（ステップＳ１０）。制御部１０が、フラグを参照して、録画・録音する条件が第２条件であると判断した場合は、ステップＳ１１に進み、制御部１０は、教示パターン表示欄１２０をマスクして、ＥＰＧパターン表示欄１２１の表示を行う。

ステップＳ１０において、制御部１０が、フラグを参照して、録画・録音する条件が第１条件でないと判断した場合は、録画・録音する条件が第３条件であるので、制御部１０は、教示パターン表示欄１２０及びＥＰＧパターン表示欄１２１をマスクして表示を行う。

続いて、制御部１０は、録画・録音開始を指示するために、レコードボタン１１４をタップされたか、又は、ＵＳＢコントローラ３のオン・オフボタン３３を押されたかを確認する（ステップＳ１２）。レコードボタン１１４又はオン・オフボタン３３により録画・録音開始を指示されたと制御部１０が判断すると、制御部１０は、録画・録音処理を行う（ステップＳ１３）。

具体的には、制御部１０は、マイク１３で集音した音声を録音する録音処理と取得した音声の波形処理を行う共に、マイク１３で集音した音声とその波形をどの条件で録音したものであるかを識別するフラグも関連づけてＲＡＭ１９に格納する。また、制御部１０は、カメラ１５によって撮影された患者の動画をどの条件で録画・録音したものであるかを識別するフラグも関連づけてＲＡＭ１９に記憶する。

更に、制御部１０は、ＥＰＧデータ入力装置２１からの口蓋に対する舌の接触位置のＥＰＧデータを受け取り、ＥＰＧパターンをどの条件で録画・録音したものであるかを識別するフラグも関連づけてＲＡＭ１９に格納する。ストップボタン１１５又はＵＳＢコントローラ３のオン・オフボタン３３が押されるまで、上記動作を繰り返す（ステップＳ１４）。録画・録音終了が指示されたと制御部１０が判断すると、制御部１０は、録画・録音動作を終了させる。

ステップＳ１２で、録画・録音開始以外の指示を指示されたと制御部１０が判断すると、ステップＳ１５へ進む。ステップＳ１５において、録画・録音開始以外の指示が再生開始指示であるか否かを制御部１０が判断する。録画・録音開始以外の指示が再生開始指示でないと制御部１０が判断した場合には、ステップＳ１に戻る。

録画・録音開始以外の指示が再生開始指示であると制御部１０が判断した場合には、制御部１０は再生処理動作を行う（ステップＳ１８）。再生処理動作が終了すると動作が終了する。

再生処理は、以下の手順により、実行する。再生したいデータが録画・録音された日付に該当する録画・録音データをプロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃに対応するそれぞれの条件を識別する色分けされた丸アイコンが録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃに表示される。そして、録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃの丸アイコンをタップして選択状態にする。

録画・録音データ選択欄１１９ａ〜録画・録音データ選択欄１１９ｃの丸アイコンの色で、どのような条件で録画したデータかが判別することができ、該当の色の丸アイコンをタップすることで、所望のデータを再生することができる。

制御部１０は選択されたプロンプトに該当する第１条件〜第３条件におけるＲＡＭ１９に保存されている動画、音声、音声波形、教示パターン１２０ａ、ＥＰＧパターン１２１ａを再生可能な状態にする。教示パターン１２０ａとＥＰＧパターン１２１ａ、音声データ、音声波形データを制御部１０がＲＡＭ１９より読み出す。即ち、プロンプト選択欄１１８ａ〜プロンプト選択欄１１８ｃの丸アイコンをタップして選択状態にする。制御部１０は選択されたプロンプトに該当するＲＡＭ１９に保存されている動画、音声、音声波形、教示パターン１２０ａ、ＥＰＧパターン１２１ａを再生可能な状態にする。

プレイボタン１１６又は動画画面をタップして、再生が行われると、ディスプレイ１１の表示画面１１ａにおける動画表示欄１２２に動画で表示して、表示画面１１ａの音声波形表示欄１２３に音声波形が、ＥＰＧパターン表示欄１２１にＥＰＧパターン１２１ａが表示される。この教示パターン１２０ａとＥＰＧパターン１２１ａを比較して、そのパターンが所望のパターンで患者が口蓋に舌を当てているときには、所定の構音ができていることが判る。このときには、集音した音声をスピーカ１４で再生して、そして、この時の口の動き等は動画表示欄１２２で確認する。以上のように、録画・録音、再生処理が行われる。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。この発明の範囲は、上記した実施の形態の説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。

１ タブレット型パーソナルコンピュータ装置
２ ＥＰＧコントローラ
３ ＵＳＢコントローラ
１０ 制御部
１１ ディスプレイ
１１ａ 表示画面
１２ 入力装置
１３ マイク
１４ スピーカ
１５ カメラ
１６ 通信Ｉ／Ｆ
１７ ＵＳＢＩ／Ｆ
１８ ＲＯＭ
１９ ＲＡＭ
２０ 差し込み口
２１ ＥＰＧデータ入力装置
２２ ハンドグリップ
３１ 上ボタン
３２ 下ボタン
３３ オン・オフボタン
１１７ プロンプト表示欄
１１８ プロンプト選択欄
１１９ 録画・録音データ選択欄
１２０ 教示パターン欄
１２０ａ 教示パターン
１２１ ＥＰＧパターン欄
１２１ａ ＥＰＧパターン
１２２ 動画表示欄
１２３ 音声波形表示欄
１２４ ＥＰＧパターン連続表示欄
１２５ 再生領域選択ボタン

Claims (6)

1. 音声を集音する集音手段と、
   患者を撮影する撮影手段と、
   訓練用の構音対象となる文字又は絵を記憶する記憶手段と、
   画像を表示する表示手段と、
   前記集音手段で集音したデータと撮影手段で撮影したデータを訓練用条件に対応したデータであることを識別する情報と共に格納するデータ記憶手段と、
   訓練用条件に対応して前記表示手段の表示を制御すると共に、前記データ記憶手段に格納されたデータを訓練用条件に対応して前記表示手段にインジケータ表示する制御手段と、
   前記インジケータ表示されたデータから選択したデータを再生する再生手段と、
   を備えたことを特徴とする構音訓練用録画・録音装置。
2. 前記インジケータ表示は、訓練用条件に応じて色を変えて表示させることを特徴とする請求項１に記載の構音訓練用録画・録音装置。
3. 所定の構音に対応する患者の口蓋に対する舌の接触位置を教示する教示パターンを記憶する記憶手段と、
   患者の口蓋に対する舌の接触位置を検出するデータ入力手段と、を備え、
   前記教示パターンとデータ入力手段で得られた舌の接触位置を表すパターンとを前記表示手段に表示させることを特徴とする請求項１又は請求項２に記載の構音訓練用録画・録音装置。
4. 前記表示手段は、訓練用の構音対象となる文字又は絵、前記教示パターン、舌の接触位置を表すパターンの表示が可能であり、前記訓練用条件は、
   前記教示パターンを前記表示手段に表示する第１の条件と、
   前記教示パターンをマスクして、かつ、舌の接触位置を表すパターンを表示した状態で前記表示手段に表示する第２条件と、
   前記教示パターンと舌の接触位置を表すパターンとをマスクした状態で前記表示手段に表示する第３条件と、からなり、訓練用条件に基づいて前記制御手段は表示手段の表示を変更することを特徴とする請求項３に記載の構音訓練用録画・録音装置。
5. 前記撮影手段で、患者が発音している口形の画像を撮影して、
   前記表示手段に前記教示パターン、舌の接触した位置を示すパターンと口形を含む患者の画像を表示させることを特徴とする請求項１〜請求項４のいずれか１項に記載の構音訓練用録画・録音装置。
6. 前記教示パターン、舌の接触した位置を示すパターンとの状態に対応して、前記口形を含む患者の画像を表示させると共に集音手段から集音した音声を再生することを特徴とする請求項１〜請求項５のいずれか１項に記載の構音訓練用録画・録音装置。

Images