JP2002288170A

JP2002288170A - 多言語間コミュニケーション支援システム

Info

Publication number: JP2002288170A
Application number: JP2001128424A
Authority: JP
Inventors: Toyomichi Yamada; 豊通山田; Takahide Tamura; 隆英田村
Original assignee: EVIDENCE KK
Current assignee: EVIDENCE KK
Priority date: 2001-03-23
Filing date: 2001-03-23
Publication date: 2002-10-04

Abstract

(57)【要約】【課題】電子表示装置を利用して、異言語を母語とする
人同士のコミュニケーションを支援するコミュニケーシ
ョン支援システムを提供する。【解決手段】第１の言語を理解する利用者が第２の言語
を理解する利用者に、伝えたい言葉の言語セット４００
が表示された電子表示装置の情報表示部１０１を見せ
る。該言語セット４００は、該伝えたい言葉に対応する
汎用アイコン４０１と該伝えたい言葉の第１の言語での
文字表記４０２と該伝えたい言葉の第２の言語での文字
表記４０３と該第２の言語での文字表記４０３の発音の
第１の言語の発音文字で表記される発音表記４０４とハ
イパーリンク４１３とからなり、該ハイパーリンクを選
択すると該発音表記４０４に対応する音声が出力され
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、異言語を母語とす
る人同士のコミュニケーションを支援するコミュニケー
ション支援システムに関する。

【０００２】

【従来の技術】異言語を母語とする人同士がなんらかの
コミュニケーションを図ろうとするときに、文字が読め
なくても書けなくても、絵（図像）ならわかる。話せな
くても聞き取れなくても、絵ならわかる。文化理解とし
て絵が不明確であっても想像はつくという特性がある。
株式会社情報センター出版局刊行の書籍「旅の指さし会
話帳」シリーズはまさにこのような異言語間コミュニケ
ーションの特性を冊子体により活用できるようにしたも
のである。１９９８年以来、中国語、韓国語、インドネ
シア語、タイ語、ベトナム語などを対象に販売実績があ
る。

【０００３】「旅の指さし会話帳」では、たとえば、日
本人がインドネシアに旅行し、空港で急に腹痛がし、病
院へ行く必要が生じたときに、該日本人は「旅の指さし
会話帳」のインドネシア語版を開き、目次から空港に関
するページを探し、「空港から宿」の章があることを知
る。該「空港から宿」のページを開けると、一般的に空
港で使用しそうな言葉が絵入りで２０個前後網羅されて
いる。各言葉はそれに関連する絵（以下アイコンと呼
ぶ）と日本語表記とインドネシア語表記とインドネシア
語での発音を日本語のカタカナで表記した発音表記の組
み合わせからなる。この組み合わせを言語セットと呼
ぶ。該日本人は近くのインドネシア人に該ページを開い
て見せ、該ページの「○○へ行きたい」という言語セッ
トを指差し、さらに発音表記の「サヤマウク」を読み
上げる。次に該ページの「病院」の言語セットを示す。
該言語セットには病院を示すアイコンが表示されてい
る。たずねられた該インドネシア人は、該病院のアイコ
ンをみて、該日本人が「病院に行きたい」と意思表示し
ていることを知る。さらに該日本人が該病院の言語セッ
トのなかのインドネシア語の発音「ルマサキッ」を読
み上げるの聞いて、より「病院に行きたい」と意思表示
していることを確信する。このようにして、インドネシ
ア語を知らない日本人と日本語を知らないインドネシア
人との間で、「旅の指さし会話帳」に表示された言語セ
ットを介してコミュニケーションが成立する。

【０００４】また、異言語間コミュニケーション支援の
目的で会話の自動翻訳システムが種々開発されている。
自動翻訳装置に向かって、「病院に行きたい」と言え
ば、自動翻訳装置がその日本語の音声を自動認識しまず
日本語の文字列に変換し、次に日本語の構文を解析し各
単語を辞書を利用して英語に変換し、さらに英語の構文
にもとづき英語の文章に組み立て、音声合成装置でその
英語の文章を合成音で音に変換することにより、該自動
翻訳装置は「Ｉｗｏｕｌｄｌｉｋｅｔｏｇｏｔ
ｏｈｏｓｐｉｔａｌ．」を音として出力する。これに
より日本語を話す人が英語を聞き取る人との間で簡単な
コミュニケーションを行うことができる。

【０００５】

【発明が解決しようとする課題】ただ、冊子体の場合
は、以下のような課題がある。１）言語ごとの冊子を持
ち運ばなくてはならない。２）紙媒体では、検索が容易
でない。３）紙媒体では、関連する語を表示することに
限界がある。４）音声を利用できればよりコミュニケー
ションを円滑化できる。５）登録するアイコンや言語数
に冊子の厚さや重さからくる限界がある。このような課
題が克服されれば、異言語間のコミュニケーションはよ
り容易になり、国際交流も促進されることが期待され
る。

【０００６】また、自動翻訳装置は翻訳精度の問題や、
利用コストあるいはパソコン環境に限定されるなどの問
題で旅行者等には適用困難である。さらに現在商品化さ
れている自動翻訳システムは主に日本語と英語の相互変
換を対象としており、日本語、中国語、インドネシア
語、韓国語、ベトナム語などの相互の自動翻訳システム
は一部研究中ではあるがほとんど実現されていない問題
がある。

【０００７】本発明の課題は、異言語を母語とする人同
士のコミュニケーションを電子表示装置を用いて支援す
るコミュニケーション支援システムを提供することであ
る。

【０００８】本発明の他の課題は、異言語を母語とする
人同士のコミュニケーションをサーバとネットワークと
電子表示装置を用いて多様な言語に対して支援するコミ
ュニケーション支援システムを提供することである。

【０００９】

【問題を解決するための手段】本発明によれば、第１の
言語を理解する第１の利用者と第２の言語を理解する第
２の利用者のコミュニケーションを支援する電子表示装
置を有するコミュニケーション支援システムにおいて、
言葉を選択する手段と、該言葉に対応する第１の言語と
第２の言語との関係を示す言語セットを表示する手段を
有し、前記言語セットは、該言葉に対応するアイコンと
該言葉に対応する第１の言語での文字表記と該言葉に対
応する第２の言語での文字表記と第２の言語での文字表
記の発音を第１の言語の発音文字で表示する発音表記と
を表示する手段と該言語セットを選択する手段と該言語
セットが選択されたときに該言葉に対応する第２の言語
での音声表現を出力する手段とを有することを特徴とす
る多言語間コミュニケーション支援システムが得られ
る。

【００１０】本発明によればまた、第１の言語を理解す
る第１の利用者と第２の言語を理解する第２の利用者の
コミュニケーションを支援する電子表示装置を有するコ
ミュニケーション支援システムにおいて、該電子表示装
置はネットワークを介してサーバと接続され、該サーバ
内に言語セットを表示するためのデータを保存する手段
を有し、該電子表示装置においてあらかじめ第１の言語
と第２の言語を選択する手段と、言葉の集合を選択する
手段と該電子表示装置からの指示により指定された言葉
の集合に対応する第１の言語と第２の言語との関係を示
す一つあるいは複数の言語セットの集合のデータを該電
子表示装置に送信する手段と該送信された前記言語セッ
トの集合のデータを該電子表示装置で受信し表示する手
段を有し、前記言語セットは、該言葉に対応するアイコ
ンと該言葉に対応する第１の言語での文字表記と該言葉
に対応する第２の言語での文字表記と第２の言語での文
字表記の発音を第１の言語の発音文字で表示する発音表
記とを表示する手段と該言語セットを選択する手段と該
言語セットが選択されたときに該言葉に対応する第２の
言語での音声表現を出力する手段とを有することを特徴
とする多言語間コミュニケーション支援システムが得ら
れる。

【００１１】

【発明の実施の形態】以下、本発明の実施の一形態によ
るコミュニケーション支援システムを、第１の言語が日
本語で、第２の言語がインドネシア語である場合のコミ
ュニケーション支援システムを例に説明する。

【００１２】図１を参照して、第１の言語である日本語
を理解する第１の利用者１はコミュニケーションを行お
うとする第２の言語であるインドネシア語を理解する第
２の利用者２に対して電子表示装置１０を提示し、該電
子表示装置１０に順次アイコン等を情報表示部１０１に
表示しマルチメディアを駆使してコミュニケーションを
進展させていく。

【００１３】図２を参照して、電子表示装置１０は情報
表示部１０１、カーソル制御部１０２、選択ボタン１０
３を有し、主制御部１０４が主メモリ部１０５に保存さ
れているプログラムと連携しながら電子表示装置１０を
制御し、着脱可能メモリ保持部１０６には着脱可能メモ
リ２００を挿入可能である。尚、図２において、電子表
示装置１０はノート型パーソナルコンピュータ、デスク
トップ型パーソナルコンピュータ、ＰＤＡ、携帯電話
機、ＴＶ受像機、あるいはゲーム機等であってもよい。
また、着脱可能メモリ２００は、フロッピー（登録商
標）ディスク、光磁気ディスク（ＭＯ）、ＣＤ−ＲＯ
Ｍ、ＣＤ−Ｒ、ＤＶＤ、メモリスティック、コンパクト
フラッシュ（登録商標）メモリ、あるいはスマートメデ
ィア等であってもいい。

【００１４】図３を参照して、着脱可能メモリ２００に
は、例えば前記第１の言語を日本語とし、前記第２の言
語をインドネシア語とするコミュニケーション支援制御
プログラム２０１と前記第１の言語を日本語とし、前記
第２の言語をインドネシア語とするコミュニケーション
支援用データ２０２が保存されており、これを日本語か
らインドネシア語へのコミュニケーション支援パッケー
ジと呼ぶ。

【００１５】図４は、コミュニケーション支援の実行過
程を示すフロー図である。

【００１６】図２、図４を参照して、着脱可能メモリ保
持部１０６に、前記日本語からインドネシア語へのコミ
ュニケーション支援パッケージが保存されている着脱可
能メモリ２００を挿入し、該インドネシア語へのコミュ
ニケーション支援パッケージを起動すると、図５に示す
情報表示部１０１に場面メニュー３００が表示される
（ステップＳ１）。カーソル制御部１０２でカーソルを
移動し、例えば空港３０１にカーソルを移動し、選択ボ
タン１０３を押すと、場面として空港が選択され（ステ
ップＳ２）、図６に示す空港でよく使用する言葉メニュ
ー３０２が情報表示部１０１に表示される（ステップＳ
３）。同様のカーソル操作により言葉メニュー３０２か
ら、病院３０３を選択すると（ステップＳ４）、図７に
示す病院の言語セット４００が情報表示部１０１に表示
される（ステップＳ５）。ここでは、前述したように日
本語からインドネシア語へのコミュニケーション支援パ
ッケージを使用しているので、該言語セットでは第１の
言語が日本語で、第２の言語がインドネシア語である。
該言語セット４００には、例えば、病院を示す汎用アイ
コン４０１と、第１の言語である日本語での病院を示す
文字表記「病院」４０２と、第２の言語であるインドネ
シア語での病院を示す文字表記「ｒｕｍａｈｓａｋｉ
ｔ」４０３と該インドネシア語の文字表記４０３の発音
の日本語による発音表記「ルマサキッ」４０４が表示さ
れる。該利用者１は、該情報表示部１０１に表示された
該言語セット４００を該利用者２に見せながら、該発音
表記４０４を参考にして「ルマサキッ」と発音する。
該利用者２は、該言語セット４００内の病院のアイコン
４０１や、インドネシア語での文字表記４０３あるいは
該利用者１の発音により、「病院」について何かコミュ
ニケーションしたがっていることを知る。

【００１７】図７を参照して、情報表示部１０１に言語
セット４００を表示した後の次の画面を選択するため
に、該利用者１は、場面メニューボタン４０５と言葉メ
ニューボタン４０６のいずれかを選択する（ステップＳ
６）。具体的には、カーソル制御部１０２を操作し、カ
ーソルを移動して場面メニューボタン４０５の上にカー
ソルを移動させるか言葉メニューボタン４０６の上にカ
ーソルを移動させる。その後、選択ボタン１０３を押下
することにより当該メニューが選択されたことになる。
場面メニューボタン４０５を選択すると、図５に示す場
面メニュー３００が再度表示される。言葉メニューボタ
ン４０６を選択すると図６に表示される言葉メニュー３
０２が再度表示される。

【００１８】ここでは、さらに次の言語セットを表示さ
せるために、言葉メニューボタン４０６を選択し（ステ
ップＳ６）、再度言葉メニュー３０２を表示させる。表
示された言葉の中から「行きたい」３０４を選択する
（ステップＳ３）。

【００１９】なお、図５の情報表示部１０１の大きさに
より、情報表示部１０１に一度に表示される言葉の数に
は限度がある。言葉メニューの中から選択可能な言葉の
数が、一度に表示される言葉の数より多い場合は、カー
ソル制御部１０２を制御して表示画面をスクロールし、
情報表示部１０１に表示される言葉を移動し、結果とし
て選択可能なすべての言葉を表示選択することができ
る。

【００２０】図６で該言葉「行きたい」を選択すると、
図８に示す「行きたい」の言語セット４００が情報表示
部１０１に表示される。該言語セット４００には、例え
ば、「行きたい」を示す汎用アイコン４０７と、第１の
言語である日本語での「○○へ行きたい」を示す文字表
記「○○へ行きたい」４０８と、第２の言語であるイン
ドネシア語での「○○へ行きたい」を示す文字表記「ｓ
ａｙａｍａｕｋｅ○○」４０９とインドネシア語の該
文字表記４０９の発音の日本語による発音表記「サヤ
マウク○○」４１０が表示される。該利用者１は、該情
報表示部１０１に表示された該言語セット４００を該利
用者２に見せながら、該発音表記４１０を参考にして
「サヤマウク」と発音する。該利用者２は、該言語セ
ット内の「行きたい」の該アイコン４０７や、インドネ
シア語での該文字表記４０９あるいは該利用者１の発音
により、該利用者１が「行きたい」というコミュニケー
ションをしようとしていることを知る。

【００２１】該利用者１は、図７に示す該言語セット４
００で「病院」という言葉を該利用者２に伝え、次に図
８に示す該言語セット４００で「行きたい」という言葉
を該利用者２に伝えることができる。以上の結果、これ
らの言語セットの表示の組み合わせにより該利用者１は
該利用者２に「病院へ行きたい」という意思を伝えるこ
とができる。

【００２２】なお、インドネシア語の正しい文法では
「病院へ行きたい」は「ｓａｙａｍａｕｋｅｒｕｍ
ａｈｓａｋｉｔ」であり、言語セットの表示を「行きた
い」の言語セットの次に「病院」の言語セットを表示す
る方法もある。ただ、日本語の場合でも「行きたい。病
院」と言っても、「病院へ行きたい」と言いたいのだな
と通じるので、簡単なコミュニケーションでは、言語セ
ットの表示順序が文法的に異なっていても、コミュニケ
ーションをすることは可能である。

【００２３】図７に示した例では、言語セット４００は
汎用アイコン４０１と日本語の文字表記４０２とインド
ネシア語の文字表記４０３と発音の日本語による発音表
記４０４で構成されていたが、別の言語セットの構成例
として、第２の言語であるインドネシア語の発声を言語
セット４００に追加する方法がある。

【００２４】具体的な例として、図９を参照して、発音
表記４０４をハイパーリンク４１３に設定し、カーソル
制御部１０２により、該ハイパーリンク４１３にカーソ
ルを移動し、選択ボタン１０３をクリックすると、第２
の言語であるインドネシア語で「ルマサキッ」と発声
させる方法もある。

【００２５】図１０と図１１を参照して、電子表示装置
１０に、音声出力部１０７を設け、インドネシア語のコ
ミュニケーション支援用データ２０２にあらかじめイン
ドネシア語の各言語セットに対応する録音した音声デー
タ２０３を保存しておき、該ハイパーリンク４１３が選
択されると、主制御部１０４が、コミュニケーション支
援プログラム２０１と連携して、該音声データ２０３を
該音声出力部１０７に送り、音声を出力する。

【００２６】別の例では、該音声データ２０３は音声を
録音したものでなく、音声合成用の音声コードであって
もよい。その場合は、音声出力部１０７は音声合成機能
を有することは自明である。

【００２７】図１２を参照して、言語セット４００のよ
り単純な例は、汎用アイコン４０１と対応する第２の言
語での音声表現データとで構成する方法である。該汎用
アイコン４０１を例えばクリッカブルマップ４１４で選
択可能とし、カーソル制御部１０２でカーソルを該汎用
アイコンのクリッカブルマップ４１４上に移動し、選択
ボタン１０３を押下すると、主制御部１０４が、コミュ
ニケーション支援制御プログラム２０１と連携して、該
音声データ２０３を該音声出力部１０７に送り、音声を
出力する。

【００２８】図１３を参照して、言語セット４００の別
の構成例は、第１の言語での文字表記４０２と該言語に
対応する第２の言語での文字表記４０３と該言語を選択
するための第２の言語での該文字表記４０３のハイパー
リンク４１５とで構成する。カーソル制御部１０２でカ
ーソルを該ハイパーリンク４１５上に移動し、選択ボタ
ン１０３を押下すると、主制御部１０４が、コミュニケ
ーション支援制御プログラム２０１と連携して、該音声
データ２０３を該音声出力部１０７に送り、音声を出力
する。

【００２９】図１４を参照して、言語セット４００の別
の構成例は、汎用アイコン４０１と第１の言語での文字
表記４０２と該言語に対応する第２の言語での文字表記
４０３と該言語を選択するための第２の言語での文字表
記４０３のハイパーリンク４１５とで構成する。カーソ
ル制御部１０２でカーソルを該ハイパーリンク４１５上
に移動し、選択ボタン１０３を押下すると、主制御部１
０４が、コミュニケーション支援制御プログラム２０１
と連携して、該音声データ２０３を該音声出力部１０７
に送り、音声を出力する。

【００３０】図１５を参照して、コミュニケーション支
援システムの別の実施例として、電子表示装置４０はネ
ットワーク３０を介してサーバ２０と接続される。該サ
ーバ２０は言語セットを表示するためのデータを保存す
るデータベース５０１を有し、該電子表示装置４０から
の指示により指定された言語セットのデータを該データ
ベース５０１から選択し該電子表示装置４０に送信する
コミュニケーション支援サービス制御部５０２を有し、
該電子表示装置４０は、該言語セットのデータをネット
ワーク３０を介してサーバ２０から受信する通信制御部
１０８と受信した言語セット４００を表示する情報表示
部１０１を有する。

【００３１】図１５でネットワーク３０はインターネッ
トあるいはモバイルネットワークあるいはインターネッ
トとモバイルネットワークの組み合わせであってもよ
い。図１５で、電子表示装置４０は、ノート型パーソナ
ルコンピュータ、デスクトップ型パーソナルコンピュー
タ、ＰＤＡ、携帯電話機、ＴＶ受像機、あるいはゲーム
機等であってもよい。

【００３２】図１６は、コミュニケーション支援の実行
過程を示す第２のフロー図である。

【００３３】図１５、図１６、図１７を参照して、第１
の言語である日本語を理解する第１の利用者１はコミュ
ニケーションを行おうとする第２の言語であるインドネ
シア語を理解する第２の利用者２に対して電子表示装置
４０を提示し、電子表示装置４０を起動し、情報表示部
１０１でコミュニケーション支援サービスメニューを選
択すると、通信制御部１０８の制御によりネットワーク
３０を介してサーバ２０と接続され、コミュニケーショ
ン支援サービス制御部５０２を起動し、該コミュニケー
ション支援サービス制御部５０２は言語選択メニューデ
ータをネットワーク３０を介して電子表示装置４０の情
報表示部１０１に、図１７に示す言語選択メニュー６０
０を表示する（ステップＳ７）。

【００３４】該第１の利用者１は、該言語選択メニュー
６００の中から、「日本語→インドネシア語」６０１を
選択する。ここで、メニューの中の矢印の左側６０２は
第１の言語であり、矢印の右側６０３は第２の言語を示
す。つまりこの例では、第１の言語として日本語が、第
２の言語としてインドネシア語が選択されたことにな
る。

【００３５】次に、図１５に示す情報表示部１０１に再
び図５の場面メニュー３００が表示される（ステップＳ
１）。カーソル制御部１０２でカーソルを移動し、例え
ば空港３０１にカーソルを移動し、選択ボタン１０３を
押すと、場面として空港が選択され（ステップＳ２）、
その旨が通信制御部１０８からネットワーク３０を経由
してサーバ２０のコミュニケーション支援サービス制御
部５０２に伝えられ、コミュニケーション支援サービス
制御部５０２は言葉メニューのデータをネットワーク３
０を経由して電子表示装置４０に送り、再び図６に示す
空港でよく使用する言葉メニュー３０２が情報表示部１
０１に表示される（ステップＳ３）。同様のカーソル操
作により言葉メニュー３０２から、「病院」３０３を選
択すると（ステップＳ４）、その旨が通信制御部１０８
からネットワーク３０を経由してサーバ２０のコミュニ
ケーション支援サービス制御部５０２に伝えられ、コミ
ュニケーション支援サービス制御部５０２はデータベー
ス５０１から「病院」に対応する言語セットであって、
第１の言語が日本語で第２の言語がインドネシア語であ
る言語セットのデータを取り出しネットワーク３０を経
由して電子表示装置４０に送り、再び図７に示す病院の
言語セット４００が情報表示部１０１に表示される（ス
テップＳ５）。該利用者１は、該情報表示部１０１に表
示された該言語セット４００を該利用者２に見せなが
ら、発音表記４０４を参考にして「ルマサキッ」と発音
する。該利用者２は、該言語セット内の病院のアイコン
４０１や、インドネシア語での文字表記４０３あるいは
該利用者１の発音により、「病院」について何かコミュ
ニケーションしたがっていることを知る。

【００３６】次に該利用者１は、さらに次の言語セット
を表示させるために、言葉メニューボタン４０６を選択
し（ステップＳ６）、その旨が通信制御部１０８からネ
ットワーク３０を介してサーバ２０のコミュニケーショ
ン支援サービス制御部５０２に伝えられ、該コミュニケ
ーション支援サービス制御部５０２は再び言葉メニュー
３０２を表示させる。表示された言葉の中から今度は
「行きたい」３０４を選択する（ステップＳ３）と、そ
の旨が通信制御部１０８からネットワーク３０を介して
サーバ２０のコミュニケーション支援サービス制御部５
０２に伝えられ、コミュニケーション支援サービス制御
部５０２はデータベース５０１から「行きたい」に対応
する言語セットであって、第１の言語が日本語で第２の
言語がインドネシア語である言語セットのデータを取り
出しネットワーク３０を経由して電子表示装置４０に送
り、再び図８に示す「行きたい」の言語セット４００が
情報表示部１０１に表示される。該利用者１は、該情報
表示部１０１に表示された言語セット４００を該利用者
２に見せながら、発音表記４１０を参考にして「サヤマ
ウク」と発音する。該利用者２は、該言語セット内の
「行きたい」のアイコン４０７や、インドネシア語での
文字表記４０９あるいは該利用者１の「サヤマウク」
という発音により、「行きたい」というコミュニケーシ
ョンをしようとしていることを知る。

【００３７】該利用者１は、図７に示す言語セット４０
０で「病院」という言葉を該利用者２に伝え、次に図８
に示す言語セット４００で「行きたい」という言葉を該
利用者２に伝えることができる。以上の結果、これらの
言語セットの表示の組み合わせにより該利用者１は該利
用者２に「病院へ行きたい」という意思を伝えることが
できる。

【００３８】図１７に示す、言語選択メニューの他のメ
ニューを選択することにより日本語とインドネシア語以
外の会話も支援することができる。たとえば、メニュー
「日本語→中国語」６０４を選択することにより該第１
の言語が日本語で、該第２の言語が中国語である会話を
支援することができる。そのために、データベース５０
１には、該第１の言語が日本語で、該第２の言語が中国
語である言語セットが追加される。たとえば、メニュー
「インドネシア語→日本語」６０５を選択することによ
り該第１の言語がインドネシア語で、該第２の言語が日
本語である会話を支援することができる。そのために、
データベース５０１には、該第１の言語がインドネシア
語で、該第２の言語が日本語である言語セットが追加さ
れる。

【００３９】図６と図１８と図１９を参照して、情報表
示部１０１に言葉メニュー３０２が表示されているとき
に、カーソル制御部１０２と選択ボタン１０３を制御し
て言葉メニューを選択する方法とは別の方法として、音
声認識により言葉メニューを選択する方法を示す。電子
表示装置１０にマイク１０９を設け、該マイク１０９に
より該利用者１の「ビョウイン」という発音を受話し、
受話した音声信号を着脱可能メモリ２００の中の音声認
識部２０４により音声認識し、言葉としての「病院」に
変換し、コミュニケーション支援制御プログラム２０１
に送り、言葉メニュー３０２で、言葉「病院」が選択さ
れたと同等の処理を行う。該音声認識部２０４はすべて
の場面メニューのすべての言葉メニューに表示される言
葉のみを音声認識すればよく、汎用的な音声認識装置に
比べ低コストで高精度の音声認識率で構成することが可
能である。

【００４０】ここで、着脱可能メモリ２００には日本語
からインドネシア語へのコミュニケーション支援パッケ
ージが格納されており、音声認識部２０４は第１の言語
である日本語の言葉メニューの言葉を認識するように構
成される。着脱可能メモリ２００が中国語から韓国語へ
のコミュニケーション支援パッケージが格納されている
場合は、音声認識部２０４は第１の言語である中国語の
言葉メニューの言葉を認識するように構成される。

【００４１】再び図３と図４と図６と図７と図２０を参
照して、図６で言葉メニュー３０２で「病院」３０３が
選択されたときに（ステップＳ４）、コミュニケーショ
ン支援用データ２０２内に汎用アイコン４０１のための
データのほかに、第２の言語であるインドネシア語固有
のアイコンが登録されている場合は、該汎用アイコン４
０１ではなくて図２０に示す固有アイコン４１６を表示
する。

【００４２】図２１を参照して、コミュニケーション支
援用データ２０２内に保存される言語セットデータの保
存方法の例について説明する。第１のデータ保存手段７
０１は、言語セット識別コード７０２と汎用アイコンデ
ータ７０３の組み合わせからなる。第２のデータ保存手
段７０４は、該言語セット識別コード７０２と前記第１
の言語での該言語セットの文字表記データ７０５の組み
合わせからなる。第３のデータ保存手段７０６は、該言
語セット識別コード７０２と前記第２の言語での該言語
セットの文字表記データ７０７と該文字表記データ７０
７に対応する該第２の言語での音声データ７０８と該第
２の言語での文字表記データ７０７の発音を第１の言語
での発音文字で表示する発音表示データ７０９からな
る。

【００４３】該コミュニケーション支援用データ２０２
が日本語からインドネシア語へのコミュニケーション支
援用パッケージの場合、該第１の言語は日本語であり、
該第２の言語はインドネシア語である。該言語セットが
「病院」である例の場合には、該言語セット識別コード
７０２には「病院」の言語セットであることを示す一意
の識別コード例えば数字で「１００１」が保存される。
汎用アイコンデータ７０３には、病院を示す汎用アイコ
ンの画像データが保存される。第１のデータ保存手段に
は、同様に他の言語セットのための言語セット識別コー
ド７０２と汎用アイコンデータ７０３の組み合わせが必
要な数だけ保存される。該第２のデータ保存手段７０４
は該第１の言語つまり日本語に関するデータを保存す
る。該第２のデータ保存手段７０４の中の該言語セット
識別コード７０２には「病院」の言語セットを識別する
ためのコード「１００１」が保存される。該文字表記デ
ータ７０５には、「病院」という言語セットの日本語で
の文字表記である「病院」という漢字データが保存され
る。この漢字データは漢字コードであってもいいし、
「病院」という漢字を表示するための画像データであっ
てもいい。第２のデータ保存手段には、同様に他の言語
セットのための言語セット識別コード７０２と日本語で
の該言語セットの文字表記データ７０５の組み合わせが
必要な数だけ保存される。該第３のデータ保存手段７０
６は該第２の言語であるインドネシア語に関するデータ
を保存する。該第３のデータ保存手段７０６の中の該言
語セット識別コード７０２には「病院」の言語セットを
識別するためのコード「１００１」が保存される。該文
字表記データ７０７には、「病院」という言語セットの
インドネシア語での文字表記である「ｒｕｍａｈｓａ
ｋｉｔ」という文字データが保存される。この文字デー
タは文字コードであてもいいし、「ｒｕｍａｈｓａｋ
ｉｔ」という文字を表示するための画像データであって
もいい。該音声データ７０８にはインドネシア語での
「病院」を示す「ｒｕｍａｈｓａｋｉｔ」に対応する
音声データが保存される。該発音表示データ７０９に
は、「ｒｕｍａｈｓａｋｉｔ」の発音を日本語での発音
文字であるカタカナで示すための「ルマサキッ」という
発音表示データが保存される。この発音表示データも対
応する文字コードであってもいいし対応する画像データ
であってもいい。該第３のデータ保存手段には、同様に
他の言語セットのための言語セット識別コード７０２と
インドネシア語での該言語セットの文字表記データ７０
７とインドネシア語での発音データ７０８と該発音デー
タ７０８の日本語での発音表記データ７０９との組み合
わせが必要な数だけ保存される。

【００４４】図７と図２１を参照して、図６で言葉メニ
ュー３０２から「病院」３０３が選択されると、図３の
コミュニケーション支援制御プログラム２０１は該「病
院」３０３に対応する言語セット識別コード「１００
１」を認識し、コミュニケーション支援用データ２０２
の中の第１のデータ保存手段７０１の中から該言語セッ
ト識別コード７０２の値が「１００１」であるデータの
組み合わせを探し、該組み合わせの中の汎用アイコンデ
ータ７０３を取り出し、情報表示部１０１の中の言語セ
ット４００の中の汎用アイコン４０１として表示する。
次に、該コミュニケーション支援制御プログラム２０１
は該第２のデータ保存手段７０４の中から該言語セット
識別コード７０２の値が「１００１」であるデータの組
み合わせを探し、該組み合わせの中の日本語の文字時表
記データ７０５を取り出し、該言語セット４００の中の
日本語の文字表記４０２として表示する。次に、該コミ
ュニケーション支援制御プログラム２０１は該第３のデ
ータ保存手段７０６の中から該言語セット識別コード７
０２の値が「１００１」であるデータの組み合わせを探
し、該組み合わせの中のインドネシア語の文字時表記デ
ータ７０７を取り出し、該言語セット４００の中のイン
ドネシア語の文字表記４０３として表示する。同様にし
て該組み合わせの中から日本語での発音表示データ７０
９を取り出し、該言語セット４００の中の日本語による
発音表記４０４として表示する。

【００４５】図９と図２１を参照して、ハイパーリンク
４１３をクリックした場合は、該コミュニケーション支
援制御プログラム２０１は該第３のデータ保存手段７０
６の中から該言語セット識別コード７０２の値が「１０
０１」であるデータの組み合わせを探し、該組み合わせ
の中のインドネシア語での音声データ７０８を取り出
し、図１０の音声出力部１０７に送る。

【００４６】図２２を参照して、第３のデータ保存手段
７１０は、該言語セット識別コード７０２と前記第２の
言語での該言語セットの文字表記データ７０７と該文字
表記データ７０７に対応する該第２の言語での音声デー
タ７０８と該第２の言語での文字表記データ７０７の発
音を第１の言語での発音文字で表示する発音表示データ
７０９と該第１の言語での固有アイコンデータ７１１の
組み合わせからなる。

【００４７】図２０と図２２を参照して、言語セット４
００にアイコンを表示する場合に、前記第３のデータ保
存手段７１０の固有アイコンデータ７１１に有効なデー
タが保存されている場合は、前記コミュニケーション支
援制御プログラム２０１は、前記第１のデータ保存手段
７０１の中の汎用アイコンデータ７０３の代わりに、該
固有アイコンデータ７１１を固有アイコン４１６として
表示する。

【００４８】図２２における第２のデータ保存手段７０
４と第３のデータ保存手段を汎用性を考慮し同じ構造で
実現することも可能である。実施例を以下に示す。

【００４９】図２３を参照して、第２のデータ保存手段
７１２は、言語セット識別コード７０２と前記第１の言
語での該言語セットの文字表記データ７０５と該文字表
記データ７０５に対応する該第１の言語での音声データ
７１３と該第１の言語での固有アイコンデータ７１５と
該第１の言語での文字表記データ７０５の発音を第１の
言語での発音文字で表示する発音表示データ７１４と該
第１の言語での文字表記データ７０５の発音を第２の言
語での発音文字で表示する発音表示データ７１６からな
る。第３のデータ保存手段７１７は、言語セット識別コ
ード７０２と前記第２の言語での該言語セットの文字表
記データ７０７と該文字表記データ７０７に対応する該
第２の言語での音声データ７０８と該第２の言語での固
有アイコンデータ７１１と該第２の言語での文字表記デ
ータ７０７の発音を第１の言語での発音文字で表示する
発音表示データ７０９と該第２の言語での文字表記デー
タ７０７の発音を該第２の言語での発音文字で表示する
発音表示データ７１８からなる。第２のデータ保存手段
７１２は第１の言語中心のデータ保存手段であり、第３
のデータ保存手段７１７は第２の言語中心のデータ保存
手段であり、構造は同じ構造となっている。コミュニケ
ーション支援用パッケージで不必要なデータがある場合
はそのデータの部分には有効なデータを保存せず、空に
しておけばよい。コミュニケーション支援をするデータ
が３つ以上に増加する場合は、同様の構造のデータ保存
手段をさらに増やせばよい。その場合、各データ保存手
段の組み合わせには必要に応じて追加した言語での発音
文字で表示する発音表示データをおのおの追加すればよ
い。

【００５０】図２１、図２２、図２３では、コミュニケ
ーション支援用データ２０２の言語セットデータの保存
方法を例に示したが、図１５のデータベース５０１の中
の言語セットデータの保存方法も同様の方法で構成でき
ることはいうまでもない。

【００５１】

【発明の効果】本発明によるコミュニケーション支援シ
ステムは、第１の言語と第２の言語の異言語を母語とす
る人同士のコミュニケーションを電子表示装置を用いて
アイコンや第２の言語の発音記号あるいは第２の言語の
発音の出力からなる言語セットを表示することにより、
容易に支援することができる。

【００５２】本コミュニケーション支援システムは、着
脱可能なメモリに格納されるコミュニケーション支援パ
ッケージを入れ替えることにより容易に多様な第１と第
２の言語の組み合わせのコミュニケーションを支援する
ことができる。

【００５３】本コミュニケーション支援システムは、ネ
ットワークを介してサーバに接続することにより、言語
選択メニューの選択により容易に多様な第１と第２の言
語の組み合わせのコミュニケーションを支援することが
できる。

【００５４】本コミュニケーション支援システムは、音
声認識を用いることにより容易にかつ低コストで言葉メ
ニューの選択をすることができる。

【図面の簡単な説明】

【図１】本コミュニケーション支援システムにおいて第
１の言語を理解する利用者と第２の言語を理解する利用
者と電子表示装置の関係を示す図である。

【図２】本コミュニケーション支援システムの電子表示
装置の構成例を示す図である。

【図３】本コミュニケーション支援システムの着脱可能
メモリの構成例を示す図である。

【図４】本コミュニケーション支援システムの処理フロ
ーの例を示す図である。

【図５】本コミュニケーション支援システムの場面メニ
ューの表示例を示す図である。

【図６】本コミュニケーション支援システムの言葉メニ
ューの表示例を示す図である。

【図７】本コミュニケーション支援システムの言語セッ
トの表示例を示す図である。

【図８】本コミュニケーション支援システムの言語セッ
トの表示例を示す図である。

【図９】本コミュニケーション支援システムの言語セッ
トの表示例を示す図である。

【図１０】本コミュニケーション支援システムの電子表
示装置の構成例を示す図である。

【図１１】本コミュニケーション支援システムの着脱可
能メモリの構成例を示す図である。

【図１２】本コミュニケーション支援システムの言語セ
ットの表示例を示す図である。

【図１３】本コミュニケーション支援システムの言語セ
ットの表示例を示す図である。

【図１４】本コミュニケーション支援システムの言語セ
ットの表示例を示す図である。

【図１５】本コミュニケーション支援システムのシステ
ム構成例を示す図である。

【図１６】本コミュニケーション支援システムの処理フ
ローの例を示す図である。

【図１７】本コミュニケーション支援システムの言語選
択メニューの表示例を示す図である。

【図１８】本コミュニケーション支援システムの電子表
示装置の構成例を示す図である。

【図１９】本コミュニケーション支援システムの着脱可
能メモリの構成例を示す図である。

【図２０】本コミュニケーション支援システムの言語セ
ットの表示例を示す図である。

【図２１】本コミュニケーション支援システムの言語セ
ットデータの保存例を示す図である。

【図２２】本コミュニケーション支援システムの言語セ
ットデータの保存例を示す図である。

【図２３】本コミュニケーション支援システムの言語セ
ットセットデータの保存例を示す図である。

【符号の説明】

１第１の言語を理解する第１の利用者２第２の言語を理解する第２の利用者１０電子表示装置２０サーバ３０ネットワーク４０電子表示装置１０１情報表示部１０２カーソル制御部１０３選択ボタン１０６着脱可能メモリ保持部１０７音声出力部１０８通信制御部１０９マイク２００着脱可能メモリ２０１コミュニケーション支援制御プログラム２０２コミュニケーション支援用データ３００場面メニュー３０２言葉メニュー４００言語セット４０１汎用アイコン４０５場面メニューボタン４０６言葉メニューボタン５０１データベース５０２コミュニケーション支援サービス制御部６００言語選択メニュー

Claims

【特許請求の範囲】

【請求項１】第１の言語を理解する第１の利用者と第２
の言語を理解する第２の利用者のコミュニケーションを
支援する電子表示装置を有するコミュニケーション支援
システムにおいて、言葉を選択する手段と、該言葉に対
応する第１の言語と第２の言語との関係を示す言語セッ
トを表示する手段を有することを特徴とする多言語間コ
ミュニケーション支援システム。
【請求項２】第１の言語を理解する第１の利用者と第２
の言語を理解する第２の利用者のコミュニケーションを
支援する電子表示装置を有するコミュニケーション支援
システムにおいて、言葉の集合を選択する手段と、該言
葉の集合に対応する第１の言語と第２の言語との関係を
示す一つあるいは複数の言語セットを表示する手段を有
することを特徴とする多言語間コミュニケーション支援
システム。
【請求項３】前記言語セットは、該言葉に対応するアイ
コンと該言葉に対応する第１の言語での文字表記と該言
葉に対応する第２の言語での文字表記と第２の言語での
文字表記の発音を第１の言語の発音文字で表示する発音
表記とを表示する手段を有する請求項１あるいは請求項
２に記載の多言語間コミュニケーション支援システム。
【請求項４】前記言語セットは、該言葉に対応するアイ
コンと該言語セットを選択する手段と該言語セットが選
択されたときに該言葉に対応する第２の言語での音声表
現を出力する手段とを有することを特徴とする請求項１
あるいは請求項２に記載の多言語間コミュニケーション
支援システム。
【請求項５】前記言語セットは、該言葉に対応する第１
の言語での文字表記と該言葉に対応する第２の言語での
文字表記と該言語セットを選択する手段と該言語セット
が選択されたときに該言葉に対応する第２の言語での音
声表現を出力する手段とを有することを特徴とする請求
項１あるいは請求項２に記載の多言語間コミュニケーシ
ョン支援システム。
【請求項６】前記言語セットは、該言葉に対応するアイ
コンと該言葉に対応する第１の言語での文字表記と該言
葉に対応する第２の言語での文字表記と該言語セットを
選択する手段と該言語セットが選択されたときに該言葉
に対応する第２の言語での音声表現を出力する手段とを
有することを特徴とする請求項１あるいは請求項２に記
載の多言語間コミュニケーション支援システム。
【請求項７】前記言語セットは、該言葉に対応するアイ
コンと該言葉に対応する第１の言語での文字表記と該言
葉に対応する第２の言語での文字表記と第２の言語での
文字表記の発音を第１の言語の発音文字で表示する発音
表記とを表示する手段と該言語セットを選択する手段と
該言語セットが選択されたときに該言葉に対応する第２
の言語での音声表現を出力する手段とを有することを特
徴とする請求項１あるいは請求項２に記載の多言語間コ
ミュニケーション支援システム。
【請求項８】前記言語セットを表示するためのデータを
該電子表示装置内に保存する手段を有することを特徴と
する請求項１あるいは請求項２に記載の多言語間コミュ
ニケーション支援システム。
【請求項９】前記言語セットを表示するための該電子表
示装置はネットワークを介してサーバと接続され、該サ
ーバ内に前記言語セットを表示するためのデータを保存
する手段を有し、該電子表示装置からの指示により指定
された前記言語セットのデータを該電子表示装置に送信
する手段と該送信された前記言語セットのデータを該電
子表示装置で受信し表示する手段を有することを特徴と
する請求項１あるいは請求項２に記載の多言語間コミュ
ニケーション支援システム。
【請求項１０】前記言葉を選択する手段として、音声認
識手段を使用することを特徴とする請求項１あるいは請
求項２に記載の多言語間コミュニケーション支援システ
ム。
【請求項１１】前記第１の言語と前記第２の言語をあら
かじめ登録された複数の言語の中から選択する手段を有
することを特徴とする請求項１あるいは請求項２に記載
の多言語間コミュニケーション支援システム。
【請求項１２】前記言葉に対応するアイコンを複数の言
語で共通な汎用アイコンで表示する手段と該言葉に対応
するアイコンが第２の言語に固有の固有アイコンで表示
する手段と該固有アイコンが存在する場合は、該汎用ア
イコンではなく該固有アイコンを優先的に表示する手段
を有する請求項３あるいは請求項４あるいは請求項６あ
るいは請求項７に記載の多言語間コミュニケーション支
援システム。
【請求項１３】前記言語セットを表示するために、言語
セット識別コードと汎用アイコンデータとの組み合わせ
からなる第１のデータ保存手段と、該言語セット識別コ
ードと第１の言語での文字表記データとの組み合わせか
らなる第２のデータ保存手段と、該言語セット識別コー
ドと第２の言語での文字表記データと第２の言語での音
声データと第２の言語での文字表記の発音を第１の言語
での発音文字で表示する発音表示データとの組み合わせ
からなる第３のデータ保存手段を有することを特徴とす
る請求項１あるいは請求項２に記載の多言語間コミュニ
ケーション支援システム。
【請求項１４】前記言語セットを表示するために、言語
セット識別コードと汎用アイコンデータとの組み合わせ
からなる第１のデータ保存手段と、該言語セット識別コ
ードと第１の言語での文字表記データとの組み合わせか
らなる第２のデータ保存手段と、該言語セット識別コー
ドと第２の言語での文字表記データと第２の言語での固
有アイコンデータと第２の言語での音声データと第２の
言語での文字表記の発音を第１の言語での発音文字で表
示する発音表示データとの組み合わせからなる第３のデ
ータ保存手段を有することを特徴とする請求項１あるい
は請求項２に記載の多言語間コミュニケーション支援シ
ステム。