JP4366168B2 - データ生成装置、データ処理装置、それらのシステム、データ生成方法、そのプログラム、および、そのプログラムを記録した記録媒体 - Google Patents

Description

本発明は、データ生成装置、データ処理装置、それらのシステム、データ生成方法、そのプログラム、および、そのプログラムを記録した記録媒体に関する。

従来、パソコンや携帯電話の普及に伴い、手紙に変わる情報伝達の手法として電子メールが盛んに用いられている。この電子メールにおいては、手紙のように絵などを自由に描くことができないため、例えば符号を組み合わせて人間の顔を表現したいわゆる「顔文字」を用いて表現力を高めている。また、特に携帯電話を用いた電子メールにおいては、予め携帯電話に組み込まれた画像データであり例えば人間の顔を表現したいわゆる「絵文字」を用いて表現力を高めている。

一方で、「絵文字」を用いずに電子メールの表現力をより高める構成が知られている（例えば、特許文献１参照）。この特許文献１に記載のものは、端末装置に設けられた変換プログラムにより、電子メールの文章中の例えば特定の文字の色を時間の経過に伴い変化させたり、特定の文字を回転させたりする設定処理をする。この後、このような設定処理がされた電子メールを変換プログラムとともに相手の端末装置に送信する。電子メールおよび変換プログラムを受信した端末装置は、この受信した変換プログラムを用いて電子メールの変換処理をし、この変換処理をした電子メールを画面上に表示させる。これにより、特定の文字の色が時間の経過に伴い変化したり特定の文字が回転したりする表現力が高められた文章が表示される。

特開平１１−３２８０５４号公報（第６頁左欄−第１０頁左欄）

しかしながら、「顔文字」や「絵文字」を用いた構成や特許文献１の構成は、単に文字の組み合わせや文字の表示形態を適宜変更することにより表現力を高めたものであり、文章内容に応じた状況を的確に伝達するためには不十分である。このため、状況をより的確に伝達する構成が望まれている。

本発明は、このような点に鑑みて、文章内容に応じた状況をより的確に伝達可能なデータ生成装置、データ処理装置、それらのシステム、データ生成方法、そのプログラム、および、そのプログラムを記録した記録媒体を提供することを目的とする。

請求項１に記載の発明は、文字出力手段に出力される複数の文字データを有する文章データを生成するデータ生成装置であって、前記文字データを取得する文字データ取得手段と、効果データを効果出力手段に出力させるための効果出力情報を所定の前記文字データに関連付ける旨を要求する関連付け要求情報を取得すると、前記所定の文字データの少なくとも一部を有するとともに前記効果出力情報に関連付けられた少なくとも１つの関連文字データを取得し、この取得した前記関連文字データとともに、前記関連文字データのうちのいずれか１つを囲むことが可能でありかつ入力手段の設定入力により移動可能なカーソルを表示手段に表示させる候補表示制御手段と、前記カーソルが移動するごとに、前記カーソルで囲まれている関連文字データに関連付けられた効果出力情報に基づいて前記効果データを効果出力手段から出力させる候補効果データ出力制御手段と、前記カーソルで囲まれている関連文字データを選択した旨の関連文字選択情報を認識すると、この認識した前記関連文字選択情報に基づいて前記関連文字データに関連付けられた前記効果出力情報を取得して、この取得した前記効果出力情報を所定の前記文字データに関連付ける関連付け手段と、少なくとも１つの前記所定の文字データと、前記効果出力情報が関連付けられていない少なくとも１つの他の前記文字データと、を有する前記文章データを生成する文章データ生成手段と、を具備したことを特徴としたデータ生成装置である。

請求項５に記載の発明は、請求項１ないし請求項４のいずれかに記載のデータ生成装置と、このデータ生成装置にて生成された前記文章データに基づいて、複数の前記文字データを文字出力手段に出力させる文章出力制御手段と、前記文字出力手段に出力された任意の前記文字データを特定する文字特定手段と、この文字特定手段にて所定の文字データが特定されたことを認識すると、この特定された文字データに関連付けられた効果データを効果出力手段に出力させる効果出力制御手段と、を具備したことを特徴としたデータ処理装置である。

請求項６に記載の発明は、請求項１ないし請求項４のいずれかに記載のデータ生成装置と、このデータ生成装置にネットワークを介して各種データを送受信可能に接続され、前記効果出力情報を記憶するサーバ記憶手段、前記効果出力情報の送信を要求する旨の効果要求情報を取得し、この取得した前記効果要求情報に基づいて前記サーバ記憶手段から前記効果出力情報を検索するサーバ検索手段、このサーバ検索手段にて検索した前記効果出力情報を前記データ生成装置に送信するサーバ送信手段を備えたサーバ装置と、を具備し、前記データ生成装置は、前記効果要求情報を生成して、この生成した前記効果要求情報を前記サーバ装置に送信する効果要求生成手段を備え、前記関連付け手段は、前記サーバ装置から送信される前記効果出力情報を取得して、この取得した前記効果出力情報を前記所定の文字データに関連付けることを特徴としたデータ生成システムである。

請求項７に記載の発明は、請求項５に記載のデータ処理装置と、このデータ処理装置にネットワークを介して各種データを送受信可能に接続され、前記効果データを出力する効果出力手段を備えた端末装置と、を具備したことを特徴としたデータ処理システムである。

請求項８に記載の発明は、請求項１ないし請求項４のいずれかに記載のデータ生成装置と、このデータ生成装置にネットワークを介して各種データを送受信可能に接続されたデータ出力装置と、を具備し、前記文章データ生成手段は、前記生成した前記文章データを前記データ出力装置に送信し、前記データ出力装置は、前記データ生成装置から送信された文章データに含まれる前記文字データを文字出力手段に出力させる文章出力制御手段と、前記文字出力手段に出力された任意の前記文字データを特定する文字特定手段と、この文字特定手段にて所定の文字データが特定されたことを認識すると、この特定された文字データに関連付けられた効果データを効果出力手段に出力させる効果出力制御手段と、を備えたことを特徴としたデータ処理システムである。

請求項９に記載の発明は、コンピュータにより、文字出力手段に出力される複数の文字データを有する文章データを生成するデータ生成方法であって、前記文字データを取得し、効果データを効果出力手段に出力させるための効果出力情報を所定の前記文字データに関連付ける旨を要求する関連付け要求情報を取得すると、前記所定の文字データの少なくとも一部を有するとともに前記効果出力情報に関連付けられた少なくとも１つの関連文字データを取得し、この取得した前記関連文字データとともに、前記関連文字データのうちのいずれか１つを囲むことが可能でありかつ入力手段の設定入力により移動可能なカーソルを表示手段に表示させ、前記カーソルが移動するごとに、前記カーソルで囲まれている関連文字データに関連付けられた効果出力情報に基づいて前記効果データを効果出力手段から出力させ、前記カーソルで囲まれている関連文字データを選択した旨の関連文字選択情報を認識すると、この認識した前記関連文字選択情報に基づいて前記関連文字データに関連付けられた前記効果出力情報を取得して、この取得した前記効果出力情報を所定の前記文字データに関連付け、少なくとも１つの前記所定の文字データと、前記効果出力情報が関連付けられていない少なくとも１つの他の前記文字データと、を有する前記文章データを生成することを特徴とするデータ生成方法である。

請求項１０に記載の発明は、請求項９に記載のデータ生成方法をコンピュータに実行させることを特徴としたデータ生成プログラムである。

請求項１１に記載の発明は、請求項１０に記載のデータ生成プログラムがコンピュータにて読み取り可能に記憶されたことを特徴としたデータ生成プログラムを記録した記録媒体である。

［第１の実施の形態］
以下に、本発明に係る第１の実施の形態を図面に基づいて説明する。なお、本実施の形態では、生成した文章データに基づいて表示部に表示させた文章の所定の単語や単文あるいは「顔文字」や「絵文字」などに関連付けられた所定の音を音声出力部に出力させる情報伝達装置を例示して説明するがこれに限られない。なお、以下において、単語や単文あるいは「顔文字」や「絵文字」などをまとめて表現する際には、これらを単語などと適宜称して説明する。また、所定の単語などに関連付けられた所定の音を効果音と適宜称して説明する。

図１は、第１の実施の形態に係る情報伝達装置の概略構成を示すブロック図である。図２は、情報伝達装置を構成する記憶手段の概略構成を示すブロック図である。図３は、効果音候補情報におけるデータのテーブル構造を模式的に示す概念図である。図４は、文章データにおけるデータのテーブル構造を模式的に示す概念図である。図５は、情報伝達装置を構成する処理部の概略構成を示すブロック図である。図６は、文章データ生成処理における文章表示画面を示す模式図である。

〔情報伝達装置の構成〕
図１において、１００はデータ出力装置、データ生成装置、および、データ処理装置としての情報伝達装置である。この情報伝達装置１００は、文章データを生成して、この文章データに基づいて表示部に文章を表示させる。そして、利用者が凝視している所定の単語などに関連付けられた効果音データに基づいて、音声出力部に効果音を出力させる装置である。この情報伝達装置１００としては、例えばＰＤＡ（Personal Digital Assistant）、携帯電話、ＰＨＳ(Personal Handyphone System)、パーソナルコンピュータなどが例示できる。そして、情報伝達装置１００は、入力部１１０と、文字出力手段、表示手段、および、報知手段としての表示部１２０と、効果出力手段としての音声出力部１３０と、メモリ１４０と、記憶手段１５０と、文字特定手段としての視点認識手段１６０と、処理部１７０と、などを備えている。

入力部１１０は、例えばキーボードやマウスなどで、入力操作される図示しない各種操作キーなどを有している。この操作キーの入力操作としては、後述する文章データ６０を生成する操作や、文章データ６０に後述する効果音特定情報７３ｍを組み込むか否かの設定、文章データ６０の読解処理の設定などの各種設定事項などである。そして、入力部１１０は、設定事項の入力操作により、所定の処理信号Ｓinを処理部１７０へ適宜出力して設定させる。なお、この入力部１１０としては、操作キーなどの操作に限らず、例えば表示部１２０に設けられたタッチパネルによる入力操作や音声による入力操作などにより、各種設定事項を設定入力する構成としてもよい。

表示部１２０は、例えば液晶表示パネルや有機ＥＬ（Electro Luminescence）パネル、ＰＤＰ（Plasma Display Panel）、ＣＲＴ（Cathode-Ray Tube）、ＦＥＤ（Field Emission Display）、電気泳動ディスプレイパネルなどである。この表示部１２０は、処理部１７０にて制御され処理部１７０からの処理信号Ｓdpを受信する。そして、この受信した処理信号Ｓdpに記載された画像データを表示する。この表示する画像データとしては、文章データ６０に基づいて表示される単語、入力部１１０による各種設定事項の設定入力を促す表示画面などが例示できる。

音声出力部１３０は、例えば図示しないスピーカなどの発音手段を有する。この音声出力部１３０は、処理部１７０にて制御され、処理部１７０からの音声データである効果音データなどの処理信号Ｓadを発音手段から音として出力する。なお、発音手段は、例えばＴＶ受信機で受信したＴＶ音声データや光ディスクや磁気ディスクなどに記録された音声データなどをも適宜出力可能である。

メモリ１４０は、入力部１１０で入力操作される設定事項などを適宜読み出し可能に記憶する。また、メモリ１４０は、情報伝達装置１００全体を動作制御するＯＳ（Operating System）上に展開される各種プログラムなどを記憶している。なお、メモリ１４０としては、ＨＤや光磁気ディスクなどの記録媒体に読み取り可能に記憶するドライブやドライバなどを備えた構成としてもよい。

記憶手段１５０は、図２に示すように、効果データ記憶手段としての音データ記憶領域１５１と、関連情報記憶領域１５２と、文章データ記憶領域１５３と、を備えている。なお、ここでは、記憶手段１５０が上述した３つの記憶領域を備えた構成について例示したが、これに限らず例えば記憶手段１５０に上述した記憶領域を備えない構成や、さらに他の記憶領域を備えた構成などとしてもよい。また、記憶手段１５０としては、ＨＤ（Hard Disk）、ＤＶＤ（Digital Versatile Disc）、光ディスク、メモリカードなどの記録媒体に読み出し可能に記憶するドライブやドライバなどを備えた構成などが例示できる。

音データ記憶領域１５１は、音声出力部１３０に効果音を出力させるための、例えばＭＩＤＩ（Musical Instrument Digital Interface）規格の効果データとしての音声データである図示しない効果音データを、この効果音データのファイル名とともに適宜読み出し可能に記憶する。なお、ここでは、効果音データをＭＩＤＩ規格のデータとした構成について例示したが、これに限らず音声出力部１３０に効果音を出力させることができるいずれの規格のデータとしてもよい。また、効果音データとしては、例えば図示しない効果音データ生成装置にて生成されたデータや、例えば海岸で録音した波音のデータなど、いかなる方法で生成されたデータをも用いることができる。

関連情報記憶領域１５２は、図３に示すような効果音候補情報１０を適宜読み出し可能に記憶する。この効果音候補情報１０は、複数の候補データ２０ｋ（ｋは自然数）が１つのデータ構造として構成されたテーブル構造の情報である。そして、この候補データ２０ｋは、関連文字データとしてのキーワード情報２１ｋ（ｋは自然数）と、効果出力情報としての効果特定情報である効果音特定情報２２ｋ（ｋは自然数）と、を１つのレコードとして組み込んだテーブル構造のデータベースとして構成されている。

効果音特定情報２２ｋは、音データ記憶領域１５１に記憶された効果音データのうちの少なくともいずれか１つの効果音データを特定するための情報である。具体的には、効果音特定情報２２ｋは、効果音データのファイル名や、効果音データが記憶されている例えばディレクトリ名などである。

キーワード情報２１ｋは、表示部１２０に例えば単語などのキーワードを表示させるための情報である。このキーワード情報２１ｋにより表示されるキーワードは、このキーワード情報２１ｋと同じレコードの効果音特定情報２２ｋにて特定される効果音データにより出力される効果音に関連付けられている。例えば、「小さな波」というキーワードを表示させるためのキーワード情報２１５と同じレコードには、小さな波が立っている海の波音を出力させるための効果音データを特定する効果音特定情報２２５が組み込まれている。

文章データ記憶領域１５３は、図４に示すような文章データ６０を適宜読み出し可能に記憶する。この文章データ６０は、表示部１２０に文章を表示させるためのデータである。そして、この文章データ６０は、複数の単語情報７０ｍ（ｍは自然数）が１つのデータ構造として構成されたテーブル構造のテキストデータである。

単語情報７０ｍは、表示部１２０に単語や単文あるいは「顔文字」や「絵文字」を表示させるための情報である。これらの単語情報７０ｍのうちの所定の単語などを表示部１２０に表示させるための単語情報７０ｍは、文字データ７１ｍ（ｍは自然数）と、フラグ情報７２ｍ（ｍは自然数）と、効果出力情報としての効果特定情報である効果音特定情報７３ｍ（ｍは自然数）と、が１つのデータ構造として構成されたテーブル構造である。また、所定の単語など以外の単語などを表示部１２０に表示させるための単語情報７０ｍは、文字データ７１ｍと、フラグ情報７２ｍと、が１つのデータ構造として構成されたテーブル構造である。

文字データ７１ｍは、表示部１２０に単語などを表示させるためのデータである。例えば、文字データ７１２は「波」の単語を表示部１２０に表示させるためのデータである。

フラグ情報７２ｍは、このフラグ情報７２ｍが組み込まれた単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを示す情報である。具体的には、このフラグ情報７２ｍに例えば「１」の情報が組み込まれている場合には、単語情報７０ｍに効果音特定情報７３ｍが組み込まれていることを示し、例えば「０」の情報が組み込まれている場合には、単語情報７０ｍに効果音特定情報７３ｍが組み込まれていないことを示す。

効果音特定情報７３ｍは、音声出力部１３０に効果音を出力させるための効果音データを特定するためのデータである。この効果音特定情報７３ｍは、効果音候補情報１０に組み込まれた効果音特定情報２２ｋのうちのいずれか１つと同一の情報である。

視点認識手段１６０は、例えば表示部１２０に近接して配設されている。この視点認識手段１６０は、表示部１２０に表示され、情報伝達装置１００の利用者が凝視している単語などを認識する。ここで、利用者が凝視している単語などを認識する方法としては、例えば利用者の眼球の動作を認識し、この眼球の動作から利用者が凝視している単語などを認識する方法などが例示できるがこれに限られない。そして、視点認識手段１６０は、利用者が凝視している単語などの位置を特定する凝視位置情報を生成し、この生成した凝視位置情報を処理信号Ｓskに適宜変換して、処理部１７０に適宜出力する。

処理部１７０は、図示しない各種入出力ポート、例えば入力部１１０が接続されるキー入力ポート、表示部１２０が接続される表示制御ポート、音声出力部１３０が接続される音声制御ポート、メモリ１４０が接続されるメモリポート、記憶手段１５０が接続される記憶ポート、視点認識手段１６０が接続される視点認識ポートなどを有する。そして、処理部１７０は、各種プログラムとして、図５に示すように、候補表示制御手段および未取得報知制御手段としても機能する文字データ取得手段、関連付け手段、および、文章データ生成手段としての文章生成手段１７１と、候補表示制御手段および未取得報知制御手段としても機能する文章出力制御手段としての表示制御手段１７２と、読解制御手段１７３と、効果出力制御手段としての効果音制御手段１７４と、などを備えている。

文章生成手段１７１は、文章データ６０を生成する旨を要求する設定入力を認識すると、複数の単語情報７０ｍを有する文章データ６０を生成する。具体的には、文章生成手段１７１は、利用者の入力部１１０の入力操作により入力された例えば単語の例えば漢字への変換を要求する旨の設定入力を認識した場合、この入力された単語に対する複数の変換候補の単語を利用者に提供する。この後、利用者により１つの変換候補の単語が選択されたことを認識すると、この選択された変換候補の単語を表示部１２０に表示させるための確定後単語データを生成する。なお、以下において、利用者により入力された単語を確定前単語と適宜称して説明する。また、利用者により選択された変換候補の単語を確定後単語と適宜称して説明する。

そして、文章生成手段１７１は、確定前単語の変換を要求する旨の設定入力とともに、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する関連付け要求信号としての組込要求信号の設定入力を認識すると、記憶手段１５０に記憶された効果音候補情報１０から、確定後単語を含むキーワードを表示部１２０に表示させるためのキーワード情報２１ｋを検索する。そして、表示制御手段１７２を制御して、この検索したキーワード情報２１ｋに基づいて、図６に示すように、例えば複数のキーワードとともに、これらのキーワードのうちのいずれか１つを囲むカーソル８０Ａなどが表示された候補表示画面８０を表示部１２０に表示させる。そして、利用者のカーソル８０Ａの操作により、いずれか１つのキーワードが選択された旨の関連文字選択情報としてのキーワード選択情報を認識すると、記憶手段１５０の効果音候補情報１０から、利用者により選択されたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを検索して読み出す。この後、効果音特定情報７３ｍが組み込まれていることを示す「１」のフラグ情報を生成する。そして、確定後単語データを文字データ７１ｍとして、フラグ情報「１」をフラグ情報７２ｍとして、読み出した効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。

また、文章生成手段１７１は、確定前単語の変換を要求する旨の設定入力のみを認識している場合、効果音特定情報７３ｍが組み込まれていないことを示す「０」のフラグ情報を生成する。この後、確定後単語データを文字データ７１ｍとして、フラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する。

そして、文章生成手段１７１は、これら生成した複数の単語情報７０ｍを文章データ６０としてメモリ信号Ｓmeに適宜変換し、この文章データ６０のファイル名とともに記憶手段１５０の文章データ記憶領域１５３に適宜読み出し可能に記憶させる。

表示制御手段１７２は、確定後単語データに基づいて、例えば単語に点線の下線を付加した表示形態の確定後単語を表示部１２０に表示させる。具体的には、確定後単語データに基づいて、図６に示すように、「風」の単語に点線の下線を付加した表示形態の確定後単語を表示部１２０に表示させる。

また、表示制御手段１７２は、効果音特定情報７３ｍが組み込まれている単語情報７０ｍに基づいて、例えば単語の右側に音符マーク「♪」を付加するとともに、この単語および音符マーク「♪」に実線の下線を付加した表示形態の確定後単語を表示部１２０に表示させる。具体的には、単語情報７０２の文字データ７１２に基づいて、図６に示すように、「波」の単語の右側に音符マーク「♪」を付加するとともに、「波」の単語および音符マーク「♪」に実線の下線を付加した表示形態の確定後単語を表示部１２０に表示させる。

さらに、表示制御手段１７２は、効果音特定情報７３ｍが組み込まれていない単語情報７０ｍに基づいて、例えば単語のみを表示する表示形態の確定後単語を表示部１２０に表示させる。具体的には、単語情報７０１の文字データ７１１に基づいて、図６に示すように、「ラスカゾーネの海の」の複数の単語のみを表示する表示形態の確定後単語を表示部１２０に表示させる。

さらに、表示制御手段１７２は、例えば上述したような候補表示画面８０や、入力部１１０による入力操作を促して各種情報を設定入力するための各種表示画面や、確定前単語に対する変換候補の単語を表示する候補表示画面などをも表示制御する。なお、表示制御手段１７２にて表示させる確定後単語や候補表示画面８０の表示形態は、上述したものに限られず適宜他の表示形態などとしてもよい。

読解制御手段１７３は、任意の文章の読解を開始する旨を要求する設定入力を認識すると、例えばこの要求と同時に設定入力された任意の文章を表示部１２０に表示させるための文章データ６０のファイル名を認識する。そして、この認識したファイル名に基づいて、前記文章データ６０を記憶手段１５０から検索してメモリ信号Ｓmeとして読み出す。この後、表示制御手段１７２を制御して、この読み出した文章データ６０に基づいて、表示部１２０に単語などを表示させる。また、読解制御手段１７３は、文章の読解を中止する旨を要求する設定入力を認識すると、表示制御手段１７２を制御して、表示部１２０に単語など表示させる処理を中止させる。

効果音制御手段１７４は、候補表示画面８０に表示されるカーソル８０Ａにより囲まれたキーワードに関連付けられた効果音を音声出力部１３０に適宜出力させる。具体的には、効果音制御手段１７４は、記憶手段１５０の関連情報記憶領域１５２に記憶された効果音候補情報１０から、カーソル８０Ａにより囲まれたキーワードを表示させるためのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを検索して読み出す。そして、記憶手段１５０の音データ記憶領域１５１から、この読み出した効果音特定情報２２ｋにより特定される効果音データを検索して読み出す。この後、この読み出した効果音データに基づいて、音声出力部１３０に効果音を出力させる。なお、例えば利用者の入力部１１０の操作によりカーソル８０Ａが移動された場合、効果音制御手段１７４は、上述した処理を実施し、新たにカーソル８０Ａにより囲まれたキーワードに関連付けられた効果音を適宜出力させる。

また、効果音制御手段１７４は、利用者が凝視している所定の単語などに関連付けられた効果音を音声出力部１３０に適宜出力させる。具体的には、効果音制御手段１７４は、視点認識手段１６０から入力される処理信号Ｓskに基づいて、この処理信号Ｓskに記載された凝視位置情報を認識する。そして、この凝視位置情報に基づいて、利用者が凝視している単語などを認識し、この認識した単語などに関連付けられた効果音を音声出力部１３０に適宜出力させる。なお、効果音制御手段１７４にて、利用者が凝視している任意の単語などに関連付けられた効果音を出力させる処理の詳細については後述する。

〔情報伝達装置の動作〕
次に、情報伝達装置１００の動作を図面に基づいて説明する。

（文章データ生成処理）
まず、情報伝達装置１００の動作として、利用者の設定入力に基づいて文章データ６０を生成する処理である文章データ生成処理について図７に基づいて説明する。図７は、文章データ生成処理を示すフローチャートである。

まず、図７に示すように、情報伝達装置１００は、処理部１７０の文章生成手段１７１にて、利用者により文章データ６０を生成する旨が設定入力されたことを認識すると（ステップＳ１０１）、表示制御手段１７２にて、確定前単語の入力を促す表示画面を表示部１２０に表示させる。

処理部１７０は、表示制御手段１７２にて、利用者の入力部１１０の入力操作により入力された確定前単語を表示部１２０に表示させる。そして、処理部１７０は、文章生成手段１７１にて、確定前単語の漢字などへの変換を要求する旨の設定入力を認識すると（ステップＳ１０２）、例えば以下のような処理を実施する。すなわち、処理部１７０は、表示制御手段１７２にて、確定前単語に対する複数の変換候補とともに、これらの変換候補のうちのいずれか１つを選択する旨を促す候補表示画面を、例えばこの確定前単語の近傍に表示させる。ここで、利用者が確定前単語の変換を要求する旨を設定入力する方法としては、例えば確定前単語を入力した後に、入力部１１０の「スペース」キーを押圧する方法が例示できるがこれに限られない。

そして、処理部１７０は、文章生成手段１７１にて、前記変換候補のうちのいずれか１つが選択されたことを認識すると、この選択された変換候補の単語を表示部１２０に表示させるための確定後単語データを生成する（ステップＳ１０３）。そして、処理部１７０は、表示制御手段１７２にて、変換候補などを表示させた候補表示画面を閉じる処理を実施する。

この後、文章生成手段１７１は、確定前単語の変換要求とともに、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨の組込要求信号が設定入力されているか否かを判断する（ステップＳ１０４）。ここで、利用者が確定前単語の変換要求とともに、組込要求信号を設定入力する方法としては、例えば以下のような方法が例示できる。すなわち、確定前単語を入力した後に、この確定前単語の変換を要求する「スペース」キーと、効果音特定情報７３ｍを組み込む旨を要求する例えば「Ｓ」キーとを同時に押圧する方法が例示できるがこれに限られない。

ステップＳ１０４において、文章生成手段１７１にて、確定前単語の変換要求とともに、組込要求信号が設定入力されていないと判断した場合、効果音特定情報７３ｍが組み込まれていないことを示す「０」のフラグ情報を生成する（ステップＳ１０５）。そして、文章生成手段１７１は、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する（ステップＳ１０６）。この後、処理部１７０は、表示制御手段１７２にて、表示部１２０に表示された確定前単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいて、下線および音符マーク「♪」が付加されない表示形態の確定後単語に置き換える。

一方で、ステップＳ１０４において、文章生成手段１７１にて、確定前単語の変換要求とともに、組込要求信号が設定入力されていると判断した場合、処理部１７０は、表示制御手段１７２にて、表示部１２０に表示された確定前単語を、ステップＳ１０３において生成した確定後単語データに基づいた表示形態の確定後単語に置き換える。ここで、この確定後単語データに基づいた確定後単語の表示形態は、上述したように単語に点線の下線が付加された表示形態となる。そして、処理部１７０は、文章生成手段１７１にて、記憶手段１５０に記憶された効果音候補情報１０に前記確定後単語を含むキーワードを表示させるためのキーワード情報２１ｋが組み込まれているか否かを判断する（ステップＳ１０７）。

ステップＳ１０７において、処理部１７０は、文章生成手段１７１にて、効果音候補情報１０に前記確定後単語を含むキーワードのキーワード情報２１ｋが組み込まれていないと判断した場合、例えば「効果音データなし」の文字が表示された表示画面を例えば前記確定後単語の近傍に表示させる（ステップＳ１０８）。そして、文章生成手段１７１は、ステップＳ１０７における判断に基づいて、効果音特定情報７３ｍを組み込むことができないと判断する。そして、ステップＳ１０５に進み、効果音特定情報７３ｍが組み込まれていないことを示す「０」のフラグ情報を生成する。この後、ステップＳ１０６に進み、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する。そして、処理部１７０は、表示制御手段１７２にて、表示部１２０に表示された点線の下線が付与された確定後単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいて、下線および音符マーク「♪」が付加されない表示形態の確定後単語に置き換える。

一方で、ステップＳ１０７において、処理部１７０は、文章生成手段１７１にて、効果音候補情報１０に前記確定後単語を含むキーワードのキーワード情報２１ｋが組み込まれていると判断した場合、表示制御手段１７２にて、前記確定後単語を含むキーワードの一覧が表示された候補表示画面８０を例えば前記確定後単語の近傍に表示させる（ステップＳ１０９）。具体的には、例えば前記確定後単語が「風」の場合、図６に示すように、この「風」を含む「そよ風」、「波風」、「突風」などのキーワードとともに、これらキーワードのうちのいずれか１つを囲むカーソル８０Ａを表示させた候補表示画面８０を、「風」の単語の近傍に表示させる。そして、処理部１７０は、効果音制御手段１７４にて、記憶手段１５０から、カーソル８０Ａにより囲まれたキーワードに関連付けられた効果音データを検索して読み出す。この後、この読み出した効果音データに基づいて、音声出力部１３０に効果音を出力させる。例えば、カーソル８０Ａにより「突風」が囲まれた場合、効果音制御手段１７４は、記憶手段１５０の効果音候補情報１０から、「突風」のキーワード情報２１４と同じレコードに組み込まれた効果音特定情報２２４により特定される効果音データを検索して読み出す。そして、この読み出した効果音データに基づいて、突風を連想させる効果音を音声出力部１３０に出力させる。また、カーソル８０Ａが「波風」を囲むように移動された場合、効果音制御手段１７４は、波風を連想させる効果音を出力させる。

この後、処理部１７０は、文章生成手段１７１にて、ステップＳ１０９において候補表示画面８０に表示させたキーワードのうちのいずれか１つが選択されたか否かを判断する（ステップＳ１１０）。ここで、利用者がいずれか１つのキーワードを選択する方法としては、入力部１１０の操作により、所望のキーワードを囲むようにカーソル８０Ａを移動させ、例えば入力部１１０の「Ｅｎｔｅｒ」キーを押圧する方法が例示できるがこれに限られない。

ステップＳ１１０において、文章生成手段１７１にて、キーワードのうちのいずれか１つが選択されていないと判断した場合、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨の要求が取り消されたか否かを判断する（ステップＳ１１１）。ここで、利用者が前記要求を取り消す方法としては、例えば入力部１１０の「Ｅｓｃ（Escape）」キーを押圧する方法が例示できるがこれに限られない。

ステップＳ１１１において、文章生成手段１７１は、前記要求が取り消されていないと判断した場合、ステップＳ１１０に戻る。

一方で、ステップＳ１１１において、前記要求が取り消されていると判断した場合、ステップＳ１０５に進み、効果音特定情報７３ｍが組み込まれていないことを示す「０」のフラグ情報を生成する。この後、ステップＳ１０６に進み、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する。そして、処理部１７０は、表示制御手段１７２にて、表示部１２０に表示された点線の下線が付加された表示形態の確定後単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいて、下線および音符マーク「♪」が付加されない表示形態の確定後単語に置き換える。

一方で、ステップＳ１１０において、キーワードのうちのいずれか１つが選択されたと判断した場合、処理部１７０は、効果音制御手段１７４を制御して、効果音を出力させる処理を中止させる。そして、処理部１７０は、文章生成手段１７１にて、効果音候補情報１０から前記選択されたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを検索して読み出す（ステップＳ１１２）。

そして、文章生成手段１７１は、ステップＳ１０５に進み、利用者により選択されたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを読み出すことができたので、効果音特定情報７３ｍを組み込むことができると判断して「１」のフラグ情報を生成する。この後、ステップＳ１０６に進み、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「１」をフラグ情報７２ｍとして、ステップＳ１１２において読み出した効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。そして、処理部１７０は、表示制御手段１７２にて、表示部１２０に表示された点線の下線が付加された表示形態の確定後単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいて、下線および音符マーク「♪」が付加された表示形態の確定後単語に置き換える。

そして、文章生成手段１７１は、文章データ６０の生成を中止する旨が要求されているか否かを判断する（ステップＳ１１３）。

ステップＳ１１３において、前記要求がされていないと判断した場合、ステップＳ１０２に戻る。

一方で、ステップＳ１１３において、前記要求がされていると判断した場合、ステップＳ１０２ないしステップＳ１１２を処理することにより生成された複数の単語情報７０ｍを文章データ６０として、この文章データ６０のファイル名とともに記憶手段１５０の文章データ記憶領域１５３に記憶させる。そして、文章データ６０の生成処理を終了する。

（効果音出力処理）
次に、情報伝達装置１００の動作として、利用者が表示部１２０に表示された文章中の所定の単語などを凝視した際に、この所定の単語に関連付けられた効果音を音声出力部１３０に出力させる処理である効果音出力処理について図８および図９に基づいて説明する。図８は、効果音出力処理を示すフローチャートである。図９は、効果音出力処理における文章表示画面を示す模式図である。

まず、図８に示すように、情報伝達装置１００は、処理部１７０の読解制御手段１７３にて、利用者により任意の文章の読解を開始する旨の要求が設定入力されたことを認識すると（ステップＳ２０１）、記憶手段１５０からこの文章を表示部１２０に表示させるための文章データ６０を検索して読み出す（ステップＳ２０２）。そして、処理部１７０は、表示制御手段１７２にて、この読み出した文章データ６０の単語情報７０ｍに基づいて、図９に示すように、表示部１２０に文章を表示させる（ステップＳ２０３）。この後、利用者は、表示部１２０に表示された文章を適宜読解する。

情報伝達装置１００は、視点認識手段１６０にて、利用者が表示部１２０に表示された文章の単語などを凝視していることを認識すると、この凝視されている単語などを認識する（ステップＳ２０４）。そして、視点認識手段１６０は、凝視されている単語などの位置を特定する凝視位置情報を生成し、この生成した凝視位置情報を処理部１７０に適宜出力する。

処理部１７０は、視点認識手段１６０より凝視位置情報を取得すると、効果音制御手段１７４にて、この凝視位置情報に基づいて利用者が凝視している単語などを認識する。そして、ステップＳ２０２において読み出した文章データ６０から、前記認識した単語などを表示部１２０に表示させるための文字データ７１ｍが組み込まれた単語情報７０ｍを検索して特定する（ステップＳ２０５）。

この後、効果音制御手段１７４は、ステップＳ２０５において特定した単語情報７０ｍのフラグ情報７２ｍが「１」であるか否かを判断する（ステップＳ２０６）。

ステップＳ２０６において、前記単語情報７０ｍのフラグ情報７２ｍが「０」であると判断した場合、特に処理を実施しない。例えば、利用者が凝視している単語が文字データ７１１により表示される「ラスカゾーネの海の」である場合、この文字データ７１１が組み込まれた単語情報７０１のフラグ情報７２１は「０」なので、特に処理を実施しない。そして、処理部１７０は、読解制御手段１７３にて、文章の読解を中止する旨が要求されているか否かを判断する（ステップＳ２０７）。

ステップＳ２０７において、前記要求がされていると判断した場合、読解制御手段１７３は、表示制御手段１７２を制御して、表示部１２０に単語などを表示させる処理を中止させ、効果音出力処理を終了する。

一方で、ステップＳ２０７において、前記要求がされていないと判断した場合、ステップＳ２０４に戻る。

また、ステップＳ２０６において、前記単語情報７０ｍのフラグ情報７２ｍが「１」であると判断した場合、この単語情報７０ｍの効果音特定情報７３ｍにより特定される効果音データを、記憶手段１５０の音データ記憶領域１５１から検索して読み出す（ステップＳ２０８）。そして、効果音制御手段１７４は、読み出した効果音データに基づいて、音声出力部１３０に効果音を出力させる（ステップＳ２０９）。例えば、利用者が凝視している単語が文字データ７１２により表示される「波」である場合、この文字データ７１２が組み込まれた単語情報７０２のフラグ情報７２２は「１」なので、単語情報７０２の効果音特定情報７３２により特定される、ファイル名が「chinami.mid」の効果音データを記憶手段１５０の音データ記憶領域１５１から検索して読み出す。そして、この読み出した効果音データに基づいて、例えば小さな波が立っている海の波音を音声出力部１３０から出力させる。そして、処理部１７０は、読解制御手段１７３にて、ステップＳ２０７の処理を実施する。

〔第１の実施の形態の作用効果〕
上述したように、上記第１の実施の形態では、情報伝達装置１００は、表示制御手段１７２にて、複数の文字データ７１ｍを有する文章データ６０に基づいて表示部１２０に文章を表示させる。そして、視点認識手段１６０にて、利用者の視点が表示部１２０に表示された所定の単語などに位置したことを認識すると、効果音制御手段１７４にて、音声出力部１３０に前記所定の単語に関連付けられた音声データに基づいて効果音を出力させる。このため、利用者に、表示部１２０に表示された文字に加えて、音声出力部１３０から出力される効果音でも前記所定の単語に関する情報を提供することができる。したがって、利用者に文章内容に応じた状況をより的確に伝達できる。

表示制御手段１７２は、所定の単語と、この所定の単語以外の単語と、を異なる表示形態で表示部１２０に表示させている。このため、音声出力部１３０から効果音が出力されている際に、前記効果音が表示部１２０に表示されている単語のうちの、どの単語に関連付けられたものなのかを、利用者に容易に認識させることができる。したがって、利用者は、例えば効果音が出力された際に文章の読解を中止して、効果音および表示部１２０に表示された文字により、所定の単語により表される状況の余韻に浸ることができる。

また、本実施の形態の文字出力手段を文章データ６０に基づいて文章を表示する表示部１２０としている。このため、一般的に少ない情報量で情報を伝達できる文章を用いて情報を伝達するので、文章データ６０の情報量を少なくできる。したがって、表示部１２０に文章を表示させる処理や、文章データ６０を生成する処理の効率をより向上させることができる。また、文章データ６０を記憶する記憶手段１５０の容量を小さくできる。さらに、表示部１２０に文字で情報を表示させているので、利用者に情報をより的確に伝達できる。

表示部１２０に所定の単語などを表示させるための文字データ７１ｍは、音声出力部１３０に効果音を出力させるための効果音特定情報７３ｍとともに、文章データ６０の単語情報７０ｍに組み込まれている。そして、効果音制御手段１７４は、視点認識手段１６０にて、利用者の視点が任意の単語に位置したことを認識すると、文章データ６０から視点が位置した単語を表示させている文字データ７１ｍを検索して特定する。この後、効果音制御手段１７４は、この特定した文字データ７１ｍが組み込まれた単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを判断し、組み込まれていると判断した場合に、この効果音特定情報７３ｍに基づいて音声出力部１３０に効果音を出力させる。このため、文章データ６０の単語情報７０ｍに、文字データ７１ｍおよび効果音特定情報７３ｍを組み込むだけでの簡単な構成で、音声出力部１３０に効果音を出力させることができる。したがって、文章データ６０の情報量を必要最小限に抑えることができ、文章データ６０を記憶する記憶手段１５０の容量を小さくできる。

単語情報７０ｍには、効果音特定情報７３ｍが組み込まれているか否かを示すフラグ情報７２ｍが組み込まれている。このため、効果音制御手段１７４は、単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを判断する場合に、単語情報７０ｍのフラグ情報７２ｍを参照するだけの簡単な方法で判断できる。したがって、単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを判断する処理を迅速にでき、音声出力部１３０から効果音を出力する処理の効率を向上させることができる。

また、上述したように、単語情報７０ｍに音声出力部１３０に効果音を出力させるための効果音データを特定する効果音特定情報７３ｍを組み込んでいる。そして、効果音制御手段１７４は、効果音特定情報７３ｍに基づいて、効果音データを取得し、この取得した効果音データに基づいて音声出力部１３０に効果音を出力させる。このため、単語情報７０ｍに、一般的に効果音データよりも情報量が少ない効果音特定情報７３ｍを組み込むだけで、音声出力部１３０に効果音を出力させることができる。したがって、単語情報７０ｍの情報量をより少なくできるので、文章データ６０の情報量をより少なくでき、この文章データ６０を記憶する記憶手段１５０の容量をより小さくできる。また、情報伝達装置１００の構成を簡略化できるので、製造性向上やコスト削減あるいは小型化を図ることができる。

記憶手段１５０に、効果音データを記憶する音データ記憶領域１５１を設けている。そして、効果音制御手段１７４は、効果音特定情報７３ｍに基づいて、音データ記憶領域１５１から効果音データを検索して取得する。このため、効果音制御手段１７４は、情報伝達装置１００に設けられた音データ記憶領域１５１から効果音データを取得できるので、効果音データを取得する処理をより迅速にできる。このため、文章データ６０の生成処理や音声出力部１３０から効果音を出力する処理の効率を向上させることができる。

情報伝達装置１００に、複数の文字データ７１ｍを有する文章データ６０を生成する文章生成手段１７１を設けている。ここで、上述したように、表示部１２０に所定の単語などを表示させるための文字データ７１ｍは、効果音特定情報７３ｍとともに文章データ６０の単語情報７０ｍに組み込まれている。そして、文章生成手段１７１は、生成した文章データ６０を出力して、記憶手段１５０の文章データ記憶領域１５３に適宜読み出し可能に記憶させる。

このため、情報伝達装置１００に、以下のような処理を実施させることができる。すなわち、読解制御手段１７３にて文章生成手段１７１において生成され記憶手段１５０に記憶された文章データ６０を読み出させ、表示制御手段１７２にて前記取得した文章データ６０に基づいて表示部１２０に文章を表示させる。そして、視点認識手段１６０にて、利用者の視点が表示部１２０に表示された任意の単語などに位置したことを認識した場合に、効果音制御手段１７４にて、文章データ６０から前記任意の単語を表示させている文字データ７１ｍを検索させて特定させる。この後、効果音制御手段１７４にて、この特定させた文字データ７１ｍが組み込まれた単語情報７０ｍに効果音特定情報７３ｍが組み込まれている場合に、この効果音特定情報７３ｍに基づいて音声出力部１３０に所定の単語に関連付けられた効果音を出力させる。したがって、情報伝達装置１００に、利用者に対して、表示部１２０に表示された文字に加えて、音声出力部１３０から出力される効果音でも前記所定の単語に関する情報を提供させることができる。よって、情報伝達装置１００に、利用者に対して文章内容に応じた状況をより的確に伝達する処理を容易に実施させることができる。

文章生成手段１７１は、確定前単語の変換を要求する旨の設定入力とともに、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識した場合に、利用者により選択された確定前単語の変換候補の単語を表示部１２０に表示させるための確定後単語データを生成するとともに、この確定後単語データに関連付けられた効果音特定情報２２ｋを取得する。この後、確定後単語データを文字データ７１ｍとして、効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。このため、所望の単語に関連付けられた効果音を音声出力部１３０に出力させることが可能な文章データ６０の情報量を最小限に抑えることができ、文章データ６０を記憶する記憶手段１５０の容量を小さくできる。また、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力により、効果音を出力させることが可能な文章データ６０を生成できるので、文章データ６０の生成処理の効率を向上させることができる。

また、文章生成手段１７１に、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識した後、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できないと判断した場合に、効果音特定情報７３ｍが組み込まれていない単語情報７０ｍを生成する機能を設けている。このため、文章生成手段１７１は、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できない場合には、確定後単語データに基づいて効果音特定情報７３ｍが組み込まれていない単語情報７０ｍを自動的に生成できる。したがって、文章データ６０の生成処理の効率を向上させることができる。

記憶手段１５０に、キーワードを表示部１２０に表示させるためのキーワード情報２１ｋと、前記キーワードに関連付けられた効果音を出力させるための効果音特定情報２２ｋと、が１つのデータ構造として構成された効果音候補情報１０を記憶する関連情報記憶領域１５２を設けている。文章生成手段１７１は、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識すると、関連情報記憶領域１５２の効果音候補情報１０から確定後単語を含むキーワードのキーワード情報２１ｋを検索する。そして、検索した例えば複数のキーワードとともに、これらのキーワードのうちのいずれか１つを囲むカーソル８０Ａなどが表示された候補表示画面８０を表示部１２０に表示させる。この後、文章生成手段１７１は、いずれかのキーワードが選択された旨のキーワード選択情報を認識すると、関連情報記憶領域１５２の効果音候補情報１０から、この選択されたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを取得する。そして、確定後単語データを文字データ７１ｍとして、効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。

このため、文章生成手段１７１は、確定後単語を含む例えば複数のキーワードなどを表示部１２０に表示させ、利用者により選択されたキーワードに関連付けられた効果音を出力させるための効果音特定情報２２ｋを単語情報７０ｍに組み込むことができる。したがって、利用者は、表示部１２０に表示され確定後単語に関連付けられた複数のキーワードに基づいて、所望の効果音を適宜選択できる。よって、利用者の所望の効果音を出力させることが可能な文章データ６０を生成でき、情報伝達装置１００に、利用者に対して文章内容に応じた状況をより的確に伝達する処理をより容易に実施させることができる。

さらに、文章生成手段１７１に、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識した後、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できないと判断した場合に、表示部１２０に効果音特定情報２２ｋを取得できない旨を表示させる機能を設けている。このため、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できるか否かを利用者に容易に認識させることができる。したがって、情報伝達装置１００の汎用性を高めることができる。

さらに、文章生成手段１７１は、単語情報７０ｍに、効果音特定情報７３ｍが組み込まれているか否かを示すフラグ情報７２ｍをそれぞれ組み込む。このため、情報伝達装置１００に、任意の単語を表示させている文字データ７１ｍが組み込まれた単語情報７０ｍに、効果音特定情報７３ｍが組み込まれているか否かを判断させる際に、フラグ情報７２ｍを参照させるだけの簡単な方法で判断させることができる。このため、情報伝達装置１００に、単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを判断させる処理を迅速にさせることができる。したがって、情報伝達装置１００に、音声出力部１３０から効果音を出力させる処理をより迅速にさせることができる。

文章生成手段１７１は、単語情報７０ｍに一般的に効果音データよりも情報量が少ない効果音特定情報７３ｍを組み込むので、単語情報７０ｍを生成する処理を迅速にできる。このため、文章データ６０を生成する処理をより迅速にできる。また、文章データ６０の情報量を少なくできるので、記憶手段１５０の容量をより小さくできる。さらに、情報伝達装置１００の構成を簡略化できるので、製造性向上やコスト削減あるいは小型化を図ることができる。

また、文章生成手段１７１にて、表示部１２０に候補表示画面８０を表示させた際に、カーソル８０Ａに囲まれたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音候補情報１０に基づいて、音声出力部１３０から効果音を出力させる構成としている。このため、利用者は、各キーワードに関連付けられた効果音を適宜選択的に聞いた後に所望の効果音を選択できる。したがって、利用者の所望の効果音を確実に出力させることが可能な文章データ６０をより容易に生成でき、情報伝達装置１００に、利用者に対して文章内容に応じた状況をより的確に伝達する処理をより容易に実施させることができる。

［第２の実施の形態］
次に、本発明に係る第２の実施の形態を図面に基づいて説明する。なお、本実施の形態では、任意の情報伝達装置にて生成した文章データに基づいて、他の情報伝達装置の表示部に文章を表示させ、この表示部に表示された所定の単語などに関連付けられた効果音を音声出力部に出力させる情報伝達システムを例示して説明するがこれに限られない。

図１０は、第２の実施の形態に係る情報伝達システムの概略構成を示すブロック図である。図１１は、情報伝達装置の概略構成を示すブロック図である。図１２は、情報伝達装置を構成する記憶手段の概略構成を示すブロック図である。図１３は、情報伝達装置を構成する処理部の概略構成を示すブロック図である。なお、第１の実施の形態の構成と略同一の構成については、同一の名称および同一の符号を付して説明を簡略化する。

〔情報伝達システムの構成〕
図１０において、２００はデータ出力システムおよびデータ処理システムとしての情報伝達システムであって、この情報伝達システム２００は、任意の情報伝達装置にて文章データを生成して、ネットワークを介して他の情報伝達装置に送信する。そして、他の情報伝達装置にて、受信した文章データに基づいて表示部に文章を表示させ、表示部に表示された所定の単語などに関連付けられた効果音データに基づいて、音声出力部に効果音を出力させるシステムである。そして、情報伝達システム２００は、ネットワーク３００と、データ出力装置、データ生成装置、および、データ処理装置としての第１の情報伝達装置４００Ａと、データ出力装置、データ生成装置、および、データ処理装置としての第２の情報伝達装置４００Ｂと、を備えている。なお、ここでは、情報伝達システム２００が、各情報伝達装置４００Ａ，４００Ｂの２台の装置を備えている構成について例示するが、これに限らず１台または３台以上の装置を備えた構成などとしてもよい。

ネットワーク３００には、第１の情報伝達装置４００Ａと、第２の情報伝達装置４００Ｂと、が接続されている。そして、ネットワーク３００は、第１の情報伝達装置４００Ａと、第２の情報伝達装置４００Ｂと、を各種情報の送受信が可能な状態に接続する。このネットワーク３００は、例えば図示しないサーバ装置を備えＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）などの汎用のプロトコルに基づくイントラネット、エクストラネット、イーサネット（登録商標）などのＬＡＮ（Local Area Network）や、無線媒体により各種情報が送受信可能な複数の図示しない基地局がネットワークを構成する通信回線網や放送網などを備えている。ここで、無線媒体としては、電波、光、音波、電磁波などのいずれの媒体をも適用できる。そして、このネットワーク３００に備えられたサーバ装置や基地局は、図示しない、サーバ記憶手段と、サーバ検索手段およびサーバ送信手段としての配信制御手段と、などを備えている。

サーバ記憶手段は、例えばＭＩＤＩ規格の効果データとしての効果音データを、この効果音データのファイル名とともに適宜読み出し可能に記憶する。

配信制御手段は、各情報伝達装置４００Ａ，４００Ｂから端末信号Ｓtaを受信可能である。この配信制御手段は、端末信号Ｓtaを取得すると、この端末信号Ｓtaに記載された、任意の効果音データの配信を要求する旨の効果データ要求情報としての効果音配信要求情報を認識する。この後、配信制御手段は、この効果音配信要求情報に記載された効果音特定情報２２ｋにより特定される効果音データをサーバ記憶手段から検索して読み出す。そして、この読み出した効果音データを端末信号Ｓtaに適宜変換して、効果音配信要求情報に記載された例えば装置固有情報により特定される例えば第１の情報伝達装置４００Ａに配信する。

第１の情報伝達装置４００Ａは、第１の実施の形態の情報伝達装置１００と同様に、例えばＰＤＡ、携帯電話、ＰＨＳ、パーソナルコンピュータなどが例示できる。この第１の情報伝達装置４００Ａは、ネットワーク３００を介して、第２の情報伝達装置４００Ｂと各種情報が送受信可能に接続されている。そして、第１の情報伝達装置４００Ａは、図１１に示すように、送受信器４１０と、入力部１１０と、文字出力手段、表示手段、および、報知手段としての表示部１２０と、効果出力手段としての音声出力部１３０と、メモリ１４０と、記憶手段４２０と、文字特定手段としての視点認識手段１６０と、処理部４３０と、などを備えている。なお、入力部１１０および処理部４３０にて、本実施の形態の効果データ要求生成手段が構成されている。また、第１の情報伝達装置４００Ａおよび第２の情報伝達装置４００Ｂは、略同一の構成を有しているため、以下において、第１の情報伝達装置４００Ａについて説明する。

送受信器４１０は、ネットワーク３００を介して第２の情報伝達装置４００Ｂに接続されるとともに、処理部４３０に接続されている。そして、送受信器４１０は、ネットワーク３００を介して第２の情報伝達装置４００Ｂから、または、ネットワーク３００から端末信号Ｓtaを受信可能で、この端末信号Ｓtaの取得により予め設定されている入力インターフェース処理を実施し、処理端末信号Ｓttを処理部４３０に出力する。また、送受信器４１０は、処理部４３０からの処理端末信号Ｓttの取得により予め設定されている出力インターフェース処理を実施し、端末信号Ｓtaとしてネットワーク３００を介して第２の情報伝達装置４００Ｂに、または、ネットワーク３００に送信する。

入力部１１０は、例えばキーボードやマウスなどで、入力操作される図示しない各種操作キーなどを有している。この操作キーの入力操作としては、文章データ６０を生成する操作やネットワーク３００を介して送信する操作、文章データ６０に効果音特定情報７３ｍを組み込むか否かの設定、文章データ６０の読解処理の設定などの各種設定事項などである。そして、入力部１１０は、設定事項の入力操作により、所定の処理信号Ｓinを処理部４３０へ適宜出力して設定させる。

表示部１２０は、処理部４３０にて制御され処理部４３０からの処理信号Ｓdpを受信する。そして、この受信した処理信号Ｓdpに記載された画像データを表示する。

音声出力部１３０は、処理部４３０にて制御され、処理部４３０からの音声データである効果音データなどの処理信号Ｓadを発音手段から音として出力する。

メモリ１４０は、効果音データや入力部１１０で入力操作される設定事項などを適宜読み出し可能に記憶する。また、メモリ１４０は、第１の情報伝達装置４００Ａ全体を動作制御するＯＳ上に展開される各種プログラムなどを記憶している。

記憶手段４２０は、図１２に示すように、関連情報記憶領域４２１と、文章データ記憶領域４２２と、を備えている。なお、ここでは、記憶手段４２０が上述した２つの記憶領域を備えた構成について例示したが、これに限らず例えば記憶手段４２０に上述した記憶領域を備えない構成や、さらに他の記憶領域を備えた構成などとしてもよい。また、記憶手段４２０としては、ＨＤ、ＤＶＤ、光ディスク、メモリカードなどの記録媒体に読み出し可能に記憶するドライブやドライバなどを備えた構成などが例示できる。

関連情報記憶領域４２１は、図３に示すような効果音候補情報１０を適宜読み出し可能に記憶する。

文章データ記憶領域４２２は、図４に示すような文章データ６０を適宜読み出し可能に記憶する。

視点認識手段１６０は、例えば表示部１２０に近接して配設されている。この視点認識手段１６０は、利用者が凝視している単語などの位置を特定する凝視位置情報を生成し、この生成した凝視位置情報を処理信号Ｓskに適宜変換して、処理部４３０に適宜出力する。

処理部４３０は、図示しない各種入出力ポート、例えば送受信器４１０が接続される通信ポート、入力部１１０が接続されるキー入力ポート、表示部１２０が接続される表示制御ポート、音声出力部１３０が接続される音声制御ポート、メモリ１４０が接続されるメモリポート、記憶手段４２０が接続される記憶ポート、視点認識手段１６０が接続される視点認識ポートなどを有する。そして、処理部４３０は、各種プログラムとして、図１３に示すように、候補表示制御手段および未取得報知制御手段としても機能する文字データ取得手段、関連付け手段、および、文章データ生成手段としての文章生成手段４３１と、候補表示制御手段および未取得報知制御手段としても機能する文章出力制御手段としての表示制御手段４３２と、読解制御手段１７３と、効果出力制御手段としての効果音制御手段４３３と、文章送受信手段４３４と、などを備えている。

文章生成手段４３１は、文章データ６０を生成する旨を要求する設定入力を認識すると、第１の実施の形態の文章生成手段１７１と同様の処理を実施して、複数の単語情報７０ｍを有する文章データ６０を生成する。具体的には、文章生成手段４３１は、まず、確定後単語を表示部１２０に表示させるための確定後単語データを生成する。

そして、文章生成手段４３１は、確定前単語の変換を要求する旨の設定入力とともに、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する組込要求信号の設定入力を認識している場合、記憶手段４２０に記憶された効果音候補情報１０から、確定後単語を含むキーワードのキーワード情報２１ｋを検索する。この後、表示制御手段４３２を制御して、この検索したキーワード情報２１ｋに基づいて、図６に示すような候補表示画面８０を表示部１２０に表示させる。そして、利用者により、いずれか１つのキーワードが選択された旨のキーワード選択情報を認識すると、前記選択されたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを検索して読み出す。そして、確定後単語データを文字データ７１ｍとして、フラグ情報「１」をフラグ情報７２ｍとして、読み出した効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。

また、文章生成手段４３１は、確定前単語の変換を要求する旨の設定入力のみを認識している場合、確定後単語データを文字データ７１ｍとして、フラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する。

そして、文章生成手段４３１は、これら生成した複数の単語情報７０ｍを文章データ６０としてメモリ信号Ｓmeに適宜変換し、この文章データ６０のファイル名とともに記憶手段４２０の文章データ記憶領域４２２に適宜読み出し可能に記憶させる。

表示制御手段４３２は、第１の実施の形態の表示制御手段１７２と同様に、表示部１２０を適宜制御して各種情報を表示部１２０に表示させる。具体的には、表示制御手段４３２は、確定後単語データに基づいて、例えば単語に点線の下線を付加した表示形態の確定後単語を表示部１２０に表示させる。また、効果音特定情報７３ｍが組み込まれていない単語情報７０ｍに基づいて、例えば単語のみを表示する表示形態の確定後単語を表示部１２０に表示させる。さらに、効果音特定情報７３ｍが組み込まれている単語情報７０ｍに基づいて、例えば単語の右側に音符マーク「♪」を付加するとともに、この単語および音符マーク「♪」に実線の下線を付加した表示形態の確定後単語を表示部１２０に表示させる。

また、表示制御手段４３２は、例えば候補表示画面８０や、入力部１１０による入力操作を促して各種情報を設定入力するための各種表示画面や、確定前単語に対する変換候補の単語を表示する候補表示画面などをも表示制御する。なお、表示制御手段４３２にて表示させる確定後単語や候補表示画面８０の表示形態は、上述したものに限られず適宜他の表示形態などとしてもよい。

読解制御手段１７３は、任意の文章の読解を開始する旨を要求する設定入力を認識すると、前記任意の文章を表示部１２０に表示させるための文章データ６０を記憶手段４２０から検索してメモリ信号Ｓmeとして読み出す。この後、表示制御手段４３２を制御して、この読み出した文章データ６０に基づいて、表示部１２０に単語などを表示させる。また、読解制御手段１７３は、文章の読解を中止する旨を要求する設定入力を認識すると、表示制御手段４３２を制御して、表示部１２０に単語など表示させる処理を中止させる。

効果音制御手段４３３は、カーソル８０Ａにより囲まれたキーワードに関連付けられた効果音を音声出力部１３０に適宜出力させる。具体的には、効果音制御手段４３３は、記憶手段４２０の関連情報記憶領域４２１に記憶された効果音候補情報１０から、カーソル８０Ａにより囲まれたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを検索して読み出す。そして、この読み出した効果音特定情報２２ｋおよび第１の情報伝達装置４００Ａを特定する装置固有情報などを記載した効果音配信要求情報を生成する。この後、この生成した効果音配信要求情報を処理端末信号Ｓttに適宜変換して、送受信器４１０に適宜出力する。そして、効果音制御手段４３３は、送受信器４１０から処理端末信号Ｓttを取得すると、この処理端末信号Ｓttに記載された効果音データをメモリ信号Ｓneに適宜変換して、メモリ１４０に適宜読み出し可能に記憶させる。この後、メモリ１４０に記憶させた効果音データをメモリ信号Ｓneとして読み出し、この読み出した効果音データに基づいて、音声出力部１３０に効果音を出力させる。そして、効果音データに基づく効果音の出力終了後に、効果音データをメモリ１４０から適宜削除する。なお、例えば利用者の入力部１１０の操作によりカーソル８０Ａが移動された場合、効果音制御手段４３３は、上述した処理を実施し、新たにカーソル８０Ａにより囲まれたキーワードに関連付けられた効果音を適宜出力させる。

また、効果音制御手段４３３は、利用者が凝視している任意の単語などに関連付けられた効果音を音声出力部１３０に適宜出力させる。具体的には、効果音制御手段４３３は、視点認識手段１６０から入力される処理信号Ｓskに基づいて、この処理信号Ｓskに記載された凝視位置情報を認識する。そして、この凝視位置情報に基づいて、利用者が凝視している単語などを認識し、この認識した単語などに関連付けられた効果音を音声出力部１３０に適宜出力させる。そして、効果音データに基づく効果音の出力終了後に、効果音データをメモリ１４０から適宜削除する。なお、効果音制御手段４３３にて、利用者が凝視している任意の単語などに関連付けられた効果音を出力させる処理の詳細については後述する。

文章送受信手段４３４は、記憶手段４２０に記憶された文章データ６０を、ネットワーク３００を介して、例えば第２の情報伝達装置４００Ｂに適宜送信する。具体的には、文章送受信手段４３４は、利用者による設定入力に基づいて、記憶手段４２０の文章データ記憶領域４２２に記憶された任意の文章データ６０をメモリ信号Ｓmeとして適宜読み出す。そして、この読み出した文章データ６０を処理端末信号Ｓttに変換し、この変換した処理端末信号Ｓttを送受信器４１０に適宜出力する。

また、文章送受信手段４３４は、ネットワーク３００を介して例えば第２の情報伝達装置４００Ｂから送信される文章データ６０を、記憶手段４２０に適宜読み出し可能に記憶させる。具体的には、文章送受信手段４３４は、送受信器４１０から入力される処理端末信号Ｓttに基づいて、この処理端末信号Ｓttに記載された文章データ６０を認識する。そして、この認識した文章データ６０をメモリ信号Ｓmeに適宜変換して、記憶手段４２０の文章データ記憶領域４２２に適宜読み出し可能に記憶させる。

〔情報伝達システムの動作〕
次に、情報伝達システム２００の動作を図面に基づいて説明する。

（文章データ生成処理）
まず、情報伝達システム２００の第１の情報伝達装置４００Ａの動作として、利用者の設定入力に基づいて文章データ６０を生成する処理である文章データ生成処理について図７に基づいて説明する。なお、ここでは、第１の情報伝達装置４００Ａの動作を例示して説明するが、第２の情報伝達装置４００Ｂにおける文章データ生成処理も同様に実施される。また、第１の実施の形態における文章データ生成処理と略同一の処理については、その説明を簡略化する。

まず、図７に示すように、第１の情報伝達装置４００Ａは、処理部４３０の文章生成手段４３１にて、利用者により文章データ６０を生成する旨が設定入力されたことを認識すると（ステップＳ１０１）、表示制御手段４３２にて、確定前単語の入力を促す表示画面を表示部１２０に表示させる。

処理部４３０は、表示制御手段４３２にて、利用者により入力された確定前単語を表示部１２０に表示させる。そして、処理部４３０は、文章生成手段４３１にて、確定前単語の漢字などへの変換を要求する旨の設定入力を認識すると（ステップＳ１０２）、例えば以下のような処理を実施する。すなわち、処理部４３０は、表示制御手段４３２にて、確定前単語に対する複数の変換候補とともに、これらの変換候補のうちのいずれか１つを選択する旨を促す表示画面を表示させる。ここで、利用者が確定前単語の変換を要求する旨を設定入力する方法としては、例えば第１の実施の形態と同様の方法が例示できるがこれに限られない。

そして、処理部４３０は、文章生成手段４３１にて、前記変換候補のうちのいずれか１つが選択されたことを認識すると、確定後単語データを生成する（ステップＳ１０３）。そして、処理部４３０は、表示制御手段４３２にて、変換候補などを表示させた候補表示画面を閉じる処理を実施する。

この後、文章生成手段４３１は、確定前単語の変換要求とともに、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨の組込要求信号が設定入力されているか否かを判断する（ステップＳ１０４）。ここで、利用者が確定前単語の変換要求とともに、組込要求信号を設定入力する方法としては、例えば第１の実施の形態と同様の方法が例示できるがこれに限られない。

ステップＳ１０４において、文章生成手段４３１にて、確定前単語の変換要求とともに、組込要求信号が設定入力されていないと判断した場合、「０」のフラグ情報を生成する（ステップＳ１０５）。そして、文章生成手段４３１は、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する（ステップＳ１０６）。この後、処理部４３０は、表示制御手段４３２にて、表示部１２０に表示された確定前単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいた表示形態、すなわち、下線および音符マーク「♪」が付加されない表示形態の確定後単語に置き換える。

一方で、ステップＳ１０４において、文章生成手段４３１にて、確定前単語の変換要求とともに、組込要求信号が設定入力されていると判断した場合、処理部４３０は、表示制御手段４３２にて、表示部１２０に表示された確定前単語を、ステップＳ１０３において生成した確定後単語データに基づいた表示形態、すなわち、点線の下線が付加された表示形態の確定後単語に置き換える。そして、処理部４３０は、文章生成手段４３１にて、記憶手段４２０に記憶された効果音候補情報１０に前記確定後単語を含むキーワードを表示させるためのキーワード情報２１ｋが組み込まれているか否かを判断する（ステップＳ１０７）。

ステップＳ１０７において、処理部４３０は、文章生成手段４３１にて、効果音候補情報１０に前記確定後単語を含むキーワードのキーワード情報２１ｋが組み込まれていないと判断した場合、例えば「効果音データなし」の文字が表示された表示画面を表示させる（ステップＳ１０８）。そして、文章生成手段４３１は、ステップＳ１０５に進み、「０」のフラグ情報を生成する。この後、ステップＳ１０６に進み、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する。そして、処理部４３０は、表示制御手段４３２にて、表示部１２０に表示された点線の下線が付与された確定後単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいた表示形態、すなわち、下線および音符マーク「♪」が付加されない表示形態の確定後単語に置き換える。

一方で、ステップＳ１０７において、処理部４３０は、文章生成手段４３１にて、効果音候補情報１０に前記確定後単語を含むキーワードのキーワード情報２１ｋが組み込まれていると判断した場合、表示制御手段４３２にて、図６に示すように、前記確定後単語を含むキーワードの一覧が表示された候補表示画面８０を表示させる（ステップＳ１０９）。そして、処理部４３０は、効果音制御手段４３３にて、記憶手段４２０から、カーソル８０Ａにより囲まれたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋと、装置固有情報となどを記載した効果音配信要求情報を生成する。この後、この生成した効果音配信要求情報を、ネットワーク３００に送信する。

ネットワーク３００は、配信制御手段にて、効果音配信要求情報を受信すると、サーバ記憶手段から、効果音配信要求情報に記載された効果音特定情報２２ｋにより特定される効果音データを検索して読み出す。そして、この読み出した効果音データを、効果音配信要求情報に記載された装置固有情報に基づいて、第１の情報伝達装置４００Ａに配信する。

第１の情報伝達装置４００Ａは、効果音制御手段４３３にて、ネットワーク３００から配信された効果音データを取得すると、この効果音データをメモリ１４０に適宜読み出し可能に記憶させる。そして、この記憶させた効果音データに基づいて、音声出力部１３０に効果音を出力させる。例えば、カーソル８０Ａにより「突風」が囲まれた場合、効果音制御手段４３３は上述したような処理を実施し、突風を連想させる効果音を出力させ、カーソル８０Ａが「波風」を囲むように移動された場合、波風を連想させる効果音を出力させる。この後、効果音データに基づく効果音の出力終了後に、効果音データをメモリ１４０から適宜削除する。

そして、処理部４３０は、文章生成手段４３１にて、ステップＳ１０９において候補表示画面８０に表示させたキーワードのうちのいずれか１つが選択されたか否かを判断する（ステップＳ１１０）。ここで、利用者がいずれか１つのキーワードを選択する方法としては、例えば第１の実施の形態と同様の方法が例示できるがこれに限られない。

ステップＳ１１０において、文章生成手段４３１にて、キーワードのうちのいずれか１つが選択されていないと判断した場合、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨の要求が取り消されたか否かを判断する（ステップＳ１１１）。ここで、利用者が前記要求を取り消す方法としては、例えば第１の実施の形態と同様の方法が例示できるがこれに限られない。

ステップＳ１１１において、文章生成手段４３１は、前記要求が取り消されていないと判断した場合、ステップＳ１１０に戻る。

一方で、ステップＳ１１１において、前記要求が取り消されていると判断した場合、ステップＳ１０５に進み、「０」のフラグ情報を生成する。この後、ステップＳ１０６に進み、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「０」をフラグ情報７２ｍとして組み込んだ単語情報７０ｍを生成する。そして、処理部４３０は、表示制御手段４３２にて、表示部１２０に表示された点線の下線が付加された表示形態の確定後単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいた表示形態、すなわち、下線および音符マーク「♪」が付加されない表示形態の確定後単語に置き換える。

一方で、ステップＳ１１０において、キーワードのうちのいずれか１つが選択されたと判断した場合、処理部４３０は、効果音制御手段４３３を制御して、効果音を出力させる処理を中止させる。そして、処理部４３０は、文章生成手段４３１にて、効果音候補情報１０から前記選択されたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音特定情報２２ｋを検索して読み出す（ステップＳ１１２）。

そして、文章生成手段４３１は、ステップＳ１０５に進み、「１」のフラグ情報を生成する。この後、ステップＳ１０６に進み、ステップＳ１０３において生成した確定後単語データを文字データ７１ｍとして、ステップＳ１０５において生成したフラグ情報「１」をフラグ情報７２ｍとして、ステップＳ１１２において読み出した効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。そして、処理部４３０は、表示制御手段４３２にて、表示部１２０に表示された点線の下線が付加された表示形態の確定後単語を、ステップＳ１０６において生成した単語情報７０ｍに基づいた表示形態、すなわち、下線および音符マーク「♪」が付加された表示形態の確定後単語に置き換える。

そして、文章生成手段４３１は、文章データ６０の生成を中止する旨が要求されているか否かを判断する（ステップＳ１１３）。

ステップＳ１１３において、前記要求がされていないと判断した場合、ステップＳ１０２に戻る。

一方で、ステップＳ１１３において、前記要求がされていると判断した場合、ステップＳ１０２ないしステップＳ１１２を処理することにより生成された複数の単語情報７０ｍを文章データ６０として、この文章データ６０のファイル名とともに記憶手段４２０の文章データ記憶領域４２２に記憶させる。そして、文章データ６０の生成処理を終了する。

この後、第１の情報伝達装置４００Ａは、文章送受信手段４３４にて、利用者により、任意の文章データ６０の例えば第２の情報伝達装置４００Ｂへの送信を要求する旨が設定入力されたことを認識すると、記憶手段４２０からこの文章データ６０を読み出す。そして、ネットワーク３００を介して第２の情報伝達装置４００Ｂに送信する。

第２の情報伝達装置４００Ｂは、第１の情報伝達装置４００Ａから文章データ６０を受信すると、この受信した文章データ６０を記憶手段４２０の文章データ記憶領域４２２に適宜読み出し可能に記憶させる。

（効果音出力処理）
次に、情報伝達システム２００の第２の情報伝達装置４００Ｂの動作として、利用者が表示部１２０に表示された文章中の所定の単語などを凝視した際に、この所定の単語に関連付けられた効果音を音声出力部１３０に出力させる処理である効果音出力処理について図８および図９に基づいて説明する。なお、ここでは、第２の情報伝達装置４００Ｂの動作を例示して説明するが、第１の情報伝達装置４００Ａにおける効果音出力処理も同様に実施される。また、第１の実施の形態における効果音出力処理と略同一の処理については、その説明を簡略化する。

まず、図８に示すように、第２の情報伝達装置４００Ｂは、処理部４３０の読解制御手段１７３にて、利用者により任意の文章の読解を開始する旨の要求が設定入力されたことを認識すると（ステップＳ２０１）、記憶手段４２０から前記文章を表示させるための文章データ６０を検索して読み出す（ステップＳ２０２）。そして、処理部４３０は、表示制御手段４３２にて、この読み出した文章データ６０の単語情報７０ｍに基づいて、図９に示すように、表示部１２０に文章を表示させる（ステップＳ２０３）。この後、利用者は、表示部１２０に表示された文章を適宜読解する。

第２の情報伝達装置４００Ｂは、視点認識手段１６０にて、利用者が文章の単語などを凝視していることを認識すると、この凝視されている単語などを認識する（ステップＳ２０４）。そして、視点認識手段１６０は、凝視位置情報を生成し、この生成した凝視位置情報を処理部４３０に適宜出力する。

処理部４３０は、視点認識手段１６０より凝視位置情報を取得すると、効果音制御手段４３３にて、この凝視位置情報に基づいて利用者が凝視している単語などを認識する。そして、ステップＳ２０２において読み出した文章データ６０から、前記認識した単語などを表示させるための文字データ７１ｍが組み込まれた単語情報７０ｍを検索して特定する（ステップＳ２０５）。

この後、効果音制御手段４３３は、ステップＳ２０５において特定した単語情報７０ｍのフラグ情報７２ｍが「１」であるか否かを判断する（ステップＳ２０６）。

ステップＳ２０６において、前記単語情報７０ｍのフラグ情報７２ｍが「０」であると判断した場合、特に処理を実施しない。そして、処理部４３０は、読解制御手段１７３にて、文章の読解を中止する旨が要求されているか否かを判断する（ステップＳ２０７）。

ステップＳ２０７において、前記要求がされていると判断した場合、読解制御手段１７３は、表示制御手段４３２を制御して、表示部１２０に単語などを表示させる処理を中止させ、効果音出力処理を終了する。

一方で、ステップＳ２０７において、前記要求がされていないと判断した場合、ステップＳ２０４に戻る。

また、ステップＳ２０６において、前記単語情報７０ｍのフラグ情報７２ｍが「１」であると判断した場合、この単語情報７０ｍの効果音特定情報７３ｍと、第２の情報伝達装置４００Ｂを特定する装置固有情報となどを記載した効果音配信要求情報を生成する。この後、この生成した効果音配信要求情報を、ネットワーク３００に送信する。

ネットワーク３００は、配信制御手段にて、効果音配信要求情報を受信すると、サーバ記憶手段から、効果音配信要求情報に記載された効果音特定情報７３ｍにより特定される効果音データを検索して読み出す。そして、この読み出した効果音データを、効果音配信要求情報に記載された装置固有情報に基づいて、第２の情報伝達装置４００Ｂに配信する。

第２の情報伝達装置４００Ｂは、効果音制御手段４３３にて、ネットワーク３００から配信された効果音データを取得すると、この効果音データをメモリ１４０に適宜読み出し可能に記憶させる。そして、この記憶させた効果音データを読み出し（ステップＳ２０８）、この読み出した効果音データに基づいて、音声出力部１３０に効果音を出力させる（ステップＳ２０９）。この後、効果音データに基づく効果音の出力終了後に、効果音データをメモリ１４０から適宜削除する。そして、処理部４３０は、読解制御手段１７３にて、ステップＳ２０７の処理を実施する。

〔第２の実施の形態の作用効果〕
上述したように、上記第２の実施の形態では、情報伝達システム２００の例えば第１の情報伝達装置４００Ａは、文章生成手段４３１にて、複数の文字データ７１ｍを有する文章データ６０を生成する。ここで、表示部１２０に所定の単語などを表示させるための文字データ７１ｍは、効果音特定情報７３ｍとともに文章データ６０の単語情報７０ｍに組み込まれている。そして、この生成した文章データ６０を、ネットワーク３００を介して、例えば第２の情報伝達装置４００Ｂに送信する。第２の情報伝達装置４００Ｂは、表示制御手段４３２にて、第１の情報伝達装置４００Ａから送信された文章データ６０に基づいて、表示部１２０に文章を表示させる。そして、視点認識手段１６０にて、利用者の視点が表示部１２０に表示された任意の単語などに位置したことを認識すると、効果音制御手段４３３にて、前記任意の単語などを表示させている文字データ７１ｍを特定する。この後、この特定した文字データ７１ｍが組み込まれた単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを判断し、組み込まれていると判断した場合に、効果音特定情報７３ｍなどが記載された効果音配信要求情報を生成する。そして、この効果音配信要求情報を、ネットワーク３００に送信する。ネットワーク３００は、図示しない配信制御手段にて、効果音配信要求情報を受信すると、この効果音配信要求情報の効果音特定情報７３ｍに基づいて、図示しないサーバ記憶手段から効果音データを検索して読み出す。そして、この読み出した効果音データを第２の情報伝達装置４００Ｂに配信する。第２の情報伝達装置４００Ｂは、効果音制御手段４３３にて、効果音データを取得すると、この取得した効果音データに基づいて音声出力部１３０から前記任意の単語に関連付けられた効果音を出力させる。

このため、情報伝達システム２００は、例えば第２の情報伝達装置４００Ｂにて、利用者に、表示部１２０に表示された文字に加えて、音声出力部１３０から出力される効果音でも前記任意の単語に関する情報を提供できる。したがって、利用者に文章内容に応じた状況をより的確に伝達できる。

また、例えば第２の情報伝達装置４００Ｂは、ネットワーク３００のサーバ記憶手段から効果音データを適宜取得して、この取得した効果音データに基づいて、音声出力部１３０から効果音を出力させるので、記憶手段４２０に効果音データを記憶させる必要がなくなる。このため、記憶手段４２０の容量を小さくできる。したがって、例えば第２の情報伝達装置４００Ｂの構成を簡略化でき、製造性向上やコスト削減あるいは小型化を図ることができる。

さらに、ネットワーク３００のサーバ記憶手段に効果音データを記憶させたので、各情報伝達装置４００Ａ，４００Ｂに同一の効果音データを適宜配信できる。このため、効果音データの共有化が可能な汎用性が高い情報伝達システム２００を提供できる。

各情報伝達装置４００Ａ，４００Ｂの表示制御手段４３２は、所定の単語と、この所定の単語以外の単語と、を異なる表示形態で表示部１２０に表示させている。これにより、音声出力部１３０から効果音が出力されている際に、利用者に、前記効果音が表示部１２０に表示されている単語のうちの、どの単語に関連付けられたものなのかを容易に認識させることができる。したがって、利用者は、例えば効果音が出力された際に文章の読解を中止して、効果音および表示部１２０に表示された文字により、所定の単語により表される状況の余韻に浸ることができる。

本実施の形態の各情報伝達装置４００Ａ，４００Ｂの文字出力手段を文章データ６０に基づいて文章を表示する表示部１２０としている。このため、一般的に少ない情報量で情報を伝達できる文章を用いて情報を伝達するので、文章データ６０の情報量を少なくできる。したがって、例えば第２の情報伝達装置４００Ｂの表示部１２０に文章を表示させる処理や、例えば第１の情報伝達装置４００Ａにて文章データ６０を生成する処理、あるいは、ネットワーク３００を介して文章データ６０を送受信する処理の効率をより向上させることができる。また、文章データ６０を記憶する例えば第２の情報伝達装置４００Ｂの記憶手段４２０の容量を小さくできる。さらに、例えば第２の情報伝達装置４００Ｂの表示部１２０に文字で情報を表示させているので、利用者に情報をより的確に伝達できる。

また、例えば第１の情報伝達装置４００Ａの文章生成手段４３１は、確定前単語の変換を要求する旨の設定入力とともに、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識すると、確定後単語データを生成するとともに、この確定後単語データに関連付けられた効果音特定情報２２ｋを取得する。この後、確定後単語データを文字データ７１ｍとして、効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。このため、文章データ６０の情報量を最小限に抑えることができ、文章データ６０を記憶する記憶手段１５０の容量を小さくできる。また、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力により、効果音を出力させることが可能な文章データ６０を生成できるので、文章データ６０の生成処理の効率を向上させることができる。

単語情報７０ｍには、効果音特定情報７３ｍが組み込まれているか否かを示すフラグ情報７２ｍが組み込まれている。このため、効果音制御手段４３３は、単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを判断する場合に、単語情報７０ｍのフラグ情報７２ｍを参照するだけの簡単な方法で判断できる。したがって、単語情報７０ｍに効果音特定情報７３ｍが組み込まれているか否かを判断する処理を迅速にでき、音声出力部１３０から効果音を出力する処理の効率を向上させることができる。

単語情報７０ｍに、一般的に効果音データよりも情報量が少ない効果音特定情報７３ｍを組み込んでいるので、単語情報７０ｍの情報量をより少なくできる。このため、文章データ６０の情報量をより少なくでき、この文章データ６０を記憶する記憶手段４２０の容量をより小さくできる。また、文章データ６０の情報量をより少なくできるので、ネットワーク３００を介して文章データ６０を送受信する処理をより迅速にでき、通信費を削減できる。

例えば第１の情報伝達装置４００Ａの文章生成手段４３１に、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識した後、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できないと判断した場合に、効果音特定情報７３ｍが組み込まれていない単語情報７０ｍを生成する機能を設けている。このため、文章生成手段４３１は、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できない場合には、確定後単語データに基づいて効果音特定情報７３ｍが組み込まれていない単語情報７０ｍを自動的に生成でき、文章データ６０の生成処理の効率を向上させることができる。

例えば第１の情報伝達装置４００Ａの記憶手段４２０に、キーワード情報２１ｋと、このキーワード情報２１ｋのキーワードに関連付けられた効果音の効果音特定情報２２ｋと、が１つのデータ構造として構成された効果音候補情報１０を記憶する関連情報記憶領域４２１を設けている。文章生成手段４３１は、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識すると、効果音候補情報１０から確定後単語を含むキーワードのキーワード情報２１ｋを検索する。そして、検索した例えば複数のキーワードとともに、カーソル８０Ａなどが表示された候補表示画面８０を表示部１２０に表示させる。この後、文章生成手段４３１は、キーワードが選択された旨のキーワード選択情報を認識すると、関連情報記憶領域１５２の効果音候補情報１０から、この選択されたキーワードのキーワード情報２１ｋと同じレコードの効果音特定情報２２ｋを取得する。そして、確定後単語データを文字データ７１ｍとして、効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する。

このため、文章生成手段４３１は、確定後単語を含む例えば複数のキーワードなどを表示部１２０に表示させ、利用者により選択されたキーワードに関連付けられた効果音を出力させるための効果音特定情報２２ｋを単語情報７０ｍに組み込むことができる。したがって、利用者は、表示部１２０に表示され確定後単語に関連付けられた複数のキーワードに基づいて、所望の効果音を適宜選択できる。よって、利用者の所望の効果音を出力させることが可能な文章データ６０を生成でき、例えば第２の情報伝達装置４００Ｂに、利用者に対して文章内容に応じた状況をより的確に伝達する処理をより容易に実施させることができる。

さらに、例えば第１の情報伝達装置４００Ａの文章生成手段４３１に、単語情報７０ｍに効果音特定情報７３ｍを組み込む旨を要求する設定入力を認識した後、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できないと判断した場合に、表示部１２０に効果音特定情報２２ｋを取得できない旨を表示させる機能を設けている。このため、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できるか否かを利用者に容易に認識させることができる。したがって、例えば第１の情報伝達装置４００Ａの汎用性を高めることができる。

また、例えば第１の情報伝達装置４００Ａの文章生成手段４３１にて、表示部１２０に候補表示画面８０を表示させた際に、カーソル８０Ａに囲まれたキーワードのキーワード情報２１ｋと同じレコードに組み込まれた効果音候補情報１０に基づいて、音声出力部１３０から効果音を出力させる構成としている。このため、利用者は、各キーワードに関連付けられた効果音を適宜選択的に聞いた後に所望の効果音を選択できる。したがって、利用者の所望の効果音を確実に出力させることが可能な文章データ６０をより容易に生成でき、例えば第１の情報伝達装置４００Ａに、利用者に対して文章内容に応じた状況をより的確に伝達する処理をより容易に実施させることができる。

ネットワーク３００から取得した効果音データを、効果音の出力終了後にメモリ１４０から適宜削除する構成としているので、メモリ１４０の容量を小さくでき、各情報伝達装置４００Ａ，４００Ｂの構成を簡略化できる。

〔実施の形態の変形〕
なお、本発明は、上述した各実施の形態に限定されるものではなく、本発明の目的を達成できる範囲で以下に示される変形をも含むものである。

すなわち、各実施の形態において、表示制御手段１７２，４３２にて、表示部１２０に所定の単語と、この所定の単語以外の単語と、を異なる表示形態で表示させる構成について例示したが、これに限らず同じ表示形態で表示させる構成などとしてもよい。このような構成にすれば、表示部１２０に表示させる単語の表示形態を適宜変更させる処理を省略できるので、表示部１２０に文章を表示させる処理をより迅速にできる。

また、各実施の形態、および、上述した実施の形態の変形の構成において、文章データ６０に基づいて表示部１２０に文章を表示させ、利用者の視点やカーソルが表示部１２０にされた所定の単語などに位置したことを認識した場合に、音声出力部１３０から効果音を出力させる構成について例示したが、例えば以下のような構成などとしてもよい。

すなわち、文章データ６０の単語情報７０ｍを発音手段に単語を発音させるためのデータとする。なお、この文章データ６０としては、各実施の形態に例示したテキストデータの他に、音声データなど発音手段に単語を発音させることが可能ないかなる形式のデータをも適用できる。そして、情報伝達装置１００，４００Ａ，４００Ｂに、単語を発音する発音手段と、文章データ６０に基づいて発音手段に単語を発音させる発音制御手段と、などを設ける。さらに、視点認識手段１６０の代わりに、発音手段にて発音された単語を認識する文字特定手段としての発音認識手段を設ける。また、効果音制御手段１７４，４３３に、発音認識手段にて発音手段において所定の単語が発音されたことを認識すると、音声出力部１３０に前記所定の単語に関連付けられた効果音を出力させる機能を設ける構成などとしてもよい。このような構成にすれば、利用者に、発音手段から発音される音に加え、音声出力部１３０から出力される効果音でも所定の単語に関する情報を提供することができる。このため、利用者に文章内容に応じた状況をより的確に伝達できる。また、単語を発音手段にて発音させる構成としているので、各実施の形態のように表示部１２０に単語などを表示させる構成と比べて、一度に多くの人に情報を容易に提供できる。このため、汎用性がより高い情報伝達装置１００、情報伝達システム２００を提供できる。なお、このような構成において、音声出力部１３０を発音手段としてもよい。

各実施の形態において、視点認識手段１６０にて視点が所定の単語に位置したことを認識した場合に、効果音制御手段１７４，４３３にて音声出力部１３０から効果音を出力させる構成について例示したが、これに限らず例えば以下のような構成などとしてもよい。すなわち、視点認識手段１６０にて視点が所定の単語に位置したことを認識した場合に、前記所定の単語に関連付けられた効果データとしての画像データに基づいて、画像および映像のうちの少なくともいずれか一方を表示部１２０に表示させる効果出力手段としての画像表示制御手段を設けた構成などとしてもよい。この画像表示制御手段にて、画像や映像を表示部１２０に表示させる構成としては、表示された文章に重ならない位置に画像や映像を表示させる構成や、表示された文章の背景として画像や映像を表示させる構成などが例示できるがこれに限られない。このような構成にすれば、利用者に、表示部１２０に表示された文字に加えて、表示部１２０に表示された画像や映像でも前記所定の単語に関する情報を提供することができる。このため、利用者に文章内容に応じた状況をより的確に伝達できる。また、表示部１２０に文字よりも多くの情報を伝達できる画像や映像を表示させるので、利用者に状況をより的確に伝達できる。

各実施の形態において、単語情報７０ｍに、効果音特定情報７３ｍが組み込まれているか否かを示すフラグ情報７２ｍを組み込まない構成としてもよい。このような構成にすれば、単語情報７０ｍの情報量を少なくできる。また、文章データ６０を生成する処理においてフラグ情報を生成する必要がなくなるので、ステップＳ１０５の処理を省略でき、文章データを生成する処理時間を短縮できる。そして、特に第２の実施の形態においては、単語情報７０ｍの情報量を少なくできるので、ネットワーク３００を介して文章データ６０を送受信する処理などをより迅速にできる。

各実施の形態において、単語情報７０ｍに効果音特定情報７３ｍを組み込んだ構成について例示したが、これに限らず例えば単語情報７０ｍに効果音データを直接的に組み込んでもよい。このような構成にすれば、例えば各実施の形態の視点認識手段１６０にて、視点が所定の単語に位置したことを認識すると、文章データ６０から前記所定の単語を表示させている文字データ７１ｍを検索して特定する。そして、この特定した文字データ７１ｍが組み込まれている単語情報７０ｍの効果音データに基づいて、音声出力部１３０に効果音を出力させることができる。このため、第１の実施の形態においては、前記特定した文字データ７１ｍに基づいて記憶手段１５０から効果音データを検索して取得する処理などを省略でき、音声出力部１３０に効果音を出力させる処理をより迅速にできる。また、第２の実施の形態においては、前記特定した文字データ７１ｍに基づいてネットワーク３００から効果音データを取得する処理などを省略でき、音声出力部１３０に効果音を出力させる処理をより迅速にできる。さらに、第２の実施の形態においては、ネットワーク３００に、ネットワーク記憶領域および配信制御手段を設ける必要がなくなるので、ネットワーク３００の構成を簡略化できる。

各実施の形態において、文章生成手段１７１，４３１に、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できないと判断した場合に、表示部１２０に効果音特定情報２２ｋを取得できない旨を表示させる機能を設けた構成について例示したが、このような機能を設けない構成としてもよい。このような場合、各情報伝達装置１００，４００Ａ，４００Ｂは、ステップＳ１０７の処理を実施して効果音特定情報２２ｋを取得できないと判断した場合に、ステップＳ１０５の処理を実施して、フラグ情報を生成する。このため、ステップＳ１０８の処理を省略でき、文章データ６０を生成する処理時間を短縮できる。

各実施の形態において、文章生成手段１７１，４３１に、確定後単語データに関連付けられた効果音特定情報２２ｋを取得できないと判断した場合に、効果音特定情報７３ｍが組み込まれていない単語情報７０ｍを生成する機能を設けた構成について例示したが、これに限らず例えば以下のような構成などとしてもよい。すなわち、効果音特定情報２２ｋを取得できないと判断した場合に、例えば確定後単語の再設定を要求する旨を表示部１２０に表示させる構成などとしてもよい。このような構成にすれば、例えば利用者により確定後単語が誤って設定された場合には、この誤って設定された確定後単語に基づいて単語情報７０ｍが生成されることがない。このため、文章データ６０を正確に生成可能な情報伝達装置１００，４００Ａ，４００Ｂを提供できる。

各実施の形態において、情報伝達装置１００，４００Ａ，４００Ｂに、文字出力手段を備えた端末装置および効果出力手段としての発音装置を接続して、端末装置に文章を表示させ、発音装置に効果音を出力させる構成としてもよい。このような構成にすれば、情報伝達装置１００，４００Ａ，４００Ｂに、表示部１２０、音声出力部１３０を設ける必要がなくなるので、情報伝達装置１００，４００Ａ，４００Ｂの構成を簡略化でき、製造性向上やコスト削減あるいは小型化を図ることができる。

第２の実施の形態において、ネットワーク３００から取得した効果音データを効果音の出力終了後にメモリ１４０から適宜削除する構成について例示したが、これに限らず例えば以下のような構成などとしてもよい。すなわち、ネットワーク３００から取得した効果音データをメモリ１４０や記憶手段４２０に記憶させ、効果音の出力終了後にも削除しない構成とする。そして、効果音制御手段４３３にて効果音を出力させる処理を実施する際に、所定の単語の単語情報７０ｍの効果音特定情報７３ｍに基づいて、まずメモリ１４０や記憶手段４２０から検索し、検索できなかった場合に効果音配信要求情報を生成する構成などとしてもよい。このような構成にすれば、効果音を出力するたびにネットワーク３００に接続する必要がなくなるので、通信費を削減できる。

各実施の形態において、文章データ６０を生成する処理の際に、単語情報７０ｍに効果音特定情報７３ｍを組み込む構成について例示したが、これに限らず例えば以下のような構成などとしてもよい。すなわち、まず、効果音特定情報７３ｍが組み込まれていない単語情報７０ｍのみを有する文章データ６０を生成する。そして、この生成した文章データ６０の所望の単語情報７０ｍに効果音特定情報７３ｍを適宜組み込む構成などとしてもよい。このような構成にすれば、例えば他人が作成した文章データ６０にも効果音を適宜付加することができ、汎用性を高めることができる。

第２の実施の形態において、第１の情報伝達装置４００Ａと、第２の情報伝達装置４００Ｂとを、ネットワーク３００を介さずに直接的に各種情報を送受信可能に接続する構成としてもよい。このような構成にすれば、情報伝達システム２００の構成を簡略化できる。また、ネットワーク３００を介さず文章データ６０を送受信できるので、前記送受信処理をより迅速にできる。ここで、各情報伝達装置４００Ａ，４００Ｂを直接的に接続する場合、ケーブルなどの有線媒体や電波、光、音波、電磁波などの無線媒体などを用いることができるがこれに限られない。

また、各実施の形態、および、上述した実施の形態の変形の構成において、文章データ６０に基づいて表示部１２０に文章を表示させ、視点認識手段１６０にて利用者の視点が表示部１２０にされた所定の単語に位置したことを認識した場合に、音声出力部１３０から効果音を出力させる構成について例示したが、例えば以下のような構成などとしてもよい。

すなわち、表示部１２０に表示された例えば任意の文字の下に、入力部１１０の設定入力により所定速度で一定方向に移動を開始するカーソルを表示させる。そして、視点認識手段１６０の代わりに、カーソルの位置を認識する文字特定手段としてのカーソル認識手段を設ける。また、効果音制御手段１７４，４３３に、カーソル認識手段にてカーソルが所定の単語などの下まで移動したことを認識すると、音声出力部１３０に前記所定の単語などに関連付けられた効果音を出力させる機能を設ける構成などとしてもよい。このような構成にしても、利用者に対して、表示部１２０に表示された文字に加えて、音声出力部１３０から出力される効果音でも前記所定の単語に関する情報を提供させることができる。このため、利用者に対して文章内容に応じた状況をより的確に伝達する処理を容易に実施させることができる。また、所定速度で移動するカーソルが所定の単語などの下まで移動したことを認識して効果音を出力させる構成としているので、例えば表示部１２０の表示領域を大きくすれば、一度に多くの人に情報を容易に提供できる。このため、汎用性がより高い情報伝達装置１００、情報伝達システム２００を提供できる。さらに、１度の入力部１１０の設定入力によりカーソルを所定速度で移動させ、このカーソルの移動に伴い効果音を適宜出力させることができる。このため、１度の入力部１１０の設定入力を実施するだけの簡単な操作で、利用者に対して文章内容に応じた状況をより的確に伝達する処理を実施させることができる。したがって、汎用性がより高い情報伝達装置１００、情報伝達システム２００を提供できる。

例えば、以下のような構成などとしてもよい。すなわち、例えば第１の実施の形態において、情報伝達装置１００に、ネットワークを介して各種情報を送受信可能にサーバ装置を接続する。サーバ装置に、効果音候補情報１０を記憶するサーバ記憶手段と、効果音候補情報１０の効果音特定情報２２ｋの送信を要求する旨の効果要求情報を取得し、この取得した効果要求情報に基づいてサーバ記憶手段から効果音特定情報２２ｋを検索するサーバ検索手段と、このサーバ検索手段にて検索した効果音特定情報２２ｋを情報伝達装置１００に送信するサーバ送信手段と、を設ける。また、情報伝達装置１００に、効果要求情報を生成してサーバ装置に送信する効果要求生成手段を備える。そして、情報伝達装置１００の文章生成手段１７１に、サーバ装置から送信される効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する機能を設けて、データ生成システムを構成してもよい。このような構成にすれば、情報伝達装置１００は、単語情報７０ｍに組み込む効果音特定情報７３ｍをサーバ装置から取得できる。このため、情報伝達装置１００の記憶手段１５０に効果音候補情報１０を記憶させる必要がなくなるので、記憶手段１５０の容量を小さくでき、情報伝達装置１００の構成を簡略化できる。

また、第２の実施の形態において、ネットワーク３００に備えられたサーバ装置のサーバ記憶手段に効果音候補情報１０を記憶させる。また、各情報伝達装置４００Ａ，４００Ｂに、効果要求情報を生成してサーバ装置に送信する効果要求生成手段を備える。そして、各情報伝達装置４００Ａ，４００Ｂの文章生成手段１７１に、サーバ装置から送信される効果音特定情報２２ｋを効果音特定情報７３ｍとして組み込んだ単語情報７０ｍを生成する機能を設けた構成としてもよい。このような構成にすれば、各情報伝達装置４００Ａ，４００Ｂは、単語情報７０ｍに組み込む効果音特定情報７３ｍをサーバ装置から取得できる。このため、各情報伝達装置４００Ａ，４００Ｂの記憶手段１５０に効果音候補情報１０を記憶させる必要がなくなるので、記憶手段４２０の容量を小さくでき、各情報伝達装置４００Ａ，４００Ｂの構成を簡略化できる。

また、上述した各機能をプログラムとして構築したが、例えば回路基板などのハードウェアあるいは１つのＩＣ（Integrated Circuit）などの素子にて構成するなどしてもよく、いずれの形態としても利用できる。なお、プログラムや別途記録媒体から読み取らせる構成とすることにより、取扱が容易で、利用の拡大が容易に図れる。

その他、本発明の実施の際の具体的な構造および手順は、本発明の目的を達成できる範囲で他の構造などに適宜変更できる。

〔実施の形態の作用効果〕
上述したように、上記実施の形態では、情報伝達装置１００は、表示制御手段１７２にて、複数の文字データ７１ｍを有する文章データ６０に基づいて表示部１２０に文章を表示させる。そして、視点認識手段１６０にて、利用者の視点が表示部１２０に表示された所定の単語などに位置したことを認識すると、効果音制御手段１７４にて、音声出力部１３０に前記所定の単語に関連付けられた効果音を出力させる。このため、利用者に、表示部１２０に表示された文字に加えて、音声出力部１３０から出力される効果音でも前記所定の単語に関する情報を提供することができる。したがって、利用者に文章内容に応じた状況をより的確に伝達できる。

また、情報伝達装置１００に、複数の文字データ７１ｍを有する文章データ６０を生成する文章生成手段１７１を設けている。ここで、表示部１２０に所定の単語などを表示させるための文字データ７１ｍは、効果音特定情報７３ｍとともに文章データ６０の単語情報７０ｍに組み込まれている。そして、文章生成手段１７１は、生成した文章データ６０を出力して、記憶手段１５０の文章データ記憶領域１５３に適宜読み出し可能に記憶させる。

このため、情報伝達装置１００に、以下のような処理を実施させることができる。すなわち、読解制御手段１７３にて文章生成手段１７１において生成された文章データ６０に基づいて表示部１２０に文章を表示させる。そして、視点認識手段１６０にて、利用者の視点が表示部１２０に表示された任意の単語などに位置したことを認識した場合に、効果音制御手段１７４にて、文章データ６０から前記任意の単語を表示させている文字データ７１ｍを検索させて特定させる。この後、効果音制御手段１７４にて、この特定させた文字データ７１ｍが組み込まれた単語情報７０ｍに効果音特定情報７３ｍが組み込まれている場合に、この効果音特定情報７３ｍに基づいて音声出力部１３０に所定の単語に関連付けられた効果音を出力させる。したがって、情報伝達装置１００に、利用者に対して、表示部１２０に表示された文字に加えて、音声出力部１３０から出力される効果音でも前記所定の単語に関する情報を提供させることができる。よって、情報伝達装置１００に、利用者に対して文章内容に応じた状況をより的確に伝達する処理を容易に実施させることができる。

本発明の第１の実施の形態に係る情報伝達装置の概略構成を示すブロック図である。 前記第１の実施の形態における情報伝達装置を構成する記憶手段の概略構成を示すブロック図である。 前記第１の実施の形態における効果音候補情報におけるデータのテーブル構造を模式的に示す概念図である。 前記第１の実施の形態における文章データにおけるデータのテーブル構造を模式的に示す概念図である。 前記第１の実施の形態における情報伝達装置を構成する処理部の概略構成を示すブロック図である。 前記第１の実施の形態における文章データ生成処理における文章表示画面を示す模式図である。 前記第１の実施の形態における文章データ生成処理を示すフローチャートである。 前記第１の実施の形態における効果音出力処理を示すフローチャートである。 前記第１の実施の形態における効果音出力処理における文章表示画面を示す模式図である。 本発明の第２の実施の形態に係る情報伝達システムの概略構成を示すブロック図である。 前記第２の実施の形態における情報伝達装置の概略構成を示すブロック図である。 前記第２の実施の形態における情報伝達装置を構成する記憶手段の概略構成を示すブロック図である。 前記第２の実施の形態における情報伝達装置を構成する処理部の概略構成を示すブロック図である。

符号の説明

２１ｋ 関連文字データとしてのキーワード情報
２２ｋ 効果出力情報としての効果特定情報である効果音特定情報
６０ 文章データ
７１ｍ 文字データ
７２ｍ フラグ情報
７３ｍ 効果出力情報としての効果特定情報である効果音特定情報
１００，４００Ａ，４００Ｂ データ出力装置、データ生成装置、および、データ処理装置としての情報伝達装置
１１０ 効果データ要求生成手段としても機能する入力部
１２０ 文字出力手段、表示手段、および、報知手段としての表示部
１３０ 効果出力手段としての音声出力部
１５１ 効果データ記憶手段としての音データ記憶領域
１６０ 文字特定手段としての視点認識手段
１７１ 候補表示制御手段および未取得報知制御手段としても機能する文字データ取得手段、関連付け手段、および、文章データ生成手段としての文章生成手段
１７２ 候補表示制御手段および未取得報知制御手段としても機能する文章出力制御手段としての表示制御手段
１７４ 効果出力制御手段としての効果音制御手段
２００ データ出力システムおよびデータ処理システムとしての情報伝達システム情報伝達システム
３００ ネットワーク
４３０ 効果データ要求生成手段としても機能する処理部
４３１ 候補表示制御手段および未取得報知制御手段としても機能する文字データ取得手段、関連付け手段、および、文章データ生成手段としての文章生成手段
４３２ 候補表示制御手段および未取得報知制御手段としても機能する文章出力制御手段としての表示制御手段
４３３ 効果出力制御手段としての効果音制御手段

Claims (11)

1. 文字出力手段に出力される複数の文字データを有する文章データを生成するデータ生成装置であって、
   前記文字データを取得する文字データ取得手段と、
   効果データを効果出力手段に出力させるための効果出力情報を所定の前記文字データに関連付ける旨を要求する関連付け要求情報を取得すると、前記所定の文字データの少なくとも一部を有するとともに前記効果出力情報に関連付けられた少なくとも１つの関連文字データを取得し、この取得した前記関連文字データとともに、前記関連文字データのうちのいずれか１つを囲むことが可能でありかつ入力手段の設定入力により移動可能なカーソルを表示手段に表示させる候補表示制御手段と、
   前記カーソルが移動するごとに、前記カーソルで囲まれている関連文字データに関連付けられた効果出力情報に基づいて前記効果データを効果出力手段から出力させる候補効果データ出力制御手段と、
   前記カーソルで囲まれている関連文字データを選択した旨の関連文字選択情報を認識すると、この認識した前記関連文字選択情報に基づいて前記関連文字データに関連付けられた前記効果出力情報を取得して、この取得した前記効果出力情報を前記所定の文字データに関連付ける関連付け手段と、
   少なくとも１つの前記所定の文字データと、前記効果出力情報が関連付けられていない少なくとも１つの他の前記文字データと、を有する前記文章データを生成する文章データ生成手段と、
   を具備したことを特徴としたデータ生成装置。
2. 請求項１に記載のデータ生成装置であって、
   前記関連付け手段にて前記効果出力情報を取得できないことを認識すると、前記効果出力情報を取得できない旨を報知手段に報知させる未取得報知制御手段を具備した
   ことを特徴としたデータ生成装置。
3. 請求項１または請求項２に記載のデータ生成装置であって、
   前記関連付け手段は、前記文字データに前記効果出力情報が関連付けられているか否かを示すフラグ情報をそれぞれ関連付ける
   ことを特徴としたデータ生成装置。
4. 請求項１ないし請求項３のいずれかに記載のデータ生成装置であって、
   前記効果出力情報は、前記効果データを特定する効果特定情報である
   ことを特徴としたデータ生成装置。
5. 請求項１ないし請求項４のいずれかに記載のデータ生成装置と、
   このデータ生成装置にて生成された前記文章データに基づいて、複数の前記文字データを文字出力手段に出力させる文章出力制御手段と、
   前記文字出力手段に出力された任意の前記文字データを特定する文字特定手段と、
   この文字特定手段にて所定の文字データが特定されたことを認識すると、この特定された文字データに関連付けられた効果データを効果出力手段に出力させる効果出力制御手段と、
   を具備したことを特徴としたデータ処理装置。
6. 請求項１ないし請求項４のいずれかに記載のデータ生成装置と、
   このデータ生成装置にネットワークを介して各種データを送受信可能に接続され、前記効果出力情報を記憶するサーバ記憶手段、前記効果出力情報の送信を要求する旨の効果要求情報を取得し、この取得した前記効果要求情報に基づいて前記サーバ記憶手段から前記効果出力情報を検索するサーバ検索手段、このサーバ検索手段にて検索した前記効果出力情報を前記データ生成装置に送信するサーバ送信手段を備えたサーバ装置と、
   を具備し、
   前記データ生成装置は、前記効果要求情報を生成して、この生成した前記効果要求情報を前記サーバ装置に送信する効果要求生成手段を備え、
   前記関連付け手段は、前記サーバ装置から送信される前記効果出力情報を取得して、この取得した前記効果出力情報を前記所定の文字データに関連付ける
   ことを特徴としたデータ生成システム。
7. 請求項５に記載のデータ処理装置と、
   このデータ処理装置にネットワークを介して各種データを送受信可能に接続され、前記効果データを出力する効果出力手段を備えた端末装置と、
   を具備したことを特徴としたデータ処理システム。
8. 請求項１ないし請求項４のいずれかに記載のデータ生成装置と、
   このデータ生成装置にネットワークを介して各種データを送受信可能に接続されたデータ出力装置と、を具備し、
   前記文章データ生成手段は、前記生成した前記文章データを前記データ出力装置に送信し、
   前記データ出力装置は、前記データ生成装置から送信された文章データに含まれる前記文字データを文字出力手段に出力させる文章出力制御手段と、
   前記文字出力手段に出力された任意の前記文字データを特定する文字特定手段と、
   この文字特定手段にて所定の文字データが特定されたことを認識すると、この特定された文字データに関連付けられた効果データを効果出力手段に出力させる効果出力制御手段と、
   を備えたことを特徴としたデータ処理システム。
9. コンピュータにより、文字出力手段に出力される複数の文字データを有する文章データを生成するデータ生成方法であって、
   前記文字データを取得し、
   効果データを効果出力手段に出力させるための効果出力情報を所定の前記文字データに関連付ける旨を要求する関連付け要求情報を取得すると、前記所定の文字データの少なくとも一部を有するとともに前記効果出力情報に関連付けられた少なくとも１つの関連文字データを取得し、この取得した前記関連文字データとともに、前記関連文字データのうちのいずれか１つを囲むことが可能でありかつ入力手段の設定入力により移動可能なカーソルを表示手段に表示させ、
   前記カーソルが移動するごとに、前記カーソルで囲まれている関連文字データに関連付けられた効果出力情報に基づいて前記効果データを効果出力手段から出力させ、
   前記カーソルで囲まれている関連文字データを選択した旨の関連文字選択情報を認識すると、この認識した前記関連文字選択情報に基づいて前記関連文字データに関連付けられた前記効果出力情報を取得して、この取得した前記効果出力情報を所定の前記文字データに関連付け、
   少なくとも１つの前記所定の文字データと、前記効果出力情報が関連付けられていない少なくとも１つの他の前記文字データと、を有する前記文章データを生成する
   ことを特徴とするデータ生成方法。
10. 請求項９に記載のデータ生成方法をコンピュータに実行させる
    ことを特徴としたデータ生成プログラム。
11. 請求項１０に記載のデータ生成プログラムがコンピュータにて読み取り可能に記憶された
    ことを特徴としたデータ生成プログラムを記録した記録媒体。

Images