JP2000081892A - 効果音付加装置および効果音付加方法 - Google Patents

効果音付加装置および効果音付加方法

Info

Publication number
JP2000081892A
JP2000081892A JP10250264A JP25026498A JP2000081892A JP 2000081892 A JP2000081892 A JP 2000081892A JP 10250264 A JP10250264 A JP 10250264A JP 25026498 A JP25026498 A JP 25026498A JP 2000081892 A JP2000081892 A JP 2000081892A
Authority
JP
Japan
Prior art keywords
sound
text
sentence
word
sound effect
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP10250264A
Other languages
English (en)
Inventor
Sanae Hirai
早苗 平井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP10250264A priority Critical patent/JP2000081892A/ja
Priority to GB9920923A priority patent/GB2343821A/en
Priority to US09/389,494 priority patent/US6334104B1/en
Publication of JP2000081892A publication Critical patent/JP2000081892A/ja
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/02—Methods for producing synthetic speech; Speech synthesisers
    • G10L13/04—Details of speech synthesis systems, e.g. synthesiser structure or memory management
    • G10L13/047—Architecture of speech synthesisers
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems

Abstract

(57)【要約】 【課題】入力文章に対して自動的に、効果音およびＢＧ
Ｍを付加する効果音付加装置の提供。 【解決手段】キーワード抽出装置３１に備えられる擬音
語抽出手段３１１、音源抽出手段３１２、主観語抽出手
段３１３は、入力文章中から擬音語、音源名、主観語の
キーワードを抽出し、音検索装置３２はこれらのキーワ
ードにて効果音および音楽を選出し、選出された効果音
および音楽は、音響制御装置４にて合成音声と同期をと
って出力される。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、効果音付加装置に
関し、特にテキスト文書に対して自動的に効果音を付加
する効果音付加装置および効果音付加方法に関する。
【０００２】
【従来の技術】従来、この種のテキスト読み上げに効果
音を付加するシステムは、読み上げ音声に臨場感を持た
せる目的で利用されている。この種の従来のシステムと
して、例えば特開平７−７２８８８号公報には、自然言
語処理によってシーンの環境を抽出し、効果音を付加し
た音声出力を可能とした情報処理装置が提案されてい
る。図１０は、同公報に提案されている情報処理装置の
構成を示す図である。図１０を参照すると、文章を入力
するためのキーボード１０１０と、文書入力装置１０２
０と、入力された文章を蓄積するメモリ１０３０と、文
章を解析する自然言語処理装置１０４０と、登場人物の
特徴を抽出する登場人物特徴抽出装置１０６０と、登場
人物の特徴を用いて音声を合成する音声合成装置１０９
０と、文章から環境を抽出する環境抽出装置１０５０
と、抽出された環境から効果音を発生する効果音発生装
置１０７０と、合成された音声と前記効果音を合成しエ
フェクタをかける音出力装置１０８０と、を備えて構成
されている。
【０００３】図１１は、環境抽出装置１０５０の構成を
示す図である。図１１を参照すると、環境抽出装置１０
５０は、環境抽出部１１１０と環境テーブル１１２０と
から構成される。
【０００４】図１２は、環境テーブル１１２０の一例を
示す図である。
【０００５】次に図１０、図１１、及び図１２を参照
し、効果音付加に関する部分について動作を説明する。
【０００６】キーボード１０１０又は文書入力装置１０
２０から入力された文章は、テキストとしてメモリ１０
３０に蓄積される。自然言語処理装置１０４０は、メモ
リ１０３０に蓄えられたテキストに対して、形態素解
析、構文解析を行ない、自然言語解析する。
【０００７】一方、環境抽出装置１０５０は、自然言語
処理装置１０４０から出力されたテキストの解析結果か
ら、環境を抽出する。
【０００８】環境を抽出するに際して、まず、テキスト
より主語・動詞のペアを抜き出し、その主語と動詞を、
図１２に示した環境テーブル１１２０の環境名１２００
と、動詞１２１０に対応する効果音のインデックスを出
力する。例えば、「雨の降りしきる」という部分から、 主語：雨 動詞：降りしきる という結果が得られたとすると、環境テーブル１１２０
（図１２）を参照して、対応する効果音のインデックス
「ｎａｔｕｒｅ１」１２３０を出力する。
【０００９】このようにして得られた効果音のインデッ
クス１２３０を効果音発生装置１０７０に入力し、その
インデックスの付加された効果音を発生させ、音出力装
置１０８０に入力する。
【００１０】
【発明が解決しようとする課題】しかしながら、上述し
た従来の情報処理装置においては、効果音の付加は可能
であるものの、以下のような問題点も存在する。
【００１１】第１の問題点は、効果音を選択するまでの
処理が複雑であり、処理及び検索時間が長くなる、とい
うことである。
【００１２】その理由は、全ての文章に対して自然言語
処理を行なっている、ためである。
【００１３】第２の問題点は、音の具体表現である擬音
語が活かされていない、ということである。
【００１４】その理由は、文章の主語と動詞のみに注目
した処理を行なっている、からである。
【００１５】第３の問題点は、文章に対してバックグラ
ウンドミュージックを付加することができない、という
ことである。
【００１６】その理由は、第２の問題点の理由と同様で
ある。
【００１７】したがって本発明は、上記問題点に鑑みて
なされたものであって、その目的は、短時間で処理可能
な効果音付加装置及び方法を提供することにある。
【００１８】本発明の他の目的は、テキスト文書中の音
表現に忠実に効果音を付加する効果音付加装置及び方法
を提供することにある。
【００１９】本発明のさらに他の目的は、バックグラウ
ンドミュージックを自動的に付加できるバックグラウン
ドミュージック付加装置を提供することにある。
【００２０】
【課題を解決するための手段】前記目的を達成する本発
明の効果音付加装置は、入力したテキストデータより、
所定の単位ごと文章を取得するテキスト取得手段と、前
記テキスト取得手段からの前記文章を入力し前記文章中
の擬音語を抽出する擬音語抽出手段と、前記擬音語抽出
手段で抽出された前記擬音語にて音データベースを検索
する音検索手段と、前記テキスト取得手段からの前記文
章を読み上げる合成音声と、前記音検索手段にて検索さ
れた前記擬音語に対応する効果音とを同期させて出力す
る音響制御手段と、を含む。
【００２１】本発明の効果音付加装置は、前記文章中の
音源名を抽出する音源抽出手段と、前記音源抽出手段で
抽出された前記音源名にて音データベースを検索する音
検索手段と、前記文章を読み上げる合成音声と、前記音
検索手段にて検索された前記音源名に対応する効果音と
を同期させて出力する音響制御手段とを備えた構成とし
てもよい。
【００２２】本発明の効果音付加装置は、前記文章中の
主観語を抽出する主観語抽出手段と、前記主観語抽出手
段で抽出された主観語にて音データベースを検索する音
検索装置と、入力された文章を読み上げる合成音声と、
前記音検索手段にて検索された前記主観語に対応する効
果音とを同期させて出力する音響制御手段と、を備えた
構成としてもよい。
【００２３】本発明のバックグラウンドミュージック付
加装置は、入力したテキストデータより、所定の単位ご
と文章を取得するテキスト取得手段と、前記テキスト取
得手段からの前記文章を入力し前記文章中の主観語を抽
出する主観語抽出手段と、前記主観語抽出手段で抽出さ
れた主観語の数をカウントするキーワード計数手段と、
前記主観語にて音楽データベースを検索する音検索手段
と、前記テキスト取得手段からの前記文章を読み上げる
合成音声と、前記音検索手段にて検索された前記主観語
に対応する音楽とを同期させて出力する音響制御手段
と、を含む。
【００２４】［発明の概要］本発明の概要について説明
する。本発明は、文章中の擬音語、音源名、主観語を取
得して、それに対応する効果音を選出する。
【００２５】ここで、主観語について定義しておくと、
音を形容するのに利用される形容詞などの言葉（例えば
“穏やかな”、“鋭い”、“金属的”等）を意味する。
【００２６】より具体的には、擬音語、音源名、主観語
を文章中から取得するキーワード抽出手段（図１の３
１）と、これらのキーワードから効果音を検索する音検
索手段（図１の３２）を有する。
【００２７】また、本発明は、文章中の主観語の出現回
数に応じて、音楽データベースよりバックグラウンドミ
ュージックを選定する。より具体的には、文章中から主
観語を取得するキーワード抽出手段（図７の３１）と、
主観語の出現回数をカウントするキーワード計数手段
（図７の３４）と、主観語により音楽データを検索する
音検索手段（図７の３２）を有する。
【００２８】音の言語による表現では、擬音語、音源
名、主観語が頻繁に利用される特徴があるため、キーワ
ード抽出手段は、この３種類に限定して、文章からキー
ワードを取得する。
【００２９】音検索手段は、得られたキーワードにて効
果音データを検索し、文章に対応する効果音を選定す
る。
【００３０】また、文章に音楽を付加する場合、キーワ
ード抽出手段は、主観語に限定して、文章からキーワー
ドを取得する。
【００３１】キーワード計数手段では、得られた主観語
の数をカウントする。カウント数が閾値を超えると、文
章全体に主観語の傾向があるとみなして、音検索手段は
その主観語にて、音楽を検索する。
【００３２】
【発明の実施の形態】次に、本発明の発明の実施の形態
について図面を参照して詳細に説明する。
【００３３】［実施の形態１］図１は、本発明の第１の
実施の形態の構成を示すブロック図である。図１を参照
すると、本発明の第１の実施の形態は、テキストデータ
を保存する第１の記憶装置１と、第２の記憶装置７と、
効果音データベース２と、効果音データベースより効果
音を選定する音選定装置３と、合成音声と効果音の発音
のタイミングを制御する音響制御装置４と、音を出力す
る音響出力装置５と、を含む。
【００３４】第１の記憶装置１は、効果音付加の対象と
なるテキストデータ１１を記憶する。第２の記憶装置７
は、選定された効果音の情報をテキストと関連付けて格
納保持する音付テキストテーブル１２を記憶する。
【００３５】効果音データベース２は、効果音データお
よびデータに関する情報ラベルが蓄積されている。情報
ラベルには、“擬音語”、“音源名”、“主観語”のう
ち少なくとも一種類のキーワードを含む。
【００３６】音選定装置３は、テキスト取得部３３と、
キーワード抽出装置３１と、音検索装置３２とを備えて
いる。
【００３７】テキスト取得部３３は、第１の記憶装置１
に格納されているテキストデータ１１より、ある単位ご
と、例えば節、文、段落毎に文章を取得し、取得した文
章を、音付テキストテーブル１２へコピーする。さらに
取得した文章を、キーワード抽出装置３１の擬音語抽出
手段３１１と、音源抽出手段３１２と主観語抽出手段３
１３へ出力する。
【００３８】キーワード抽出装置３１は、擬音語抽出手
段３１１と、音源抽出手段３１２と主観語抽出手段３１
３の少なくとも一つ又は全ての手段を備える。
【００３９】擬音語抽出手段３１１は、テキスト取得部
３３から出力された文章（テキストデータ）を入力し、
この文章から擬音語を検索し、検索された擬音語を、音
検索装置３２へ出力する。
【００４０】音源抽出手段３１２は、テキスト取得部３
３から供給された文章（テキストデータ）を入力し、こ
の文章のうち、音に関連のある文章から、その音源名を
検索し、検索された音源名を音検索装置へ出力する。
【００４１】主観語抽出手段３１３は、テキスト取得部
３３から供給された文章（テキストデータ）を入力し、
この文章から、予め指定されている主観語を検索し、検
索された主観語を音検索装置３２へ出力する。
【００４２】音検索装置３２は、入力されたキーワード
にて、効果音データベース２を検索し、その検索結果の
音のインデックス（例えばファイル名）を、音付テキス
トテーブル１２へ書き出す。この時、検索結果の情報
は、その効果音付加の対象となる文章や語句と関連付け
た形で、音付テキストテーブル１２へ記載される。
【００４３】音響制御装置４は、制御部４１と、音声合
成装置４２と、効果音出力装置４３とを備える。
【００４４】制御部４１は、音付テキストテーブル１２
より単位ごとにテキストを取得し、音声合成装置４２へ
供給する。
【００４５】さらに制御部４１は、音付テキストテーブ
ル１２より、所定単位の文章に対応する音のインデック
スを取得し、効果音出力装置４３へ供給する。
【００４６】効果音出力装置４３は、制御部４１からの
インデックスを入力し該インデクスの音ファイルを、効
果音データベース２より検索して、効果音データを取得
する。
【００４７】音声合成装置４２から出力される合成音声
と、効果音出力装置４３から出力される効果音データ
は、スピーカ等よりなる音響出力装置５より出力され
る。
【００４８】次に図１および図２、図３を参照して、本
発明の第一の実施の形態の動作について説明する。
【００４９】図２は、本発明の第１の実施の形態におけ
る音選定装置３の動作を示すフローチャートである。
【００５０】まず図１及び図２を参照して、音選定装置
３の動作について説明する。
【００５１】まず、テキスト取得部３３に、初期値とし
て、変数Ｎ＝１が設定される（ステップＡ１）。
【００５２】テキスト取得部３３は、テキストデータ１
１よりＮ番目のテキスト文章を読み出し、音付テキスト
テーブル１２に書き出す（ステップＡ２）。同時に、テ
キスト取得部３３は、Ｎ番目の文章を、キーワード抽出
装置３１へ出力する。
【００５３】キーワード抽出装置３１は、テキスト取得
部３３から出力されたＮ番目の文章を入力し、キーワー
ドを抽出する（ステップＡ３、Ａ４）。
【００５４】キーワード抽出装置３１について具体的な
動作を説明すると、キーワード抽出装置３１は、擬音語
抽出手段３１１、音源抽出手段３１２、主観語抽出手段
３１３のうち少なくとも一つを備え、擬音語抽出手段３
１１は、入力されたテキストから擬音語を、音源抽出手
段３１２は音源名を、主観語抽出手段３１３は主観語を
入力されたテキストからキーワードとして抽出する（ス
テップＡ３、Ａ４）。
【００５５】このようにして、検索されたキーワードは
音検索装置３２に入力される。音検索装置３２は、検索
されたキーワード（擬音語、音源名、主観語の少なくと
も一つ）にて、効果音データベース２を検索し、検索結
果として、例えばファイル名等よりなる、音インデック
スを得（ステップＡ５、Ａ６）、得られた音インデック
スを音付テキストテーブル１２に、先に書き出された文
章と関連付けて書き出す（ステップＡ７）。
【００５６】次に、Ｎ番目の文章がテキストデータ１１
の最後の文章の場合には処理を終了し、最後でない場合
には、変数Ｎを更新し（Ｎ＝Ｎ＋１）、ステップＡ２か
らの処理を繰り替えす（ステップＡ８、Ａ９）。
【００５７】ステップＡ４及びステップＡ６で、キーワ
ードの抽出および音データの検索結果ができなかった場
合には、ステップＡ８の処理に移る。
【００５８】図３は、本発明の第１の実施の形態におけ
る音響制御装置４の動作を示すフローチャートである。
【００５９】次に図１及び図３を参照して、音響制御装
置４の動作について説明する。
【００６０】制御部４１に、変数Ｍ＝１が設定される
（ステップＢ１）。制御部４１は、音付テキストテーブ
ル１２からＭ番目のテキストを読み出し、これを音声合
成装置４２与え、音声合成装置４２は合成音声を生成し
て音響出力装置５を通して音として出力する（ステップ
Ｂ２）。
【００６１】同時に、制御部４１は、読み出したＭ番目
のテキストに対応する音のインデックス（例えばファイ
ル名）を、音付テキストテーブル１２から読み出し、こ
れを効果音出力装置４３に与える。
【００６２】効果音出力装置４３は、効果音データベー
ス１３から音のインデックスに対応する音データを取得
し、音響出力装置５を通して音として出力する（ステッ
プＢ３）。
【００６３】制御部４１は、Ｍ番目の文章が、音付テキ
ストテーブル１２中の最後の文章であるか否かを調べ
（ステップＢ４）、最後でない場合には、変数Ｍを更新
し（Ｍ＝Ｍ＋１）（ステップＢ５）、ステップＢ２から
の処理を繰り返す。ステップＢ４で、Ｍ番目の文章が最
後の文章であった場合には、処理を終了する。
【００６４】本発明の第１の実施の形態において、テキ
スト取得部３３、キーワード抽出装置３１、音検索装置
３２、音響制御装置４の制御部４１は、コンピュータ上
で実行されるプログラムによってその機能・処理を実現
することができ、この場合、上記プログラムをコンピュ
ータが所定の記録媒体から読み出して、実行することで
本発明を実施することができる。
【００６５】［実施例１］上記した本発明の第１の実施
の形態をさらに具体的な実施例に即して以下に説明す
る。
【００６６】図４は、本発明の第１の実施の形態のテキ
ストデータおよび付加効果音の一具体例を示す図であ
る。図５は、本発明の第１の実施の形態の音付テキスト
テーブル１２の一具体例を示す図である。図６は、本発
明の第１の実施の形態の効果音データベース１３のラベ
ルの一具体例を示す図である。
【００６７】まず、図１、図２、図５、及び図６を参照
して、音選定装置３について説明する。
【００６８】効果音付加対象の文章であるテキストデー
タ１１として、例えば図４に示す文章があるとする。ま
ず、テキスト取得部３３はテキストデータ１１より１番
目の（Ｎ＝１）文章である「今日、自転車に乗っている
と、突然キャイーンという声が聞こえました。」を読み
出し、音付テキストテーブル１２に書き出す（ステップ
Ａ１、Ａ２）。
【００６９】図５は、音付テキストテーブル１２の内容
の一例を示したものであり、テキスト番号（文番号）欄
１２１、テキスト欄１２２、音インデックス欄１２３を
一エントリとして構成されるテーブル構造よりなる。
【００７０】音付テキストテーブル１２は、テキストと
音データとの対応が記述できればよい。
【００７１】この実施例では、テキスト取得部３３は、
読み出した１番目の文章をテキスト欄１２２の文番号１
行目に書き出す。
【００７２】さらに、テキスト取得部３３は、読み出し
た１番目の文章をキーワード抽出装置３１へ入力する。
【００７３】キーワード抽出装置３１は、擬音語抽出手
段３１１、音源抽出手段３１２、主観語抽出手段２１３
のうちの少なくとも一つを有し、各手段は入力された文
章から擬音語、音源名、主観語のキーワードをそれぞれ
抽出する（図２のステップＡ３）。
【００７４】ここで、キーワード抽出装置３１のキーワ
ード抽出方法（ステップＡ３）の具体例について詳説す
る。
【００７５】まず擬音語抽出手段３１１として、公知の
自然言語処理装置を利用して擬音語を抽出してもよい。
しかし、これでは、処理が複雑かつ遅くなる場合がある
ため、別の方法として、カタカナの語を全て擬音語の候
補とみなす方法が考えられる。これは、擬音語は、カタ
カナで表記される場合が多いことによる。
【００７６】この方法によると、擬音語ではない単語
（例えばコンピュータ）という単語も擬音語とみなされ
て、音検索装置３２へ検索キーワードとして入力されて
しまうが、結果的に、対応する音データが検索されない
可能性が極めて高いため、擬音語抽出処理の高速化を図
る為には、よい方法である。本実施例ではこの方法を利
用する。
【００７７】次に、音源抽出手段３１２として、公知の
自然言語処理装置を利用して音源名を抽出してもよい。
しかし、全ての文章に対して自然言語処理を適用する
と、処理が複雑になるため、次の方法が考えられる。
【００７８】音源抽出手段３１２には、「鳴る」、「鳴
く」、「泣く」、「叩く」、「弾く」等、発音を示す動
詞を予め登録しておく。音源抽出手段３１２は、まずこ
れらの動詞が、入力された文章中に含まれている否か調
べ、これらの動詞を少なくとも一つ含む文章に対しての
み、自然言語処理を行なって、発音源名を抽出する。本
実施例ではこの方法を利用する。
【００７９】次に、主観語抽出手段３１３として、自然
言語処理装置を利用してもよいが、ここでもいくつかの
別の方法が考えられる。
【００８０】一つ目の方法としては、主観語抽出手段３
１３に、予め「音」、「響き」など音を表すキーワード
を登録しておき、これらのキーワードが存在する文章に
対してのみ、自然言語処理にてそのキーワードを修飾す
る言葉を抽出する。
【００８１】また二つ目の方法としては、主観語抽出手
段３１３に、「音」、「響き」など音を表すキーワード
と、音の修飾に利用される主観語、例えば、「美し
い」、「濁った」などを予め登録しておく。
【００８２】入力された一文章中に、音を表すキーワー
ドと主観語の双方が存在している場合、その主観語を検
索キーワードとして抽出する。本実施例ではこの方法を
用いる。例えば、音を表すキーワードとしては、
「音」、「響き」を、主観語としては、「うるさい」、
「金属性の」、「にごった」、「うつくしい」、「もの
たりない」、「迫力のある」、「かたい」、「陽気
な」、「にぶい」、「おだやかな」という１０種類を主
観語抽出装置３１３に登録しておく。
【００８３】ここで、キーワード抽出手段３１の動作
（図２のステップＡ３）の具体例について説明する。
【００８４】擬音語抽出手段３１１は、入力された文章
「今日、自転車に乗っていると、突然キャイーンという
声が聞こえました」から、カタカナである「キャイー
ン」を抽出して、音検索装置３２へ入力する。
【００８５】音源抽出手段３１２は、あらかじめ登録さ
れている「鳴く」、「鳴る」、「叩く」という動詞を入
力文章中に検索するが、存在しないので処理を終える。
【００８６】主観語抽出手段３１３は、予め登録されて
いる「うるさい」、「金属性の」などという単語を入力
文章中に検索するが、存在しないので処理を終える（ス
テップＡ３、Ａ４）。
【００８７】次に、音検索装置３２は、入力されたキー
ワード「キャイーン」にて効果音データベース２を検索
する（ステップ５）。
【００８８】ここで、効果音データベース２および音検
索装置３２には、次の文献（和氣、旭：「直感的な音デ
ータ検索・編集システムの開発」、情報処理学会、情報
メディア研究会報、２９−２、７〜１２ページ（１９９
７年１月））に記載のものが利用される。この文献に示
される効果音データベースは、音データそのものと各音
データに対するラベルとが蓄積されている。
【００８９】図６に、ラベルの一例を示す。ラベルは、
各音について擬音語と音源名の２種類のキーワードと、
予め設定されている主観語に関する主観得点を保持して
いる。主観語は、音を形容するのに利用される言葉（例
えば“穏やかな”）であり、主観得点は、その音を聞い
てその主観語（例えば“穏やかな”）を感じる人が何割
いるかを表す数値である。
【００９０】また、上記文献に示される音検索装置は、
擬音語、音源名、主観語という３種類のキーワードによ
り、効果音データベースを検索する。音源名に関して
は、キーワード一致による検索を利用しているが、擬音
語に関しては、特願平０８−３０９７３５（発明の名
称：「擬音語を用いた音検索システムおよび擬音語を用
いた音検索方法」）に示される方法などを用いて、擬音
語間の類似度を評価し、完全一致するキーワードに限ら
ず、似通った擬音語からの検索を可能にできる。この方
法により擬音語の多様性に対応できる。
【００９１】主観語に関しては、あらかじめ設定された
主観語のうちのいずれかが検索キーワードとして入力さ
れると、その主観語に対する主観得点が高い音データを
検索し結果として出力する。
【００９２】この方法により、音検索装置３２は、「キ
ャイーン」というキーワードにて効果音データベース２
を検索し、検索結果として、「ｄｏｇ．ｗａｖ」という
音を得る（図２のステップＡ５、Ａ６）。
【００９３】次に音検索装置３２は、検索結果の音イン
デックス（ファイル名）を、音付テキストテーブル１２
の文番号Ｎ番目の行におけるの音インデックス欄１２３
に記入する（図２のステップＡ７）。
【００９４】次にテキスト取得部３３は、今扱ったＮ番
目の文章がテキストデータ１１の最後の文章かどうかを
調べる（図２のステップＡ８）。この場合は、次にまだ
文章があるため、Ｎ＝Ｎ＋１（＝２）として、ステップ
Ａ２へもどる。
【００９５】テキスト取得部３３では、Ｎ＝１の文章の
処理が終わると、テキストデータ１１より２番目（Ｎ＝
２）の文章である「見渡すとそこには猫に追いかけられ
る犬の姿がありました。」（図４参照）を読み出し、音
付テキストテーブル１２２（図５参照）に書き出す（図
２のステップＡ２）。
【００９６】さらに、テキスト取得部３３は、この文章
を、擬音語抽出手段３１１、音源抽出手段３１２、主観
語抽出手段２１３に供給し、各手段３１１、３１２、３
１３は、テキスト取得部３３から供給された文章から、
それぞれ、擬音語、音源名、主観語のキーワードを抽出
しようとするが、この文章に関しては、キーワードは存
在しない（図２のステップＡ３、Ａ４）。
【００９７】テキスト取得部３３は、２番目の文章がテ
キストデータ１１の最後の文章かどうかを調べ（図２の
ステップＡ９）、その結果、最後ではないので、Ｎ＝Ｎ
＋１（＝３）として（ステップＡ８）、ステップＡ２へ
もどる。
【００９８】同様に、３番目の文章「僕は側にあったド
ラム缶を叩き、猫を追い払いました」に対して、キーワ
ード抽出処理を行なう。音源抽出手段３１２は、入力文
章中に登録されている音を表す動詞を検索すると、「叩
く」という動詞の活用形が存在することから、この文章
に対して、自然言語処理を適用し、動詞「叩く」の目的
語である「ドラム缶」というキーワードを得る。音源抽
出手段３１２はこのキーワードを音検索装置３２に入力
する。
【００９９】擬音語抽出手段３１１と主観語抽出手段３
１３は、それぞれの方法で入力文章中を検索するが、対
応するキーワードは文章中に存在しないため処理を終え
る（以上図２のステップＡ３、Ａ４）。
【０１００】音検索装置３２は、キーワード「ドラム
缶」にて効果音データベース２を検索し、結果として、
「ｃａｎ．ｗａｖ」を得て、音付テキストテーブル１２
に格納する（図２のステップＡ５、Ａ６、Ａ７）。
【０１０１】同様に、Ｎ番目の文章「鋭い金属性の音
に．．．」では、主観語抽出手段３１３が入力文章に対
して検索を行なうと、「金属性の」という主観語と、
「音」という単語とが存在するため、「金属性の」とい
う主観語を検索キーワードとして音検索装置３２に入力
する。
【０１０２】その結果、「ｅｆｆｅｃｔ１．ｗａｖ」と
いう音が検索され、音付テキストテーブル１２に登録さ
れる。
【０１０３】このようにして、テキストデータ１１中の
全ての文章に対して音選定装置３による効果音選定処理
が行われ、テキスト文章と効果音の対応が記述された効
果音付きテキストデータ１２が完成する。
【０１０４】次に、図１、図３および図５を参照して、
効果音制御装置４について説明する。
【０１０５】制御部４１において、変数Ｍが初期化（Ｍ
＝１）される（図３のステップＢ１）。
【０１０６】制御部４１は、音付テキストテーブル１２
の文番号Ｍ番目のテキスト欄１２２からテキストを読み
出し、音声合成装置４２に入力すると、音声合成装置４
２は合成音声を生成し、音響出力装置５より出力する
（ステップＢ２）。
【０１０７】制御部４１は、合成音声発音終了を特に待
たずに、文番号Ｍ番目の音インデックス欄１２３から音
インデックスを読み出し、効果音出力装置４３へ入力す
ると、効果音出力装置４３は、効果音データベース２中
から、対応する効果音データを検索し、検索された効果
音データを音響出力装置５を通して効果音を出力する。
【０１０８】この実施例の変形としては、音付テキスト
テーブル１２にどの文章中のどのキーワードから音が検
索されたか等の詳細な情報を登録しておくことで、丁度
そのキーワードが合成音声にて発音された時に、効果音
を出力することや、さらには、擬音語部分を合成音声に
て読み上げずに、その部分に効果音をはめ込んで再生す
ることも可能である。
【０１０９】［実施の形態２］次に本発明の第２の実施
の形態について説明する。本発明の第２の実施の形態
は、テキストの読み上げに、バックグラウンドミュージ
ックとして音楽を付加する装置である。図７に、本発明
の第２の実施の形態の構成を示す。
【０１１０】図７を参照すると、本発明の第２の実施の
形態は、テキストデータを保存する第１の記憶装置１
と、第２の記憶装置７と、音楽データベース６と、前記
音楽データベースより音楽を選定する音選定装置３と、
を備えて構成されている。なお、本発明の第２の実施の
形態における出力系統の構成として、前記第１の実施の
形態で利用された音響制御装置４および音響出力装置５
を備えており、これらの装置は前記第１の実施の形態と
同様の構成のものである。
【０１１１】第１の記憶装置１は、音楽付加の対象とな
るテキストデータ１１を記憶する。第２の記憶装置７
は、選定された効果音の情報をテキストと関連付けて格
納した音付テキストテーブル１２を記憶する。
【０１１２】音楽データベース６は、様々な音楽データ
（例えば、ＰＣＭデータやＭＩＤＩデータ）、および、
これらの音楽データについてのラベルが蓄積されてお
り、このラベルには、少なくとも音楽の印象を表す主観
語がキーワードとして記載されている。
【０１１３】音選定装置３は、テキスト取得部３３と、
キーワード抽出装置３１と、キーワード計数手段３４
と、音検索装置３２と、を備えている。
【０１１４】テキスト取得部３３は、テキストデータ１
１より、ある単位ごと（例えば節、文、段落）に文章を
取得し、取得した文章を音付テキストテーブル１２へ書
き込む。さらにその文章を、キーワード抽出装置３１へ
供給する。
【０１１５】キーワード抽出装置３１は、主観語抽出手
段３１３から構成され、主観語抽出手段３１３は、入力
された文章中から、主観語（例えば、「楽しい」、「悲
しい」、「さわやかな」など）を検索して、キーワード
計数手段３４へ出力する。
【０１１６】キーワード計数手段３４は、キーワード抽
出装置３１から出力された主観語を入力し、主観語のう
ち、同種類の主観語の数をカウントする。
【０１１７】さらにキーワード計数手段３４は、各主観
語についてそれぞれ予め定められた閾値を保有してお
り、カウント数が、対応する閾値を超えた主観語につい
てのみ、その主観語を音検索装置３２へ出力する。
【０１１８】音検索装置３２は、キーワード計数手段３
４から出力された主観語を入力し、主観語にて音楽デー
タベース６を検索し、その検索結果のインデックス（例
えばファイル名）を、音付テキストテーブル１２へ格納
する。この時、検索結果のインデックスは、音楽付加の
対象となる文章と関連付けて音付テキストテーブル１２
へ記憶される。
【０１１９】図８は、本発明の第２の実施の形態の動作
を示すフローチャートである。図７、及び図８を参照し
て、本発明の第２の実施の形態の動作について説明す
る。
【０１２０】まず、テキスト取得部３３に、変数Ｐ＝１
が設定される（ステップＣ１）。
【０１２１】テキスト取得部３３は、テキストデータ１
１よりＰ（＝１）段落目のテキスト文章を読み出し、音
付テキストテーブル１２に格納する（ステップＣ２）。
同時に、テキスト取得部３３は、Ｐ段落目の文章を、主
観語抽出手段３１３へ出力する。
【０１２２】主観語抽出手段３１３は、テキスト取得部
３３から出力された、Ｐ段落目の文章を入力し、該文章
から主観語を検索する（ステップＣ３）。
【０１２３】主観語抽出手段３１３で抽出された主観語
は、キーワード計数手段３４に出力され、キーワード計
数手段３４は、各主観後の出現回数をカウントし（ステ
ップＣ４）、その数が予め登録されている閾値を超える
と（ステップＣ５）、該主観語を音検索装置３２に出力
する。音検索装置３２は、キーワード計数手段３４から
の主観語にて、音楽データベース２を検索し、検索結果
として、例えばファイル名などの音インデックスを得
る。
【０１２４】次に、音検索装置３２は、得られた音イン
デックスを音付テキストテーブルに、先に書き出したテ
キストデータと、関連付けた形で書き出す（ステップＣ
７）。
【０１２５】Ｐ段落目の文章が、テキストデータ１１の
最後の段落でない場合には、Ｐ＝Ｐ＋１として、ステッ
プＡ２からの処理を繰り替えす（ステップＣ８、Ｃ
９）。
【０１２６】このとき、キーワード計数手段３４のカウ
ンタ数は、ゼロにクリアされる。
【０１２７】ステップＣ５にてキーワード数が閾値を超
えなかった場合には、ステップＣ８の処理に移る。
【０１２８】［実施例２］上記した本発明の第２の実施
の形態について具体的な実施例に即して以下に説明す
る。図９は、本発明の第２の実施の形態の実施例におけ
るテキストデータの一例を示す図である。図７乃至図９
を参照して、本発明の第２の実施の形態をさらに具体的
に説明する。
【０１２９】音楽付加対象の文章であるテキストデータ
１１として、例えば図９に示す文章が第１の記憶装置１
に格納されているものとする。
【０１３０】テキスト取得部３３に初期値Ｐ＝１が設定
される（ステップＣ１）。テキスト取得部３３はテキス
トデータ１１より、Ｐ（＝１）段落目の文章「今日は遊
園地に〜楽しい楽しい一日でした。」（図９参照）を音
付テキストテーブル１２に書き出し（ステップＣ２）、
同時に、この文章を主観語抽出手段３１３に入力する。
【０１３１】主観語抽出手段３１３には、「楽しい」、
「悲しい」、「激しい」、「恐い」、「あやしい」など
の主観語が予め登録されており、これらの主観語および
その活用形を入力された文章から抽出する。
【０１３２】主観語抽出手段３１３が入力された文章
「今日は遊園地に〜楽しい楽しい」を調べると、「楽し
い」と「恐い」という主観語が検出され（ステップＣ
３）、これらのキーワードを順次キーワード計数手段３
４に入力する。
【０１３３】キーワード計数手段３４が入力されたキー
ワードの数をカウントすると、「楽しい」という主観語
およびその活用形が３個、「恐い」という主観語、およ
びその活用形が１個という結果を得る（ステップＣ
４）。
【０１３４】ここで、キーワード計数手段３４には、全
てのキーワードに関して閾値「２」という数値が設定さ
れているとする。主観語毎に別の閾値を設定しておくよ
うにしてもよい。
【０１３５】キーワード計数手段３４は、この主観語の
個数が、閾値を超えた場合のみ、その主観語を音検索装
置３２へ出力する。この例の場合、「楽しい」という主
観語のみ閾値２を超えているので、「楽しい」が音検索
装置３２へ出力される（ステップＣ５、Ｃ６）。
【０１３６】音検索装置３２は、キーワード計数手段３
４からの「楽しい」というキーワードで、音楽データベ
ース６を検索し、検索結果として、音楽データのインデ
ックスとしてファイル名を得る。
【０１３７】音検索装置３２は、得られた音楽ファイル
名を、音付テキストテーブル１２に、先に記入されたテ
キストデータと対応付けた形で記入する（ステップＣ
７）。
【０１３８】テキスト取得部３３は、Ｐ段落目がテキス
トデータ１１の最後の段落かどうかを調べ（ステップＣ
８）、最後でない場合はＰ＝Ｐ＋１としてステップＣ２
にもどる。最後の段落の場合は処理を終了する。
【０１３９】一方、キーワード計数手段３４にて、複数
の主観語が閾値を超えた場合には、その中でも最もカウ
ント数の多い主観語を検索のキーワードとすることがで
きる。
【０１４０】さらに、カウント数が最多である主観語が
複数ある場合には、以下に示すうちのいずれかの対処方
法をとることができる。
【０１４１】まず第１の方法は、一つ前の段落でキーワ
ードとして選ばれた主観語を記憶しておき、その主観語
と別の主観語を選択する方法、第２の方法は、キーワー
ド抽出の対象となる段落を前半と後半に分けて、それぞ
れにおける主観語をカウントし直し、段落の前半と後半
で別のバックグラウンドミュージックを付加する方法、
第３の方法は、音楽データベース６の主観語ラベルを複
数の主観語の登録が可能な構成として、複数の主観語の
組合わせによる検索を行なう方法である。
【０１４２】上記した本発明の第２の実施の形態は、主
観語を効果音付加対象のテキスト文章中から検索し、そ
の数がある一定数を超えた時に、その主観語に対応する
音楽をバックグラウンドミュージックとして、テキスト
読み上げ時に出力することができる。
【０１４３】これにより、文章の作者や主人公の気持ち
を反映するようなバックグラウンドミュージックを付加
することができる。また、文章全体を自然言語処理で解
析することなく、簡単な処理でバックグラウンドミュー
ジックを付加することができる。
【０１４４】一方、本発明の第２の実施の形態におい
て、キーワード抽出装置３１に、例えば特開平７−７２
８８８号公報に記載されている情報処理装置の環境抽出
装置を備えた構成としてもよい。このとき、情報処理装
置は、直接、音検索装置３２に接続される。環境抽出装
置は、文章の各シーンの場所を特定することが可能であ
る。この環境抽出装置により、シーンの場所が「海」で
あることがわかったとすると、「海」を検索のキーワー
ドとして、音楽データベース６を検索することができ
る。
【０１４５】これにより、シーンの環境にあったバック
グラウンドミュージックを出力することができる。
【０１４６】また、本発明の第１および第２の実施の形
態について、音選定装置３および音響制御装置４を分離
してもよい。このように分離した場合に、この両者の間
を通信回線で相互接続することにより、利用者側に、音
データに関するデータベースを設置することなく、上記
した実施の形態と同様の効果を得ることができる。この
ような構成にすることで、利用者側の端末の回路構成や
データの処理過程が少なくなり、利用者端末を安価に設
計できるようになる。
【０１４７】また、音データベースをセンター側で管理
することで、データの更新や著作権などの管理が行いや
すくなるといったメリットが生まれる。
【０１４８】さらなる具体例としては、電子メールのよ
うに、２者間で文章のやり取りをするような場合、文章
送信側に、音選定装置３および効果音データベース２
（または音楽データベース６）が、受信側に音響制御装
置４および効果音データベース２（音楽データベース
６）が設けられる。送信側は、予めキーワード選定を行
い、音付テキストテーブル１２を受け手に送出すると、
受信側では、受け取った音付テキストテーブル１２を音
響出力制御装置４を利用して聴くことができる。
【０１４９】さらには、音付テキストテーブル１２に必
要な音データを付けて送出する方法をとると、受信側に
効果音データベース２や音楽データベース６がなくて
も、受信側は音響制御装置４があれば効果音および音楽
付音声を聞くことができる。
【０１５０】一方、上記した本発明の第１および第２の
実施の形態について、効果音付加（バックグラウンドミ
ュージック付加）のリアルタイム処理を行なうことも可
能である。
【０１５１】この場合、音選定装置３の処理速度が十分
に高速であることが条件となるが、文章を音響出力装置
５より出力している間に、次の文章（もしくは段落）に
対して、音選定装置３が音付加処理を行なう。
【０１５２】このようにリアルタイム処理を行なう場
合、音付テキストテーブル１２は利用しなくてもよい。
この場合、テキスト８００（図１）と、音検索装置３２
によって検索された音インデックス８０１は音付テキス
トテーブル１２を介さずに直接、音響制御装置４の制御
部４１へ入力され、制御部４１は音声と効果音（または
音楽）の同期をとって出力を行なう。
【０１５３】さらに、音響出力装置５として、音響情報
の出力に加え、ディスプレイ等の視覚情報出力機能を併
せ持つ装置を利用することもできる。この構成により、
文章をディスプレイに表示しながら、音を出力するとい
ったことが実現できる。
【０１５４】また、音が付加されたテキストを表示装置
の画面上に文字列表示する際に、音が付加されている部
分の文字列をクリック可能とし、そこをマウス等でクリ
ックすると、音響制御装置が音を出力するといったこと
も行えるようになる。
【０１５５】
【発明の効果】以上説明したように、本発明によれば下
記記載の効果を奏する。
【０１５６】本発明の第１の効果は、テキストに対する
効果音付加のための文章解析処理が容易になり、効果音
付加までの効果音検索処理時間を短縮する、ということ
である。
【０１５７】その理由は、本発明においては、文章中の
擬音語、音源名、主観語のみに注目して、キーワードを
取得し、そのキーワードに対応する効果音を検索する、
構成としたためである。
【０１５８】本発明の第２の効果は、テキスト文書中の
音表現に忠実な効果音を付加することができる、という
ことである。
【０１５９】その理由は、本発明においては、音を最も
具体的に表現する「擬音語」を文章中より取得して、擬
音語による音データの検索を行なうようにしたためであ
る。
【０１６０】本発明の第３の効果は、文章の傾向に合っ
たバックグラウンドミュージックを簡単な処理かつ短い
処理時間で自動的に選択することができる、ということ
である。
【０１６１】その理由は、本発明においては、文章中の
主観語の出現回数に注目して、その主観語に対応する音
楽を検索する、構成としたためである。
【図面の簡単な説明】
【図１】本発明の効果音付加装置の一実施の形態の構成
を示す図である。
【図２】本発明の効果音付加装置の一実施の形態におけ
る音選定装置の動作を説明するためのフローチャートで
ある。
【図３】本発明の効果音付加装置の一実施の形態におけ
る音響制御装置の動作を説明するためのフローチャート
である。
【図４】本発明の効果音付加装置の一実施の形態を説明
するための図であり、テキストデータの一例を示す図で
ある。
【図５】本発明の効果音付加装置の一実施の形態を説明
するための図であり、音付テキストテーブルの一例を示
す図である。
【図６】本発明の効果音付加装置の一実施の形態を説明
するための図であり、効果音データベースのラベルの一
例を示す図である。
【図７】本発明のバックグラウンドミュージック付加装
置の一実施の形態の構成を示す図である。
【図８】本発明のバックグラウンドミュージック付加装
置の一実施の形態における音選定装置の動作を説明する
ためのフローチャートである。
【図９】本発明のバックグラウンドミュージック付加装
置の一実施の形態を説明するための図であり、テキスト
データの別の一例を示す図である。
【図１０】従来の効果音付加装置（情報処理装置）の構
成を示す図である。
【図１１】従来の効果音付加装置における環境抽出装置
を示す構成を示す図である。
【図１２】従来の効果音付加装置における環境テーブル
の一例である。
【符号の説明】
１ 第１の記憶装置 ２ 効果音データベース ３ 音選定装置 ４ 音響制御装置 ５ 音響出力装置 ６ 音楽データベース ７ 第２の記憶装置 １１ テキストデータ １２ 音付テキストテーブル ３１ キーワード抽出装置 ３２ 音検索装置 ３３ テキスト取得部 ３４ キーワード計数手段 ４１ 制御部 ４２ 音声合成装置 ４３ 効果音出力装置 １２１ 文番号欄 １２２ テキスト欄 １２３ 音インデックス欄 ３１１ 擬音語抽出手段 ３１２ 音源抽出手段 ３１３ 主観語抽出手段 ８００ テキスト ８０１ 音インデックス １０１０ キーボード １０２０ 文章入力装置 １０３０ メモリ １０４０ 自然言語処理装置 １０５０ 環境抽出装置 １０６０ 登場人物特徴抽出装置 １０７０ 効果音発生装置 １０８０ 音出力装置 １０９０ 音声合成装置 １１１０ 環境抽出部 １１２０ 環境テーブル １２００ 環境名 １２１０ 動詞 １２２０ 効果音のインデックス １２３０ 効果音のインデックスの一例

Claims (15)

    【特許請求の範囲】
  1. 【請求項１】（ａ）入力したテキストデータより、所定
    の単位ごとに文章を取得するステップ、 （ｂ）前記文章中から、擬音語、音源名、及び主観語の
    うちの少なくとも一種を抽出するステップ、 （ｃ）抽出された擬音語、音源名、及び主観語のうちの
    いずれかで音データベースから対応する効果音を検索す
    るステップ、 （ｄ）前記文章を読み上げる合成音声と、擬音語、音源
    名、及び主観語のうちの一つに対応して検索された効果
    音とを同期させて出力するステップ、 を含むことを特徴とする効果音付加方法。
  2. 【請求項２】前記所定の単位が、節、文、段落のいずれ
    かであることを特徴とする請求項１記載の効果音付加方
    法。
  3. 【請求項３】入力したテキストデータより、所定の単位
    ごとに文章を取得するテキスト取得手段と、 前記テキスト取得手段で取得された前記文章を入力し前
    記文章中の擬音語を抽出する擬音語抽出手段と、 前記擬音語抽出手段で抽出された前記擬音語にて音デー
    タベースを検索する音検索手段と、 前記テキスト取得手段からの前記文章を読み上げる合成
    音声と、前記音検索手段にて検索された前記擬音語に対
    応する効果音とを同期させて出力する音響制御手段と、 を含むことを特徴とする効果音付加装置。
  4. 【請求項４】入力したテキストデータより、所定の単位
    ごとに文章を取得するテキスト取得手段と、 前記テキスト取得手段で取得された前記文章を入力し前
    記文章中の音源名を抽出する音源抽出手段と、 前記音源抽出手段で抽出された前記音源名にて音データ
    ベースを検索する音検索手段と、 前記テキスト取得手段からの前記文章を読み上げる合成
    音声と、前記音検索手段にて検索された前記音源名に対
    応する効果音とを同期させて出力する音響制御手段と、 を含むことを特徴とする効果音付加装置。
  5. 【請求項５】入力したテキストデータより、所定の単位
    ごとに文章を取得するテキスト取得手段と、 前記テキスト取得手段で取得された前記文章を入力し前
    記文章中の主観語を抽出する主観語抽出手段と、 前記主観語抽出手段で抽出された主観語にて音データベ
    ースを検索する音検索装置と、 入力された文章を読み上げる合成音声と、前記音検索手
    段にて検索された前記主観語に対応する効果音とを同期
    させて出力する音響制御手段と、 を含むことを特徴とする効果音付加装置。
  6. 【請求項６】入力したテキストデータより、所定の単位
    ごとに文章を取得するテキスト取得手段と、 前記テキスト取得手段で取得された前記文章を入力し前
    記文章中の主観語を抽出する主観語抽出手段と、 前記主観語抽出手段で抽出された主観語の数をカウント
    するキーワード計数手段と、 前記キーワード計数手段より出力される主観語にて音楽
    データベースを検索する音検索手段と、 前記テキスト取得手段からの前記文章を読み上げる合成
    音声と、前記音検索装置にて検索された前記主観語に対
    応する音楽とを同期させて出力する音響制御装置と、 を含むバックグラウンドミュージック付加装置。
  7. 【請求項７】前記擬音語抽出手段が、前記文章中に存在
    するカタカナを擬音語の候補として抽出する、ことを特
    徴とする請求項３記載の効果音付加装置。
  8. 【請求項８】予め登録されている、音に関連する動詞を
    含む文章を抽出して、前記文章に対して自然言語処理を
    行ない、音源名を抽出する、ことを特徴とする請求項４
    記載の効果音付加装置。
  9. 【請求項９】予め登録されている主観語と予め登録され
    ている音を表す名詞の双方を含む文章から、その主観語
    を抽出することを特徴とする請求項５記載の効果音付加
    装置。
  10. 【請求項１０】前記テキスト取得手段でテキストデータ
    から取得される前記所定の単位が、節、文、段落のいず
    れかであることを特徴とする請求項３乃至請求項５のい
    ずれか一に記載の効果音付加装置。
  11. 【請求項１１】前記テキスト取得手段でテキストデータ
    から取得される前記所定の単位が、節、文、段落のいず
    れかであることを特徴とする請求項６記載のバックグラ
    ウンドミュージック付加装置。
  12. 【請求項１２】前記音データベースには、効果音データ
    および該データに関する情報ラベルとして、擬音語、音
    源名、主観語のうち少なくとも一種類のキーワードが登
    録されている、ことを特徴とする請求項３乃至１０のい
    ずれか一に記載の効果音付加装置。
  13. 【請求項１３】入力されるキーワードのうち同種類の数
    をカウントし、カウント数が予め設定される閾値を超え
    たキーワードを出力することを特徴とする請求項６記載
    のバックグラウンドミュージック付加装置。
  14. 【請求項１４】（ａ）入力したテキストデータより、所
    定の単位ごと文章を取得する処理、 （ｂ）前記文章を入力し前記文章中から、擬音語、音源
    名、及び主観語のうちの少なくとも一種を抽出する処
    理、 （ｃ）抽出された擬音語、音源名、及び主観語のうちの
    いずれかにて音データベースを検索する処理、 （ｄ）前記文章を読み上げる合成音声と、擬音語、音源
    名、及び主観語のうちの一つに対応して検索された効果
    音とを同期させて出力する処理、 の上記（ａ）〜（ｄ）の各処理をコンピュータで実行さ
    せることで効果音付加機能を実現するプログラムを記録
    した記録媒体。
  15. 【請求項１５】（ａ）効果音付加の対象となるテキスト
    データを保存する第１の記憶手段と、 （ｂ）選定された効果音の情報を文章と関連付けて格納
    保持する音付テキストテーブルを有する第２の記憶手段
    と、 （ｃ）効果音データおよび該データに関する情報ラベル
    として、擬音語、音源名、主観語のうち少なくとも一種
    類のキーワードが登録されている効果音データベース
    と、 （ｄ）前記第１の記憶手段に格納されているテキストデ
    ータより、節、文、段落など所定の単位毎に文章を取得
    し、取得した文章を前記音付テキストテーブルへコピー
    するテキスト取得手段と、を備え、さらに、 （ｅ−１）前記テキスト取得手段で取得された文章を入
    力し、前記文章から擬音語を抽出する擬音語抽出手段
    と、 （ｅ−２）前記テキスト取得手段で取得された文章を入
    力し、音に関連のある文章から音源名を抽出する音源抽
    出手段と、 （ｅ−３）前記テキスト取得手段で取得された文章を入
    力し、前記文章から主観語を抽出する主観語抽出手段
    と、 の少なくとも一つの手段を備えたキーワード抽出手段
    と、 （ｆ）前記キーワード抽出手段からの擬音語、音源名、
    主観語の少なくともいずれか一種をキーワードとして、
    効果音データベースを検索し、その検索結果の音のイン
    デックス情報を効果音付加の対象となる文章や語句と関
    連付けた形で前記音付テキストテーブルへ書き込む音検
    索手段と、を備え、さらに、 （ｇ−１）音声合成手段と、 （ｇ−２）前記音付テキストテーブルより所定単位ごと
    に文章を取得し、前記音声合成手段へ供給し、前記音付
    テキストテーブルより、所定単位の文章に対応する音の
    インデックスを取得する制御手段と、 （ｇ−３）前記制御部で取得されたインデックスを入力
    し該インデクスの音ファイルを前記効果音データベース
    より検索して効果音データを取得する効果音出力手段
    と、 を備えた音響制御手段と、 （ｈ）音響出力手段と、 を備え、 前記音響制御手段の音声合成手段から出力される合成音
    声と、前記効果音出力手段から出力される効果音データ
    とが同期して前記音響出力手段より出力される、ことを
    特徴とする効果音付加装置。
JP10250264A 1998-09-04 1998-09-04 効果音付加装置および効果音付加方法 Pending JP2000081892A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP10250264A JP2000081892A (ja) 1998-09-04 1998-09-04 効果音付加装置および効果音付加方法
GB9920923A GB2343821A (en) 1998-09-04 1999-09-03 Adding sound effects or background music to synthesised speech
US09/389,494 US6334104B1 (en) 1998-09-04 1999-09-03 Sound effects affixing system and sound effects affixing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP10250264A JP2000081892A (ja) 1998-09-04 1998-09-04 効果音付加装置および効果音付加方法

Publications (1)

Publication Number Publication Date
JP2000081892A true JP2000081892A (ja) 2000-03-21

Family

ID=17205313

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10250264A Pending JP2000081892A (ja) 1998-09-04 1998-09-04 効果音付加装置および効果音付加方法

Country Status (3)

Country Link
US (1) US6334104B1 (ja)
JP (1) JP2000081892A (ja)
GB (1) GB2343821A (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6334104B1 (en) * 1998-09-04 2001-12-25 Nec Corporation Sound effects affixing system and sound effects affixing method
JP2002221980A (ja) * 2001-01-25 2002-08-09 Oki Electric Ind Co Ltd テキスト音声変換装置
JP2002318593A (ja) * 2001-04-20 2002-10-31 Sony Corp 言語処理装置および言語処理方法、並びにプログラムおよび記録媒体
WO2002086861A1 (fr) * 2001-04-20 2002-10-31 Sony Corporation Processeur de langage
EP1246081A3 (en) * 2001-03-30 2006-07-26 Yamaha Corporation Apparatus and method for adding music content to visual content delivered via communication network
WO2008001500A1 (fr) * 2006-06-30 2008-01-03 Nec Corporation Système de génération de contenus audio, système d'échange d'informations, programme, procédé de génération de contenus audio et procédé d'échange d'informations
JP2008035228A (ja) * 2006-07-28 2008-02-14 Daiichikosho Co Ltd 静止画像表示システム
JP2013101637A (ja) * 2007-04-28 2013-05-23 Nokia Corp テキスト専用アプリケーションのための娯楽オーディオ
JP2014026603A (ja) * 2012-07-30 2014-02-06 Hitachi Ltd 音楽選択支援システム、音楽選択支援方法、および音楽選択支援プログラム

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7050376B2 (en) 2000-09-19 2006-05-23 Lg Electronics Inc. Optical disc player and method for reproducing thereof
US7470196B1 (en) * 2000-10-16 2008-12-30 Wms Gaming, Inc. Method of transferring gaming data on a global computer network
US7722466B2 (en) * 2002-03-06 2010-05-25 Wms Gaming Inc. Integration of casino gaming and non-casino interactive gaming
US20030200858A1 (en) * 2002-04-29 2003-10-30 Jianlei Xie Mixing MP3 audio and T T P for enhanced E-book application
US20040102975A1 (en) * 2002-11-26 2004-05-27 International Business Machines Corporation Method and apparatus for masking unnatural phenomena in synthetic speech using a simulated environmental effect
US20050162699A1 (en) * 2004-01-22 2005-07-28 Fuji Photo Film Co., Ltd. Index printing device, instant film, service server, and servicing method
JP2005293174A (ja) * 2004-03-31 2005-10-20 Toshiba Corp テキストデータ編集装置、テキストデータ編集方法及びテキストデータ編集プログラム
CN101088085A (zh) * 2004-12-22 2007-12-12 皇家飞利浦电子股份有限公司 便携式音频播放设备及其操作方法
JP4524640B2 (ja) * 2005-03-31 2010-08-18 ソニー株式会社 情報処理装置および方法、並びにプログラム
EP1876522A1 (en) * 2005-04-12 2008-01-09 Sharp Kabushiki Kaisha Audio reproducing method, character code using device, distribution service system, and character code management method
JP4787634B2 (ja) * 2005-04-18 2011-10-05 株式会社リコー 音楽フォント出力装置、フォントデータベース及び言語入力フロントエンドプロセッサ
CA2513232C (en) * 2005-07-25 2019-01-15 Kayla Cornale Method for teaching reading and lterary
US7644000B1 (en) * 2005-12-29 2010-01-05 Tellme Networks, Inc. Adding audio effects to spoken utterance
US20070245375A1 (en) * 2006-03-21 2007-10-18 Nokia Corporation Method, apparatus and computer program product for providing content dependent media content mixing
CN101046956A (zh) * 2006-03-28 2007-10-03 国际商业机器公司 交互式音效产生方法及系统
JP2009265279A (ja) * 2008-04-23 2009-11-12 Sony Ericsson Mobilecommunications Japan Inc 音声合成装置、音声合成方法、音声合成プログラム、携帯情報端末、および音声合成システム
US20090326953A1 (en) * 2008-06-26 2009-12-31 Meivox, Llc. Method of accessing cultural resources or digital contents, such as text, video, audio and web pages by voice recognition with any type of programmable device without the use of the hands or any physical apparatus.
US20100028843A1 (en) * 2008-07-29 2010-02-04 Bonafide Innovations, LLC Speech activated sound effects book
JPWO2011122522A1 (ja) * 2010-03-30 2013-07-08 日本電気株式会社 感性表現語選択システム、感性表現語選択方法及びプログラム
US9037467B2 (en) * 2012-01-02 2015-05-19 International Business Machines Corporation Speech effects
US8979635B2 (en) 2012-04-02 2015-03-17 Wms Gaming Inc. Systems, methods and devices for playing wagering games with distributed and shared partial outcome features
US9564007B2 (en) 2012-06-04 2017-02-07 Bally Gaming, Inc. Wagering game content based on locations of player check-in
US9495450B2 (en) * 2012-06-12 2016-11-15 Nuance Communications, Inc. Audio animation methods and apparatus utilizing a probability criterion for frame transitions
US9305433B2 (en) 2012-07-20 2016-04-05 Bally Gaming, Inc. Systems, methods and devices for playing wagering games with distributed competition features
US8721436B2 (en) 2012-08-17 2014-05-13 Wms Gaming Inc. Systems, methods and devices for configuring wagering game devices based on shared data
US8616981B1 (en) 2012-09-12 2013-12-31 Wms Gaming Inc. Systems, methods, and devices for playing wagering games with location-triggered game features
JP6013951B2 (ja) * 2013-03-14 2016-10-25 本田技研工業株式会社 環境音検索装置、環境音検索方法
US9875618B2 (en) 2014-07-24 2018-01-23 Igt Gaming system and method employing multi-directional interaction between multiple concurrently played games
US10249205B2 (en) 2015-06-08 2019-04-02 Novel Effect, Inc. System and method for integrating special effects with a text source
CN105336329B (zh) * 2015-09-25 2021-07-16 联想(北京)有限公司 一种语音处理方法及系统
US10394885B1 (en) * 2016-03-15 2019-08-27 Intuit Inc. Methods, systems and computer program products for generating personalized financial podcasts
US10242674B2 (en) * 2017-08-15 2019-03-26 Sony Interactive Entertainment Inc. Passive word detection with sound effects
US10888783B2 (en) 2017-09-20 2021-01-12 Sony Interactive Entertainment Inc. Dynamic modification of audio playback in games
US10661175B2 (en) 2017-09-26 2020-05-26 Sony Interactive Entertainment Inc. Intelligent user-based game soundtrack
WO2020151008A1 (en) * 2019-01-25 2020-07-30 Microsoft Technology Licensing, Llc Automatically adding sound effects into audio files
US11133004B1 (en) * 2019-03-27 2021-09-28 Amazon Technologies, Inc. Accessory for an audio output device
US11373633B2 (en) * 2019-09-27 2022-06-28 Amazon Technologies, Inc. Text-to-speech processing using input voice characteristic data
CN111050203B (zh) * 2019-12-06 2022-06-14 腾讯科技（深圳）有限公司 一种视频处理方法、装置、视频处理设备及存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL7904469A (nl) * 1979-06-07 1980-12-09 Philips Nv Inrichting voor het lezen van een gedrukte kode en het daarvan omzetten in een audio-signaal.
JPH03150599A (ja) * 1989-11-07 1991-06-26 Canon Inc 日本語音節の符号化方式
JP2849504B2 (ja) * 1992-05-29 1999-01-20 シャープ株式会社 自動読書装置
JPH0679228A (ja) 1992-09-01 1994-03-22 Sekisui Jushi Co Ltd 塗装ステンレス鋼基材
JPH06208394A (ja) 1993-01-11 1994-07-26 Toshiba Corp メッセージ交換処理装置
JPH06337876A (ja) 1993-05-28 1994-12-06 Toshiba Corp 文章読み上げ装置
JPH0772888A (ja) * 1993-09-01 1995-03-17 Matsushita Electric Ind Co Ltd 情報処理装置
JPH07200554A (ja) 1993-12-28 1995-08-04 Toshiba Corp 文章読み上げ装置
US5799267A (en) * 1994-07-22 1998-08-25 Siegel; Steven H. Phonic engine
JP2956621B2 (ja) 1996-11-20 1999-10-04 日本電気株式会社 擬音語を用いた音検索システムおよび擬音語を用いた音検索方法
JP2000163418A (ja) * 1997-12-26 2000-06-16 Canon Inc 自然言語処理装置及びその方法、及びそのプログラムを格納した記憶媒体
JP2000081892A (ja) 1998-09-04 2000-03-21 Nec Corp 効果音付加装置および効果音付加方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6334104B1 (en) * 1998-09-04 2001-12-25 Nec Corporation Sound effects affixing system and sound effects affixing method
JP2002221980A (ja) * 2001-01-25 2002-08-09 Oki Electric Ind Co Ltd テキスト音声変換装置
US7260533B2 (en) * 2001-01-25 2007-08-21 Oki Electric Industry Co., Ltd. Text-to-speech conversion system
EP1246081A3 (en) * 2001-03-30 2006-07-26 Yamaha Corporation Apparatus and method for adding music content to visual content delivered via communication network
US7328272B2 (en) 2001-03-30 2008-02-05 Yamaha Corporation Apparatus and method for adding music content to visual content delivered via communication network
JP2002318593A (ja) * 2001-04-20 2002-10-31 Sony Corp 言語処理装置および言語処理方法、並びにプログラムおよび記録媒体
WO2002086861A1 (fr) * 2001-04-20 2002-10-31 Sony Corporation Processeur de langage
WO2008001500A1 (fr) * 2006-06-30 2008-01-03 Nec Corporation Système de génération de contenus audio, système d'échange d'informations, programme, procédé de génération de contenus audio et procédé d'échange d'informations
JP2008035228A (ja) * 2006-07-28 2008-02-14 Daiichikosho Co Ltd 静止画像表示システム
JP4679463B2 (ja) * 2006-07-28 2011-04-27 株式会社第一興商 静止画像表示システム
JP2013101637A (ja) * 2007-04-28 2013-05-23 Nokia Corp テキスト専用アプリケーションのための娯楽オーディオ
JP2014026603A (ja) * 2012-07-30 2014-02-06 Hitachi Ltd 音楽選択支援システム、音楽選択支援方法、および音楽選択支援プログラム

Also Published As

Publication number Publication date
GB9920923D0 (en) 1999-11-10
GB2343821A (en) 2000-05-17
US6334104B1 (en) 2001-12-25

Similar Documents

Publication Publication Date Title
JP2000081892A (ja) 効果音付加装置および効果音付加方法
US8396714B2 (en) Systems and methods for concatenation of words in text to speech synthesis
US8583418B2 (en) Systems and methods of detecting language and natural language strings for text to speech synthesis
US8712776B2 (en) Systems and methods for selective text to speech synthesis
US8355919B2 (en) Systems and methods for text normalization for text to speech synthesis
US8352272B2 (en) Systems and methods for text to speech synthesis
US8036894B2 (en) Multi-unit approach to text-to-speech synthesis
US20100082328A1 (en) Systems and methods for speech preprocessing in text to speech synthesis
US20100082344A1 (en) Systems and methods for selective rate of speech and speech preferences for text to speech synthesis
US20100082327A1 (en) Systems and methods for mapping phonemes for text to speech synthesis
JPH10274997A (ja) 文書読み上げ装置
JPWO2004066271A1 (ja) 音声合成装置，音声合成方法および音声合成システム
JP3085631B2 (ja) 音声合成方法及びシステム
JP4738847B2 (ja) データ検索装置および方法
CN112669815B (zh) 歌曲定制生成方法及其相应的装置、设备、介质
JP3071804B2 (ja) 音声合成装置
JP3706758B2 (ja) 自然言語処理方法，自然言語処理用記録媒体および音声合成装置
US20060248105A1 (en) Interactive system for building and sharing databank
JP2005004100A (ja) 聴取システムおよび音声合成装置
JPH1115497A (ja) 氏名読み音声合成装置
JP4306086B2 (ja) 音声合成用辞書作成装置及び方法
JPH10228471A (ja) 音声合成システム，音声用テキスト生成システム及び記録媒体
JP2002297667A (ja) 文書閲覧装置
Plug et al. Schwa deletion and perceived tempo in English
JP2001265792A (ja) 自動要約文生成装置、自動要約文生成方法及び自動要約文生成方法を記録した媒体

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20020514