JP2018036527A - 音声処理装置、音声処理方法およびプログラム - Google Patents

音声処理装置、音声処理方法およびプログラム Download PDF

Info

Publication number
JP2018036527A
JP2018036527A JP2016170043A JP2016170043A JP2018036527A JP 2018036527 A JP2018036527 A JP 2018036527A JP 2016170043 A JP2016170043 A JP 2016170043A JP 2016170043 A JP2016170043 A JP 2016170043A JP 2018036527 A JP2018036527 A JP 2018036527A
Authority
JP
Japan
Prior art keywords
sound
voice
emphasized
unit
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016170043A
Other languages
English (en)
Other versions
JP6716397B2 (ja
Inventor
山本 雅裕
Masahiro Yamamoto
雅裕 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2016170043A priority Critical patent/JP6716397B2/ja
Publication of JP2018036527A publication Critical patent/JP2018036527A/ja
Application granted granted Critical
Publication of JP6716397B2 publication Critical patent/JP6716397B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

【課題】利用者の注意力を増大させることができる音声処理装置、音声処理方法およびプログラムを提供する。【解決手段】音声処理装置100は、特定部102と、変調部103と、を備える。特定部102は、出力させる音声の強調部分を特定する。変調部103は、第1出力部に出力させる第1音声の強調部分と第2出力部に出力させる第2音声の強調部分との間で、ピッチおよび位相の少なくとも一方が異なるように、第1音声および第2音声の少なくとも一方の強調部分を変調する。【選択図】図1

Description

本発明の実施形態は、音声処理装置、音声処理方法およびプログラムに関する。
日常環境の中で適切なメッセージを伝えることは非常に重要である。特にカーナビゲーションの中での注意喚起および危険通知、さらには緊急災害放送において周囲の環境音に埋もれることなく通知すべきメッセージなどは、その後の行動を考えても確実に届ける必要がある。
カーナビゲーションの中で注意喚起および危険通知を行うために広く行われている方法として、光による刺激、および、ブザー音の追加等が挙げられる。
特開2007−019980号公報
しかしながら、従来技術では、通常の音声ガイドから刺激を増やすことで注意喚起を行っているため、注意喚起の瞬間にドライバーなどの利用者が驚くという現象を生じさせる。驚いた後の利用者の行動は遅れる傾向があり、本来刺激によりスムーズな危機回避行動を促すはずが、かえって行動を制限する結果になる場合がある。
実施形態の音声処理装置は、特定部と、変調部と、を備える。特定部は、出力させる音声の強調部分を特定する。変調部は、第1出力部に出力させる第1音声の強調部分と第2出力部に出力させる第2音声の強調部分との間で、ピッチおよび位相の少なくとも一方が異なるように、第1音声および第2音声の少なくとも一方の強調部分を変調する。
第1の実施形態にかかる音声処理装置のブロック図。 実施形態のスピーカの配置の一例を示す図。 測定結果の一例を示す図。 実施形態のスピーカの配置の他の例を示す図。 実施形態のスピーカの配置の他の例を示す図。 ピッチ変調および位相変調について説明するための図。 位相の差(度)と背景音の音圧(dB)との関係を示す図。 周波数差(Hz)と背景音の音圧(dB)との関係を示す図。 第1の実施形態における音声出力処理のフローチャート。 第2の実施形態にかかる音声処理装置のブロック図。 第2の実施形態における音声出力処理のフローチャート。 第3の実施形態にかかる音声処理装置のブロック図。 第3の実施形態における音声出力処理のフローチャート。 実施形態にかかる音声処理装置のハードウェア構成図。
以下に添付図面を参照して、この発明にかかる音声処理装置の好適な実施形態を詳細に説明する。
発明者の実験では、複数の音声出力装置(スピーカ、ヘッドフォンなど)のそれぞれから、ピッチおよび位相の少なくとも一方が異なる音声を聴く場合に、音声の物理的な大きさ(ラウドネス)によらず知覚による明瞭さが大きくなり、かつ、注意レベルが上昇することが確認されている。このとき、驚きの感覚はほとんど観測されない。
これまでの考え方では、複数の音声出力装置のそれぞれから、ピッチおよび位相のいずれかが異なる音声を聴く場合には、明瞭さが減少するため聞き取りが悪化するとされてきた。しかし、上記のように発明者の実験では、ピッチおよび位相の少なくとも一方が異なる音声を左右の耳で聴く場合に明瞭さが上昇し、注意レベルが上昇することが確認できた。
これは、聴覚が両耳を使用して音声をより明確に知覚しようとする働きを示しており、これまでにはない新しい発見である。以下の実施形態は、この発見を基にしており、左右の耳に対してピッチおよび位相の少なくとも一方が異なる音声による知覚上昇を利用して注意喚起および危険通知を可能とする。
(第1の実施形態)
第1の実施形態にかかる音声処理装置は、強調部分に対応する音声のピッチおよび位相の少なくとも一方を変調し、変調した音声を出力する。これにより、音声信号の強度を変えることなく、利用者の注意力を増大させ、次動作をスムーズに実行させることが可能となる。
図1は、第1の実施形態にかかる音声処理装置100の構成の一例を示すブロック図である。図1に示すように、音声処理装置100は、記憶部121と、受付部101と、特定部102と、変調部103と、出力制御部104と、スピーカ105−1〜105−n(nは2以上の整数)と、を備えている。
記憶部121は、音声処理装置100で使用される各種データを記憶する。例えば記憶部121は、入力されたテキストデータ、および、テキストデータから特定された強調部分を示すデータなどを記憶する。記憶部121は、HDD(Hard Disk Drive)、SSD(Solid State Drive))、光ディスク、メモリカード、RAM(Random Access Memory)などの一般的に利用されているあらゆる記憶媒体により構成することができる。
スピーカ105−1〜105−nは、出力制御部104からの指示に従い音声を出力する出力部である。スピーカ105−1〜105−nは、同様の構成を備えるため、区別する必要がない場合は単にスピーカ105という場合がある。以下では、スピーカ105−1(第1出力部)およびスピーカ105−2(第2出力部)の2つのスピーカの組に出力する音声の間でピッチおよび位相の少なくとも一方を変調する場合を例に説明する。2以上の組に対して同様の処理を適用してもよい。
受付部101は、処理対象とする各種データを受け付ける。例えば受付部101は、音声に変換して出力させるテキストデータの入力を受け付ける。
特定部102は、出力させる音声のうち、強調して出力する部分を表す強調部分を特定する。強調部分は、注意喚起および危険通知等を行うためにピッチおよび位相の少なくとも一方を変調して出力する部分に相当する。例えば特定部102は、入力されたテキストデータから強調部分を特定する。入力するテキストデータに事前に強調部分を特定するための情報が付加されている場合は、特定部102は、付加された情報(付加情報)を参照して強調部分を特定することができる。特定部102は、テキストデータと、予め定められた強調部分を示すデータとを照合することにより、強調部分を特定してもよい。特定部102は、付加情報による特定およびデータ照合による特定の両方を実行してもよい。強調部分を示すデータは、記憶部121に記憶されてもよいし、音声処理装置100の外部の記憶装置に記憶されてもよい。
特定部102は、特定した強調部分を強調することを示す情報(付加情報)をテキストデータに付加する符号化処理を実行してもよい。後段の変調部103は、このようにして付加された付加情報を参照して、変調する強調部分を判定することが可能となる。付加情報は、強調部分であることを判定可能であればどのような形式であってもよい。また、特定部102は、符号化処理を実行したテキストデータを記憶部121などの記憶媒体に保存してもよい。これにより、以降の音声出力処理では、事前に付加情報が付加されたテキストデータを利用することが可能となる。
変調部103は、出力させる音声のピッチおよび位相の少なくとも一方である変調対象を変調する。例えば変調部103は、スピーカ105−1に出力させる音声(第1音声)の強調部分と、スピーカ105−2に出力させる音声(第2音声)の強調部分との間で変調対象が異なるように、少なくとも一方の音声の強調部分の変調対象を変調する。
本実施形態では、変調部103は、テキストデータを変換した音声を生成するときに、テキストデータが強調部分であるかを逐次判定し、強調部分に対して変調処理を実行する。すなわち変調部103は、テキストデータを変換して、スピーカ105−1に出力させる音声(第1音声)およびスピーカ105−2に出力させる音声(第2音声)を生成するときに、強調部分のテキストデータに対しては、変調対象が相互に異なるように、少なくとも一方の変調対象を変調した第1音声および第2音声を生成する。
テキストデータを音声に変換する処理(音声合成処理)は、フォルマント音声合成および音声コーパスベースの音声合成などの従来から用いられているあらゆる方法を用いることができる。
位相を変調する場合、変調部103は、スピーカ105−1およびスピーカ105−2のうち一方に入力する信号の極性を反転してもよい。これにより、スピーカ105の一方が他方に対して逆相になり、音声データの位相を変調する場合と同様の機能を実現できる。
変調部103は、処理対象のデータの完全性を確認し、完全性が確認された場合に変調処理を行ってもよい。例えばテキストデータに付加された付加情報が、強調部分の開始を示す情報と、強調部分の終了を示す情報とを指定する形式の場合、変調部103は、開始を示す情報と終了を示す情報とが対応することが確認できた場合に変調処理を行ってもよい。
出力制御部104は、スピーカ105からの音声の出力を制御する。例えば出力制御部104は、変調対象が変調された第1音声をスピーカ105−1に出力させ、第2音声をスピーカ105−2から出力させる。スピーカ105−1およびスピーカ105−2以外のスピーカ105が備えられている場合は、出力制御部104は、各スピーカ105に最適な音声を割り当てて出力させる。各スピーカ105は、出力制御部104からの出力データに基づいて音声を出力する。
出力制御部104は、スピーカ105の位置および特性等のパラメータを用いて、各スピーカ105への出力(アンプ出力)を計算する。これらのパラメータは、例えば記憶部121に記憶される。
例えば、2つのスピーカ105において必要な音圧を揃える場合には、以下のように、各スピーカへのアンプ出力W1、W2を計算する。2つのスピーカの距離をL1、L2とする。L1(L2)は、例えば、スピーカ105−1(スピーカ105−2)と頭部の中心との間の距離である。各スピーカ105から、最も近い耳までの距離を用いてもよい。使用する音声の可聴領域のスピーカ105−1(スピーカ105−2)のゲインをGs1(Gs2)とする。距離が2倍になると6dBの低下となり、3dBの音圧上昇にアンプ出力が2倍必要であるとする。両耳での音圧を揃えるために、出力制御部104は、以下の式が成り立つように、アンプ出力W1、W2を計算して決定する。
−6×(L1/L2)×(1/2)+(2/3)×Gs1×W1=
−6×(L2/L1)×(1/2)+(2/3)×Gs2×W2
受付部101、特定部102、変調部103、および、出力制御部104は、例えば、CPU(Central Processing Unit)などの処理装置にプログラムを実行させること、すなわち、ソフトウェアにより実現してもよいし、IC(Integrated Circuit)などのハードウェアにより実現してもよいし、ソフトウェアおよびハードウェアを併用して実現してもよい。
図2は、本実施形態のスピーカ105の配置の一例を示す図である。図2は、利用者205の鉛直上方から下方を観察した場合のスピーカ105の配置の例を示す。スピーカ105−1とスピーカ105−2からは、変調部103により変調処理が実行された音声が流れる。スピーカ105−1は、利用者205の右耳の延長上に置かれている。スピーカ105−2は、スピーカ105−1と右耳とを通過する線を基準として角度もって置くことができる。
発明者は、曲線203または曲線204に沿ってスピーカ105−2の位置を変化させ、ピッチおよび位相を変調した音声を出力した場合の注意力を測定し、いずれの場合でも注意力の増大を確認した。注意力は、EEG(Electroencephalogram)、NIRS(Near-Infrared Spectroscopy)、および、主観評価などの評価基準を用いて測定した。
図3は、測定結果の一例を示す図である。図3のグラフの横軸は、スピーカ105の配置角度を表す。配置角度は、例えば、スピーカ105−1と利用者205とを結ぶ線と、スピーカ105−2と利用者205とを結ぶ線とのなす角度である。図3に示すように、配置角度が90°から180°のときに注意力の増加が大きくなる。従って、スピーカ105−1とスピーカ105−2は、配置角度が90°から180°となるように配置することが望ましい。なお注意力は検出されるため、配置角度が0°より大きければ90°より小さくてもよい。
音声の全区間のピッチまたは位相を変調してもよいが、この場合、慣れなどのために注意力が減少する可能性がある。そこで変調部103は、付加情報などにより特定された強調部分のみに対して変調を行う。これにより、強調部分に対する注意力をより効果的に高めることが可能となる。
図4は、本実施形態のスピーカ105の配置の他の例を示す図である。図4は、例えば屋外で場外放送を出力するために設置されるスピーカ105の配置の例を示す。図3に示すように、90°から180°の配置角度となるスピーカ105の組を用いることが望ましい。従って、図4の例では、180°の配置角度で配置されるスピーカ105−1、スピーカ105−2の組に対して、音声の変調処理が実行される。
図5は、本実施形態のスピーカ105の配置の他の例を示す図である。図5は、ヘッドフォンとしてスピーカ105−1およびスピーカ105−2を構成した例である。
スピーカ105の配置例は図2、図4および図5に限られるものではない。図3に示したように注意力が得られる配置角度で配置されれば、どのような組み合わせのスピーカであってもよい。例えば、カーナビゲーションのために用いられる複数のスピーカに対して本実施形態を適用してもよい。
次に、ピッチ変調および位相変調について説明する。図6は、ピッチ変調および位相変調について説明するための図である。位相変調は、音声の包絡線604をもとに、元の信号601に対して同一の包絡線に対して単位時間内の波数を変えることなく、ピークの時間位置を変更した信号603を出力する。ピッチ変調は、波数を変更した信号602を出力する。
次に、ピッチまたは位相の変調と、音声の聞き取りやすさとの関係について説明する。図7は、位相の差(度)と背景音の音圧(dB)との関係を示す図である。位相の差は、2つのスピーカ105から出力させる音声間の位相の差(例えばスピーカ105−1から出力させる音声の位相と、スピーカ105−2から出力させる音声の位相との差)を表す。背景音の音圧は、出力された音声を利用者が聞き取ることができる背景音の音圧の最大値(限界音圧)を表す。
背景音は、スピーカ105から出力する音声以外の音である。例えば周囲の雑音、および、音声以外に出力されている音楽等の音が、背景音に相当する。図7の矩形で示す点が、得られた値の平均値を表す。この点の上下の線で示した範囲が得られた値の標準偏差を表す。
図7に示すように、0.5dB以上の背景音が存在する場合であっても、位相の差が60°以上180°以下であれば、利用者はスピーカ105から出力される音声を聞き取ることができる。従って、変調部103は、位相の差が60°以上180°以下となるように変調処理を実行してもよい。変調部103は、より限界音圧の高い90°以上180°以下、または、120°以上180°以下の位相差となるように変調処理を実行してもよい。
図8は、周波数差(Hz)と背景音の音圧(dB)との関係を示す図である。周波数差は、2つのスピーカ105から出力させる音声の周波数の差(例えばスピーカ105−1から出力させる音声の周波数と、スピーカ105−2から出力させる音声の周波数との差)を表す。図8の矩形で示す点が、得られた値の平均値を表す。この点の横に付した数値“A、B”のうち、Aが周波数差を表し、Bが背景音の音圧を表す。
図8に示すように、背景音が存在する場合であっても、周波数差が100Hz(ヘルツ)以上であれば、利用者はスピーカ105から出力される音声を聞き取ることができる。従って、変調部103は、可聴域の範囲内で、周波数差が100Hz以上となるように変調処理を実行してもよい。
次に、このように構成された第1の実施形態にかかる音声処理装置100による音声出力処理について図9を用いて説明する。図9は、第1の実施形態における音声出力処理の一例を示すフローチャートである。
受付部101は、テキストデータの入力を受け付ける(ステップS101)。特定部102は、テキストデータに付加情報が付加されているか否かを判断する(ステップS102)。付加されていない場合(ステップS102:No)、特定部102は、テキストデータから強調部分を特定する(ステップS103)。例えば特定部102は、入力されたテキストデータと、予め定められた強調部分を示すデータとを照合することにより、強調部分を特定する。特定部102は、強調部分を示す付加情報を、対応するテキストデータの強調部分に付加する(ステップS104)。付加情報の付加方法は、変調部103が、強調部分を特定できればどのような方法であってもよい。
付加情報が付加された後(ステップS104)、および、テキストデータに付加情報が付加されている場合(ステップS102:Yes)、変調部103は、テキストデータに対応する音声であって、強調部分のテキストデータに対しては変調対象が相互に異なるように変調対象を変調した音声(第1音声、第2音声)を生成する(ステップS105)。
出力制御部104は、スピーカ105ごとに出力する音声を決定し、決定した音声を出力させる(ステップS106)。各スピーカ105は、出力制御部104の指示に従い音声を出力する。
このように、第1の実施形態にかかる音声処理装置では、テキストデータに対応する音声を生成しながら、強調部分に対応するテキストデータに対しては、音声のピッチおよび位相の少なくとも一方を変調し、変調した音声を出力する。これにより、音声信号の強度を変えることなく、利用者の注意力を増大させることが可能となる。
(第2の実施形態)
第1の実施形態では、テキストデータを逐次音声に変換するときに、強調部分のテキストデータに対して変調処理を行った。第2の実施形態にかかる音声処理装置は、テキストデータに対する音声を生成した後、生成した音声のうち強調部分に相当する音声に対して変調処理を行う。
図10は、第2の実施形態にかかる音声処理装置100−2の構成の一例を示すブロック図である。図10に示すように、音声処理装置100−2は、記憶部121と、受付部101と、特定部102と、変調部103−2と、出力制御部104と、スピーカ105−1〜105−nと、生成部106−2と、を備えている。
第2の実施形態では、変調部103−2の機能、および、生成部106−2を追加したことが第1の実施形態と異なっている。その他の構成および機能は、第1の実施形態にかかる音声処理装置100のブロック図である図1と同様であるので、同一符号を付し、ここでの説明は省略する。
生成部106−2は、テキストデータに対応する音声を生成する。例えば生成部106−2は、入力されたテキストデータを、スピーカ105−1に出力する音声(第1音声)およびスピーカ105−2に出力する音声(第2音声)に変換する。
変調部103−2は、生成部106−2により生成された音声のうち、強調部分の音声に対して変調処理を行う。例えば変調部103−2は、生成された第1音声の強調部分と生成された第2音声の強調部分との間で変調対象が異なるように、第1音声および第2音声の少なくとも一方の強調部分の調対象を変調する。
次に、このように構成された第2の実施形態にかかる音声処理装置100−2による音声出力処理について図11を用いて説明する。図11は、第2の実施形態における音声出力処理の一例を示すフローチャートである。
ステップS201からステップS204までは、第1の実施形態にかかる音声処理装置100におけるステップS101からステップS104までと同様の処理なので、その説明を省略する。
本実施形態では、テキストデータが入力されると、生成部106−2による音声生成処理(音声合成処理)が実行される。すなわち、生成部106−2は、テキストデータに対応する音声を生成する(ステップS205)。
付加情報が付加された後(ステップS204)、および、テキストデータに付加情報が付加されている場合(ステップS202:Yes)、変調部103−2は、生成された音声から強調部分を抽出する(ステップS206)。例えば変調部103−2は、付加情報を参照してテキストデータのうち強調部分を特定するとともに、テキストデータと生成した音声との対応から、特定したテキストデータの強調部分に対応する音声の強調部分を抽出する。変調部103−2は、抽出した音声の強調部分に対して変調処理を実行する(ステップS207)。なお変調部103−2は、強調部分以外の音声に対しては変調処理を行わない。
ステップS208は、第1の実施形態にかかる音声処理装置100におけるステップS106と同様の処理なので、その説明を省略する。
このように、第2の実施形態にかかる音声処理装置では、テキストデータに対応する音声を生成した後に、音声の強調部分のピッチおよび位相の少なくとも一方を変調し、変調した音声を出力する。これにより、音声信号の強度を変えることなく、利用者の注意力を増大させることが可能となる。
(第3の実施形態)
第1および第2の実施形態では、テキストデータを入力し、テキストデータを音声に変換して出力した。このような実施形態は、例えば、予め定められた緊急災害放送用のテキストデータを出力する場合などに適用できる。一方、利用者が発声した音声を緊急災害放送用に出力する状況も考えられる。第3の実施形態にかかる音声処理装置は、マイクなどの音声入力装置から音声を入力し、入力された音声の強調部分に対して変調処理を行う。
図12は、第3の実施形態にかかる音声処理装置100−3の構成の一例を示すブロック図である。図12に示すように、音声処理装置100−3は、記憶部121と、受付部101−3と、特定部102−3と、変調部103−3と、出力制御部104と、スピーカ105−1〜105−nと、生成部106−2と、を備えている。
第3の実施形態では、受付部101−3、特定部102−3、および、変調部103−3の機能が第2の実施形態と異なっている。その他の構成および機能は、第2の実施形態にかかる音声処理装置100−2のブロック図である図10と同様であるので、同一符号を付し、ここでの説明は省略する。
受付部101−3は、テキストデータのみでなく、マイクなどの音声入力装置から入力される音声を受け付ける。また、受付部101−3は、入力される音声のうち強調する部分の指定を受け付ける。例えば受付部101−3は、利用者による所定のボタンの押下を、押下後に入力される音声が強調する部分であることを示す指定として受け付ける。受付部101−3は、強調部分の開始および終了の指定を、開始から終了までに入力された音声が強調する部分であることを示す指定として受け付けてもよい。指定方法はこれらに限られるものではなく、音声のうち強調する部分を決定可能であればどのような方法であってもよい。以下では、音声のうち強調する部分の指定をトリガーという場合がある。
特定部102−3は、さらに、受け付けられた指定(トリガー)に基づいて、音声の強調部分を特定する機能を有する。
変調部103−3は、生成部106−2により生成された音声、または、入力された音声のうち、強調部分の音声に対して変調処理を行う。
次に、このように構成された第3の実施形態にかかる音声処理装置100−3による音声出力処理について図13を用いて説明する。図13は、第3の実施形態における音声出力処理の一例を示すフローチャートである。
受付部101−3は、音声入力優先であるか否かを判定する(ステップS301)。音声入力優先とは、テキストデータではなく、音声を入力して出力することを示す指定である。例えば、音声入力優先を指定するためのボタンが押下された場合に、受付部101−3は、音声入力優先であると判定する。
音声入力優先であるかの判定方法はこれに限られるものではない。例えば、音声入力優先であるかを示す事前に保存された情報を参照して判定してもよい。また、テキストデータは入力せず、音声入力のみとする場合は、音声入力優先の指定や判定(ステップS301)を実行しなくてもよい。この場合、後述するテキストデータに基づく付加処理(ステップS306)も実行しなくてもよい。
音声入力優先の場合(ステップS301:Yes)、受付部101−3は、音声の入力を受け付ける(ステップS302)。特定部102−3は、音声の強調する部分の指定(トリガー)が入力されているか否かを判定する(ステップS303)。
トリガーが入力されていない場合(ステップS303:No)、特定部102−3は、音声の強調部分を特定する(ステップS304)。例えば特定部102−3は、入力されている音声と、予め登録された音声データとを照合し、登録された音声データと一致または類似する音声を強調部分として特定する。特定部102−3は、入力された音声を音声認識して得られるテキストデータと、予め定められた強調部分を示すデータとを照合することにより、強調部分を特定してもよい。
ステップS303でトリガーが入力されていると判定した場合(ステップS303:Yes)、および、ステップS304で強調部分を特定した後、特定部102−3は、入力されている音声のデータに対して、強調部分を示す付加情報を付加する(ステップS305)。付加情報の付加方法は、音声が強調部分であることを判定できればどのような方法であってもよい。
ステップS301で音声入力優先でないと判定された場合(ステップS301:No)、テキストに基づく付加処理が実行される(ステップS306)。この処理は、例えば図11のステップS301からステップS305までと同様の処理で実現できる。
変調部103−3は、生成された音声から強調部分を抽出する(ステップS307)。例えば変調部103−3は、付加情報を参照して音声の強調部分を抽出する。ステップS306を実行した場合は、変調部103−3は、図11のステップS206と同様の処理により強調部分を抽出する。
ステップS308からステップS309までは、第2の実施形態にかかる音声処理装置100−2におけるステップS207からステップS208までと同様の処理なので、その説明を省略する。
このように、第3の実施形態にかかる音声処理装置では、入力された音声の強調部分をトリガーなどにより特定し、音声の強調部分のピッチおよび位相の少なくとも一方を変調し、変調した音声を出力する。これにより、音声信号の強度を変えることなく、利用者の注意力を増大させることが可能となる。
以上説明したとおり、第1から第3の実施形態によれば、音声のピッチおよび位相の少なくとも一方を変調して出力することにより、音声信号の強度を変えることなく、利用者の注意力を増大させることが可能となる。
次に、第1から第3の実施形態にかかる音声処理装置のハードウェア構成について図14を用いて説明する。図14は、第1から第3の実施形態にかかる音声処理装置のハードウェア構成例を示す説明図である。
第1から第3の実施形態にかかる音声処理装置は、CPU(Central Processing Unit)51などの制御装置と、ROM(Read Only Memory)52やRAM(Random Access Memory)53などの記憶装置と、ネットワークに接続して通信を行う通信I/F54と、各部を接続するバス61を備えている。
第1から第3の実施形態における音声処理装置は、コンピュータまたは組み込みシステムであり、パソコンおよびマイコン等の1つからなる装置、または、複数の装置がネットワーク接続されたシステム等の何れの構成であってもよい。また、本実施形態におけるコンピュータは、パソコンに限らず、情報処理機器に含まれる演算処理装置およびマイコン等も含み、プログラムによって本実施形態における機能を実現することが可能な機器または装置を総称している。
第1から第3の実施形態にかかる音声処理装置で実行されるプログラムは、ROM52等に予め組み込まれて提供される。
第1から第3の実施形態にかかる音声処理装置で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM(Compact Disk Read Only Memory)、フレキシブルディスク(FD)、CD−R(Compact Disk Recordable)、DVD(Digital Versatile Disk)、USBフラッシュメモリー、SDカード、EEPROM(Electrically Erasable Programmable Read-Only Memory)等のコンピュータで読み取り可能な記録媒体に記録してコンピュータプログラムプロダクトとして提供されるように構成してもよい。
さらに、第1から第3の実施形態にかかる音声処理装置で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、第1から第3の実施形態にかかる音声処理装置で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成してもよい。
第1から第3の実施形態にかかる音声処理装置で実行されるプログラムは、コンピュータを上述した音声処理装置の各部として機能させうる。このコンピュータは、CPU51がコンピュータ読取可能な記憶媒体からプログラムを主記憶装置上に読み出して実行することができる。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
100、100−2、100−3 音声処理装置
101 受付部
102、102−3 特定部
103、103−2、103−3 変調部
104 出力制御部
105 スピーカ
106−2 生成部
121 記憶部

Claims (9)

  1. 出力させる音声の強調部分を特定する特定部と、
    第1出力部に出力させる第1音声の前記強調部分と第2出力部に出力させる第2音声の前記強調部分との間で、ピッチおよび位相の少なくとも一方が異なるように、前記第1音声および前記第2音声の少なくとも一方の前記強調部分を変調する変調部と、
    を備える音声処理装置。
  2. 前記特定部は、入力されたテキストデータから前記強調部分を特定し、
    前記変調部は、前記テキストデータに対応する前記第1音声および前記第2音声であって、前記強調部分の前記ピッチおよび位相の少なくとも一方が異なるように、前記第1音声および前記第2音声の少なくとも一方の前記強調部分を変調した前記第1音声および前記第2音声を生成する、
    請求項1に記載の音声処理装置。
  3. 入力されたテキストデータに対応する前記第1音声および前記第2音声を生成する生成部をさらに備え、
    前記特定部は、前記テキストデータから前記強調部分を特定し、
    前記変調部は、生成された前記第1音声の前記強調部分と生成された前記第2音声の前記強調部分との間で、前記ピッチおよび位相の少なくとも一方が異なるように、前記第1音声および前記第2音声の少なくとも一方の前記強調部分を変調する、
    請求項1に記載の音声処理装置。
  4. 入力される音声のうち強調する部分の指定を受け付ける受付部をさらに備え、
    前記特定部は、前記指定に基づいて前記強調部分を特定する、
    請求項1に記載の音声処理装置。
  5. 前記変調部は、前記第1音声の前記強調部分の位相と、前記第2音声の前記強調部分の位相との差が、60°以上180°以下となるように、前記第1音声および前記第2音声の少なくとも一方の前記強調部分の位相を変調する、
    請求項1に記載の音声処理装置。
  6. 前記変調部は、前記第1音声の前記強調部分の周波数と、前記第2音声の前記強調部分の周波数との差が、100ヘルツ以上となるように、前記第1音声および前記第2音声の少なくとも一方の前記強調部分のピッチを変調する、
    請求項1に記載の音声処理装置。
  7. 前記変調部は、前記第1出力部または前記第2出力部に入力する信号の極性を反転することにより、前記第1音声および前記第2音声の少なくとも一方の前記強調部分の位相を変調する、
    請求項1に記載の音声処理装置。
  8. 出力させる音声の強調部分を特定する特定ステップと、
    第1出力部に出力させる第1音声の前記強調部分と第2出力部に出力させる第2音声の前記強調部分との間で、ピッチおよび位相の少なくとも一方が異なるように、前記第1音声および前記第2音声の少なくとも一方の前記強調部分を変調する変調ステップと、
    を含む音声処理方法。
  9. コンピュータを、
    出力させる音声の強調部分を特定する特定部と、
    第1出力部に出力させる第1音声の前記強調部分と第2出力部に出力させる第2音声の前記強調部分との間で、ピッチおよび位相の少なくとも一方が異なるように、前記第1音声および前記第2音声の少なくとも一方の前記強調部分を変調する変調部と、
    として機能させるためのプログラム。
JP2016170043A 2016-08-31 2016-08-31 音声処理装置、音声処理方法およびプログラム Active JP6716397B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016170043A JP6716397B2 (ja) 2016-08-31 2016-08-31 音声処理装置、音声処理方法およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016170043A JP6716397B2 (ja) 2016-08-31 2016-08-31 音声処理装置、音声処理方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2018036527A true JP2018036527A (ja) 2018-03-08
JP6716397B2 JP6716397B2 (ja) 2020-07-01

Family

ID=61567329

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016170043A Active JP6716397B2 (ja) 2016-08-31 2016-08-31 音声処理装置、音声処理方法およびプログラム

Country Status (1)

Country Link
JP (1) JP6716397B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109767752A (zh) * 2019-02-27 2019-05-17 平安科技(深圳)有限公司 一种基于注意力机制的语音合成方法及装置
US10803852B2 (en) 2017-03-22 2020-10-13 Kabushiki Kaisha Toshiba Speech processing apparatus, speech processing method, and computer program product
US10878802B2 (en) 2017-03-22 2020-12-29 Kabushiki Kaisha Toshiba Speech processing apparatus, speech processing method, and computer program product

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01204100A (ja) * 1988-02-09 1989-08-16 Ricoh Co Ltd テキスト音声合成方式
JPH0792981A (ja) * 1993-02-10 1995-04-07 Walt Disney Co:The バーチャルワールドサウンドシステムを提供するための方法及び装置
JP2003131700A (ja) * 2001-10-23 2003-05-09 Matsushita Electric Ind Co Ltd 音声情報出力装置及びその方法
JP2012033988A (ja) * 2010-07-28 2012-02-16 V-Seek Co Ltd 超重低音生成方法
EP2608131A1 (en) * 2011-12-23 2013-06-26 Research In Motion Limited Event notification on a mobile device using binaural sounds
JP2016134662A (ja) * 2015-01-16 2016-07-25 矢崎総業株式会社 警報装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01204100A (ja) * 1988-02-09 1989-08-16 Ricoh Co Ltd テキスト音声合成方式
JPH0792981A (ja) * 1993-02-10 1995-04-07 Walt Disney Co:The バーチャルワールドサウンドシステムを提供するための方法及び装置
JP2003131700A (ja) * 2001-10-23 2003-05-09 Matsushita Electric Ind Co Ltd 音声情報出力装置及びその方法
JP2012033988A (ja) * 2010-07-28 2012-02-16 V-Seek Co Ltd 超重低音生成方法
EP2608131A1 (en) * 2011-12-23 2013-06-26 Research In Motion Limited Event notification on a mobile device using binaural sounds
JP2016134662A (ja) * 2015-01-16 2016-07-25 矢崎総業株式会社 警報装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10803852B2 (en) 2017-03-22 2020-10-13 Kabushiki Kaisha Toshiba Speech processing apparatus, speech processing method, and computer program product
US10878802B2 (en) 2017-03-22 2020-12-29 Kabushiki Kaisha Toshiba Speech processing apparatus, speech processing method, and computer program product
CN109767752A (zh) * 2019-02-27 2019-05-17 平安科技(深圳)有限公司 一种基于注意力机制的语音合成方法及装置
CN109767752B (zh) * 2019-02-27 2023-05-26 平安科技(深圳)有限公司 一种基于注意力机制的语音合成方法及装置

Also Published As

Publication number Publication date
JP6716397B2 (ja) 2020-07-01

Similar Documents

Publication Publication Date Title
CN109714663B (zh) 一种耳机的控制方法、耳机及存储介质
US8781836B2 (en) Hearing assistance system for providing consistent human speech
CN103730122B (zh) 语音转换设备及其用于转换用户语音的方法
JP6716397B2 (ja) 音声処理装置、音声処理方法およびプログラム
KR101909128B1 (ko) 사용자의 청력 특성에 따라 조정된 소리를 출력하는 멀티미디어 재생 장치 및 이를 수행하는 방법
JP6268033B2 (ja) 携帯端末
JP6646001B2 (ja) 音声処理装置、音声処理方法およびプログラム
US20120070008A1 (en) Sound output apparatus and method of controlling the same
US20190362734A1 (en) Method for detecting ambient noise to change the playing voice frequency and sound playing device thereof
JP2012063614A (ja) マスキング音生成装置
CN108630214B (zh) 声音处理装置、声音处理方法以及存储介质
JP4977066B2 (ja) 車両用音声案内装置
JP7146152B2 (ja) 情報処理装置、音像形成システム、制御方法、及び制御プログラム
JP6995907B2 (ja) 音声処理装置、音声処理方法およびプログラム
JP5282469B2 (ja) 音声処理装置およびプログラム
KR102139599B1 (ko) 음향 전달 장치
JP2010278791A (ja) オーディオ機能を有する機器
Weedon et al. Perceived urgency in speech warnings
WO2022065441A1 (ja) 発音フィードバック装置、発音フィードバック方法、及びコンピュータプログラム
JP5395826B2 (ja) 補聴器調整装置
JP7105320B2 (ja) 音声認識装置、音声認識装置の制御方法、コンテンツ再生装置、及びコンテンツ送受信システム
KR101687894B1 (ko) 안전과 편의를 위한 사용자 단말의 음성 출력 제어 장치
WO2013024508A1 (ja) 音声処理装置、再生装置、音声処理方法およびプログラム
JP5283268B2 (ja) 音声発声状態判断装置
KR100693702B1 (ko) 음성 출력 장치의 음성 출력 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180905

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190708

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190716

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190826

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191008

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191203

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200512

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200610

R151 Written notification of patent or utility model registration

Ref document number: 6716397

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151