JP4772315B2 - 情報変換装置及び情報変換方法、並びに通信装置及び通信方法 - Google Patents

Description

この発明は、知覚データを変換して出力する情報変換装置及び情報変換方法、並びに通信装置及び通信方法に関する。

人と人とが対面して行う対人コミュニケーションにおいては、言語情報が交換されるだけでなく、意識的あるいは無意識的に非言語情報も交換されている。このような非言語情報のひとつとして対人距離があり、E.T.Hallによれば、対人距離は密接距離、個人距離、社会・用談距離および公衆距離の４つに分けられ、さらにそれぞれの距離は近接相と遠方相の２つに分けられ、これらの距離が相手との親密さに応じて使い分けられるとされている（例えば、非特許文献１参照）。

一方、椙山女学園の山根一郎によれば、対人距離のような物理的な距離に加えて、親密さのような心理的な距離が存在し、この心理的距離は能動表象、能動表出、受動表象および受動表出の４つの要素からなるとされている（例えば、非特許文献２参照）。

図１６に、山根一郎により提案されている心理的距離の概念図を示す。図１６中の矢印２０３は、心理的距離を模式的に示すものである。能動表象は自分２０１の心の中の相手２０２への心理的距離、能動表出は自分２０１が相手２０２に現実に伝える心理的距離、受動表出は相手２０２が自分２０１に現実に伝えてくる心理的距離、受動表象は相手２０２の心の中の自分２０１への心理的距離である。能動表出や受動表出により、対人距離のような非言語コミュニケーションが行われると考えられている。心理的距離は、例えば、矢印２０３に示すように、近づいたり遠ざかったり、対人距離の変化で調整可能である。

一方、通信手段を介したコミュニケーションにおいて対人距離の調整を実現しようとしたものとして、音声再生方式がある（例えば、特許文献１および非特許文献３参照）。この音声再生方式では近距離感を実現するために、音量を増加するのではなく、周波数信号処理により、ささやき声や低い声を生成している。

Miles Patterson，「非言語コミュニケーションの基礎理論」，誠信書房，１９９５年，Ｐ．１９０−１９１ 山根一郎，「対人心理的距離のモデル化」，椙山女学園大学研究論集，２６号，社会科学編，１９９５年 印牧直文他，「在席型通信会議システムにおけるマルチメディア化とコミュニケーション空間」，電子情報通信学会春季全国大会，１９９１年 特開平３−１１４０００号公報

ところで、他者とのコミュニケーションを行うための通信手段として近年広く普及している電話やＴＶ(Television)電話などでは、音質や画質の向上さらには視線一致などが注目されているものの、心理的距離感については全く省みられてはいない。したがって、従来のメディアを介したコミュケーションにおいては、心理的距離を調節することができない。

図１７に、通信手段を介したコミュニケーションにおける心理的距離の概念図を示す。図１７中の矢印２０４は心理的距離を模式的に示すものである。通信手段を介したコミュニケーションにおいては、心理的距離が調節できないために、矢印２０４に示すように、ユーザは常に一定の心理的距離でのコミュニケーションを強いられることとなる。

従って、親しい人や好きな人と近い心理的距離でコミュニケーションすることも、親しくない人や嫌いな人と遠い心理的距離でコミュニケーションすることもできない。特に、人と携帯電話との心理的距離は近いと言われており、親しくない人や嫌いな人とのコミュニケーションでは大きなストレスを抱えることになる。

また、通信手段を介して他者とコミュニケーションする際のユーザのストレスを減らすためには、物理的な対人距離の実現ばかりではなく、音声にこめられた感情など心理的距離の影響を考慮する必要がある。

したがって、この発明の目的は、通信手段を介してユーザが他者とコミュニケーションする場合に、ユーザが感じるストレスを減らすことができる情報変換装置及び情報変換方法、並びに通信装置及び通信方法を提供することにある。

上述の課題を解決するために、第１の発明は、ユーザと相手との距離感を示す距離感情報を入力する入力手段と、
入力された距離感情報に応じて、人物を含む映像に関する映像データおよび音声データを変換して出力する変換手段とを備え、
変換手段は、
距離感情報が距離感をより近くすることを示す情報である場合には、人物の瞳孔が大きくなるように映像データを変換するとともに、音声データの音源位置がユーザの側方に定位するように、３次元音響処理により音声データを変換し、
距離感情報が距離感をより遠くすることを示す情報である場合には、人物の瞳孔が小さくなるように映像データを変換するとともに、音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により音声データを変換する情報変換装置である。

第２の発明は、ユーザと相手との距離感を示す距離感情報が入力され、入力された距離感情報に応じて、人物を含む映像に関する映像データおよび音声データを変換して出力し、
距離感情報が距離感をより近くすることを示す情報である場合には、人物の瞳孔が大きくなるように映像データを変換するとともに、音声データの音源位置がユーザの側方に定位するように、３次元音響処理により音声データを変換し、
距離感情報が距離感をより遠くすることを示す情報である場合には、人物の瞳孔が小さくなるように映像データを変換するとともに、音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により音声データを変換する情報変換装置における情報変換方法である。

第３の発明は、人物を含む映像に関する映像データおよび音声データを受信する受信手段と、
ユーザと相手との距離感を示す距離感情報を入力する入力手段と、
受信した映像データおよび音声データを、入力された距離感情報に応じて変換して出力する変換手段とを備え、
変換手段は、
距離感情報が距離感をより近くすることを示す情報である場合には、人物の瞳孔が大きくなるように映像データを変換するとともに、音声データの音源位置がユーザの側方に定位するように、３次元音響処理により音声データを変換し、
距離感情報が距離感をより遠くすることを示す情報である場合には、人物の瞳孔が小さくなるように映像データを変換するとともに、音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により音声データを変換する通信装置である。

第４の発明は、人物を含む映像に関する映像データおよび音声データを受信し、受信した映像データおよび音声データを、ユーザと相手との距離感を示す距離感情報に応じて変換して出力し、
距離感情報が距離感をより近くすることを示す情報である場合には、人物の瞳孔が大きくなるように映像データを変換するとともに、音声データの音源位置がユーザの側方に定位するように、３次元音響処理により音声データを変換し、
距離感情報が距離感をより遠くすることを示す情報である場合には、人物の瞳孔が小さくなるように映像データを変換するとともに、音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により音声データを変換する通信装置における通信方法である。

この発明によれば、入力された心理的距離感情報に応じて知覚データを変換して出力するので、ユーザが所望する心理的距離となるように、知覚データを変換することができる。

以上説明したように、この発明によれば、入力手段により入力された心理的距離感情報に応じて知覚データを変換して出力するので、通信手段を介して他者とコミュニケーションをとる場合に、他者との心理的距離をユーザが調整することができる。したがって、通信手段を介してユーザが他者とコミュニケーションする場合に、ユーザが感じるストレスを減らすことができる。

この発明の実施形態について以下の順序で説明する。
（１）第１の実施形態
（１−１）第１の実施形態の概要
（１−２）第１の実施形態による通信装置の構成
（１−３）第１の実施形態による距離感表現部の構成
（１−４）第１の実施形態による通信装置の動作
（１−５）第１の実施形態の変形例

（２）第２の実施形態
（２−１）第２の実施形態による再生装置の構成
（２−２）第２の実施形態の変形例

（３）第３の実施形態
（３−１）第３の実施形態の概要
（３−２）第３の実施形態による映像処理装置の構成
（３−３）第３の実施形態による距離感表現部
（３−４）第３の実施形態による映像処理装置の動作
（３−５）第３の実施形態の変形例

（４）第４の実施形態
（４−１）第４の実施形態による通信装置の構成
（４−２）第４の実施形態の変形例

（１）第１の実施形態
（１−１）第１の実施形態の概要
図１は、この発明の第１の実施形態の概要を説明するための概略図である。図１中の矢印６および矢印７は、通話の相手４とユーザ３との心理的距離を模式的に表すものである。

通信装置１は、例えば携帯電話機であって、ユーザ３の能動表出を送信する部分と、通話の相手の受動表出を受信する部分とに、心理的距離感を変更するための距離感フィルタ５を備える。

この距離感フィルタ５は、ユーザ３により入力される距離感情報に応じて、知覚情報である音声情報を変換することにより、ユーザ３と通話の相手４との心理的距離感を変更する。通信装置２は、例えば携帯電話機であって、上述の距離感フィルタ５が設けられていない従来の通信装置である。

通信装置１は、通信装置２から受信した通話の相手４の音声情報を、ユーザ３により入力される距離感情報に応じて距離感フィルタ５により変換して出力する。通話の相手４がユーザ３と親しい相手である場合には、例えば、矢印６に示すように、通話の相手４とユーザ３との心理的距離がより近くなるように、通信装置２から受信した通話の相手４の音声情報を距離感フィルタ５により変換して出力する。一方、通話の相手４がユーザ３の知らない相手である場合には、例えば、矢印７に示すように、通話の相手４とユーザ３との心理的距離感がより遠くなるように、通信装置２から受信した通話の相手４の音声情報を距離感フィルタ５により変換して出力する。

また、通信装置１は、ユーザ３の音声情報を、ユーザ３により入力される距離感情報に応じて距離感フィルタ５により変換して、通話の相手４の通信装置２に送信する。通話の相手４がユーザ３と親しい相手である場合には、例えば、矢印６に示すように、通話の相手４とユーザ３との心理的距離がより近くなるように、ユーザ３の音声情報を距離感フィルタ５により変換して出力する。一方、通話の相手４がユーザ３の知らない相手である場合には、例えば、矢印７に示すように、通話の相手４とユーザ３との心理的距離感がより遠くなるように、ユーザ３の音声情報を距離感フィルタ５により変換して通信装置２に送信する。

このように、この第１の実施形態による通信装置１では、ユーザ３の音声情報および通話の相手４の音声情報を、ユーザにより入力される距離感情報に応じて距離感フィルタ５により変換することにより、ユーザ３は通話の相手４との心理的距離を所望の距離に調整することができる。

（１−２）第１の実施形態による通信装置の構成
図２は、この発明の第１の実施形態による通信装置１の一構成例を示すブロック図である。この通信装置１は、情報入力部１１、音声入力部１２、通信部１３、距離感表現部１４および音声出力部１５を備える。なお、メニューなどの各種情報を表示するための表示部を通信装置１にさらに備えるようにしてもよい。

情報入力部１１は、ユーザが距離感情報を入力するためのものであり、例えばボタン、キーまたはジョグダイヤルなどを備える入力装置である。情報入力部１１により入力された距離感情報は、距離感表現部１４に供給される。なお、通信装置１が表示部をさらに備える場合には、表示部に表示される情報に従ってユーザが距離感情報の入力を行えるようにしてもよい。

距離感情報とは、通信手段などを介したユーザと相手との距離感を変更するための情報である。ここで、距離感は、物理的距離感および／または心理的距離感である。この距離感情報は、例えば、数値により表すことができる。例を挙げると、通信手段などを介したユーザと相手との距離感をより近くする場合には、数値「１」とすることででき、通信手段などを介したユーザと相手との距離感を普通にする場合には、数値「０」とすることができ、通信手段などを介したユーザと相手との距離感をより遠くする場合には、数値「−１」とすることができる。なお、距離感情報は数値に限定されるものではなく、文字、記号、実際の距離などを用いてもよい。

音声入力部１２は、音声を入力するためのものであり、例えば、マイクロフォン装置などの音声入力装置である。音声入力部１２に入力されたユーザの音声は、音声情報として通信部１３に供給される。

通信部１３は、音声情報の送受信を行う。通信部１３は、例えば、音声入力部１２から供給された音声情報を符号化して送信する。また、通信部１３は、例えば、受信した相手の音声情報を復号化して距離感表現部１４に供給する。

距離感表現部１４は、情報入力部１１から供給される距離感情報に応じて、通信部１３から供給される相手の音声情報を変換して音声出力部１５に供給する。すなわち、距離感表現部１４は、情報入力部１１から供給される距離感情報に応じて、通信手段などを介したユーザと相手との距離感、すなわち心理的距離感および／または物理的距離感を変更する。

音声出力部１５は、距離感表現部１４から供給された相手の音声情報を音声として出力する音声出力装置であって、この音声出力装置は、複数のスピーカ装置、例えば２つのスピーカ装置を備える。また、音声出力部１５は、ヘッドホン装置を接続するための接続手段をさらに備え、この接続手段に対して距離感表現部１４により変換された相手の音声情報を供給する。この場合、距離感表現部１４は、例えば、ヘッドホン装置から出力される相手の音声などが、情報入力部１１から供給される距離感情報に応じた位置に音源定位されるように、相手の音声情報を変換などする。

（１−３）第１の実施形態による距離感表現部の構成
距離感表現部１４は、例えば、情報入力部１１から供給される距離感情報に応じて、通信手段などを介したユーザと相手との心理的距離感を変更する心理的距離感表現部と、情報入力部１１から供給される距離感情報に応じて、通信手段などを介したユーザと相手との物理的距離感を変更する物理的距離感表現部とを備える。以下、心理的距離感表現部と物理的距離感表現部について説明する。

（ａ）心理的距離感表現部
心理的距離感表現部は、例えば、通信部１３から供給される相手の音声情報に含まれる感情情報を、情報入力部１１から供給される距離感情報に応じて制御する。感情情報とは、声の抑揚、声のピッチ、声の大きさ、または話す速さなどの情報である。感情情報が強い場合には、声の抑揚が大きくなる、声のピッチが高くなる、声が大きくなる、話す速度が速くなると考えられる。一方、感情情報が弱い場合には、声の抑揚が小さくなる、声のピッチが低くなる、声が小さくなる、話す速度が遅くなると考えられる。喜びなどポジティブな感情や怒りなどネガティブな感情に関わらず、強い感情は近い心理的距離感を感じさせ、弱い感情は遠い心理的距離感を感じさせる。

したがって、音声情報に含まれる感情情報をより多くすれば、通信手段などを介したユーザと相手との距離感をより近くする、例えば、好きな相手や親しい相手との距離感をより近くすることができる。それとは反対に、音声情報に含まれる感情情報をより少なくすれば、通信手段などを介したユーザと相手との距離感をより遠くする、例えば、嫌いな相手や面識のない相手との心理的距離感をより遠くすることができる。

通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から供給された場合には、距離感表現部１４は、例えば、音声情報に含まれる感情情報がより多くなるように、通信部１３から供給される音声情報を変換して音声出力部１５に供給する。

通信手段などを介したユーザと相手との距離感を普通にするための距離感情報（例えば数値「０」）が情報入力部１１から供給された場合には、距離感表現部１４は、例えば、通信部１３から供給される音声情報に含まれる感情情報が変わらないように、通信部１３から供給される音声情報を変換して音声出力部１５に供給する。

通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、距離感表現部１４は、例えば、音声情報に含まれる感情情報がより少なくなるように、通信部１３から供給される音声情報を変換して音声出力部１５に供給する。

心理的距離感表現部は、例えば、音声情報の抑揚を落とす音声変換装置を備え、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、音声情報の抑揚が小さくなるように、通信部１３から供給される音声情報を変換して音声出力部１５に供給する。

音声変換装置は、例えば、ホルマント分析／合成によるボコーダである。音声変換装置としてボコーダを用いるときには、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、ボコーダにおいて合成フィルタを駆動するパルスのピッチが入力音声のピッチに関わらず一定となるようにするとよい。

（ｂ）物理的距離感表現部
物理的距離感表現部は、音声出力部１５またはヘッドホン装置から出力される相手の音声などが、情報入力部１１から供給される距離感情報に応じた位置に音源定位されるように、感情情報が制御された相手の音声情報を変換する。

通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から供給された場合には、距離感表現部１４は、例えば、音声出力部１５またはヘッドホン装置から出力される相手の音声などの音源位置がユーザの側方に定位されるように、感情情報が制御された相手の音声情報を変換する。

通信手段などを介したユーザと相手との距離感を普通にするための距離感情報（例えば数値「０」）が情報入力部１１から供給された場合には、距離感表現部１４は、例えば、音声出力部１５またはヘッドホン装置から出力される相手の音声などの音源位置がユーザの正面に定位されるように、感情情報が制御された相手の音声情報を変換する。

通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、距離感表現部１４は、例えば、音声出力部１５またはヘッドホン装置から出力される相手の音声などの音源位置がユーザの斜め前方に定位されるように、感情情報が制御された相手の音声情報を変換する。

物理的距離感表現部は、例えば、ＨＲＴＦ(Head-Related Transfer Function：頭部伝達関数)による３次元音響を用いた音源定位により物理的距離感を変更する。ＨＲＴＦは、音源から頭部耳道入り口までの音響伝達関数であり、これにより頭部耳道入り口での音源の音の特性が変化し、人はこれを手がかりに音源定位を行っている。したがって、頭部耳道入り口での音をＨＲＴＦを考慮して制御すれば、３次元音響による音源定位を実現できる。

図３は、３次元音響による音源定位位置の一例を示す。音源位置を示す物理的距離感のパラメータは、位置ベクトルＰＶと方向ベクトルＤＶとの組により表される。

通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から供給された場合には、物理的距離感表現部は、例えば、物理的距離感のパラメータ((-0.5,0.0,0.0),(0.0,1.0,0.0))で表される位置に音源が定位されるように、心理的距離感表現部から供給される音声情報を変換する。この物理的距離感のパラメータで示される位置は、非言語コミュニケーションの対人距離において密接距離の遠方相の０．５ｍのところにいて、座席行動において親密さの高い横並びにいることに相当する。

通信手段などを介したユーザと相手との距離感を普通にするための距離感情報（例えば数値「０」）が情報入力部１１から供給された場合には、物理的距離感表現部は、例えば、物理的距離感のパラメータ((0.0,1.0,0.0),(0.0,-1.0,0.0))で表される位置に音源が定位されるように、心理的距離感表現部から供給される音声情報を変換する。これは、対人距離において個人距離の遠方相の１ｍのところにいて、非公式的なコミュニケーションの距離にいることに相当する。

通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、物理的距離感表現部は、例えば、物理的距離感のパラメータ((-1.2,1.2,0.0),(0.7,-0.7,0.0))で表される位置に音源が定位されるように、心理的距離感表現部から供給される音声情報を変換する。これは、対人距離において社会・用談距離の近接相の１．２ｍのところ、複雑な内容の公式的コミュニケーションの距離にいて、しかも視線が直接合わないような心理的圧力の少ない斜め方向にいることに相当する。

図４は、物理的距離感表現部１１２の一構成例を示すブロック図である。この物理的距離感表現部１１２は、位置ベクトル取得部１０１および音源定位部１０２を備える。位置ベクトル取得部１０１は、情報入力部１１から供給される距離感情報に応じた位置ベクトルを取得し、この取得された位置ベクトルに基づき音源定位部１０２を制御する。音源定位部１０２は、位置ベクトル取得部１０１の制御に基づき、心理的距離感表現部から供給される音声情報を変換して音声出力部１５に供給する。

図５は、距離感表現部１４の一構成例を示すブロック図である。通信部１３から供給される音声信号は、心理的距離感表現部１１１で音声信号に含まれる感情情報が制御され、左チャンネルの音声信号と右チャンネルの音声信号とに分けられて、ゲイン１２２およびゲイン１２３に供給される。ゲイン１２２およびゲイン１２３は、位置ベクトル取得部１０１の制御に基づき、心理的距離感表現部１１１から供給される音声情報のゲインを調整して、リバーブ回路１２１に供給する。リバーブ回路１２１は、位置ベクトル取得部１０１の制御に基づき、ゲイン１２２およびゲイン１２３から供給される音声情報に音響を付加して音声出力部１５に供給する。例えば、リバーブ回路１２１は以下のように制御される。すなわち、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から位置ベクトル取得部１０１に供給された場合には、リバーブ回路１２１は、位置ベクトル取得部１０１の制御に基づき、ゲイン１２２およびゲイン１２３から出力された音声信号に残響を所定の量より多く付加する。一方、通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から位置ベクトル取得部１０１に供給された場合には、リバーブ回路１２１は、位置ベクトル取得部１０１の制御に基づき、ゲイン１２２およびゲイン１２３から出力された音声信号に残響を所定の量より少なく付加する。

図６は、距離感表現部１４の他の構成例を示すブロック図である。ここでは、例として、ヘッドホン装置から相手の音声などが出力される場合について説明する。通信部１３から供給される音声信号は、心理的距離感表現部１１１で音声信号に含まれる感情情報が制御され、左チャンネルの音声信号と右チャンネルの音声信号とに分けられて、音源定位部１０２に供給される。このデジタル処理回路である音源定位部１０２は、複数個のデジタルフィルタ１１３ＬＬ，１１３ＬＲ，１１３ＲＬ，１１３ＲＲと、２個の加算器１１４Ｌ，１１４Ｒで構成されて、通話の相手がユーザの周辺に実際にいて会話している場合に得られる音場と同様の音場が、ヘッドホン装置で得られるように変換する処理を行う回路である。

音源定位部１０２では、左チャンネルの音声信号が、第１のデジタルフィルタ１１３ＬＬと第２のデジタルフィルタ１１３ＬＲに供給され、右チャンネルの音声信号が、第３のデジタルフィルタ１１３ＲＬと第４のデジタルフィルタ１１３ＲＲに供給される。

なお、位置ベクトル取得部１０１が、取得された位置ベクトルに応じてデジタルフィルタ１１３ＬＬ，１１３ＬＲ，１１３ＲＬ，１１３ＲＲを制御する。具体的には、通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から供給された場合には、位置ベクトル取得部１０１は、例えば、位置ベクトル(-0.5,0.0,0.0)を取得し、物理的距離感のパラメータ((-0.5,0.0,0.0),(0.0,1.0,0.0))で表される位置に音源が定位されるように、デジタルフィルタ１１３ＬＬ，１１３ＬＲ，１１３ＲＬ，１１３ＲＲを制御する。

通信手段などを介したユーザと相手との距離感を普通にするための距離感情報（例えば数値「０」）が情報入力部１１から供給された場合には、位置ベクトル取得部１０１は、例えば、位置ベクトル(0.0,1.0,0.0)を取得し、物理的距離感のパラメータ((0.0,1.0,0.0),(0.0,-1.0,0.0))で表される位置に音源が定位されるように、デジタルフィルタ１１３ＬＬ，１１３ＬＲ，１１３ＲＬ，１１３ＲＲを制御する。

通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、位置ベクトル取得部１０１は、例えば、位置ベクトル(-1.2,1.2,0.0)を取得し、物理的距離感のパラメータ((-1.2,1.2,0.0),(0.7,-0.7,0.0))で表される位置に音源が定位されるように、デジタルフィルタ１１３ＬＬ，１１３ＬＲ，１１３ＲＬ，１１３ＲＲを制御する。

このような構成のデジタルフィルタで構成される第１のデジタルフィルタ１１３ＬＬの出力と、第３のデジタルフィルタ１１３ＲＬの出力とを、加算器１１４Ｌに供給して加算し、左チャンネル用の変換出力を得る。また、第２のデジタルフィルタ１１３ＬＲの出力と、第４のデジタルフィルタ１１３ＲＲの出力とを、加算器１１４Ｒに供給して加算し、右チャンネル用の変換出力を得る。

そして、加算器１１４Ｌで加算して得た左チャンネルの出力を、デジタル／アナログ変換器１１５Ｌに供給して、アナログオーディオ信号に変換し、その変換されたアナログオーディオ信号を、ヘッドホン駆動用の増幅回路１１６Ｌにより増幅した後、ヘッドホン装置１１７の左耳用のスピーカユニット１１７Ｌに供給する。また、加算器１１４Ｒで加算して得た右チャンネルの出力を、デジタル／アナログ変換器１１５Ｒに供給して、アナログオーディオ信号に変換し、その変換されたアナログオーディオ信号を、ヘッドホン駆動用の増幅回路１１６Ｒにより増幅した後、ヘッドホン装置１１７の右耳用のスピーカユニット１１７Ｒに供給する。

なお、音源定位部１０２と、デジタル／アナログ変換器１１５Ｌおよびデジタル／アナログ変換器１１５Ｒとの間に、リバーブ回路をさらに設けるようにしてもよい。このリバーブ回路は、例えば、位置ベクトル取得部１０１により制御されて、ユーザからの音源の距離に応じて付加される残響量が調整される。

例えば、リバーブ回路は以下のように制御される。すなわち、ユーザから音源の距離をより遠くする場合には、すなわち、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から位置ベクトル取得部１０１に供給された場合には、リバーブ回路は、音源定位部１０２から出力された音声信号に残響を所定の量より多く付加してデジタル／アナログ変換器１１５Ｌおよびデジタル／アナログ変換器１１５Ｒに供給する。

一方、ユーザから音源の距離をより近くする場合には、すなわち、通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から位置ベクトル取得部１０１に供給された場合には、リバーブ回路は、音源定位部１０２から出力された音声信号に残響を所定の量より少なく付加してデジタル／アナログ変換器１１５Ｌおよびデジタル／アナログ変換器１１５Ｒに供給する。

（１−４）第１の実施形態による通信装置の動作
図７は、この発明の第１の実施形態による通信装置１の動作の一例を説明するためのフローチャートである。

まず、ステップＳ１において、通信部１３が音声情報を受信して取得し、音声情報の受信に成功した場合には処理はステップＳ３に移行し、音声情報の取得に成功しなかった場合には、ステップＳ２において、処理はステップＳ１に戻る。

次に、ステップＳ３において、情報入力部１１により距離感情報が入力されて、距離感表現部１４により距離感情報が取得される。

次に、ステップＳ４において、距離感表現部１４は、ステップＳ３にて取得した距離感情報が、通信手段などを介したユーザと相手との距離感とを遠くするための距離感情報（例えば数値「−１」）であるか否かを判断する。

ステップＳ３にて取得された距離感情報が、通信手段などを介したユーザと相手との距離感とを遠くするための距離感情報（例えば数値「−１」）であると判断した場合には、ステップＳ５において、距離感表現部１４は、ステップＳ２にて取得された音声情報に対して、例えばボコーダの合成フィルタ処理をする。これにより、ステップＳ２にて取得された音声情報に含まれる抑揚が落とされる。そして、処理はステップＳ６に移行する。一方、ステップＳ３にて取得された距離感情報が、通信手段などを介したユーザと相手との距離感とを遠くするための距離感情報（例えば数値「−１」）でないと判断した場合には、処理はステップＳ６に移行する。

次に、ステップＳ６において、距離感表現部１４は、ステップＳ３にて取得された距離感情報に応じた位置ベクトルを取得する。そして、ステップＳ７において、距離感表現部１４は、ステップＳ６にて取得された位置ベクトルに応じた位置に相手の音声などが音源定位されるように、音声情報を変換して音声出力部１５に供給する。

具体的には、ステップＳ３にて取得された距離感情報が、通信手段などを介したユーザと相手との距離感とを遠くするための距離感情報（例えば数値「−１」）である場合には、距離感表現部１４は、例えば、ステップＳ６にて算出された位置ベクトルに応じて、ユーザの斜め前方に音源が定位されるように、音声情報に対して、例えば３次元音響処理を施して音声出力部１５に供給する。

ステップＳ３にて取得された距離感情報が、通信手段などを介したユーザと相手との距離感とを普通にするための距離感情報（例えば数値「０」）である場合には、距離感表現部１４は、例えば、ステップＳ６にて取得された位置ベクトルに応じて、ユーザの前方に音源が定位されるように、音声情報に対して、例えば３次元音響処理を施して音声出力部１５に供給する。

ステップＳ３にて取得された距離感情報が、通信手段などを介したユーザと相手との距離感とを近くするための距離感情報（例えば数値「１」）である場合には、距離感表現部１４は、例えば、ステップＳ６にて取得された位置ベクトルに応じて、ユーザの側方に音源が定位されるように、音声情報に対して、例えば３次元音響処理を施して音声出力部１５に供給する。

その後、ステップＳ８において、通話を終了するための操作がなされた場合には処理は終了となり、通話を終了するための操作がなされずに通話が継続された場合には処理はステップＳ１に戻る。

この発明の第１の実施形態では以下の効果を得ることができる。
従来では、ささやき声のような周波数信号処理のみで近距離感を表すので、近距離感の表現が不十分であり、腹話術効果のようなクロス・モーダルな効果によって、視覚像の位置に音源位置が引っ張られてしまう。これに対して、この第１の実施形態では、３次元音響処理により実際に近距離に音源定位するので、近距離感を十分に表現できる。

また、ユーザの入力する距離感情報に応じて、情報の効果的な提示を行うことができ、感情豊かで、かつストレスのない情報提示を実現できる。すなわち、心理的距離感を変えるようなフィルタ処理を通信装置などに付加するので、親しい人や好きな人とは近い心理的距離感でコミュニケーションを行い、知らない人や嫌いな人とは遠い心理的距離感でのコミュニケーションを実現することができる。したがって、親しい人や好きな人とのコミュニケーションはより楽しくなり、知らない人や嫌いな人とのコミュニケーションではストレスがたまりにくくなる。

（１−５）第１の実施形態の変形例
次に、第１の実施形態の変形例について説明する。上述の第１の実施形態では、ユーザが情報入力部１１により距離感情報を入力する場合を例として説明したが、相手の電話番号と距離感情報とを予め関連付けてアドレス帳に登録しておき、電話をかけるときにアドレス帳から相手の電話番号とともに距離感情報を読み出して、距離感表現部１４に供給するようにしてもよい。

この場合、通信装置１がメモリをさらに備え、このメモリに対して相手の氏名または名称と相手の通信装置の電話番号と相手の距離感情報とが関連付けられたアドレス帳を記憶しておくようにする。このメモリとしては、例えばＥＥＰＲＯＭ(Electrical Erasable Programmable ＲＯＭ)などの書換可能なＲＯＭを用いることができる。

相手に電話をかける場合には、例えば、表示部などにアドレス帳に登録された氏名または名称を一覧表示する。そして、この一覧から所望の氏名または名称が選択されると、選択された氏名または名称に関連付けられた電話番号と距離感情報とがアドレス帳から読み出され、電話番号が通信部１３に供給され、距離感情報が距離感表現部１４に供給される。通信部１３は、アドレス帳から読み出された電話番号を有する相手の通信装置に電話をかけ、距離感表現部１４は、アドレス帳から読み出された距離感情報に応じて、通信部１３から供給される相手の音声情報を変換して音声出力部１５に供給する。

また、音源位置に仮想的に定位された相手の、ユーザに対する顔の向き（口の向き）を考慮して、音源位置から発せされる音声を変化させるようにしてもよい。この相手の顔の向きに応じた音声の変化は、例えば、音声情報をイコライジング（周波数特性操作）することにより表すことができる。

相手の顔がユーザの方向を向いていれば相手の音声は明瞭になり、相手の顔がユーザの方向とは反対方向を向いていれば相手の音声は不明瞭になる。また、de Gar Kulkaの一般原則によれば、２ｋＨｚ〜６ｋＨｚの周波数帯域が明瞭度に関係している。したがって、ユーザに対する相手の顔の向きに応じて、音声情報の２ｋＨｚ〜６ｋＨｚの帯域を例えばバンドパスフィルタにより減衰させることにより、ユーザに対する相手の顔の向きに応じた相手の音声の変化を表すことができる。例えば、相手の顔がユーザの方向から逸れるに従って、音声情報の２ｋＨｚ〜６ｋＨｚの帯域を例えばバンドパスフィルタにより徐々に減衰させるようにする。

例えば、ユーザの正面の位置に音源を定位した場合には、バンドパスフィルタを用いて減衰させる量Ｓ(0.0〜1.0)は、物理的距離感のパラメータの方向ベクトルＤＶとベクトル(0.0,1.0,0.0)との内積に比例した以下の値とすることができる。
S＝(DV・(0.0,1.0,0.0)+1.0)/2.0
（「・」はベクトルの内積）

また、上述の第１の実施形態では、距離感情報が情報入力部１１により入力されて、距離感表現部１４に供給される場合を例として示したが、距離感情報が通信部１３により受信されて、距離感表現部１４に供給されるようにしてもよい。この場合、通信装置１に備えられた各部は、例えば以下のように動作する。

通信部１３が、相手の距離感情報および音声情報を受信し、この受信した相手の距離感情報および音声情報を受信し復号化して距離感表現部１４に供給する。そして、距離感表現部１４が、情報入力部１１から供給される距離感情報に基づき、通信部１３から供給される音声情報を変換して音声出力部１５に供給する。また、通信部１３は、情報入力部１１から供給された距離感情報と、音声入力部１２から供給された音声情報とを符号化して送信する。

また、ユーザと相手の両方の距離感情報を用いて距離感操作をすることも可能である。例えば、通信装置１がユーザの音声情報とともにユーザの距離感情報をさらに送信可能な構成である場合には、通信装置１が送信したユーザの距離感情報と、通信装置１が受信した相手の距離感情報との両方が、通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）であるときには、携帯電話などの通信装置１に備えられたバイブレータを振動させるようにしてもよい。

また、上述の第１の実施形態では、距離感表現部１４が心理的距離感表現部および物理的距離感表現部の両方を備える構成を例として説明したが、距離感表現部１４が心理的距離感表現部および物理的距離感表現部のいずれか一方のみを備える構成としてもよい。また、ユーザが、必要に応じて心理的距離感表現部および物理的距離感表現部のうちから、所望のものを選択できる構成としてもよい。この構成とする場合には、例えば、心理的距離感表現部および物理的距離感表現部のうちどちらを駆動させるかを情報入力部１１により選択できるようにすることができる。

また、上述の第１の実施形態では、ユーザの音声情報を変換せずに相手に送信する場合を例として説明したが、ユーザの音声情報を情報入力部１１から供給される距離感情報に応じて変換して送信するようにしてもよい。

図８は、ユーザの音声情報を距離感情報に応じて変換して送信する通信装置１ａの一構成例を示すブロック図である。この通信装置１ａは、情報入力部１１、音声入力部１２、通信部１３ａ、距離感表現部１４ａおよび音声出力部１５を備える。ここでは、上述の第１の実施形態と同様の部分には同一の符号を付して説明を省略する。

距離感表現部１４ａが、音声入力部１２から供給される音声情報を、情報入力部１１から供給される距離感情報に応じて変換して、通信部１３ａに供給する。例えば、距離感表現部１４ａは、音声入力部１２から供給された音声情報をＡ／Ｄ変換し、このＡ／Ｄ変換された音声情報に含まれる感情情報を、情報入力部１１から供給される距離感情報に応じて制御して通信部１３ａに供給する。通信部１３ａが、距離感表現部１４ａから供給された音声情報を符号化して送信する。これ以外のことは上述の第１の実施形態と同様であるので説明を省略する。

（２）第２の実施形態
次に、この発明の第２の実施形態について説明する。上述した第１の実施形態では、音声情報を送受信する通信装置に対してこの発明を適用した例について説明したが、この第２の実施形態では、データベースに格納されたコンテンツを読み出して再生する再生装置について説明する。

（２−１）第２の実施形態による再生装置の構成
図９は、この発明の第２の実施形態による再生装置２０の一構成例を示すブロック図である。再生装置２０と同様の機能は、例えば、パーソナルコンピュータなどのコンピュータ（電子計算機）でも実現可能である。ここでは、上述の第１の実施形態と同様の部分には同一の符号を付して説明を省略する。

通信部２１は、インターネットなどのネットワーク２２を介してデータベース２３に接続される。このネットワーク２２を介して通信部２１はデータベース２３と情報のやり取りをする。例えば、通信部２１は、データベースにコンテンツの送信を要求し、この要求に応じてデータベースから送信されるコンテンツを受信し、距離感表現部２１に供給する。

データベース２３にはコンテンツが格納されている。ここで、コンテンツは、例えばアーティストの音声メッセージなどの音声情報である。データベース２３は、例えば、再生装置２０からの要求に応じて、コンテンツを再生装置２０に送信する。

この第２の実施形態では以下の効果を得ることができる。
コンテンツが例えば好きなアーティストの音声メッセージである場合には、音声メッセージをユーザの近くの横並びに音源定位することによって、アーティストの音声メッセージを近い距離感で、親密に語りかけられているように聴くことができる。

（２−２）第２の実施形態の変形例
次に、第２の実施形態による再生装置２０の変形例について説明する。第２の実施形態による再生装置２０において、コンテンツを記憶する不揮発性メモリなどの記憶手段をさらに備え、この記憶手段から読み出されたコンテンツに対して、距離感表現部１４にて処理を施すようにしてもよい。

（３）第３の実施形態
次に、この発明の第３の実施形態について説明する。上述の第１の実施形態では音声情報を距離感情報に応じて変換する場合について説明したが、この第３の実施形態では映像情報を距離感情報に応じて変換する場合について説明する。

（３−１）第３の実施形態の概要
まず、この発明の第３の実施形態の概要について説明する。心理学では、人間の瞳孔の大きさと、相手に対して感じる魅力との間には関係があることが知られている。瞳孔は関心や興味により、直径で３０％、面積で７０％拡大する。人間は、相手の瞳孔が拡大すると、相手が自分に対して関心や興味を抱いていると無意識に判断してしまう。すなわち、相手の瞳孔が拡大すると、相手に対して感じる魅力が増大する。このように、相手の魅力が増大すれば、相手との距離感は近くなる。

この第３の実施形態は、映像として映し出される人物などの瞳孔部分の大きさを画像処理により変えることによって、ユーザと映像として映し出される人物などとの距離感を調整するものである。

（３−２）第３の実施形態による映像処理装置の構成
図１０は、この発明の第３の実施形態による映像処理装置３０の一構成例を示すブロック図である。この映像処理装置３０は、情報入力部１１、映像入力部３１、距離感表現部３２および映像出力部３３を備える。ここでは、上述の第１の実施形態と同様の部分には同一の符号を付して説明を省略する。

映像入力部３１は、外部から映像情報などを取得する。距離感表現部３２は、情報入力部１１から供給される距離感情報に応じて、映像入力部３１から供給された映像情報を変換して映像出力部３３に供給する。この映像入力部３１は、例えば、映像情報を記憶可能に構成されたフラッシュメモリまたは光ディスクなどから映像情報を読み出して取得する情報読みとり手段である。なお、映像入力部３１に代えて、映像情報を受信して距離感表現部３２に供給する通信部を備えるようにしてもよい。

距離感表現部３２は、情報入力部１１から供給される距離感情報に応じて、通信手段などを介したユーザと相手との距離感、すなわち、映像出力部３３にて映し出される人物とユーザとの距離感を変更する情報変換装置である。すなわち、距離感表現部３２は、情報入力部１１から供給される距離感情報に応じて、映像入力部３１から供給される映像情報を変換して映像出力部３３に供給する。

距離感表現部３２では、例えば、目の領域を抽出し、この目の領域から瞳孔領域を抽出し、この瞳孔領域を拡大または縮小して原画像に重ね合わせる。目の領域および瞳孔領域の抽出方法としては、従来公知の方法を用いることができ、例えば以下の方法を用いることができる。すなわち、映像情報の原画像を２値化し、得られた２値画像から目の領域を例えば楕円とのフィッティングにより抽出する。そして、抽出した目の領域から瞳孔領域を例えば黒い部分として色で抽出する。

映像出力部３３は、距離感表現部３２から供給される映像情報に基づき映像を表示する表示装置であり、この表示装置としては、例えばＣＲＴ(Cathode-Ray Tube)ディスプレイ、液晶ディスプレイまたはプラズマディスプレイを使用できる。なお、距離感情報については上述の第１の実施形態と同様であるので説明を省略する。

（３−３）第３の実施形態による距離感表現部
図１１Ａは瞳孔を拡大する前の人物像の一例を示し、図１１Ｂは瞳孔を拡大した後の人物像の一例を示す。図１２Ａは、瞳孔を縮小する前の人物像の一例を示し、図１２Ｂは、瞳孔を縮小した後の人物像の一例を示す。

距離感表現部３２は、例えば、情報入力部１１から供給される距離感情報に応じて、映像出力部３３に表示される人物などの瞳孔の大きさが変わるように、映像入力部３１から供給される映像情報を変換する。

具体的には、距離感表現部３２は、通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から供給された場合には、映像出力部３３に表示される人物などの瞳孔がより大きくなるように、映像入力部３１から供給される映像情報を変換する（図１１Ａおよび図１１Ｂ参照）。このように、瞳孔領域を拡大することにより、映像出力部３３に表示される人物などにユーザがより魅力を感じられるようにできる。したがって、ユーザと映像出力部３３に表示される人物などとの距離感をより近くすることができる。

それに対して、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、距離感表現部３２は、例えば、映像出力部３３に表示される人物などの瞳孔がより小さくなるように、映像入力部３１から供給される映像情報を変換する（図１２Ａおよび図１２Ｂ参照）。このように、瞳孔領域を縮小することにより、映像出力部３３に表示される人物などにユーザが魅力を感じられなくなるようにできる。したがって、ユーザと映像出力部３３に表示される人物などとの距離感をより遠くすることができる。

より具値的には、距離感表現部３２は、映像入力部３１から供給される映像情報を以下のように変換する。通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部１１から供給された場合には、距離感表現部３２は、例えば、映像出力部３３に表示される人物などの瞳孔が元の瞳孔の大きさの１３０％に拡大されるように、映像入力部３１から供給される映像情報を変換して映像出力部３３に出力する。

通信手段などを介したユーザと相手との距離感を普通にするための距離感情報（例えば数値「０」）が情報入力部１１から供給された場合には、距離感表現部３２は、例えば、映像出力部３３に表示される人物などの瞳孔が拡大・縮小されず原画像のままとなるように、映像入力部３１から供給された映像情報を変換して映像出力部３３に供給する。

通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部１１から供給された場合には、距離感表現部３２は、例えば、映像出力部３３に表示される人物などの瞳孔が元の瞳孔の大きさの７０％に縮小されるように、映像入力部３１から供給される映像情報を変換して映像出力部３３に出力する。

（３−４）第３の実施形態による映像処理装置の動作
図１３は、この発明の第３の実施形態による映像処理装置３０の動作の一例を説明するためのフローチャートである。

まず、ステップＳ１１において、映像入力部３１が映像情報の取得を行い、映像情報の取得に成功した場合には処理はステップＳ１３に移行し、映像情報の取得に成功しなかった場合には、ステップＳ１２において、処理はステップＳ１１に戻る。

次に、ステップＳ１３において、距離感表現部３２が、映像入力部３１にて取得された映像情報の原画像を２値化する。そして、ステップＳ１４において、距離感表現部３２が、２値化画像から目の領域を、例えば楕円とフィッティングすることにより抽出し、抽出に成功した場合には処理はステップＳ１６に移行し、抽出に成功しなかった場合には、ステップＳ１５において、処理はステップ１１に戻る。

次に、ステップＳ１６において、距離感表現部３２が、ステップＳ１４にて抽出された目の領域から瞳孔領域を例えば黒い部分として色で抽出し、瞳孔領域の抽出に成功した場合には、処理はステップＳ１８に移行し、瞳孔領域の抽出に成功しなかった場合には、ステップＳ１７において処理はステップＳ１１に戻る。

次に、ステップＳ１８において、情報入力部１１により距離感情報が入力され、距離感情報部３２により距離感情報が取得される。なお、映像処理装置３０にメモリをさらに備え、このメモリに情報入力部１１により入力された距離感情報を予め記憶しておき、ステップＳ１８において、予め記憶された距離感情報をメモリから読み出すようにしてもよい。

次に、ステップＳ１９において、距離感表現部３２が、ステップＳ１８にて取得された距離感情報に応じて、ステップＳ１６にて抽出された瞳孔領域を拡大または縮小する。距離感表現部３２は、例えば、以下のように距離感情報に応じて瞳孔領域を拡大または縮小する。

ステップＳ１８にて取得された距離感情報がユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）である場合には、距離感表現部３２が、ステップＳ１６にて抽出された瞳孔領域を拡大する。

ステップＳ１８にて取得された距離感情報がユーザと相手との距離感を普通にするための距離感情報（例えば数値「０」）である場合には、距離感表現部３２が、ステップＳ１６にて抽出された瞳孔領域を拡大または縮小を行わずに原画像のままとする。

ステップＳ１８にて取得された距離感情報がユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）である場合には、距離感表現部３２は、ステップＳ１６にて抽出された瞳孔領域を縮小する。

次に、ステップＳ２０において、距離感表現部３２が、ステップ１９にて縮小または拡大した瞳孔領域を原画像の瞳孔領域に重ね合わせる。次に、ステップＳ２１において、映像の取得を終了するための操作がなされた場合には処理は終了となり、映像の取得を終了するための操作がなされずに映像の取得が継続された場合には処理はステップＳ１１に戻る。

（３−５）第３の実施形態の変形例
次に第３の実施形態の変形例について説明する。上述の第３の実施形態では、映像情報を入力する場合を例として示したが、映像情報を出力するようにしてもよい。この場合には、例えば、映像処理装置３０が、映像入力部３１に代えて、映像情報を入出力する入出力部を備えるとともに、映像を入力するための映像入力部をさらに備える。入出力部は外部から入力された映像情報を距離感表現部３２に供給する。また、入出力部は、映像入力部から供給された映像情報を外部に出力する。これ以外のことは上述の第３の実施形態と同様であるので説明を省略する。

また、外部に映像情報を出力する構成とする場合には、情報入力部１１により入力された距離感情報に応じて、外部に出力する映像情報を変換して出力するようにしてもよい。この場合には、例えば、映像処理装置３０が、映像入力部３１に代えて、映像情報を入出力する入出力部を備えるとともに、映像を入力するための映像入力部をさらに備える。距離感表現部３２は、情報入力部１１により入力された距離感情報に応じて、映像入力部から供給される映像情報を変換して入出力部に供給する。入出力部は、距離表現部３２から供給された映像情報を外部に出力する。また、入出力部は外部から入力された映像情報を距離感表現部３２に供給する。これ以外のことは上述の第３の実施形態と同様であるので説明を省略する。

なお、上述の映像入力部としては、例えば、例えばＣＣＤ(Charge Coupled Device)またはＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサなどを備えたカメラ装置を使用できる。

（４）第４の実施形態
次に、この発明の第４の実施形態について説明する。上述の第１の実施形態では、音声情報のみを距離感情報に応じて変換して送信する場合について説明したが、この第４の実施形態は、音声情報および画像情報の両方を距離感情報に応じて変換して送信する場合について説明する。

（４−１）第４の実施形態による通信装置の構成
図１４は、この発明の第４の実施形態による通信装置４０の一構成例を示すブロック図である。この通信装置４０は、情報入力部１１、音声入力部１２、映像入力部４１、音声出力部１５、映像出力部３３、通信部４２および距離感表現部４３を備える。距離感表現部４３は、第１の距離感表現部４４および第２の距離感表現部４５を備える。ここでは、上述の第１および第２の実施形態と同様の部分には同一の符号を付して説明を省略する。

映像入力部４１は、ユーザなどの被写体を撮影し、映像情報を通信部４２に出力する撮影装置であり、例えばＣＣＤ(Charge Coupled Device)またはＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサなどを備えたカメラ装置である。

通信部４２は、音声情報および画像情報を受信して複合化して、音声情報を第１の表現部４４に供給し、映像情報を第２の表現部４５に供給する。また、通信部４２は、音声入力部１２から供給された音声情報および映像入力部４１から供給された画像情報を符号化して送信する。

第１の距離感表現部４４は、第１の実施形態による距離感表現部１４と同様であるので説明を省略する。第２の距離感表現部４５は、第３の実施形態による距離感表現部３２と同様であるので説明を省略する。

（４−２）第４の実施形態の変形例
上述の第１の実施形態では、音声入力部１２により入力された音声情報と、映像入力部４１により入力された映像情報とを変換せずに送信する場合を例として説明したが、音声入力部１２により入力された音声情報と、映像入力部４１により入力された映像情報とを、
情報入力部１１から供給される距離感情報に応じて変換して送信するようにしてもよい。

図１５は、音声情報および映像情報を距離感情報に応じて変換して送信する通信装置４０ａの一構成例を示すブロック図である。距離感表現部４３ａは、第１の距離感表現部４４ａおよび第２の距離感表現部４５ａを備える。

第１の距離感表現部４４ａは、音声入力部１２から供給される音声情報を、情報入力部１１から供給される距離感情報に応じて変換して通信部４２ａに供給する。例えば、第１の距離感表現部４４ａは、音声入力部１２から供給された音声情報をＡ／Ｄ変換し、このＡ／Ｄ変換された音声情報に含まれる感情情報を制御して通信部４２ａに供給する。

第２の距離感表現部４５ａは、映像入力部４１から供給される映像情報を、情報入力部１１から供給される距離感情報に応じて変換して通信部４２ａに供給する。

通信部４２ａは、第１の距離感表現部４４ａから供給された音声情報と、第２の距離感表現部４５ａから供給された映像情報とを符号化して送信する。これ以外のことは、上述の第４の実施形態と同様であるので説明を省略する。

以上、この発明の第１〜第４の実施形態について具体的に説明したが、この発明は、上述の第１〜第４の実施形態に限定されるものではなく、この発明の技術的思想に基づく各種の変形が可能である。

例えば、上述の第１〜第４の実施形態において挙げた数値はあくまでも例に過ぎず、必要に応じてこれと異なる数値を用いてもよい。

また、上述の第１〜第４の実施形態では、映像情報および／または音声情報を距離感情報に応じて変換する場合を例として示したが、光または振動に関する情報を距離感情報に応じて変換するようにしてもよい。

例えば、光に関する情報を距離感情報に応じて変換する場合には、通信装置の構成を、例えば以下のようにすることができる。通信装置は、距離感情報を入力するための入力部と、生体の心拍を検出し心拍情報として出力するための検出手段と、検出手段から出力された心拍情報の送信または心拍情報の受信を行う通信部と、受信部により受信された心拍情報を、入力部により入力された距離感情報に応じて変換する距離感表現部と、距離感情報により変換された心拍情報に応じた発光を行う発光手段とを備える。なお、検出手段は、例えば、手首などの生体に装着して心拍を検出可能な圧力センサである。

上述の通信装置は例えば以下のように動作する。まず、通信部が相手の心拍情報を受信して距離感表現部に供給する。距離感表現部は、入力部から供給される距離感情報に応じて通信部から供給される心拍情報を変換して発光装置に供給する。具体的には、入力部から供給される距離感情報に応じて心拍の速度が変わるように、通信部から供給される心拍情報を変換して発光装置に供給する。ＬＥＤ(Light Emitting Diode)などを備えた発光手段は、距離感表現部から供給される心拍情報に応じて点滅する。具体的には、発光手段は、心拍情報に基づき心拍に同期して点滅する。

距離感表現部は、例えば以下のように心拍情報を変換する。通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部から供給された場合には、距離感表現部は、発光手段の点滅がより速くなるように、通信部から供給される心拍情報を変換して発光手段に供給する。

一方、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部から供給された場合には、距離感表現部は、発光手段の光の点滅がより遅くなるように、通信部から供給される心拍情報を変換して発光手段に供給する。

また、上述の第１、第２および第４の実施形態において、距離感表現部が、音声の残響、周波数特性または音量が変わるように、通信部から供給される音声情報を変換するようにしてもよい。

音声出力部から出力される音声の残響を変える場合には、距離感表現部は、例えば以下のように動作する。通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部から供給された場合には、距離感表現部は、音声出力部から出力される音声の残響がより短くなるように、通信部から供給される音声情報を変換して音声出力部に供給する。一方、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部から供給された場合には、距離感表現部は、音声出力部から出力される音声の残響がより長くなるように、通信部から供給される音声情報を変換して音声出力部に供給する。

音声出力部から出力される周波数特性を変える場合には、距離感表現部は、例えば以下のように動作する。通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部から供給された場合には、距離感表現部は、音声出力部から出力される音声がささやき声となるように、通信部から供給される音声情報を変換して音声出力部に供給する。例えば、音声情報に所定のノイズを加えるなどしてささやき声を模したようにして音声出力部に供給する。一方、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部から供給された場合には、距離感表現部は、音声情報の高域成分をカットして音声出力部に供給する。

音声出力部から出力される音声の音量を変える場合には、距離感表現部は、例えば以下のように動作する。通信手段などを介したユーザと相手との距離感をより近くするための距離感情報（例えば数値「１」）が情報入力部から供給された場合には、距離感表現部は、音声出力部から出力される音声の音量が大きくなるように、通信部から供給される音声情報を変換して音声出力部に供給する。一方、通信手段などを介したユーザと相手との距離感をより遠くするための距離感情報（例えば数値「−１」）が情報入力部から供給された場合には、距離感表現部は、音声出力部から出力される音声の音量が小さくなるように、通信部から供給される音声情報を変換して音声出力部に供給する。

この発明の第１の実施形態の概要を説明するための概略図である。 この発明の第１の実施形態による通信装置の一構成例を示すブロック図である。 ３次元音響による音源定位位置の一例を示す略線図である。 この発明の第１の実施形態による物理的距離感表現部の一構成例を示すブロック図である。 音源定位部の一構成例を示すブロック図である。 音源定位部の他の構成例を示すブロック図である。 この発明の第１の実施形態による情報変換装置の動作の一例を説明するためのフローチャートである。 この発明の第１の実施形態の変形例による通信装置の一構成例を示すブロック図である この発明の第２の実施形態による再生装置の一構成例を示すブロック図である。 この発明の第３の実施形態による映像処理装置の一構成例を示すブロック図である。 図１１Ａは瞳孔を拡大する前の人物像の一例を示す略線図、図１１Ｂは瞳孔を拡大した後の人物像の一例を示す略線図である。 図１２Ａは、瞳孔を縮小する前の人物像の一例を示す略線図、図１２Ｂは、瞳孔を縮小した後の人物像の一例を示す略線図である。 この発明の第３の実施形態による映像処理装置の動作の一例を説明するためのフローチャートである。 この第４の実施形態による通信装置の一構成例を示すブロック図である。 音声情報および映像情報を距離感情報に応じて変換して送信する通信装置の一構成例を示すブロック図である。 山根一郎により提案されている心理的距離の概念図である。 通信手段などを介したコミュニケーションにおける心理的距離の概念図である。

符号の説明

１，４０，４０ａ 通信装置
１ａ 再生装置
１１ 入力部
１２ 音声入力部
１３ 通信部
１４，１４ａ，３２，４３ 距離感表現部
１５ 音声出力部
３０ 映像処理装置
３１，４１ 映像入力部
３３ 映像出力部
４４，４４ａ 第１の距離感表現部
４５，４５ａ 第２の距離感表現部
１０１ ボコーダ
１０２ 係数生成部
１０３ 音源定位部
１０４ メモリ

Claims (9)

1. ユーザと相手との距離感を示す距離感情報を入力する入力手段と、
   上記入力された距離感情報に応じて、人物を含む映像に関する映像データおよび音声データを変換して出力する変換手段とを備え、
   上記変換手段は、
   上記距離感情報が距離感をより近くすることを示す情報である場合には、上記人物の瞳孔が大きくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの側方に定位するように、３次元音響処理により上記音声データを変換し、
   上記距離感情報が距離感をより遠くすることを示す情報である場合には、上記人物の瞳孔が小さくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により上記音声データを変換する情報変換装置。
2. 上記変換手段は、さらに、抑揚を変えるように上記音声データを変換する請求項１に記載の情報変換装置。
3. 上記変換手段は、さらに、音量を変えるように上記音声データを変換する請求項１に記載の情報変換装置。
4. 上記変換手段は、さらに、残響を変えるように上記音声データを変換する請求項１に記載の情報変換装置。
5. 上記変換手段は、さらに、周波数特性を変えるように上記音声データを変換する請求項１に記載の情報変換装置。
6. 上記変換手段は、さらに、明瞭度を変えるように上記音声データを変換する請求項１に記載の情報変換装置。
7. ユーザと相手との距離感を示す距離感情報が入力され、上記入力された距離感情報に応じて、人物を含む映像に関する映像データおよび音声データを変換して出力し、
   上記距離感情報が距離感をより近くすることを示す情報である場合には、上記人物の瞳孔が大きくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの側方に定位するように、３次元音響処理により上記音声データを変換し、
   上記距離感情報が距離感をより遠くすることを示す情報である場合には、上記人物の瞳孔が小さくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により上記音声データを変換する情報変換装置における情報変換方法。
8. 人物を含む映像に関する映像データおよび音声データを受信する受信手段と、
   ユーザと相手との距離感を示す距離感情報を入力する入力手段と、
   上記受信した上記映像データおよび上記音声データを、上記入力された距離感情報に応じて変換して出力する変換手段とを備え、
   上記変換手段は、
   上記距離感情報が距離感をより近くすることを示す情報である場合には、上記人物の瞳孔が大きくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの側方に定位するように、３次元音響処理により上記音声データを変換し、
   上記距離感情報が距離感をより遠くすることを示す情報である場合には、上記人物の瞳孔が小さくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により上記音声データを変換する通信装置。
9. 人物を含む映像に関する映像データおよび音声データを受信し、上記受信した上記映像データおよび音声データを、ユーザと相手との距離感を示す距離感情報に応じて変換して出力し、
   上記距離感情報が距離感をより近くすることを示す情報である場合には、上記人物の瞳孔が大きくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの側方に定位するように、３次元音響処理により上記音声データを変換し、
   上記距離感情報が距離感をより遠くすることを示す情報である場合には、上記人物の瞳孔が小さくなるように上記映像データを変換するとともに、上記音声データの音源位置がユーザの斜め前方に定位するように、３次元音響処理により上記音声データを変換する通信装置における通信方法。

Images