JP2004032430A

JP2004032430A - 制御装置及び制御プログラム

Info

Publication number: JP2004032430A
Application number: JP2002186743A
Authority: JP
Inventors: Satoru Iwamoto; 岩本　哲; Naoya Takahashi; 高橋　直也
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 2002-06-26
Filing date: 2002-06-26
Publication date: 2004-01-29
Also published as: US7403895B2; US20040138892A1

Abstract

【課題】受け付けた音声に応じた画像の表示や音楽の再生等の制御を行える機能を提供する。
【解決手段】音声の入力を受け付ける音入力手段３８と、前記音入力手段３８で受け付けた音声を分析して該音声の特性を求める分析手段４１と、前記音声の特性と対応する制御情報を記憶する制御情報記憶手段３５と、前記音声の特性と対応する制御情報について前記制御情報記憶手段を検索する検索手段４２と、前記検索手段４２で索出された制御情報に基づいて制御を行う制御手段３３と、前記制御手段３３の制御により、画像の表示、音楽の再生、振動による通知、所定機能の動作等の制御結果を出力する出力手段３４とを備える。
【選択図】　　　　　図２

Description

【０００１】
【発明の属する技術分野】
本発明は、環境音等の音を利用してその音に対応した画像の表示や音楽の再生等の制御を行う制御装置及び制御プログラムに関する。
【０００２】
【従来の技術】
従来、携帯電話で通話する際に、通話相手が電車の中や図書館等、通話しづらい場所に居るのかどうかなど、周囲の状況を知りたいことがあった。
【０００３】
【発明が解決しようとする課題】
しかしながら、音声で伝わる周囲の情報は僅かであり、周囲の状況を正確に把握することは困難であった。
【０００４】
また、パーソナルコンピュータ間で、ＩＰ電話による通話や、音声チャットなどを行う際には、任意の画像や音楽ファイルを通信相手に送信することが行われているが、その都度ユーザが指定したデータを送信するにすぎず、ユーザの周囲の状況を客観的に判断できるものではなかった。
【０００５】
本発明は、このような従来の技術の問題点に鑑みてなされたものである。即ち本発明の課題は、受け付けた音に応じた画像の表示や音楽の再生等の制御を行える機能を提供することである。
【０００６】
【課題を解決するための手段】
本発明は前記課題を解決するために、以下の手段を採用した。
【０００７】
本発明の制御装置は、音の入力を受け付ける音入力手段と、
前記音入力手段で受け付けた音を分析して該音の特性を求める分析手段と、
前記音の特性と対応する制御情報を記憶する制御情報記憶手段と、
前記音の特性と対応する制御情報について前記制御情報記憶手段を検索する検索手段と、
前記検索手段で索出された制御情報に基づいて制御を行う制御手段と、
前記制御手段に制御されて所定の効果を出力する出力手段を備えたものである。
【０００８】
前記所定の効果とは、画像の表示、音楽の再生、振動による通知、所定機能の動作等である。
【０００９】
前記音の特性はパワースペクトラムとしても良い。
【００１０】
また、本発明の制御装置は、前記音入力手段が通話のための音を受け付ける場合に、受け付けた音に含まれる環境音を特定する特定手段を備え、
前記検索手段が前記特定手段で特定した環境音と対応する制御情報を索出する構成としても良い。
【００１１】
また、本発明の制御装置は、前記検索に用いる補助情報を検知する検知手段を備え、
前記制御情報記憶手段が、前記音の特性及び補助情報と制御情報とを対応させて記憶し、
前記検索手段が、前記音の特性及び前記補助情報と対応する制御情報について前記制御情報記憶手段を検索する構成としても良い。
【００１２】
なお、前記補助情報とは、時間、位置、明るさ等である。
【００１３】
また、本発明の制御装置は、前記音入力手段が通話のための音を受け付ける場合に、通話時と非通話時を検出する通話状態検知手段を備えても良い。
【００１４】
また、本発明の制御プログラムは、入力音を分析して該音の特性を求めるステップと、
制御情報記憶手段を検索して前記音の特性と対応する制御情報を索出するステップと、
前記索出された制御情報に基づいて所定の効果を出力するよう制御するステップとをコンピュータに実行させるものである。
【００１５】
また、本発明は、上記のプログラムをコンピュータが読み取り可能に記録した記録媒体であっても良い。そして、コンピュータに、この記録媒体のプログラムを読み込ませて実行させることにより、その機能を提供させることができる。
【００１６】
ここで、コンピュータ読み取り可能な記録媒体とは、データやプログラム等の情報を電気的、磁気的、光学的、機械的、または化学的作用によって蓄積し、コンピュータから読み取ることができる記録媒体をいう。このような記録媒体の内コンピュータから取り外し可能なものとしては、例えばフレキシブルディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ／Ｗ、ＤＶＤ、ＤＡＴ、８ｍｍテープ、メモリカード等がある。
【００１７】
また、コンピュータに固定された記録媒体としてハードディスクやＲＯＭ（リードオンリーメモリ）等がある。
【００１８】
上述の構成により本発明は、受け付けた音に応じた制御を行うことにより、音を聞いただけでは分かりにくいものも、具体的な画像の表示や音楽の再生を行い、周囲の状況の把握を容易にしている。
【００１９】
また、本発明は、例えばエンターテイメントの分野に適用した場合、受け付けた音に基づいて周囲の状況に応じた映像を面白く見せることができるようになる。
【００２０】
なお、本発明において、音とは、人の声や、テレビ・ラジオの音、動物の鳴声、電車の走行音、サイレンなど、周囲の状況を表す音である。更に、該音は、人間の可聴域に関わらず、車のエンジン音に含まれる高周波や、風の唸りのような低周波など、音入力手段で受け付けることが可能な周波数帯の音であれば良い。
【００２１】
また、本発明において、環境音とは、前記音声のうち該音声が入力される周囲の環境からの音であり、例えば周囲で話す話し声や、行き交う車の排気音、夜の静寂に鳴く虫の音や、オフィスでパソコンのキーをタイプする音など、意識するしないにかかわらず、自然に入ってくる音である。
【００２２】
【発明の実施の形態】
〈実施形態１〉
以下、本発明の実施形態１に係る制御装置としての携帯電話を図１から図９の図面に基づいて説明する。
【００２３】
§１．全体構成
図１は本実施形態の制御装置としての携帯電話の概念図を示す。
【００２４】
初めに音入力手段が音声を受け付け、次に分析手段がその受け付けた音声のパワースペクトラムを求める。ここで音声とは本発明における音であり、通話者の音声や周囲環境からの環境音、その他一般的な音を含むものである。そして検索手段が、該パワースペクトラムと、制御情報記憶手段に記憶した既存のパワースペクトラムとを比較して、その相似度や、特定の周波数帯の音量などによって同一であるか否かを判定し、同一と判定（マッチング）したパワースペクトラムと対応する制御情報を索出する。そして、制御手段がこの制御情報に基づいて出力手段の制御、例えば所定の画像を映像表示デバイス（表示部）に表示することや、音楽やメッセージを再生すること等を行う。
【００２５】
このように本実施形態の携帯電話は、音声だけでは分かりづらい周囲の状況を画像や音楽で表すことが出来、自分や相手のいる場所の状況を容易に把握することができるようにしている。
【００２６】
§２．携帯電話の構成
次に本実施形態の携帯電話を構成する各要素について説明する。
【００２７】
図２は、本発明に係る携帯電話３のブロック図である。
【００２８】
本形態の携帯電話３は、無線基地局（図示せず）と通信を行う為の電波を送受信するアンテナ３１と、アンテナ３１で受信した電波の復調を行って受信データを生成すると共に送信データを所定の周波数へ変調してアンテナ３１に変調信号を出力する無線回路部３２と、無線回路部３２で生成された復調信号を復号化するとともに、符号化した送信データを無線回路部３２へ出力して通信を行わせる等の制御を行う制御回路部（制御手段）３３と、たとえばＬＣＤからなり該制御手段の制御により情報表示を行う表示部３４を有している。
【００２９】
また、携帯電話３は、電話番号データやアプリケーションプログラム、後述の音声のパワースペクトラムと対応した制御情報等が格納される記憶部（制御情報記憶手段）３５と、キー操作部３６と、使用者に着信を音楽や振動で報知する着信報知回路部３７と、制御回路部３３により復号化された音声データを受け付けて音声符号化方式の仕様で復号化した後にアナログ変換し、音声信号として音声出力部３９に出力すると共に入力された音声信号をデジタル変換した後に音声符号化方式の仕様で符号化して音声データとして制御回路部３３へ出力する音声コーデック（音入力手段）３８と、スピーカおよびアンプからなり、前記音声信号を出力する音声出力部３９と、例えばマイクからなる入力部４０を有している。
【００３０】
更に、携帯電話３は、前記音声コーデックから出力された音声信号を制御回路部３３を介して取得し、該音声信号を分析してこのパワースペクトラムを求める分析回路部（分析手段）４１と、前記パワースペクトラムと対応する制御情報について前記記憶部３５を検索する検索部４２を有している。
【００３１】
前記分析回路部４１は、例えば図３に示すように分析する音（音声信号）のパワースペクトラム、即ち周波数毎の音圧レベルを求めている。このパワースペクトラムとしては、分析する音のある瞬間について求めるものや、所定期間内の変動をとるものでも良い。
【００３２】
前記記憶部３５は、電車の中や、図書館、居酒屋等、種々の状況での音声について、前記分析回路部４１と同様にパワースペクトラムを予め求め、これらのパワースペクトラムと、制御情報とをそれぞれ対応付けて記憶している。
【００３３】
図４は、このパワースペクトラムと制御情報のテーブルの説明図である。同図に示すようにパワースペクトラムのフィールド４ａには、各状況のパワースペクトラムが数値化して記憶されている。これと対応するフィールド４ｂから４ｅには制御情報が記憶されており、このフィールド４ｂ，４ｃ，４ｄにはそれぞれ画像ファイルや音楽ファイル、振動パターンが記憶されている。また、フィールド４ｅには制御タイプが記憶されている。該制御タイプは、パワースペクトルがマッチングしたときに、どのフィールドに記憶されているデータを利用するかを示すものである。
【００３４】
前記検索部４２は、分析回路部４１で求めたパワースペクトラムと一致するものについて前記記憶部３５を検索し、一致するパワースペクトラムと対応する制御情報を索出する。
【００３５】
このとき、検索部４２によるパワースペクトラムが一致しているか否かの判定は、例えば電子情報通信ハンドブック（（株）オーム社）等に記載されているように、パワースペクトラムについてスペクトル距離尺度を求め、該距離が所定の閾値以下となった場合を一致したと判定し、閾値より大きい場合を不一致と判断する。また、各パワースペクトラムについて確率モデルをそれぞれ求め、各モデルが近似の関係となるか否かを判定する。なお、これに限らず、他のマッチング手法を用いても良い。
【００３６】
なお、前記表示部３４と着信報知回路部３７は、制御回路部３３に制御されて画像の表示や音楽の再生、振動による通知を行う出力手段である。
【００３７】
§３．制御手順
図５は、本実施形態において音声に応じた画像を表示する制御手順の説明図である。
【００３８】
通話者の操作によって通話相手に電話をかけて、もしくは通話相手からの発呼に応じて通話を開始すると、携帯電話３は通話相手からの音声信号を音声コーデック３８によって取得する（ステップ１、以下Ｓ１と略記する）。
【００３９】
次いで携帯電話３は、ステップ１で取得した音声を分析回路部４１によって分析し、パワースペクトラムを求める（Ｓ２）。
【００４０】
次に検索部４２により、ステップ２で求めたパワースペクトラムについて記憶部３５を検索し、既存のパワースペクトラムと比較する（Ｓ３）。
【００４１】
検索部４２は、これらのパワースペクトラムが一致するか否かを判定し（Ｓ４）、一致しない場合には処理を終了し、一致した場合には対応する制御情報を取得する（Ｓ５）。
【００４２】
そして、制御情報を取得した場合には、該制御情報に基づいて制御回路部３３が表示部３４或は着信報知回路部３７を制御して画像の表示や音楽の再生、振動による通知を行う（Ｓ６）。図１の例では通話相手が図書館にいる場合を示している。
【００４３】
このように音声（環境音）に応じ、関連画像を表示できるので、例えば交通の激しい屋外で通話している場合には、図６のように交通量が多い旨の関連画像を表示し、環境音が大きく通話が困難であることを示すことができる。
【００４４】
また、通話相手が学校、図書館、公園、百貨店、喫茶店等のどこにいるのかを表示でき、通話相手の状況を容易に把握できる。
【００４５】
また、学校にきたら、アラームを鳴らし、電源を切る旨を通知するといったことも実現できる。更に電源を切ることやマナーモードに設定する等の所定の機能を動作させる構成としても良い。
【００４６】
《変形例１》
図７は、本実施形態の変形例として、ＰＤＡ等のコンピュータを用いた例を示している。
【００４７】
コンピュータ７０は、同図に示す如く本体７１内に、ＣＰＵ（ｃｅｎｔｒａｌ　ｐｒｏｃｅｓｓｉｎｇ　ｕｎｉｔ）やメインメモリ等よりなる演算処理部７２、演算処理の為のソフトウェアを記憶した記憶手段（ハードディスク）７３、これらのデータの入出力部である入出力ポート７４、ネットワークに接続して他のコンピュータとの通信を制御するモデム、ＴＡ、ネットワークカード等の通信制御手段（ＣＣＵ）７５を備えたコンピュータである。
【００４８】
該記憶手段（制御情報記憶手段）７３には、オペレーティングシステム（ＯＳ）やアプリケーションソフト（制御プログラム等）がインストールされている。また、記憶手段７３内には、種々の状況のパワースペクトラムと制御情報のテーブルが設けられている。
【００４９】
入出力ポート７４には、キーボード、マイク等の入力手段や、ディスプレイやスピーカ等の出力手段が接続されている。
【００５０】
演算処理部７２は、周辺機器からの情報やアプリケーションソフトに基づく処理により、音入力手段や、分析手段、検索手段、制御手段等の機能を実現している。
【００５１】
なお、各手段の機能は、上述の実施形態と同一であるので、再度の説明を省略する。
【００５２】
コンピュータ７０は、制御プログラムに従い、図５に示すように、通話相手からの音声信号を音入力手段によって取得する（Ｓ１）。
【００５３】
次いでコンピュータ７０は、ステップ１で取得した音声を分析手段によって分析し、パワースペクトラムを求める（Ｓ２）。
【００５４】
次に検索手段により、ステップ２で求めたパワースペクトラムについて記憶手段７３を検索し、既存のパワースペクトラムと比較する（Ｓ３）。
【００５５】
検索手段は、これらのパワースペクトラムが一致するか否かを判定し（Ｓ４）、一致しない場合には処理を終了し、一致した場合には対応する制御情報を取得する（Ｓ５）。
【００５６】
そして、制御情報を取得した場合には、該制御情報に基づいて制御手段の制御により表示部或はスピーカから画像の表示や音楽の再生を行う（Ｓ６）。
【００５７】
このように、汎用のコンピュータに制御プログラムを実行させることでも前述の実施形態と同様の効果が得られる。
【００５８】
《変形例２》
図８は、本実施形態の変形例として、環境音を特定する手段を設けた例を示している。なお、本例は、図１に示した形態と比較して特定手段４３を用いた点が異なっており、その他の構成は同じである。
【００５９】
特定手段４３は、受話器に向かって話す人の声についてのパワースペクトラムを記憶しておき、音入力手段で受け付けた音声のパワースペクトラムのうち、前記受話器に向かって話す人の声についてのパワースペクトラムと一致しない部分を環境音のパワースペクトラムとして特定する。
【００６０】
そして、この特定した環境音のパワースペクトラムに対応する制御信号を検索し、該制御信号に基づく制御を行う。
【００６１】
図５を用いて変形例２の処理手順を説明すると、先ず、通話者の操作によって通話相手に電話をかけて、もしくは通話相手からの発呼に応じて通話を開始すると、携帯電話３は受話器（入力部４０）からの音声信号を音声コーデック３８によって取得する（ステップ１、以下Ｓ１と略記する）。即ち、変形例２においては、通話相手の音声ではなく、携帯電話３の使用者の音声（環境音も含む）が処理対象となる。
【００６２】
次いで携帯電話３は、ステップ１で取得した音声を分析回路部４１によって分析して受話器に入力される音声（環境音も含む）のパワースペクトラムを求め、また、記憶部３５を検索して話者の音声パワースペクトラムを取得して、求めた入力音声のパワースペクトラムのうち話者のパワースペクトラムと一致しない部分を環境音のパワースペクトラムとして特定する（Ｓ２）。
【００６３】
次に検索部４２により、ステップ２で求めた環境音のパワースペクトラムについて記憶部３５を検索し、既存のパワースペクトラムと比較する（Ｓ３）。
【００６４】
検索部４２は、これらのパワースペクトラムが一致するか否かを判定し（Ｓ４）、一致しない場合には処理を終了し、一致した場合には対応する制御情報を取得する（Ｓ５）。
【００６５】
そして、制御情報を取得した場合には、該制御情報に基づいて制御回路部３３が表示部３４或は着信報知回路部３７を制御して画像の表示や音楽の再生、振動による通知を行う（Ｓ６）。
【００６６】
これにより、環境音のみによる制御を行うことができ、精度良く周囲の状況を把握することができる。
【００６７】
なお、特定手段４３は、音入力手段で受け付けた音声のパワースペクトラムのうち、受話器に向かって話す人の声についてのパワースペクトラムが含まれている期間は、通話中、該パワースペクトラムが含まれていなければ非通話中と判断し、該非通話中に音入力手段で受け付けた音声を環境音として特定しても良い。
【００６８】
このように環境音から、例えば交通の激しい屋外で通話であることを検出した場合などには、環境音が大きく通話が困難であることを機器（携帯電話）の使用者にその旨を示すことができる。
【００６９】
また、環境音から機器の使用者が学校、図書館、病院、飛行機内など機器の電源を切断すべき場所や着呼による呼び出し音の出力を控えるべき場所などに存在することを検出し、アラーム音の出力や振動通知などで、存在場所に応じた機器の設定を促すといったことも利用できる。
【００７０】
なお、上述の例では通話時において上記処理手順を実行することを説明したが、待ち受け状態など、非通話時、或は、本発明の制御装置を含む装置（本例では携帯電話）の非使用時に入力される環境音を処理対象として上記処理手順を実行してもよい。これにより、上述したように、存在場所に応じた機器の設定を使用者に促すことができる。
【００７１】
《変形例３》
図１に示した形態において、入力部４０から入力された音声についても音声コーデック（音入力手段）３８で状況把握用の入力として受け付け、パワースペクトラムを分析し、対応する制御情報を検索するようにし、使用者自身の周囲の音声に基づいて制御を行うものでも良い。
【００７２】
図９は、この場合に相手の状況を示す画像８１と、自分の状況を示す画像８２を同時に表示させた例である。
【００７３】
図５を用いて変形例３の処理手順を説明すると、先ず、通話者の操作によって通話相手に電話をかけて、もしくは通話相手からの発呼に応じて通話を開始すると、携帯電話３は受話器（入力部４０）からの音声信号又は通話相手からの音声信号を音声コーデック３８によって取得する（Ｓ１）。即ち、変形例３においては、通話相手の音声及び携帯電話３の使用者の音声（環境音も含む）が処理対象となる。
【００７４】
次いで携帯電話３は、ステップ１で取得した音声を分析回路部４１によって分析して受話器に入力される音声（環境音も含む）のパワースペクトラムを求め、また、記憶部３５を検索して話者の音声パワースペクトラムを取得して、求めた入力音声のパワースペクトラムのうち話者のパワースペクトラムと一致しない部分を環境音のパワースペクトラムとして特定する（Ｓ２）。
【００７５】
次に検索部４２により、ステップ２で求めた環境音のパワースペクトラムについて記憶部３５を検索し、既存のパワースペクトラムと比較する（Ｓ３）。
【００７６】
検索部４２は、これらのパワースペクトラムが一致するか否かを判定し（Ｓ４）、一致しない場合には処理を終了し、一致した場合には対応する制御情報を取得する（Ｓ５）。
【００７７】
そして、制御情報を取得した場合には、該制御情報に基づいて制御回路部３３が表示部３４或は着信報知回路部３７を制御して画像の表示や音楽の再生、振動による通知を行う（Ｓ６）。
【００７８】
なお、制御回路部３３は、キー操作部３６の通話ボタン（通話を開始するボタン）が押されたか否かで通話時か非通話時かを判別し、非通話時即ちダイヤル前には自分の状況を示し、通話時には相手の状況を表示するようにしても良い。これにより通話を開始する前に使用者の周囲の騒音の状況が通話に適しているか否か等を視覚的に確認できる。
【００７９】
この変形例３において、相手の状況（環境）を認識するには変形例１で説明した処理手順、また、使用者自身の周囲の状況（環境）を認識するには変形例２で説明した処理手順の一部を変更すれば実現できることはいうまでもない。
【００８０】
〈実施形態２〉
本実施形態は、前述の実施形態と比べて時間、位置、明るさ等の補助情報を検知する検知手段を備えた点が異なり、その他の構成は略同じである。なお、同一の要素には同符号を付すなどして再度の説明を省略している。
【００８１】
図１０は、本実施形態に係る携帯電話３の概略図である。
【００８２】
検知手段４４は、時間、位置、明るさ等の補助情報を検知し、制御回路部３３に出力している。
【００８３】
また、記憶部３５は、図１１に示すようにパワースペクトラムと補助情報を対応付けて記憶している。
【００８４】
そして検索部４２は、音入力手段で受け付けた音声のパワースペクトラムと補助情報とが、記憶部３５のパワースペクトラム及び補助情報と比較し、一致した場合に対応する制御情報を索出する。
【００８５】
制御回路部３３は、該制御情報に基づいて表示部３４或は着信報知回路部３７を制御する。
【００８６】
図５を用いて本実施形態の処理手順を説明すると、先ず、通話者の操作によって通話相手に電話をかけて、もしくは通話相手からの発呼に応じて通話を開始すると、携帯電話３は通話相手からの音声信号を音声コーデック３８によって取得する（ステップ１、以下Ｓ１と略記する）。
【００８７】
次いで携帯電話３は、ステップ１で取得した音声を分析回路部４１によって分析し、パワースペクトラムを求める（Ｓ２）。
【００８８】
次に検索部４２により、ステップ２で求めたパワースペクトラム及び検知手段４４で検知した補助情報について記憶部３５を参照し、記憶されているパワースペクトラム及び補助情報と比較する（Ｓ３）。
【００８９】
検索部４２は、これらのパワースペクトラム及び補助情報が一致するか否かを判定し（Ｓ４）、一致しない場合には処理を終了し、一致した場合には対応する制御情報を取得する（Ｓ５）。
【００９０】
そして、制御情報を取得した場合には、該制御情報に基づいて制御回路部３３が表示部３４或は着信報知回路部３７を制御して画像の表示や音楽の再生、振動による通知を行う（Ｓ６）。
【００９１】
このように、本実施形態によれば、パワースペクトラムと補助情報とを併せて状況を判別するため、精度良く状況の把握を行うことができる。
【００９２】
例えば、同じ交差点の音声でも、早朝、昼間、深夜等によって交通量が変化するため、時間とパワースペクトラムとでマッチングを行う。
【００９３】
また、補助情報として明るさを用いることにより、室内か屋外か等が判別でき、同じような話し声のパワースペクトラムであっても喫茶店なのか公園なのか等が的確に判別できる。
【００９４】
また、補助情報として位置情報を用いることにより、その位置の近くにある施設などを検索することで、例えば学校と図書館等、同じように静かな屋内のパワースペクトルが求められたときでもその位置情報から的確に状況を判別できる。
【００９５】
《変形例》
なお、上述の実施形態２の機能を実施形態１の変形例１と同様に、ＰＤＡ等のコンピュータによって実施しても良い。
【００９６】
〈その他〉
さらに、本実施の形態は以下の発明を開示する。
（付記１）
音声の入力を受け付ける音入力手段と、
前記音入力手段で受け付けた音を分析して該音の特性を求める分析手段と、
前記音の特性と対応する制御情報を記憶する制御情報記憶手段と、
前記音の特性と対応する制御情報について前記制御情報記憶手段を検索する検索手段と、
前記検索手段で索出された制御情報に基づいて制御を行う制御手段と、
前記制御手段に制御されて所定の効果を出力する出力手段と、
を備えた制御装置。（１）
（付記２）
前記所定の効果が、画像の表示、音楽の再生、振動による通知、所定機能の動作の少なくとも一つである付記１記載の制御装置。
（付記３）
前記音の特性がパワースペクトラムである付記１記載の制御装置。（２）
（付記４）
前記音入力手段が通話のための音を受け付ける場合に、受け付けた音に含まれる環境音を特定する特定手段を備え、
前記検索手段が前記特定手段で特定した環境音と対応する制御情報を索出する付記１記載の制御装置。（３）
（付記５）
前記検索に用いる補助情報を検知する検知手段を備え、
前記制御情報記憶手段が、前記音の特性及び補助情報と制御情報とを対応させて記憶し、
前記検索手段が、前記音の特性及び前記補助情報と対応する制御情報について前記制御情報記憶手段を検索する付記１記載の制御装置。（４）
（付記６）
前記音入力手段が通話のための音を受け付ける場合に、通話時と非通話時を検出する通話状態検知手段を備えた付記１記載の制御装置。
（付記７）
前記音入力手段は、通信網を介して相手装置からの音を受け付ける付記１記載の制御装置。
（付記８）
前記音入力手段は、通信網を介して相手装置に送出する音を受け付ける付記１記載の制御装置。
（付記９）
前記音入力手段は、当該制御装置を含む装置の非使用時における音を受け付ける付記１記載の制御装置。
（付記１０）
入力音を分析して該音の特性を求めるステップと、
制御情報記憶手段を検索して前記音の特性と対応する制御情報を索出するステップと、
前記索出された制御情報に基づいて所定の効果を出力するよう制御するステップとをコンピュータに実行させる制御プログラム。（５）
（付記１１）
前記所定の効果が、画像の表示、音楽の再生、振動による通知、所定機能の動作の少なくとも一つである付記１０記載の制御プログラム。
（付記１２）
前記音の特性がパワースペクトラムである付記１０記載の制御プログラム。
（付記１３）
前記入力音が通話音であり、該通話音に含まれる環境音を特定するステップを更に含み、
前記制御情報を索出するステップは、前記特定した環境音と対応する制御情報を索出する付記１０記載の制御プログラム。
（付記１４）
前記検索に用いる補助情報を検知するステップをさらに含み、
前記制御情報を索出するステップは、前記制御情報記憶手段を索出して前記音の特性及び補助情報と対応する制御情報を索出する付記１０記載の制御プログラム。
（付記１５）
前記入力音が通話音であり、該通話音から通話時と非通話時を検出するステップをさらに含む付記１０記載の制御プログラム。
（付記１６）
通信網を介して相手装置から受信した音を前記入力音とする付記１０記載の制御プログラム
（付記１７）
通信網を介して相手装置に送出する音を前記入力音とする付記１０記載の制御プログラム。
（付記１８）
前記コンピュータの非使用時における音を受け付ける付記１０記載の制御プログラム。
【００９７】
【発明の効果】
以上、説明したように本発明によれば、受け付けた音に応じた画像の表示や音楽の再生等の制御を行うことができる。
【図面の簡単な説明】
【図１】実施形態１に係る制御装置としての携帯電話の概念図
【図２】本発明に係る携帯電話３のブロック図
【図３】パワースペクトラムの説明図
【図４】パワースペクトラムと制御情報を記憶したテーブルの説明図
【図５】音声に応じた画像を表示する制御手順の説明図
【図６】交通量が多い旨の関連画像の説明図
【図７】コンピュータを用いた場合のブロック図
【図８】環境音を特定する手段を設けた例の説明図
【図９】相手の状況と自分の状況を同時に表示させた例
を示す図
【図１０】実施形態２に係る携帯電話３の概略図
【図１１】パワースペクトラムと補助情報を対応付けたテーブルの説明図
【符号の説明】
３　　　　携帯電話
３１　　アンテナ
３２　　無線回路部
３３　　制御回路部
３４　　表示部
３５　　記憶部
３６　　キー操作部
３７　　着信報知回路部
３８　　音声コーデック
３９　　音声出力部
４０　　入力部
４１　　分析回路部
４２　　検索部
４３　　特定手段
４４　　検知手段
７０　　コンピュータ
７１　　　本体
７２　　　演算処理部
７３　　記憶手段
７４　　　入出力ポート

Claims

音の入力を受け付ける音入力手段と、
前記音入力手段で受け付けた音を分析して該音の特性を求める分析手段と、
前記音の特性と対応する制御情報を記憶する制御情報記憶手段と、
前記音の特性と対応する制御情報について前記制御情報記憶手段を検索する検索手段と、
前記検索手段で索出された制御情報に基づいて制御を行う制御手段と、
前記制御手段に制御されて所定の効果を出力する出力手段と、
を備えた制御装置。
前記音の特性がパワースペクトラムである請求項１記載の制御装置。
前記音入力手段が通話のための音を受け付ける場合に、受け付けた音に含まれる環境音を特定する特定手段を備え、
前記検索手段が前記特定手段で特定した環境音と対応する制御情報を索出する請求項１記載の制御装置。
前記検索に用いる補助情報を検知する検知手段を備え、
前記制御情報記憶手段が、前記音の特性及び補助情報と制御情報とを対応させて記憶し、
前記検索手段が、前記音の特性及び前記補助情報と対応する制御情報について前記制御情報記憶手段を検索する請求項１記載の制御装置。
入力音を分析して該音の特性を求めるステップと、
制御情報記憶手段を検索して前記音の特性と対応する制御情報を索出するステップと、
前記索出された制御情報に基づいて所定の効果を出力するよう制御するステップとをコンピュータに実行させる制御プログラム。