JPH06118982A - 画像発生装置 - Google Patents

Abstract

(57)【要約】 【目的】 音響信号から画像を発生させる装置におい
て、発生画像を選択・制御し、特定の画像の発生パター
ンと、その切替手順を記憶・編集可能とすることによっ
て、音楽の進行に伴って、その雰囲気にあった画像を表
示する。 【構成】 音響特徴量信号と同期制御信号を出力する音
響特徴量抽出器101と、音響特徴量信号を画像特徴量信
号に変換する発生画像設定器107と、画像特徴量信号か
ら描画信号を発生する画像発生器108と、発生画像設定
器107の設定内容を記憶する設定パターン記憶器104と、
その設定パターン内容を編集する設定パターン編集器10
5と、設定パターンを切替えるタイミングを記憶するシ
ーケンス記憶器102と、そのシーケンス内容を編集する
ためのシーケンス編集器103と、設定パターン記憶器104
と発生画像設定器107を直接操作できる設定操作部とを
備えている。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、音響信号に応じて画像
を発生する画像発生装置に関する。

【０００２】

【従来の技術】以下に従来の画像発生装置について説明
する。図２は、従来の画像発生装置の構成を示すもので
ある。

【０００３】図２において、２０１は音響信号ｊを入力
し、音響信号から音響特徴量を抽出する音響特徴量抽出
器である。２０２は画像発生器で、２０１の音響特徴量
抽出器の出力する音響特徴量信号ｋを入力し、それをも
とに描画信号ｌを発生する。２０３は画像表示部で、描
画信号ｌを入力し、その信号に応じて画像を表示するも
のである。

【０００４】以上の様に構成された画像発生装置につい
て、以下その動作について説明する。まず音響特徴量抽
出器２０１では、入力された音響信号ｊに対して、その
信号に対して何らかの処理を行ない、入力された音響信
号ｊの特徴を抽出する。たとえば、その信号の強さを音
量という音響特徴量として出力する。あるいは、周波数
フィルタリングなどの信号処理を施し、周波数帯域ごと
の信号の強さなどを音響特徴量として抽出する。

【０００５】以上のようにして抽出された特徴量は音響
特徴量信号ｋとして画像発生器２０２へ出力される。画
像発生器２０２では、音響特徴量抽出器２０１から出力
された音響特徴量信号ｋを入力し、それをもとに描画信
号ｌを生成し画像表示器２０３へ送出する。画像表示器
２０３では、描画信号ｌを入力し、それにしたがって画
像を表示するものである。画像発生器２０２では、たと
えば、音量という音響特徴量を図形の大きさに反映させ
ることにより、大きな音量の音響信号が入力された時に
は、大きな図形を描くように描画信号ｌを出力するよう
に構成することができる。

【０００６】このように構成された画像発生装置におい
て使用者は、音楽を観賞しながら、同時にその音響信号
に反応して表示される画像表示器の画像を観賞すること
によって楽しむものである。

【０００７】

【発明が解決しようとする課題】しかしながら上記従来
の構成では、音響特徴量信号から描画信号への変換方法
が一種類に固定されており、使用者が変更することはで
きない。従って、観賞している音楽の雰囲気や、使用者
の好み、気分にあわせて表示される画像を使用者が選
択、あるいは調整するということができないという問題
点を有していた。

【０００８】本発明は、上記従来の問題点を解決するも
ので、入力された音響信号に適した画像を発生するよう
に、使用者が選択、あるいは調整することができる画像
発生装置を提供するものである。

【０００９】

【課題を解決するための手段】この目的を達成するため
に本発明の画像発生装置は、同期制御信号を入力し、そ
れに応じてあらかじめ決められた順序にしたがって設定
パターン指定信号を出力するシーケンス記憶器と、シー
ケンス記憶器に記憶されているシーケンス内容の作成、
編集を行なうシーケンス編集器と、前記設定パターン指
定信号に対応する設定内容変更信号を出力する設定パタ
ーン記憶器と、前記設定パターン記憶器に記憶されてい
る設定パターン内容の作成、編集を行なう設定パターン
編集器と、前記同期制御信号に関係なく、使用者の指定
に従って前記設定内容変更信号あるいは前記設定パター
ン指定信号を出力する設定操作部と、前記設定内容変更
信号を入力し、それに応じて前記音響特徴量信号から画
像特徴量信号への変換方法を決定する発生画像設定器と
を有している。

【００１０】

【作用】本発明は上記構成の発生画像設定器によって、
どの音響特徴量をどの画像特徴量にどのように変換する
かを設定しており、その設定内容は設定操作部を用いて
使用者が自由に選択、調整することができる。これによ
って、入力される音響信号である音楽の雰囲気や、使用
者の好み、あるいはその時の気分に応じて、使用者は出
力される画像を変化させることができる。

【００１１】また、設定パターン記憶器によって、発生
画像設定器における設定内容を記憶することができ、設
定操作部を用いて使用者はその設定内容を瞬時に発生画
像設定器に反映することができる。その設定内容は、設
定パターン編集器によって使用者が編集、作成すること
ができる。

【００１２】さらに、設定パターンを切替えるタイミン
グをシーケンス記憶器で設定しておくことにより、同期
制御信号を用いて音響信号の進行に応じて自動的に設定
パターンを切替えることができる。

【００１３】このようにして使用者の好みを反映し、音
楽に適合した画像を発生させることにより、音響信号を
音として観賞しながら、同時にその音響信号に反応して
表示される画像表示器の画像を観賞することによって楽
しむものである。

【００１４】

【実施例】

（実施例１）以下本発明の一実施例について、図面を参
照しながら説明する。図１は本発明の一実施例の画像発
生装置の構成を示すブロック図である。

【００１５】図１において、１０１は音響信号ａを入力
し、音響信号ａからその特徴を抽出して音響特徴量信号
ｂとして出力し、また音響信号ａから同期をとるための
信号を抽出し、同期制御信号ｃとして出力する音響特徴
量抽出器、１０２は同期制御信号ｃを入力し、それに応
じてあらかじめ決められた順序にしたがって設定パター
ン指定信号ｄを出力するシーケンス記憶器、１０３はシ
ーケンス記憶器１０２に記憶されているシーケンス内容
ｅを作成、編集するためのシーケンス編集器、１０４は
設定パターン指定信号ｄに応じて設定内容変更信号ｆを
出力する設定パターン記憶器である。

【００１６】１０５は設定パターン記憶器１０４に記憶
されている設定パターン内容を作成、編集するための設
定パターン編集器、１０６は同期制御信号ｃに関係な
く、使用者の指示に従って設定内容変更信号ｆあるいは
設定パターン指定信号ｇを出力することのできる設定操
作部、１０７は設定内容変更信号ｆを入力し、それに応
じて音響特徴量信号ｂから画像特徴量信号ｈへの変換方
法を設定し、その設定内容に応じて音響特徴量信号ｂを
画像特徴量信号ｈに変換し出力する発生画像設定器、１
０８は画像特徴量信号ｈを入力しそれに応じた画像を発
生し、それを描画信号ｉとして出力する画像発生器、１
０９は描画信号ｉを入力し、その画像を表示する表示器
である。

【００１７】以上のように構成された画像発生装置につ
いて、以下その動作を説明する。音響特徴量抽出器１０
１では、入力された音響信号ａに対して信号処理を行な
い、その音響信号の特徴を抽出する。たとえば、その信
号の強さを音量という音響特徴量として抽出する。ある
いは、周波数フィルタリングなどの信号処理を施し、周
波数帯域ごとの信号の強さなどを音響特徴量として抽出
する。以上のようにして抽出された音響特徴量群は、音
響特徴量信号ｂとして発生画像設定器１０７へ出力され
る。発生画像設定器１０７では、入力した音響特徴量信
号ｂを画像特徴量信号ｈに変換して画像発生器１０８へ
出力する。

【００１８】音響特徴量から画像特徴量への変換は、た
とえば音量という音響特徴量を、図形の大きさという画
像特徴量に変換することによって、音量の大きい音響信
号が入力された時には、大きな図形を表示させるような
画像発生装置を構成することができる。どの音響特徴量
をどのように変換してどの画像特徴量に割り当てるかと
いう設定を以後、発生画像設定器１０７の設定内容と呼
ぶことにする。この設定内容を変更することによって、
たとえば音量が大きい音響信号が入力された時に、逆に
小さな図形を発生させるように設定することや、またあ
るいは、高周波帯域の信号の強さと低周波帯域の信号の
強さの割合に応じて、描画する図形の種類や色を変える
ような描画信号ｉを生成することもできる。

【００１９】画像発生器１０８では、発生画像設定器１
０７から出力された画像特徴量信号ｈを入力し、それを
もとに描画信号ｉを送出する。画像特徴量信号ｈは、図
形を発生するために必要な情報、たとえば図形の種類、
色、大きさ、表示位置等の情報を伝達するものである。
描画信号ｉは表示器１０９に画像を表示するためのビデ
オ信号である。表示器１０９では、描画信号ｉを入力
し、それにしたがって画像を表示するものである。設定
操作部１０６は、使用者の指示に従い、発生画像設定器
１０７に対して設定内容変更信号ｆとして送出し、発生
画像設定器１０７の設定内容を変更することができる。

【００２０】これによって、使用者は動作中に発生画像
設定器１０７の設定内容を瞬時に変更することができ、
出力される画像を制御することができる。設定パターン
記憶器１０４では、発生画像設定器１０７における設定
内容を設定パターン内容として複数とおり記憶してい
る。シーケンス記憶器１０２あるいは設定操作部１０６
の出力する設定パターン指定信号ｄに応じて記憶してい
る設定内容を設定内容変更信号ｆとして出力し、発生画
像設定器１０７の設定内容を変更することができる。設
定パターン編集器１０５では、設定パターン記憶器１０
４に記憶されている設定パターン内容を使用者が編集す
ることができる。

【００２１】また音響特徴量抽出器１０１では、音響信
号ａが音楽のように一定のテンポを持つものについて、
テンポに追従した同期制御信号ｃを、シーケンス記憶器
１０２に出力する。シーケンス記憶器１０２では、音響
信号ａに応じて設定パターンを切替えるために、同期制
御信号ｃを入力し、どのタイミングで、どの設定パター
ン内容に切替えるかを記述する設定シーケンス内容を記
憶しておき、同期制御信号ｃに応じて設定パターン指定
信号ｄを設定パターン記憶器１０４に出力する。

【００２２】これによりたとえば入力された音響信号が
音楽の場合、曲調の変わり目を、小節数、あるいはテン
ポの変わり目を検知することによって検出し、それに合
わせて発生される画像を切替えるといったようなこと
を、あらかじめシーケンス内容に設定しておくことによ
って行なうことができる。シーケンス編集器１０３で
は、シーケンス記憶器１０２に記憶されているシーケン
ス内容を使用者が編集することができる。

【００２３】なお、設定操作部１０６の送出する設定内
容変更信号ｆは、設定パターン記憶器１０４の送出する
設定内容変更信号ｆより優先される。また同様に、設定
操作部１０６の送出する設定パターン指定信号ｄは、シ
ーケンス記憶器１０２の出力する設定パターン指定信号
ｄより優先される。これによって、同期制御信号に関係
なく、使用者の思いつくままに設定パターンの切替え、
および設定内容の調整、変更を行なうことができる。

【００２４】

【発明の効果】以上のように本発明は、発生画像設定器
が、どの音響特徴量をどの画像特徴量にどのように変換
するかを、設定操作部を用いて使用者が自由に選択、調
整した設定内容に応じて設定しており、これによって、
入力された音響信号に応じて画像を表示し、さらに使用
者の好みに合わせて、その場で画像を制御しながら音楽
と映像を観賞することができる優れた画像発生装置を実
現するものである。

【図面の簡単な説明】

【図１】本発明の一実施例における画像発生装置の構成
を示すブロック図

【図２】従来の画像発生装置の構成を示すブロック図

【符号の説明】

１０１ 音響特徴量抽出器 １０２ シーケンス記憶器 １０３ シーケンス編集器 １０４ 設定パターン記憶器 １０５ 設定パターン編集器 １０６ 設定操作部 １０７ 発生画像設定器 １０８ 画像発生器 １０９ 表示器

Claims (1)

【特許請求の範囲】
1. 【請求項１】音響信号を入力し、前記音響信号からその
   特徴を抽出して音響特徴量信号として出力し、また前記
   音響特徴量信号から同期をとるための信号を抽出し、同
   期制御信号として出力する音響特徴量抽出器と、前記同
   期制御信号を入力し、それに応じてあらかじめ決められ
   た順序にしたがって設定パターン指定信号を出力するシ
   ーケンス記憶器と、前記シーケンス記憶器に記憶されて
   いるシーケンス内容の作成、編集を行なうシーケンス編
   集器と、前記設定パターン指定信号に応じて設定内容変
   更信号を出力する設定パターン記憶器と、前記設定パタ
   ーン記憶器に記憶されている設定パターン内容の作成、
   編集を行なう設定パターン編集器と、前記同期制御信号
   に関係なく、使用者の指示に従って前記設定内容変更信
   号あるいは前記設定パターン指定信号を出力する設定操
   作部と、前記設定内容変更信号を入力し、それに応じて
   前記音響特徴量信号から画像特徴量信号への変換方法を
   設定し、その設定内容に応じて前記音響特徴量信号を前
   記画像信号に変換し出力する発生画像設定器と、前記画
   像特徴量信号を入力しそれに応じた画像を発生し、それ
   を描画信号として出力する画像発生器と、前記描画信号
   を入力し、その画像を表示する表示器とを備えたことを
   特徴とする画像発生装置。