JP2015049470A - Signal processor and program for the same - Google Patents
Signal processor and program for the same Download PDFInfo
- Publication number
- JP2015049470A JP2015049470A JP2013182885A JP2013182885A JP2015049470A JP 2015049470 A JP2015049470 A JP 2015049470A JP 2013182885 A JP2013182885 A JP 2013182885A JP 2013182885 A JP2013182885 A JP 2013182885A JP 2015049470 A JP2015049470 A JP 2015049470A
- Authority
- JP
- Japan
- Prior art keywords
- level
- unit
- input
- level adjustment
- frequency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、入力された音声信号のレベルを周波数毎に調整して出力する信号処理装置及びそのプログラムに関する。 The present invention relates to a signal processing apparatus that adjusts and outputs the level of an input audio signal for each frequency and a program thereof.
従来、入力されたオーディオ信号を所望の周波数特性にするために、オーディオ信号のレベルを周波数帯域毎に調整するイコライザ装置が知られている(特許文献1を参照。)。 2. Description of the Related Art Conventionally, an equalizer device that adjusts the level of an audio signal for each frequency band to make an input audio signal have a desired frequency characteristic is known (see Patent Document 1).
しかしながら、特許文献1に示すイコライザ装置は、周波数に対応付けられた操作子を表示しているだけである。したがって、特許文献1に示すイコライザ装置では、例えばユーザが特定の楽器の音を強調しようとしても当該楽器の周波数を知らない場合、当該楽器に対応する周波数のレベルを調整できない。 However, the equalizer device shown in Patent Document 1 only displays an operator associated with a frequency. Therefore, in the equalizer device disclosed in Patent Document 1, for example, when the user does not know the frequency of the musical instrument even when trying to emphasize the sound of the specific musical instrument, the level of the frequency corresponding to the musical instrument cannot be adjusted.
そこで、本発明は、音声信号に含まれるパート(楽器及び声)の音のレベルを調整できる信号処理装置を提供することを目的とする。 Therefore, an object of the present invention is to provide a signal processing apparatus that can adjust the sound level of parts (instrument and voice) included in an audio signal.
本発明の信号処理装置は、音声信号が入力される入力部と、前記入力部に入力された音声信号から、周波数のピーク成分に基づいてパートを抽出するパート抽出部と、前記パート抽出部が抽出したパート毎にレベル調整用のパート操作子を表示する表示部と、前記パート操作子に対する操作入力を受け付ける操作部と、前記操作部に受け付けられた操作入力に基づいて、前記パート毎に対応する周波数のレベルを調整するレベル調整部と、を備える。 The signal processing apparatus of the present invention includes an input unit to which an audio signal is input, a part extraction unit that extracts a part from an audio signal input to the input unit based on a peak component of frequency, and the part extraction unit includes Corresponding to each part based on a display unit that displays a part operator for level adjustment for each extracted part, an operation unit that receives an operation input to the part operator, and an operation input received by the operation unit And a level adjustment unit for adjusting the level of the frequency to be performed.
音声信号に含まれるパート(楽器及び声)の音は、パート毎に所定の周波数でレベルがピークになる。そこで、パート抽出部は、周波数軸上のピーク成分に基づいて、音声信号に含まれるパートを抽出する。パート抽出部は、例えば、パート毎の固有振動(基音及び倍音)の周波数に対応するバンドパスフィルタで音声信号を抽出し、抽出した音声信号の基音及び倍音の周波数のレベルが所定の閾値以上であれば、該音声信号にパートが含まれるとして該パートを抽出する。 The sound of the parts (instrument and voice) included in the audio signal peaks at a predetermined frequency for each part. Therefore, the part extraction unit extracts a part included in the audio signal based on the peak component on the frequency axis. For example, the part extraction unit extracts an audio signal with a bandpass filter corresponding to the frequency of the natural vibration (fundamental sound and harmonics) for each part, and the level of the fundamental and harmonic frequencies of the extracted audio signal is equal to or higher than a predetermined threshold. If there is, the part is extracted as being included in the audio signal.
表示部は、抽出したパートに対応するパート操作子を表示する。レベル調整部は、操作部が受け付けたパート操作子に対する操作に基づいて、抽出したパートの周波数のレベルを調整する。ユーザは、パートを示すパート操作子が信号処理装置に表示されているため、直感的にパートの周波数のレベルを調整できる。 The display unit displays a part operator corresponding to the extracted part. The level adjustment unit adjusts the frequency level of the extracted part based on the operation on the part operation element received by the operation unit. Since the part operator indicating the part is displayed on the signal processing device, the user can intuitively adjust the frequency level of the part.
また、前記レベル調整部は、前記パート毎の基音及び倍音の周波数のレベルを調整してもよい。 The level adjustment unit may adjust the frequency level of the fundamental tone and the harmonic overtone for each part.
楽器の音は、主に基音及び倍音からなる。声は、主に第1〜第3フォルマント周波数成分からなる。レベル調整部は、基音(第1フォルマント周波数成分)だけでなく、倍音(第2以降のフォルマント周波数成分)についてもレベル調整を行う。その結果、音声信号に含まれるパートの基音(第1フォルマント周波数成分)のレベルと倍音(第2以降のフォルマント周波数成分)のレベルとの比率は維持され、各パートの音色は変化することがない。したがって、信号処理装置は、各パートの音色の変化を防止しつつ、各パートの音を強調又は減衰することができる。 The sound of an instrument mainly consists of a fundamental tone and a harmonic overtone. The voice mainly consists of first to third formant frequency components. The level adjustment unit performs level adjustment not only on the fundamental tone (first formant frequency component) but also on the harmonics (second and subsequent formant frequency components). As a result, the ratio between the level of the fundamental (first formant frequency component) of the part and the level of the harmonic (second and subsequent formant frequency components) included in the audio signal is maintained, and the timbre of each part does not change. . Therefore, the signal processing apparatus can enhance or attenuate the sound of each part while preventing a change in the timbre of each part.
また、信号処理装置は、前記パート抽出部による抽出結果に基づいて、パート毎の表示位置を決定する表示位置決定部、を備え、前記表示部は、前記表示位置決定部が決定した表示位置に前記パート操作子を表示してもよい。 In addition, the signal processing device includes a display position determining unit that determines a display position for each part based on the extraction result by the part extracting unit, and the display unit is set at the display position determined by the display position determining unit. The part operator may be displayed.
表示位置決定部は、抽出されたパートの周波数について、例えばL,Rチャンネルの各音声信号のレベル比を求めることにより、パート操作子の表示位置を決定する。ただし、表示位置決定部は、抽出したパートに応じて所定の表示位置を決定してもよい。 The display position determination unit determines the display position of the part operator by, for example, obtaining the level ratio of the audio signals of the L and R channels for the extracted part frequency. However, the display position determination unit may determine a predetermined display position according to the extracted part.
また、信号処理装置は、前記パート抽出部が抽出したパート毎のレベルを検知するレベル検知部、を備え、前記レベル調整部は、前記レベル検知部が検知したパート毎のレベル及び前記操作入力に基づいて、レベル調整量を制御してもよい。 In addition, the signal processing device includes a level detection unit that detects a level for each part extracted by the part extraction unit, and the level adjustment unit uses the level for each part detected by the level detection unit and the operation input. Based on this, the level adjustment amount may be controlled.
例えば、レベル調整部は、レベル検知部が検知したレベルが所定の閾値以上の場合、パートの周波数のレベルを調整する。レベル調整部は、パートの音が小さい時にもレベル調整を行って、該パートと同じ帯域に含まれる他のパートの音をレベル調整してしまうことがない。 For example, the level adjustment unit adjusts the frequency level of the part when the level detected by the level detection unit is equal to or greater than a predetermined threshold. The level adjustment unit adjusts the level even when the sound of the part is low, and does not adjust the level of the sound of other parts included in the same band as the part.
また、本発明は、装置に限らず、入力部、パート抽出部、操作部、及びレベル調整部のそれぞれの機能を実現するプログラムであってもよい。 The present invention is not limited to the apparatus, and may be a program that realizes the functions of the input unit, part extraction unit, operation unit, and level adjustment unit.
本発明によれば、信号処理装置は、抽出したパートを示すパート操作子を表示し、パート操作子に対する操作に基づいてレベルを調整するため、ユーザは、レベルを調整したいパートの周波数を知らなくても、当該パートの音のレベルを調整できる。 According to the present invention, since the signal processing apparatus displays the part operator indicating the extracted part and adjusts the level based on the operation on the part operator, the user does not know the frequency of the part whose level is to be adjusted. Even so, the sound level of the part can be adjusted.
実施形態1に係る信号処理装置1について、図1乃至図4を用いて説明する。図1は、実施形態1に係る信号処理装置1のブロック図の一部を示す図である。図2(A)は、コントラバスの音の周波数特性(周波数とレベルとの関係)を示す図であり、図2(B)は、パートDB22に記憶されたデータを示す図である。図3(A)及び図3(B)は、それぞれディスプレイ24が表示する画像の例を示す図である。図4は、レベル調整部12のブロック図である。ただし、図1及び図4において、実線矢印は、音声信号の流れを示し、点線矢印は、制御信号の流れを示す。
A signal processing apparatus 1 according to the first embodiment will be described with reference to FIGS. 1 to 4. FIG. 1 is a diagram illustrating a part of a block diagram of a signal processing device 1 according to the first embodiment. FIG. 2A is a diagram showing the frequency characteristics of the contrabass sound (relationship between frequency and level), and FIG. 2B is a diagram showing data stored in the
信号処理装置1は、入力された音声信号のレベルを周波数毎に調整するものである。信号処理装置1は、ユーザにレベル調整の操作を行わせるために、GUI(;Graphical User Interface)を備えるものである。 The signal processing apparatus 1 adjusts the level of an input audio signal for each frequency. The signal processing apparatus 1 includes a GUI (Graphical User Interface) in order to allow the user to perform level adjustment operations.
信号処理装置1は、図1に示すように、入力部11、レベル調整部12、出力部13、音声解析部21、パートDB22、制御部23、ディスプレイ24、及びタッチパネル25を備える。
As shown in FIG. 1, the signal processing device 1 includes an
制御部23は、信号処理装置1の各機能部を統括する。
The
ディスプレイ24は、制御部23からの制御に従って画像を表示する。タッチパネル25は、ユーザからの操作を受け付ける。制御部23は、タッチパネル25で受け付けたユーザの操作に基づいて、ディスプレイ24の表示内容を変更する。このようにして、信号処理装置1は、GUIを実現する。
The
入力部11は音声信号が入力される。音声信号は、信号処理装置1の外部から与えられる。例えば、音声信号は、不図示のコンテンツプレーヤ又はマイクロフォンから入力部11に与えられる。なお、音声信号は、デジタル信号又はアナログ信号のどちらの信号であっても構わない。
The
入力部11に入力された音声信号は、レベル調整部12と音声解析部21とに入力される。
The audio signal input to the
音声解析部21は、入力された音声信号を解析し、音声信号に含まれるパートを抽出するものである。パートとは、楽器及び声である。
The
パートの抽出方法は、様々な方法が利用可能であるが、本実施形態では、入力された音声信号の周波数特性が、各パートの音の周波数特性条件に適合するか否かを判断することによって行う。 Various methods can be used as the part extraction method. In this embodiment, the frequency characteristic of the input audio signal is determined by determining whether or not the frequency characteristic condition of the sound of each part is met. Do.
一般的に、楽器の音及び声は、所定の周波数でレベルがピークになる周波数特性をそれぞれ有する。例えば、コントラバスの音は、図2(A)に示すように、基音の周波数200Hz、2倍音の周波数400Hz、及び3倍音の周波数600Hzでレベルがピークとなる。ただし、図2(A)に示す例は説明のために簡易的に示したものであり、実際のコントラバスの周波数特性を示したものではない。 In general, the sound and voice of a musical instrument have frequency characteristics in which the level peaks at a predetermined frequency. For example, as shown in FIG. 2A, the level of the sound of the contrabass peaks at the fundamental frequency of 200 Hz, the frequency of the second harmonic 400 Hz, and the frequency of the third harmonic 600 Hz. However, the example shown in FIG. 2A is simply shown for explanation, and does not show the actual frequency characteristics of the contrabass.
そこで、パートDB22は、例えば、図2(B)に示すように、パート毎に、3つの帯域B1〜B3と、レベル閾値と、主要帯域とを、対応付けて、各パートの音の周波数特性条件として記憶する。帯域B1は、パートの基音の周波数(第1フォルマント周波数)を含むように設定される。帯域B2は、パートの2倍音の周波数(第2フォルマント周波数)を含むように設定される。帯域B3は、パートの3倍音の周波数(第3フォルマント周波数)を含むように設定される。レベル閾値は、パートの音の3つの帯域B1〜B3のパワー(帯域B1〜B3のレベルの合計値)に対する閾値である。主要帯域の説明は後述する。ただし、パートDB22が記憶するパートの数は、4つに限らない。
Therefore, for example, as shown in FIG. 2B, the
音声解析部21は、入力された音声信号の周波数特性を求めるために、例えば、入力された音声信号をフーリエ変換する。これにより、入力された音声信号の周波数毎のレベルは、求められる。
For example, the
音声解析部21は、入力された音声信号の周波数特性を求めると、パートDB22からパートの音の周波数特性条件を読み出して、入力された音声信号の周波数特性がパートの音の周波数特性条件に適合するか否かの判断を行い、パートを抽出する。以下の例は、コントラバスを抽出する説明である。
When the
まず、音声解析部21は、パートDB22からコントラバスの3つの帯域B1〜B3及びレベル閾値を読み出す。音声解析部21は、パートDB22からコントラバスの3つの帯域B1〜B3とレベル閾値とを読み出すと、入力された音声信号における3つの帯域B1〜B3のレベルを求める。そして、音声解析部21は、求めた3つのレベルの合計値(コントラバスのパワー)と、コントラバスのレベル閾値とを比較する。音声解析部21は、コントラバスのパワーがコントラバスのレベル閾値以上であれば、入力された音声信号にコントラバスのパートが含まれると判断する。音声解析部21は、コントラバスのパワーがレベル閾値未満であれば、入力された音声信号にコントラバスのパートが含まれないと判断する。
First, the
なお、レベル閾値は、パート毎に異なっている必要はなく、各パートで同じ値に設定されてもよい。 Note that the level threshold need not be different for each part, and may be set to the same value for each part.
以上のように、音声解析部21は、音声信号に含まれるパートとして、コントラバスを抽出する。音声解析部21は、パートDB22に記憶される他のパート(女声、シンバル、及びトランペット)についても、コントラバスの抽出と同様の抽出処理を行う。
As described above, the
音声解析部21は、入力された音声信号に含まれるパートを抽出すると、抽出したパートを制御部23に出力する。
When the
制御部23は、音声解析部21から抽出されたパートが入力されると、図3(A)に示すように、ユーザにレベル調整の操作を行わせるための画像をディスプレイ24に表示させる。より具体的には、制御部23は、図3(A)に示すように、横軸を周波数とし、縦軸をレベルとして表示させる。制御部23は、周波数軸及びレベル軸の表示に加えて、操作子301〜310、及びパート操作子401〜403を表示させる。操作子301〜310の周波数軸方向の位置は、それぞれ予め設定されている。制御部23は、初期状態として、レベルが0の位置に、操作子301〜310をそれぞれ表示させる。
When the part extracted from the
制御部23は、音声解析部21が抽出したパートを、パート操作子401〜403としてディスプレイ24に表示させる。パート操作子401〜403の周波数軸方向の表示位置は、それぞれ対応するパートの主要帯域である。主要帯域は、パートの音のレベルが最も高くなる帯域である。主要帯域は、図2(B)に示すように、例えばパートDB22に記憶され、パートの帯域B1〜B3のいずれかが設定される。パート操作子401〜403のレベル軸方向の表示位置は、初期状態として、それぞれレベルが0の位置である。
The
パート操作子401〜403は、それぞれパートを示す画像として表示される。パートを示す画像は、例えばパートDB22に記憶され、制御部23がパートDB22を参照することにより、求められる。
Each of the
例えば、パート操作子401は、図3(A)に示す例において、コントラバスの帯域B1(150Hz〜250Hz)に対応する位置に表示されている。パート操作子401は、コントラバスを示す画像として表示されている。パート操作子402は、女声の帯域B1(500Hz〜700Hz)に対応する位置に表示されている。パート操作子402は、女声を示す画像として表示されている。パート操作子403は、シンバルの帯域B3(10kHz〜14kHz)に対応する位置に表示されている。パート操作子403は、シンバルを示す画像として表示されている。
For example, the
ユーザは、ディスプレイ24に表示された操作子301〜310及びパート操作子401〜403に対して、レベル調整の操作を行う。ユーザは、操作子301〜310及びパート操作子401〜403をそれぞれレベル軸方向に沿って移動させて、レベル調整量を指定する操作を行う。レベル調整の操作は、タッチパネル25に受け付けられる。
The user performs level adjustment operations on the
制御部23は、操作されたパート操作子401〜403と、該パート操作子401〜403の移動量とに基づいて、レベル調整すべき3つの周波数帯域と、レベル調整量とを求める。具体的には、制御部23は、操作されたパート操作子401〜403に対応するパートを特定する。制御部23は、特定したパートの音の周波数特性に基づいてレベル調整すべき3つの周波数帯域を求める。本実施形態では、レベル調整すべき3つの周波数帯域は、特定されたパートの帯域B1〜B3とそれぞれ同じ帯域に設定する。すなわち、レベル調整すべき3つの周波数帯域は、制御部23がパートDB22を参照することにより求められる。制御部23は、操作されたパート操作子401〜403の移動量に応じて、レベル調整量を求める。ただし、レベル調整すべき3つの周波数帯域は、基音及び倍音のそれぞれの中心周波数を含めばよく、帯域B1〜B3よりそれぞれ広くてもよいし、帯域B1〜B3よりそれぞれ狭くてもよい。
Based on the operated
例えば、図3(A)に示す例において、女声を示すパート操作子402が操作されると、制御部23は、パートDB22を参照して、女声の帯域B1(500Hz〜700Hz)、帯域B2(1kHz〜1.4kHz)、及び帯域B3(1.7kHz〜2kHz)をレベル調整すべき3つの周波数帯域として求める。
For example, in the example shown in FIG. 3A, when the
そして、制御部23は、女声の帯域B1〜B3をレベル調整量と共にレベル調整部12に与える。
Then, the
レベル調整部12は、図4に示すように、2つの帯域レベル調整部100と、合成部200とを備える。各帯域レベル調整部100は、抽出部101と、ゲイン調整部102とをそれぞれ備える。ただし、レベル調整部12は、2つに限らず、1つ又は3つ以上の帯域レベル調整部100を備えていてもよい。
As shown in FIG. 4, the
レベル調整部12に入力された音声信号は、合成部200と、各帯域レベル調整部100とに入力される。
The audio signal input to the
帯域レベル調整部100は、レベル調整すべき帯域を抽出して、当該帯域のレベル調整量に応じたゲインで抽出した帯域の音声信号のレベルを調整するものである。レベル調整された音声信号は、合成部200によってレベル調整部12に入力された音声信号に合成される。このように、帯域レベル調整部100は、レベル調整すべき帯域のレベルを調整する。
The band
より具体的には、帯域レベル調整部100に入力された音声信号は、抽出部101に入力される。抽出部101は、入力された音声信号から、制御部23により与えられた女声の帯域B1〜B3の音声信号を抽出して出力する。抽出部101から出力された音声信号は、ゲイン調整部102に入力される。ゲイン調整部102は、制御部23から与えられたレベル調整量に応じたゲインでレベルを調整した音声信号を出力する。ゲイン調整部102から出力された音声信号は、合成部200に入力される。
More specifically, the audio signal input to the band
すると、レベル調整部12に入力された音声信号は、女声に対応する帯域B1(500Hz〜700Hz)、帯域B2(1kHz〜1.4kHz)、及び帯域B3(1.7kHz〜2kHz)のレベルが調整される。
Then, the level of the band B1 (500 Hz to 700 Hz), the band B2 (1 kHz to 1.4 kHz), and the band B3 (1.7 kHz to 2 kHz) corresponding to the female voice is adjusted in the audio signal input to the
このように、信号処理装置1は、女声の第1〜第3フォルマント周波数のレベルを同時に調整するため、女声だけを強調又は減衰することができる。 Thus, since the signal processing apparatus 1 adjusts the level of the first to third formant frequencies of the female voice at the same time, only the female voice can be emphasized or attenuated.
上述のように、周波数500Hz、周波数1kHz、及び周波数2kHzは、女声に対応する帯域B1〜B3に含まれているため、制御部23は、図3(B)に示すように、周波数500Hz、周波数1kHz、及び周波数2kHzに対応する操作子305、306、及び307のレベル軸方向の表示位置を変更してもよい。
As described above, since the
なお、制御部23は、操作子301〜310が操作された場合も、操作された操作子に対応する周波数を含む帯域Bとレベル調整量とをレベル調整部12に与える。すなわち、信号処理装置1は、操作子301〜310が操作されると、操作子301〜310に対応する帯域Bだけのレベルを調整する。
Note that the
レベル調整部12は、周波数帯域毎にレベル調整した音声信号を出力部13に出力する。出力部13は、信号処理装置1の外部にレベル調整された音声信号を出力する。音声信号の出力の際、出力部13は、出力先に応じて、音声信号をデジタルアナログ変換したり、増幅したりしてもよい。
The
以上のように、信号処理装置1は、パートを示す画像でパート操作子401〜403を表示する。そして、信号処理装置1は、パート操作子401〜403が操作されると、対応するパートの音のレベルを調整する。したがって、ユーザは、レベル調整したいパートの基音及び倍音の周波数が分からなくても、表示されたパートを示すパート操作子401〜403を用いて、直感的にパートの音のレベルを調整する操作ができる。
As described above, the signal processing apparatus 1 displays the
なお、レベル調整量は、パートの帯域B1〜B3毎に異なる値が設定されてもよい。例えば、帯域B2,B3に対するレベル調整量は、帯域B1に対するレベル調整量より小さくしてもよいし、帯域B1に対するレベル調整量より大きくしてもよい。また、帯域B1〜B3に対するレベル調整量は、パートの倍音構成に応じた量が設定されてもよい。 The level adjustment amount may be set to a different value for each part band B1 to B3. For example, the level adjustment amount for the bands B2 and B3 may be smaller than the level adjustment amount for the band B1, or may be larger than the level adjustment amount for the band B1. Further, the level adjustment amount for the bands B1 to B3 may be set according to the overtone structure of the part.
また、制御部23は、3つの帯域B1〜B3ではなく、2つの帯域B1,B2をレベル調整部12に与える態様であっても構わないし、4つ以上の帯域を与える態様であっても構わない。また、制御部23は、1つの主要帯域だけをレベル調整部12に与える態様であっても構わない。
In addition, the
また、上述の例は、制御部23が抽出されたパートの3つの帯域B1〜B3をレベル調整部12に与える態様であったが、抽出されたパートそのものをレベル調整部12に与える態様であっても構わない。レベル調整部12は、抽出されたパートそのものが与えられる態様の場合、各パートに対応付けられた帯域レベル調整部100を備える。この場合、帯域レベル調整部100の抽出部101は、所定のパートの帯域B1〜B3が予め設定され、ゲイン調整部102は、抽出されたパートが制御部23から与えられると、ゲイン調整の機能を有効化する。
In the above-described example, the
また、入力部11、レベル調整部12、出力部13、音声解析部21、及び制御部23のそれぞれの機能は、ハードウェアに限らず、ソフトウェアによって実現されてもよい。すなわち、これら機能部の処理をプログラム化して記憶媒体に記憶しておき、演算器(コンピュータ等)で当該プログラムを読み出して実行することで上述の処理を実現することが可能である。
The functions of the
次に、帯域レベル調整部100の変形例に係る帯域レベル調整部100Aについて、図5を用いて説明する。図5は、帯域レベル調整部100Aのブロック図である。
Next, a band
帯域レベル調整部100Aは、入力された音声信号の帯域B1〜B3のレベルを検知して、帯域B1〜B3のレベルが所定の閾値以上の時、入力された音声信号の帯域B1〜B3のレベルを調整し、帯域B1〜B3のレベルが所定の閾値未満の時、レベル調整を行わない点において、帯域レベル調整部100と相違する。帯域レベル調整部100と重複する構成の説明は省略する。
The band
帯域レベル調整部100Aは、抽出部101と、ゲイン調整部102と、検知部103とを備える。
The band
抽出部101によって抽出された音声信号は、ゲイン調整部102と検知部103とに入力される。検知部103は、入力された音声信号のレベルを検知する。検知部103は、レベルが所定の閾値未満の場合、制御部23の制御にかかわらず、ゲイン調整部102のゲインを0にする制御を行う。レベル調整部12に入力された音声信号は、ゲイン調整部102のゲインが0に設定されると、抽出部101が抽出した帯域ではレベルが保たれたままレベル調整部12から出力される。
The audio signal extracted by the
ゲイン調整部102は、検知部103が検知したレベルが所定の閾値以上の場合、制御部23から入力されたゲインで音声信号を増幅する。
The
帯域レベル調整部100Aは、例えばパートの音が大きい時だけレベルを調整したい場合に用いられる。その結果、帯域レベル調整部100Aは、パートの音が小さい時又はパートの音が含まれない時にもレベル調整を行って、該パートと同じ帯域に含まれる他のパートの音をレベル調整してしまうことがない。
The band
なお、検知部103は、ゲイン調整部102のゲインをオンオフするのではなく、検知したレベルに応じて、ゲイン調整部102のゲインを調整してもよい。
Note that the
次に、実施形態2に係る信号処理装置2について、図6乃至図8を用いて説明する。図6は、信号処理装置2のブロック図の一部を示す図である。図7(A)及び図7(B)は、それぞれディスプレイ24が表示する画像の例を示す図である。
Next, the
実施形態2に係る信号処理装置2は、L,Rチャンネルの音声信号が入力され、音声信号毎にレベルを調整する点において、信号処理装置1と相違する。信号処理装置1と重複する構成の説明は省略する。
The
信号処理装置2は、図6に示すように、入力部11A、レベル調整部12A、出力部13A、音声解析部21A、パートDB22、制御部23、ディスプレイ24、及びタッチパネル25を備える。
As shown in FIG. 6, the
入力部11Aは、L,Rチャンネルの音声信号が入力され、各チャンネルの音声信号を出力する点において、入力部11と相違する。出力部13Aは、L,Rチャンネルの音声信号が入力され、各チャンネルの音声信号を出力する点において、出力部13と相違する。
The
レベル調整部12Aは、レベル調整部12L,12Rを備える。レベル調整部12Lは、Lチャンネルの音声信号のレベルを調整する。レベル調整部12Rは、Rチャンネルの音声信号のレベルを調整する。レベル調整部12L,12Rの構成は、レベル調整部12の構成と同じである。
The
音声解析部21Aは、L,Rチャンネルの音声信号を合成した合成音声信号に対して、解析を行い、該合成音声信号に含まれるパートを抽出する点において、音声解析部21と相違する。
The
音声解析部21Aは、さらに、抽出したパートのLチャンネルの成分とRチャンネルの成分とに基づいて、該パートの仮想空間上の左右方向の位置を求める。例えば、音声解析部21Aは、抽出したパートの3つの帯域B1〜B3において、Lチャンネルの音声信号のレベルとRチャンネルの音声信号のレベルとを計測する。そして、音声解析部21Aは、計測した2つのレベルの時間平均を求める。ここで、抽出したパートの3つの帯域B1〜B3に対し、Lチャンネルの音声信号の平均レベルをAveLとし、Rチャンネルの音声信号の平均レベルをAveRとして、以下説明する。
The
例えば、コントラバスの帯域B1〜B3に対し、AveL対AveRは1:9とする。この場合、制御部23は、ディスプレイ24の表示領域の横幅を右側から1:9で分割した位置にコントラバスを示すパート操作子401を表示させる。例えば、女声の帯域B1〜B3に対し、AveL対AveRは5:5とする。この場合、制御部23は、ディスプレイ24の表示領域の横幅を右側から5:5で分割した位置に女声を示すパート操作子402を表示させる。例えば、シンバルの帯域B1〜B3に対し、AveL対AveRは8:2とする。この場合、制御部23は、ディスプレイ24の表示領域の横幅を右側から8:2で分割した位置にシンバルを示すパート操作子403を表示させる。
For example, AveL vs. AveR is 1: 9 for the bandwidths B1 to B3 of the contrabus. In this case, the
また、制御部23は、仮想空間をステージに模してディスプレイ24に表示させる。ただし、ステージを模した画像は、例えばパートDB22に記憶されている。すると、ディスプレイ24は、横軸をステージ上の左右方向の位置とし、縦軸をレベルとした表示を行う。
In addition, the
すると、ディスプレイ24は、図7(A)に示すように、ステージ上に存在する各パートを模したように、パート操作子401〜403を表示する。図7(A)に示す例では、例えば、パート操作子401は、ステージ右側に表示され、パート操作子402は、ステージ中央に表示され、パート操作子403は、ステージ左側に表示されている。
Then, the
そして、制御部23は、図7(B)に示すように、パート操作子401〜403が縦方向に沿って移動操作されると、操作されたパート操作子401〜403に対応するパートの帯域B1〜B3と、レベル調整量とを、レベル調整部12L,12Rに与えることにより、各音声信号のレベルを調整する。
Then, as shown in FIG. 7B, when the
なお、パート操作子401〜403のステージ上の左右方向の位置は、AveLとAveRとの比率によって求めるのではなく、所定の位置に設定されてもよい。所定の位置は、例えば、パートDB22に記憶される。
Note that the positions of the
また、信号処理装置2は、L,Rチャンネルに限らず、マルチチャンネルの音声信号からパートを抽出する態様であっても構わない。さらに、信号処理装置2は、抽出したパートの帯域B1〜B3について、例えばフロントLチャンネルの音声信号の平均レベルとサラウンドLチャンネルの音声信号の平均レベルとをそれぞれ算出することにより、仮想空間におけるパート操作子の奥行き方向の位置を求めて、ディスプレイ24に表示してもよい。
Further, the
また、信号処理装置2は、L,Rチャンネルの音声信号の合成音声信号からパートを抽出するのではなく、チャンネル毎に、パートを抽出してディスプレイ24にパート操作子401〜403を表示し、チャンネル毎に音声信号のレベルを調整してもよい。この場合、制御部23は、図3(A)の例と同様に、横軸を周波数としてパート操作子401〜403を表示する。
In addition, the
次に、レベル調整部12L,12Rの変形例に係るレベル調整部12LB,12RBについて、図8を用いて説明する。図8は、レベル調整部12LB,12RBのブロック図である。
Next, level adjusting units 12LB and 12RB according to a modification of the
レベル調整部12LB,12RBは、2つの帯域レベル調整部100Bと合成部200とを備える点において、レベル調整部12L,12Rと相違する。帯域レベル調整部100Bは、ゲイン調整部102と合成部200との間にチャンネル調整部104を備える点において、帯域レベル調整部100と相違する。すなわち、レベル調整部12LB,12RBは、レベル調整部12LBのチャンネル調整部104とレベル調整部12RBのチャンネル調整部104との組を用いることにより、各パートについて、L,Rチャンネル間のレベル比率を調整するものである。
The level adjusting units 12LB and 12RB are different from the
チャンネル調整部104は、制御部23から入力されるゲインで音声信号のレベルを調整して出力する。チャンネル調整部104のゲインは、音声解析部21Aが求めたAveLとAveRとの比に基づいて設定される。例えば、コントラバスの帯域B1〜B3に対し、AveL対AveRが1:9であると、レベル調整部12LBのコントラバスに対応する帯域レベル調整部100Bのチャネル調整部104のゲインと、レベル調整部12RBのコントラバスに対応する帯域レベル調整部100Bのチャネル調整部104のゲインとの比が1:9になるように設定される。その結果、Rチャンネルの音声信号に含まれるコントラバスの音は、強調される。このように、コントラバスが含まれるチャンネルの音声信号のレベルだけが調整される。
The
また、レベル調整部12LB,12RBは、パートの音をチャンネル毎に調整するチャンネル調整部104を備えることにより、以下のようなレベル調整も可能とする。例えば、レベル調整部12LB,12RBは、ディスプレイ24にコントラバスを示すパート操作子401がステージ上の右側及び左側の2箇所に表示されている場合、右側のパート操作子401に対する操作入力に基づいてRチャンネルに対応するチャンネル調整部104のゲインが調整されることにより、右側だけのコントラバスの音のレベルを調整する。
Further, the level adjustment units 12LB and 12RB include the
1,2…信号処理装置
11,11A…入力部
12,12A,12B,12L,12R,12LB,12RB…レベル調整部
13,13A…出力部
21,21A…音声解析部
22…パートDB
23…制御部
24…ディスプレイ
25…タッチパネル
100,100A,100B…帯域レベル調整部
101…抽出部
102…レベル調整部
103…検知部
104…チャンネル調整部
200…合成部
301〜310…操作子
401〜403…パート操作子
DESCRIPTION OF
DESCRIPTION OF
Claims (5)
前記入力部に入力された音声信号から、周波数のピーク成分に基づいてパートを抽出するパート抽出部と、
前記パート抽出部が抽出したパート毎にレベル調整用のパート操作子を表示する表示部と、
前記パート操作子に対する操作入力を受け付ける操作部と、
前記操作部に受け付けられた操作入力に基づいて、前記パート毎に対応する周波数のレベルを調整するレベル調整部と、
を備える信号処理装置。 An input unit to which an audio signal is input;
A part extraction unit for extracting a part based on a frequency peak component from the audio signal input to the input unit;
A display unit for displaying a part operator for level adjustment for each part extracted by the part extraction unit;
An operation unit for accepting an operation input to the part operator;
A level adjustment unit that adjusts the level of the frequency corresponding to each part based on the operation input received by the operation unit;
A signal processing apparatus comprising:
請求項1に記載の信号処理装置。 The level adjusting unit adjusts the level of the fundamental and harmonic frequencies for each part.
The signal processing apparatus according to claim 1.
前記表示部は、前記表示位置決定部が決定した表示位置に前記パート操作子を表示する、
請求項1又は2に記載の信号処理装置。 A display position determination unit that determines a display position for each part based on the extraction result by the part extraction unit;
The display unit displays the part operator at the display position determined by the display position determination unit.
The signal processing apparatus according to claim 1 or 2.
前記レベル調整部は、前記レベル検知部が検知したパート毎のレベル及び前記操作入力に基づいて、レベル調整量を制御する、
請求項1乃至請求項3のいずれかに記載の信号処理装置。 A level detection unit that detects the level of each part extracted by the part extraction unit;
The level adjustment unit controls a level adjustment amount based on the level for each part detected by the level detection unit and the operation input.
The signal processing device according to claim 1.
前記入力ステップで入力された音声信号から、周波数のピーク成分に基づいてパートを抽出するパート抽出ステップと、
前記パート抽出ステップで抽出されたパート毎にレベル調整用のパート操作子を表示する表示ステップと、
前記パート操作子に対する操作入力を受け付ける操作ステップと、
前記操作ステップで受け付けられた操作入力に基づいて、前記パート毎に対応する周波数のレベルを調整するレベル調整ステップと、
を信号処理装置に実行させるプログラム。 An input step in which an audio signal is input;
A part extraction step of extracting a part from the audio signal input in the input step based on a frequency peak component;
A display step for displaying a part operator for level adjustment for each part extracted in the part extraction step;
An operation step for accepting an operation input to the part operator;
Based on the operation input accepted in the operation step, a level adjustment step for adjusting the level of the frequency corresponding to each part;
A program for causing a signal processing device to execute.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013182885A JP2015049470A (en) | 2013-09-04 | 2013-09-04 | Signal processor and program for the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013182885A JP2015049470A (en) | 2013-09-04 | 2013-09-04 | Signal processor and program for the same |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015049470A true JP2015049470A (en) | 2015-03-16 |
Family
ID=52699505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013182885A Pending JP2015049470A (en) | 2013-09-04 | 2013-09-04 | Signal processor and program for the same |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2015049470A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019508964A (en) * | 2016-02-03 | 2019-03-28 | グローバル ディライト テクノロジーズ プライベート リミテッドGlobal Delight Technologies Pvt. Ltd. | Method and system for providing virtual surround sound on headphones |
JP2020181119A (en) * | 2019-04-26 | 2020-11-05 | 株式会社アリソン | Music editing system, music editing service provision method, and music editing program |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005175562A (en) * | 2003-12-08 | 2005-06-30 | Alpine Electronics Inc | Graphic equalizer and adjustment method thereof |
WO2008133097A1 (en) * | 2007-04-13 | 2008-11-06 | Kyoto University | Sound source separation system, sound source separation method, and computer program for sound source separation |
JP2009206986A (en) * | 2008-02-28 | 2009-09-10 | Canon Inc | Image output device and image output method |
JP2010512042A (en) * | 2006-12-01 | 2010-04-15 | エルジー エレクトロニクス インコーポレイティド | Command input device and method, media signal user interface display method and implementation thereof, and mix signal processing device and method |
JP2010187363A (en) * | 2009-01-16 | 2010-08-26 | Sanyo Electric Co Ltd | Acoustic signal processing apparatus and reproducing device |
JP2011223433A (en) * | 2010-04-13 | 2011-11-04 | Alpine Electronics Inc | Sound quality adjusting apparatus and method |
JP2013168878A (en) * | 2012-02-16 | 2013-08-29 | Olympus Imaging Corp | Recording device |
-
2013
- 2013-09-04 JP JP2013182885A patent/JP2015049470A/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005175562A (en) * | 2003-12-08 | 2005-06-30 | Alpine Electronics Inc | Graphic equalizer and adjustment method thereof |
JP2010512042A (en) * | 2006-12-01 | 2010-04-15 | エルジー エレクトロニクス インコーポレイティド | Command input device and method, media signal user interface display method and implementation thereof, and mix signal processing device and method |
WO2008133097A1 (en) * | 2007-04-13 | 2008-11-06 | Kyoto University | Sound source separation system, sound source separation method, and computer program for sound source separation |
JP2009206986A (en) * | 2008-02-28 | 2009-09-10 | Canon Inc | Image output device and image output method |
JP2010187363A (en) * | 2009-01-16 | 2010-08-26 | Sanyo Electric Co Ltd | Acoustic signal processing apparatus and reproducing device |
JP2011223433A (en) * | 2010-04-13 | 2011-11-04 | Alpine Electronics Inc | Sound quality adjusting apparatus and method |
JP2013168878A (en) * | 2012-02-16 | 2013-08-29 | Olympus Imaging Corp | Recording device |
Non-Patent Citations (1)
Title |
---|
糸山 克寿、外2名: "音楽情報処理最前線! 第18回", DTM MAGAZINE, vol. 第17巻 第4号, JPN6017012987, 8 March 2010 (2010-03-08), JP, ISSN: 0003538602 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019508964A (en) * | 2016-02-03 | 2019-03-28 | グローバル ディライト テクノロジーズ プライベート リミテッドGlobal Delight Technologies Pvt. Ltd. | Method and system for providing virtual surround sound on headphones |
JP2020181119A (en) * | 2019-04-26 | 2020-11-05 | 株式会社アリソン | Music editing system, music editing service provision method, and music editing program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210204003A1 (en) | Network-based processing and distribution of multimedia content of a live musical performance | |
CN104185870B (en) | Acoustic signal processing device and acoustics signal processing method | |
JP6696140B2 (en) | Sound processor | |
WO2018017878A1 (en) | Network-based processing and distribution of multimedia content of a live musical performance | |
US9628907B2 (en) | Audio device and method having bypass function for effect change | |
US9071215B2 (en) | Audio signal processing device, method, program, and recording medium for processing audio signal to be reproduced by plurality of speakers | |
WO2012081315A1 (en) | Sound reproduction device, reproduction sound adjustment method, acoustic property adjustment device, acoustic property adjustment method, and computer program | |
WO2013168200A1 (en) | Audio processing device, playback device, audio processing method, and program | |
CN114067827A (en) | Audio processing method and device and storage medium | |
JP5690082B2 (en) | Audio signal processing apparatus, method, program, and recording medium | |
JP5736124B2 (en) | Audio signal processing apparatus, method, program, and recording medium | |
JP2015049470A (en) | Signal processor and program for the same | |
JP2016134769A (en) | Audio signal processor | |
JP6319653B2 (en) | Signal processing apparatus and program | |
US10362396B2 (en) | Phase control signal generation device, phase control signal generation method, and phase control signal generation program | |
US20160274858A1 (en) | Displaying attenuating audio signal level in delayed fashion | |
CN113905307A (en) | Color slide block | |
Nishihara et al. | Loudness perception of low tones undergoing partial masking by higher tones in orchestral music in concert halls | |
JP2016134767A (en) | Audio signal processor | |
US9972335B2 (en) | Signal processing apparatus, signal processing method, and program for adding long or short reverberation to an input audio based on audio tone being moderate or ordinary | |
JP2018173442A (en) | Effect imparting device and effect imparting program | |
JP2017169036A (en) | Signal processor | |
JP6314803B2 (en) | Signal processing apparatus, signal processing method, and program | |
JP6819236B2 (en) | Sound processing equipment, sound processing methods, and programs | |
US20220343883A1 (en) | Improvements to audio pitch processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160720 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170406 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170418 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170609 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171121 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180522 |