JP2023054301A - Sound control device, sound control method and sound control program - Google Patents

Sound control device, sound control method and sound control program Download PDF

Info

Publication number
JP2023054301A
JP2023054301A JP2023027101A JP2023027101A JP2023054301A JP 2023054301 A JP2023054301 A JP 2023054301A JP 2023027101 A JP2023027101 A JP 2023027101A JP 2023027101 A JP2023027101 A JP 2023027101A JP 2023054301 A JP2023054301 A JP 2023054301A
Authority
JP
Japan
Prior art keywords
sound
frequency characteristic
data
adjustment
frequency characteristics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023027101A
Other languages
Japanese (ja)
Inventor
文伸 加来
Fuminobu Kaku
啓太郎 菅原
Keitaro Sugawara
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
Original Assignee
Pioneer Electronic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Electronic Corp filed Critical Pioneer Electronic Corp
Priority to JP2023027101A priority Critical patent/JP2023054301A/en
Publication of JP2023054301A publication Critical patent/JP2023054301A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a sound control device that can appropriately perform frequency characteristic adjustment or the like to perform sound emission of music while removing acoustic influence in an in-vehicle space.
SOLUTION: A sound control device comprises: a frequency characteristics analyzing section 1 that determines whether or not an adjustment value which is used for adjustment of frequency characteristics of sound data in performing sound emission is updated on the basis of at least one of sound data corresponding to sound to be emitted and sound collection data corresponding to the sound collected by a microphone MC that collects sound in an in-vehicle space where the sound is emitted; and an equalizer value setting section 2 that updates the adjustment value when it is determined that the updating is performed, and causes the sound corresponding to the sound data, in which the frequency characteristics is adjusted, to emit from a speaker SP using the adjustment value after the updating.
SELECTED DRAWING: Figure 2
COPYRIGHT: (C)2023,JPO&INPIT

Description

本願は、音制御装置、音制御方法及び音制御プログラムの技術分野に属する。より詳細には、音の調整態様を制御する音制御装置及び音制御方法並びに当該音制御装置に用いられる音制御プログラムの技術分野に属する。 The present application belongs to the technical field of a sound control device, a sound control method, and a sound control program. More specifically, it belongs to the technical field of a sound control device and a sound control method for controlling a sound adjustment mode, and a sound control program used in the sound control device.

例えば車両にオーディオ装置を搭載し、移動中に音楽を楽しむことが行われる。ここで、車両の内部空間(以下、当該内部空間を単に「車内空間」と称する)の形状等による音響的な特性は、車種によって変わる他、乗車している搭乗者の数や乗車位置、又はその移動環境に起因する音(例えばいわゆる風切り音やロードノイズ、又は雨音等の気象状況に起因する音等)の影響によって、その都度変わる。よって、音響的な特性が変わっても原音に対応した音楽を楽しむためには、上記車内空間に原音を放音する際の周波数特性等を、当該車内空間の音響的な特性に対応させて補正することを含めて調整することが必要となる。そして、このような補正を含む調整を行う場合、従来では、車両が停止している状態で既定のテスト音を車内空間に放音し、その音響的な特性を評価することが行われていた。しかしながらこの場合、その車両の移動環境や搭乗者の乗車位置等を反映させた補正を含む調整はできない。そこで、移動中に車内空間に放音されている音楽を用いて上記周波数特性等の補正を含む調整を行うことが検討されている。このような検討に関連する先行技術の一例としては、例えば下記特許文献1に記載された技術がある。この特許文献1に記載されている技術では、車両の移動中に放音されている音楽によって、その周波数特性等を補正して調整する構成とされている。 For example, an audio device is installed in a vehicle to enjoy music while moving. Here, the acoustic characteristics due to the shape of the interior space of the vehicle (hereinafter, the interior space is simply referred to as the “interior space”) vary depending on the vehicle type, the number of passengers on board, the position of the passenger, or It changes each time due to the influence of sounds caused by the movement environment (for example, so-called wind noise, road noise, or sounds caused by weather conditions such as rain). Therefore, in order to enjoy music that corresponds to the original sound even if the acoustic characteristics change, it is necessary to correct the frequency characteristics, etc., when the original sound is emitted into the vehicle interior space so as to correspond to the acoustic characteristics of the vehicle interior space. It is necessary to make adjustments including Conventionally, when making adjustments that include such corrections, a predetermined test sound is emitted into the vehicle interior while the vehicle is stopped, and its acoustic characteristics are evaluated. . However, in this case, adjustment including correction reflecting the moving environment of the vehicle, the boarding position of the passenger, and the like cannot be performed. Therefore, it is being considered to perform adjustments including correction of the above-described frequency characteristics using music emitted in the vehicle interior space while the vehicle is moving. As an example of prior art related to such studies, there is a technique described in Patent Literature 1 below, for example. The technique described in Patent Document 1 is configured to correct and adjust the frequency characteristics and the like of the music emitted while the vehicle is moving.

特開平5-299957号公報JP-A-5-299957

しかしながら、上記特許文献1に記載されている技術を用いた場合には、例えば上記移動環境の影響が大きい場合や、放音対象たる原音自体の周波数特性に偏りがあるような場合等、その補正を含む調整のために既定された測定条件が具備されていない場合には、当該補正を含む調整を適切に行うことができないという問題点があった。 However, when the technique described in Patent Document 1 is used, for example, when the influence of the moving environment is large, or when the frequency characteristics of the original sound to be emitted are biased, correction of such problems may occur. There is a problem that the adjustment including the correction cannot be properly performed if the predetermined measurement conditions for the adjustment including the correction are not provided.

そこで本願は、上記の問題点に鑑みて為されたもので、その課題の一例は、上記車内空間における音響的な影響を排除しつつ、周波数特性等の調整を適切に行って音楽を放音させることが可能な音制御装置及び音制御方法並びに当該音制御装置に用いられる音制御プログラムを提供することにある。 Therefore, the present application has been made in view of the above problems, and one example of the problem is to emit music by appropriately adjusting the frequency characteristics etc. while eliminating the acoustic influence in the above-mentioned interior space. It is an object of the present invention to provide a sound control device, a sound control method, and a sound control program used for the sound control device, which can control the sound.

上記の課題を解決するために、請求項1に記載の発明は、放音されるべき原音に対応する原音情報、及び、当該原音が放音される空間の音を集音する集音手段により集音された当該音に相当する集音情報の少なくともいずれか一方に基づいて、前記原音を放音する際の前記原音情報の周波数特性の調整に用いられる調整値を更新する更新処理を行うか否かを判定する判定手段と、前記更新処理を行うと判定された場合に前記調整値を更新し、当該更新後の前記調整値を用いて前記周波数特性が調整された前記原音情報に対応する前記原音を放音手段から放音させる更新手段と、を備える。 In order to solve the above-mentioned problems, the invention described in claim 1 provides original sound information corresponding to the original sound to be emitted, and sound collecting means for collecting the sound of the space from which the original sound is emitted. Based on at least one of collected sound information corresponding to the collected sound, whether to perform an update process of updating an adjustment value used for adjusting the frequency characteristics of the original sound information when emitting the original sound determining means for determining whether or not to perform the update processing, updating the adjustment value when it is determined to perform the update processing, and using the updated adjustment value to correspond to the original sound information in which the frequency characteristic has been adjusted and updating means for emitting the original sound from the sound emitting means.

上記の課題を解決するために、請求項9に記載の発明は、原音が放音される空間の移動速度を示す速度情報を取得する速度情報取得手段と、前記取得された速度情報に基づいて、前記原音を放音する際の当該原音に対応する原音情報の周波数特性の調整に用いられる調整値を更新する更新処理を行うか否かを判定する判定手段と、前記更新処理を行うと判定された場合に前記調整値を更新し、当該更新後の調整値を用いて前記周波数特性が調整された前記原音情報に対応する前記原音を放音手段から放音させる更新手段と、を備える。 In order to solve the above problems, the invention according to claim 9 provides speed information acquisition means for acquiring speed information indicating a moving speed in a space in which the original sound is emitted, and based on the acquired speed information, a determination means for determining whether or not to perform an update process for updating an adjustment value used for adjusting the frequency characteristics of the original sound information corresponding to the original sound when the original sound is emitted; and determining to perform the update process. updating means for updating the adjustment value when the adjustment value is adjusted, and causing the sound emitting means to emit the original sound corresponding to the original sound information whose frequency characteristics have been adjusted using the updated adjustment value.

上記の課題を解決するために、請求項10に記載の発明は、判定手段と、更新手段と、を備え、集音手段及び放音手段に接続された音制御装置において実行される音制御方法において、放音されるべき原音に対応する原音情報、及び、当該原音が放音される空間の音を集音する前記集音手段により集音された当該音に相当する集音情報の少なくともいずれか一方に基づいて、前記原音を放音する際の前記原音情報の周波数特性の調整に用いられる調整値を更新する更新処理を行うか否かを前記判定手段により判定する判定工程と、前記更新処理を行うと判定された場合に前記調整値を前記更新手段により更新し、当該更新後の前記調整値を用いて前記周波数特性が調整された前記原音情報に対応する前記原音を放音手段から放音させる更新工程と、を含む。 In order to solve the above-mentioned problems, the invention according to claim 10 provides a sound control method that is executed in a sound control device that includes determination means and update means and is connected to sound collection means and sound emission means. at least one of original sound information corresponding to the original sound to be emitted and collected sound information corresponding to the sound collected by the sound collecting means for collecting the sound in the space where the original sound is emitted a determination step of determining, by the determination means, whether or not to perform an update process of updating an adjustment value used for adjusting the frequency characteristics of the original sound information when emitting the original sound, based on one of the above; updating the adjustment value by the updating means when it is determined that the processing is to be performed, and emitting the original sound corresponding to the original sound information whose frequency characteristics have been adjusted using the updated adjustment value from the sound emitting means; and an updating step of emitting sound.

上記の課題を解決するために、請求項11に記載の発明は、集音手段及び放音手段に接続されたコンピュータを、請求項1から請求項9のいずれか一項に記載の音制御装置として機能させるように構成される。 In order to solve the above problems, the invention according to claim 11 provides a computer connected to the sound collecting means and the sound emitting means, the sound control device according to any one of claims 1 to 9. configured to function as

実施形態に係る音制御装置の概要構成を示すブロック図である。1 is a block diagram showing a schematic configuration of a sound control device according to an embodiment; FIG. 実施例に係る音場調整装置の概要構成を示すブロック図である。1 is a block diagram showing a schematic configuration of a sound field adjustment device according to an embodiment; FIG. 実施例に係る音場調整処理を示すフローチャートである。6 is a flowchart showing sound field adjustment processing according to the embodiment; 実施例に係る音場調整処理の細部を説明する概念図である。FIG. 4 is a conceptual diagram illustrating details of sound field adjustment processing according to an embodiment;

次に、本願を実施するための形態について、図1を用いて説明する。なお図1は、実施形態に係る音制御装置の概要構成を示すブロック図である。 Next, the form for implementing this application is demonstrated using FIG. Note that FIG. 1 is a block diagram showing a schematic configuration of the sound control device according to the embodiment.

図1に示すように、実施形態に係る音制御装置Sは、マイク等の集音手段MCに接続された判定手段1と、スピーカ等の放音手段SPに接続された更新手段2と、を備えて構成されている。 As shown in FIG. 1, the sound control device S according to the embodiment includes a determination means 1 connected to a sound collecting means MC such as a microphone, and an updating means 2 connected to a sound emitting means SP such as a speaker. configured with.

この構成において判定手段1は、放音されるべき原音に対応する原音情報、及び、当該原音が放音される空間の音を集音する集音手段MCにより集音された当該音に相当する集音情報の少なくともいずれか一方に基づいて、上記原音を放音する際の上記原音情報の周波数特性の調整に用いられる調整値を更新する更新処理を行うか否かを判定する。 In this configuration, the determination means 1 corresponds to the original sound information corresponding to the original sound to be emitted, and the sound collected by the sound collecting means MC for collecting the sound of the space where the original sound is emitted. Based on at least one of the collected sound information, it is determined whether or not to perform update processing for updating adjustment values used for adjusting the frequency characteristics of the original sound information when emitting the original sound.

そして更新手段2は、上記更新処理を行うと判定された場合に上記調整値を更新し、当該更新後の調整値を用いて上記周波数特性が調整された上記原音情報に対応する上記原音を放音手段SPから放音させる。 The updating means 2 updates the adjustment value when it is determined that the update processing is to be performed, and emits the original sound corresponding to the original sound information whose frequency characteristics have been adjusted using the updated adjustment value. A sound is emitted from the sound means SP.

以上説明したように、実施形態に係る音制御装置Sの動作によれば、上記原音情報及び上記集音情報の少なくともいずれか一方に基づいて、原音を放音する際の原音情報の周波数特性の調整に用いられる調整値を更新する更新処理を行うか否かを判定するので、集音情報等に基づき、原音が放音される空間の影響を排除しつつ、原音情報の周波数特性の調整を適切に行って放音させることができる。 As described above, according to the operation of the sound control device S according to the embodiment, based on at least one of the original sound information and the collected sound information, the frequency characteristics of the original sound information when emitting the original sound can be changed. Since it is determined whether or not to update the adjustment value used for adjustment, it is possible to adjust the frequency characteristics of the original sound information while eliminating the influence of the space where the original sound is emitted based on the collected sound information. It can be made to go properly and emit sound.

次に、上述した実施形態に対応する具体的な実施例について、図2乃至図4を用いて説明する。なお以下に説明する実施例は、車両に搭載されたカーオーディオ装置から例えば音楽等の音を再生する場合において、当該車両の車内空間の形状や搭乗者の数及び位置、或いは移動時に発生する外乱音の影響に対応した周波数特性調整値を設定し、当該再生される音に対応する音データの周波数特性を当該周波数特性調整値に従って調整する音場調整装置に本願を適用した場合の実施例である。このとき、上記外乱音としては、例えば、移動時に発生するロードノイズや風切り音やエンジン音、或いは上記雨音等の気象状況に起因する音等が挙げられる。また、上記「周波数特性調整値」とは、いわゆるイコライザ特性を実現するための調整値であり、具体的には、当該音データの周波数帯域毎の音圧を調整するための調整値である。更に、上記車内空間が本願に係る「空間」の一例に相当する。 Next, specific examples corresponding to the above-described embodiments will be described with reference to FIGS. 2 to 4. FIG. In the embodiment described below, when reproducing sound such as music from a car audio device mounted in a vehicle, the shape of the interior space of the vehicle, the number and positions of passengers, or disturbances that occur during movement An embodiment in which the present invention is applied to a sound field adjustment device that sets a frequency characteristic adjustment value corresponding to the influence of sound and adjusts the frequency characteristics of sound data corresponding to the reproduced sound according to the frequency characteristic adjustment value. be. At this time, the disturbance sound includes, for example, road noise, wind noise, and engine sound generated during movement, and sound caused by weather conditions such as the rain sound. Further, the "frequency characteristic adjustment value" is an adjustment value for realizing so-called equalizer characteristics, and more specifically, an adjustment value for adjusting the sound pressure for each frequency band of the sound data. Furthermore, the vehicle interior space corresponds to an example of the "space" according to the present application.

また、図2は実施例に係る音場調整装置の概要構成を示すブロック図であり、図3は実施例に係る音場調整処理を示すフローチャートであり、図4は実施例に係る音場調整処理の細部を説明する概念図である。このとき図2では、図1に示した実施形態に係る音制御装置Sにおける各構成部材に相当する実施例の構成部材それぞれについて、当該音制御装置Sにおける各構成部材と同一の部材番号を用いている。 2 is a block diagram showing a schematic configuration of the sound field adjusting device according to the embodiment, FIG. 3 is a flow chart showing sound field adjustment processing according to the embodiment, and FIG. 4 is a sound field adjustment according to the embodiment. FIG. 3 is a conceptual diagram for explaining details of processing; At this time, in FIG. 2, the same member numbers as the respective structural members of the sound control device S are used for the respective structural members of the embodiment corresponding to the respective structural members of the sound control device S according to the embodiment shown in FIG. ing.

図2に示すように、実施例に係る音場調整装置SSは、再生対象たる上記音の音データが種々のファイル形式で記録されているスマートフォンSMと、実施形態の放音手段SPの一例としてのスピーカSPに接続された上記カーオーディオ装置16と、にそれぞれ接続されている。なお、上記スマートフォンSMに代えていわゆる音楽プレーヤが接続されていてもよい。そして実施例に係る音場調整装置SSは、実施形態に係る集音手段MCの一例としてのマイクMCと、実施形態に係る判定手段1の一例としての周波数特性分析部1と、実施形態に係る更新手段2の一例としてのイコライザ値設定部2と、上記スマートフォンSMに有線又は無線により接続される通信部10と、オーディオデコーダ11と、加速度センサ12と、周波数特性調整部13と、オーディオエンコーダ14と、上記カーオーディオ装置16に有線又は無線により接続される通信部15と、により構成されている。このとき、上記周波数特性分析部1、上記イコライザ値設定部2、上記オーディオデコーダ11、上記周波数特性調整部13及び上記オーディオエンコーダ14は、音場調整装置SSに備えられた図示しないCPU、RAM(Random Access Memory)及びROM(Read Only Memory)等のハードウェアロジック回路によりハードウェア的に実現されていてもよいし、後述する実施例に係る音場調整処理を示すフローチャートに相当するプログラムを上記ROM等に記憶し、これを上記CPU等が読み出して実行することにより、ソフトウェア的に実現されてもよい。また、図2に破線で示すように、上記周波数特性分析部1及び上記イコライザ値設定部2により、実施形態に係る音制御装置Sの一例を構成している。更に、上記周波数特性分析部1が、本願に係る「速度情報取得手段」及び「放音判定手段」の一例に相当する。 As shown in FIG. 2, the sound field adjustment device SS according to the embodiment includes a smartphone SM in which sound data of the above-mentioned sound to be reproduced is recorded in various file formats, and a sound emitting means SP as an example of the embodiment. , and the car audio device 16 connected to the speaker SP. A so-called music player may be connected instead of the smartphone SM. The sound field adjustment device SS according to the embodiment includes a microphone MC as an example of the sound collecting means MC according to the embodiment, a frequency characteristic analysis section 1 as an example of the determination means 1 according to the embodiment, An equalizer value setting unit 2 as an example of updating means 2, a communication unit 10 connected to the smartphone SM by wire or wirelessly, an audio decoder 11, an acceleration sensor 12, a frequency characteristic adjustment unit 13, and an audio encoder 14. and a communication unit 15 connected to the car audio device 16 by wire or wirelessly. At this time, the frequency characteristic analysis section 1, the equalizer value setting section 2, the audio decoder 11, the frequency characteristic adjustment section 13, and the audio encoder 14 are connected to a CPU, RAM (not shown) provided in the sound field adjustment device SS. Random Access Memory) and ROM (Read Only Memory). etc., and read out and executed by the CPU or the like to be realized in software. 2, the frequency characteristic analysis unit 1 and the equalizer value setting unit 2 constitute an example of the sound control device S according to the embodiment. Furthermore, the frequency characteristic analysis unit 1 corresponds to an example of the "speed information acquisition means" and the "sound emission determination means" according to the present application.

以上の構成において、スマートフォンSMには、上述したように再生対象たる音楽等の音データが予め記録されており、当該スマートフォンSMにおける再生開始操作等により、当該音データが音場調整装置SSの通信部10に出力される。この再生対象たる音楽が、本願に係る「原音」の一例に相当する。これにより通信部10は、スマートフォンSMから入力された上記音データに対して予め設定された入力インターフェース処理を施してオーディオデコーダ11に出力する。そしてオーディオデコーダ11は、当該出力されてきた音データに対して予め設定された復号方式に基づいた復号処理を施し、上記周波数特性としての既定の周波数帯域毎の音圧を検出可能な形式の音データ(例えば、PCM(Pulse Code Modulation)形式の音データ)として周波数特性分析部1及び周波数特性調整部13に出力する。 In the above configuration, sound data such as music to be played back is pre-recorded in the smartphone SM as described above. Output to the unit 10 . This music to be played corresponds to an example of the "original sound" according to the present application. Accordingly, the communication unit 10 performs preset input interface processing on the sound data input from the smartphone SM, and outputs the processed data to the audio decoder 11 . Then, the audio decoder 11 performs decoding processing based on a preset decoding method on the output sound data, and obtains sound in a format capable of detecting sound pressure for each predetermined frequency band as the frequency characteristic. It is output to the frequency characteristic analysis section 1 and the frequency characteristic adjustment section 13 as data (for example, PCM (Pulse Code Modulation) format sound data).

一方加速度センサ12は、音場調整装置SSが搭載されている上記車両に加わる加速度の大きさ及び方向を検出し、当該検出された加速度を示す加速度データを生成して周波数特性分析部1に出力する。なお当該加速度データは、周波数特性分析部1において後述するように積分され、上記車両の速度を示す速度データに変換されて実施例に係る音場調整処理に供される。このとき加速度センサ12自体において上記加速度データを積分し、上記速度データとして周波数特性分析部1に出力するように構成してもよい。他方マイクMCは、音場調整装置SSが搭載されている上記車両の車内空間にある音を集音し、上記周波数特性としての既定の周波数帯域毎の音圧を検出可能な形式の集音データとして周波数特性分析部1に出力する。このマイクMCにより集音される音には、後述するように実施例に係るスピーカSPから放音された音楽等の音の他、当該車両が移動中である場合における上記外乱音等が含まれている。 On the other hand, the acceleration sensor 12 detects the magnitude and direction of acceleration applied to the vehicle on which the sound field adjustment device SS is mounted, generates acceleration data indicating the detected acceleration, and outputs the data to the frequency characteristic analysis unit 1. do. The acceleration data is integrated in the frequency characteristic analysis unit 1 as will be described later, converted into speed data indicating the speed of the vehicle, and subjected to sound field adjustment processing according to the embodiment. At this time, the acceleration data may be integrated by the acceleration sensor 12 itself and output to the frequency characteristic analysis section 1 as the velocity data. On the other hand, the microphone MC collects sound in the vehicle interior space of the vehicle in which the sound field adjustment device SS is mounted, and collects sound data in a format that can detect the sound pressure for each predetermined frequency band as the frequency characteristic. , is output to the frequency characteristic analysis unit 1. Sounds collected by the microphone MC include sounds such as music emitted from the speaker SP according to the embodiment as described later, as well as the above-described disturbance sounds generated when the vehicle is moving. ing.

次に周波数特性分析部1は、オーディオデコーダ11からの上記音データ、加速度センサ12により検出された加速度データに対応した速度データ及びマイクMCからの上記集音データに基づいて、実施例に係る音場調整処理における周波数特性分析処理を主として実行する。このとき、加速度センサ12から上記加速度データが出力されている場合、周波数特性分析部1はこれを積分し、上記速度データを生成して上記周波数特性分析処理に供させる。そして当該周波数特性分析処理の結果は、イコライザ値設定部2に出力される。これによりイコライザ値設定部2は、上記周波数特性分析処理の結果に基づいて、スピーカSPを介して放音される上記音データの上記周波数特性(即ち、上記既定の周波数帯域ごとの音圧)の調整に用いられる周波数特性調整値を更新するための実施例に係る音場調整処理における補正値を設定し、周波数特性調整部13に出力する。 Next, the frequency characteristic analysis unit 1 analyzes the sound data according to the embodiment based on the sound data from the audio decoder 11, the velocity data corresponding to the acceleration data detected by the acceleration sensor 12, and the collected sound data from the microphone MC. It mainly executes frequency characteristic analysis processing in the field adjustment processing. At this time, if the acceleration data is output from the acceleration sensor 12, the frequency characteristic analysis unit 1 integrates the acceleration data to generate the velocity data for the frequency characteristic analysis process. Then, the result of the frequency characteristic analysis processing is output to the equalizer value setting section 2 . As a result, the equalizer value setting unit 2 determines the frequency characteristics (that is, the sound pressure for each predetermined frequency band) of the sound data emitted through the speaker SP based on the result of the frequency characteristics analysis process. A correction value in the sound field adjustment process according to the embodiment for updating the frequency characteristic adjustment value used for adjustment is set and output to the frequency characteristic adjustment unit 13 .

一方周波数特性調整部13は、車両が停止している時の上記車内空間本来の大きさや形状(即ち、搭乗者が搭乗しておらず且つ荷物等も搭載されていない状態の当該車内空間としての大きさや形状)に対応させて、再生対象たる音楽の種類(例えば、「ロック」、「クラシック」又は「ポップス」等の種類)ごとに(つまり当該種類別に)、その車内空間に放音する場合に最適な音データとしての周波数特性を示す周波数特性データ(以下、当該周波数特性データを「種類別周波数特性データ」と称する)を、図示しないメモリ内に予め記憶している。この種類別周波数特性データは、例えば予めユーザにより上記音楽の種類ごとに選択又は設定される上記周波数特性調整値に相当する周波数特性データである。なおこの他に、音楽の種類や車両の大きさ等とは無関係にユーザが任意に設定した周波数特性調整値が上記図示しないメモリに予め記憶されていてもよい。 On the other hand, the frequency characteristic adjustment unit 13 adjusts the original size and shape of the vehicle interior space when the vehicle is stopped (that is, the vehicle interior space in a state where no passengers are on board and no luggage is loaded). size and shape), and emits sound into the car space for each type of music to be played (for example, types such as "rock," "classic," or "pops") (that is, for each type). The frequency characteristic data indicating the frequency characteristic as the optimum sound data (hereinafter referred to as "type-specific frequency characteristic data") is stored in advance in a memory (not shown). The type-specific frequency characteristic data is, for example, frequency characteristic data corresponding to the frequency characteristic adjustment value previously selected or set by the user for each type of music. In addition, frequency characteristic adjustment values arbitrarily set by the user regardless of the type of music, the size of the vehicle, etc. may be stored in advance in the memory (not shown).

そして周波数特性調整部13は、イコライザ値設定部2から上記補正値が出力されていない場合、オーディオデコーダ11から出力されている音データに対応した上記種類別周波数特性データを用いて当該音データの周波数特性を調整し、当該周波数特性の調整後の音データをオーディオエンコーダ14に出力する。他方周波数特性調整部13は、イコライザ値設定部2から上記補正値が出力されている場合、当該出力が継続されている間は、オーディオデコーダ11から出力されている音データに対応した上記種類別周波数特性データの周波数特性調整値を、イコライザ値設定部2からの上記補正値を用いて更新し、当該更新後の周波数特性調整値を用いてその周波数特性が調整された音データをオーディオエンコーダ14に出力する。 Then, when the correction value is not output from the equalizer value setting unit 2, the frequency characteristic adjustment unit 13 uses the frequency characteristic data by type corresponding to the sound data output from the audio decoder 11 to adjust the sound data. The frequency characteristics are adjusted, and the sound data whose frequency characteristics have been adjusted is output to the audio encoder 14 . On the other hand, when the correction value is output from the equalizer value setting unit 2, the frequency characteristic adjusting unit 13 adjusts the above-described type-by-type corresponding to the sound data output from the audio decoder 11 while the output is continued. The frequency characteristic adjustment value of the frequency characteristic data is updated using the correction value from the equalizer value setting unit 2, and the sound data whose frequency characteristic is adjusted using the updated frequency characteristic adjustment value is sent to the audio encoder 14. output to

その後オーディオエンコーダ14は、周波数特性調整部13から出力されてきた音データに対して、上記オーディオデコーダ11における復号処理の復号形式に対応した符号化形式による符号化処理を施し、当該符号化後の音データを通信部15に出力する。そして通信部15は、オーディオエンコーダ14から出力された上記符号化後の音データに対して予め設定された出力インターフェース処理を施してカーオーディオ装置16に出力する。これによりカーオーディオ装置16は、当該符号化後の音データに対して予め設定された増幅処理等を施し、スピーカSPを介して上記車内空間に放音させる。 After that, the audio encoder 14 performs encoding processing in an encoding format corresponding to the decoding format of the decoding processing in the audio decoder 11 on the sound data output from the frequency characteristic adjustment unit 13, and Sound data is output to the communication unit 15 . The communication unit 15 performs preset output interface processing on the encoded sound data output from the audio encoder 14 and outputs the result to the car audio device 16 . As a result, the car audio device 16 performs preset amplification processing or the like on the encoded sound data, and emits sound into the vehicle interior space via the speaker SP.

次に、実施例に係る音場調整処理について、より具体的に図2乃至図4を用いて説明する。 Next, the sound field adjustment processing according to the embodiment will be described more specifically with reference to FIGS. 2 to 4. FIG.

対応するフローチャートを図3に示すように、実施例に係る音場調整処理は、例えば、実施例に係る音場調整装置SSが搭載されている車両のいわゆるACC(Accessory)スイッチがオンとされること等により開始される。 As the corresponding flowchart is shown in FIG. 3, the sound field adjustment process according to the embodiment is performed, for example, by turning on a so-called ACC (Accessory) switch of a vehicle equipped with the sound field adjustment device SS according to the embodiment. and so on.

実施例に係る音場調整処理が開始されると、先ず周波数特性分析部1は、その周波数特性を調整するべき音データ(即ち、その時点で再生されるべき音楽等の音データ)がスマートフォンSMから入力されているか否かを判定する(ステップS1)。より具体的に周波数特性分析部1は、例えば、スマートフォンSMにおける操作内容又はカーオーディオ装置16における再生対象の選択操作等を検出し、その検出結果に基づいて当該再生されるべき音データが周波数特性分析部1に入力されているか否かを判定する。ステップS1の判定において、再生されるべき音データが周波数特性分析部1に入力されていない場合(ステップS1:NO)、周波数特性分析部1は後述するステップS9に移行する。このステップS1により、その周波数特性が調整対象ではない音データ(例えば、カーオーディオ装置16においてラジオ放送を介して受信された音データを再生すべきことが選択されている場合等)に対して実施例に係る音場調整処理が施されることが防止される。 When the sound field adjustment process according to the embodiment is started, first, the frequency characteristic analysis unit 1 detects sound data whose frequency characteristic is to be adjusted (that is, sound data such as music to be reproduced at that time) from the smartphone SM. (step S1). More specifically, the frequency characteristic analysis unit 1 detects, for example, the operation content of the smartphone SM or the selection operation of the reproduction target in the car audio device 16, and based on the detection result, the sound data to be reproduced is the frequency characteristic. It is determined whether or not the data has been input to the analysis unit 1 . If it is determined in step S1 that sound data to be reproduced has not been input to the frequency characteristic analysis section 1 (step S1: NO), the frequency characteristic analysis section 1 proceeds to step S9, which will be described later. This step S1 is performed on sound data whose frequency characteristics are not subject to adjustment (for example, when it is selected to reproduce sound data received via radio broadcasting in the car audio device 16). The sound field adjustment process according to the example is prevented from being performed.

一方ステップS1の判定において、再生されるべき音データが周波数特性分析部1に入力されている場合(ステップS1:YES)、周波数特性分析部1は次に、入力されている音データの周波数特性を分析し、その分析結果を例えば上記RAM等に一時的に記憶する(ステップS2)。そして周波数特性分析部1は、ステップS2で分析した周波数特性が実施例に係る音場調整処理を行うために適切な周波数特性であるか否かを判定する(ステップS3)。このステップS3において具体的に周波数特性分析部1は、例えばステップS2で分析した周波数特性が可聴周波数帯域の全域に渡って予め設定された音圧閾値以上であるか否かを判定し、当該周波数特性が当該全域に渡って当該音圧閾値以上である場合には上記適切な周波数特性であると判定する。或いは周波数特性分析部1は、ステップS2で分析した周波数特性に特定の周波数帯域での偏りがあるか否かを判定し、当該偏りがない場合には上記適切な周波数特性であると判定する。 On the other hand, if the sound data to be reproduced has been input to the frequency characteristic analysis unit 1 in the determination in step S1 (step S1: YES), the frequency characteristic analysis unit 1 next determines the frequency characteristic of the input sound data. is analyzed, and the analysis result is temporarily stored in the RAM or the like (step S2). Then, the frequency characteristic analysis unit 1 determines whether or not the frequency characteristic analyzed in step S2 is suitable for performing the sound field adjustment process according to the embodiment (step S3). Specifically, in step S3, the frequency characteristic analysis unit 1, for example, determines whether or not the frequency characteristic analyzed in step S2 is equal to or greater than a preset sound pressure threshold over the entire audible frequency band. If the characteristic is equal to or greater than the sound pressure threshold over the entire area, it is determined that the frequency characteristic is appropriate. Alternatively, the frequency characteristic analysis unit 1 determines whether or not the frequency characteristic analyzed in step S2 is biased in a specific frequency band, and determines that the frequency characteristic is appropriate when there is no bias.

ステップS3の判定において、ステップS2で分析した周波数特性が実施例に係る音場調整処理を行うために適切な周波数特性でない場合(ステップS3:NO)、周波数特性分析部1は後述するステップS9に移行する。一方ステップS3の判定において、ステップS2で分析した周波数特性が実施例に係る音場調整処理を行うために適切な周波数特性である場合(ステップS3:YES)、周波数特性分析部1は次に、マイクMCから上記集音データを取得し(ステップS4)、更に当該取得した集音データの周波数特性と上記音データの周波数特性との間の相関係数γを算出する(ステップS5)。 If it is determined in step S3 that the frequency characteristics analyzed in step S2 are not suitable for performing the sound field adjustment process according to the embodiment (step S3: NO), the frequency characteristic analysis unit 1 advances to step S9, which will be described later. Transition. On the other hand, if it is determined in step S3 that the frequency characteristics analyzed in step S2 are suitable for performing the sound field adjustment process according to the embodiment (step S3: YES), the frequency characteristic analysis unit 1 next: The collected sound data is obtained from the microphone MC (step S4), and the correlation coefficient γ between the frequency characteristics of the obtained collected sound data and the frequency characteristics of the sound data is calculated (step S5).

ここで、ステップS5で算出される相関係数γとは、例えば対象となる各周波数帯域における上記音データの周波数特性としての音圧を「パラメータx」とし、当該対象となる各周波数帯域における上記集音データの周波数特性としての音圧を「パラメータy」としたとき、以下の式(1)で示される相関係数γである。なお以下の式(1)において、「Sxy」はパラメータxとパラメータyの共分散であり、「S」はパラメータxの標準偏差であり、「S」はパラメータyの標準偏差である。また、「n」は同じ周波数帯域についてのパラメータxとパラメータyとの対の総数(即ち、分割された周波数帯域の数)であり、「x」はパラメータxとしての個々の音圧であり、「y」はパラメータyとしての個々の音圧であり、

Figure 2023054301000002
はパラメータxの平均値であり、
Figure 2023054301000003
はパラメータyの平均値である。 Here, the correlation coefficient γ calculated in step S5 is, for example, the sound pressure as the frequency characteristic of the sound data in each target frequency band is set as "parameter x", and the above-mentioned When the sound pressure as the frequency characteristic of collected sound data is set as "parameter y", the correlation coefficient γ is given by the following equation (1). In the following equation (1), “S xy ” is the covariance of parameter x and parameter y, “S x ” is the standard deviation of parameter x, and “S y ” is the standard deviation of parameter y. . Also, "n" is the total number of pairs of parameter x and parameter y for the same frequency band (i.e., the number of divided frequency bands), and " xi " is the individual sound pressure as parameter x. , “y i ” is the individual sound pressure as parameter y, and
Figure 2023054301000002
is the mean value of the parameter x, and
Figure 2023054301000003
is the average value of the parameter y.

Figure 2023054301000004
Figure 2023054301000004

ここで、上記式(1)で定義される相関係数γについて詳細には、例えばインターネット上のURL「https://sci-pursuit.com/math/statistics/correlation-coefficient.html」に詳しい。この相関係数γが予め設定された相関閾値以上である場合、パラメータx(即ち、上記音データの周波数特性としての音圧)とパラメータy(即ち、上記集音データの周波数特性としての音圧)との間に相関があるということになる。これを実施例に係る音場調整処理に当て嵌めると、当該相関があるということは、集音データとして、「実施例に係る音場調整処理に適する程度の音量があり」且つ「上記外乱音等のノイズが当該音場調整処理に障害となるような大きさではない」ということになる。 Here, details of the correlation coefficient γ defined by the above equation (1) can be found, for example, at the URL “https://sci-pursuit.com/math/statistics/correlation-coefficient.html” on the Internet. When the correlation coefficient γ is equal to or greater than a preset correlation threshold, the parameter x (that is, the sound pressure as the frequency characteristic of the sound data) and the parameter y (that is, the sound pressure as the frequency characteristic of the collected sound data) ), there is a correlation between When this is applied to the sound field adjustment process according to the embodiment, the presence of the correlation means that the collected sound data "has a volume suitable for the sound field adjustment process according to the embodiment" and "the disturbance sound The noise is not so large as to interfere with the sound field adjustment process.

そこで周波数特性分析部1は、ステップS5で算出された相関係数γが上記相関閾値以上であるか否かを判定する(ステップS6)。ステップS6の判定において、算出された相関係数γが上記相関閾値未満である場合(ステップS6:NO)、周波数特性分析部1は後述するステップS9に移行する。一方ステップS6の判定において、算出された相関係数γが上記相関閾値以上である場合(ステップS6:YES)、周波数特性分析部1は次に、加速度センサ12において検出された加速度又は当該加速度に対応する速度が、予め設定された速度閾値以上であるか否かを判定する(ステップS7)。ここで、当該速度閾値の具体例としては、例えば、実施例に係る音場調整装置SSが搭載されている車両が走行していない状態で実施例に係る音場調整処理を行うこととする場合には、当該速度閾値としては例えば時速5キロメートルとされる。また、当該車両の低速走行時の、ロードノイズ等の上記外乱音が少ない状態で実施例に係る音場調整処理を行うこととする場合には、当該速度閾値としては例えば時速30キロメートルとされる。そして周波数特性分析部1は、上記加速度データが加速度センサ12から出力されているときはそれを積分してステップS7の判定に用いると共に、上記加速度データを積分した速度データが加速度センサ12から出力されているときは、当該速度データをそのままステップS7の判定に用いる。このステップS7は、音場調整装置SSが搭載されている車両の速度が上記速度閾値より大きい場合は上記外乱音が大きいと予測されることから、実施例に係る音場調整処理を行わないようにするための判定である。ステップS7の判定において、当該車両の速度が上記速度閾値より大きい場合(ステップS7:NO)、周波数特性分析部1は後述するステップS9に移行する。一方ステップS7の判定において、当該車両の速度が上記速度閾値以下である場合(ステップS7:YES)、周波数特性分析部1は、上記音データ及び上記集音データそれぞれの周波数特性データをイコライザ値設定部2に出力する。 Therefore, the frequency characteristic analysis unit 1 determines whether or not the correlation coefficient γ calculated in step S5 is equal to or greater than the correlation threshold (step S6). If the calculated correlation coefficient γ is less than the correlation threshold (step S6: NO) in step S6, the frequency characteristic analysis unit 1 proceeds to step S9, which will be described later. On the other hand, in the determination in step S6, if the calculated correlation coefficient γ is equal to or greater than the correlation threshold (step S6: YES), the frequency characteristic analysis unit 1 next performs acceleration detected by the acceleration sensor 12 or It is determined whether or not the corresponding speed is greater than or equal to a preset speed threshold (step S7). Here, as a specific example of the speed threshold, for example, when the sound field adjustment process according to the embodiment is performed while the vehicle equipped with the sound field adjustment device SS according to the embodiment is not running. , the speed threshold is, for example, 5 kilometers per hour. Further, when the sound field adjustment process according to the embodiment is to be performed in a state in which the above-described external noise such as road noise is low when the vehicle is traveling at low speed, the speed threshold is set to, for example, 30 kilometers per hour. . When the acceleration data is output from the acceleration sensor 12, the frequency characteristic analysis unit 1 integrates it and uses it for determination in step S7. If so, the speed data is directly used for determination in step S7. In this step S7, when the speed of the vehicle equipped with the sound field adjustment device SS is higher than the speed threshold, it is predicted that the disturbance noise is loud, so the sound field adjustment processing according to the embodiment is not performed. It is a judgment for making In the judgment of step S7, if the speed of the vehicle is greater than the speed threshold (step S7: NO), the frequency characteristic analysis unit 1 proceeds to step S9, which will be described later. On the other hand, if it is determined in step S7 that the speed of the vehicle is equal to or less than the speed threshold (step S7: YES), the frequency characteristic analysis unit 1 sets the frequency characteristic data of the sound data and the collected sound data to an equalizer value. Output to part 2.

次にイコライザ値設定部2は、実施例に係る音場調整処理を行う条件(上記ステップS1、上記ステップS3、上記ステップS6及び上記ステップS7参照)が全て整ったとして、オーディオデコーダ11から出力されている音データに対応した上記種類別周波数特性データの周波数特性調整値を更新するための上記補正値を算出する(ステップS8)。 Next, the equalizer value setting unit 2 outputs from the audio decoder 11 the condition for performing the sound field adjustment processing according to the embodiment (see the above steps S1, S3, S6 and S7). The correction value for updating the frequency characteristic adjustment value of the type-specific frequency characteristic data corresponding to the sound data is calculated (step S8).

ここで、ステップS8における補正値の算出について図4を用いて具体的に説明する。先ず、上記ステップS7において、図4上に示す周波数特性を有する音データ(上記ステップS2参照)としての周波数特性データと、同じく図4上に示す周波数特性を有する集音データとしての周波数特性データと、が出力されているとする。ここで、上記集音データの周波数特性には、元の音データ自体としての周波数特性と、当該音データに相当する音が放音される車内空間本来の周波数特性(即ち、車両が停止しており、搭乗者が搭乗しておらず且つ荷物等も搭載されていない状態の当該車内空間としての大きさや形状に対応した周波数特性)と、当該音データに相当する音が実際に放音されている時の車内空間としての周波数特性(即ち、搭乗者が搭乗し、荷物等も搭載されており、更に上記外乱音がある状態の当該車内空間としての周波数特性)と、が反映されていることになる。そこでステップS8においてイコライザ値設定部2は、上記集音データの周波数特性から上記音データの周波数特性を減算する処理を、上記既定の周波数帯域毎に行い、当該減算処理の結果としての差分データを算出する(図4下参照)。なお、図4下では、周波数帯域ごとの上位差分を破線で示しており、差分がゼロである周波数を一点鎖線矢印で示している。この差分データに相当する周波数特性には、図4上に示されている周波数特性の音データが放音されている際に用いられている種類別周波数特性データ(以下、「放音種類別周波数特性データ」と称する)により示される周波数特性と、上記車内空間本来の周波数特性と、上記音データに相当する音が実際に放音されている時の車内空間としての周波数特性と、の三つが少なくとも反映されていることになる。その後イコライザ値設定部2は、上記差分データとしての周波数特性が、上記放音種類別周波数特性データにより示される周波数特性となるように、当該放音種類別周波数特性データの周波数特性調整値を更新するための上記補正値を算出する。より具体的に、例えばその時点で設定されている種類別周波数特性データ(即ち上記放音種類別周波数特性データ)に対応した種類が「ロック」である場合、イコライザ値設定部2は、図4下に示す差分データとしての周波数特性が、ロック用の種類別周波数特性データの周波数特性調整値により示される周波数特性となるように、上記更新用の補正値を算出する。この更新用の補正値を用いた更新により放音種類別周波数特性データを補正することで、結果的に、上記音データに相当する音が実際に放音されている時の車内空間としての周波数特性(即ち、上記車内空間本来の周波数特性、及び上記音データに相当する音が実際に放音されている時の車内空間としての周波数特性)の影響を排除することができることになる。その後イコライザ値設定部2は、当該算出された補正値を周波数特性調整部13に出力する。 Here, calculation of the correction value in step S8 will be specifically described using FIG. First, in step S7, frequency characteristic data as sound data (see step S2) having frequency characteristics shown in FIG. 4 and frequency characteristic data as collected sound data having frequency characteristics shown in FIG. , is output. Here, the frequency characteristics of the collected sound data include the frequency characteristics of the original sound data itself and the original frequency characteristics of the vehicle interior space where the sound corresponding to the sound data is emitted (that is, when the vehicle is stopped). (Frequency characteristics corresponding to the size and shape of the interior space of the vehicle when no passengers are on board and no luggage is loaded), and the sound corresponding to the sound data is actually emitted. (i.e., the frequency characteristics of the interior space when passengers are on board, luggage is loaded, and there is the above-mentioned disturbance sound). become. Therefore, in step S8, the equalizer value setting unit 2 performs a process of subtracting the frequency characteristics of the sound data from the frequency characteristics of the collected sound data for each predetermined frequency band, and calculates the difference data as a result of the subtraction process. Calculate (see bottom of FIG. 4). In the lower part of FIG. 4, the upper difference for each frequency band is indicated by a dashed line, and the frequency at which the difference is zero is indicated by a one-dot chain line arrow. The frequency characteristic corresponding to this difference data includes frequency characteristic data by type used when the sound data of the frequency characteristic shown in FIG. characteristic data"), the original frequency characteristic of the vehicle interior space, and the frequency characteristic of the vehicle interior space when the sound corresponding to the sound data is actually emitted. At least it is reflected. After that, the equalizer value setting unit 2 updates the frequency characteristic adjustment value of the sound emission type-specific frequency characteristic data so that the frequency characteristic as the difference data becomes the frequency characteristic indicated by the sound emission type-specific frequency characteristic data. Calculate the above correction value for More specifically, for example, when the type corresponding to the type-specific frequency characteristic data set at that time (that is, the sound emission type-specific frequency characteristic data) is "lock", the equalizer value setting unit 2 performs the operation shown in FIG. The update correction value is calculated so that the frequency characteristic as the difference data shown below becomes the frequency characteristic indicated by the frequency characteristic adjustment value of the frequency characteristic data for each type for locking. By correcting the frequency characteristic data by sound emission type by updating using this correction value for updating, as a result, the frequency as the vehicle interior space when the sound corresponding to the above sound data is actually emitted The influence of the characteristics (that is, the original frequency characteristics of the vehicle interior space and the frequency characteristics of the vehicle interior space when the sound corresponding to the sound data is actually emitted) can be eliminated. After that, the equalizer value setting section 2 outputs the calculated correction value to the frequency characteristic adjusting section 13 .

これにより周波数特性調整部13は、上述したように、イコライザ値設定部2から上記補正値が出力されていない場合(図3ステップS1:NO、同ステップS3:NO、同ステップS6:NO、又は同ステップS7:NOの場合)、オーディオデコーダ11から出力されている音データに対応した上記種類別周波数特性データ(即ち、周波数特性調整値を更新しない元の種類別周波数特性データ)を用いて当該音データの周波数特性を調整し、当該周波数特性の調整後の音データをオーディオエンコーダ14に出力する(ステップS9)。一方、イコライザ値設定部2から上記更新用の補正値が出力されている場合、当該出力が継続されている間は、周波数特性調整部13は、上記種類別周波数特性データの周波数特性調整値を、イコライザ値設定部2からの上記補正値を用いて更新し、当該更新後の補正値を用いてその周波数特性が調整された音データをオーディオエンコーダ14に出力する(ステップS9)。 As a result, the frequency characteristic adjustment unit 13, as described above, when the correction value is not output from the equalizer value setting unit 2 (FIG. 3 step S1: NO, step S3: NO, step S6: NO, or In the case of step S7: NO), the frequency characteristic data by type corresponding to the sound data output from the audio decoder 11 (that is, the original frequency characteristic data by type whose frequency characteristic adjustment value is not updated) is used. The frequency characteristics of the sound data are adjusted, and the sound data whose frequency characteristics have been adjusted are output to the audio encoder 14 (step S9). On the other hand, when the correction value for update is output from the equalizer value setting unit 2, while the output is continued, the frequency characteristic adjustment unit 13 adjusts the frequency characteristic adjustment value of the type-specific frequency characteristic data. , update using the correction value from the equalizer value setting unit 2, and output sound data whose frequency characteristics have been adjusted using the updated correction value to the audio encoder 14 (step S9).

その後音場調整装置SSは、例えば、実施例に係る音場調整装置SSが搭載されている車両のACCスイッチがオフとされたことを検出すること等により、実施例に係る音場調整処理を終了するか否かを判定する(ステップS10)。ステップS10の判定において、実施例に係る音場調整処理を継続する場合(ステップS10:NO)、音場調整装置SSは、上記ステップS1に戻って上述してきた処理を繰り返す。一方ステップS10の判定において、実施例に係る音場調整処理を終了する場合(ステップS10:YES)、音場調整装置SSはそのまま当該音場調整処理を終了する。 After that, the sound field adjustment device SS performs sound field adjustment processing according to the embodiment by, for example, detecting that the ACC switch of the vehicle in which the sound field adjustment device SS according to the embodiment is mounted is turned off. It is determined whether or not to end (step S10). When it is determined in step S10 that the sound field adjustment process according to the embodiment is to be continued (step S10: NO), the sound field adjustment device SS returns to step S1 and repeats the processes described above. On the other hand, when the sound field adjustment process according to the embodiment is to be ended in the determination of step S10 (step S10: YES), the sound field adjustment device SS ends the sound field adjustment process as it is.

以上説明したように、実施例に係る音場調整処理によれば、車内空間に放音される音の音データ及び集音データの少なくともいずれか一方に基づいて、当該音を放音する際の音データの周波数特性の調整に用いられる調整値の更新(図3ステップS8及びステップS9参照)を行うか否かを判定する(図3ステップS1、同ステップS3、同ステップS6及び同ステップS7参照)ので、集音データ等に基づき、車内空間の影響を排除しつつ、音データの周波数特性の調整を適切に行って放音させることができる。なお、実施例に係る音場調整処理によれば、結果的に、上記車内空間の影響だけでなく、例えばカーオーディオ装置16に含まれる音響回路自体やスピーカSPの構造等が周波数特性に与える影響も排除することができる。 As described above, according to the sound field adjustment processing according to the embodiment, based on at least one of the sound data of the sound emitted into the vehicle interior space and the collected sound data, the It is determined whether or not to update the adjustment value used for adjusting the frequency characteristics of the sound data (see steps S8 and S9 in FIG. 3) (see steps S1, S3, S6 and S7 in FIG. 3). ), it is possible to appropriately adjust the frequency characteristics of the sound data and emit sound while eliminating the influence of the vehicle interior space based on the collected sound data and the like. Note that, according to the sound field adjustment processing according to the embodiment, as a result, not only the influence of the above-mentioned interior space but also the influence of the acoustic circuit itself included in the car audio device 16, the structure of the speaker SP, etc., on the frequency characteristics. can also be eliminated.

また、上記更新が、集音データの周波数特性が上記種類別周波数特性データにより示される周波数特性となるように元の種類別周波数特性データに相当する周波数特性調整値を更新する処理であるので、集音データの周波数特性等に基づいてより適切にその調整を行うことができる。 Further, since the update is a process of updating the frequency characteristic adjustment value corresponding to the original type-specific frequency characteristic data so that the frequency characteristic of the collected sound data becomes the frequency characteristic indicated by the type-specific frequency characteristic data, The adjustment can be performed more appropriately based on the frequency characteristics of collected sound data.

更に、上記種類別周波数特性データがユーザにより選択又は設定される周波数特性の周波数特性データであるので、当該ユーザの嗜好に合わせて適切に周波数特性の調整を行わせることができる。 Furthermore, since the type-specific frequency characteristic data is frequency characteristic data of frequency characteristics selected or set by the user, it is possible to appropriately adjust the frequency characteristics according to the user's preference.

更にまた、音データの周波数特性が可聴周波数帯域において適正である場合(換言すれば、当該周波数帯域が既定の音圧閾値以上である場合。図3ステップS3参照。)に上記更新を行うので、より適切に周波数特性の調整を行わせることができる。 Furthermore, when the frequency characteristics of the sound data are appropriate in the audible frequency band (in other words, when the frequency band is equal to or greater than the predetermined sound pressure threshold; see step S3 in FIG. 3), the update is performed. The frequency characteristics can be adjusted more appropriately.

また、集音データの周波数特性と、音データの周波数特性と、の間の類似度に対応した相関係数γに基づいて上記更新を行うか否かを判定するので(図3ステップS5及び同ステップS6参照)、更に適切に周波数特性の調整を行わせることができる。 Further, it is determined whether or not to update based on the correlation coefficient γ corresponding to the degree of similarity between the frequency characteristics of the collected sound data and the frequency characteristics of the sound data (step S5 and See step S6), the frequency characteristic can be adjusted more appropriately.

更に、音が放音される車内空間の移動の速度が既定の速度閾値以下であるときに取得された集音データに基づいて上記更新を行うか否かを判定するので(図3ステップS7参照)、更に適切に周波数特性の調整を行わせることができる。 Furthermore, it is determined whether or not to perform the above update based on the collected sound data acquired when the speed of movement in the vehicle interior space where the sound is emitted is equal to or less than the predetermined speed threshold (see step S7 in FIG. 3). ), and the frequency characteristics can be adjusted more appropriately.

更にまた、再生対象の音(音楽等)が車内空間に放音されていることが示されている時に取得された集音データを用いて上記更新を行うか否かを判定するので(図3ステップS1参照)、更に適切に周波数特性の調整を行わせることができる。 Furthermore, it is determined whether or not to perform the above update using collected sound data acquired when it is indicated that the sound to be reproduced (music, etc.) is being emitted into the vehicle interior space (Fig. 3 (See step S1), the frequency characteristic can be adjusted more appropriately.

なお上述した実施例において、上記周波数特性調整値を全周波数帯域において平坦(フラット)な状態とし、更に図4下に示す差分データが全周波数帯域においてゼロデシベルとなるように周波数特性調整値を更新することで、再生対象たる音の原音に相当する周波数特性で当該音を聴取することができる。 In the above-described embodiment, the frequency characteristic adjustment value is made flat over the entire frequency band, and the frequency characteristic adjustment value is updated so that the difference data shown in the lower part of FIG. 4 becomes zero decibel over the entire frequency band. By doing so, the sound to be reproduced can be heard with frequency characteristics corresponding to the original sound.

また上述した実施例では、上記相関係数γを用いる意義として、上記集音データとして「実施例に係る音場調整処理に適する程度の音量があり」且つ「上記外乱音等のノイズが当該音場調整処理に障害となるような大きさではない」ことを判定するために用いることとした。しかしながら、「上記外乱音等のノイズが当該音場調整処理に障害となるような大きさではないことを判定する」ことのみにその意義を限るのであれば、相関係数γを用いることなく上記加速度センサ12からの加速度データのみを用いて当該判定を行ってもよいし、また、相関係数γを用いて「上記外乱音等のノイズが当該音場調整処理に障害となるような大きさではないことを判定する」ことで、加速度センサ12自体を不要とすることもできる。 Further, in the above-described embodiment, the significance of using the correlation coefficient γ is that the collected sound data "has a volume suitable for the sound field adjustment process according to the embodiment" and "the noise such as the disturbance sound is It was decided to use it to determine that the size is not such that it is an obstacle to field adjustment processing. However, if the significance is limited only to "determining that the noise such as the disturbance sound is not of a magnitude that interferes with the sound field adjustment process", the correlation coefficient γ is not used. The determination may be made using only the acceleration data from the acceleration sensor 12, or the correlation coefficient γ may be used to determine whether the noise such as the disturbance sound is of a magnitude that interferes with the sound field adjustment process. The acceleration sensor 12 itself can be made unnecessary by "determining that it is not".

更に、実施例に係る音場調整装置SSから見てスピーカSP側にある装置(例えば実施例に係るカーオーディオ装置16)が再生対象たる音の音源を切替え可能であり、音場調整装置SSでは現在の音源を示す情報を得ることができない場合において、異なる音源が再生されているときには実施例に係る音場調整処理を適切に行うことができないという問題があるが、実施例に係る相関係数γを用いることで、当該スピーカSP側にある装置において、再生対象たる音の音源が切り換えられていないか(即ち、再生対象たる音楽等の音が再生されているか否か)を判定することもできる。 Further, a device (for example, the car audio device 16 according to the embodiment) on the side of the speaker SP when viewed from the sound field adjustment device SS according to the embodiment can switch the sound source of the sound to be reproduced. When information indicating the current sound source cannot be obtained, there is a problem that the sound field adjustment processing according to the embodiment cannot be performed appropriately when a different sound source is being reproduced. By using γ, it is also possible to determine whether or not the sound source of the sound to be played has been switched in the device on the speaker SP side (that is, whether or not the sound such as music to be played is being played). can.

[変形例]
次に、上述した実施形態に対応する変形例について、それぞれ説明する。
[Modification]
Next, modifications corresponding to the above-described embodiment will be described.

先ず第1変形例として、上述した実施例では、図3に示すステップS1、同ステップS3、同ステップS6及び同ステップS7により音データの周波数特性の上記補正値の更新を行うか否かを判定したが、これ以外に、当該音データの周波数特性の調整自体を行うか否かを上記ステップS1等により判定してもよい。この場合でも、車内空間の影響を排除しつつ、より適切に音データの周波数特性の調整を行って放音させることができる。 First, as a first modified example, in the above-described embodiment, it is determined whether or not to update the correction value of the frequency characteristic of sound data in steps S1, S3, S6, and S7 shown in FIG. However, in addition to this, whether or not to adjust the frequency characteristic of the sound data itself may be determined by the above step S1 or the like. Even in this case, it is possible to more appropriately adjust the frequency characteristics of the sound data and emit sound while eliminating the influence of the space inside the vehicle.

次に第2変形例として、上述した実施例では、図3に示すステップS1、同ステップS3、同ステップS6及び同ステップS7を複合的に用いて上記調整値の更新を行うか否かを判定したが、これ以外に、音場調整装置SSが搭載されている車両(換言すれば、その車内空間)の移動の速度を示す速度データのみに基づいて、上記調整値の更新又は当該周波数特性の調整自体を行うか否かを判定するように構成してもよい。この場合でも、車両(車内空間)の移動による影響を排除しつつ、音データの周波数特性の調整を適切に行って放音させることができる。 Next, as a second modification, in the above-described embodiment, step S1, step S3, step S6, and step S7 shown in FIG. 3 are combined to determine whether or not to update the adjustment value. However, in addition to this, the adjustment value is updated or the frequency characteristic is modified based only on the speed data indicating the speed of movement of the vehicle in which the sound field adjustment device SS is mounted (in other words, the interior space of the vehicle). It may be configured to determine whether or not to perform the adjustment itself. Even in this case, it is possible to appropriately adjust the frequency characteristics of the sound data and emit sound while eliminating the influence of movement of the vehicle (in-vehicle space).

また第3変形例として、上述した実施例では、周波数特性を調整する前の音データとしての周波数特性と、集音データの周波数特性と、を用いて上記周波数特性調整値の更新を行うか否かを判定したが、これ以外に、周波数特性調整部13による調整後の周波数特性(即ち、周波数特性調整部13から出力直後の音データの周波数特性)と、集音データの周波数特性と、を用いて上記周波数特性調整値の更新又は当該周波数特性の調整自体を行うか否かを判定してもよい。これは、周波数特性調整部13による調整後の周波数特性も、放音される音に対応する音データの周波数特性であることによる。この第3変形例の構成によれば、図4下に示す差分データに相当する周波数特性には、上記車内空間本来の周波数特性と、上記音データに相当する音が実際に放音されている時の車内空間としての周波数特性と、が代表的に反映されることになる。そこで、この差分データの大きさが小さくなるように実施例に係る補正値を用いた更新を行うことで、車内空間に放音される音の周波数特性を、所望される周波数特性(いわゆるリファレンスとしての周波数特性)に近づけることができる。 As a third modification, in the above-described embodiment, whether or not the frequency characteristic adjustment value is updated using the frequency characteristic as sound data before adjusting the frequency characteristic and the frequency characteristic of the collected sound data In addition to this, the frequency characteristics after adjustment by the frequency characteristics adjustment unit 13 (that is, the frequency characteristics of the sound data immediately after being output from the frequency characteristics adjustment unit 13) and the frequency characteristics of the collected sound data. may be used to determine whether or not to update the frequency characteristic adjustment value or adjust the frequency characteristic itself. This is because the frequency characteristics after adjustment by the frequency characteristics adjustment unit 13 are also the frequency characteristics of the sound data corresponding to the emitted sound. According to the configuration of this third modified example, the frequency characteristics corresponding to the difference data shown in the lower part of FIG. and the frequency characteristics of the vehicle interior space at that time are typically reflected. Therefore, by updating using the correction value according to the embodiment so that the magnitude of the difference data is reduced, the frequency characteristics of the sound emitted into the vehicle interior space can be adjusted to the desired frequency characteristics (as a so-called reference). frequency characteristics).

更に第4変形例として、上述した実施例では、カーオーディオ装置16と音源としてのスマートフォンSMとが実施例に係る音場調整装置SSに接続された構成となっていたが、これ以外に、音源の蓄積機能及び対応する音データの再生機能を音場調整装置内に含ませるように構成してもよい。この場合には、上記通信部10及び通信部15は不要となる。このように構成することで、実施形態は、既存のカーオーディオ製品(より具体的には、カーナビゲーション装置、車両に搭載可能なオーディオ装置又はCD/DVD/BD/USB/チューナ搭載プレーヤ等)にも適用可能となる。 Furthermore, as a fourth modification, in the above-described embodiment, the car audio device 16 and the smartphone SM as the sound source are connected to the sound field adjustment device SS according to the embodiment. and the function of reproducing the corresponding sound data may be included in the sound field adjustment device. In this case, the communication section 10 and the communication section 15 become unnecessary. By configuring in this way, the embodiment can be applied to existing car audio products (more specifically, car navigation devices, audio devices that can be mounted on vehicles, CD/DVD/BD/USB/tuner-equipped players, etc.). is also applicable.

更にまた第5変形例として、いわゆるスマートスピーカに実施形態を適用することも可能である。より具体的には、実施例に係るカーオーディオ装置16とスピーカSPを音場調整装置内に含ませるように構成することができる。 Furthermore, as a fifth modified example, it is also possible to apply the embodiment to a so-called smart speaker. More specifically, the car audio device 16 and the speaker SP according to the embodiment can be configured to be included in the sound field adjustment device.

また第6変形例として、上述した実施例では、音楽等の音を再生対象としたが、これ以外に、人の音声を再生対象として上記周波数特性調整値又は実施例に係る補正値を設定してもよい。この場合における上記相関係数γの算出は、人の音声に含まれる周波数帯域に限定して行えばよい。 As a sixth modification, in the above-described embodiment, sound such as music is played, but in addition to this, the frequency characteristic adjustment value or the correction value according to the embodiment is set for human voice. may In this case, the calculation of the correlation coefficient γ may be performed by limiting the frequency band included in human speech.

更に第6変形例として、上述した実施例(図3ステップS9参照)において、周波数特性調整値の更新を行わない場合)に、過去に更新された周波数特性調整値を継続して使用しつつ調整を行ってもよいし、周波数特性調整部13による調整自体を行わない(即ち、周波数特性調整部13の機能をオフとして、オーディオデコーダ11から出力された音データをそのままオーディオエンコーダ14に出力する(即ちスルー)する)ように構成してもよい。 Further, as a sixth modified example, in the case where the frequency characteristic adjustment value is not updated in the above-described embodiment (see step S9 in FIG. 3), adjustment is performed while continuing to use the frequency characteristic adjustment value updated in the past. may be performed, or the adjustment itself by the frequency characteristic adjusting unit 13 is not performed (that is, the function of the frequency characteristic adjusting unit 13 is turned off, and the sound data output from the audio decoder 11 is output as is to the audio encoder 14 ( that is, through)).

更に、図3に示したフローチャートに相当するプログラムを、光ディスク又はハードディスク等の記録媒体に記録しておき、或いはインターネット等のネットワークを介して取得しておき、これを汎用のマイクロコンピュータ等に読み出して実行することにより、当該マイクロコンピュータ等を実施例に係る音場調整装置SSの上記CPUとして機能させることも可能である。 Furthermore, a program corresponding to the flowchart shown in FIG. 3 is recorded on a recording medium such as an optical disk or hard disk, or obtained via a network such as the Internet, and is read by a general-purpose microcomputer or the like. By executing this, it is possible to cause the microcomputer or the like to function as the CPU of the sound field adjustment device SS according to the embodiment.

1 判定手段(周波数特性分析部)
2 更新手段(イコライザ値設定部)
13 周波数特性調整部
16 カーオーディオ装置
S 音制御装置
SS 音場調整装置
SP 放音手段(スピーカ)
MC 集音手段(マイク)
SM スマートフォン
1 determination means (frequency characteristic analysis unit)
2 updating means (equalizer value setting unit)
13 Frequency characteristic adjustment unit 16 Car audio device S Sound control device SS Sound field adjustment device SP Sound emission means (speaker)
MC sound collection means (microphone)
SM Smartphone

Claims (1)

放音されるべき原音に対応する原音情報、及び、当該原音が放音される空間の音を集音する集音手段により集音された当該音に相当する集音情報の少なくともいずれか一方に基づいて、前記原音を放音する際の前記原音情報の周波数特性の調整に用いられる調整値を更新する更新処理を行うか否かを判定する判定手段と、
前記更新処理を行うと判定された場合に前記調整値を更新し、当該更新後の前記調整値を用いて前記周波数特性が調整された前記原音情報に対応する前記原音を放音手段から放音させる更新手段と、
を備えることを特徴とする音制御装置。
At least one of original sound information corresponding to the original sound to be emitted and collected sound information corresponding to the sound collected by the sound collecting means for collecting the sound in the space where the original sound is emitted determining means for determining whether or not to perform update processing for updating an adjustment value used for adjusting the frequency characteristics of the original sound information when emitting the original sound based on the above;
updating the adjustment value when it is determined that the update processing is to be performed, and emitting the original sound corresponding to the original sound information whose frequency characteristics have been adjusted using the updated adjustment value from a sound emitting means; an update means to cause
A sound control device comprising:
JP2023027101A 2018-07-25 2023-02-24 Sound control device, sound control method and sound control program Pending JP2023054301A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023027101A JP2023054301A (en) 2018-07-25 2023-02-24 Sound control device, sound control method and sound control program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018139711A JP2020017867A (en) 2018-07-25 2018-07-25 Sound control device, sound control method, and sound control program
JP2023027101A JP2023054301A (en) 2018-07-25 2023-02-24 Sound control device, sound control method and sound control program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018139711A Division JP2020017867A (en) 2018-07-25 2018-07-25 Sound control device, sound control method, and sound control program

Publications (1)

Publication Number Publication Date
JP2023054301A true JP2023054301A (en) 2023-04-13

Family

ID=69581622

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018139711A Ceased JP2020017867A (en) 2018-07-25 2018-07-25 Sound control device, sound control method, and sound control program
JP2023027101A Pending JP2023054301A (en) 2018-07-25 2023-02-24 Sound control device, sound control method and sound control program

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018139711A Ceased JP2020017867A (en) 2018-07-25 2018-07-25 Sound control device, sound control method, and sound control program

Country Status (1)

Country Link
JP (2) JP2020017867A (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6121125U (en) * 1984-07-11 1986-02-07 クラリオン株式会社 Automotive sound field correction device
JP2003263872A (en) * 2002-03-11 2003-09-19 Alpine Electronics Inc Audio output device
JP4185770B2 (en) * 2002-12-26 2008-11-26 パイオニア株式会社 Acoustic device, acoustic characteristic changing method, and acoustic correction program
JP2007101782A (en) * 2005-10-03 2007-04-19 Matsushita Electric Ind Co Ltd Sound adjustment device, sound adjustment program, and sound adjustment method

Also Published As

Publication number Publication date
JP2020017867A (en) 2020-01-30

Similar Documents

Publication Publication Date Title
JP4134989B2 (en) Automotive audio equipment
US7058183B2 (en) Sound correction system, recording medium on which a sound correction program is recorded, sound correction method and sound correction apparatus
JP6186470B2 (en) Acoustic device, volume control method, volume control program, and recording medium
JP4894342B2 (en) Sound playback device
US9397630B2 (en) Directional based audio response to an external environment emergency signal
US8804976B2 (en) Content reproduction device and method, and program
GB2565627A (en) System and method for selective volume adjustment in a vehicle
US20160192071A1 (en) Acoustic device, acoustic processing method, and acoustic processing program
JP4381291B2 (en) Car audio system
JP2008070878A (en) Voice signal pre-processing device, voice signal processing device, voice signal pre-processing method and program for voice signal pre-processing
JP2023054301A (en) Sound control device, sound control method and sound control program
JP2010141468A (en) Onboard acoustic apparatus
JP4977066B2 (en) Voice guidance device for vehicles
JP2008071058A (en) Device, method and program for reproducing sound
JP4757034B2 (en) Sound field correction apparatus and control method therefor
CN101192812A (en) Onboard audio volume control device and method
JP2008070877A (en) Voice signal pre-processing device, voice signal processing device, voice signal pre-processing method and program for voice signal pre-processing
JP2010181448A (en) Sound adjusting device and sound adjusting method
JP2686390B2 (en) In-vehicle audio system
KR102250303B1 (en) Sound source player
JP2004328214A (en) System for reproducing musical sound in vehicle
KR102017261B1 (en) Improvement system for audio sound quality of automobile by noise pattern analysis and improvement method therefor
JP3374546B2 (en) Sound reproduction device
JP5925544B2 (en) Acoustic device, volume control method, volume control program, and recording medium
JP2023062165A (en) Acoustic reproduction device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240326