WO2020217872A1 - 信号処理装置、信号処理方法、プログラム及び映像表示装置 - Google Patents

信号処理装置、信号処理方法、プログラム及び映像表示装置 Download PDF

Info

Publication number
WO2020217872A1
WO2020217872A1 PCT/JP2020/014599 JP2020014599W WO2020217872A1 WO 2020217872 A1 WO2020217872 A1 WO 2020217872A1 JP 2020014599 W JP2020014599 W JP 2020014599W WO 2020217872 A1 WO2020217872 A1 WO 2020217872A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
audio signal
gain
control unit
displacement
Prior art date
Application number
PCT/JP2020/014599
Other languages
English (en)
French (fr)
Inventor
米田　道昭
善之 黒田
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to CN202080029215.XA priority Critical patent/CN113711622B/zh
Priority to US17/604,365 priority patent/US11722110B2/en
Priority to DE112020002052.5T priority patent/DE112020002052T5/de
Priority to JP2021515917A priority patent/JP7494839B2/ja
Publication of WO2020217872A1 publication Critical patent/WO2020217872A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03G—CONTROL OF AMPLIFICATION
    • H03G3/00—Gain control in amplifiers or frequency changers
    • H03G3/20—Automatic control
    • H03G3/30—Automatic control in amplifiers having semiconductor devices
    • H03G3/3005—Automatic control in amplifiers having semiconductor devices in amplifiers suitable for low-frequencies, e.g. audio amplifiers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • H04R1/028—Casings; Cabinets ; Supports therefor; Mountings therein associated with devices performing functions other than acoustics, e.g. electric candles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/001—Monitoring arrangements; Testing arrangements for loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R7/00—Diaphragms for electromechanical transducers; Cones
    • H04R7/02—Diaphragms for electromechanical transducers; Cones characterised by the construction
    • H04R7/04—Plane diaphragms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/007—Two-channel systems in which the audio signals are in digital form
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03G—CONTROL OF AMPLIFICATION
    • H03G2201/00—Indexing scheme relating to subclass H03G
    • H03G2201/10—Gain control characterised by the type of controlled element
    • H03G2201/103—Gain control characterised by the type of controlled element being an amplifying element
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/15—Transducers incorporated in visual displaying devices, e.g. televisions, computer displays, laptops
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13—Aspects of volume control, not necessarily automatic, in stereophonic sound systems

Definitions

  • the present disclosure relates to a signal processing device, a signal processing method, a program, and a video display device.
  • Patent Document 1 describes an image display device that generates sound by vibrating the panel portion.
  • the present disclosure provides a signal processing device, a signal processing method, a program, and a video display device that prevent a deviation of a predetermined sound image position formed by an audio signal and prevent the sound pressure of the audio signal from being lowered as much as possible. That is one of the purposes.
  • the present disclosure is, for example, The first panel displacement control unit to which the first audio signal is input and The second panel displacement control unit to which the second audio signal is input and It has a first panel displacement control unit and a control unit that controls the second panel displacement control unit.
  • the first panel displacement control unit has a first gain adjustment unit that adjusts the level of the first audio signal.
  • the second panel displacement control unit has a second gain adjustment unit that adjusts the level of the second audio signal.
  • the control unit A correlation discriminator that determines the presence or absence of a correlation between the first audio signal and the second audio signal, It is a signal processing device having a gain control unit that controls the level adjustment amount in each of the first gain adjustment unit and the second gain adjustment unit based on the discrimination result by the correlation discrimination unit.
  • the present disclosure is, for example,
  • the first gain adjusting unit of the first panel displacement control unit to which the first audio signal is input adjusts the level of the first audio signal.
  • the second gain adjusting unit of the second panel displacement control unit to which the second audio signal is input adjusts the level of the second audio signal.
  • the correlation discriminating unit of the control unit determines whether or not there is a correlation between the first audio signal and the second audio signal. This is a signal processing method in which the gain control unit of the control unit controls the level adjustment amount in each of the first gain adjustment unit and the second gain adjustment unit based on the discrimination result by the correlation discrimination unit.
  • the present disclosure is, for example,
  • the first gain adjusting unit of the first panel displacement control unit to which the first audio signal is input adjusts the level of the first audio signal.
  • the second gain adjusting unit of the second panel displacement control unit to which the second audio signal is input adjusts the level of the second audio signal.
  • the correlation discriminating unit of the control unit determines whether or not there is a correlation between the first audio signal and the second audio signal.
  • the gain control unit of the control unit is a program that causes a computer to execute a signal processing method for controlling the level adjustment amount in each of the first gain adjustment unit and the second gain adjustment unit based on the discrimination result by the correlation discrimination unit. ..
  • the present disclosure is, for example, The first video display panel and The first vibrating device that vibrates the first video display panel, A second video display panel arranged adjacent to the first video display panel, A second vibrator that vibrates the second video display panel,
  • the second panel displacement control unit to which the second audio signal is input and It has a first panel displacement control unit and a control unit that controls the second panel displacement control unit.
  • the first panel displacement control unit has a first gain adjustment unit that adjusts the level of the first audio signal.
  • the second panel displacement control unit has a second gain adjustment unit that adjusts the level of the second audio signal.
  • the control unit A correlation discriminator that determines the presence or absence of a correlation between the first audio signal and the second audio signal, This is an image display device having a gain control unit that controls the level adjustment amount in each of the first gain adjustment unit and the second gain adjustment unit based on the discrimination result by the correlation discrimination unit.
  • FIG. 1 is a perspective view of the image display device according to the embodiment.
  • FIG. 2 is a rear view of the image display device according to the embodiment.
  • 3A-3C are diagrams that are referred to when explaining the issues to be considered in the embodiments.
  • FIG. 4 is a diagram that is referred to when explaining a problem to be considered in the embodiment.
  • FIG. 5 is a block diagram including an internal configuration of the video display device according to the embodiment.
  • FIG. 6 is a block diagram including an internal configuration of the video display device according to the embodiment.
  • FIG. 7 is a diagram schematically showing that the sound image is localized in the center.
  • FIG. 8 is a diagram schematically showing that the sound image is localized at the location where the sound of each channel is output.
  • FIG. 9 is a diagram for explaining an attack time, a hold time, and a release time according to the embodiment.
  • FIG. 10 is a flowchart showing a flow of processing performed by the video display device according to the embodiment.
  • FIG. 11 is a flowchart showing a flow of processing performed by the video display device according to the embodiment.
  • FIG. 12 is a diagram for explaining a modified example.
  • FIG. 13 is a diagram for explaining a modified example.
  • FIG. 14 is a diagram for explaining a modified example.
  • FIG. 15 is a diagram for explaining a modified example.
  • FIG. 1 is a perspective view of the image display device 1 viewed from the back side (the surface opposite to the surface on which the image is displayed), and FIG. 2 is a plan view of the image display device 1 viewed from the back side. ..
  • the image display device 1 has a panel portion 2, a support portion 3, and a storage portion 4.
  • the panel unit 2 is a panel unit 2 for displaying an image. As shown in FIG. 2, in the panel portion 2 according to the present embodiment, two panel portions (first image display panel 2A, second image display panel 2B) arranged at positions adjacent to each other are joined. It has an integrated structure. The first video signal is displayed on the first video display panel 2A. Further, the second video signal is displayed on the second video display panel 2B. The first video display panel 2A and the second video display panel 2B are appropriately collectively referred to as the panel unit 2 when it is not necessary to distinguish between the two. As the panel unit 2, an OLED (Organic Light Emitting Diode), an LCD (Liquid Crystal Display), or the like can be applied.
  • OLED Organic Light Emitting Diode
  • LCD Liquid Crystal Display
  • the support portion 3 is attached to the back surface of the panel portion 2 and supports the panel portion 2.
  • the support portion 3 may be attached to the back surface of the panel portion 2 via a rotating portion such as a hinge. Then, the inclination angle of the panel portion 2 may be adjusted by rotating the rotating portion to move the support portion 3.
  • the support portion 3 functions as a speaker of the subwoofer.
  • the storage unit 4 has, for example, a rod shape and is installed on the back surface of the panel unit 2.
  • the accommodating unit 4 houses a vibrating unit 5 that vibrates the panel unit 2, a control circuit that supplies an audio signal to the vibrating unit 5, and the like.
  • the vibration unit 5 housed in the storage unit 4 is composed of, for example, two vibration devices (first vibration device 5A and second vibration device 5B).
  • the first exciter 5A and the second exciter 5B are, for example, piezoelectric actuators.
  • the first exciter 5A is installed near the center of the back surface of the first image display panel 2A
  • the second exciter 5B is located in the center of the back surface of the second image display panel 2B. It is installed nearby.
  • the first exciter 5A vibrates in a direction substantially orthogonal to the display surface when the first audio signal is input.
  • the vibration of the first exciter 5A is transmitted to the first image display panel 2A, the first image display panel 2A vibrates and a sound based on the vibration is generated.
  • the first audio signal is, for example, an L (Left) channel signal.
  • the second exciter 5B vibrates in a direction substantially orthogonal to the display surface when the second audio signal is input.
  • the vibration of the second exciter 5B is transmitted to the second image display panel 2B, the second image display panel 2B vibrates and a sound based on the vibration is generated.
  • the second audio signal is, for example, an R (Right) channel signal.
  • the image shake is a phenomenon in which an object in the viewing space or the image of the viewer is reflected on the panel unit 2, and the reflected object or the like vibrates due to the vibration of the panel unit 2. Since the object or the like reflected on the panel unit 2 has nothing to do with the image displayed on the panel unit 2, the viewer of the image feels uncomfortable when the image shake occurs. Therefore, it is desired to suppress the occurrence of image shake as much as possible.
  • FIG. 3A is a diagram showing an example of the displacement characteristics of the panel portion 2.
  • the displacement characteristic of the panel unit 2 is a frequency characteristic of the displacement (mm) measured when the panel unit 2 is vibrated by inputting an audio signal having a constant input voltage to the excitation unit 5. As shown in FIG. 3A, the lower the frequency, the larger the displacement amount. Further, a threshold value indicating whether or not image shake occurs is set, and when the displacement amount of the panel unit 2 exceeds the threshold value, the image shake becomes conspicuous to the extent that it is visually recognized.
  • a method of using a high-pass filter having the characteristics schematically shown in FIG. 3B can be considered.
  • a high-pass filter having the characteristics schematically shown in FIG. 3B
  • this method since the low frequency band is always cut by the fixed high-pass filter, there is a possibility that the signal of the low frequency component that does not exceed the threshold value is also cut.
  • the image shake is caused by the characteristics of the image input to the panel unit 2, the brightness of the space in which the panel unit 2 exists, the specifications such as the reflectance of the panel unit 2, the viewing position, and the like. Even if the amount of displacement is different, the degree of conspicuous image shake is also different. Therefore, it is preferable to dynamically change the threshold value indicating whether or not image blurring occurs according to the above-mentioned factors.
  • a threshold value indicating whether or not image blurring occurs is appropriately set. Further, as shown in FIG. 4, when the displacement amount of the panel unit 2 exceeds the threshold value, the level of the audio signal is lowered. As described above, the lower the frequency of the audio signal, the larger the displacement amount of the panel portion 2, so that the level of the low frequency component of the audio signal is mainly attenuated. As a result, the vibration of the panel portion 2 can be suppressed, so that it is possible to suppress the occurrence of image shake.
  • the sound image position formed by the audio signal is determined.
  • each of the two channels of audio signals includes a signal that localizes the sound image between two panels, that is, a signal that localizes to the center, if only the level of one of the audio signals is attenuated, the sound image position shifts from the center. It ends up.
  • the audio signals of both channels are independent audio signals (for example, when the audio signals of each channel are the audio signals of different instruments).
  • control is performed so that the sound image localization can be maintained and the sound pressure can be secured while effectively suppressing the image shake.
  • FIG. 5 is a block diagram showing a configuration including an internal configuration of the video display device 1.
  • a video signal and an audio signal are input to the video display device 1 as source signals.
  • the video signal and audio signal are input to the video display device 1 from a network such as broadcasting or the Internet, a hard disk, an appropriate memory such as an optical disk or a USB (Universal Serial Bus) memory, or the like. Note that in FIG. 5, the configuration for processing the video signal is not shown.
  • the video signal input to the video display device 1 is supplied to the panel unit 2 and displayed after being processed by a known video processing circuit.
  • the image display device 1 includes a first volume adjusting unit 10A, a first panel displacement control unit 20A, a first amplifier 30A, and a second volume adjusting unit 10B. , A second panel displacement control unit 20B, a second amplifier 30B, and a control unit 40.
  • the first panel displacement control unit 20A is connected to the output side of the first volume adjustment unit 10A.
  • the first amplifier 30A is connected to the output side of the first panel displacement control unit 20A.
  • the above-mentioned first exciter 5A is connected to the output side of the first amplifier 30A.
  • the first volume adjusting unit 10A adjusts the volume so that the level of the input audio signal becomes a level corresponding to the set volume.
  • the audio signal whose volume has been adjusted by the first volume adjusting unit 10A is output to the first panel displacement control unit 20A.
  • the first panel displacement control unit 20A roughly adjusts the level of the low frequency component of the audio signal supplied from the first volume adjustment unit 10A based on the control gain. An audio signal whose low frequency component level is adjusted is output from the first panel displacement control unit 20A to the first amplifier 30A.
  • the low frequency band means a band lower than a predetermined threshold value, and is, for example, about 20 to 200 Hz.
  • the first amplifier 30A amplifies the audio signal supplied from the first panel displacement control unit 20A with a predetermined amplification factor.
  • the audio signal amplified by the first amplifier 30A is supplied to the first exciter 5A.
  • the first exciter 5A vibrates based on the audio signal supplied from the first amplifier 30A, and the vibrating first exciter 5A vibrates the first image display panel 2A.
  • the sound generated by the vibration of the first video display panel 2A is heard by the viewer of the video display device 1.
  • the second panel displacement control unit 20B is connected to the output side of the second volume adjustment unit 10B.
  • the second amplifier 30B is connected to the output side of the second panel displacement control unit 20B.
  • the above-mentioned second exciter 5B is connected to the output side of the second amplifier 30B.
  • the second volume adjusting unit 10B adjusts the volume so that the level of the input audio signal becomes a level corresponding to the same volume as the volume set in the first volume adjusting unit 10A.
  • the audio signal whose volume has been adjusted by the second volume adjusting unit 10B is output to the second panel displacement control unit 20B.
  • the second panel displacement control unit 20B roughly adjusts the level of the low frequency component of the audio signal supplied from the second volume adjustment unit 10B based on the control gain.
  • the input audio signal whose low frequency component level is adjusted is output from the second panel displacement control unit 20B to the second amplifier 30B.
  • the second amplifier 30B amplifies the audio signal supplied from the second panel displacement control unit 20B with a predetermined amplification factor.
  • the amplification factor of the second amplifier 30B is, for example, the same amplification factor as that of the first amplifier 30A.
  • the audio signal amplified by the second amplifier 30B is supplied to the second exciter 5B.
  • the second exciter 5B vibrates based on the audio signal supplied from the second amplifier 30B, and the second vibrating device 5B vibrates, so that the second image display panel 2B vibrates. The sound generated by the vibration of the second video display panel 2B is heard by the viewer of the video display device 1.
  • FIG. 6 is a diagram showing in detail a configuration example of the first panel displacement control unit 20A and the second panel displacement control unit 20B.
  • the first panel displacement control unit 20A includes, for example, the first image shake detection unit 201A as an example of the first threshold value setting unit and the first panel displacement detection unit 20A as an example of the first displacement detection unit. It has a unit 202A, a first control gain calculation unit 203A, a first delay device 204A (delay), and a first dynamic EQ (Equalizer) 205A as an example of a gain adjustment unit.
  • the first video signal displayed on the first video display panel 2A is supplied to the first image shake detection unit 201A.
  • the first audio signal of the L channel supplied from the first volume adjusting unit 10A is supplied to each of the first panel displacement detecting unit 202A and the first delay device 204A.
  • the first image shake detection unit 201A calculates the displacement amount at which image shake does not occur, and sets the calculated displacement amount as the first threshold value.
  • the first image shake detection unit 201A calculates the displacement amount based on, for example, the characteristics of the first video signal input to itself. Specifically, the characteristics of the first video signal are characteristics related to the brightness of the first video signal. More specifically, the characteristic relating to the brightness of the first video signal is a brightness average value obtained by averaging the brightness of each pixel in the frame constituting the first video signal.
  • the first image shake detection unit 201A supplies the calculated first threshold value to the first control gain calculation unit 203A.
  • the first image shake detection unit 201A reduces the first threshold value. By reducing the first threshold value, the level of the low frequency component of the audio signal is attenuated, and the vibration of the first video display panel 2A is suppressed. As a result, it is possible to effectively suppress the occurrence of image shake.
  • the first image shake detection unit 201A increases the first threshold value.
  • the first threshold value is set large, the level of the low frequency component of the first audio signal is maintained without being attenuated, or the amount of attenuation becomes small. Therefore, it is possible to secure the sound pressure.
  • the first threshold value corresponding to the average brightness value is set in advance as follows, for example. While a certain number of subjects are watching, a video signal having a predetermined brightness average value is input, and the first video display panel 2A is vibrated while changing the displacement amount.
  • the amount of displacement in which the number of subjects who visually recognize the image shake exceeds a predetermined number is set as the first threshold value corresponding to the average luminance value.
  • a table or calculation formula in which the brightness average value and the threshold value are associated with each other is stored in an appropriate memory as a characteristic of the first video display panel 2A.
  • the first image shake detection unit 201A obtains the brightness average value of the first video signal, and image shake does not occur based on the obtained brightness average value and the pre-measured characteristics of the first video display panel 2A. Calculate the first threshold.
  • the displacement amount at which the image shake does not occur may be the displacement amount when the number of subjects who visually recognize the image shake is 0, or when the number of subjects who visually recognize the image shake becomes a certain number or less
  • the first panel displacement detection unit 202A is a first image display panel that generates sound by being vibrated by the first exciter 5A based on the first audio signal supplied from the first volume adjustment unit 10A. The displacement amount of 2A is detected.
  • the first panel displacement detection unit 202A is composed of a filter (for example, LPF (Low Pass Filter) of a secondary IIR (Infinite Impulse Response)) that approximates the displacement characteristics of the first image display panel 2A measured in advance. Has been done.
  • the first panel displacement detection unit 202A detects the amount of displacement of the first video display panel 2A with respect to the input audio signal by filtering the first audio signal.
  • the first control gain calculation unit 203A compares the first threshold value supplied from the first image shake detection unit 201A with the displacement amount detected by the first panel displacement detection unit 202A, and the first control gain calculation unit 203A is based on the comparison result. Calculate the control gain.
  • the first control gain is a parameter indicating the degree to which the level of the low frequency component of the audio signal is lowered.
  • the low frequency band is a preset band. As described above, since the displacement amount of the first video display panel 2A becomes larger in the low frequency range, the level of the low frequency component of the first audio signal is attenuated by the first control gain, so that the first video display is used. The amount of displacement of the panel 2A can be reduced.
  • the first control gain calculation unit 203A calculates the first control gain according to the amount of displacement detected by the first panel displacement detection unit 202A that exceeds the first threshold value. Specifically, in the first control gain calculation unit 203A, the larger the displacement amount detected by the first panel displacement detection unit 202A exceeds the threshold value, the larger the attenuation amount of the low frequency component of the first voice signal.
  • the first control gain (-3 dB, -6 dB, etc.) is calculated.
  • the first control gain calculation unit 203A outputs 0 dB (decibel) as the first control gain.
  • the first control gain is 0 dB, that is, 1 times, it means that the level of the low frequency component is not lowered and is output as it is.
  • the first delay device 204A delays the first audio signal for a period for the first control gain calculation unit 203A to perform the process of calculating the first control gain.
  • the first voice signal delayed by the first delay device 204A is supplied to the first dynamic EQ205A.
  • the first dynamic EQ205A adjusts the level of the low frequency component of the first audio signal.
  • the first dynamic EQ205A adjusts the level of the low frequency component of the first audio signal based on the first control gain.
  • the first dynamic EQ205A may adjust the level of the low frequency component of the first audio signal based on the control gain having a larger attenuation than the first control gain. Even in this case, since the attenuation amount of the control gain used for the level adjustment is larger than the attenuation amount of the first control gain, the displacement amount of the first image display panel 2A can be suppressed and the image shake occurs. Can be suppressed.
  • the first audio signal processed by the first dynamic EQ205A is output to the first amplifier 30A.
  • a shelving filter or a parametric equalizer can be applied.
  • the second panel displacement control unit 20B includes, for example, a second image shake detection unit 201B as an example of a second threshold value setting unit, a second panel displacement detection unit 202B as an example of a second displacement detection unit, and a second control. It has a gain calculation unit 203B, a second delay device 204B (delay), and a second dynamic EQ 205B as an example of the gain adjustment unit.
  • the second video signal is supplied to the second image shake detection unit 201B.
  • the second audio signal of the R channel supplied from the second volume adjusting unit 10B is supplied to each of the second panel displacement detecting unit 202B and the second delay device 204B.
  • the second image shake detection unit 201B calculates the displacement amount at which image shake does not occur, and sets the calculated displacement amount as the second threshold value.
  • the second image shake detection unit 201B calculates the displacement amount based on, for example, the characteristics of the second video signal input to itself.
  • the characteristics of the second video signal are characteristics related to the brightness of the second video signal. More specifically, the characteristic relating to the brightness of the second video signal is a brightness average value obtained by averaging the brightness of each pixel in the frame constituting the second video signal.
  • the second image shake detection unit 201B supplies the calculated second threshold value to the second control gain calculation unit 203B.
  • the second image shake detection unit 201B reduces the second threshold value. By reducing the second threshold value, the level of the low frequency component of the audio signal is attenuated, and the vibration of the second video display panel 2B is suppressed. As a result, it is possible to effectively suppress the occurrence of image shake.
  • the second image shake detection unit 201B increases the second threshold value.
  • the second threshold value is set large, the level of the low frequency component of the input voice signal is maintained without being attenuated, or the amount of attenuation becomes small. Therefore, it is possible to secure the sound pressure.
  • the second threshold value corresponding to the brightness average value can be measured in advance by the same method as the first threshold value described above.
  • the second panel displacement detection unit 202B is a second image display panel that generates sound by being vibrated by the second exciter 5B based on the second audio signal supplied from the second volume adjustment unit 10B. The displacement amount of 2B is detected.
  • the second panel displacement detection unit 202B is composed of a filter (for example, a secondary IIR LPF) that approximates the displacement characteristics of the second image display panel 2B measured in advance.
  • the second panel displacement detection unit 202B detects the amount of displacement of the second video display panel 2B with respect to the second audio signal by performing filter processing on the second audio signal.
  • the second control gain calculation unit 203B compares the second threshold value supplied from the second image shake detection unit 201B with the displacement amount detected by the second panel displacement detection unit 202B, and the second control gain calculation unit 203B is based on the comparison result. Calculate the control gain.
  • the second control gain is a parameter indicating the degree of lowering the level of the low frequency component of the second audio signal.
  • the low frequency band is a preset band. As described above, the lower the frequency of the second audio signal, the larger the displacement of the second video display panel 2B. Therefore, the level of the low frequency component of the second audio signal is attenuated by the second control gain. The amount of displacement of the second image display panel 2B can be reduced.
  • the second control gain calculation unit 203B calculates the second control gain according to the amount of displacement detected by the second panel displacement detection unit 202B that exceeds the second threshold value. Specifically, in the second control gain calculation unit 203B, the larger the displacement amount detected by the second panel displacement detection unit 202B exceeds the second threshold value, the more the attenuation amount of the low frequency component of the second audio signal. The second control gain (-3 dB, -6 dB, etc.) in which is increased is calculated. When the displacement amount detected by the second panel displacement detection unit 202B does not exceed the second threshold value, the second control gain calculation unit 203B outputs 0 dB (decibel) as the second control gain. The fact that the second control gain is 0 dB, that is, 1 times, means that the level of the low frequency component is not lowered and is output as it is.
  • the second delay device 204B delays the second audio signal for a period for the second control gain calculation unit 203B to perform the process of calculating the second control gain.
  • the second voice signal delayed by the second delay device 204B is supplied to the second dynamic EQ205B.
  • the second dynamic EQ205B adjusts the level of the low frequency component of the second audio signal.
  • the second dynamic EQ205B adjusts the level of the low frequency component of the second audio signal based on the first control gain.
  • the second dynamic EQ205B may adjust the level of the low frequency component of the second audio signal based on the control gain having a larger attenuation than the second control gain. Even in this case, since the attenuation amount of the control gain used for the level adjustment is larger than the attenuation amount of the second control gain, the displacement amount of the second image display panel 2B can be suppressed and the image shake occurs. Can be suppressed.
  • the second audio signal processed by the second dynamic EQ205B is output to the second amplifier 30B.
  • a shelving filter or a parametric equalizer can be applied.
  • the control unit 40 has a correlation determination unit 401 and a control gain control unit 402.
  • the correlation determination unit 401 determines the correlation between the L channel audio signal and the R channel audio signal.
  • the correlation determination unit 401 supplies the determination result to the control gain control unit 402.
  • the correlation discrimination unit 401 converts the signal of each channel from the time axis to the frequency axis by performing an FFT (Fast Fourier Transform) on the signal of each channel. Then, the correlation discrimination unit 401 calculates each power spectrum and cross spectrum, and there is a method of calculating coherence from the average value of the power spectrum and the cross spectrum. When the coherence is between 0 and 1 and the value is equal to or higher than the threshold value (for example, 0.8), the correlation determination unit 401 determines that the audio signals of both channels are correlated.
  • FFT Fast Fourier Transform
  • the correlation determination unit 401 determines that there is no correlation between the audio signals of both channels.
  • the frequency for which the coherence is calculated is limited to the low frequency range. This is because, as described above, the panel portion 2 is largely displaced in the low frequency range, and has a displacement characteristic in which image shake occurs due to the displacement. For example, after FFT, the correlation between the audio signals of both channels is determined only in the low frequency range.
  • the operation for determining coherence is performed as follows.
  • the L channel audio signal signal sequence x (t) and the R channel audio signal signal sequence y (t) were used, and the spectra for each frequency point as a result of FFT of each were set to X (f) and Y (f).
  • the power spectra X * (f) X (f), Y * (f) Y (f) and cross spectra X * (f) Y (f) for each frequency point are obtained, and the average value P1 (f) of the power spectra is obtained.
  • P2 (f) and the average value C (f) of the cross spectrum are obtained, and then the coherence is obtained.
  • X * (f) and Y * (f) are complex conjugates of X (f) and Y (f), respectively.
  • the coherence r is the product of the cross-spectrum mean value C (f) and its complex conjugate C * (f) multiplied by the power spectrum mean values P1 (f) and P2 (f). It can be obtained by dividing. Specifically, the coherence r is calculated by the following mathematical formula (1).
  • the mutual coherence function is calculated by convolving each signal (delaying one side) with only the low frequency component through the LPF on the time axis, and using the result. There is also a method of judging.
  • the correlation discrimination unit 401 determines that there is a correlation between the audio signals of both channels (between the first and second audio signals), for example, when the audio signals of both channels include a signal localized in the center. is there. On the contrary, when the correlation discriminator 401 determines that there is no correlation between the audio signals of both channels, for example, the audio signals of the respective channels are independent audio signals (for example, the audio signals of different musical instruments). If this is the case.
  • the control gain control unit 402 controls the level adjustment amount in each of the first dynamic EQ205A and the second dynamic EQ205B based on the discrimination result by the correlation discrimination unit 401.
  • the control gain control unit 402 adjusts the first control gain and the second control gain.
  • a large amount of control gain is set for each of the first dynamic EQ205A and the second dynamic EQ205B.
  • the first dynamic EQ205A adjusts the level of the L channel audio signal with the set control gain.
  • the second dynamic EQ205B adjusts the level of the audio signal of the R channel with the set control gain.
  • the control gain control unit 402 determines that the first dynamic EQ205A is the first control gain of the L channel. Control to adjust the level of the audio signal. Further, when the correlation discrimination unit 401 determines that there is no correlation between the L channel audio signal and the R channel audio signal, the control gain control unit 402 uses the second dynamic EQ 205B as the second control gain. Control to adjust the level of the audio signal of the channel.
  • the video display device 1 generally performs the operations described below.
  • the first image shake detection unit 201A calculates and sets the first threshold value based on the characteristics of the first video signal.
  • the first panel displacement detection unit 202A performs a filter process on the first audio signal to calculate the displacement amount of the first video display panel 2A corresponding to the first audio signal.
  • the first control gain calculation unit 203A compares the first threshold value set by the image shake detection unit 201 with the displacement amount of the first image display panel 2A calculated by the first panel displacement detection unit 202A. ..
  • the first control gain calculation unit 203A sets the displacement amount of the first image display panel 2A to be lower than the first threshold value.
  • the first control gain corresponding to the amount of displacement of the first image display panel 2A exceeding the first threshold value is calculated.
  • the first control gain calculation unit 203A sets 0 dB as the control gain.
  • the correlation determination unit 401 of the control unit 40 determines whether or not there is a correlation between the L channel audio signal and the R channel audio signal. The presence or absence of correlation is performed in sample units or frame units.
  • the discrimination result by the correlation discrimination unit 401 is supplied to the control gain control unit 402.
  • the control gain control unit 402 acquires the first control gain from the first control gain calculation unit 203A, and the second control gain calculation unit 203B to the second. Get control gain.
  • the control gain control unit 402 compares the first control gain with the second control gain, and determines the control gain having a large attenuation amount.
  • the control gain control unit 402 supplies and sets the control gain having a large attenuation amount to the first control gain calculation unit 203A and the second control gain calculation unit 203B, respectively.
  • the first control gain calculation unit 203A supplies the control gain set by the control gain control unit 402 to the first dynamic EQ 205A.
  • the first dynamic EQ205A adjusts the level of the low frequency component of the L channel audio signal based on the supplied control gain.
  • the second control gain calculation unit 203B supplies the control gain set by the control gain control unit 402 to the second dynamic EQ 205B.
  • the second dynamic EQ205B adjusts the level of the low frequency component of the R channel audio signal based on the supplied control gain.
  • the control gain control unit 402 instructs the first control gain calculation unit 203A to use the first control gain.
  • the first control gain calculation unit 203A supplies the first control gain calculated by itself to the first dynamic EQ 205A according to the control of the control gain control unit 402.
  • the first dynamic EQ205A adjusts the level of the low frequency component of the L channel audio signal based on the first control gain.
  • the control gain control unit 402 instructs the second control gain calculation unit 203B to use the second control gain.
  • the second control gain calculation unit 203B supplies the second control gain calculated by itself to the second dynamic EQ 205B in response to the control of the control gain control unit 402.
  • the second dynamic EQ205B adjusts the level of the low frequency component of the R channel audio signal based on the second control gain.
  • FIG. 7 is a front view of the panel unit 2 as viewed from the image display surface side.
  • the level is adjusted using the control gain having a large attenuation amount. Therefore, the occurrence of image shake can be effectively suppressed.
  • the level of the low frequency component in the audio signal of the corresponding channel is adjusted by each of the first control gain and the second control gain. It is attenuated (gain adjustment amount is asynchronous). Therefore, it is possible to effectively suppress the occurrence of image shake and prevent the sound pressure from being unnecessarily restricted. Further, since the gain adjustment amount is asynchronous, sound images (sound images SI1 and SI2) corresponding to the audio signals of each channel can be formed as schematically shown in FIG.
  • the attack time, hold time, and release time can be set for the first control gain. It is assumed that, for example, -3 dB is calculated as the first control gain. As shown in FIG. 9, the attack time is a period for gradually changing the first control gain from 0 dB to -3 dB (a period from t1 to t2 in the figure).
  • the hold time is a period during which the first control gain is held at -3 dB (a period from t2 to t3 in the figure).
  • the release time is the time (the period from t3 to t4 in the figure) taken to return the first control gain to 0 dB after the first control gain does not need to be -3 dB.
  • the processing by the dynamic EQ205 is performed while the first control gain is changed based on the attack time and the release time. If -3dB is calculated again as the first control gain while the first control gain is changing during the release time, the first control gain is set so that the first control gain becomes -3dB from that timing. A process of gradually changing is performed.
  • the attack time, hold time, and release time can be set for the second control gain.
  • FIGS. 10 and 11 are flowcharts showing in detail the flow of processing performed by the first panel displacement control unit 20A, the second panel displacement control unit 20B, and the control unit 40.
  • the reference numerals "AA” and “BB” in FIGS. 10 and 11 indicate the continuity of processing, respectively, and do not mean a specific processing.
  • step ST1 voice data is input to each of the first panel displacement control unit 20A and the second panel displacement control unit 20B. Specifically, the volume-adjusted L-channel audio signal is input to the first panel displacement control unit 20A, and the volume-adjusted R-channel audio signal is input to the second panel displacement control unit 20B. Then, the process proceeds to step ST2.
  • step ST2 the first panel displacement detection unit 202A filters the audio signal of the L channel to predict the displacement amount of the first video display panel 2A due to the input of the audio signal of the L channel. .. Then, the process proceeds to step ST3.
  • step ST3 the first control gain calculation unit 203A calculates the control gain KL1 which is the suppression amount of the audio signal of the L channel.
  • the control gain KL1 is calculated by, for example, the predicted displacement amount L1 / threshold value (threshold value detected by the first image shake detection unit 201A). Then, the process proceeds to step ST4.
  • step ST4 the first control gain calculation unit 203A determines whether or not KL1> KL2.
  • KL2 is, for example, the currently set control gain. If KL1> KL2 holds, the process proceeds to step ST5.
  • step ST5 the control gain KL2 is calculated.
  • the control gain KL1 having a large suppression amount added to the time constants attack time, hold time, and release time described above
  • the process proceeds to step ST12.
  • step ST6 the control gain KL2 is updated by the time constant. Then, the process proceeds to step ST12.
  • step ST7 the displacement detection unit 202B of the second panel filters the audio signal of the R channel, and the displacement of the second video display panel 2B due to the input of the audio signal of the R channel. Predict the amount. Then, the process proceeds to step ST8.
  • step ST8 the second control gain calculation unit 203B calculates the control gain KR1, which is the amount of suppression of the R channel audio signal.
  • the control gain KR1 is calculated by, for example, the predicted displacement amount R1 / threshold value (threshold value detected by the second image shake detection unit 201B). Then, the process proceeds to step ST9.
  • step ST9 the second control gain calculation unit 203B determines whether or not KR1> KR2.
  • KR2 is, for example, the currently set control gain. If KR1> KR2 holds, the process proceeds to step ST10.
  • step ST10 the control gain KR2 is calculated.
  • the control gain KR1 having a large suppression amount added to the time constants is calculated as the control gain KR2. Then, the process proceeds to step ST12.
  • step ST6 the control gain KR2 is updated by the time constant. Then, the process proceeds to step ST12.
  • step ST12 it is determined whether or not any of the control gains KL2 and KR2 is a value that suppresses the audio signal (for example,> 1). This determination is determined by the control gain control unit 402 that has received the control gains KL2 and KR2 calculated by the first control gain calculation unit 203A and the second control gain calculation unit 203B, respectively. When the control gains KL2 and KR2 are values that suppress the audio signal, the process proceeds to step ST13.
  • step ST13 the correlation discrimination unit 401 calculates the coherence between the L channel audio signal and the R channel audio signal. Then, the process proceeds to step ST14.
  • step ST14 the correlation determination unit 401 determines whether or not the L channel audio signal and the R channel audio signal have a high correlation by comparing the calculated coherence with the threshold value.
  • the correlation determination unit 401 determines that the correlation between the audio signals of both channels is high, the process proceeds to step ST15.
  • step ST15 the control gain control unit 402 adjusts (synchronizes) the control gains KL2 and KR2 to a value with a large suppression amount. Specifically, when KL2> KR2 holds, the control gain KL3 and the control gain KR3 are set to the same values as the value of KL2. When KL2 ⁇ KR2 holds, the control gain KL3 and the second control gain KR3 are set to the same values as the value of KR2.
  • the control gain control unit 402 supplies the set control gain KL3 to the first control gain calculation unit 203A. Then, the first control gain calculation unit 203A supplies the control gain KL3 to the first dynamic EQ205A. Further, the control gain control unit 402 supplies the set control gain KR3 to the second control gain calculation unit 203B. Then, the second control gain calculation unit 203B supplies the control gain KR3 to the second dynamic EQ 205B. Then, the process proceeds to step ST16 and step ST17.
  • step ST16 the first dynamic EQ205A uses the control gain KL3 to adjust the gain of the L channel audio signal. Further, in step ST17, the second dynamic EQ205B uses the control gain KR3 to adjust the gain of the audio signal of the R channel. Then, the process returns to step ST1, and when the voice data of the next sample is input, the same process is performed.
  • the contents of the processes in steps ST16 and ST17 are as described above.
  • step ST12 when neither KL2 nor KR2 is a value for suppressing the audio signal (No in the determination in step ST12), 1 (0 dB) is set as the control gain KL3 and the control gain KR3.
  • the first control gain calculation unit 203A supplies 0 dB to the first dynamic EQ 205A as the control gain KL3.
  • the second control gain calculation unit 203B supplies 0 dB to the second dynamic EQ 205B as the control gain KR3.
  • step ST16 and step ST17 The contents of the processes in steps ST16 and ST17 are as described above.
  • the panel unit 2 is composed of two panels, but as shown in FIG. 12, nine video display panels (video display panels PA, PB, PC ... PI). ) May be configured.
  • a vibrator (schematically indicated by a circle) is joined to each of the nine image display panels.
  • the same processing as in the embodiment may be performed on the adjacent panel portion.
  • the same processing as in the embodiment may be performed on the video display panels PB and PC. If there is a correlation between the audio signals that vibrate the video display panel PB and PC, the suppression amount is synchronized, and as is schematically shown in FIG. 13, the sound image is between the video display panel PB and PC. Can be localized.
  • the panel unit 2 may be composed of three video display panels (video display panels PJ, PK, PL).
  • the first volume adjusting unit 10A may be provided after the first panel displacement control unit 20A. In that case, the volume information set in the first volume adjusting unit 10A may be supplied to the first panel displacement detecting unit 202A. The first panel displacement detection unit 202A may perform filter processing corresponding to the volume information. The same applies to the second volume adjusting unit 10B.
  • the first audio signal and the second audio signal are not limited to the L channel audio signal and the R channel audio signal, but may be audio signals corresponding to objects used in object audio.
  • This disclosure can also be realized by devices, methods, programs, systems, etc.
  • a program that performs the function described in the above-described embodiment can be downloaded, and a device that does not have the function described in the embodiment downloads and installs the program, thereby explaining the device in the embodiment. It is possible to perform the controlled control.
  • the present disclosure can also be realized by a server that distributes such a program.
  • the items described in the respective embodiments and modifications can be combined as appropriate.
  • the contents of the present disclosure are not construed as being limited by the effects exemplified in the present specification.
  • the present disclosure may also adopt the following configuration.
  • the first panel displacement control unit to which the first audio signal is input and The second panel displacement control unit to which the second audio signal is input and It has a first panel displacement control unit and a control unit that controls the second panel displacement control unit.
  • the first panel displacement control unit has a first gain adjustment unit that adjusts the level of the first audio signal.
  • the second panel displacement control unit has a second gain adjustment unit that adjusts the level of the second audio signal.
  • the control unit A correlation discriminator for determining the presence or absence of a correlation between the first audio signal and the second audio signal,
  • a signal processing device having a gain control unit that controls a level adjustment amount in each of the first gain adjustment unit and the second gain adjustment unit based on the discrimination result by the correlation discrimination unit.
  • the first panel displacement control unit A first displacement detection unit that detects the amount of displacement of the first video display panel that generates sound by being vibrated based on the first audio signal. It has a first threshold value setting unit that calculates a displacement amount that does not cause image shake and sets the calculated displacement amount as a first threshold value. The first gain adjusting unit adjusts the level of the first voice signal based on the comparison result between the displacement amount detected by the first displacement detecting unit and the first threshold value.
  • the second panel displacement control unit A second displacement detection unit that detects the amount of displacement of the second video display panel that generates sound by being vibrated based on the second audio signal. It has a second threshold value setting unit that calculates a displacement amount that does not cause image shake and sets the calculated displacement amount as a second threshold value.
  • the signal according to (1) wherein the second gain adjusting unit adjusts the level of the second audio signal based on a comparison result between the displacement amount detected by the second displacement detecting unit and the second threshold value.
  • Processing equipment (3)
  • the first panel displacement control unit It has a first control gain calculation unit that calculates a first control gain based on a comparison result between the displacement amount detected by the first displacement detection unit and the first threshold value.
  • the second panel displacement control unit The signal processing apparatus according to (2), which has a second control gain calculation unit that calculates a second control gain based on a comparison result between the displacement amount detected by the second displacement detection unit and the second threshold value.
  • the gain control unit When it is determined that there is a correlation between the first audio signal and the second audio signal, the control gain having the larger adjustment amount among the first control gain and the second control gain is the first gain.
  • the first gain adjusting unit controls so as to adjust the level of the first audio signal using the set control gain.
  • the signal processing device according to (3), wherein the second gain adjusting unit controls to adjust the level of the second audio signal using the set control gain.
  • the gain control unit When it is determined that there is no correlation between the first audio signal and the second audio signal, The first gain adjusting unit controls to adjust the level of the first audio signal by using the first control gain.
  • the signal processing device controls to adjust the level of the second audio signal by using the second control gain.
  • the first displacement detection unit is composed of a filter that approximates the displacement characteristics of the first image display panel measured in advance.
  • the signal processing device according to (2), wherein the second displacement detection unit is composed of a filter that approximates the displacement characteristics of the second image display panel measured in advance.
  • the signal processing device according to any one of (1) to (6), wherein the correlation discriminating unit discriminates the correlation between the low frequency component of the first audio signal and the low frequency component of the second audio signal.
  • the signal processing device according to any one of (2) to (7), wherein the first image display panel and the second image display panel are panels arranged at positions adjacent to each other.
  • the signal processing device according to any one of (1) to (8), wherein the first audio signal is an L (Left) channel signal, and the second audio signal is an R (Right) channel signal.
  • the first gain adjusting unit of the first panel displacement control unit to which the first audio signal is input adjusts the level of the first audio signal.
  • the second gain adjusting unit of the second panel displacement control unit to which the second audio signal is input adjusts the level of the second audio signal.
  • the correlation determination unit of the control unit determines whether or not there is a correlation between the first audio signal and the second audio signal.
  • the first gain adjusting unit of the first panel displacement control unit to which the first audio signal is input adjusts the level of the first audio signal.
  • the second gain adjusting unit of the second panel displacement control unit to which the second audio signal is input adjusts the level of the second audio signal.
  • the correlation determination unit of the control unit determines whether or not there is a correlation between the first audio signal and the second audio signal.
  • the gain control unit of the control unit causes the computer to execute a signal processing method for controlling the level adjustment amount in each of the first gain adjustment unit and the second gain adjustment unit based on the discrimination result by the correlation discrimination unit. program.
  • (12) The first video display panel and A first vibrating device that vibrates the first video display panel, A second video display panel arranged at a position adjacent to the first video display panel, A second vibrator that vibrates the second video display panel, The first panel displacement control unit to which the first audio signal is input and The second panel displacement control unit to which the second audio signal is input and It has a first panel displacement control unit and a control unit that controls the second panel displacement control unit.
  • the first panel displacement control unit has a first gain adjustment unit that adjusts the level of the first audio signal.
  • the second panel displacement control unit has a second gain adjustment unit that adjusts the level of the second audio signal.
  • the control unit A correlation discriminator for determining the presence or absence of a correlation between the first audio signal and the second audio signal,
  • An image display device having a gain control unit that controls a level adjustment amount in each of the first gain adjustment unit and the second gain adjustment unit based on the discrimination result by the correlation discrimination unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Stereophonic System (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

第１音声信号が入力される第１パネル変位制御部と、第２音声信号が入力される第２パネル変位制御部と、第１パネル変位制御部及び第２パネル変位制御部を制御する制御部とを有し、第１パネル変位制御部は、第１音声信号のレベルを調整する第１ゲイン調整部を有し、第２パネル変位制御部は、第２音声信号のレベルを調整する第２ゲイン調整部を有し、制御部は、第１音声信号及び第２音声信号の間の相関の有無を判別する相関判別部と、相関判別部による判別結果に基づいて、第１ゲイン調整部及び第２ゲイン調整部のそれぞれにおけるレベル調整量を制御するゲイン制御部とを有する信号処理装置である。 図６

Description

信号処理装置、信号処理方法、プログラム及び映像表示装置
　本開示は、信号処理装置、信号処理方法、プログラム及び映像表示装置に関する。
　特許文献１には、パネル部を振動させることで音を発生させるようにした映像表示装置が記載されている。
国際公開２０１８／１２３３１０号
　このような分野では、音声信号により形成される所定の音像位置のずれを防止しつつ、音声信号の音圧を極力、低下させないことが望まれる。
　本開示は、音声信号により形成される所定の音像位置のずれを防止しつつ、音声信号の音圧を極力、低下させないようにした信号処理装置、信号処理方法、プログラム及び映像表示装置を提供することを目的の一つとする。
　本開示は、例えば、
　第１音声信号が入力される第１パネル変位制御部と、
　第２音声信号が入力される第２パネル変位制御部と、
　第１パネル変位制御部及び第２パネル変位制御部を制御する制御部とを有し、
　第１パネル変位制御部は、第１音声信号のレベルを調整する第１ゲイン調整部を有し、
　第２パネル変位制御部は、第２音声信号のレベルを調整する第２ゲイン調整部を有し、
　制御部は、
　第１音声信号及び第２音声信号の間の相関の有無を判別する相関判別部と、
　相関判別部による判別結果に基づいて、第１ゲイン調整部及び第２ゲイン調整部のそれぞれにおけるレベル調整量を制御するゲイン制御部とを有する
　信号処理装置である。
　本開示は、例えば、
第１音声信号が入力される第１パネル変位制御部が有する第１ゲイン調整部が、第１音声信号のレベルを調整し、
　第２音声信号が入力される第２パネル変位制御部が有する第２ゲイン調整部が、第２音声信号のレベルを調整し、
　制御部が有する相関判別部が、第１音声信号及び第２音声信号の間の相関の有無を判別し、
　制御部が有するゲイン制御部が、相関判別部による判別結果に基づいて、第１ゲイン調整部及び第２ゲイン調整部のそれぞれにおけるレベル調整量を制御する
　信号処理方法である。
　本開示は、例えば、
　第１音声信号が入力される第１パネル変位制御部が有する第１ゲイン調整部が、第１音声信号のレベルを調整し、
　第２音声信号が入力される第２パネル変位制御部が有する第２ゲイン調整部が、第２音声信号のレベルを調整し、
　制御部が有する相関判別部が、第１音声信号及び第２音声信号の間の相関の有無を判別し、
　制御部が有するゲイン制御部が、相関判別部による判別結果に基づいて、第１ゲイン調整部及び第２ゲイン調整部のそれぞれにおけるレベル調整量を制御する
　信号処理方法をコンピュータに実行させるプログラムである。
　本開示は、例えば、
　第１映像表示用パネルと、
　第１映像表示用パネルを加振する第１加振器と、
　第１映像表示用パネルと隣接した位置に配置される第２映像表示用パネルと、
　第２映像表示用パネルを加振する第２加振器と、
　第１音声信号が入力される第１パネル変位制御部と、
　第２音声信号が入力される第２パネル変位制御部と、
　第１パネル変位制御部及び第２パネル変位制御部を制御する制御部とを有し、
　第１パネル変位制御部は、第１音声信号のレベルを調整する第１ゲイン調整部を有し、
　第２パネル変位制御部は、第２音声信号のレベルを調整する第２ゲイン調整部を有し、
　制御部は、
　第１音声信号及び第２音声信号の間の相関の有無を判別する相関判別部と、
　相関判別部による判別結果に基づいて、第１ゲイン調整部及び第２ゲイン調整部のそれぞれにおけるレベル調整量を制御するゲイン制御部とを有する
　映像表示装置である。
図１は、実施の形態にかかる映像表示装置の斜視図である。 図２は、実施の形態にかかる映像表示装置の背面図である。 図３Ａ～図３Ｃは、実施の形態において考慮すべき問題を説明する際に参照される図である。 図４は、実施の形態において考慮すべき問題を説明する際に参照される図である。 図５は、実施の形態にかかる映像表示装置の内部構成を含むブロック図である。 図６は、実施の形態にかかる映像表示装置の内部構成を含むブロック図である。 図７は、センターに音像が定位することを模式的に示した図である。 図８は、各チャンネルの音声が出力される箇所に音像が定位することを模式的に示した図である。 図９は、実施の形態にかかるアタックタイム、ホールドタイム及びリリースタイムを説明するための図である。 図１０は、実施の形態にかかる映像表示装置で行われる処理の流れを示すフローチャートである。 図１１は、実施の形態にかかる映像表示装置で行われる処理の流れを示すフローチャートである。 図１２は、変形例を説明するための図である。 図１３は、変形例を説明するための図である。 図１４は、変形例を説明するための図である。 図１５は、変形例を説明するための図である。
　本開示の実施の形態等に関する説明は、以下の順序で行われる。
＜実施の形態＞
＜変形例＞
　以下に説明する実施の形態等は本開示の好適な具体例であり、本開示の内容がこれらの実施の形態等に限定されるものではない。
＜実施の形態＞
［映像表示装置の構成例］
（映像表示装置の外観例）
　図１及び図２は、本実施の形態にかかる映像表示装置（映像表示装置１）の構成例を説明するための図である。図１は、映像表示装置１を背面（映像が表示される面とは反対の面）側から視た斜視図であり、図２は、映像表示装置１を背面側から視た平面図である。映像表示装置１は、パネル部２と、支持部３と、収納部４とを有している。
　パネル部２は、映像を表示するためのパネル部２である。本実施の形態にかかるパネル部２は、図２に示すように、互いに隣接する位置に配置された２枚のパネル部（第１映像表示用パネル２Ａ、第２映像表示用パネル２Ｂ）が接合され、一体化された構成を有している。第１映像表示用パネル２Ａには、第１映像信号が表示される。また、第２映像表示用パネル２Ｂには、第２映像信号が表示される。なお、第１映像表示用パネル２Ａ及び第２映像表示用パネル２Ｂは、両者を区別する必要がない場合には、パネル部２と適宜、総称される。パネル部２としては、ＯＬＥＤ（Organic Light Emitting Diode）、ＬＣＤ(Liquid Crystal Display)等を適用することができる。
　支持部３は、パネル部２の背面に取り付けられており、パネル部２を支持するものである。なお、支持部３は、ヒンジ等の回動部を介してパネル部２の裏面に取り付けられていても良い。そして、回動部を回動させて支持部３を移動させることにより、パネル部２の傾斜角度が調節できるようにしても良い。なお、本実施の形態では、支持部３は、サブウーハーのスピーカとして機能する。
　収納部４は、例えば棒状の形状を有し、パネル部２の裏面に設置されている。収納部４には、パネル部２を振動させる加振部５及び当該加振部５に音声信号を供給する制御回路等が収納される。収納部４に収納される加振部５は、例えば、２個の加振器（第１加振器５Ａ、第２加振器５Ｂ）によって構成されている。第１加振器５Ａ及び第２加振器５Ｂは、例えば、圧電アクチュエーターである。
　図２に示すように、第１加振器５Ａが第１映像表示用パネル２Ａの背面の中央付近に設置されており、第２加振器５Ｂが第２映像表示用パネル２Ｂの背面の中央付近に設置されている。
　第１加振器５Ａは、第１音声信号が入力されることで表示面と略直交する方向に振動する。第１加振器５Ａの振動が第１映像表示用パネル２Ａに伝達されることで第１映像表示用パネル２Ａが振動し、振動に基づく音が発生する。第１音声信号は、例えば、Ｌ(Left)チャンネルの信号である。
　第２加振器５Ｂは、第２音声信号が入力されることで表示面と略直交する方向に振動する。第２加振器５Ｂの振動が第２映像表示用パネル２Ｂに伝達されることで第２映像表示用パネル２Ｂが振動し、振動に基づく音が発生する。第２音声信号は、例えば、Ｒ(Right)チャンネルの信号である。なお、第１加振器５Ａ及び第２加振器５Ｂは、両者を区別する必要がない場合は、加振部５と適宜、総称される。
（実施の形態において考慮すべき問題）
　ところで、本実施の形態にかかる映像表示装置１のように、パネル部２を振動させて音を発生するシステムでは、画揺れの発生に留意する必要がある。画揺れとは、パネル部２に、視聴空間にある物体や視聴者の姿が映り込み、パネル部２の振動によって映り込んだ物体等が振動する現象である。パネル部２に映り込んだ物体等は、パネル部２に表示される映像とは無関係であることから、画揺れが発生すると映像の視聴者は違和感を覚える。そこで、画揺れの発生を極力、抑制することが望まれる。
　図３Ａは、パネル部２の変位特性の一例を示す図である。パネル部２の変位特性とは、加振部５に対して一定の入力電圧の音声信号を入力してパネル部２を振動させた場合に測定される変位（ｍｍ）の周波数特性である。図３Ａに示されているように、周波数が低いほど変位量が大きくなる。また、画揺れが発生するか否かを示す閾値が設定されており、パネル部２の変位量が当該閾値を超えると、画揺れが視覚的に認識される程度に目立ってしまう。
　画揺れを効果的に抑制する一つの解決策として、図３Ｂに模式的に示すような特性を有するハイパスフィルタを使用する方法が考えられる。ハイパスフィルタを使用して低域成分をカットすることにより、図３Ｃに示すように、映像表示パネルの変位量が閾値を上回ることを防止することができ、画揺れを効果的に抑制することができる。しかしながら、この方法では、常に固定のハイパスフィルタで低域をカットするので、閾値を超えないような低域成分の信号もカットされてしまう虞がある。
　ところで、画揺れは、パネル部２に入力される映像の特性、パネル部２が存在する空間の明るさ、パネル部２の反射率等の仕様、視聴位置等に応じて、同じパネル部２の変位量であっても画揺れの目立ちやすさも異なる。そこで、上述した要因に応じて、画揺れが発生するか否かを示す閾値を動的に変更することが好ましい。
　そこで、本実施の形態では、画揺れが発生するか否かを示す閾値が適切に設定されるようにする。また、図４に示すように、パネル部２の変位量が閾値を超えた場合に、音声信号のレベルが下げられるようにする。上述したように、音声信号の周波数が低域であるほどパネル部２の変位量が大きくなることから、主に音声信号の低域成分のレベルが減衰される。これにより、パネル部２の振動を抑制することができるので、画揺れが発生してしまうことを抑制することができる。
　また、本実施の形態のように、隣接する第１映像表示用パネル２Ａ及び第２映像表示用パネル２Ｂに、異なる２チャンネルの信号を入力する場合には、音声信号により形成される音像位置がずれてしまう虞がある点に留意する必要がある。例えば、２チャンネルの音声信号のそれぞれに２個のパネル間に音像定位する信号、即ち、センターに定位する信号が含まれる場合、一方の音声信号のレベルのみを減衰すると、音像位置がセンターからずれてしまう。かかる問題を回避するために、常に両チャンネルの減衰量を同じようにすると、両チャンネルの音声信号が独立した音声信号（例えば、それぞれのチャンネルの音声信号が別の楽器の音声信号である場合）に、必要がないにも関わらず一方の音声信号の低域成分のレベルが減衰されてしまうという問題がある。そこで、本実施の形態では、画揺れを効果的に抑制しつつ、音像定位をキープし、更に、音圧を確保できる制御が行われる。
（映像表示装置の内部構成例）
　図５は、映像表示装置１の内部構成を含む構成を示すブロック図である。映像表示装置１には、ソース信号として、映像信号及び音声信号が入力される。映像信号及び音声信号は、放送、インターネット等のネットワーク、ハードディスク、光ディスクやＵＳＢ(Universal Serial Bus)メモリ等の適宜なメモリ等から、映像表示装置１に入力される。なお、図５では、映像信号の処理を行う構成の図示が省略されている。映像表示装置１に入力された映像信号は、公知の映像処理回路による処理が行われた後、パネル部２に供給され表示される。
　映像表示装置１は、上述したパネル部２及び加振部５の他に、第１ボリューム調整部１０Ａと、第１パネル変位制御部２０Ａと、第１アンプ３０Ａと、第２ボリューム調整部１０Ｂと、第２パネル変位制御部２０Ｂと、第２アンプ３０Ｂと、制御部４０とを有している。
　第１ボリューム調整部１０Ａの出力側に第１パネル変位制御部２０Ａが接続されている。第１パネル変位制御部２０Ａの出力側に第１アンプ３０Ａが接続されている。第１アンプ３０Ａの出力側に上述した第１加振器５Ａが接続されている。
　第１ボリューム調整部１０Ａは、入力される音声信号のレベルが、設定されているボリュームに対応したレベルとなるようにボリュームを調整する。第１ボリューム調整部１０Ａによりボリュームの調整がなされた音声信号が、第１パネル変位制御部２０Ａに出力される。
　第１パネル変位制御部２０Ａは、概略的には、第１ボリューム調整部１０Ａから供給される音声信号の低域成分のレベルを、コントロールゲインに基づいて調整する。低域成分のレベルが調整された音声信号が、第１パネル変位制御部２０Ａから第１アンプ３０Ａに対して出力される。なお、低域とは所定の閾値より低い帯域を意味し、一例として２０～２００Ｈｚ程度である。
　第１アンプ３０Ａは、第１パネル変位制御部２０Ａから供給される音声信号を所定の増幅率でもって増幅する。第１アンプ３０Ａにより増幅処理がなされた音声信号が、第１加振器５Ａに供給される。第１アンプ３０Ａから供給される音声信号に基づいて第１加振器５Ａが振動し、第１加振器５Ａが振動することにより第１映像表示用パネル２Ａが振動する。第１映像表示用パネル２Ａが振動することにより発生する音が、映像表示装置１の視聴者に聴取される。
　第２ボリューム調整部１０Ｂの出力側に第２パネル変位制御部２０Ｂが接続されている。第２パネル変位制御部２０Ｂの出力側に第２アンプ３０Ｂが接続されている。第２アンプ３０Ｂの出力側に上述した第２加振器５Ｂが接続されている。
　第２ボリューム調整部１０Ｂは、入力される音声信号のレベルが、第１ボリューム調整部１０Ａに設定されているボリュームと同じボリュームに対応したレベルとなるようにボリュームを調整する。第２ボリューム調整部１０Ｂによりボリュームの調整がなされた音声信号が、第２パネル変位制御部２０Ｂに出力される。
　第２パネル変位制御部２０Ｂは、概略的には、第２ボリューム調整部１０Ｂから供給される音声信号の低域成分のレベルを、コントロールゲインに基づいて調整する。低域成分のレベルが調整された入力音声信号が、第２パネル変位制御部２０Ｂから第２アンプ３０Ｂに対して出力される。
　第２アンプ３０Ｂは、第２パネル変位制御部２０Ｂから供給される音声信号を所定の増幅率でもって増幅する。第２アンプ３０Ｂの増幅率は、例えば、第１アンプ３０Ａと同じ増幅率である。第２アンプ３０Ｂにより増幅処理がなされた音声信号が、第２加振器５Ｂに供給される。第２アンプ３０Ｂから供給される音声信号に基づいて第２加振器５Ｂが振動し、第２加振器５Ｂが振動することにより第２映像表示用パネル２Ｂが振動する。第２映像表示用パネル２Ｂが振動することにより発生する音が、映像表示装置１の視聴者に聴取される。
（第１パネル変位制御部）
　図６は、第１パネル変位制御部２０Ａ及び第２パネル変位制御部２０Ｂの構成例を詳細に示した図である。図６に示すように、第１パネル変位制御部２０Ａは、例えば、第１閾値設定部の一例としての第１画揺れ検出部２０１Ａと、第１変位検出部の一例としての第１パネル変位検出部２０２Ａと、第１コントロールゲイン算出部２０３Ａと、第１遅延器２０４Ａ（ディレイ）と、ゲイン調整部の一例としての第１ダイナミックＥＱ(Equalizer)２０５Ａとを有している。第１映像表示用パネル２Ａに表示される第１映像信号は、第１画揺れ検出部２０１Ａに供給される。第１ボリューム調整部１０Ａから供給されるＬチャンネルの第１音声信号は、第１パネル変位検出部２０２Ａ及び第１遅延器２０４Ａのそれぞれに供給される。
　第１画揺れ検出部２０１Ａは、画揺れが発生しない変位量を算出し、算出した変位量を第１閾値として設定する。第１画揺れ検出部２０１Ａは、例えば、自身に入力される第１映像信号の特性に基づいて、変位量を算出する。第１映像信号の特性は、具体的には、第１映像信号の輝度に関する特性である。更に具体的には、第１映像信号の輝度に関する特性は、第１映像信号を構成するフレームにおける画素毎の輝度を平均化した輝度平均値である。第１画揺れ検出部２０１Ａは、算出した第１閾値を第１コントロールゲイン算出部２０３Ａに供給する。
　第１映像信号の輝度が小さい、即ち、第１映像信号が全体的に暗い画像である場合には、第１映像表示用パネル２Ａに映り込みが発生し、映り込みが振動する画揺れが発生する虞が高い。そこで、第１映像信号の輝度が小さい場合には、第１画揺れ検出部２０１Ａは第１閾値を小さくする。第１閾値が小さくされることにより音声信号の低域成分のレベルが減衰され、第１映像表示用パネル２Ａの振動が抑制されることになる。これにより、画揺れが発生することを効果的に抑制することができる。
　一方で、第１映像信号の輝度が大きい、即ち、第１映像信号が全体的に明るい画像である場合には、第１映像表示用パネル２Ａへの映り込みは発生しない若しくは目立たないので画揺れが発生する虞が低い。そこで、第１映像信号の輝度が大きい場合には、第１画揺れ検出部２０１Ａは第１閾値を大きくする。第１閾値が大きく設定されることにより、第１音声信号の低域成分のレベルが減衰されずに維持される、若しくは、減衰量が小さくなる。従って、音圧を確保することが可能となる。
　輝度平均値に対応する第１閾値は、例えば、以下のようにして事前に設定される。一定数の被験者が視聴する中、所定の輝度平均値の映像信号を入力し、第１映像表示用パネル２Ａの変位量を変化させながら振動させる。画揺れを視覚的に認識した被験者が所定数以上となった変位量が、輝度平均値に対応する第１閾値として設定される。輝度平均値と閾値とが対応付けられたテーブル若しくは演算式等が第１映像表示用パネル２Ａの特性として適宜なメモリに記憶される。第１画揺れ検出部２０１Ａは、第１映像信号の輝度平均値を求め、求めた輝度平均値と予め測定されている第１映像表示用パネル２Ａの特性とに基づいて、画揺れが発生しない第１閾値を算出する。なお、画揺れが発生しない変位量とは、画揺れを視覚的に認識した被験者が０であるときの変位量でも良いし、画揺れを視覚的に認識した被験者が一定数以下となったときの変位量でも良い。
　第１パネル変位検出部２０２Ａは、第１ボリューム調整部１０Ａから供給される第１音声信号に基づいて、第１加振器５Ａにより加振されることで音を発生する第１映像表示用パネル２Ａの変位量を検出する。第１パネル変位検出部２０２Ａは、事前に測定された第１映像表示用パネル２Ａの変位特性を近似したフィルタ（例えば、２次のＩＩＲ(Infinite Impulse Response)のＬＰＦ(Low Pass Filter)）により構成されている。第１パネル変位検出部２０２Ａは、第１音声信号に対するフィルタ処理を行うことにより、入力音声信号に対する第１映像表示用パネル２Ａの変位量を検出する。
　第１コントロールゲイン算出部２０３Ａは、第１画揺れ検出部２０１Ａから供給される第１閾値と、第１パネル変位検出部２０２Ａにより検出される変位量とを比較し、比較結果に基づいて第１コントロールゲインを算出する。第１コントロールゲインとは、音声信号の低域成分のレベルを下げる度合いを示すパラメータである。低域は、予め設定されている帯域である。上述したように、低域ほど第１映像表示用パネル２Ａの変位量が大きくなるので、第１コントロールゲインによって第１音声信号の低域成分のレベルが減衰されることで、第１映像表示用パネル２Ａの変位量を小さくすることができる。
　第１コントロールゲイン算出部２０３Ａは、第１パネル変位検出部２０２Ａにより検出される変位量が第１閾値を超えた分に応じた第１コントロールゲインを算出する。具体的には、第１コントロールゲイン算出部２０３Ａは、第１パネル変位検出部２０２Ａにより検出される変位量が閾値を超えた分が大きいほど、第１音声信号の低域成分の減衰量が大きくなる第１コントロールゲイン（－３ｄＢ、－６ｄＢ等）を算出する。第１パネル変位検出部２０２Ａにより検出される変位量が第１閾値を超えない場合には、第１コントロールゲイン算出部２０３Ａは、第１コントロールゲインとして０ｄＢ（デシベル）を出力する。第１コントロールゲインが０ｄＢ、即ち、１倍であることは、低域成分のレベルが下げられずにそのまま出力されることを意味する。
　第１遅延器２０４Ａは、第１コントロールゲイン算出部２０３Ａが第１コントロールゲインを算出する処理を行うための期間、第１音声信号を遅延させるものである。第１遅延器２０４Ａにより遅延された第１音声信号が第１ダイナミックＥＱ２０５Ａに供給される。
　第１ダイナミックＥＱ２０５Ａは、第１音声信号の低域成分のレベルを調整する。例えば、第１ダイナミックＥＱ２０５Ａは、第１コントロールゲインに基づいて、第１音声信号の低域成分のレベルを調整する。これにより、第１映像表示用パネル２Ａの変位量が抑制されるので、画揺れが発生することを抑制することができる。また、第１ダイナミックＥＱ２０５Ａは、第１コントロールゲインより減衰量が大きいコントロールゲインに基づいて、第１音声信号の低域成分のレベルを調整する場合もあり得る。この場合でも、レベル調整に用いられるコントロールゲインの減衰量は第１コントロールゲインの減衰量よりも大きいことから、第１映像表示用パネル２Ａの変位量を抑制することができ、画揺れが発生することを抑制することができる。そして、第１ダイナミックＥＱ２０５Ａによる処理がなされた第１音声信号が第１アンプ３０Ａに出力される。第１ダイナミックＥＱ２０５Ａとしては、シェルビングフィルタやパラメトリックイコライザを適用することができる。
（第２パネル変位制御部）
　第２パネル変位制御部２０Ｂは、例えば、第２閾値設定部の一例としての第２画揺れ検出部２０１Ｂと、第２変位検出部の一例としての第２パネル変位検出部２０２Ｂと、第２コントロールゲイン算出部２０３Ｂと、第２遅延器２０４Ｂ（ディレイ）と、ゲイン調整部の一例としての第２ダイナミックＥＱ２０５Ｂとを有している。第２映像信号は、第２画揺れ検出部２０１Ｂに供給される。第２ボリューム調整部１０Ｂから供給されるＲチャンネルの第２音声信号は、第２パネル変位検出部２０２Ｂ及び第２遅延器２０４Ｂのそれぞれに供給される。
　第２画揺れ検出部２０１Ｂは、画揺れが発生しない変位量を算出し、算出した変位量を第２閾値として設定する。第２画揺れ検出部２０１Ｂは、例えば、自身に入力される第２映像信号の特性に基づいて、変位量を算出する。第２映像信号の特性は、具体的には、第２映像信号の輝度に関する特性である。更に具体的には、第２映像信号の輝度に関する特性は、第２映像信号を構成するフレームにおける画素毎の輝度を平均化した輝度平均値である。第２画揺れ検出部２０１Ｂは、算出した第２閾値を第２コントロールゲイン算出部２０３Ｂに供給する。
　第２映像信号の輝度が小さい、即ち、第２映像信号が全体的に暗い画像である場合には、第２映像表示用パネル２Ｂに映り込みが発生し、映り込みが振動する画揺れが発生する虞が高い。そこで、第２映像信号の輝度が小さい場合には、第２画揺れ検出部２０１Ｂは第２閾値を小さくする。第２閾値が小さくされることにより音声信号の低域成分のレベルが減衰され、第２映像表示用パネル２Ｂの振動が抑制されることになる。これにより、画揺れが発生することを効果的に抑制することができる。
　一方で、第２映像信号の輝度が大きい、即ち、第２映像信号が全体的に明るい画像である場合には、第２映像表示用パネル２Ｂへの映り込みは発生しない若しくは目立たないので画揺れが発生する虞が低い。そこで、第２映像信号の輝度が大きい場合には、第２画揺れ検出部２０１Ｂは第２閾値を大きくする。第２閾値が大きく設定されることにより、入力音声信号の低域成分のレベルが減衰されずに維持される、若しくは、減衰量が小さくなる。従って、音圧を確保することが可能となる。輝度平均値に対応する第２閾値は、上述した第１閾値と同様の方法により事前に測定することができる。
　第２パネル変位検出部２０２Ｂは、第２ボリューム調整部１０Ｂから供給される第２音声信号に基づいて、第２加振器５Ｂにより加振されることで音を発生する第２映像表示用パネル２Ｂの変位量を検出する。第２パネル変位検出部２０２Ｂは、事前に測定された第２映像表示用パネル２Ｂの変位特性を近似したフィルタ（例えば、２次のＩＩＲのＬＰＦ）により構成されている。第２パネル変位検出部２０２Ｂは、第２音声信号に対するフィルタ処理を行うことにより、第２音声信号に対する第２映像表示用パネル２Ｂの変位量を検出する。
　第２コントロールゲイン算出部２０３Ｂは、第２画揺れ検出部２０１Ｂから供給される第２閾値と、第２パネル変位検出部２０２Ｂにより検出される変位量とを比較し、比較結果に基づいて第２コントロールゲインを算出する。第２コントロールゲインとは、第２音声信号の低域成分のレベルを下げる度合いを示すパラメータである。低域は、予め設定されている帯域である。上述したように、第２音声信号が低域ほど第２映像表示用パネル２Ｂの変位量が大きくなるので、第２コントロールゲインによって第２音声信号の低域成分のレベルが減衰されることで、第２映像表示用パネル２Ｂの変位量を小さくすることができる。
　第２コントロールゲイン算出部２０３Ｂは、第２パネル変位検出部２０２Ｂにより検出される変位量が第２閾値を超えた分に応じた第２コントロールゲインを算出する。具体的には、第２コントロールゲイン算出部２０３Ｂは、第２パネル変位検出部２０２Ｂにより検出される変位量が第２閾値を超えた分が大きいほど、第２音声信号の低域成分の減衰量が大きくなる第２コントロールゲイン（－３ｄＢ、－６ｄＢ等）を算出する。第２パネル変位検出部２０２Ｂにより検出される変位量が第２閾値を超えない場合には、第２コントロールゲイン算出部２０３Ｂは、第２コントロールゲインとして０ｄＢ（デシベル）を出力する。第２コントロールゲインが０ｄＢ、即ち、１倍であることは、低域成分のレベルが下げられずにそのまま出力されることを意味する。
　第２遅延器２０４Ｂは、第２コントロールゲイン算出部２０３Ｂが第２コントロールゲインを算出する処理を行うための期間、第２音声信号を遅延させるものである。第２遅延器２０４Ｂにより遅延された第２音声信号が第２ダイナミックＥＱ２０５Ｂに供給される。
　第２ダイナミックＥＱ２０５Ｂは、第２音声信号の低域成分のレベルを調整する。例えば、第２ダイナミックＥＱ２０５Ｂは、第１コントロールゲインに基づいて、第２音声信号の低域成分のレベルを調整する。これにより、第２映像表示用パネル２Ｂの変位量が抑制されるので、画揺れが発生することを抑制することができる。また、第２ダイナミックＥＱ２０５Ｂは、第２コントロールゲインより減衰量が大きいコントロールゲインに基づいて、第２音声信号の低域成分のレベルを調整する場合もあり得る。この場合でも、レベル調整に用いられるコントロールゲインの減衰量は第２コントロールゲインの減衰量よりも大きいことから、第２映像表示用パネル２Ｂの変位量を抑制することができ、画揺れが発生することを抑制することができる。そして、第２ダイナミックＥＱ２０５Ｂによる処理がなされた第２音声信号が第２アンプ３０Ｂに出力される。第２ダイナミックＥＱ２０５Ｂとしては、シェルビングフィルタやパラメトリックイコライザを適用することができる。
（制御部）
　制御部４０は、相関判別部４０１と、コントロールゲイン制御部４０２とを有している。相関判別部４０１は、Ｌチャンネルの音声信号とＲチャンネルの音声信号との相関を判断する。相関判別部４０１は、判断結果をコントロールゲイン制御部４０２に供給する。
　相関の算出方法の例としては、公知の方法を適用することができる。例えば、相関判別部４０１は、各チャンネルの信号にＦＦＴ（Fast Fourier Transform）を行うことにより、各チャンネルの信号を時間軸から周波数軸に変換する。そして、相関判別部４０１は、各々のパワースペクトルとクロススペクトルを算出し、パワースペクトルとクロススペクトルの平均値からコヒーレンスを算出する方法がある。コヒーレンスは０から１の間であり、値が閾値（例えば０．８）以上の場合、相関判別部４０１は、両チャンネルの音声信号に相関があると判別する。反対に、演算により算出される値が閾値未満の場合には、相関判別部４０１は、両チャンネルの音声信号に相関がないと判別する。コヒーレンスの算出を行う周波数は、低域に限定して行われる。これは、上述したように、パネル部２が低域において大きく変位し、当該変位に伴って画揺れが発生する変位特性を有しているためである。例えば、ＦＦＴの後、低域に限定して両チャンネルの音声信号間の相関が判断される。
　コヒーレンスを判断する演算は、具体的には下記のように行われる。Ｌチャンネルの音声信号の信号列x(t)、Ｒチャンネルの音声信号の信号列y(t)とし、各々をＦＦＴした結果の周波数ポイントごとのスペクトルをＸ(f）、Ｙ(f）とした場合、周波数ポイントごとのパワースペクトルＸ* (f）Ｘ(f）、Ｙ*(f）Ｙ(f）及びクロススペクトルＸ*( f）Ｙ(f）を求め、パワースペクトルの平均値Ｐ１(f）、Ｐ２(f）、クロススペクトルの平均値Ｃ(f）をそれぞれ求めた後に、コヒーレンスを求める。ここで、Ｘ*(f）, Ｙ*(f）はそれぞれＸ(f）、Ｙ(f）の複素共役である。コヒーレンスrは、クロススペクトルの平均値Ｃ(f）とその複素共役であるC*(f）を掛け合わせたものをパワースペクトルの平均値Ｐ1(f）、Ｐ2(f）を掛け合わせたもので除算することで求まる。具体的には、コヒーレンスｒは、下記の数式（１）により算出される。
r^2 =(C(f）C*(f）) /(Ｐ1(f）Ｐ2(f）)・・・（１）
この方式の場合、ＦＦＴを行うこと、平均値を取得することを考慮すると、コヒーレンス算出処理時間分、ソース信号（第１、第２音声信号）を遅延するかソース信号を事前に先読みする必要となる場合がある。
　また、低域成分のコヒーレンスを算出する方法としては、時間軸で、ＬＰＦを通して低域成分のみとし、その各々の信号同士（片方遅延させる）を畳み込むことで相互コヒーレンス関数を算出し、その結果で判定する方法もある。
　相関判別部４０１により両チャンネルの音声信号間（第１、第２音声信号間）に相関が有ると判別される場合は、例えば、両チャンネルの音声信号にセンターに定位する信号が含まれる場合である。反対に、相関判別部４０１により両チャンネルの音声信号間に相関が無いと判別される場合は、例えば、それぞれのチャンネルの音声信号が独立した音声信号（例えば、別の楽器の音声信号）である場合である。
　コントロールゲイン制御部４０２は、相関判別部４０１による判別結果に基づいて、第１ダイナミックＥＱ２０５Ａ及び第２ダイナミックＥＱ２０５Ｂのそれぞれにおけるレベル調整量を制御する。
　Ｌチャンネルの音声信号及びＲチャンネルの音声信号の間に相関が有ると相関判別部４０１により判別された場合には、コントロールゲイン制御部４０２は、第１コントロールゲインと第２コントロールゲインのうち、調整量が多いコントロールゲインを第１ダイナミックＥＱ２０５Ａ及び第２ダイナミックＥＱ２０５Ｂのそれぞれに設定する。第１ダイナミックＥＱ２０５Ａは、設定されたコントロールゲインでＬチャンネルの音声信号のレベルを調整する。第２ダイナミックＥＱ２０５Ｂは、設定されたコントロールゲインでＲチャンネルの音声信号のレベルを調整する。
　Ｌチャンネルの音声信号及びＲチャンネルの音声信号の間に相関が無いと相関判別部４０１により判別された場合には、コントロールゲイン制御部４０２は、第１ダイナミックＥＱ２０５Ａが第１コントロールゲインでＬチャンネルの音声信号のレベルを調整するように制御する。また、Ｌチャンネルの音声信号及びＲチャンネルの音声信号の間に相関が無いと相関判別部４０１により判別された場合には、コントロールゲイン制御部４０２は、第２ダイナミックＥＱ２０５Ｂが第２コントロールゲインでＲチャンネルの音声信号のレベルを調整するように制御する。
［映像表示装置の動作例］
（動作の概略）
　映像表示装置１は、概略的には、以下に説明する動作を行う。第１画揺れ検出部２０１Ａが第１映像信号の特性に基づいて、第１閾値を算出し設定する。第１パネル変位検出部２０２Ａが第１音声信号に対してフィルタ処理を行うことにより、当該第１音声信号に対応する第１映像表示用パネル２Ａの変位量を算出する。そして、第１コントロールゲイン算出部２０３Ａが、画揺れ検出部２０１により設定された第１閾値と、第１パネル変位検出部２０２Ａで算出された第１映像表示用パネル２Ａの変位量とを比較する。比較の結果、第１映像表示用パネル２Ａの変位量が第１閾値より大きい場合には、第１コントロールゲイン算出部２０３Ａは、第１映像表示用パネル２Ａの変位量が第１閾値を下回るようにするために、第１映像表示用パネル２Ａの変位量が第１閾値を超えた分に対応する第１コントロールゲインを算出する。なお、第１映像表示用パネル２Ａの変位量が第１閾値以下である場合には、入力音声信号の低域成分のレベルが減衰されずに出力される。例えば、第１コントロールゲイン算出部２０３Ａは、コントロールゲインとして、０ｄＢを設定する。以上は、第１パネル変位制御部２０Ａで行われる処理であるが、第２パネル変位制御部２０Ｂでも同様の処理が行われる。
　制御部４０の相関判別部４０１により、Ｌチャンネルの音声信号とＲチャンネルの音声信号との間の相関の有無が判別される。相関の有無は、サンプル単位又はフレーム単位で行われる。相関判別部４０１による判別結果が、コントロールゲイン制御部４０２に供給される。判別結果が両チャンネルの音声信号間に相関が有る場合には、コントロールゲイン制御部４０２は、第１コントロールゲイン算出部２０３Ａから第１コントロールゲインを取得し、第２コントロールゲイン算出部２０３Ｂから第２コントロールゲインを取得する。そして、コントロールゲイン制御部４０２は、第１コントロールゲインと第２コントロールゲインとを比較し、減衰量が大きいコントロールゲインを判断する。そして、コントロールゲイン制御部４０２は、減衰量が大きいコントロールゲインを第１コントロールゲイン算出部２０３Ａ及び第２コントロールゲイン算出部２０３Ｂにそれぞれ供給し設定する。
　第１コントロールゲイン算出部２０３Ａは、コントロールゲイン制御部４０２により設定されたコントロールゲインを第１ダイナミックＥＱ２０５Ａに供給する。第１ダイナミックＥＱ２０５Ａは、供給されたコントロールゲインに基づいて、Ｌチャンネルの音声信号の低域成分のレベルを調整する。第２コントロールゲイン算出部２０３Ｂは、コントロールゲイン制御部４０２により設定されたコントロールゲインを第２ダイナミックＥＱ２０５Ｂに供給する。第２ダイナミックＥＱ２０５Ｂは、供給されたコントロールゲインに基づいて、Ｒチャンネルの音声信号の低域成分のレベルを調整する。
　判別結果が両チャンネルの音声信号間に相関が無い場合には、コントロールゲイン制御部４０２は、第１コントロールゲイン算出部２０３Ａに対して、第１コントロールゲインを使用するように指示する。コントロールゲイン制御部４０２の制御に応じて第１コントロールゲイン算出部２０３Ａは、自身が算出した第１コントロールゲインを第１ダイナミックＥＱ２０５Ａに供給する。第１ダイナミックＥＱ２０５Ａは、第１コントロールゲインに基づいて、Ｌチャンネルの音声信号の低域成分のレベルを調整する。また、コントロールゲイン制御部４０２は、第２コントロールゲイン算出部２０３Ｂに対して、第２コントロールゲインを使用するように指示する。コントロールゲイン制御部４０２の制御に応じて第２コントロールゲイン算出部２０３Ｂは、自身が算出した第２コントロールゲインを第２ダイナミックＥＱ２０５Ｂに供給する。第２ダイナミックＥＱ２０５Ｂは、第２コントロールゲインに基づいて、Ｒチャンネルの音声信号の低域成分のレベルを調整する。
　このように、Ｌチャンネルの音声信号とＲチャンネルの音声信号との間に相関が有る場合には、同じコントロールゲインによって両チャンネルの音声信号における低域成分のレベルが減衰される（ゲイン調整量が同期される）。従って、Ｌチャンネルの音声信号及びＲチャンネルの音声信号にセンターに音像定位する音が含まれているような場合であっても、図７に模式的に示されるように、音像ＳＩがパネル部２の中央付近からずれてしまうことを防止することができる。なお、図７は、パネル部２を映像の表示面側から視た正面図である。
　更に、第１コントロールゲイン及び第２コントロールゲインのうち、減衰量が大きいコントロールゲインを用いたレベル調整が行われる。従って、画揺れの発生を効果的に抑制することができる。
　また、Ｌチャンネルの音声信号とＲチャンネルの音声信号との間に相関が無い場合には、第１コントロールゲイン及び第２コントロールゲインのそれぞれによって、対応するチャンネルの音声信号における低域成分のレベルが減衰される（ゲイン調整量が非同期とされる）。従って、画揺れの発生を効果的に抑制できると共に、不必要に音圧が制限されることを防止することができる。また、ゲイン調整量が非同期とされるので、図８に模式的に示されるように、各チャンネルの音声信号に対応する音像（音像ＳＩ１，ＳＩ２）を形成することができる。
　なお、第１コントロールゲインに対しては、アタックタイム、ホールドタイム及びリリースタイムを設定することができる。第１コントロールゲインとして例えば－３ｄＢが算出されたとする。図９に示すように、アタックタイムとは、０ｄＢから－３ｄＢまで第１コントロールゲインを徐々に変化させるための期間（図中ｔ１からｔ２までの期間）である。また、ホールドタイムは、第１コントロールゲインが－３ｄＢである状態を保持する期間（図中ｔ２からｔ３までの期間）である。リリースタイムは、第１コントロールゲインが－３ｄＢである必要がなくなってから、第１コントロールゲインを０ｄＢまで戻すのにかける時間（図中ｔ３からｔ４までの期間）である。
　このように、本実施の形態では、アタックタイム及びリリースタイムに基づいて、第１コントロールゲインが変化されながらダイナミックＥＱ２０５による処理が行われる。なお、リリースタイム間で第１コントロールゲインが変化中に再度、第１コントロールゲインとして－３ｄＢが算出された場合には、そのタイミングから第１コントロールゲインが－３ｄＢとなるように第１コントロールゲインを徐々に変化させる処理が行われる。
　第１音声信号の低域成分のレベルが急激に減衰すると、視聴者が聴感上、違和感を覚える虞がある。アタックタイム、ホールドタイム及びリリースタイムを適切に設定することで、第１音声信号の低域成分のレベルが急激に減衰してしまうことを防止することができる。また、人の聴覚は、音圧の低下に対して鈍感であるものの音圧の上昇に対しては敏感である。かかる聴覚特性を考慮して、本実施の形態では、アタックタイムを短く設定することで第１音声信号の低域成分のレベルを素早く減衰させて画揺れの発生を防止する。また、リリースタイムをアタックタイムより長く設定することで第１音声信号の低域成分のレベルを徐々に大きくする。これにより、画揺れの発生を抑制しつつ、第１音声信号の低域成分のレベル変化により視聴者が違和感を覚えることを防止する。なお、なお、第２コントロールゲインに対しても同様に、アタックタイム、ホールドタイム及びリリースタイムを設定することができる。
（動作の詳細）
　図１０及び図１１は、第１パネル変位制御部２０Ａ、第２パネル変位制御部２０Ｂ及び制御部４０により行われる処理の流れを詳細に示したフローチャートである。なお、図１０及び図１１における参照符号「ＡＡ」及び「ＢＢ」はそれぞれ処理の連続性を示すものであり、特定の処理を意味するものではない。
　処理が開始されると、ステップＳＴ１では、音声データが、第１パネル変位制御部２０Ａ及び第２パネル変位制御部２０Ｂのそれぞれに入力される。具体的には、ボリューム調整がなされたＬチャンネルの音声信号が第１パネル変位制御部２０Ａに入力され、ボリューム調整がなされたＲチャンネルの音声信号が第２パネル変位制御部２０Ｂに入力される。そして、処理がステップＳＴ２に進む。
　ステップＳＴ２では、第１パネル変位検出部２０２ＡがＬチャンネルの音声信号にフィルタ処理を行うことにより、当該Ｌチャンネルの音声信号が入力されたことによる第１映像表示用パネル２Ａの変位量を予測する。そして、処理がステップＳＴ３に進む。
　ステップＳＴ３では、第１コントロールゲイン算出部２０３Ａが、Ｌチャンネルの音声信号の抑制量であるコントロールゲインＫＬ１を算出する。コントロールゲインＫＬ１は、例えば、予測変位量Ｌ１／閾値（第１画揺れ検出部２０１Ａにより検出された閾値）により算出される。そして、処理がステップＳＴ４に進む。
　ステップＳＴ４では、ＫＬ１＞ＫＬ２であるか否かが第１コントロールゲイン算出部２０３Ａにより判断される。ＫＬ２は、例えば、現在、設定されているコントロールゲインである。ＫＬ１＞ＫＬ２が成り立つ場合は、処理がステップＳＴ５に進む。
　ステップＳＴ５では、コントロールゲインＫＬ２が算出される。ここでは、抑制量が大きいコントロールゲインＫＬ１に時定数（上述したアタックタイム、ホールドタイム及びリリースタイム）に付加したものをコントロールゲインＫＬ２として算出する。そして、処理がステップＳＴ１２に進む。
　ＫＬ１＞ＫＬ２が成り立たない場合は、処理がステップＳＴ６に進む。ステップＳＴ６では、時定数分コントロールゲインＫＬ２が更新される。そして、処理がステップＳＴ１２に進む。
　Ｒチャンネルの音声信号に対しても同様の処理が、第２パネル変位制御部２０Ｂにより行われる。ステップＳＴ１に続くステップＳＴ７では、第２パネル変位検出部２０２ＢがＲチャンネルの音声信号にフィルタ処理を行うことにより、当該Ｒチャンネルの音声信号が入力されたことによる第２映像表示用パネル２Ｂの変位量を予測する。そして、処理がステップＳＴ８に進む。
　ステップＳＴ８では、第２コントロールゲイン算出部２０３Ｂが、Ｒチャンネルの音声信号の抑制量であるコントロールゲインＫＲ１を算出する。コントロールゲインＫＲ１は、例えば、予測変位量Ｒ１／閾値（第２画揺れ検出部２０１Ｂにより検出された閾値）により算出される。そして、処理がステップＳＴ９に進む。
　ステップＳＴ９では、ＫＲ１＞ＫＲ２であるか否かが第２コントロールゲイン算出部２０３Ｂにより判断される。ＫＲ２は、例えば、現在、設定されているコントロールゲインである。ＫＲ１＞ＫＲ２が成り立つ場合は、処理がステップＳＴ１０に進む。
　ステップＳＴ１０では、コントロールゲインＫＲ２が算出される。ここでは、抑制量が大きいコントロールゲインＫＲ１に時定数（上述したアタックタイム、ホールドタイム及びリリースタイム）に付加したものをコントロールゲインＫＲ２として算出する。そして、処理がステップＳＴ１２に進む。
　ＫＲ１＞ＫＲ２が成り立たない場合は、処理がステップＳＴ１１に進む。ステップＳＴ６では、時定数分コントロールゲインＫＲ２が更新される。そして、処理がステップＳＴ１２に進む。
　ステップＳＴ１２では、コントロールゲインＫＬ２、ＫＲ２の何れかが音声信号を抑制する値（例えば、＞１）であるか否かが判断される。この判断は、第１コントロールゲイン算出部２０３Ａ及び第２コントロールゲイン算出部２０３Ｂがそれぞれ算出したコントロールゲインＫＬ２、ＫＲ２を受け取ったコントロールゲイン制御部４０２により判断される。コントロールゲインＫＬ２、ＫＲ２が音声信号を抑制する値である場合には、処理がステップＳＴ１３に進む。
　ステップＳＴ１３では、相関判別部４０１が、Ｌチャンネルの音声信号とＲチャンネルの音声信号との間のコヒーレンスを計算する。そして、処理がステップＳＴ１４に進む。
　ステップＳＴ１４では、相関判別部４０１が、計算したコヒーレンスと閾値とを比較することにより、Ｌチャンネルの音声信号とＲチャンネルの音声信号とが相関が高いか否かを判別する。相関判別部４０１が、両チャンネルの音声信号の相関が高いと判断した場合は、処理がステップＳＴ１５に進む。
　ステップＳＴ１５では、コントロールゲイン制御部４０２が、コントロールゲインＫＬ２、ＫＲ２を抑制量の大きい値に合わせる（同期させる）。具体的には、ＫＬ２＞ＫＲ２が成り立つ場合には、コントロールゲインＫＬ３及びコントロールゲインＫＲ３が、ＫＬ２の値と同じ値に設定される。また、ＫＬ２＜ＫＲ２が成り立つ場合には、コントロールゲインＫＬ３及び第２コントロールゲインＫＲ３がＫＲ２の値と同じ値に設定される。
　コントロールゲイン制御部４０２は、設定したコントロールゲインＫＬ３を第１コントロールゲイン算出部２０３Ａに供給する。そして、第１コントロールゲイン算出部２０３ＡがコントロールゲインＫＬ３を第１ダイナミックＥＱ２０５Ａに供給する。また、コントロールゲイン制御部４０２は、設定したコントロールゲインＫＲ３を第２コントロールゲイン算出部２０３Ｂに供給する。そして、第２コントロールゲイン算出部２０３ＢがコントロールゲインＫＲ３を第２ダイナミックＥＱ２０５Ｂに供給する。そして、処理がステップＳＴ１６及びステップＳＴ１７に進む。
　ステップＳＴ１６では、第１ダイナミックＥＱ２０５ＡがコントロールゲインＫＬ３を使用して、Ｌチャンネルの音声信号のゲインを調整する。また、ステップＳＴ１７では、第２ダイナミックＥＱ２０５ＢがコントロールゲインＫＲ３を使用して、Ｒチャンネルの音声信号のゲインを調整する。そして、処理がステップＳＴ１に戻り、次のサンプルの音声データが入力されると同様の処理が行われる。
　相関判別部４０１が、両チャンネルの相関が低いと判断した場合（ステップＳＴ１４の判断におけるＮｏ）は、コントロールゲイン制御部４０２は、第１コントロールゲイン算出部２０３Ａに対して第１コントロールゲイン算出部２０３Ａが算出したコントロールゲインＫＬ２、即ち第１コントロールゲインをコントロールゲインＫＬ３として用いるように指示する。コントロールゲイン制御部４０２の制御に応じて、第１コントロールゲイン算出部２０３Ａは、ＫＬ３＝ＫＬ２であるコントロールゲインＫＬ３を第１ダイナミックＥＱ２０５Ａに供給する。また、コントロールゲイン制御部４０２は、第２コントロールゲイン算出部２０３Ｂに対して第２コントロールゲイン算出部２０３Ｂが算出したコントロールゲインＫＲ２、即ち第２コントロールゲインをコントロールゲインＫＲ３として用いるように指示する。コントロールゲイン制御部４０２の制御に応じて、第２コントロールゲイン算出部２０３Ｂは、ＫＲ３＝ＫＲ２であるコントロールゲインＫＲ３を第２ダイナミックＥＱ２０５Ｂに供給する。そして、処理がステップＳＴ１６及びステップＳＴ１７に進む。ステップＳＴ１６及びステップＳＴ１７の処理の内容は上述した通りである。
　ステップＳＴ１２では、ＫＬ２、ＫＲ２の何れも音声信号を抑制する値でない場合（ステップＳＴ１２の判断におけるＮｏ）には、コントロールゲインＫＬ３及びコントロールゲインＫＲ３として１（０ｄＢ）が設定される。第１コントロールゲイン算出部２０３Ａは、コントロールゲインＫＬ３として０ｄＢを第１ダイナミックＥＱ２０５Ａに供給する。また、第２コントロールゲイン算出部２０３Ｂは、コントロールゲインＫＲ３として０ｄＢを第２ダイナミックＥＱ２０５Ｂに供給する。そして、処理がステップＳＴ１６及びステップＳＴ１７に進む。ステップＳＴ１６及びステップＳＴ１７の処理の内容は上述した通りである。
　以上、説明した本実施の形態によれば、音像位置をキープしつつ、音圧が抑制されてしまうことを極力、防止することができる。更に、画揺れの発生を効果的に抑制することができる。
＜変形例＞
　以上、本開示の実施の形態について具体的に説明したが、本開示の内容は上述した実施の形態に限定されるものではなく、本開示の技術的思想に基づく各種の変形が可能である。
　上述した実施の形態では、２個のパネルによりパネル部２が構成されていたが、図１２に示すように、９個の映像表示用パネル（映像表示用パネルＰＡ、ＰＢ、ＰＣ・・・ＰＩ）により構成されていても良い。９個の映像表示用パネルのそれぞれに、加振器（丸印により模式的に示されている）が接合されている。そして、隣接するパネル部に対して実施の形態と同様の処理が行われても良い。例えば映像表示用パネルＰＢ、ＰＣに対して実施の形態と同様の処理が行われても良い。映像表示用パネルＰＢ、ＰＣを加振する音声信号間に相関があれば、抑制量が同期されることにより、図１３に模式的に示すように、映像表示用パネルＰＢ、ＰＣの間に音像を定位させることができる。映像表示用パネルＰＢ、ＰＣを加振する音声信号間に相関がない場合は、抑制量が同期されないので、図１４に模式的に示すように、映像表示用パネルＰＢ、ＰＣのそれぞれに音像を定位させることができる。また、図１５に示すように、パネル部２が３個の映像表示用パネル（映像表示用パネルＰＪ、ＰＫ、ＰＬ）により構成されていても良い。
　第１ボリューム調整部１０Ａは、第１パネル変位制御部２０Ａの後段に設けられても良い。その場合、第１ボリューム調整部１０Ａに設定されているボリューム情報が第１パネル変位検出部２０２Ａに供給される構成でも良い。第１パネル変位検出部２０２Ａが、当該ボリューム情報に対応するフィルタ処理を行うようにしても良い。第２ボリューム調整部１０Ｂについでも同様である。
　実施の形態で説明した処理の流れにおいて、一部の処理の順序が入れ替わっても良いし、一部の処理が並列的に行われても良い。
　第１音声信号、第２音声信号は、Ｌチャンネルの音声信号、Ｒチャンネルの音声信号に限らず、オブジェクトオーディオで使用されるオブジェクトに対応する音声信号でも良い。
　本開示は、装置、方法、プログラム、システム等により実現することもできる。例えば、上述した実施の形態で説明した機能を行うプログラムをダウンロード可能とし、実施の形態で説明した機能を有しない装置が当該プログラムをダウンロードしてインストールすることにより、当該装置において実施の形態で説明した制御を行うことが可能となる。本開示は、このようなプログラムを配布するサーバにより実現することも可能である。また、各実施の形態、変形例で説明した事項は、適宜組み合わせることが可能である。また、本明細書で例示された効果により本開示の内容が限定して解釈されるものではない。
　本開示は、以下の構成も採ることができる。
（１）
　第１音声信号が入力される第１パネル変位制御部と、
　第２音声信号が入力される第２パネル変位制御部と、
　前記第１パネル変位制御部及び前記第２パネル変位制御部を制御する制御部とを有し、
　前記第１パネル変位制御部は、前記第１音声信号のレベルを調整する第１ゲイン調整部を有し、
　前記第２パネル変位制御部は、前記第２音声信号のレベルを調整する第２ゲイン調整部を有し、
　前記制御部は、
　前記第１音声信号及び前記第２音声信号の間の相関の有無を判別する相関判別部と、
　前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御するゲイン制御部とを有する
　信号処理装置。
（２）
　前記第１パネル変位制御部は、
　前記第１音声信号に基づいて、加振されることで音を発生する第１映像表示用パネルの変位量を検出する第１変位検出部と、
　画揺れが発生しない変位量を算出し、算出した変位量を第１閾値として設定する第１閾値設定部とを有し、
　前記第１ゲイン調整部は、前記第１変位検出部により検出される変位量と前記第１閾値との比較結果に基づいて、前記第１音声信号のレベルを調整し、
　前記第２パネル変位制御部は、
　前記第２音声信号に基づいて、加振されることで音を発生する第２映像表示用パネルの変位量を検出する第２変位検出部と、
　画揺れが発生しない変位量を算出し、算出した変位量を第２閾値として設定する第２閾値設定部とを有し、
　前記第２ゲイン調整部は、前記第２変位検出部により検出される変位量と前記第２閾値との比較結果に基づいて、前記第２音声信号のレベルを調整する
　（１）に記載の信号処理装置。
（３）
　前記第１パネル変位制御部は、
　前記第１変位検出部により検出される変位量と前記第１閾値との比較結果に基づいて第１コントロールゲインを算出する第１コントロールゲイン算出部を有し、
　前記第２パネル変位制御部は、
　前記第２変位検出部により検出される変位量と前記第２閾値との比較結果に基づいて第２コントロールゲインを算出する第２コントロールゲイン算出部を有する
　（２）に記載の信号処理装置。
（４）
　前記ゲイン制御部は、
　前記第１音声信号及び前記第２音声信号の間に相関が有ると判別された場合には、前記第１コントロールゲイン及び前記第２コントロールゲインのうち、調整量が多いコントロールゲインを前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれに設定し、
　前記第１ゲイン調整部が、設定されたコントロールゲインを使用して前記第１音声信号のレベルを調整するように制御し、
　前記第２ゲイン調整部が、設定されたコントロールゲインを使用して前記第２音声信号のレベルを調整するように制御する
　（３）に記載の信号処理装置。
（５）
　前記ゲイン制御部は、
　前記第１音声信号及び前記第２音声信号の間に相関が無いと判別された場合には、
　前記第１ゲイン調整部が、前記第１コントロールゲインを使用して前記第１音声信号のレベルを調整するように制御し、
　前記第２ゲイン調整部が、前記第２コントロールゲインを使用して前記第２音声信号のレベルを調整するように制御する
　（３）又は（４）に記載の信号処理装置。
（６）
　前記第１変位検出部は、事前に測定された前記第１映像表示用パネルの変位特性を近似したフィルタにより構成されており、
　前記第２変位検出部は、事前に測定された前記第２映像表示用パネルの変位特性を近似したフィルタにより構成されている
　（２）に記載の信号処理装置。
（７）
　前記相関判別部は、前記第１音声信号の低域成分及び前記第２音声信号の低域成分の相関を判別する
　（１）から（６）までの何れかに記載の信号処理装置。
（８）
　前記第１映像表示用パネル及び前記第２映像表示用パネルは、互いに隣接する位置に配置されたパネルである
　（２）から（７）までの何れかに記載の信号処理装置。
（９）
　前記第１音声信号はＬ(Left)チャンネルの信号であり、前記第２音声信号はＲ(Right)チャンネルの信号である
　（１）から（８）までの何れかに記載の信号処理装置。
（１０）
　第１音声信号が入力される第１パネル変位制御部が有する第１ゲイン調整部が、前記第１音声信号のレベルを調整し、
　第２音声信号が入力される第２パネル変位制御部が有する第２ゲイン調整部が、前記第２音声信号のレベルを調整し、
　制御部が有する相関判別部が、前記第１音声信号及び前記第２音声信号の間の相関の有無を判別し、
　制御部が有するゲイン制御部が、前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御する
　信号処理方法。
（１１）
　第１音声信号が入力される第１パネル変位制御部が有する第１ゲイン調整部が、前記第１音声信号のレベルを調整し、
　第２音声信号が入力される第２パネル変位制御部が有する第２ゲイン調整部が、前記第２音声信号のレベルを調整し、
　制御部が有する相関判別部が、前記第１音声信号及び前記第２音声信号の間の相関の有無を判別し、
　制御部が有するゲイン制御部が、前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御する
　信号処理方法をコンピュータに実行させるプログラム。
（１２）
　第１映像表示用パネルと、
　前記第１映像表示用パネルを加振する第１加振器と、
　前記第１映像表示用パネルと隣接した位置に配置される第２映像表示用パネルと、
　前記第２映像表示用パネルを加振する第２加振器と、
　第１音声信号が入力される第１パネル変位制御部と、
　第２音声信号が入力される第２パネル変位制御部と、
　前記第１パネル変位制御部及び前記第２パネル変位制御部を制御する制御部とを有し、
　前記第１パネル変位制御部は、前記第１音声信号のレベルを調整する第１ゲイン調整部を有し、
　前記第２パネル変位制御部は、前記第２音声信号のレベルを調整する第２ゲイン調整部を有し、
　前記制御部は、
　前記第１音声信号及び前記第２音声信号の間の相関の有無を判別する相関判別部と、
　前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御するゲイン制御部とを有する
　映像表示装置。
１・・映像表示装置、２・・・パネル部、２Ａ・・・第１映像表示用パネル、２Ｂ・・・第２映像表示用パネル、５・・・加振部、５Ａ・・・第１加振器、５Ｂ・・・第２加振器
２０Ａ・・・第１パネル変位制御部、２０Ｂ・・・第２パネル変位制御部、４０・・・制御部、２０１Ａ・・・第１画揺れ検出部、２０２Ａ・・・第１パネル変位検出部、２０３Ａ・・・第１コントロールゲイン算出部、２０５Ａ・・・第１ダイナミックＥＱ、２０１Ｂ・・・第２画揺れ検出部、２０２Ｂ・・・第２パネル変位検出部、２０３Ｂ・・・第２コントロールゲイン算出部、２０５Ｂ・・・第２ダイナミックＥＱ、４０１・・・相関判別部、４０２・・・コントロールゲイン制御部

Claims (12)

  1. 　第１音声信号が入力される第１パネル変位制御部と、
    　第２音声信号が入力される第２パネル変位制御部と、
    　前記第１パネル変位制御部及び前記第２パネル変位制御部を制御する制御部とを有し、
    　前記第１パネル変位制御部は、前記第１音声信号のレベルを調整する第１ゲイン調整部を有し、
    　前記第２パネル変位制御部は、前記第２音声信号のレベルを調整する第２ゲイン調整部を有し、
    　前記制御部は、
    　前記第１音声信号及び前記第２音声信号の間の相関の有無を判別する相関判別部と、
    　前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御するゲイン制御部とを有する
    　信号処理装置。
  2. 　前記第１パネル変位制御部は、
    　前記第１音声信号に基づいて、加振されることで音を発生する第１映像表示用パネルの変位量を検出する第１変位検出部と、
    　画揺れが発生しない変位量を算出し、算出した変位量を第１閾値として設定する第１閾値設定部とを有し、
    　前記第１ゲイン調整部は、前記第１変位検出部により検出される変位量と前記第１閾値との比較結果に基づいて、前記第１音声信号のレベルを調整し、
    　前記第２パネル変位制御部は、
    　前記第２音声信号に基づいて、加振されることで音を発生する第２映像表示用パネルの変位量を検出する第２変位検出部と、
    　画揺れが発生しない変位量を算出し、算出した変位量を第２閾値として設定する第２閾値設定部とを有し、
    　前記第２ゲイン調整部は、前記第２変位検出部により検出される変位量と前記第２閾値との比較結果に基づいて、前記第２音声信号のレベルを調整する
    　請求項１に記載の信号処理装置。
  3. 　前記第１パネル変位制御部は、
    　前記第１変位検出部により検出される変位量と前記第１閾値との比較結果に基づいて第１コントロールゲインを算出する第１コントロールゲイン算出部を有し、
    　前記第２パネル変位制御部は、
    　前記第２変位検出部により検出される変位量と前記第２閾値との比較結果に基づいて第２コントロールゲインを算出する第２コントロールゲイン算出部を有する
    　請求項２に記載の信号処理装置。
  4. 　前記ゲイン制御部は、
    　前記第１音声信号及び前記第２音声信号の間に相関が有ると判別された場合には、前記第１コントロールゲイン及び前記第２コントロールゲインのうち、調整量が多いコントロールゲインを前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれに設定し、
    　前記第１ゲイン調整部が、設定されたコントロールゲインを使用して前記第１音声信号のレベルを調整するように制御し、
    　前記第２ゲイン調整部が、設定されたコントロールゲインを使用して前記第２音声信号のレベルを調整するように制御する
    　請求項３に記載の信号処理装置。
  5. 　前記ゲイン制御部は、
    　前記第１音声信号及び前記第２音声信号の間に相関が無いと判別された場合には、
    　前記第１ゲイン調整部が、前記第１コントロールゲインを使用して前記第１音声信号のレベルを調整するように制御し、
    　前記第２ゲイン調整部が、前記第２コントロールゲインを使用して前記第２音声信号のレベルを調整するように制御する
    　請求項３に記載の信号処理装置。
  6. 　前記第１変位検出部は、事前に測定された前記第１映像表示用パネルの変位特性を近似したフィルタにより構成されており、
    　前記第２変位検出部は、事前に測定された前記第２映像表示用パネルの変位特性を近似したフィルタにより構成されている
    　請求項２に記載の信号処理装置。
  7. 　前記相関判別部は、前記第１音声信号の低域成分及び前記第２音声信号の低域成分の相関を判別する
    　請求項１に記載の信号処理装置。
  8. 　前記第１映像表示用パネル及び前記第２映像表示用パネルは、互いに隣接する位置に配置されたパネルである
    　請求項２に記載の信号処理装置。
  9. 　前記第１音声信号はＬ(Left)チャンネルの信号であり、前記第２音声信号はＲ(Right)チャンネルの信号である
    　請求項１に記載の信号処理装置。
  10. 　第１音声信号が入力される第１パネル変位制御部が有する第１ゲイン調整部が、前記第１音声信号のレベルを調整し、
    　第２音声信号が入力される第２パネル変位制御部が有する第２ゲイン調整部が、前記第２音声信号のレベルを調整し、
    　制御部が有する相関判別部が、前記第１音声信号及び前記第２音声信号の間の相関の有無を判別し、
    　制御部が有するゲイン制御部が、前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御する
    　信号処理方法。
  11. 　第１音声信号が入力される第１パネル変位制御部が有する第１ゲイン調整部が、前記第１音声信号のレベルを調整し、
    　第２音声信号が入力される第２パネル変位制御部が有する第２ゲイン調整部が、前記第２音声信号のレベルを調整し、
    　制御部が有する相関判別部が、前記第１音声信号及び前記第２音声信号の間の相関の有無を判別し、
    　制御部が有するゲイン制御部が、前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御する
    　信号処理方法をコンピュータに実行させるプログラム。
  12. 　第１映像表示用パネルと、
    　前記第１映像表示用パネルを加振する第１加振器と、
    　前記第１映像表示用パネルと隣接した位置に配置される第２映像表示用パネルと、
    　前記第２映像表示用パネルを加振する第２加振器と、
    　第１音声信号が入力される第１パネル変位制御部と、
    　第２音声信号が入力される第２パネル変位制御部と、
    　前記第１パネル変位制御部及び前記第２パネル変位制御部を制御する制御部とを有し、
    　前記第１パネル変位制御部は、前記第１音声信号のレベルを調整する第１ゲイン調整部を有し、
    　前記第２パネル変位制御部は、前記第２音声信号のレベルを調整する第２ゲイン調整部を有し、
    　前記制御部は、
    　前記第１音声信号及び前記第２音声信号の間の相関の有無を判別する相関判別部と、
    　前記相関判別部による判別結果に基づいて、前記第１ゲイン調整部及び前記第２ゲイン調整部のそれぞれにおけるレベル調整量を制御するゲイン制御部とを有する
    　映像表示装置。
PCT/JP2020/014599 2019-04-23 2020-03-30 信号処理装置、信号処理方法、プログラム及び映像表示装置 WO2020217872A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202080029215.XA CN113711622B (zh) 2019-04-23 2020-03-30 信号处理装置、信号处理方法、程序和视频显示装置
US17/604,365 US11722110B2 (en) 2019-04-23 2020-03-30 Signal processing device, signal processing method, program, and video display device
DE112020002052.5T DE112020002052T5 (de) 2019-04-23 2020-03-30 Signalverarbeitungsvorrichtung, signalverarbeitungsverfahren, programm und videoanzeigevorrichtung
JP2021515917A JP7494839B2 (ja) 2019-04-23 2020-03-30 信号処理装置、信号処理方法、プログラム及び映像表示装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019081749 2019-04-23
JP2019-081749 2019-04-23

Publications (1)

Publication Number Publication Date
WO2020217872A1 true WO2020217872A1 (ja) 2020-10-29

Family

ID=72942050

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/014599 WO2020217872A1 (ja) 2019-04-23 2020-03-30 信号処理装置、信号処理方法、プログラム及び映像表示装置

Country Status (5)

Country Link
US (1) US11722110B2 (ja)
JP (1) JP7494839B2 (ja)
CN (1) CN113711622B (ja)
DE (1) DE112020002052T5 (ja)
WO (1) WO2020217872A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005012618A (ja) * 2003-06-20 2005-01-13 Funai Electric Co Ltd テレビジョン受像機
JP2014039232A (ja) * 2012-08-15 2014-02-27 Authentic International:Kk 薄型テレビなどディスプレイ用の平面スピーカー

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100196425B1 (ko) * 1996-05-16 1999-06-15 윤종용 멀티미디어 디스플레이 모니터의 사운드 제어 방법
CN101478296B (zh) * 2009-01-05 2011-12-21 华为终端有限公司 一种多声道系统中的增益控制方法及装置
JP2011217316A (ja) * 2010-04-02 2011-10-27 Funai Electric Co Ltd 携帯情報処理装置
JP5690082B2 (ja) * 2010-05-18 2015-03-25 シャープ株式会社 音声信号処理装置、方法、プログラム、及び記録媒体
US10019062B2 (en) * 2012-08-10 2018-07-10 Nokia Technologies Oy Display apparatus providing tactile functionality
US20140241558A1 (en) * 2013-02-27 2014-08-28 Nokia Corporation Multiple Audio Display Apparatus And Method
US11115740B2 (en) 2016-12-27 2021-09-07 Sony Corporation Flat panel speaker and display unit
CN109089179A (zh) * 2018-08-08 2018-12-25 苏州佳世达光电有限公司 一种防喇叭共振支撑结构、模组及投影仪
KR102668290B1 (ko) * 2018-12-11 2024-05-23 삼성디스플레이 주식회사 표시 장치와 그의 구동 방법
US12063483B2 (en) * 2019-05-08 2024-08-13 Sony Group Corporation Signal processing device, signal processing method, program, and video display device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005012618A (ja) * 2003-06-20 2005-01-13 Funai Electric Co Ltd テレビジョン受像機
JP2014039232A (ja) * 2012-08-15 2014-02-27 Authentic International:Kk 薄型テレビなどディスプレイ用の平面スピーカー

Also Published As

Publication number Publication date
DE112020002052T5 (de) 2022-01-27
JP7494839B2 (ja) 2024-06-04
JPWO2020217872A1 (ja) 2020-10-29
CN113711622A (zh) 2021-11-26
US11722110B2 (en) 2023-08-08
CN113711622B (zh) 2024-09-17
US20220182030A1 (en) 2022-06-09

Similar Documents

Publication Publication Date Title
US10657950B2 (en) Headphone transparency, occlusion effect mitigation and wind noise detection
EP3338466B1 (en) A multi-speaker method and apparatus for leakage cancellation
KR102398400B1 (ko) 스피커 보호
US20190075383A1 (en) Headphones with combined ear-cup and ear-bud
EP1901582B1 (en) Audio device and audio beam control method
CN1930910B (zh) 扬声器
KR101702330B1 (ko) 근거리 및 원거리 음장 동시제어 장치 및 방법
EP3410748B1 (en) Audio adaptation to room
EP1718110B1 (en) Audio feedback detection and suppression means
CN108365827B (zh) 具有动态阈值的频带压缩
EP2953383B1 (en) Signal processing circuit
CN103503477A (zh) 使用成对传声器抑制噪声
EP3874770A1 (en) Volume control in open audio device
WO2017122091A1 (en) Headphones with combined ear-cup and ear-bud
JP2008518512A5 (ja)
US8280063B2 (en) Loudspeaker panel with a microphone and method for using both
US20160276992A1 (en) Narrowing Audio Filter Transition Band
WO2020226000A1 (ja) 信号処理装置、信号処理方法、プログラム及び映像表示装置
WO2020217872A1 (ja) 信号処理装置、信号処理方法、プログラム及び映像表示装置
EP3261363B1 (en) Phase control signal generation device, phase control signal generation method, and phase control signal generation program
US11809774B1 (en) Privacy with extra-aural speakers
JP2011087146A (ja) スピーカを備えた表示装置
KR20100054423A (ko) 히든 스피커 장치
JP2000004137A (ja) 信号抑圧装置
WO2024057821A1 (ja) 表示装置および信号処理方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20795952

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021515917

Country of ref document: JP

Kind code of ref document: A

122 Ep: pct application non-entry in european phase

Ref document number: 20795952

Country of ref document: EP

Kind code of ref document: A1