JP2010074592A - Control device and method of electronic apparatus - Google Patents

Control device and method of electronic apparatus Download PDF

Info

Publication number
JP2010074592A
JP2010074592A JP2008240515A JP2008240515A JP2010074592A JP 2010074592 A JP2010074592 A JP 2010074592A JP 2008240515 A JP2008240515 A JP 2008240515A JP 2008240515 A JP2008240515 A JP 2008240515A JP 2010074592 A JP2010074592 A JP 2010074592A
Authority
JP
Japan
Prior art keywords
signal
sound
waveform
volume
audio signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008240515A
Other languages
Japanese (ja)
Other versions
JP5083141B2 (en
Inventor
Hirokazu Oguri
洋和 大栗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP2008240515A priority Critical patent/JP5083141B2/en
Publication of JP2010074592A publication Critical patent/JP2010074592A/en
Application granted granted Critical
Publication of JP5083141B2 publication Critical patent/JP5083141B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To actualize control of an electronic apparatus by applause sound with less erroneous operations. <P>SOLUTION: A speaker 122 outputs audio signals and a sound collector 101 collects a third sound wave in which a second sound wave generated to actualize control to increase sound volume of audio signal generated by the speaker 122 is superposed to a first sound wave based on the audio signal output from the speaker. A determining part 112 outputs a determination signal for determination that the second sound wave is generated based on the third sound wave. A memory 115 stores a setting sound volume threshold value having the maximum value smaller than the predetermined maximum value of the sound volume of audio signal generated by the speaker 122. A control part 114 compares, upon reception of the determination signal, the present setting sound volume with the setting sound volume threshold value stored in the memory 115, and controls an electronic apparatus 1 not to increase the setting sound volume when the setting sound volume is equal to or larger than the setting sound volume threshold value. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は電子機器の制御装置及び電子機器の制御方法に係り、特にリモートコントローラを用いることなく電子機器を制御する電子機器の制御装置及び電子機器の制御方法に関する。   The present invention relates to an electronic device control device and an electronic device control method, and more particularly to an electronic device control device and an electronic device control method for controlling an electronic device without using a remote controller.

リモコンのような遠隔操作機器の代わりに、拍手音などの人間が発することのできる音で電子機器を制御する方法が特許文献1に開示されている。
特開平03−184497号公報
Patent Document 1 discloses a method for controlling an electronic device with a sound that can be generated by a human, such as a clapping sound, instead of a remote control device such as a remote control.
Japanese Patent Laid-Open No. 03-184497

拍手音等で電子機器の音量をアップさせる制御を行う場合、電子機器から出力される本体音の音量を大きくしすぎると、拍手音等が検出されなくなるおそれがある。そのため、所望する電子機器の制御が実行されなくなることもある。
本発明は、拍手音を確実に認識でき、誤動作の少ない電子機器の制御装置及び電子機器の制御方法を提供することを目的とする。
When performing control to increase the volume of the electronic device with applause sound or the like, if the volume of the main body sound output from the electronic device is increased too much, applause sound or the like may not be detected. Therefore, the control of the desired electronic device may not be executed.
It is an object of the present invention to provide an electronic device control apparatus and an electronic device control method that can reliably recognize applause sounds and have few malfunctions.

上記の課題を解決するため、本発明は(a)〜(p)を提供する。
(a)電子機器1が発生する第1の音声信号を電気−音響変換して出力するスピーカ122と、前記スピーカが発した前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音し、前記第3の音波を音響−電気変換して第2の音声信号を出力する収音器101と、前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成器125,126と、前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成器105,106と、前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する前記判定処理部112と、前記スピーカが発する音声信号の音量の予め定めた第1の最大値よりも小さい第2の最大値を有する設定音量閾値を記憶するメモリ115と、前記判定信号を受け取ると、前記スピーカが第1の音声信号を出力する音量を示す設定音量の現在の値と前記設定音量閾値とを比較し、前記設定音量が前記設定音量閾値未満の場合は設定音量を上げ、前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は設定音量を上げないよう前記電子機器を制御する制御部114とを備えることを特徴とする電子機器の制御装置。
(b)前記制御部114は、前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は、前記第2の音波を用いて前記設定音量を上げる制御ができないことを表示部120に表示させることを特徴とする(a)記載の電子機器の制御装置。
(c)前記第2の音声信号に基づいて生成した検出値を予め定めた閾値と比較して前記電子機器の周囲の騒音状態を検出し、前記検出値が前記閾値より大きい場合は騒音状態であることを示すフラグを出力する騒音状態検出部113を備え、前記判定処理部は、前記騒音状態を示すフラグを受け取ると前記判定信号の出力を停止することを特徴とする(a)または(b)記載の電子機器の制御装置。
(d)電子機器11が発生する第1の音声信号を電気−音響変換して出力するスピーカ122と、前記スピーカが発した前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音し、前記第3の音波を音響−電気変換して第2の音声信号を出力する収音器101と、前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成器125,126と、前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成器105,106と、前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する判定処理部112と、前記第2の音声信号に基づいて前記電子機器の周囲の騒音状態を検出する騒音状態検出部300と、前記第1の音声信号の音量を制御する制御部400とを備え、前記騒音状態検出部は、前記第2の音声信号に基づいて生成した検出値を予め定めた第1の閾値と前記第1の閾値よりも大きい第2の閾値と比較し、前記検出値が前記第1の閾値未満である非騒音状態と、前記検出値が前記第1の閾値以上前記第2の閾値未満である半騒音状態と、前記検出値が前記第2の閾値以上である騒音状態とのいずれの状態であるかを検出し、前記半騒音状態または前記騒音状態であると検出すると、検出した状態を示すフラグを前記制御部及び前記判定処理部に出力し、前記制御部は前記判定信号を受け取ると、前記騒音状態検出部から前記フラグが出力されない場合には前記第1の音声信号の音量を上げ、前記騒音状態検出部から前記半騒音状態を示すフラグ及び前記騒音状態を示すフラグを受け取ると、前記第1の音声信号の音量を上げないよう前記電子機器を制御することを特徴とする電子機器の制御装置。
(e)前記検出値は、前記第2の音声信号の振幅に基づいて生成された累積値であることを特徴とする(c)または(d)記載の電子機器の制御装置。
(f)前記制御部は、前記騒音状態検出部から前記半騒音状態を示すフラグを受け取ると前記第2の音波を用いて前記第1の音声信号の音量を上げる制御ができないことを表示部120に表示させ、前記判定処理部は、前記騒音状態を示すフラグを受け取ると、前記判定信号の出力を停止することを特徴とする(d)記載の電子機器の制御装置。
(g)前記第1の波形信号を時間軸方向に拡大して第3の波形信号として出力する波形整形器128と、前記第2の波形信号から前記第3の波形信号を減算する減算器130とを更に備え、前記第1の波形生成器は、前記第1の音声信号よりオフセット成分を除去した音声信号を生成する第1のオフセット成分除去部125と、前記第1のオフセット成分除去部から出力された音声信号を絶対値化して前記第1の波形信号を出力する第1の絶対値化回路126とを備え、
前記第2の波形生成器は、前記第2の音声信号よりオフセット成分を除去した音声信号を生成する第2のオフセット成分除去部105と、前記第2のオフセット成分除去部から出力された音声信号を絶対値化して前記第2の波形信号を出力する第2の絶対値化回路106とを備えることを特徴とする(a)ないし(f)いずれか一項に記載の電子機器の制御装置。
(h)前記波形整形器は、前記第1の波形信号を所定の時間保持する複数の保持器152と、前記複数の保持器から出力された複数の前記第1の波形信号の最大値を抽出し、抽出した前記複数の最大値を時系列的に合成して前記第3の波形信号を生成する抽出器153とを備えることを特徴とする(g)記載の電子機器の制御装置。
(i)電子機器1が発生する第1の音声信号を電気−音響変換して第1の音声信号として出力する電気−音響変換ステップと、前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音する収音ステップと、前記第3の音波を音響−電気変換して第2の音声信号を出力する音響−電気変換ステップと、前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成ステップと、前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成ステップと、前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する判定ステップと、前記判定信号を受け取ると、スピーカが前記第1の音声信号を出力する音量を示す設定音量の現在の値と前記スピーカが発する音声信号の音量の予め定めた第1の最大値よりも小さい第2の最大値を有する設定音量閾値とを比較する比較ステップと、前記設定音量が前記設定音量閾値未満の場合は設定音量を上げ、前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は設定音量を上げないよう前記電子機器を制御する制御ステップとを含むことを特徴とする電子機器の制御方法。
(j)前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は、前記第2の音波を用いて前記設定音量を上げる制御ができないことを表示部120に表示させる表示ステップを含むことを特徴とする(i)記載の電子機器の制御方法。
(k)前記第2の音声信号に基づいて生成した検出値を予め定めた閾値と比較して前記電子機器の周囲の騒音状態を検出し、前記検出値が前記閾値より大きい場合は騒音状態であることを示すフラグを出力する騒音状態検出ステップを含み、前記判定ステップは、前記騒音状態を示すフラグが出力されると前記判定信号の出力を停止することを特徴とする(i)または(j)記載の電子機器の制御方法。
(l)電子機器11が発生する第1の音声信号を電気−音響変換して第1の音声信号として出力する電気−音響変換ステップと、前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音する収音ステップと、前記第3の音波を音響−電気変換して第2の音声信号を出力する音響−電気変換ステップと、前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成ステップと、前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成ステップと、前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する判定ステップと、前記第2の音声信号に基づいて生成した検出値を予め定めた第1の閾値と前記第1の閾値よりも大きい第2の閾値と比較する比較ステップと、前記判定信号が出力され、前記検出値が前記第1の閾値未満であるときは前記第1の音声信号の音量を上げるよう前記電子機器を制御し、前記第3の波形信号が前記第1の閾値以上前記第2の閾値未満、あるいは前記第3の波形信号が前記第2の閾値以上であるときは前記第1の音声信号の音量を上げないよう前記電子機器を制御する制御ステップとを含むことを特徴とする電子機器の制御方法。
(m)前記検出値が前記第1の閾値以上前記第2の閾値未満であるときは、前記第2の音波を用いて前記第1の音声信号の音量を上げる制御ができないことを表示部120に表示させる表示ステップを含み、前記判定ステップは、前記検出値が前記第2の閾値以上であるとき前記判定信号の出力を停止することを特徴とする(l)記載の電子機器の制御方法。
(n)前記検出値は、前記第2の音声信号の振幅に基づいて生成された累積値であることを特徴とする(k)ないし(m)いずれか一項に記載の電子機器の制御方法。
(o)前記第1の波形信号を時間軸方向に拡大して第3の波形信号として出力する波形整形ステップと、前記第2の波形信号から前記第3の波形信号を減算する減算ステップとを更に含み、前記第1の波形生成ステップは、前記第1の音声信号よりオフセット成分を除去した音声信号を生成する第1のオフセット成分除去ステップと、前記第1のオフセット成分除去ステップで出力された音声信号を絶対値化して前記第1の波形信号を出力する第1の絶対値化ステップとを含み、前記第2の波形生成ステップは、前記第2の音声信号よりオフセット成分を除去した音声信号を生成する第2のオフセット成分除去ステップと、前記第2のオフセット成分除去ステップで出力された音声信号を絶対値化して前記第2の波形信号を出力する第2の絶対値化ステップとを含むことを特徴とする(i)ないし(n)いずれか一項に記載の電子機器の制御方法。
(p)複数の前記第1の波形信号をそれぞれ所定の時間保持する保持ステップと、前記複数の第1の波形信号の各最大値を抽出し、抽出した前記複数の最大値を時系列的に合成して前記第3の波形信号を生成する抽出ステップとを含むことを特徴とする(o)記載の電子機器の制御方法。
In order to solve the above problems, the present invention provides (a) to (p).
(A) the first sound signal generated by the electronic device 1 is subjected to electro-acoustic conversion and output; and the first sound wave based on the first sound signal generated by the speaker is converted into the first sound signal. A third sound wave superimposed with the second sound wave generated to execute control to increase the volume of the sound signal is picked up, and the third sound wave is acoustic-electrically converted to output a second sound signal. Sound collector 101, first waveform generators 125 and 126 for generating a first waveform signal by performing predetermined signal processing on the first audio signal, and a predetermined signal for the second audio signal. Based on the first waveform signal and the second waveform signal, the second waveform generators 105 and 106 that perform processing to generate the second waveform signal, and whether or not the second sound wave is generated And when it is determined that the second sound wave is generated, the second The determination processing unit 112 that outputs a determination signal indicating that a sound wave has been generated, and a set volume threshold value that has a second maximum value that is smaller than a predetermined first maximum value of the volume of the sound signal emitted from the speaker When the determination signal is received, the memory 115 for storing the current value of the set volume indicating the volume at which the speaker outputs the first audio signal is compared with the set volume threshold, and the set volume is set to the set level. An electronic device comprising: a control unit 114 configured to increase a set volume when the volume is less than a volume threshold; and to control the electronic device so as not to increase the set volume when the set volume is equal to or greater than the set volume threshold. Equipment control device.
(B) When the set volume is equal to or greater than the set volume threshold, the control unit 114 causes the display unit 120 to display that the set volume cannot be increased using the second sound wave. (A) The electronic device control apparatus according to (a).
(C) The detection value generated based on the second audio signal is compared with a predetermined threshold value to detect a noise state around the electronic device, and if the detection value is larger than the threshold value, the noise state (A) or (b), further comprising: a noise state detection unit 113 that outputs a flag indicating that there is a signal, and wherein the determination processing unit stops outputting the determination signal upon receiving the flag indicating the noise state. ) The electronic apparatus control device described.
(D) The first sound signal generated by the electronic device 11 is subjected to electro-acoustic conversion and output, and the first sound wave based on the first sound signal generated by the speaker is converted into the first sound wave. A third sound wave superimposed with the second sound wave generated to execute control to increase the volume of the sound signal is picked up, and the third sound wave is acoustic-electrically converted to output a second sound signal. Sound collector 101, first waveform generators 125 and 126 for generating a first waveform signal by performing predetermined signal processing on the first audio signal, and a predetermined signal for the second audio signal. Based on the first waveform signal and the second waveform signal, the second waveform generators 105 and 106 that perform processing to generate the second waveform signal, and whether or not the second sound wave is generated And when it is determined that the second sound wave has been generated, A determination processing unit 112 that outputs a determination signal indicating that the sound wave is generated, a noise state detection unit 300 that detects a noise state around the electronic device based on the second audio signal, and the first And a control unit 400 for controlling the volume of the audio signal, wherein the noise state detection unit generates a detection value generated based on the second audio signal based on a predetermined first threshold and the first threshold. A non-noise state in which the detected value is less than the first threshold, and a semi-noise state in which the detected value is greater than or equal to the first threshold and less than the second threshold, If the detected value is a noise state that is equal to or greater than the second threshold, and if the detected value is the semi-noise state or the noise state, a flag indicating the detected state is displayed in the control unit And output to the determination processing unit. When the determination signal is received, the unit increases the volume of the first audio signal when the flag is not output from the noise state detection unit, and the flag indicating the semi-noise state and the noise from the noise state detection unit When receiving a flag indicating a state, the electronic device is controlled such that the volume of the first audio signal is not increased.
(E) The electronic device control device according to (c) or (d), wherein the detected value is a cumulative value generated based on an amplitude of the second audio signal.
(F) When the control unit receives a flag indicating the semi-noise state from the noise state detection unit, the display unit 120 indicates that the second sound wave cannot be used to increase the volume of the first audio signal. The electronic apparatus control device according to (d), wherein when the flag indicating the noise state is received, the determination processing unit stops outputting the determination signal.
(G) A waveform shaper 128 that expands the first waveform signal in the time axis direction and outputs it as a third waveform signal, and a subtractor 130 that subtracts the third waveform signal from the second waveform signal. The first waveform generator includes: a first offset component removing unit 125 that generates an audio signal obtained by removing an offset component from the first audio signal; and a first offset component removing unit. A first absolute value circuit 126 that converts the output audio signal into an absolute value and outputs the first waveform signal;
The second waveform generator includes a second offset component removing unit 105 that generates an audio signal from which an offset component has been removed from the second audio signal, and an audio signal output from the second offset component removing unit. The electronic apparatus control device according to any one of (a) to (f), further comprising: a second absolute value circuit 106 that converts the absolute value of the signal into an absolute value and outputs the second waveform signal.
(H) The waveform shaper extracts a plurality of holders 152 that hold the first waveform signal for a predetermined time and a maximum value of the plurality of first waveform signals output from the plurality of holders. And an extractor 153 that synthesizes the extracted maximum values in time series to generate the third waveform signal. The control apparatus for an electronic device according to (g),
(I) an electro-acoustic conversion step for electro-acoustic converting a first audio signal generated by the electronic device 1 and outputting the first audio signal as a first audio signal; and a first sound wave based on the first audio signal; A sound collecting step of collecting a third sound wave superimposed with a second sound wave generated to execute control for increasing the volume of the first sound signal, and an acoustic-electric conversion of the third sound wave. An acoustic-electric conversion step for outputting a second audio signal, a first waveform generation step for generating a first waveform signal by performing predetermined signal processing on the first audio signal, and the second A second waveform generation step of generating a second waveform signal by performing predetermined signal processing on the audio signal, and the second sound wave is generated based on the first waveform signal and the second waveform signal It is determined whether or not the second sound wave has been generated. A determination step for outputting a determination signal indicating that the second sound wave has been generated, and a current setting volume indicating a volume at which a speaker outputs the first audio signal upon receipt of the determination signal. A comparison step of comparing a value with a set volume threshold value having a second maximum value smaller than a predetermined first maximum value of a volume of an audio signal emitted from the speaker; and the set volume is less than the set volume threshold value And a control step of controlling the electronic device so as not to increase the set volume when the set volume is equal to or larger than the set volume threshold.
(J) including a display step of causing the display unit 120 to display that the set sound volume cannot be increased using the second sound wave when the set sound volume is equal to or greater than the set sound volume threshold value. (I) The control method of the electronic device as described in.
(K) The detection value generated based on the second audio signal is compared with a predetermined threshold value to detect a noise state around the electronic device, and if the detection value is larger than the threshold value, the noise state (I) or (j) including a noise state detection step of outputting a flag indicating that the presence of the noise signal is detected, and the determination step stops output of the determination signal when the flag indicating the noise state is output. ) The control method of the electronic device as described.
(L) an electro-acoustic conversion step of performing electro-acoustic conversion on a first audio signal generated by the electronic device 11 and outputting the first audio signal, and a first sound wave based on the first audio signal; A sound collecting step of collecting a third sound wave superimposed with a second sound wave generated to execute control for increasing the volume of the first sound signal, and an acoustic-electric conversion of the third sound wave. An acoustic-electric conversion step for outputting a second audio signal, a first waveform generation step for generating a first waveform signal by performing predetermined signal processing on the first audio signal, and the second A second waveform generation step of generating a second waveform signal by performing predetermined signal processing on the audio signal, and the second sound wave is generated based on the first waveform signal and the second waveform signal To determine whether the second sound wave has been generated. A determination step for outputting a determination signal indicating that the second sound wave has been generated, a first threshold value determined in advance based on the detection value generated based on the second audio signal, and the first A comparison step for comparing with a second threshold value greater than the threshold value, and when the determination signal is output and the detected value is less than the first threshold value, the electronic device increases the volume of the first audio signal. And when the third waveform signal is equal to or greater than the first threshold and less than the second threshold, or when the third waveform signal is equal to or greater than the second threshold, the volume of the first audio signal And a control step of controlling the electronic device so as not to increase the electronic device.
(M) When the detected value is greater than or equal to the first threshold and less than the second threshold, the display unit 120 indicates that control for increasing the volume of the first audio signal using the second sound wave is not possible. (1) The method for controlling an electronic device according to (l), wherein the determination step includes stopping the output of the determination signal when the detection value is equal to or greater than the second threshold value.
(N) The method for controlling an electronic device according to any one of (k) to (m), wherein the detected value is a cumulative value generated based on an amplitude of the second audio signal. .
(O) a waveform shaping step of expanding the first waveform signal in the time axis direction and outputting it as a third waveform signal; and a subtraction step of subtracting the third waveform signal from the second waveform signal In addition, the first waveform generation step is output in a first offset component removal step for generating an audio signal obtained by removing an offset component from the first audio signal, and in the first offset component removal step. A first absolute value converting step of converting the audio signal into an absolute value and outputting the first waveform signal, wherein the second waveform generating step includes an audio signal obtained by removing an offset component from the second audio signal. And a second offset component removing step for generating the second waveform signal by converting the audio signal output in the second offset component removing step into an absolute value and outputting the second waveform signal. Method of controlling an electronic device according to to (i) no, characterized in that it comprises a binarization step (n) one paragraph either.
(P) a holding step of holding each of the plurality of first waveform signals for a predetermined time; extracting each maximum value of the plurality of first waveform signals; and extracting the plurality of maximum values in time series And an extraction step of generating the third waveform signal by synthesizing the electronic device control method according to (o).

本発明によれば、拍手音等による電子機器の制御において、更に誤動作を少なくできる。   According to the present invention, malfunctions can be further reduced in the control of electronic equipment using applause sounds or the like.

≪第1実施形態≫
図1は本発明になる電子機器の第1実施形態を示すブロック図である。第1実施形態の電子機器1は、例えばテレビであり、操作者により発生された音波(例えば拍手音)により制御される。音波は一つの制御に対して一回、あるいは互いに所定の時間間隔を設けて複数回、発生される。
図1において電子機器1は、操作者の拍手音を収音するマイクロフォン(以下、マイクと略す)101と、マイク101からのアナログ音声信号を増幅するアンプ102と、アンプ102から出力されたアナログ音声信号をディジタル音声信号に変換するA/Dコンバータ103と、A/Dコンバータ103から出力されたディジタル音声信号をソフトウェア処理により信号処理して拍手音を検出した後、本実施形態特有の所定の判定処理を行って制御信号を生成して出力する中央処理装置(CPU)104とを備える。
<< First Embodiment >>
FIG. 1 is a block diagram showing a first embodiment of an electronic apparatus according to the present invention. The electronic device 1 according to the first embodiment is a television, for example, and is controlled by sound waves (for example, applause sound) generated by an operator. The sound wave is generated once for one control or a plurality of times at predetermined time intervals.
In FIG. 1, an electronic device 1 includes a microphone (hereinafter abbreviated as a microphone) 101 that collects applause sound of an operator, an amplifier 102 that amplifies an analog audio signal from the microphone 101, and an analog audio output from the amplifier 102. An A / D converter 103 that converts a signal into a digital audio signal, and a digital audio signal output from the A / D converter 103 is processed by software processing to detect applause sound, and then a predetermined determination specific to this embodiment A central processing unit (CPU) 104 that performs processing to generate and output a control signal.

更に電子機器1は、電子機器1内の公知の音声検波回路からの音声信号(本体デコード音)を増幅する本体アンプ121と、本体スピーカ122と、本体アンプ121からの音声信号を増幅するアンプ123と、アンプ123から出力されたアナログ音声信号をディジタル音声信号に変換するA/Dコンバータ124とを備える。
また電子機器1は、CPU104の制御に基づき電子機器1を制御する制御部114、メモリ115、GUI生成部116、映像混合部117、チューナ118及び表示部120を備える。
The electronic device 1 further includes a main body amplifier 121 that amplifies a sound signal (main body decoded sound) from a known sound detection circuit in the electronic device 1, a main body speaker 122, and an amplifier 123 that amplifies the sound signal from the main body amplifier 121. And an A / D converter 124 that converts the analog audio signal output from the amplifier 123 into a digital audio signal.
The electronic device 1 includes a control unit 114 that controls the electronic device 1 based on the control of the CPU 104, a memory 115, a GUI generation unit 116, a video mixing unit 117, a tuner 118, and a display unit 120.

マイク101は電子機器1の外で発生した音波を収音する収音器である。マイク101は収音した音波を音響−電気変換してアナログ音声信号を出力する。アナログ音声信号は、アンプ102で後段のA/Dコンバータ103によるA/D変換のダイナミックレンジに対して最適な振幅レベルに増幅された後、A/Dコンバータ103に供給される。A/Dコンバータ103は、アナログ音声信号をディジタル音声信号へ変換し、CPU104に供給する。
本体アンプ121は、後述するチューナ118から供給される本体デコード音を増幅し、本体スピーカ122及びアンプ123へ供給する。本体スピーカ122は、供給された音声信号を電気−音響変換して電子機器1の外部へ出力する。アンプ123は供給された音声信号を増幅し、A/Dコンバータ124へ供給する。A/Dコンバータ124は、アナログ音声信号をディジタル音声信号へ変換し、CPU104に供給する。
The microphone 101 is a sound collector that collects sound waves generated outside the electronic apparatus 1. The microphone 101 performs acoustic-electric conversion on the collected sound wave and outputs an analog audio signal. The analog audio signal is amplified by the amplifier 102 to an optimum amplitude level with respect to the dynamic range of A / D conversion by the A / D converter 103 at the subsequent stage, and then supplied to the A / D converter 103. The A / D converter 103 converts an analog audio signal into a digital audio signal and supplies it to the CPU 104.
The main body amplifier 121 amplifies main body decoded sound supplied from a tuner 118 described later, and supplies the amplified main body speaker 121 to the main body speaker 122 and the amplifier 123. The main body speaker 122 performs electro-acoustic conversion on the supplied audio signal and outputs it to the outside of the electronic apparatus 1. The amplifier 123 amplifies the supplied audio signal and supplies it to the A / D converter 124. The A / D converter 124 converts an analog audio signal into a digital audio signal and supplies it to the CPU 104.

CPU104は、供給されたディジタル音声信号に基づいて電子機器1を制御する制御信号を生成し、出力する。CPU104は、マイク101から収音された音波に基づく音声信号に処理を施すオフセット成分除去部105と絶対値化回路106と、電子機器1から発生する音声信号に処理を施すオフセット成分除去部125と絶対値化回路126とを備える。更にCPU104は、絶対値化回路106、126から出力された音声信号を処理する本体音除去回路107、エッジ信号抽出部108、エッジパルス生成部109、判定処理部112及び騒音状態検出部113を備える。
オフセット成分除去部105は、A/Dコンバータ103から供給されたディジタル音声信号よりオフセット成分を除去した音声信号を生成する。オフセット成分については後述する。絶対値化回路106は、オフセット成分除去部105から出力された音声信号を絶対値化する。オフセット成分除去部105及び絶対値化回路106は、マイク101から出力された音声信号に信号処理を施して、波形信号を生成する波形生成器である。
The CPU 104 generates and outputs a control signal for controlling the electronic device 1 based on the supplied digital audio signal. The CPU 104 includes an offset component removing unit 105 that performs processing on an audio signal based on a sound wave collected from the microphone 101, an absolute value circuit 106, and an offset component removing unit 125 that performs processing on an audio signal generated from the electronic device 1. And an absolute value circuit 126. The CPU 104 further includes a main body sound removal circuit 107 that processes the audio signals output from the absolute value conversion circuits 106 and 126, an edge signal extraction unit 108, an edge pulse generation unit 109, a determination processing unit 112, and a noise state detection unit 113. .
The offset component removal unit 105 generates a sound signal from which the offset component has been removed from the digital sound signal supplied from the A / D converter 103. The offset component will be described later. The absolute value converting circuit 106 converts the audio signal output from the offset component removing unit 105 into an absolute value. The offset component removing unit 105 and the absolute value converting circuit 106 are waveform generators that perform signal processing on the audio signal output from the microphone 101 to generate a waveform signal.

オフセット成分除去部125は、A/Dコンバータ124から供給されたディジタル音声信号よりオフセット成分を除去した音声信号を生成する。絶対値化回路126は、オフセット成分除去部125から出力された音声信号を絶対値化する。オフセット成分除去部125及び絶対値化回路126は、電子機器本体から発生された音声信号に信号処理を施して、波形信号を生成する波形生成器である。
オフセット成分除去部105、125はそれぞれ同一構成である。例えば、入力されるディジタル音声信号に対して、低域フィルタ(LPF)で高周波数成分を減衰させた音声信号を生成し、減算器において入力されたディジタル音声信号から高周波数成分を減衰させた音声信号を差し引くことにより、ディジタル音声信号が有しているオフセット成分を取り除く。LPFは時定数を大きくしておくことで追従が遅くなり、入力されたディジタル音声信号のおおよその平均値を求めることで、無信号時のレベルを安定化させることができる。無信号時のレベルは、後段の絶対値化する際の基準レベルであるゼロレベルとなる。
The offset component removing unit 125 generates a sound signal from which the offset component has been removed from the digital sound signal supplied from the A / D converter 124. The absolute value conversion circuit 126 converts the audio signal output from the offset component removal unit 125 into an absolute value. The offset component removing unit 125 and the absolute value converting circuit 126 are waveform generators that perform signal processing on an audio signal generated from the electronic device main body to generate a waveform signal.
The offset component removal units 105 and 125 have the same configuration. For example, an audio signal in which a high frequency component is attenuated by a low-pass filter (LPF) with respect to an input digital audio signal, and the high frequency component is attenuated from the input digital audio signal in a subtractor. By subtracting the signal, the offset component of the digital audio signal is removed. The LPF slows down by increasing the time constant, and the level when there is no signal can be stabilized by obtaining an approximate average value of the input digital audio signal. The level at the time of no signal is a zero level which is a reference level when the absolute value in the subsequent stage is made.

本体音除去回路107は、絶対値化回路106及び絶対値化回路126から供給された音声信号に基づいて、電子機器本体から発生された音声信号を除去した音声信号を生成する。
エッジ信号抽出部108は、本体音除去回路107から出力された音声信号に基づいてエッジ信号を生成し、エッジパルス生成部109はエッジ信号に基づいてエッジパルスを生成する。なお、エッジ信号抽出部108は後述する理由から2入力である。
The main body sound removal circuit 107 generates a sound signal obtained by removing the sound signal generated from the electronic device body based on the sound signal supplied from the absolute value circuit 106 and the absolute value circuit 126.
The edge signal extraction unit 108 generates an edge signal based on the audio signal output from the main body sound removal circuit 107, and the edge pulse generation unit 109 generates an edge pulse based on the edge signal. Note that the edge signal extraction unit 108 has two inputs for the reason described later.

判定処理部112は、カウンタ110及び判定処理回路111を備える。判定処理回路111は、エッジパルス生成部109から供給されたエッジパルスとカウンタ110からのカウンタ値とに基づいて各種フラグを生成する。フラグは、判定アルゴリズムに添って評価し、予め決められた判定条件と評価が合致したとき出力される。カウンタ110はカウント値を発生させ、判定処理回路111の時間軸を管理する。   The determination processing unit 112 includes a counter 110 and a determination processing circuit 111. The determination processing circuit 111 generates various flags based on the edge pulse supplied from the edge pulse generation unit 109 and the counter value from the counter 110. The flag is evaluated according to the determination algorithm, and is output when a predetermined determination condition matches the evaluation. The counter 110 generates a count value and manages the time axis of the determination processing circuit 111.

騒音状態検出部113は、電子機器1の周囲に拍手音以外に連続した大きな音が存在するかどうかを判断する。判定処理部112は、後述するように騒音状態検出部113の判断結果もふまえて拍手制御を判定し、フラグ(判定信号)を制御部114へ出力するか否かを決定する。
制御部114は、判定信号に基づき電子機器1を制御する。
The noise state detection unit 113 determines whether there is a continuous loud sound other than the applause sound around the electronic device 1. The determination processing unit 112 determines applause control based on the determination result of the noise state detection unit 113 as described later, and determines whether or not to output a flag (determination signal) to the control unit 114.
The control unit 114 controls the electronic device 1 based on the determination signal.

GUI生成部116は、複数の画像を示す複数の映像信号を生成し、制御部114の指示に従い映像混合部117に生成した映像信号を出力する。複数の画像は、ユーザが電子機器1に対して行うことのできる複数の制御を提示する画像であり、例えば音量の調整やチャンネルのアップダウンを示す。
チューナ118は入力されたRF信号より所望チャンネルの放送局からのRF信号を選局し、復調し帯域圧縮した信号をデコードして映像信号と音声信号を出力する。音声信号(本体デコード音)は本体アンプ121にて増幅されて本体スピーカ122に供給され、これにより電気−音響変換されて音波として空中に放射される。また、本体アンプ121から出力される音声信号はアンプ123にて増幅され、A/Dコンバータ124に適切な振幅で供給される。制御部114はリモコン/本体スイッチからの操作信号または拍手音による操作によって設定された設定音量を、アンプ121に対してゲインとして与え、本体スピーカ122の出力を調節する。
映像信号は、映像混合部117に供給される。映像混合部117は、チューナ118とGUI生成部116とから供給された映像信号を混合して表示部120に出力する。
The GUI generation unit 116 generates a plurality of video signals indicating a plurality of images, and outputs the generated video signals to the video mixing unit 117 in accordance with instructions from the control unit 114. The plurality of images are images presenting a plurality of controls that the user can perform on the electronic device 1, and indicate, for example, volume adjustment or channel up / down.
The tuner 118 selects an RF signal from a broadcast station of a desired channel from the input RF signal, decodes the demodulated and band-compressed signal, and outputs a video signal and an audio signal. The audio signal (main body decoded sound) is amplified by the main body amplifier 121 and supplied to the main body speaker 122, thereby being subjected to electro-acoustic conversion and radiated into the air as a sound wave. The audio signal output from the main body amplifier 121 is amplified by the amplifier 123 and supplied to the A / D converter 124 with an appropriate amplitude. The control unit 114 adjusts the output of the main body speaker 122 by giving, as a gain, the set sound volume set by the operation signal from the remote controller / main body switch or the operation by the applause sound.
The video signal is supplied to the video mixing unit 117. The video mixing unit 117 mixes the video signals supplied from the tuner 118 and the GUI generation unit 116 and outputs the mixed video signals to the display unit 120.

なお、本実施形態では、A/Dコンバータ103、124から出力されたディジタル音声信号の処理は、CPU104によるソフトウェアで行う構成としているが、ソフトウェアによる動作の一部又は全てをハードウェアで構成してもよい。ハードウェアで構成した場合には、電子機器1のスタンバイ時にも電子機器1に対する制御動作を実行させることが容易となる。   In this embodiment, the digital audio signal output from the A / D converters 103 and 124 is processed by software by the CPU 104. However, part or all of the operation by software is configured by hardware. Also good. When configured with hardware, it is easy to execute the control operation for the electronic device 1 even when the electronic device 1 is on standby.

次に、図1に示した第1実施形態の電子機器1について、その処理の順を追って詳しく説明する。図2は、マイク101で収音される音波の波形信号とアンプ102で増幅された音声信号の波形信号と、電子機器1から発生する音声信号に基づいて本体スピーカ122から発せられる音波の波形信号とアンプ123で増幅された音声信号の波形信号とを示す図である。
実際の波形信号は、図2のそれぞれの波形信号201〜204のように様々な周波数成分・振幅からなっているが、以後は図示を簡単にするため波形信号の包絡線で表すこととする。ただし、処理は実際の波形信号に対して施される。
Next, the electronic device 1 according to the first embodiment shown in FIG. 1 will be described in detail in the order of processing. 2 shows a waveform signal of a sound wave collected from the microphone 101, a waveform signal of a sound signal amplified by the amplifier 102, and a waveform signal of a sound wave emitted from the main body speaker 122 based on the sound signal generated from the electronic device 1. 2 is a diagram showing a waveform signal of an audio signal amplified by an amplifier 123. FIG.
The actual waveform signal is composed of various frequency components / amplitudes as shown by the respective waveform signals 201 to 204 in FIG. 2, but will be represented by waveform signal envelopes for the sake of simplicity. However, the processing is performed on the actual waveform signal.

図2において、本体デコード音は本体スピーカ122から出力するのに適したレベルに本体アンプ121で増幅され、本体スピーカ122で電気−音響変換されて波形信号202として出力される。また、本体アンプ121で増幅された音声信号は更にアンプ123で増幅され、波形信号201としてA/Dコンバータ124に供給される。波形信号201の本体デコード音は、本体音除去回路107において後述するように使用される。
波形信号203は、本体スピーカ122から発せられた音声信号(波形信号202)に基づく音波に電子機器1を制御するために発生させた拍手音の音波が重畳したものである。波形信号203の音波に基づく音声信号をアンプ102で増幅すると、波形信号204となる。
In FIG. 2, the main body decoded sound is amplified by the main body amplifier 121 to a level suitable for output from the main body speaker 122, subjected to electro-acoustic conversion by the main body speaker 122, and output as a waveform signal 202. The audio signal amplified by the main body amplifier 121 is further amplified by the amplifier 123 and supplied to the A / D converter 124 as the waveform signal 201. The main body decoded sound of the waveform signal 201 is used in the main body sound removing circuit 107 as described later.
The waveform signal 203 is obtained by superimposing the sound wave of the applause sound generated to control the electronic device 1 on the sound wave based on the sound signal (waveform signal 202) emitted from the main body speaker 122. When an audio signal based on the sound wave of the waveform signal 203 is amplified by the amplifier 102, a waveform signal 204 is obtained.

ここで、波形信号202と波形信号203の振幅レベルは大きく異なる場合が多い。このため、アンプ102で波形信号203を、アンプ123で波形信号202を、以降の処理を行うのに適したレベルに調整する。なお、ゲインは1以下もありえる。
ここでいう適したレベルとは、A/Dコンバータ103に入力される波形信号204のうち本体音成分に基づく波形信号の平均的な振幅と、A/Dコンバータ124に入力される波形信号201の平均的な振幅とが同程度であることを指す。
Here, the amplitude levels of the waveform signal 202 and the waveform signal 203 are often very different. For this reason, the waveform signal 203 is adjusted by the amplifier 102 and the waveform signal 202 is adjusted by the amplifier 123 to a level suitable for the subsequent processing. The gain can be 1 or less.
The suitable level here is the average amplitude of the waveform signal based on the main body sound component of the waveform signal 204 input to the A / D converter 103 and the waveform signal 201 input to the A / D converter 124. It means that the average amplitude is comparable.

本実施形態では、アンプ123のゲインは波形信号が適したレベルになるように固定するものとしたが、波形信号203と波形信号202の振幅値の差分によって動的にゲインを変化させて調整してもよい。
なお、本体アンプ121で増幅される前の音声信号をA/Dコンバータ124に供給してもよいが、本体スピーカ122から出力される波形信号の振幅と本体アンプ121で増幅される前の波形信号の振幅とが比例関係であること、すなわち音量制御後の音声信号であることが条件となる。この場合も既述したように適したレベルになるように増幅する必要がある。
In this embodiment, the gain of the amplifier 123 is fixed so that the waveform signal has an appropriate level. However, the gain is adjusted dynamically by changing the amplitude value of the waveform signal 203 and the waveform signal 202. May be.
The audio signal before being amplified by the main body amplifier 121 may be supplied to the A / D converter 124, but the amplitude of the waveform signal output from the main body speaker 122 and the waveform signal before being amplified by the main body amplifier 121. Is a proportional relationship, that is, a sound signal after volume control. Also in this case, it is necessary to amplify the signal to a suitable level as described above.

アンプ102で適したレベルに増幅された波形信号204及び、アンプ123で適したレベルに増幅された波形信号201は、それぞれA/Dコンバータ103、124でアナログ値からディジタル値へ変換される。ディジタル値へ変換された波形信号204は、オフセット成分除去部105及び絶対値化回路106で処理を施され、後述する波形信号301となる。同様に、波形信号201は、オフセット除去部125及び絶対値化回路126で処理を施され、後述する波形信号302となる。   The waveform signal 204 amplified to a suitable level by the amplifier 102 and the waveform signal 201 amplified to a suitable level by the amplifier 123 are converted from analog values to digital values by A / D converters 103 and 124, respectively. The waveform signal 204 converted into a digital value is processed by the offset component removing unit 105 and the absolute value converting circuit 106 to become a waveform signal 301 described later. Similarly, the waveform signal 201 is processed by the offset removal unit 125 and the absolute value circuit 126 to become a waveform signal 302 described later.

次に、図3を用いて図1に示す本体音除去回路107とエッジ信号抽出部108について説明する。なお、以降の処理は全てA/D変換周期TAD毎に行われるものである。
図3に示す本体音除去回路107は、絶対値化回路106から供給される波形信号301を受け取る遅延器129と、絶対値化回路126から供給される波形信号302を受け取る波形整形フィルタ128と、減算器130とコアリング処理部131とを備える。上記のとおり、波形信号301はマイク101で収音された音波に基づくものであり、波形信号302は電子機器1から発せられた音波に基づくものである。
Next, the main body sound removal circuit 107 and the edge signal extraction unit 108 shown in FIG. 1 will be described with reference to FIG. All subsequent processing is performed every A / D conversion cycle T AD .
The main body sound removal circuit 107 shown in FIG. 3 includes a delay unit 129 that receives the waveform signal 301 supplied from the absolute value conversion circuit 106, a waveform shaping filter 128 that receives the waveform signal 302 supplied from the absolute value conversion circuit 126, A subtractor 130 and a coring processing unit 131 are provided. As described above, the waveform signal 301 is based on the sound wave picked up by the microphone 101, and the waveform signal 302 is based on the sound wave emitted from the electronic device 1.

ここで、本体音除去回路107において波形信号301から波形信号302を差し引くことで、マイク101によって収音された音声信号のうち、電子機器1から発された音声信号である本体音成分を除去したい。しかし、波形信号301から波形信号302を単純に差し引くだけでは、波形信号301に含まれる本体音成分を充分に除去することは難しい。これは、波形信号301に含まれる本体音成分と、波形信号302とは元々同じ信号ではあるものの、本体スピーカ122からマイク101に至る経路の伝送特性により、周波数成分や振幅が異なるためである。
波形信号301に含まれる本体音成分と波形信号302とを一致させるには、上記した伝送特性を求める必要があるが、伝送特性は本体スピーカ122とマイク101の位置関係や周囲の環境によって左右される。また、伝送特性を動的に求めるには大規模な回路と処理量が必要となり、実際には困難である。
Here, by subtracting the waveform signal 302 from the waveform signal 301 in the main body sound removal circuit 107, it is desired to remove the main body sound component that is a voice signal emitted from the electronic device 1 from the voice signal collected by the microphone 101. . However, it is difficult to sufficiently remove the main body sound component included in the waveform signal 301 by simply subtracting the waveform signal 302 from the waveform signal 301. This is because, although the main body sound component included in the waveform signal 301 and the waveform signal 302 are originally the same signal, the frequency component and amplitude differ depending on the transmission characteristics of the path from the main body speaker 122 to the microphone 101.
In order to match the main body sound component included in the waveform signal 301 with the waveform signal 302, it is necessary to obtain the transmission characteristics described above, but the transmission characteristics depend on the positional relationship between the main body speaker 122 and the microphone 101 and the surrounding environment. The In addition, in order to obtain transmission characteristics dynamically, a large-scale circuit and processing amount are required, which is actually difficult.

そこで本実施形態では、波形信号301から本体音成分を充分に除去できるよう、波形信号302を波形整形フィルタ(波形整形部)128によって整形する。更に、簡単な回路で波形整形フィルタ128を実現する。波形整形フィルタ128は、波形信号302を後述するように時間軸方向に拡大して、波形信号304として出力する。   Therefore, in this embodiment, the waveform signal 302 is shaped by the waveform shaping filter (waveform shaping unit) 128 so that the main body sound component can be sufficiently removed from the waveform signal 301. Furthermore, the waveform shaping filter 128 is realized with a simple circuit. The waveform shaping filter 128 expands the waveform signal 302 in the time axis direction as will be described later, and outputs it as a waveform signal 304.

図4は、図3中の波形整形フィルタ128の構成と処理内容の一例を示す。波形整形フィルタ128は、入力信号の低域周波数成分を周波数選択する低域フィルタ(LPF)150と、LPF150の出力信号に対して後述する所定の処理を行う幅広処理部151と、幅広処理部151から出力された信号に対して所定の乗算係数k1を乗算する乗算器154とを備えている。
図4において幅広処理部151は、縦続接続された、各々遅延時間TADのN個の遅延器1521〜152Nと、遅延器1521〜152Nからの各出力信号とLPF150からの出力信号とから最大値を抽出する最大値抽出器153とからなる。幅広処理部151は、入力された信号のピーク値をN・TADの時間、保持するピークホールド回路を構成している。
FIG. 4 shows an example of the configuration and processing contents of the waveform shaping filter 128 in FIG. The waveform shaping filter 128 includes a low-pass filter (LPF) 150 that frequency-selects a low-frequency component of the input signal, a wide processing unit 151 that performs predetermined processing described later on the output signal of the LPF 150, and a wide processing unit 151. And a multiplier 154 that multiplies the signal output from the signal by a predetermined multiplication coefficient k1.
Wide processing unit 151 in FIG. 4, connected in cascade, each with N delay units 152 1 -152 N of the delay time T AD, output signals from the output signals and LPF150 from the delay unit 152 1 -152 N The maximum value extractor 153 for extracting the maximum value from the above. The wide processing unit 151 constitutes a peak hold circuit that holds the peak value of the input signal for N · T AD time.

かかる構成の波形整形フィルタ128に、図4に示す波形信号401が入力された場合について説明する。まず、波形整形フィルタ128に入力された波形信号401をLPF150で処理する。LPF150は入力信号の低域周波数成分を周波数選択するので、波形信号401を形成していた成分のうち、比較的周波数の高い成分は除去されて周波数の低い成分のみが残る。従って、波形信号401の包絡線に遅れて追従した波形信号402のような形の信号が、LPF150から出力される。   The case where the waveform signal 401 shown in FIG. 4 is input to the waveform shaping filter 128 having such a configuration will be described. First, the waveform signal 401 input to the waveform shaping filter 128 is processed by the LPF 150. Since the LPF 150 selects the frequency of the low frequency component of the input signal, the component having a relatively high frequency is removed from the components forming the waveform signal 401 and only the component having a low frequency remains. Therefore, the LPF 150 outputs a signal having a shape like the waveform signal 402 that follows the envelope of the waveform signal 401 with a delay.

次に、幅広処理部151で、波形信号402を時間軸方向に拡大する処理を施す。本実施形態では、幅広処理部151に入力された波形信号402をN個の遅延器1521〜152Nで時間TADずつ順次遅延させ、波形信号402と波形信号402を遅延させたN個の波形信号403から最大値抽出器153で最大値を抽出する。遅延器1521〜152Nは、各々入力された信号を遅延時間TAD保持する保持器である。最大値抽出器153は、抽出した最大値を時系列的に合成して波形信号404を生成し、出力する。出力波形信号404は入力波形信号402よりも時間軸方向に幅広である。
最後に、波形信号404は乗算器154でk1倍され、波形整形フィルタ128の出力波形信号として出力される。k1は正の数である。乗算器154の出力波形信号が、図3の出力波形信号304に相当する。
Next, the wide processing unit 151 performs processing for enlarging the waveform signal 402 in the time axis direction. In the present embodiment, the waveform signal 402 input to the wide processing unit 151 is sequentially delayed by N delay units 152 1 to 152 N by time T AD , and the waveform signal 402 and the waveform signal 402 are delayed. The maximum value is extracted from the waveform signal 403 by the maximum value extractor 153. The delay units 152 1 to 152 N are holders that hold the input signals for the delay time T AD . The maximum value extractor 153 generates a waveform signal 404 by synthesizing the extracted maximum values in time series, and outputs the waveform signal 404. The output waveform signal 404 is wider in the time axis direction than the input waveform signal 402.
Finally, the waveform signal 404 is multiplied by k1 by the multiplier 154 and output as the output waveform signal of the waveform shaping filter 128. k1 is a positive number. The output waveform signal of the multiplier 154 corresponds to the output waveform signal 304 of FIG.

再び図3を用いて説明する。波形信号302を波形整形フィルタ128を通過させることで生じた遅延の分、波形信号301に遅延器129で適切な遅延を加え、波形信号303とする。波形信号301と波形信号303とは同じである。減算器130は、波形信号303から波形整形フィルタ128から出力された波形信号304を減算する。これにより減算器130は、マイク101が収音した音波に基づく波形信号303から本体音成分を除去した波形信号を出力することができる。   A description will be given with reference to FIG. 3 again. An appropriate delay is added to the waveform signal 301 by the delay unit 129 by the amount of delay caused by passing the waveform signal 302 through the waveform shaping filter 128 to obtain a waveform signal 303. The waveform signal 301 and the waveform signal 303 are the same. The subtracter 130 subtracts the waveform signal 304 output from the waveform shaping filter 128 from the waveform signal 303. As a result, the subtractor 130 can output a waveform signal obtained by removing the main body sound component from the waveform signal 303 based on the sound wave collected by the microphone 101.

図4の幅広処理部151で波形信号302の振幅の大きい部分を時間軸方向に拡大することにより、波形信号301に含まれる拍手音以外の比較的振幅の大きなパルス性の成分まで十分に除去することが可能となる。乗算器154の定数値k1は、本体音成分がほぼ除去できるように、波形信号304の振幅が波形信号303の本体音成分の振幅よりも大きくなるような値にする。ただし、波形信号304の振幅をあまり大きくすると、波形信号303の拍手音成分が残らなくなり、拍手音を検出できなくなってしまうので、これらの条件を満たすような適切な値を選ぶ必要がある。   By widening the large amplitude portion of the waveform signal 302 in the time axis direction by the wide processing unit 151 in FIG. 4, the pulse signal component having a relatively large amplitude other than the applause sound included in the waveform signal 301 is sufficiently removed. It becomes possible. The constant value k1 of the multiplier 154 is set to a value such that the amplitude of the waveform signal 304 is larger than the amplitude of the main body sound component of the waveform signal 303 so that the main body sound component can be substantially removed. However, if the amplitude of the waveform signal 304 is made too large, the applause sound component of the waveform signal 303 does not remain and the applause sound cannot be detected. Therefore, it is necessary to select an appropriate value that satisfies these conditions.

図3の減算器130から出力された波形信号は、コアリング処理部131で、ある閾値よりも小さい値を“0”とするコアリング処理が施される。これにより、残っている細かいノイズが除去され、波形信号305のような拍手音成分だけを残した波形が生成される。   The waveform signal output from the subtractor 130 in FIG. 3 is subjected to coring processing in which a value smaller than a certain threshold value is set to “0” in the coring processing unit 131. As a result, the remaining fine noise is removed, and a waveform such as the waveform signal 305 leaving only the applause sound component is generated.

次に、エッジ信号抽出部108で波形信号305からエッジ信号のみを抽出する処理を行う。エッジ信号抽出部108には第一の入力と第二の入力の2つの入力があり、本実施形態では本体音除去回路107から出力される波形信号305が、第一の入力、第二の入力となっている。
エッジ信号抽出部108は、LPF141と、乗算器142と、減算器143とコアリング処理部144とを備える。第一の入力は減算器143に、第二の入力はLPF141に対する入力である。LPF141は、波形信号305の高周波数成分を減衰させた波形信号306を生成する。LPF141は、適切な遅延と波形を得ることが目的である。乗算器142は、波形信号306に定数値k2を乗算し、波形信号307を生成する。k2は正の数である。減算器143は、波形信号305から波形信号307を減算する。
Next, the edge signal extraction unit 108 performs processing for extracting only the edge signal from the waveform signal 305. The edge signal extraction unit 108 has two inputs, a first input and a second input. In this embodiment, the waveform signal 305 output from the main body sound removal circuit 107 is a first input and a second input. It has become.
The edge signal extraction unit 108 includes an LPF 141, a multiplier 142, a subtracter 143, and a coring processing unit 144. The first input is for the subtractor 143, and the second input is for the LPF 141. The LPF 141 generates a waveform signal 306 in which a high frequency component of the waveform signal 305 is attenuated. The purpose of the LPF 141 is to obtain an appropriate delay and waveform. The multiplier 142 multiplies the waveform signal 306 by a constant value k2, and generates a waveform signal 307. k2 is a positive number. The subtracter 143 subtracts the waveform signal 307 from the waveform signal 305.

減算器143による減算の結果、波形信号305の周波数の高い立ち上がり部分はそのまま残るが、波形信号305に含まれる話し声や周囲のノイズなどの比較的周波数の低い音に波形信号307が充分に追従しているため、それ以外の部分は負に落ち込む。
コアリング処理部144は、減算器143から出力された波形信号に対してある閾値よりも小さい入力値に対する出力値を“0”とするコアリング処理を施し、波形信号(エッジ信号)308のような急峻なエッジのみを持つ波形信号を生成する。コアリング処理部144の閾値を、“0”ではなく、適切な正の値を設定することで、残っている小さなノイズ除去も可能となる。
As a result of the subtraction by the subtractor 143, the high frequency rising portion of the waveform signal 305 remains as it is, but the waveform signal 307 sufficiently follows a relatively low frequency sound such as speech or ambient noise included in the waveform signal 305. Therefore, the other parts are negative.
The coring processing unit 144 performs a coring process on the waveform signal output from the subtractor 143 to set an output value corresponding to an input value smaller than a certain threshold value to “0”, as shown by a waveform signal (edge signal) 308. A waveform signal having only a sharp edge is generated. By setting the threshold value of the coring processing unit 144 to an appropriate positive value instead of “0”, the remaining small noise can be removed.

エッジパルス生成部109は、エッジ信号抽出部108から出力された波形信号308に基づいてエッジパルス309を生成する。   The edge pulse generation unit 109 generates an edge pulse 309 based on the waveform signal 308 output from the edge signal extraction unit 108.

騒音状態検出部113の検出動作について、図5を併せ参照して説明する。本発明の拍手制御を行うとき、周囲に拍手音以外に大きなノイズがある場合、拍手音が周囲の音に埋もれてしまい、検出ができなくなってしまう可能性がある。また、例えば大音量で音楽を聞いている場合などでは、その音楽の中で拍手音と似た音(振幅値や周波数帯域など)が鳴った場合、拍手音として認識してしまい、誤動作を起こす可能性もある。ここでは、このような拍手音以外の周囲の音により電子機器1が誤動作する、または拍手音による電子機器1の制御が不能となる可能性がある状態を、騒音状態と呼ぶことにする。
騒音状態検出部113は、絶対値化回路106から絶対値信号を受け取り、絶対値信号と予め定めた第1の閾値とを逐次比較する。図5(A)は騒音状態検出部113に供給される騒音状態での絶対値化後の波形信号1002の様子を表す。波形信号1002は、本体音を除去する前の信号波形である。入力された波形信号1002における拍手音の成分1001は、騒音状態による成分に埋もれてしまうことがある。
The detection operation of the noise state detection unit 113 will be described with reference to FIG. When performing applause control according to the present invention, if there is a large noise other than the applause sound, the applause sound may be buried in the surrounding sound and detection may not be possible. For example, when listening to music at a high volume, if a sound similar to a clap sound (amplitude value, frequency band, etc.) is heard in the music, it is recognized as a clap sound, causing malfunction. There is a possibility. Here, a state in which the electronic device 1 malfunctions due to ambient sounds other than such a clapping sound or the electronic device 1 may not be controlled by the clapping sound is referred to as a noise state.
The noise state detection unit 113 receives the absolute value signal from the absolute value conversion circuit 106 and sequentially compares the absolute value signal with a predetermined first threshold value. FIG. 5A shows a state of the waveform signal 1002 after being converted into an absolute value in the noise state supplied to the noise state detection unit 113. A waveform signal 1002 is a signal waveform before the main body sound is removed. A component 1001 of applause sound in the input waveform signal 1002 may be buried in a component due to a noise state.

そこで本実施形態では、まず波形信号1002に対して、適切な閾値1003(第1の閾値)を設ける。図5(A)で加算と記した範囲では、波形信号1002のレベルが閾値1003以上であるので、波形信号1002と閾値1003との差の値を累積加算して図5(B)に示す累積値1005を求める。同様に、図5(A)で減算と記した範囲では、波形信号1002のレベルが閾値1003未満であるので、波形信号1002と閾値1003との差の値を累積減算して累積値1005を求める。累積値1005は、マイク101から収音された音声信号に基づいて生成された検出値である。
次に、累積値1005に対しても適切な閾値1004を設け、この閾値1004よりも累積値1005が大きい場合、騒音状態検出部113は、この状態を騒音状態とみなし、拍手制御禁止フラグFFを判定処理部112へ出力する。
Therefore, in the present embodiment, an appropriate threshold 1003 (first threshold) is first provided for the waveform signal 1002. In the range indicated as addition in FIG. 5A, the level of the waveform signal 1002 is equal to or higher than the threshold value 1003. Therefore, the difference value between the waveform signal 1002 and the threshold value 1003 is cumulatively added and the cumulative value shown in FIG. The value 1005 is determined. Similarly, in the range indicated as subtraction in FIG. 5A, since the level of the waveform signal 1002 is less than the threshold value 1003, the cumulative value 1005 is obtained by cumulatively subtracting the value of the difference between the waveform signal 1002 and the threshold value 1003. . The accumulated value 1005 is a detection value generated based on the audio signal collected from the microphone 101.
Next, an appropriate threshold value 1004 is provided for the cumulative value 1005. If the cumulative value 1005 is larger than the threshold value 1004, the noise state detection unit 113 regards this state as a noise state, and the applause control prohibition flag F F Is output to the determination processing unit 112.

なお、波形信号1002の値が閾値1003を越え続けると、累積値1005は加算され続けるので、オーバーフローを防ぐために累積値1005に対してリミッタを設けてもよい。波形信号1002の値に対して、レベルスライスして判定を行うと、拍手音の成分1001は立ち上がりに大きな振幅を持っているので、拍手音自身で拍手制御禁止フラグFFがセットされてしまう。しかし、本実施形態のように、波形信号1002の値ではなく、その累積値1005に対して判定を行うことで、連続的な大きな周囲の音に対してのみ、拍手制御禁止フラグFFを立てることができる。 If the value of the waveform signal 1002 continues to exceed the threshold value 1003, the accumulated value 1005 is continuously added. Therefore, a limiter may be provided for the accumulated value 1005 to prevent overflow. If determination is made by level slicing the value of the waveform signal 1002, the applause sound component 1001 has a large amplitude at the rising edge, so the applause control prohibition flag FF is set by the applause sound itself. However, as in this embodiment, the applause control prohibition flag FF is set only for continuous loud sounds by making a determination on the accumulated value 1005 instead of the value of the waveform signal 1002. be able to.

判定処理部112は、騒音状態検出部113の判断結果もふまえて拍手制御を判定し、判定信号を制御部114へ出力するか否かを決定する。判定処理部112内の判定処理回路111は、騒音状態検出部113から拍手制御禁止フラグFFが入力されない場合は、判定動作を行う。一方で、騒音状態検出部113から拍手制御禁止フラグFFが入力された場合は、判定動作を停止する。
従って、判定処理部112は、騒音状態検出部113からフラグFFを受け取ったときは判定信号の出力を停止する。すなわち判定処理部112は、騒音状態検出部113が騒音状態と判断した場合に、拍手音による電子機器1の制御を禁止する。これにより、大音量のテレビ音や環境音などの騒音を拍手音と誤認識して電子機器1が誤動作することを防止できる。
判定処理部112は、ユーザが拍手制御を受け付けない状態であることを認知できるよう、画面に所定の表示を行ったり、スピーカから所定の音声を発生させたりすることが好ましい。
The determination processing unit 112 determines applause control based on the determination result of the noise state detection unit 113 and determines whether to output a determination signal to the control unit 114. The determination processing circuit 111 in the determination processing unit 112 performs a determination operation when the applause control prohibition flag FF is not input from the noise state detection unit 113. On the other hand, when the applause control prohibition flag FF is input from the noise state detection unit 113, the determination operation is stopped.
Thus, the determination processing unit 112, when receiving the flag F F from the noise condition detecting unit 113 stops the output of the decision signal. That is, the determination processing unit 112 prohibits the control of the electronic device 1 by the applause sound when the noise state detection unit 113 determines that the noise state is present. Thereby, it is possible to prevent the electronic device 1 from malfunctioning by erroneously recognizing noise such as a loud sound of a television or an environmental sound as a clapping sound.
The determination processing unit 112 preferably performs a predetermined display on the screen or generates a predetermined sound from the speaker so that the user can recognize that the user does not accept the applause control.

以上のように、拍手制御禁止フラグFFを導入することにより、図5(A)で表されるような、連続した大きなノイズが存在する場合の電子機器1の誤動作を防ぐことができる。更に、前述したユーザが禁止状態を認知できるような表示等があれば、ユーザは拍手制御ができない状態を認識でき、むやみに拍手せずに済む。また、騒音の原因になるものが例えば音楽であれば、それを止めるなどの対応をユーザはとることができる。 As described above, by introducing the clap control prohibition flag F F, it is possible to prevent malfunction of the electronic device 1 when, as represented in FIG. 5 (A), the large noise continuous present. Furthermore, if there is a display or the like that allows the user to recognize the prohibited state, the user can recognize a state in which applause control cannot be performed, and it is unnecessary to applaud unnecessarily. In addition, if the cause of noise is, for example, music, the user can take measures such as stopping it.

制御部114は、電子機器1を制御するための複数の制御のうちの一つの制御をアクティブな状態とし、アクティブな状態を複数の制御間で所定の時間間隔で巡回させる。更に制御部114はこの巡回に併せて、表示部120に複数の制御に対してそれぞれ対応付けられた複数の画像のうちいずれか一つの画像をアクティブな状態で表示すると共に、アクティブな状態で表示する画像を複数の画像間で巡回させて表示する。制御部114は表示部120を制御する表示制御部としても働く。制御部114がアクティブな状態の交替に併せて表示部120に表示させる画像を切替えるので、ユーザは表示部120を見ながら、所望の制御内容がアクティブなタイミングで拍手を1回すれば、所望の制御を選択できる。制御は例えば、電源のオンオフやチャンネル切り替え、設定音量の調整などである。   The control unit 114 sets one control among a plurality of controls for controlling the electronic device 1 to an active state, and cycles the active state at a predetermined time interval between the plurality of controls. Further, in conjunction with this tour, the control unit 114 displays any one of the plurality of images respectively associated with the plurality of controls on the display unit 120 in an active state and displays in an active state. The image to be displayed is displayed by cycling between a plurality of images. The control unit 114 also functions as a display control unit that controls the display unit 120. Since the control unit 114 switches the image to be displayed on the display unit 120 in accordance with the change of the active state, the user can watch the display unit 120 and perform applause once when the desired control content is active. Control can be selected. The control includes, for example, power on / off, channel switching, and adjustment of a set volume.

判定処理部112は1回の拍手音に基づいて発生する1回のエッジパルス毎に判定を完了し、判定信号(判定フラグFJ)を出力する。制御部114は判定信号を基に、選択された制御に係わる値をインクリメントあるいはデクリメントする。
例えばユーザが音量のアップまたはダウンの制御を選択できる状態では、制御部114は音量をアップする制御とダウンする制御とを、交互にアクティブな状態となるよう切替える。同時に制御部114はGUI生成部116を介して表示部120に、音量アップを示す画像と音量ダウンを示す画像とを交互に巡回させて表示させる。ユーザは音量アップを制御したい場合には、音量アップを示す画像が表示部120に表示されているタイミングで拍手を1回する。判定処理部112は発生された拍手音に基づいて判定信号を出力する。制御部114は判定信号を受け取り、音量をアップする制御がアクティブな状態にあることに基づき、音量を上げるようアンプ121を制御する。他の制御についても同様の処理が行われる。
The determination processing unit 112 completes the determination for each edge pulse generated based on one applause sound, and outputs a determination signal (determination flag F J ). The control unit 114 increments or decrements the value related to the selected control based on the determination signal.
For example, in a state in which the user can select the volume up or down control, the control unit 114 switches the volume up control and the control down to be in an active state alternately. At the same time, the control unit 114 causes the display unit 120 via the GUI generation unit 116 to alternately display an image indicating volume increase and an image indicating volume decrease. When the user wants to control the volume increase, he claps once at the timing when the image indicating the volume increase is displayed on the display unit 120. The determination processing unit 112 outputs a determination signal based on the generated applause sound. The control unit 114 receives the determination signal, and controls the amplifier 121 to increase the volume based on the fact that the control for increasing the volume is in an active state. Similar processing is performed for other controls.

メモリ115は、電子機器1の特性による設定音量に対する設定音量閾値を予め格納している。設定音量とは、スピーカ122から実際に出力される音量の大きさを示す値ではなく、表示部120にグラフィックスや数字等で表される音量の大きさを示す値のことである。
図6は本実施形態の電子機器1において、アンプ121に入力された信号に対する出力される増幅後の信号の関係の一例を、設定音量毎に示す。図6は、設定音量が5〜40の8段階を抽出して示す。設定音量5から設定音量20までは、入力された信号の音量が大きくなるのに従って出力される信号の音量も大きくなり、設定音量が大きいほど最大入力音量に対する最大出力音量も大きい。設定音量25以上については、スピーカ122が出力する音声信号の音量の予め定めた最大値(図6のMAX)に出力音量が達すると、それ以降は入力信号の音量が増大してもスピーカ122から出力される信号の音量は一定となる。図6において設定音量25以上の場合の最大出力音量は、スピーカ122が発する音声信号の音量の予め定めた最大値MAXと等しい。
ここで設定音量40は、電子機器1に予め定めた設定音量の最大値とする。既述したように、設定音量40まで設定音量が上げられてもその最大出力音量は最大値MAXである。最大値MAXはスピーカ122が実際に発することのできる音声信号の音量の最大値よりも小さい値に設定している。
The memory 115 stores in advance a set volume threshold for the set volume according to the characteristics of the electronic device 1. The set volume is not a value indicating the volume actually output from the speaker 122 but a value indicating the volume expressed by graphics, numbers, or the like on the display unit 120.
FIG. 6 shows, for each set volume, an example of the relationship between the signal input to the amplifier 121 and the amplified signal that is output in the electronic device 1 of the present embodiment. FIG. 6 shows the extracted eight levels of the set volume of 5-40. From the set volume 5 to the set volume 20, the volume of the output signal increases as the volume of the input signal increases, and the maximum output volume with respect to the maximum input volume increases as the set volume increases. For the set volume 25 or higher, when the output volume reaches a predetermined maximum value (MAX in FIG. 6) of the volume of the audio signal output from the speaker 122, the output level from the speaker 122 will increase even if the volume of the input signal thereafter increases. The volume of the output signal is constant. In FIG. 6, the maximum output volume when the set volume is 25 or more is equal to a predetermined maximum value MAX of the volume of the audio signal emitted from the speaker 122.
Here, the set volume 40 is the maximum value of the set volume predetermined for the electronic device 1. As described above, even if the set volume is increased to the set volume 40, the maximum output volume is the maximum value MAX. The maximum value MAX is set to a value smaller than the maximum value of the volume of the audio signal that the speaker 122 can actually emit.

本実施形態においては、アンプ121から出力される音量に対して出力音量閾値を設定している。出力音量閾値は、定常的にその音量レベルの本体音が存在していても、マイク101から入力された音から拍手音が検出できる音量レベルの最大値とする。出力音量閾値は、予めメモリ115に記憶されている。
すなわち、アンプ121から出力される音量が出力音量閾値を超えると、拍手音の検出が困難になる。従って本実施形態では、ある設定音量における最大出力音量が出力音量閾値を超える場合、その設定音量においては拍手音の検出が困難となる可能性があるので、最大出力音量が出力音量閾値を超えない設定音量のうち、最大の設定音量を設定音量閾値とする。設定音量閾値の最大値は、スピーカ122が発する音声信号の音量の予め定めた最大値(図6のMAX)よりも小さい。
図6より、設定音量20のときの最大出力音量が出力音量閾値に等しくなっており、設定音量が20を超えると最大出力音量が出力音量閾値を超えてしまうことがわかる。そのためここでは設定音量閾値は20となる。設定音量21から40までは、
In the present embodiment, an output volume threshold is set for the volume output from the amplifier 121. The output sound volume threshold is set to the maximum value of the sound volume level at which the applause sound can be detected from the sound input from the microphone 101 even when the main body sound of the sound volume level exists constantly. The output volume threshold value is stored in the memory 115 in advance.
That is, when the volume output from the amplifier 121 exceeds the output volume threshold, it is difficult to detect the applause sound. Therefore, in the present embodiment, when the maximum output volume at a certain set volume exceeds the output volume threshold, it may be difficult to detect the applause sound at the set volume, so the maximum output volume does not exceed the output volume threshold. Among the set volumes, the maximum set volume is set as a set volume threshold. The maximum value of the set volume threshold is smaller than a predetermined maximum value (MAX in FIG. 6) of the volume of the audio signal emitted from the speaker 122.
FIG. 6 shows that the maximum output volume at the set volume 20 is equal to the output volume threshold, and when the set volume exceeds 20, the maximum output volume exceeds the output volume threshold. Therefore, the set sound volume threshold is 20 here. From setting volume 21 to 40,

設定音量を上げる制御がアクティブな状態において、設定音量を上げる制御を実行するために発生された拍手音に基づく判定信号が判定処理部112から出力されると、制御部114は現在の設定音量とメモリ115から読み出した設定音量閾値とを比較する。
現在の設定音量が設定音量閾値未満であり、設定音量を上げると設定音量が設定音量閾値未満あるいは設定音量閾値と等しくなるときは、制御部114は対応した制御を行う。また制御部114は、現在の設定音量が設定音量閾値未満であるとき、電子機器1が実行できる全ての拍手音による制御を判定信号に応じて行う。
When the determination signal based on the applause sound generated to execute the control to increase the set volume is output from the determination processing unit 112 in a state where the control to increase the set volume is active, the control unit 114 determines that the current set volume is The set volume threshold value read from the memory 115 is compared.
When the current set volume is less than the set volume threshold and the set volume becomes less than or equal to the set volume threshold when the set volume is increased, the control unit 114 performs corresponding control. In addition, when the current set volume is less than the set volume threshold, the control unit 114 performs control based on all the applause sounds that can be executed by the electronic device 1 according to the determination signal.

現在の設定音量が設定音量閾値と等しいあるいは現在の設定音量が設定音量閾値を超えているときは、制御部114は拍手音による設定音量を上げる制御を禁止する。
現在の設定音量が設定音量閾値であるとき、音量を上げる制御がアクティブな状態において判定信号が判定処理部112から入力されても、制御部114は音量を上げる制御を行わない。その他の制御がアクティブな状態において判定信号が入力された場合については、制御部114は対応した制御を行う。これにより、設定音量が大きくなりすぎて拍手音による電子機器1の制御ができなくなってしまうことを防ぐことができる。
現在の設定音量が設定音量閾値より大きいとき、制御部114は全ての拍手音による制御を行わない。言い換えると、制御部114は判定信号が入力されても電子機器1の制御を行わない。
When the current set volume is equal to the set volume threshold or the current set volume exceeds the set volume threshold, the control unit 114 prohibits the control to increase the set volume by the applause sound.
When the currently set volume is the set volume threshold, even if the determination signal is input from the determination processing unit 112 while the control for increasing the volume is active, the control unit 114 does not perform the control for increasing the volume. When a determination signal is input in a state where other controls are active, the control unit 114 performs corresponding control. As a result, it is possible to prevent the set sound volume from becoming too high and the electronic device 1 from being controlled by the applause sound.
When the current set volume is larger than the set volume threshold, the control unit 114 does not perform control with all the applause sounds. In other words, the control unit 114 does not control the electronic device 1 even when a determination signal is input.

制御部114が音量を上げる制御を実行しない場合、制御部114は併せて以下のようなユーザに対するフィードバックを行うことが好ましい。フィードバックは例えば、表示部120に電子機器1が現在どのような状態であるかを示す画像を表示することである。
現在の設定音量が設定音量閾値以上の状態で拍手音による設定音量を上げる操作が行われた場合には、制御部114は図7(a)に示すメッセージ画像801を表示部120に表示させ、ユーザに電子機器1の現在の状態を通知する。この画像801により、ユーザは現在の設定音量では拍手音で設定音量を上げる操作は出来ないということを理解でき、操作を止めたり、必要に応じてリモコンや本体スイッチで操作したりすること等ができる。
When the control unit 114 does not execute control to increase the volume, it is preferable that the control unit 114 also performs feedback to the user as follows. The feedback is, for example, displaying an image indicating what state the electronic device 1 is currently in on the display unit 120.
When an operation to increase the set volume by the applause sound is performed in a state where the current set volume is equal to or higher than the set volume threshold, the control unit 114 causes the display unit 120 to display the message image 801 illustrated in FIG. The user is notified of the current state of the electronic device 1. From this image 801, the user can understand that the current setting volume cannot be operated to increase the setting volume with the applause sound, and the user can stop the operation or operate the remote controller or the main body switch as necessary. it can.

上記のような画像による通知は、設定音量が設定音量閾値以上で、設定音量を上げる制御がアクティブな状態にある制御部114が判定処理部112から判定信号を受け取ったときだけではなく、設定音量が設定音量閾値と等しくなったら常に表示部120に表示されていてもよい。表示画像は、図7(b)に示す拍手音操作が禁止されていることを簡単な絵を使用して示す識別情報(アイコン)802等でもよい。また図7(c)に示す表示部120の表示画面以外の箇所に光源803(例えばLED等)を1または複数設け、制御部114が光源803を点灯させてもよい。
また、既述した拍手制御禁止フラグFFを騒音状態検出部113がセットしたときも、同様の方法で通知をすることが好ましい。フラグFFの有無は、拍手音による電子機器1の制御に直接関わるので、ユーザが認識できる必要があるためである。
The notification by the image as described above is not only performed when the control unit 114 that is in a state in which the set volume is equal to or higher than the set volume threshold and the control to increase the set volume is active, receives the determination signal from the determination processing unit 112, May be always displayed on the display unit 120 when becomes equal to the set sound volume threshold. The display image may be identification information (icon) 802 that uses a simple picture to indicate that the applause sound operation shown in FIG. 7B is prohibited. In addition, one or a plurality of light sources 803 (for example, LEDs) may be provided in places other than the display screen of the display unit 120 illustrated in FIG. 7C, and the control unit 114 may light the light sources 803.
Further, even when the clap control prohibition flag F F already described noise state detecting unit 113 has been set, it is preferable that the notification in a similar manner. The presence or absence of the flag F F because directly involved in the control of the electronic apparatus 1 according to the clapping sound, because it is necessary to recognize the user.

ここでは、一例として設定音量が設定音量閾値に達していれば、制御部114は光源803のうち赤色光を発光するLEDを駆動し、拍手制御禁止フラグFFがセットされていれば、制御部114は光源803のうちオレンジ色光を発光するLEDを駆動させる。これにより、ユーザは赤色光のLEDが発光していれば、拍手音操作により設定音量を上げることができないことが分かり、オレンジ色光のLEDが発光していれば、騒音状態であることがわかる。従って、ユーザは現在の電子機器1の状態を簡単に知ることができ、無駄に拍手をしてストレスを感じることがなくなる。
なお、光源803の数や色、表示部120への表示方法などは上記に限定されるものではなく、ユーザが認識しやすい形態をとればよい。「これ以上設定音量を上げると拍手音の検出ができなくなる、あるいはできなくなる可能性がある。従って、拍手音によって設定音量を上げることが出来ない。」という現在の状態を、ユーザが容易に理解することができればよい。
Here, as an example, if the set volume has reached the set volume threshold, the control unit 114 drives the LED that emits red light in the light source 803, and if the applause control prohibition flag FF is set, the control unit 114 Reference numeral 114 denotes an LED that emits orange light among the light sources 803. Thus, the user knows that the set sound volume cannot be raised by the applause sound operation if the red LED is emitting light, and that the user is in a noise state if the orange LED is emitting light. Therefore, the user can easily know the current state of the electronic device 1 and does not feel useless applause and stress.
Note that the number and colors of the light sources 803, the display method on the display unit 120, and the like are not limited to the above, and may be in a form that can be easily recognized by the user. The user can easily understand the current state that "the applause sound cannot or cannot be detected if the set volume is further increased. Therefore, the set volume cannot be increased by the applause sound." I can do it.

なお、現在の設定音量が設定音量閾値以上のときでも、図示しないリモコンや本体スイッチ等で設定音量が上げられたことを示す信号を制御部114が受け取った場合であれば、制御部114は設定音量を上げる制御を禁止する必要は無い。これは、ユーザがリモコンを手にしているか本体スイッチを押せる状態にあると考えられるためである。リモコンや本体スイッチから制御部114へ送られる信号は、判定処理部112から制御部114へ送られる信号の系統とは別系統となり、制御部114へ直接信号が送られるので設定音量を上げることができる。
本実施形態では設定音量閾値を図6の設定音量20としたので、拍手音による制御が禁止された後でもリモコンや本体スイッチ等を使って上げることのできる設定音量は、設定音量21から設定音量40までとなる。
Even when the current set volume is equal to or higher than the set volume threshold, if the control unit 114 receives a signal indicating that the set volume has been raised by a remote controller (not shown) or a body switch, the control unit 114 sets the volume. There is no need to prohibit the control to increase the volume. This is because it is considered that the user is holding the remote control or can press the main body switch. The signal sent from the remote control or the main body switch to the control unit 114 is different from the signal system sent from the determination processing unit 112 to the control unit 114, and the signal is directly sent to the control unit 114, so that the set volume can be increased. it can.
In the present embodiment, the set volume threshold is set to the set volume 20 in FIG. 6, so that the set volume that can be raised using the remote control or the body switch even after the control by the applause sound is prohibited is set from the set volume 21 to the set volume. Up to 40.

以上のように、電子機器1に対して拍手音で設定音量を上げる制御をする際に設定音量の上限(設定音量閾値)を設けることで、ユーザが拍手音操作によって設定音量を上げすぎて拍手音操作が不可能になるのを防ぐことができる。更に、設定音量が上限に達している状態を表示部120に画像等で示すことで、現在の電子機器1の状態をユーザが容易に理解することができる。   As described above, when the electronic device 1 is controlled to increase the set volume with the applause sound, the upper limit of the set sound volume (the set sound volume threshold value) is provided, so that the user increases the set sound volume by the applause sound operation and claps It is possible to prevent the sound operation from becoming impossible. Furthermore, the state where the set volume has reached the upper limit is displayed on the display unit 120 with an image or the like, so that the user can easily understand the current state of the electronic device 1.

≪第2実施形態≫
第1実施形態では、制御部114で設定する設定音量に対して設定音量閾値を定め、設定音量が設定音量閾値と等しくなると、拍手音による音量を上げる制御を禁止した。よって現在の設定音量が設定音量閾値以上であれば、実際にスピーカ122から出力されている音量によらず、拍手音によって設定音量を上げる制御は出来ない。
しかし実際は、コンテンツやシーンにより、同じ設定音量でも様々なレベルの音量が出力される。そのため設定音量閾値の設定によっては、拍手音による設定音量を上げる制御が禁止されているが、実際は拍手音の検出に影響のない程度の音量しか出力されていないこともある。そのため設定音量閾値を設定することで、ユーザが拍手音操作を使用できる範囲が必要以上に狭くなり、拍手音による電子機器制御の利便性が損なわれる可能性がある。
<< Second Embodiment >>
In the first embodiment, a set volume threshold is set for the set volume set by the control unit 114, and when the set volume becomes equal to the set volume threshold, the control for increasing the volume by the applause sound is prohibited. Therefore, if the current set volume is equal to or higher than the set volume threshold, it is impossible to increase the set volume by the applause sound regardless of the volume actually output from the speaker 122.
However, in reality, various levels of sound are output at the same set sound volume depending on the content and scene. For this reason, depending on the setting volume threshold setting, control to increase the setting volume by the applause sound is prohibited, but in reality, only a volume that does not affect the detection of the applause sound may be output. Therefore, by setting the set volume threshold value, the range in which the user can use the applause sound operation is narrowed more than necessary, and the convenience of electronic device control by applause sound may be impaired.

そこで第2実施形態では、設定音量の上限を予め設定した設定音量閾値とするのではなく、拍手音や周囲の雑音や本体音を含む実際にマイク101に入力される音量レベルに基づき、音量レベルの変化にあわせて設定する電子機器について説明する。
図8は第2実施形態の電子機器11を示すブロック図である。第1実施形態の電子機器1と同じ構成要素には同じ番号を付し、説明を省略する。本実施形態では、第1実施形態の騒音状態検出部113と制御部114の替わりに、騒音状態検出部300と制御部400を設ける。騒音状態検出部300は、マイク101に入力された音に基づいて電子機器11の周囲の騒音状態を検出し、拍手音による全ての制御を禁止する「騒音状態」、または拍手音によって音量を上げる制御のみを禁止する「半騒音状態」を設定する。
Therefore, in the second embodiment, instead of setting the upper limit of the set volume as a preset set volume threshold, the volume level is based on the volume level actually input to the microphone 101 including the applause sound, the ambient noise, and the body sound. An electronic device that is set in accordance with the change of will be described.
FIG. 8 is a block diagram showing the electronic device 11 of the second embodiment. The same number is attached | subjected to the same component as the electronic device 1 of 1st Embodiment, and description is abbreviate | omitted. In the present embodiment, a noise state detection unit 300 and a control unit 400 are provided instead of the noise state detection unit 113 and the control unit 114 of the first embodiment. The noise state detection unit 300 detects the noise state around the electronic device 11 based on the sound input to the microphone 101, and increases the volume by the “noise state” prohibiting all control by the applause sound or the applause sound. Set “semi-noise” to prohibit control only.

図9は騒音状態検出部300の具体的構成例を示すブロック図である。騒音状態検出部300はLPF31と比較部32とメモリ33を備える。LPF31は、絶対値化回路106で絶対値化された波形信号(波形信号301)から高域成分をカットする。これは、騒音状態検出部300では定常的に存在している音を処理の対象としたいためと、インパルス的な瞬間的に大きな振幅を持つ拍手音が後段の処理に影響を及ぼすのを防ぐためである。次に、比較部32でLPF31の出力を、メモリ33から供給される2つの閾値と比較して評価する。   FIG. 9 is a block diagram illustrating a specific configuration example of the noise state detection unit 300. The noise state detection unit 300 includes an LPF 31, a comparison unit 32, and a memory 33. The LPF 31 cuts a high-frequency component from the waveform signal (waveform signal 301) converted into an absolute value by the absolute value conversion circuit 106. This is because the noise state detection unit 300 is intended to process a sound that is constantly present, and to prevent the applause sound having an instantaneously large amplitude from affecting the subsequent processing. It is. Next, the output of the LPF 31 is compared with the two threshold values supplied from the memory 33 and evaluated by the comparison unit 32.

図10は比較部32の評価方法を示す。2つの閾値A、BはLPF31の出力信号を経時的に累積した累積値に対して定められている。比較部32は累積値を騒音状態検出部113と同様の方法で求める。累積値は、マイク101から収音された音声信号に基づいて生成された検出値である。
累積値が0から閾値A未満の範囲は、拍手音以外の音が存在していても拍手音を安定して検出でき、かつ拍手音以外の音で誤動作が起こりえない状態であり、ここでは「非騒音状態」とする。累積値が閾値A以上かつ閾値B未満では、現在は拍手音を安定して検出できるが、現在よりも設定音量を上げると本体音成分が増加して拍手音の検出が困難になるか、拍手音以外の音で誤動作が起こりうる状態であり、これを「半騒音状態」とする。累積値が閾値B以上では、拍手音以外の成分の音量が大きく、拍手音の検出が困難であるか、拍手音以外の音で誤動作が起こりうる状態であり、これを「騒音状態」とする。
FIG. 10 shows an evaluation method of the comparison unit 32. The two threshold values A and B are determined with respect to an accumulated value obtained by accumulating the output signal of the LPF 31 with time. The comparison unit 32 obtains the accumulated value by the same method as the noise state detection unit 113. The accumulated value is a detection value generated based on the audio signal collected from the microphone 101.
The range where the cumulative value is from 0 to less than the threshold A is a state in which it is possible to stably detect the applause sound even if there is a sound other than the applause sound, and no malfunction can occur with the sound other than the applause sound. “Noise free”. If the cumulative value is greater than or equal to the threshold A and less than the threshold B, the applause sound can be detected stably at present, but if the set volume is increased more than the present, the main body sound component increases and it becomes difficult to detect the applause sound. This is a state in which a malfunction may occur with a sound other than the sound, and this is referred to as a “half-noise state”. When the cumulative value is equal to or greater than the threshold value B, the volume of components other than the applause sound is high, and it is difficult to detect the applause sound or a malfunction may occur with a sound other than the applause sound. .

比較部32は、累積値を2つの閾値A、Bと比較して評価し、累積値が閾値A以上閾値B未満であれば半騒音状態であると判断する。このとき、騒音状態検出部300は半騒音状態を示す半騒音フラグを判定処理部112及び制御部400に出力する。同様に比較部32は累積値が閾値B以上であれば騒音状態であると判断して、騒音状態検出部300は騒音状態を示す騒音フラグを判定処理部112及び制御部400に出力する。   The comparison unit 32 evaluates the cumulative value by comparing it with the two threshold values A and B, and determines that the state is a semi-noise state if the cumulative value is greater than or equal to the threshold value A and less than the threshold value B. At this time, the noise state detection unit 300 outputs a semi-noise flag indicating the semi-noise state to the determination processing unit 112 and the control unit 400. Similarly, if the accumulated value is equal to or greater than the threshold value B, the comparison unit 32 determines that the noise state is present, and the noise state detection unit 300 outputs a noise flag indicating the noise state to the determination processing unit 112 and the control unit 400.

制御部400は供給されたフラグに応じて、図11に示す制御を行う。図11は制御部400に各フラグが設定されたときの、制御部400の動作を示す。
半騒音フラグ、騒音フラグともに判定処理部112及び制御部400に設定されていない状態(非騒音状態)では、拍手音以外の音により電子機器11が制御されるおそれはない。制御部400は、設定音量を上げる制御がアクティブな状態で、設定音量を上げる制御を実行するために発生された拍手音に基づく判定信号を受け取ると、設定音量を上げるよう電子機器11を制御する。制御部400は、その他の全ての制御も同様に、各制御がアクティブな状態において判定信号を受け取ると、制御部400は電子機器11を適宜制御する。制御部400が拍手音により実行する制御内容は、制御部114と同様のものである。
判定処理部112及び制御部400に半騒音フラグが設定された状態(半騒音状態)では、拍手音による設定音量を上げる制御を禁止する必要があるが、その他の拍手音による制御についてはその必要は無い。制御部400は、設定音量を上げる制御がアクティブな状態において判定処理部112から判定信号が入力されると、設定音量を上げる制御を受け付けない状態であることを、第1実施形態と同様の方法でユーザに通知する。また、設定音量を上げる以外の制御がアクティブな状態にある際に判定信号が入力された場合には、制御部400は非騒音状態と同様に、判定信号に基づき電子機器11の制御を実行する。
The control unit 400 performs the control shown in FIG. 11 according to the supplied flag. FIG. 11 shows the operation of the control unit 400 when each flag is set in the control unit 400.
When neither the semi-noise flag nor the noise flag is set in the determination processing unit 112 and the control unit 400 (non-noise state), there is no possibility that the electronic device 11 is controlled by sound other than the applause sound. When the control unit 400 receives the determination signal based on the applause sound generated to execute the control for increasing the set volume while the control for increasing the set volume is active, the control unit 400 controls the electronic device 11 to increase the set volume. . Similarly to all other controls, when the control unit 400 receives a determination signal in a state where each control is active, the control unit 400 appropriately controls the electronic device 11. The control contents executed by the control unit 400 with the applause sound are the same as those of the control unit 114.
In the state where the semi-noise flag is set in the determination processing unit 112 and the control unit 400 (semi-noise state), it is necessary to prohibit the control to increase the set volume by the applause sound, but it is necessary for the control by the other applause sound. There is no. When the determination signal is input from the determination processing unit 112 while the control for increasing the set volume is active, the control unit 400 is in a state in which the control for increasing the set volume is not accepted. Notify the user with When a determination signal is input when control other than increasing the set volume is active, the control unit 400 controls the electronic device 11 based on the determination signal, as in the non-noise state. .

騒音フラグが判定処理部112及び制御部400に設定された状態(騒音状態)は、第1実施形態の拍手制御禁止フラグFFが判定処理部112に設定された状態と同じである。従って、判定処理部112は判定信号を制御部400に出力しないため、拍手音による全ての電子機器11の制御は実行できない。制御部400は騒音フラグを受け取り、電子機器11がユーザの拍手音操作を禁止する状態にあることをユーザに通知する。
ユーザへの通知の方法は第1実施形態と同様の方法が考えられるが、半騒音状態と騒音状態の違いをユーザに分かりやすく示す必要がある。
State noise flag set to the determination processing unit 112 and the control unit 400 (noise state) is the same as the state in which clap control prohibition flag F F in the first embodiment is set to the determination processing unit 112. Therefore, since the determination processing unit 112 does not output a determination signal to the control unit 400, it is not possible to execute control of all the electronic devices 11 using the applause sound. The control unit 400 receives the noise flag and notifies the user that the electronic device 11 is in a state of prohibiting the user's applause sound operation.
The method for notifying the user can be the same as in the first embodiment, but it is necessary to clearly show the difference between the semi-noise state and the noise state to the user.

図12は、表示部120にメッセージ画像を表示する方法を示す図である。図12(A)は、半騒音状態で表示部120に表示されるメッセージ画像901を示し、図12(B)は、騒音状態で表示部120に表示されるメッセージ画像902を示す。メッセージ画像901は、上述したように拍手音による音量を上げる制御が禁止されていることを示す画像である。メッセージ画像902は、拍手音による制御が禁止されていることを示す画像である。
図12(A)では更に、表示部120に現在の設定音量を示す画像903、アップ制御を示す画像904及びダウン制御を示す画像905が表示されている。これは半騒音状態において、設定音量を下げる制御であればユーザは拍手音による操作が可能なためである。一方図12(B)では、画像903〜905は表示されていない。これは騒音状態では、拍手音による操作が全て禁止されていることをユーザに分かりやすく示すためである。
FIG. 12 is a diagram illustrating a method for displaying a message image on the display unit 120. FIG. 12A shows a message image 901 displayed on the display unit 120 in a semi-noise state, and FIG. 12B shows a message image 902 displayed on the display unit 120 in a noise state. The message image 901 is an image indicating that the control for increasing the volume by the applause sound is prohibited as described above. The message image 902 is an image indicating that control by applause sound is prohibited.
In FIG. 12A, an image 903 indicating the current set sound volume, an image 904 indicating the up control, and an image 905 indicating the down control are further displayed on the display unit 120. This is because, in a semi-noise state, if the control is performed to lower the set volume, the user can perform an operation with a clapping sound. On the other hand, in FIG. 12B, images 903 to 905 are not displayed. This is to show the user in an easy-to-understand manner that all operations using applause sound are prohibited in a noise state.

図13は表示部120にアイコン等を表示する方法を示す図である。図13(A)は、半騒音状態で表示部120に表示されるメッセージ画像906を示し、図13(B)は、騒音状態で表示部120に表示されるメッセージ画像907を示す。
図14は表示部120の表示画面を囲む外枠に1または複数設けられた光源(LED等)を点灯させる方法を示す図である。図14(A)は、半騒音状態で点灯される第1の色のLED908を示し、図14(B)は、騒音状態で点灯される第2の色のLED909を示す。図13(A)及び図14(A)は、図12(A)同様、表示部120に画像903〜905が表示されている。
なお、半騒音状態や騒音状態でも、図示しないリモコンや本体スイッチで設定音量を上げる操作を行った場合は、ユーザがリモコンを手にしているか本体スイッチを押せる状態にあると考えられるので、制御部400は第1実施形態と同様に設定音量を上げる制御を禁止する必要は無い。リモコンや本体スイッチからの信号は判定信号とは別系統となっており、制御部400へ直接送られるのでその他の操作はもちろん、設定音量を上げることもできる。
FIG. 13 is a diagram illustrating a method for displaying icons and the like on the display unit 120. 13A shows a message image 906 displayed on the display unit 120 in a semi-noise state, and FIG. 13B shows a message image 907 displayed on the display unit 120 in a noise state.
FIG. 14 is a diagram illustrating a method of turning on one or more light sources (such as LEDs) provided on the outer frame surrounding the display screen of the display unit 120. 14A shows a first color LED 908 that is lit in a semi-noise state, and FIG. 14B shows a second color LED 909 that is lit in a noise state. In FIGS. 13A and 14A, images 903 to 905 are displayed on the display portion 120, as in FIG. 12A.
Even in a semi-noisy or noisy state, if the user raises the set volume with a remote controller or main unit switch (not shown), it is considered that the user is holding the remote control or can press the main unit switch. As in the first embodiment, 400 need not prohibit the control to increase the set volume. Signals from the remote control and the main body switch are separate from the determination signal, and are sent directly to the control unit 400, so that the set volume can be raised as well as other operations.

以上のように本実施形態によれば、予め設定した設定音量閾値により設定音量の上限を決めるのではなく、実際にマイク101へ入力される音量を評価して設定音量の上限を決めることで、電子機器11がおかれた状態に応じた拍手音によす制御が行える。そのためユーザが拍手音操作を使用できる範囲が、より広くなる。
また、騒音状態と半騒音状態とを設けたことで、現在の電子機器11の状態をより詳細にユーザが知ることができ、設定音量を上げ過ぎて全ての拍手音制御が困難となることを防ぐことができる。
As described above, according to the present embodiment, the upper limit of the set volume is not determined by the preset set volume threshold, but the upper limit of the set volume is determined by evaluating the volume actually input to the microphone 101. The control by the applause sound according to the state where the electronic device 11 is placed can be performed. Therefore, the range in which the user can use the applause sound operation becomes wider.
In addition, by providing the noise state and the semi-noise state, the user can know the current state of the electronic device 11 in more detail, and it is difficult to control all the applause sounds by increasing the set volume too much. Can be prevented.

なお、以上の第1実施形態及び第2実施形態では、1回の拍手により電子機器を制御することについて説明したが、2回以上の拍手でも電子機器を制御することは可能である。2回以上の拍手による電子機器の制御には、公知の拍手音検出方法を用いればよい。
また、以上の実施形態では、ユーザ(操作者)が発生させた拍手によって電子機器を制御する場合を説明したが、これに限るものではない。ユーザは電子機器を制御するために音波を所定回数発生させればよく、音波発生方法としては拍手以外の方法(例えば、ユーザが手に持った物体を最寄りの位置にある机などの何かに叩いて発する打撃音その他)も本発明に含まれる。
In the first embodiment and the second embodiment described above, the electronic device is controlled by one applause. However, the electronic device can be controlled by two or more applauses. A known applause sound detection method may be used to control the electronic device by two or more applause.
Moreover, although the above embodiment demonstrated the case where an electronic device was controlled by the applause which the user (operator) generated, it does not restrict to this. The user only needs to generate a sound wave a predetermined number of times to control the electronic device. As a sound wave generation method, a method other than applause (for example, an object held by the user is applied to something such as a desk at the nearest position). The hitting sound generated by hitting is also included in the present invention.

本発明の電子機器の制御装置の第1実施形態のブロック図を示す図である。It is a figure which shows the block diagram of 1st Embodiment of the control apparatus of the electronic device of this invention. 本体スピーカ122から出力される音とマイク101へ入力される音の、アンプで増幅される前後の波形信号を表す図である。It is a figure showing the waveform signal before and after amplification with the amplifier of the sound output from the main body speaker 122 and the sound input into the microphone 101. FIG. 本体音除去回路107及びエッジ信号抽出器108の構成と処理内容の一例を示す図である。It is a figure which shows an example of a structure and process content of the main body sound removal circuit 107 and the edge signal extractor. 波形整形フィルタ128の構成と処理内容の一例を示す図である。It is a figure which shows an example of a structure and process content of the waveform shaping filter. 騒音状態検出部113の動作を説明する図である。It is a figure explaining operation | movement of the noise state detection part. アンプ121における入出力信号の関係の一例を示す図である。4 is a diagram illustrating an example of a relationship between input and output signals in an amplifier 121. FIG. 第1実施形態のユーザへの通知方法の一例を示す図である。It is a figure which shows an example of the notification method to the user of 1st Embodiment. 本発明の電子機器の制御装置の第2実施形態のブロック図である。It is a block diagram of 2nd Embodiment of the control apparatus of the electronic device of this invention. 騒音状態検出部300の具体的構成例を示すブロック図である。3 is a block diagram illustrating a specific configuration example of a noise state detection unit 300. FIG. 比較部32の評価方法を説明する図である。It is a figure explaining the evaluation method of the comparison part. 制御部400の動作を説明する図である。It is a figure explaining operation | movement of the control part. 第2実施形態のユーザへの通知方法の一例を示す図である。It is a figure which shows an example of the notification method to the user of 2nd Embodiment. 第2実施形態のユーザへの通知方法の一例を示す図である。It is a figure which shows an example of the notification method to the user of 2nd Embodiment. 第2実施形態のユーザへの通知方法の一例を示す図である。It is a figure which shows an example of the notification method to the user of 2nd Embodiment.

符号の説明Explanation of symbols

101 マイクロフォン
102、121、123 アンプ
103、124 A/Dコンバータ
104 中央処理装置(CPU)
105、125 オフセット成分除去部
106、126 絶対値化回路
107 本体音除去回路
108 エッジ信号抽出部
109 エッジパルス生成部
110 カウンタ
111 判定処理回路
112 判定処理部
113、300 騒音状態検出部
114、400 制御部
115 メモリ
122 スピーカ
101 Microphone 102, 121, 123 Amplifier 103, 124 A / D converter 104 Central processing unit (CPU)
105, 125 Offset component removal unit 106, 126 Absolute value circuit 107 Main body sound removal circuit 108 Edge signal extraction unit 109 Edge pulse generation unit 110 Counter 111 Judgment processing circuit 112 Judgment processing unit 113, 300 Noise state detection unit 114, 400 Control 115 Memory 122 Speaker

Claims (16)

電子機器が発生する第1の音声信号を電気−音響変換して出力するスピーカと、
前記スピーカが発した前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音し、前記第3の音波を音響−電気変換して第2の音声信号を出力する収音器と、
前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成器と、
前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成器と、
前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する判定処理部と、
前記スピーカが発する音声信号の音量の予め定めた第1の最大値よりも小さい第2の最大値を有する設定音量閾値を記憶するメモリと、
前記判定信号を受け取ると、前記スピーカが前記第1の音声信号を出力する音量を示す設定音量の現在の値と前記設定音量閾値とを比較し、前記設定音量が前記設定音量閾値未満の場合は設定音量を上げ、前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は設定音量を上げないよう前記電子機器を制御する制御部と
を備えることを特徴とする電子機器の制御装置。
A speaker that performs electro-acoustic conversion and outputs a first audio signal generated by the electronic device;
A third sound wave obtained by superimposing a second sound wave generated to execute a control for increasing the volume of the first sound signal on the first sound wave based on the first sound signal emitted from the speaker. A sound collector that picks up the sound and converts the third sound wave into an acoustic-electric signal to output a second sound signal;
A first waveform generator that performs predetermined signal processing on the first audio signal to generate a first waveform signal;
A second waveform generator that performs predetermined signal processing on the second audio signal to generate a second waveform signal;
Based on the first waveform signal and the second waveform signal, it is determined whether or not the second sound wave has been generated, and when it is determined that the second sound wave has been generated, the second sound wave is determined. A determination processing unit that outputs a determination signal indicating that the
A memory for storing a set volume threshold value having a second maximum value smaller than a predetermined first maximum value of a volume of an audio signal emitted from the speaker;
When the determination signal is received, a current value of a set volume indicating a volume at which the speaker outputs the first audio signal is compared with the set volume threshold, and when the set volume is less than the set volume threshold A control device for an electronic device, comprising: a controller configured to increase a set volume and control the electronic device so as not to increase the set volume when the set volume is equal to or greater than the set volume threshold.
前記制御部は、前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は、前記第2の音波を用いて前記設定音量を上げる制御ができないことを表示部に表示させることを特徴とする請求項1記載の電子機器の制御装置。   The control unit displays on the display unit that when the set volume is equal to or larger than the set volume threshold, the control unit cannot control to increase the set volume using the second sound wave. Item 2. An electronic device control device according to Item 1. 前記第2の音声信号に基づいて生成した検出値を予め定めた閾値と比較して前記電子機器の周囲の騒音状態を検出し、前記検出値が前記閾値より大きい場合は騒音状態であることを示すフラグを出力する騒音状態検出部を備え、
前記判定処理部は、前記騒音状態を示すフラグを受け取ると前記判定信号の出力を停止することを特徴とする請求項1または2記載の電子機器の制御装置。
A detection value generated based on the second audio signal is compared with a predetermined threshold value to detect a noise state around the electronic device. If the detection value is greater than the threshold value, the noise state is detected. A noise state detector that outputs a flag indicating
The electronic device control device according to claim 1, wherein the determination processing unit stops outputting the determination signal when receiving a flag indicating the noise state.
電子機器が発生する第1の音声信号を電気−音響変換して出力するスピーカと、
前記スピーカが発した前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音し、前記第3の音波を音響−電気変換して第2の音声信号を出力する収音器と、
前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成器と、
前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成器と、
前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する判定処理部と、
前記第2の音声信号に基づいて前記電子機器の周囲の騒音状態を検出する騒音状態検出部と、
前記第1の音声信号の音量を制御する制御部とを備え、
前記騒音状態検出部は、前記第2の音声信号に基づいて生成した検出値を予め定めた第1の閾値と前記第1の閾値よりも大きい第2の閾値と比較し、前記検出値が前記第1の閾値未満である非騒音状態と、前記検出値が前記第1の閾値以上前記第2の閾値未満である半騒音状態と、前記検出値が前記第2の閾値以上である騒音状態とのいずれの状態であるかを検出し、前記半騒音状態または前記騒音状態であると検出すると、検出した状態を示すフラグを前記制御部及び前記判定処理部に出力し、
前記制御部は前記判定信号を受け取ると、前記騒音状態検出部から前記フラグが出力されない場合には前記第1の音声信号の音量を上げ、前記騒音状態検出部から前記半騒音状態を示すフラグ及び前記騒音状態を示すフラグを受け取ると、前記第1の音声信号の音量を上げないよう前記電子機器を制御する
ことを特徴とする電子機器の制御装置。
A speaker that performs electro-acoustic conversion and outputs a first audio signal generated by the electronic device;
A third sound wave obtained by superimposing a second sound wave generated to execute a control for increasing the volume of the first sound signal on the first sound wave based on the first sound signal emitted from the speaker. A sound collector that picks up the sound and converts the third sound wave into an acoustic-electric signal to output a second sound signal;
A first waveform generator that performs predetermined signal processing on the first audio signal to generate a first waveform signal;
A second waveform generator that performs predetermined signal processing on the second audio signal to generate a second waveform signal;
Based on the first waveform signal and the second waveform signal, it is determined whether or not the second sound wave has been generated, and when it is determined that the second sound wave has been generated, the second sound wave is determined. A determination processing unit that outputs a determination signal indicating that the
A noise state detector that detects a noise state around the electronic device based on the second audio signal;
A control unit for controlling the volume of the first audio signal;
The noise state detection unit compares a detection value generated based on the second audio signal with a predetermined first threshold and a second threshold larger than the first threshold, and the detection value is A non-noise state that is less than a first threshold, a semi-noise state in which the detected value is greater than or equal to the first threshold and less than the second threshold, and a noise state in which the detected value is greater than or equal to the second threshold And when detecting that it is the semi-noise state or the noise state, a flag indicating the detected state is output to the control unit and the determination processing unit,
When the control unit receives the determination signal, if the flag is not output from the noise state detection unit, the control unit increases the volume of the first audio signal, and a flag indicating the semi-noise state from the noise state detection unit; When receiving the flag indicating the noise state, the electronic device is controlled such that the volume of the first audio signal is not increased.
前記検出値は、前記第2の音声信号の振幅に基づいて生成された累積値であることを特徴とする請求項3または4記載の電子機器の制御装置。   5. The electronic device control device according to claim 3, wherein the detected value is a cumulative value generated based on an amplitude of the second audio signal. 6. 前記制御部は、前記騒音状態検出部から前記半騒音状態を示すフラグを受け取ると前記第2の音波を用いて前記第1の音声信号の音量を上げる制御ができないことを表示部に表示させ、
前記判定処理部は、前記騒音状態を示すフラグを受け取ると、前記判定信号の出力を停止することを特徴とする請求項4記載の電子機器の制御装置。
When the control unit receives a flag indicating the semi-noise state from the noise state detection unit, the control unit causes the display unit to display that control for increasing the volume of the first audio signal using the second sound wave is not possible.
The electronic device control device according to claim 4, wherein the determination processing unit stops outputting the determination signal when receiving a flag indicating the noise state.
前記第1の波形信号を時間軸方向に拡大して第3の波形信号として出力する波形整形器と、
前記第2の波形信号から前記第3の波形信号を減算する減算器とを更に備え、
前記第1の波形生成器は、
前記第1の音声信号よりオフセット成分を除去した音声信号を生成する第1のオフセット成分除去部と、前記第1のオフセット成分除去部から出力された音声信号を絶対値化して前記第1の波形信号を出力する第1の絶対値化回路とを備え、
前記第2の波形生成器は、
前記第2の音声信号よりオフセット成分を除去した音声信号を生成する第2のオフセット成分除去部と、前記第2のオフセット成分除去部から出力された音声信号を絶対値化して前記第2の波形信号を出力する第2の絶対値化回路とを備えることを特徴とする請求項1ないし6いずれか一項に記載の電子機器の制御装置。
A waveform shaper for expanding the first waveform signal in the time axis direction and outputting it as a third waveform signal;
A subtractor for subtracting the third waveform signal from the second waveform signal;
The first waveform generator is
A first offset component removing unit that generates a sound signal from which an offset component has been removed from the first sound signal; and an audio signal output from the first offset component removing unit is converted into an absolute value to generate the first waveform. A first absolute value circuit for outputting a signal,
The second waveform generator is
A second offset component removing unit that generates a sound signal from which an offset component has been removed from the second sound signal; and an audio signal output from the second offset component removing unit is converted into an absolute value to generate the second waveform. The electronic apparatus control device according to claim 1, further comprising a second absolute value circuit that outputs a signal.
前記波形整形器は、
前記第1の波形信号を所定の時間保持する複数の保持器と、
前記複数の保持器から出力された複数の前記第1の波形信号の最大値を抽出し、抽出した前記複数の最大値を時系列的に合成して前記第3の波形信号を生成する抽出器とを備えることを特徴とする請求項7記載の電子機器の制御装置。
The waveform shaper
A plurality of holders for holding the first waveform signal for a predetermined time;
An extractor for extracting the maximum values of the plurality of first waveform signals output from the plurality of holders, and generating the third waveform signal by synthesizing the extracted plurality of maximum values in time series. The electronic apparatus control device according to claim 7, further comprising:
電子機器が発生する第1の音声信号を電気−音響変換して第1の音声信号として出力する電気−音響変換ステップと、
前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音する収音ステップと、
前記第3の音波を音響−電気変換して第2の音声信号を出力する音響−電気変換ステップと、
前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成ステップと、
前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成ステップと、
前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する判定ステップと、
前記判定信号を受け取ると、スピーカが前記第1の音声信号を出力する音量を示す設定音量の現在の値と前記スピーカが発する音声信号の音量の予め定めた第1の最大値よりも小さい第2の最大値を有する設定音量閾値とを比較する比較ステップと、
前記設定音量が前記設定音量閾値未満の場合は設定音量を上げ、前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は設定音量を上げないよう前記電子機器を制御する制御ステップと
を含むことを特徴とする電子機器の制御方法。
An electro-acoustic conversion step of electro-acoustic converting a first audio signal generated by the electronic device and outputting the first audio signal;
Collecting a third sound wave by superimposing a second sound wave generated to execute a control to increase the volume of the first sound signal on the first sound wave based on the first sound signal Steps,
An acousto-electric conversion step of acousto-electrically converting the third sound wave to output a second audio signal;
A first waveform generation step of generating a first waveform signal by performing predetermined signal processing on the first audio signal;
A second waveform generation step of generating a second waveform signal by performing predetermined signal processing on the second audio signal;
Based on the first waveform signal and the second waveform signal, it is determined whether or not the second sound wave has been generated, and when it is determined that the second sound wave has been generated, the second sound wave is determined. A determination step of outputting a determination signal indicating that has occurred,
When the determination signal is received, a current value of a set volume indicating a volume at which the speaker outputs the first audio signal and a second value smaller than a first predetermined maximum value of the volume of the audio signal emitted by the speaker. A comparison step for comparing a set volume threshold having a maximum value of
And a control step for controlling the electronic device to increase the set volume when the set volume is less than the set volume threshold and not to increase the set volume when the set volume is equal to or greater than the set volume threshold. A method for controlling an electronic device.
前記設定音量が前記設定音量閾値と等しいかまたは大きい場合は、前記第2の音波を用いて前記設定音量を上げる制御ができないことを表示部に表示させる表示ステップを含むことを特徴とする請求項9記載の電子機器の制御方法。   The display step of displaying on the display unit that when the set sound volume is equal to or larger than the set sound volume threshold, it is impossible to increase the set sound volume using the second sound wave. 9. A method for controlling an electronic device according to 9. 前記第2の音声信号に基づいて生成した検出値を予め定めた閾値と比較して前記電子機器の周囲の騒音状態を検出し、前記検出値が前記閾値より大きい場合は騒音状態であることを示すフラグを出力する騒音状態検出ステップを含み、
前記判定ステップは、前記騒音状態を示すフラグが出力されると前記判定信号の出力を停止することを特徴とする請求項9または10記載の電子機器の制御方法。
A detection value generated based on the second audio signal is compared with a predetermined threshold value to detect a noise state around the electronic device. If the detection value is greater than the threshold value, the noise state is detected. Including a noise state detection step of outputting a flag indicating,
11. The method of controlling an electronic device according to claim 9, wherein the determination step stops outputting the determination signal when a flag indicating the noise state is output.
電子機器が発生する第1の音声信号を電気−音響変換して第1の音声信号として出力する電気−音響変換ステップと、
前記第1の音声信号に基づく第1の音波に、前記第1の音声信号の音量を上げる制御を実行するために発生された第2の音波が重畳した第3の音波を収音する収音ステップと、
前記第3の音波を音響−電気変換して第2の音声信号を出力する音響−電気変換ステップと、
前記第1の音声信号に所定の信号処理を施して第1の波形信号を生成する第1の波形生成ステップと、
前記第2の音声信号に所定の信号処理を施して第2の波形信号を生成する第2の波形生成ステップと、
前記第1の波形信号及び前記第2の波形信号に基づいて、前記第2の音波が発生されたか否かを判定し、前記第2の音波が発生されたと判定した場合に前記第2の音波が発生されたことを示す判定信号を出力する判定ステップと、
前記第2の音声信号に基づいて生成した検出値を予め定めた第1の閾値と前記第1の閾値よりも大きい第2の閾値と比較する比較ステップと、
前記判定信号が出力され、前記検出値が前記第1の閾値未満であるときは前記第1の音声信号の音量を上げるよう前記電子機器を制御し、前記第3の波形信号が前記第1の閾値以上前記第2の閾値未満、あるいは前記第3の波形信号が前記第2の閾値以上であるときは前記第1の音声信号の音量を上げないよう前記電子機器を制御する制御ステップと
を含むことを特徴とする電子機器の制御方法。
An electro-acoustic conversion step of electro-acoustic converting a first audio signal generated by the electronic device and outputting the first audio signal;
Collecting a third sound wave by superimposing a second sound wave generated to execute a control to increase the volume of the first sound signal on the first sound wave based on the first sound signal Steps,
An acousto-electric conversion step of acousto-electrically converting the third sound wave to output a second audio signal;
A first waveform generation step of generating a first waveform signal by performing predetermined signal processing on the first audio signal;
A second waveform generation step of generating a second waveform signal by performing predetermined signal processing on the second audio signal;
Based on the first waveform signal and the second waveform signal, it is determined whether or not the second sound wave has been generated, and when it is determined that the second sound wave has been generated, the second sound wave is determined. A determination step of outputting a determination signal indicating that has occurred,
A comparison step of comparing a detection value generated based on the second audio signal with a predetermined first threshold value and a second threshold value greater than the first threshold value;
When the determination signal is output and the detection value is less than the first threshold, the electronic device is controlled to increase the volume of the first audio signal, and the third waveform signal is the first waveform signal. A control step of controlling the electronic device so as not to increase the volume of the first audio signal when the threshold value is greater than or equal to a threshold value and less than the second threshold value or the third waveform signal is equal to or greater than the second threshold value. A method for controlling an electronic device.
前記検出値が前記第1の閾値以上前記第2の閾値未満であるときは、前記第2の音波を用いて前記第1の音声信号の音量を上げる制御ができないことを表示部に表示させる表示ステップを含み、
前記判定ステップは、前記検出値が前記第2の閾値以上であるとき前記判定信号の出力を停止することを特徴とする請求項12記載の電子機器の制御方法。
When the detected value is not less than the first threshold value and less than the second threshold value, a display for displaying on the display unit that control of increasing the volume of the first audio signal using the second sound wave is not possible. Including steps,
13. The method of controlling an electronic device according to claim 12, wherein in the determination step, the output of the determination signal is stopped when the detected value is equal to or greater than the second threshold value.
前記検出値は、前記第2の音声信号の振幅に基づいて生成された累積値であることを特徴とする請求項11ないし13いずれか一項に記載の電子機器の制御方法。   The method of controlling an electronic device according to claim 11, wherein the detection value is a cumulative value generated based on an amplitude of the second audio signal. 前記第1の波形信号を時間軸方向に拡大して第3の波形信号として出力する波形整形ステップと、
前記第2の波形信号から前記第3の波形信号を減算する減算ステップとを更に含み、
前記第1の波形生成ステップは、
前記第1の音声信号よりオフセット成分を除去した音声信号を生成する第1のオフセット成分除去ステップと、前記第1のオフセット成分除去ステップで出力された音声信号を絶対値化して前記第1の波形信号を出力する第1の絶対値化ステップとを含み、
前記第2の波形生成ステップは、
前記第2の音声信号よりオフセット成分を除去した音声信号を生成する第2のオフセット成分除去ステップと、前記第2のオフセット成分除去ステップで出力された音声信号を絶対値化して前記第2の波形信号を出力する第2の絶対値化ステップとを含むことを特徴とする請求項9ないし14いずれか一項に記載の電子機器の制御方法。
A waveform shaping step of expanding the first waveform signal in the time axis direction and outputting it as a third waveform signal;
A subtracting step of subtracting the third waveform signal from the second waveform signal;
The first waveform generation step includes:
A first offset component removing step for generating a sound signal from which an offset component has been removed from the first sound signal; and the sound signal output in the first offset component removing step is converted into an absolute value to generate the first waveform. First absolute value output step for outputting a signal,
The second waveform generation step includes:
A second offset component removing step for generating an audio signal in which an offset component is removed from the second audio signal; and an audio signal output in the second offset component removing step is converted into an absolute value to generate the second waveform. The method for controlling an electronic device according to claim 9, further comprising: a second absolute value output step of outputting a signal.
複数の前記第1の波形信号をそれぞれ所定の時間保持する保持ステップと、
前記複数の第1の波形信号の各最大値を抽出し、抽出した前記複数の最大値を時系列的に合成して前記第3の波形信号を生成する抽出ステップとを含むことを特徴とする請求項15記載の電子機器の制御方法。

A holding step for holding each of the plurality of first waveform signals for a predetermined time;
Extracting each of the maximum values of the plurality of first waveform signals, and extracting the plurality of maximum values in a time series to generate the third waveform signal. The method for controlling an electronic device according to claim 15.

JP2008240515A 2008-09-19 2008-09-19 Electronic device control apparatus and electronic device control method Active JP5083141B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008240515A JP5083141B2 (en) 2008-09-19 2008-09-19 Electronic device control apparatus and electronic device control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008240515A JP5083141B2 (en) 2008-09-19 2008-09-19 Electronic device control apparatus and electronic device control method

Publications (2)

Publication Number Publication Date
JP2010074592A true JP2010074592A (en) 2010-04-02
JP5083141B2 JP5083141B2 (en) 2012-11-28

Family

ID=42205949

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008240515A Active JP5083141B2 (en) 2008-09-19 2008-09-19 Electronic device control apparatus and electronic device control method

Country Status (1)

Country Link
JP (1) JP5083141B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103026734A (en) * 2010-07-26 2013-04-03 摩托罗拉移动有限责任公司 Electronic apparatus for generating beamformed audio signals with steerable nulls

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008172766A (en) * 2006-12-13 2008-07-24 Victor Co Of Japan Ltd Method and apparatus for controlling electronic device

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008172766A (en) * 2006-12-13 2008-07-24 Victor Co Of Japan Ltd Method and apparatus for controlling electronic device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103026734A (en) * 2010-07-26 2013-04-03 摩托罗拉移动有限责任公司 Electronic apparatus for generating beamformed audio signals with steerable nulls
CN103026734B (en) * 2010-07-26 2015-07-08 摩托罗拉移动有限责任公司 Electronic apparatus for generating beamformed audio signals with steerable nulls

Also Published As

Publication number Publication date
JP5083141B2 (en) 2012-11-28

Similar Documents

Publication Publication Date Title
EP2375411B1 (en) Methods and apparatus for audio watermarking a substantially silent media presentation
JP5326934B2 (en) Electronics
JP2008172766A (en) Method and apparatus for controlling electronic device
JP4985230B2 (en) Electronic apparatus and audio signal processing method used therefor
JP2008084294A (en) Device and method for controlling electronic apparatus
US20180322896A1 (en) Sound collection apparatus, sound collection method, recording medium recording sound collection program, and dictation method
JP2014175993A (en) Notification controller, notification control method, and program
JP2008158254A (en) Acoustic device
US11232781B2 (en) Information processing device, information processing method, voice output device, and voice output method
JP5083141B2 (en) Electronic device control apparatus and electronic device control method
JP2010252255A (en) Automatic volume control output device
JP2010136043A (en) Acoustic device
JP2019192963A (en) Noise reduction device, noise reduction method and program
JP5197481B2 (en) Television equipment
US20220293126A1 (en) Information processing apparatus, information processing method, and program
JP2010028271A (en) Controller of electronic device
JP2008258748A (en) Liquid crystal television and television receiver
JP5168199B2 (en) Electronic device control method and electronic device control apparatus
US10555083B2 (en) Connection state determination system for speakers, acoustic device, and connection state determination method for speakers
JP2010050554A (en) Video voice reproduction device
KR101858572B1 (en) Audio device with DSP Controller Module by touch screen and using method
JP2005210594A (en) Video extraction apparatus and broadcast system
CN107371101B (en) Radio equipment and method for detecting whether radio equipment is in use state
JP2004077279A (en) Vibration wave determination device
KR100705331B1 (en) Television processing external sound signal and method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100916

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20111012

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120508

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120621

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120807

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120820

R150 Certificate of patent or registration of utility model

Ref document number: 5083141

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150914

Year of fee payment: 3