JP2013517548A - Noise reduction in electronic devices with touch-sensitive surfaces - Google Patents

Noise reduction in electronic devices with touch-sensitive surfaces Download PDF

Info

Publication number
JP2013517548A
JP2013517548A JP2012548378A JP2012548378A JP2013517548A JP 2013517548 A JP2013517548 A JP 2013517548A JP 2012548378 A JP2012548378 A JP 2012548378A JP 2012548378 A JP2012548378 A JP 2012548378A JP 2013517548 A JP2013517548 A JP 2013517548A
Authority
JP
Japan
Prior art keywords
acoustic signal
signal
electronic device
spurious
touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012548378A
Other languages
Japanese (ja)
Inventor
オリヴィエ・シュヴァン
シモン・エステーヴ
レミ・デュエイユ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Elo Touch Solutions Inc
Original Assignee
Elo Touch Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP10290014A external-priority patent/EP2354907A1/en
Application filed by Elo Touch Solutions Inc filed Critical Elo Touch Solutions Inc
Publication of JP2013517548A publication Critical patent/JP2013517548A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
    • G06F3/0433Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves in which the acoustic waves are either generated by a movable member and propagated within a surface layer or propagated within a surface layer and captured by a movable member
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82Protecting input, output or interconnection devices
    • G06F21/83Protecting input, output or interconnection devices input devices, e.g. keyboards, mice or controllers thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04182Filtering of noise external to the device and not generated by digitiser components

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Acoustics & Sound (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Position Input By Displaying (AREA)

Abstract

本発明は、タッチ検出表面を有する電子デバイスに関し、音響信号を捕捉するためのセンシング手段と、上記音響信号に基づいてタッチ検出表面上にタッチイベントのロケーションを決定するように構成されたタッチロケーション決定ユニットとを備える。タッチ局在化処理の信頼性を改善するために、上記デバイスはさらに、上記電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスによって提供された1つもしくはそれ以上の信号に基づいて、及び/または上記電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータに基づいて、音響信号の信号対ノイズ比を改善するように構成されたフィルタリングユニットを備える。本発明はまた、対応する方法に関する。本発明はさらに、ユーザ入力の機密性を改善するための方法に関する。  The present invention relates to an electronic device having a touch detection surface, sensing means for capturing an acoustic signal, and touch location determination configured to determine a location of a touch event on the touch detection surface based on the acoustic signal. A unit. To improve the reliability of the touch localization process, the device is further based on one or more signals provided by one or more spurious acoustic signal generation devices of the electronic device, and A filtering unit configured to improve the signal to noise ratio of the acoustic signal based on one or more parameters of one or more spurious acoustic signal generation devices of the electronic device. The invention also relates to a corresponding method. The invention further relates to a method for improving the confidentiality of user input.

Description

本発明は、音響信号を捕捉するセンシング手段と、音響信号に基づきタッチ検出表面上のタッチイベントのロケーションを決定するように構成されたタッチロケーション決定ユニットとを備えた、タッチ検出表面を有する電子デバイスに関する。本発明はまた、信号対ノイズ比を改善するための対応する方法に関し、電子デバイスに対するユーザのタッチをベースとした入力の機密性を改善するための方法に関する。   The present invention relates to an electronic device having a touch detection surface comprising sensing means for capturing an acoustic signal and a touch location determination unit configured to determine a location of a touch event on the touch detection surface based on the acoustic signal. About. The invention also relates to a corresponding method for improving the signal-to-noise ratio and to a method for improving the confidentiality of input based on a user's touch on an electronic device.

タッチ検出インターフェースを有する電子デバイスがますますポピュラーになってきている。電子デバイスに対する複数の入力を提供するために、ユーザは、例えばタップもしくはスライディング動作などにより複数の表面をタッチし、その入力のロケーションに基づき、電子デバイスは特定の複数の機能を実行する。既存の複数の技術の1つは、タッチイベントが表面上に現れた後に観察されてタッチイベントのロケーションが決定される複数の音響信号を分析する。この技術は、実際には複数の音波を伝送することができる任意の材料をインターフェースとして使用することができるという利点を有する。   Electronic devices with touch detection interfaces are becoming increasingly popular. In order to provide multiple inputs to an electronic device, a user touches multiple surfaces, such as by a tap or sliding action, and based on the location of the input, the electronic device performs a specific plurality of functions. One of the existing technologies analyzes a plurality of acoustic signals that are observed after the touch event appears on the surface to determine the location of the touch event. This technique has the advantage that any material that can actually transmit multiple sound waves can be used as an interface.

国際公開第2007/132,016号パンフレットInternational Publication No. 2007 / 132,016 Pamphlet 国際公開第2006/108,443号パンフレットInternational Publication No. 2006 / 108,443 Pamphlet

しかしながら、触覚インターフェースがノイズ(雑音)環境に浸されると、タッチイベントの複数の音響信号を捕捉するために使用される複数のセンサはまた、タッチイベントにおける複数の性能及びタッチイベントの局在化(ローカライゼーション)を減少させる可能性があるノイズ汚染に感染する。   However, when the haptic interface is immersed in a noisy environment, multiple sensors used to capture multiple acoustic signals of the touch event also have multiple performance and touch event localization in the touch event. Infects noise pollution that can reduce (localization).

さらに、複数の音響システムでは、タッチのロケーションは、センスされた信号と、複数のデータベース内に格納された予め決定された複数の音響署名とを比較することによって決定される。その予め決定された複数の音響署名は、経験的な校正セットアップを用いて確立されるか、もしくは材料の複数の特性、デバイスの設計、及び複数のセンサの位置を用いて計算される。あるモデルに基づき、複数の音響署名を確立する可能性のために、複数のタッチインタラクションが、一連のタップもしくはタッチイベントと関連する複数のロケーションを識別するために、追加的な無権限のセンサをタッチ検出インターフェースに秘密に取り付けることによって複数の音響信号をセンシングする複数の無権限者によって分析される。それを実行すれば、ATMもしくは自動販売機において使用されるピンコードのような機密情報が、潜在的に、複数の無権限者によって識別される。   Further, in multiple acoustic systems, the location of the touch is determined by comparing the sensed signal with a plurality of predetermined acoustic signatures stored in multiple databases. The predetermined acoustic signatures are established using an empirical calibration setup or calculated using material properties, device design, and sensor locations. Based on a model, due to the possibility of establishing multiple acoustic signatures, multiple touch interactions use additional unauthorized sensors to identify multiple locations associated with a series of taps or touch events. Analyzed by multiple unauthorized persons sensing multiple acoustic signals by secretly attaching to the touch detection interface. By doing so, sensitive information such as pin codes used in ATMs or vending machines is potentially identified by multiple unauthorized persons.

上述説明されたノイズ汚染に関し、特許文献1には、測定された信号の周波数スペクトルを分析することによって、複数のタッチイベントを、複数の外部ノイズ汚染で特に周囲の環境から到来する音響ノイズもしくはそれと接触している複数の機械的な部分を通して触角インターフェースに伝送される複数の振動から区別するシステムが説明されている。複数の特定周波数特性を示さない複数の信号は、意味のない局在化を決定する前に拒絶されるであろう。ノイズ汚染が処理される必要がある複数のタッチイベントと比較してあまり高くない場合に、この方法がうまくいく傾向がある。信号対ノイズ比が低すぎる場合、すなわちノイズ汚染の大きさが複数のタッチイベントと同じオーダの大きさもしくはさらに大きい場合に、複数のタッチイベントが雑音を完全に内部で消滅させることが出来、もはや検出されないであろうので、この方法はほとんど効果的でない傾向がある。   Regarding the noise contamination described above, Patent Document 1 discloses that by analyzing the frequency spectrum of the measured signal, a plurality of touch events are caused by a plurality of external noise contaminations, particularly acoustic noise coming from the surrounding environment or the like. A system is described that distinguishes from multiple vibrations transmitted to the antennal interface through multiple mechanical parts in contact. Signals that do not exhibit multiple specific frequency characteristics will be rejected before determining meaningless localization. This method tends to work when the noise pollution is not very high compared to multiple touch events that need to be handled. If the signal-to-noise ratio is too low, i.e. if the noise pollution is on the same order of magnitude or larger than the multiple touch events, multiple touch events can completely eliminate noise internally, no longer This method tends to be less effective because it will not be detected.

従って、本発明の目的は、音響信号の信号品質を改善することができるタッチ検出表面を電子デバイスに提供することであって、当該音響信号に基づきタッチイベントの局在化が決定され、及び/もしくは電子デバイスとの複数のユーザインタラクションの機密性を改善することができる。   Accordingly, it is an object of the present invention to provide an electronic device with a touch detection surface that can improve the signal quality of an acoustic signal, wherein the localization of touch events is determined based on the acoustic signal, and / or Alternatively, the confidentiality of multiple user interactions with the electronic device can be improved.

この目的は、ここで説明された電子デバイス及び方法を用いて達成される。   This object is achieved using the electronic devices and methods described herein.

従って、本発明は、タッチ検出表面を有する電子デバイスに関し、当該電子デバイスは、
音響信号を捕捉するセンシング手段と、
音響信号に基づき、タッチ検出表面上にタッチイベントのロケーションを決定するように構成されたタッチロケーション決定ユニットとを備え、
電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスによって提供された1つもしくはそれ以上の参照信号に基づき、及び/または電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータに基づき、音響信号の信号対ノイズ比を改善するように構成されたフィルタリングユニットをさらに備えたことを特徴とする。そのような電子デバイスにおいて、デバイスに対する内部ノイズもしくは外部ノイズの複数の特性に関する情報がすでに利用可能であって、ノイズに対して相互に強く関連付けられた、複数の信号もしくは複数のパラメータが、複数の高機能ノイズ検出デバイスが提供される必要なしに複数の構成要素によって提供されるという事実を本発明は利用する。従来技術とは対照的に、複数の実際のタッチイベントと複数のスプリアスタッチイベントとの間の区別はされないが、信号品質が、少なくとも部分的に複数のスプリアスノイズの寄与を除去することによって改善される。
Accordingly, the present invention relates to an electronic device having a touch detection surface, the electronic device comprising:
Sensing means for capturing acoustic signals;
A touch location determination unit configured to determine a location of the touch event on the touch detection surface based on the acoustic signal;
Based on one or more reference signals provided by one or more spurious acoustic signal generating devices of the electronic device and / or one or more of one or more spurious acoustic signal generating devices of the electronic device or And further comprising a filtering unit configured to improve the signal-to-noise ratio of the acoustic signal based on the further parameters. In such electronic devices, information on multiple characteristics of internal or external noise for the device is already available, and multiple signals or multiple parameters that are strongly correlated to the noise are multiple The present invention takes advantage of the fact that a sophisticated noise detection device is provided by multiple components without having to be provided. In contrast to the prior art, there is no distinction between multiple actual touch events and multiple spurious touch events, but the signal quality is improved by at least partially removing multiple spurious noise contributions. The

ここで、用語「タッチイベント」は、1つのタップもしくは複数のタップのような任意の種類の、タッチ検出表面との接触(コンタクト)に関し、それは単一のタッチイベントもしくは複数のタッチイベント、及び/またはスライディング動作及び/またはホールディング動作とすることができる。   Here, the term “touch event” relates to any kind of contact (contact) with a touch sensing surface, such as one tap or multiple taps, which may be a single touch event or multiple touch events, and / or Or it can be a sliding operation and / or a holding operation.

有利に、スプリアス音響信号発生デバイスもしくは複数のスプリアス音響信号発生デバイスの1つが、スプリアス音響信号を提供するように構成され、その結果、センスされた音響信号は、タッチイベント及びスプリアス音響信号を原因とする寄与を構成し、ここで、タッチイベントを原因とするスプリアス音響信号に対する寄与率は1より少ないか、もしくは1に等しい。スプリアス信号を用いてユーザによって提供されたタッチイベントを原因として生じる寄与をマスキングする(隠す)ことによって、電子デバイスのタッチ検出表面の実モデルの複数の特性に基づき、タッチイベントのタッチロケーションに関する情報が確立される信号をセンスするための位置にもはや無権限者は存在しないであろう。従って、タッチ検出表面を介してユーザによって入力されるタッチ検出インターフェース上のピンコードは、所望されない開示に対して保護される。フィルタリングユニットにおいて、既知のスプリアス音響信号は次にフィルタリングされ、残余の有用な信号はタッチイベントのロケーションを決定するために使用される。   Advantageously, the spurious sound signal generating device or one of the plurality of spurious sound signal generating devices is configured to provide a spurious sound signal so that the sensed sound signal is due to a touch event and a spurious sound signal. Where the contribution to the spurious acoustic signal due to the touch event is less than or equal to 1. By masking (hiding) contributions caused by touch events provided by the user using spurious signals, information about the touch location of the touch event is obtained based on multiple characteristics of the real model of the touch sensing surface of the electronic device. There will no longer be an unauthorized person in the position to sense the established signal. Accordingly, pin codes on the touch detection interface entered by the user via the touch detection surface are protected against unwanted disclosure. In the filtering unit, the known spurious acoustic signal is then filtered and the remaining useful signal is used to determine the location of the touch event.

好ましくは、スプリアス音響信号発生デバイスは、参照信号を暗号化するための信号暗号化手段を備え、フィルタリングユニットは、参照信号を復号化するための復号化手段を備える。従って、たとえ無権限者がその参照信号を傍受することができたとしても、それが不当に利用されてユーザインタラクションを原因とする信号における寄与に対してアクセスされないように、参照信号のフィルタリングユニットの方向への転送もまた保護される。   Preferably, the spurious acoustic signal generating device comprises signal encryption means for encrypting the reference signal, and the filtering unit comprises decryption means for decrypting the reference signal. Therefore, even if an unauthorized person can intercept the reference signal, the reference signal filtering unit will not be accessed for contributions in the signal due to unauthorized use and due to user interaction. Forward direction is also protected.

有利に、センシング手段は、センスされた信号を暗号化するための、センスされた信号暗号化手段を備え、フィルタリングユニットは、参照信号を復号化するための復号化手段を備える。このことが、有用な信号に対するアクセスを得ようとする複数の無権限者に対する保護をさらに改善するであろう。   Advantageously, the sensing means comprises sensed signal encryption means for encrypting the sensed signal, and the filtering unit comprises decryption means for decrypting the reference signal. This will further improve protection against multiple unauthorized persons seeking access to useful signals.

好ましくは、スプリアス音響信号はノイズ信号であって、特に白色ノイズである。ノイズ信号において特定のパタンが存在しないので、無権限者は、スプリアス音響信号の複数の特性を識別することができないであろうし、それ故にスプリアス音響信号それ自身を知ることなしに機能フィルタリングユニットの創作(クリエーション)は不可能となる。   Preferably, the spurious acoustic signal is a noise signal, in particular white noise. Since there is no specific pattern in the noise signal, an unauthorized person will not be able to identify multiple characteristics of the spurious acoustic signal, and thus create a functional filtering unit without knowing the spurious acoustic signal itself. (Creation) becomes impossible.

有利に、スプリアス音響信号は、聞き取ることができない。このケースでは、複数のユーザはスプリアス信号によって妨害される。   Advantageously, spurious acoustic signals are not audible. In this case, multiple users are disturbed by spurious signals.

好ましくは、フィルタリングユニットは適合フィルタリングユニットを備えることができる。適合フィルタリングユニットを使用することによって、ノイズ減少はノイズの複数の特性が変化する複数の状態の変化に自動的に適合化する。   Preferably, the filtering unit can comprise an adaptive filtering unit. By using an adaptive filtering unit, the noise reduction automatically adapts to multiple state changes where multiple characteristics of the noise change.

有利な実施形態によれば、電子デバイスはさらに、複数のスプリアス音響信号発生デバイスによって提供された、複数の参照信号間もしくは複数のパラメータ間をスイッチングして1つの信号をフィルタリングユニットに提供するように構成されたスイッチング手段を備える。そのようなスイッチング手段を使用すれば、フィルタリングを変更することが可能となって、その結果、どんなふうにでもフィルタリングユニットに対する複数のノイズコントリビュータ入力を提供する必要なしに、信号対ノイズ比を改善するために支配的なノイズコントリビュータが考慮される。従って、フィルタリングユニットの設計は、シンプルな状態をキープすることが可能となる。   According to an advantageous embodiment, the electronic device is further adapted to switch between reference signals or parameters provided by a plurality of spurious acoustic signal generation devices to provide a signal to the filtering unit. It comprises the configured switching means. Using such switching means, it is possible to change the filtering, thus improving the signal to noise ratio without having to provide multiple noise contributor inputs to the filtering unit in any way. In order to account for dominant noise contributors. Therefore, the design of the filtering unit can keep a simple state.

好ましくは、電子デバイスはさらに、複数のスプリアス音響信号発生デバイスの少なくとも2つの参照信号及び/もしくはパラメータを加算するように構成された加算手段が備えられる。簡単に加算手段を追加することによって、簡単にそれらの寄与を加算してさらにノイズ減少を改善することによって、複数のノイズコントリビュータが考慮される。   Preferably, the electronic device further comprises an adding means configured to add at least two reference signals and / or parameters of the plurality of spurious acoustic signal generating devices. Multiple noise contributors are taken into account by simply adding their contributions by simply adding their contributions to further improve noise reduction.

有利に、1つもしくはそれ以上のパラメータは、少なくとも1つの周波数範囲及び関連する振幅である。これらの特性に基づき、適切なフィルタリング手段がタッチイベントのロケーションを決定するために使用される音響信号に対するノイズ寄与を減少するように選択される。   Advantageously, the one or more parameters are at least one frequency range and associated amplitude. Based on these characteristics, appropriate filtering means are selected to reduce the noise contribution to the acoustic signal that is used to determine the location of the touch event.

好ましい実施形態によれば、1つもしくはそれ以上のスプリアス音響信号発生デバイスは、少なくとも1つのラウドスピーカ、マイクロフォン、振動デバイス、加速度計、ハードディスクドライブ、ベンチレータ、電源、及び電子構成要素とすることができる。従って、これらのデバイスは、インパクトの局在化を決定するために使用された音響信号に対するノイズを発生し、それ故にそれらの1つもしくは複数の寄与が減少させる必要があるか、もしくは環境ノイズ(マイクロフォン)を捕捉し、それ故に電子デバイスの局所(ローカル)環境における音響ノイズを表す信号を提供することができるかのいずれかである。   According to a preferred embodiment, the one or more spurious acoustic signal generating devices can be at least one loudspeaker, microphone, vibration device, accelerometer, hard disk drive, ventilator, power supply, and electronic components. . Thus, these devices generate noise to the acoustic signal used to determine impact localization and hence their one or more contributions need to be reduced or environmental noise ( The microphone) and thus can provide a signal representative of acoustic noise in the local environment of the electronic device.

有利に、電子デバイスは、少なくとも1つの携帯電話、コンピュータ、ゲームコンソール(ゲーム制御装置)、電子ブックリーダ、MP3プレイヤ、ビデオプレイヤ、HiFiプレイヤ、及び/もしくはナビゲーションシステムとすることができる。これらのデバイスのすべては、少なくとも1つのスプリアス音響信号発生デバイスを有し、その信号もしくはパラメータが信号対ノイズ比を改善するために使用される。   Advantageously, the electronic device may be at least one mobile phone, a computer, a game console (game control device), an electronic book reader, an MP3 player, a video player, a HiFi player, and / or a navigation system. All of these devices have at least one spurious acoustic signal generating device whose signal or parameter is used to improve the signal to noise ratio.

好ましくは、電子デバイスはハンドヘルドデバイスとすることができる。ノイズレベルを変更することにより複数の環境を変更するときでさえ、それは複数のハンドヘルドデバイスに対する共通の状態であって、本発明に係る電子デバイスは、内蔵の他の複数のデバイスの複数の信号もしくは複数のパラメータに基づき、ノイズ寄与を減少させることができるであろう。   Preferably, the electronic device can be a handheld device. Even when changing multiple environments by changing the noise level, it is a common state for multiple handheld devices, and the electronic device according to the present invention is capable of receiving multiple signals from other built-in multiple devices or Based on multiple parameters, the noise contribution could be reduced.

本発明はさらに、上述説明した電子デバイスにおける使用のために、フィルタリングユニット及びタッチ局在化ユニットを備える集積チップセットに関する。従って、信号を改善するためのタッチ局在化及びフィルタリングユニットの機能が電子デバイスの集積化を容易とするためにチップセットの中に組み込まれる。   The invention further relates to an integrated chipset comprising a filtering unit and a touch localization unit for use in the electronic device described above. Thus, touch localization and filtering unit functions to improve the signal are incorporated into the chipset to facilitate integration of the electronic device.

本発明の目的がまた、タッチ検出表面上にタッチイベントのロケーションを決定するために、電子デバイスにおいて使用された音響信号の信号対ノイズ比を改善するための方法を用いて達成され、当該方法は、
a)音響信号を捕捉するステップと、
b)捕捉された音響信号に基づき、タッチ検出表面上に、特にタップもしくはスライディング動作のロケーションであるタッチイベントのロケーションを決定するステップとを含み、
当該方法はさらに、
c)ステップb)の前に、電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータに基づいて、または、当該パラメータに基づかないで、電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスを提供して音響信号の信号対ノイズ比を改善するステップを含むことを特徴とする。この方法を用いれば、本発明の電子デバイスに関して上述説明された複数の利点と同一の利点が達成される。
The objectives of the present invention are also achieved with a method for improving the signal to noise ratio of an acoustic signal used in an electronic device to determine the location of a touch event on a touch detection surface, the method ,
a) capturing an acoustic signal;
b) determining, based on the captured acoustic signal, a location of a touch event on the touch detection surface, in particular a location of a tap or sliding action,
The method further includes:
c) Prior to step b), one or more of the electronic devices based on or not based on one or more parameters of one or more spurious acoustic signal generating devices of the electronic device Providing a further spurious acoustic signal generating device to improve the signal-to-noise ratio of the acoustic signal. With this method, the same advantages as those described above with respect to the electronic device of the present invention are achieved.

好ましい実現化によれば、ステップc)は、電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上の信号を用いて、及び/または電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータのうちの1つもしくはそれ以上を用いて、ノイズ参照信号を提供するステップと、ノイズ参照信号を適合フィルタリングユニットの参照入力に入力して捕捉された音響信号に対する寄与を減少させるステップとを含む。複数のノイズコントリビュータの複数の寄与を考慮する参照信号を用いて、そしてタッチ局在化に対して使用される音響信号に対するフィルタリング動作(アクション)の複数の特性を変更させることができる適合フィルタリングユニットを用いて、周波数及び振幅に関する複数のノイズ特性を変更させることが容易に考慮される。   According to a preferred realization, step c) comprises using one or more signals of one or more spurious acoustic signal generating devices of the electronic device and / or one or more of the electronic device. Providing a noise reference signal using one or more of one or more parameters of the spurious acoustic signal generating device, and inputting the noise reference signal into a reference input of the adaptive filtering unit to be captured Reducing the contribution to the acoustic signal. An adaptive filtering unit that can change multiple characteristics of a filtering action (action) on an acoustic signal used for touch localization using a reference signal that takes into account multiple contributions of multiple noise contributors In use, it is easily considered to change a plurality of noise characteristics related to frequency and amplitude.

有利に、ステップc)はさらに、スイッチング手段を使用して1つの信号もしくはパラメータだけを使用するステップを含む。スイッチング手段を使用することは、フィルタリングを最も重要なノイズコントリビュータに対して適合化するための簡単な方法である。   Advantageously, step c) further comprises the step of using only one signal or parameter using the switching means. Using switching means is a simple way to adapt the filtering to the most important noise contributors.

好ましくは、ステップc)はさらに、少なくとも2つの信号及び/もしくはパラメータを加算して参照信号を形成するステップを含む。従って、加算手段をフィルタリングユニットに簡単に提供することによって、複数のデバイスの複数のノイズ寄与が考慮される。   Preferably, step c) further comprises the step of adding at least two signals and / or parameters to form a reference signal. Thus, by simply providing the adding means to the filtering unit, the multiple noise contributions of the multiple devices are taken into account.

タッチ検出表面を有する電子デバイスに対するユーザのタッチをベースとした入力の機密性を改善するという本発明の目的が請求項19に係る方法を用いて達成され、当該方法は、
a)タッチ検出表面に及び/もしくはその周囲にスプリアス音響信号を提供するステップと、
b)センシング手段を用いて音響信号をセンスするステップとを含み、
センスされた音響信号は、タッチ検出表面上にユーザによって提供されたタッチイベントを原因とする寄与と、スプリアス音響信号を原因とする寄与とを備え、
タッチイベントを原因とするスプリアス音響信号に対する寄与率は1よりも小さいか、もしくは1に等しく、
当該方法は、
c)スプリアス音響信号を表す参照信号に基づき、センスされた音響信号をフィルタリングし、それによってスプリアス音響信号の寄与を減少させるステップと、
d)フィルタリングされたセンスされた音響信号に基づき、タッチイベントのロケーションを決定するステップとを含む。
The object of the present invention of improving the confidentiality of input based on a user's touch on an electronic device having a touch-sensitive surface is achieved using the method according to claim 19, which method comprises:
a) providing a spurious acoustic signal on and / or around the touch sensing surface;
b) sensing the acoustic signal using the sensing means,
The sensed acoustic signal comprises a contribution due to a touch event provided by the user on the touch detection surface and a contribution due to a spurious acoustic signal,
The contribution to the spurious acoustic signal caused by the touch event is less than or equal to 1,
The method is
c) filtering the sensed acoustic signal based on a reference signal representing the spurious acoustic signal, thereby reducing the contribution of the spurious acoustic signal;
d) determining a location of the touch event based on the filtered sensed acoustic signal.

スプリアス音響信号を用いてユーザのタッチイベントを原因とする信号をマスキングすることによって、たとえ音響信号を測定することがタッチ検出表面にもしくはその周囲に提示されたとしても、無権限者はタッチイベントを原因とする信号をアクセスすることができないであろう。それとは対照的に、参照信号を用いることによって、センスされた信号からタッチロケーションを決定することがいまだに可能であろう。   By masking the signal caused by the user's touch event with the spurious acoustic signal, even if the measurement of the acoustic signal is presented on or around the touch detection surface, the unauthorized person can The causal signal will not be accessible. In contrast, it would still be possible to determine the touch location from the sensed signal by using the reference signal.

好ましくは、スプリアス音響信号提供手段によって、参照信号がフィルタリングユニットに対して提供される。特に、参照信号は、スプリアス音響信号を形成するために使用された制御信号に一致する。従って、フィルタリングユニットは、スプリアス音響信号の複数の特性を知って、マスキングする信号から、センスされた信号を効果的に消去(クリア)してタッチロケーション決定処理を改善することができる。   Preferably, a reference signal is provided to the filtering unit by spurious acoustic signal providing means. In particular, the reference signal corresponds to the control signal used to form the spurious acoustic signal. Thus, the filtering unit can know multiple characteristics of the spurious acoustic signal and effectively erase (clear) the sensed signal from the masking signal to improve the touch location determination process.

有利な実施形態によれば、参照信号はスプリアス音響信号提供手段によって暗号化され、並びに/またはセンスされた音響信号はセンシング手段によって暗号化され、参照信号及び/もしくはセンスされた音響信号はフィルタリングユニットによって復号化される。従って、たとえセンシング手段及び/もしくはスプリアス音響信号がフィルタリングユニットから間隔が離れていたとしても、複数の信号は複数の無権限者による詐欺的な使用に対して保護される。   According to an advantageous embodiment, the reference signal is encrypted by the spurious acoustic signal providing means and / or the sensed acoustic signal is encrypted by the sensing means, and the reference signal and / or the sensed acoustic signal is filtered by the filtering unit. Is decrypted by Thus, even if the sensing means and / or spurious acoustic signals are spaced from the filtering unit, the signals are protected against fraudulent use by a plurality of unauthorized persons.

有利に、スプリアス音響信号はノイズとすることができ、特に白色ノイズとすることができる。ノイズ信号において特定のパタンが存在しないので、無権限者はスプリアス音響信号の複数の特性を識別することができないであろうし、それ故にスプリアス音響信号それ自身を知ることなしに機能フィルタリングユニットの創作が不可能となる。   Advantageously, the spurious acoustic signal can be noise, in particular white noise. Since there is no specific pattern in the noise signal, the unauthorized person will not be able to distinguish between multiple characteristics of the spurious acoustic signal, and thus creating a functional filtering unit without knowing the spurious acoustic signal itself. It becomes impossible.

有利に、スプリアス音響信号は聞き取ることができない。このケースでは、複数のユーザはスプリアス信号によって妨害されない。   Advantageously, spurious acoustic signals cannot be heard. In this case, multiple users are not disturbed by spurious signals.

好ましい実施形態によれば、ユーザ入力の機密性を改善する方法はさらに、
e)ステップc)の前後に、電子デバイスの少なくとも1つの第2のスプリアス音響信号発生デバイスの少なくとも1つの第2の参照信号、並びに/または少なくとも1つの第2のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータを提供してセンスされた音響信号もしくはフィルタリングされたセンスされた信号の信号対ノイズ比を改善するステップを含む。従って、タッチロケーション決定処理の信頼性を改善するために、信号対ノイズ比を改善するための複数のノイズ源がさらに考慮される。
According to a preferred embodiment, the method for improving the confidentiality of user input further comprises:
e) Before and after step c), at least one second reference signal of at least one second spurious acoustic signal generating device of the electronic device and / or one of at least one second spurious acoustic signal generating device. Or providing further parameters to improve the signal to noise ratio of the sensed acoustic signal or the filtered sensed signal. Thus, multiple noise sources for improving the signal-to-noise ratio are further considered to improve the reliability of the touch location determination process.

その複数の特徴及び複数の利点を有する本発明が、添付された複数の図面において例示された複数の実施形態を用いて以下において詳細に説明されるであろう。   The present invention, having its features and advantages, will be described in detail below using embodiments illustrated in the accompanying drawings.

電子デバイスを例示する。An electronic device is illustrated. 電子デバイスの種々の構成要素を概略的に例示する。1 schematically illustrates various components of an electronic device. 本発明に係る電子デバイスの第1の実施形態を概略的に例示する。1 schematically illustrates a first embodiment of an electronic device according to the invention. 本発明に係る電子デバイスの第2の実施形態を概略的に例示する。2 schematically illustrates a second embodiment of an electronic device according to the invention. 本発明に係る電子デバイスの第3の実施形態を概略的に例示する。3 schematically illustrates a third embodiment of an electronic device according to the invention. 第1から第3の実施形態のうちのいずれか1つにおいて使用されるフィルタリングユニットを例示する。6 illustrates a filtering unit used in any one of the first to third embodiments. ユーザ入力の機密性を改善するための、本発明に係る電子デバイスの第4の実施形態を概略的に例示する。Figure 4 schematically illustrates a fourth embodiment of an electronic device according to the present invention for improving the confidentiality of user input. ユーザ入力の機密性を改善するための、本発明に係る電子デバイスの第5の実施形態を概略的に例示する。5 schematically illustrates a fifth embodiment of an electronic device according to the present invention for improving the confidentiality of user input. 本発明の第6の実施形態に係るユーザ入力の機密性を改善するための方法のブロック図を概略的に例示する。FIG. 6 schematically illustrates a block diagram of a method for improving confidentiality of user input according to a sixth embodiment of the present invention.

図1aは、電子デバイス1を例示し、ここで、携帯電話は、タッチ検出表面3とラウドスピーカ5とマイクロフォン7とを備えたハウジング(筺体)9を有する。ハウジング9の内部には、電子デバイス1はさらに、図1bに例示されたように複数の構成要素を備える。タッチ検出表面3の下面には、電子デバイス1は、第1及び第2のセンシング手段15及び17が下部もしくは内部に取り付けられている領域13を有するディスプレイ11を備える。例えば複数のピエゾ電気トランデューサ、複数の加速度計、複数のマイクロフォンなどのこれらのセンシング手段15及び17は、インタラクション表面の表面を通って移動する複数の屈曲波の形成を導くタッチ検出表面3上にタッチイベントの結果として発生された複数の音響信号を捕捉する。捕捉された複数の信号に基づき、タッチイベントのロケーションは、例えば特許文献2で説明された方法を用いて決定される。タッチイベントは典型的に、表面上の単一のタッチもしくは複数のタッチのような1つのタップもしくは複数のタップ、及び/または表面にわたるスライディング動作、及び/またはホールド動作のような任意の種類の接触(コンタクト)に関する。ここで、2つのセンシング手段15及び17が例示されるが、本発明の範囲を離れることなしに、期待される精度次第であるが多かれ少なかれセンシング手段が提供される。   FIG. 1 a illustrates an electronic device 1 in which a mobile phone has a housing 9 with a touch detection surface 3, a loudspeaker 5 and a microphone 7. Inside the housing 9, the electronic device 1 further comprises a plurality of components as illustrated in FIG. 1b. On the lower surface of the touch detection surface 3, the electronic device 1 includes a display 11 having a region 13 in which first and second sensing means 15 and 17 are attached to the lower part or inside. These sensing means 15 and 17, for example a plurality of piezoelectric transducers, a plurality of accelerometers, a plurality of microphones, etc. are on the touch detection surface 3 that leads to the formation of a plurality of bending waves that move through the surface of the interaction surface. Capture a plurality of acoustic signals generated as a result of the touch event. Based on the plurality of captured signals, the location of the touch event is determined using the method described in Patent Document 2, for example. Touch events are typically one or more taps, such as a single touch or multiple touches on the surface, and / or any kind of contact, such as a sliding and / or holding action across the surface. (Contact) Here, two sensing means 15 and 17 are illustrated, but more or less sensing means are provided, depending on the expected accuracy, without leaving the scope of the present invention.

ハウジング9の内部に、電子デバイスはさらに、ラウドスピーカ5及びマイクロフォン7だけでなく、到来するコールのユーザを警告するための着信音に加えて振動信号を提供するために使用される振動デバイス19もまた備える。複数の素子は、種々の信号を取り扱うための複数の電子構成要素を備えた集積回路(IC)ボード21に接続される。図1bはさらに、電源23の存在を概略的に例示する。例えばハードディスクドライブ、加速度計、ベンチレータなどの追加的な複数の構成要素がまた、電子デバイスに提供されるが、図1bには例示されない。   Inside the housing 9, the electronic device further includes a loudspeaker 5 and a microphone 7 as well as a vibration device 19 used to provide a vibration signal in addition to a ringtone to alert the user of an incoming call. Also prepare. The plurality of elements are connected to an integrated circuit (IC) board 21 that includes a plurality of electronic components for handling various signals. FIG. 1 b further schematically illustrates the presence of the power supply 23. Additional components such as hard disk drives, accelerometers, ventilators, etc. are also provided in the electronic device, but are not illustrated in FIG. 1b.

携帯電話は、本発明が適用される電子デバイスの1つの例だけを示す。その電子デバイスはまた、コンピュータ、ゲームコンソール、電子ブックリーダ、MP3プレイヤ、ビデオプレイヤ、HiFiプレイヤ、もしくはナビゲーションデバイスとすることができる。電子デバイスは、ハンドヘルドデバイスもしくはデスクトップデバイスとすることができる。   The mobile phone shows only one example of an electronic device to which the present invention is applied. The electronic device can also be a computer, game console, electronic book reader, MP3 player, video player, HiFi player, or navigation device. The electronic device can be a handheld device or a desktop device.

上述したように、電子デバイスは、音響技術を用いてタッチ検出機能を保証する。しかしながら、タッチイベントのロケーションがそれに基づいて決定される、タッチ検出手段15及び17によって捕捉された複数の信号は、タッチイベントの情報を送信するだけでなく、局在化のために使用される周波数範囲における複数のスプリアス寄与もまた送信し、その周波数範囲は典型的には、0kHzから20kHzまでの範囲(オーディオ範囲)であるが、100kHzまでは拡張されない。これらの複数のスプリアス寄与は信号の品質を減少させ、タッチイベントの正確な局在化がより困難となるか、もしくはさらに不可能となる。   As mentioned above, electronic devices use acoustic technology to ensure touch detection functionality. However, the signals captured by the touch detection means 15 and 17, on which the location of the touch event is determined, are not only transmitted information of the touch event but also the frequency used for localization Multiple spurious contributions in the range are also transmitted, and the frequency range typically ranges from 0 kHz to 20 kHz (audio range) but does not extend to 100 kHz. These multiple spurious contributions reduce the quality of the signal, making accurate localization of touch events more difficult or even impossible.

従って、本発明は、センシング手段15及び17によって捕捉された複数の音響信号の信号対ノイズ比を改善することによってこの状態を改善することを目的とする。それを実行するために、図1aに例示された電子デバイス1それ自身はすでに、センシング手段15及び17によって感染されたノイズ汚染と相互に関連付けられる情報を提供することができる、多数の構成要素を備えるという事実を本発明は利用する。従って、上述説明されたタイプの任意の電子デバイスにおいてすでに提示されたこの情報は、センシング手段15及び17によって捕捉されたフィルタリングされた複数の信号に対して使用されるノイズ参照を提供するために使用される。   The present invention therefore aims to improve this situation by improving the signal-to-noise ratio of the plurality of acoustic signals captured by the sensing means 15 and 17. In order to do so, the electronic device 1 illustrated in FIG. 1a itself already has a number of components that can provide information correlated with the noise contamination infected by the sensing means 15 and 17. The present invention takes advantage of the fact that it comprises. Thus, this information already presented in any electronic device of the type described above is used to provide a noise reference that is used for the filtered signals captured by the sensing means 15 and 17. Is done.

詳細には、図1a及び図1bに例示された電子デバイス1において、ラウドスピーカ5を駆動させる信号は、そのラウドスピーカの出力を原因とするノイズを除去するために使用される1つの情報源である。   Specifically, in the electronic device 1 illustrated in FIGS. 1a and 1b, the signal for driving the loudspeaker 5 is one information source used to remove noise caused by the output of the loudspeaker. is there.

しかしまた、電源23もしくはICボード21の複数の電子構成要素によって発生された電磁ノイズ及び電子ノイズは、前もって分析され、センシング手段15及び17によって捕捉された複数の信号に対して、これらの複数の構成要素によるノイズ寄与と強く関連付けられた、例えば複数の周波数範囲及び対応する複数の振幅などの複数のパラメータが決定される。   However, also, electromagnetic noise and electronic noise generated by the power supply 23 or the plurality of electronic components of the IC board 21 are analyzed in advance and, for a plurality of signals captured by the sensing means 15 and 17, A plurality of parameters, for example a plurality of frequency ranges and a corresponding plurality of amplitudes, are determined, which are strongly associated with the noise contribution by the component.

そのデバイスの振動周波数は典型的には既知であるので、振動デバイス19から到来するノイズがまた、フィルタリングされる。そのフィルタリング手段は、この周波数に対してチューンされて振動デバイス19のノイズ寄与を減少させることができる。他の複数の種類の振動が、例えばスピニングハードディスクもしくは複数の加速度計によって、そのような構成要素が電子デバイス内に存在している場合に発生される。   Since the vibration frequency of the device is typically known, the noise coming from the vibration device 19 is also filtered. The filtering means can be tuned for this frequency to reduce the noise contribution of the vibrating device 19. Other types of vibrations are generated when such components are present in the electronic device, for example by spinning hard disks or accelerometers.

さらに、電子デバイス1のユーザによって提供される任意の複数の発声を含む、電子デバイスを取り囲む音響ノイズが、マイクロフォン7によって捕捉され、それ故に当該マイクロフォンはセンシング手段15及び17によって捕捉された複数の信号に対するそのノイズの寄与を減少させるために使用される信号を提供することができる。   Furthermore, acoustic noise surrounding the electronic device, including any utterances provided by the user of the electronic device 1, is captured by the microphone 7, which is therefore a plurality of signals captured by the sensing means 15 and 17. A signal used to reduce its noise contribution to can be provided.

従って、本発明は、電子デバイス1においてすでに存在している複数の構成要素によって提供された複数の信号もしくは複数の既知のパラメータを用いて、センシング手段15及び17によって捕捉された音響信号の信号対ノイズ比を改善するように構成された特別のフィルタリングユニット25を提供する。ここで、ラウドスピーカ5、マイクロフォン7、振動デバイス19、ICボード21の複数の電子構成要素、及び電源23はまた、複数のスプリアス音響信号発生デバイスと呼ばれ、その用語は特許請求の範囲で使用される。   Accordingly, the present invention provides a signal pair of acoustic signals captured by the sensing means 15 and 17 using a plurality of signals provided by a plurality of components already present in the electronic device 1 or a plurality of known parameters. A special filtering unit 25 is provided that is configured to improve the noise ratio. Here, the loudspeaker 5, the microphone 7, the vibration device 19, the plurality of electronic components of the IC board 21, and the power source 23 are also referred to as a plurality of spurious acoustic signal generating devices, the terms being used in the claims. Is done.

図2は、そのようなフィルタリングユニット25の第1の実施形態を例示する。センシング手段15及び17によって捕捉された複数の信号のみならず、スプリアス音響信号発生デバイス5、7、19、21及び23の複数の信号もしくは複数のパラメータ値は、とりわけ、複数のアナログ入力信号を複数のデジタル信号に変換するように構成された捕捉デバイス31に入力される。   FIG. 2 illustrates a first embodiment of such a filtering unit 25. Not only a plurality of signals captured by the sensing means 15 and 17, but also a plurality of signals or a plurality of parameter values of the spurious acoustic signal generating devices 5, 7, 19, 21 and 23 are notably a plurality of analog input signals. Input to a capture device 31 configured to convert to a digital signal.

次に、複数のスプリアス音響信号発生デバイスによって提供された複数の信号もしくは複数のパラメータは、フィルタリングユニット25のフィルタリングデバイス33に入力される複数の参照信号としての役目を果たす。それらは、少なくとも部分的に、センシング手段15及び17によって捕捉された複数の音響信号に対する複数のスプリアス寄与をフィルタリング(除去)するために使用され、それらはまたフィルタリングデバイス33に入力される。   Next, the plurality of signals or the plurality of parameters provided by the plurality of spurious acoustic signal generation devices serve as a plurality of reference signals input to the filtering device 33 of the filtering unit 25. They are used, at least in part, to filter (remove) the plurality of spurious contributions to the plurality of acoustic signals captured by the sensing means 15 and 17, which are also input to the filtering device 33.

次に、フィルタリングデバイス33は、その出力において、複数のノイズ寄与が少なくとも部分的に除去された複数の音響信号を提供するように構成される。次に、改善された信号対ノイズ比を有するこれらの音響信号は、改善された複数の音響信号に基づき、タッチ検出表面3上にタッチイベント及びそのロケーションを識別するように構成されたタッチロケーション決定ユニット35に入力される。   The filtering device 33 is then configured to provide a plurality of acoustic signals at its output with a plurality of noise contributions at least partially removed. These acoustic signals having an improved signal-to-noise ratio are then based on the improved plurality of acoustic signals and a touch location determination configured to identify a touch event and its location on the touch detection surface 3. Input to the unit 35.

本発明の変形例によれば、フィルタリングデバイス33及びタッチロケーション決定ユニット35が、ICボード21の1つのICチップに組み込まれる。   According to a variant of the invention, the filtering device 33 and the touch location determination unit 35 are integrated in one IC chip of the IC board 21.

図3は、本発明の第2の実施形態を例示する。第1の実施形態との唯一の差は、捕捉デバイス31は、一度にスプリアス音響信号発生デバイス5、7、19、21、23から1つの信号もしくはパラメータだけを受信する、ということである。この設計は、捕捉デバイス31を簡単化する。   FIG. 3 illustrates a second embodiment of the present invention. The only difference from the first embodiment is that the capture device 31 receives only one signal or parameter from the spurious acoustic signal generation devices 5, 7, 19, 21, 23 at a time. This design simplifies the capture device 31.

フィルタリング手段ユニット33におけるセンシング手段15及び17によって提供される複数の音響信号をフィルタリングするために使用される参照信号源の変更を可能とするスイッチング手段37が提供され、その結果、例えば、複数のスプリアス音響信号発生デバイスの最も重要なノイズコントリビュータは、その信号をフィルタリングユニット33に入力することができる。スイッチング手段37は、自動スイッチもしくは、ユーザによって使用される手動スイッチのいずれかとすることができる。   Switching means 37 is provided which allows a change of the reference signal source used for filtering the plurality of acoustic signals provided by the sensing means 15 and 17 in the filtering means unit 33, so that, for example, a plurality of spurious The most important noise contributor of the acoustic signal generating device can input the signal to the filtering unit 33. The switching means 37 can be either an automatic switch or a manual switch used by the user.

図4は、第3の実施形態を例示し、ここで、第1の実施形態と比較すると、再び1つの参照信号だけがフィルタリングユニット33に対して提供される。しかしながら、第2の実施形態とは対照的に、複数の捕捉ライン及び複数の参照信号を第1の実施形態と比較するとより全体の設計をよりシンプルに保持するフィルタリングユニットに提供する必要がいかになくても、実際にはすべてのノイズ寄与が考慮されるように、スプリアス音響信号発生デバイス5、7、19、21、23及び捕捉デバイス31間に加算手段39が備えられる。   FIG. 4 illustrates a third embodiment, where only one reference signal is again provided to the filtering unit 33 when compared to the first embodiment. However, in contrast to the second embodiment, there is no need to provide multiple acquisition lines and multiple reference signals to the filtering unit that keeps the overall design simpler when compared to the first embodiment. However, an adding means 39 is provided between the spurious acoustic signal generating devices 5, 7, 19, 21, 23 and the capture device 31 so that all noise contributions are actually taken into account.

図5は、第1から第3の実施形態のうちのいずれか1つにおいてフィルタリング手段33として使用される適合フィルタリングユニット41の例を例示する。   FIG. 5 illustrates an example of the adaptive filtering unit 41 used as the filtering means 33 in any one of the first to third embodiments.

図5は、複数のフィルタリングパラメータもしくは複数の係数を、リアルタイムで複数の音響信号及び複数の参照信号の特性の変化に適合化する適合フィルタリングユニット41を例示する。適合フィルタリングデバイス41は、第1の音響信号入力43及びノイズ参照入力45を有する。もちろん、センシング手段15及び17の量、及びノイズ減少のために使用される参照信号の量によって、入力の量はそれに応じて適合化される。   FIG. 5 illustrates an adaptive filtering unit 41 that adapts multiple filtering parameters or multiple coefficients to changes in characteristics of multiple acoustic signals and multiple reference signals in real time. The adaptive filtering device 41 has a first acoustic signal input 43 and a noise reference input 45. Of course, depending on the amount of sensing means 15 and 17 and the amount of reference signal used for noise reduction, the amount of input is adapted accordingly.

第1の入力43は、ノイズ寄与によって汚染された、処理対象の信号を受信する。   The first input 43 receives the signal to be processed, contaminated by noise contribution.

参照信号は、順番に、参照入力45を介して適合フィルタ47に入力される。第1の入力43での音響信号入力に対して、フィルタ出力49において提供されたフィルタリングされた参照信号を減算することによって、加算器51で得られた誤差信号54の値を最小化するために、その適合フィルタ47はその複数の係数を調整する。参照信号が音響信号入力において存在しているノイズ寄与に相互に関連付けされた状態のままである限り、誤差信号54は所望の音響信号入力に対して一点に集められる。   The reference signals are sequentially input to the adaptive filter 47 via the reference input 45. To minimize the value of the error signal 54 obtained at the adder 51 by subtracting the filtered reference signal provided at the filter output 49 from the acoustic signal input at the first input 43. The adaptive filter 47 adjusts the plurality of coefficients. As long as the reference signal remains correlated to the noise contribution present at the acoustic signal input, the error signal 54 is collected in one point with respect to the desired acoustic signal input.

実際は、複数のノイズキャンセリングアプリケーションで使用された任意の複数のアルゴリズムが実行されるので、図5は、適切なフィルタユニット33の1つの可能性だけを例示する。例えば、妨害信号の性質が振動デバイス19の既知の振動周波数の場合のように実際に予め知られている場合には、そのようなものとして参照信号を必要としない適合フィルタが提供される。強い周期的なノイズ(振動デバイス)のケースでは、自動的なノッチフィルタが音響信号からスプリアス寄与を減少させるために使用される。この特定のケースでは、参照信号は、簡単に、遅延されたバージョンの音響信号とすることができる。この遅延を妨害ノイズの既知の期間に対して調整することによって、この「仮想」参照信号は音響信号において存在している周期的なノイズと相互に関連付けだけされる。これが、適合フィルタによって、所望の音響信号から周期的な妨害の除去を保証する。   In practice, any algorithm used in multiple noise canceling applications is executed, so FIG. 5 illustrates only one possibility of a suitable filter unit 33. For example, if the nature of the jamming signal is actually known in advance, such as in the case of the known vibration frequency of the vibrating device 19, then an adaptive filter is provided that does not require a reference signal. In the case of strong periodic noise (vibrating devices), an automatic notch filter is used to reduce the spurious contribution from the acoustic signal. In this particular case, the reference signal can simply be a delayed version of the acoustic signal. By adjusting this delay to a known period of jamming noise, this “virtual” reference signal is only correlated with the periodic noise present in the acoustic signal. This ensures that periodic interference is removed from the desired acoustic signal by the adaptive filter.

図6は、電子デバイスのタッチ検出表面上に提供されたユーザ入力の機密性を改善するように構成された、本発明に係る電子デバイスの第4の実施形態を概略的に例示する。   FIG. 6 schematically illustrates a fourth embodiment of an electronic device according to the present invention configured to improve the confidentiality of user input provided on the touch-sensitive surface of the electronic device.

自動テラーマシン(語り手機械)、自動販売機、もしくは一般的にタッチをベースとした入力を可能とする任意の他のタイプの電子デバイスとすることができる電子デバイス71は、タッチ検出表面73及びセンシング手段75を備え、当該センシング手段75は、図1aに例示された実施形態において例示されたセンシング手段15もしくは17に相当し、それ故にピエゾ電子トランデューサ、加速度計、マイクロフォンなどとすることができる。図6は、1つのセンシング手段75だけを例示し、しかしながら、電子デバイス73は、まさに1つのセンシング手段以外を備えてもよい。捕捉された信号に基づき、タッチイベントのロケーションは、図1aに例示された実施形態に対して決定される。   The electronic device 71, which can be an automatic teller machine, a vending machine, or any other type of electronic device that typically allows touch-based input, includes a touch detection surface 73 and sensing. Means 75, which corresponds to the sensing means 15 or 17 illustrated in the embodiment illustrated in FIG. 1a and can therefore be a piezoelectronic transducer, an accelerometer, a microphone or the like. FIG. 6 illustrates only one sensing means 75, however, the electronic device 73 may comprise more than just one sensing means. Based on the captured signal, the location of the touch event is determined for the embodiment illustrated in FIG.

さらに、電子デバイス71は、既知の複数の振動をタッチ検出表面73に注入するように構成されたスプリアス音響信号発生デバイス76を備える。そのスプリアス音響信号発生デバイス76は、例えば好ましくは聞き取れない白色ノイズなどのマスキング信号がタッチ検出表面73に注入されるように、放射器77を制御する制御ユニット78を有する。従って、複数のスプリアス音響信号発生デバイス76はマスキング信号源としての役目を果たす。   In addition, the electronic device 71 includes a spurious acoustic signal generating device 76 configured to inject a plurality of known vibrations into the touch detection surface 73. The spurious acoustic signal generating device 76 has a control unit 78 that controls the radiator 77 so that a masking signal, such as white noise, which is preferably inaudible, is injected into the touch detection surface 73. Accordingly, the plurality of spurious acoustic signal generation devices 76 serve as masking signal sources.

本発明によれば、制御ユニット78によって放射器77に提供される制御信号はまた、フィルタリングユニット79に対して参照信号として送信される。そのフィルタリングユニット79は、センシング手段75によってセンスされた音響信号の信号対ノイズ比を改善してスプリアス音響信号発生デバイス76を原因とするセンスされた信号に対する寄与を減少させもしくは除去するように構成される。フィルタリングされた信号はいま本質的に、表面73上にユーザの手83によって提供された位置Aでのタッチイベントを原因とする信号寄与を構成する。次に、フィルタリングされた信号は、タッチロケーションAが決定されるタッチロケーション決定ユニット81に送信される。   According to the invention, the control signal provided to the radiator 77 by the control unit 78 is also transmitted as a reference signal to the filtering unit 79. The filtering unit 79 is configured to improve the signal to noise ratio of the acoustic signal sensed by the sensing means 75 to reduce or eliminate the contribution to the sensed signal due to the spurious acoustic signal generating device 76. The The filtered signal now essentially constitutes the signal contribution due to the touch event at position A provided by the user's hand 83 on the surface 73. The filtered signal is then sent to a touch location determination unit 81 where touch location A is determined.

スプリアス音響信号発生手段76によって入力された信号は、スプリアス音響発生手段76を原因とする信号寄与に対する、位置Aでのユーザインタラクションを原因とするセンスされた信号に対する寄与の比率が1よりも小さいように選択される。結果として、例えばユーザインタラクション表面73上にセンシング手段を置くことによって、ユーザインタラクション表面73にもしくは周囲に存在している音響信号を捕捉することができる無権限者は、彼が入力されたスプリアス音響信号の複数の特性を知らないので、ユーザインタラクションを原因とする信号寄与の複数の特性を識別することができないであろう。従って、ユーザ入力の機密性が、追加的なスプリアス信号を使用することによって改善される。もし電子デバイス71が自動テラーマシンもしくは自動販売機でユーザインターフェースとして使用されるならば、PINコードもしくはもう1つの機密的な入力(名前及び住所)が無権限者によって識別されない。入力されたスプリアス音響信号に対する複数の信号特性は自由に選択されるので、各個々のデバイスは、無権限の複数の攻撃に対してその個々の保護を持つことができ、それが詐欺に対するデバイスの安全性をさらに改善させるであろう。   The signal input by the spurious sound signal generation means 76 is such that the ratio of the contribution to the sensed signal due to user interaction at the position A to the signal contribution due to the spurious sound generation means 76 is less than 1. Selected. As a result, an unauthorized person who can capture an acoustic signal residing on or around the user interaction surface 73, for example by placing sensing means on the user interaction surface 73, The multiple characteristics of the signal contribution due to user interaction may not be identified. Thus, the confidentiality of user input is improved by using an additional spurious signal. If the electronic device 71 is used as a user interface in an automated teller machine or vending machine, the PIN code or another sensitive input (name and address) is not identified by an unauthorized person. Since multiple signal characteristics for the incoming spurious acoustic signal are freely selected, each individual device can have its individual protection against multiple unauthorized attacks, which is the device's protection against fraud. It will further improve safety.

複数のキーパッドに基づいた従来のユーザインタラクション手段と比較すると、その音響技術はさらに、タッチ検出表面73に接続された任意の追加的な無権限の複数の素子が、その表面に取り付けられた追加的なセンシング素子が例えば再校正実行中に識別されるように、音響署名の複数の特性を変更させるであろう、という利点を有する。   Compared to conventional user interaction means based on multiple keypads, the acoustic technology further adds any additional unauthorized multiple elements connected to the touch detection surface 73 attached to the surface. The advantage is that multiple characteristics of the acoustic signature will be changed such that a typical sensing element is identified, for example during recalibration.

図7は、本発明に係る電子デバイスの第5の実施形態を概略的に例示する。図6におけるのと同じ参照数字を有する複数の素子が再び詳細には説明しないが、第4の実施形態を参照しその説明がここで組み込まれる。第5の実施形態に係る電子デバイス91は、本質的には、第4の実施形態の電子デバイス71と同じ複数の素子を備え、すなわち、ユーザインタラクションインターフェースは、制御ユニット78及び放射器77を有するスプリアス音響信号発生手段76のみならず、タッチ検出表面73、センシング手段75、フィルタリングユニット79、タッチロケーション決定ユニット81である。   FIG. 7 schematically illustrates a fifth embodiment of an electronic device according to the invention. A plurality of elements having the same reference numerals as in FIG. 6 will not be described again in detail, but a description thereof is incorporated herein with reference to the fourth embodiment. The electronic device 91 according to the fifth embodiment essentially includes the same plurality of elements as the electronic device 71 of the fourth embodiment, that is, the user interaction interface includes a control unit 78 and a radiator 77. Not only the spurious acoustic signal generating means 76 but also the touch detection surface 73, the sensing means 75, the filtering unit 79, and the touch location determining unit 81.

第4の実施形態の電子デバイス71とは対照的に、フィルタリングユニット79及び第5の実施形態のタッチロケーション決定ユニット81は、センシング手段75及び音響発生手段76から間隔が離れており、その結果、センシング手段75によってセンスされた信号及びスプリアス音響発生手段76によって入力されたスプリアス音響信号を傍受する無権限者のリスクの可能性が存在し、その場合は、無権限者は、彼の手83を用いて位置Aでタッチ検出表面73をタッチするユーザから生じたセンスされた信号に対する寄与をマスキングするために使用されるマスキング信号の複数の特性に対するアクセスを得ることができる。このリスクを減少させるために、第5の実施形態が、暗号化ユニット95においてセンスされた信号を暗号化するためのみならず、暗号化ユニット93において制御ユニット78によって提供された参照信号を暗号化するために構成される。複数の信号をフィルタリングする前に、復号化ユニット97が使用される。ある変形例によれば、スプリアス音響発生手段76とフィルタリングユニット97との間の参照信号転送だけが暗号化される。   In contrast to the electronic device 71 of the fourth embodiment, the filtering unit 79 and the touch location determination unit 81 of the fifth embodiment are spaced apart from the sensing means 75 and the sound generating means 76, so that There is a risk of an unauthorized person's risk of intercepting the signal sensed by the sensing means 75 and the spurious sound signal input by the spurious sound generating means 76, in which case the unauthorized person uses his hand 83. It can be used to gain access to multiple characteristics of the masking signal used to mask the contribution to the sensed signal arising from the user touching the touch sensing surface 73 at location A. In order to reduce this risk, the fifth embodiment encrypts the reference signal provided by the control unit 78 in the encryption unit 93 as well as for encrypting the signal sensed in the encryption unit 95. Configured to do. A decoding unit 97 is used before filtering the signals. According to a variant, only the reference signal transfer between the spurious sound generating means 76 and the filtering unit 97 is encrypted.

ユーザ入力の機密性を改善する電子デバイスを扱う、第4及び第5の実施形態は、上述説明された第1から第3の実施形態の任意の1つと組み合わせることができ、その結果、センスされた信号の信号対ノイズ比は、例えばラウドスピーカ5、マイクロフォン7、振動デバイス19、ICボード21の複数の電子構成要素、及び上述説明されて信号品質を減少させる電源23などの、他のスプリアス音響信号発生手段を原因とする環境ノイズを考慮することによってなおさら改善される。従って、ユーザ入力の改善された機密性レベルに加え、複数の実施形態の組み合わせが、実にノイズ環境における、タッチロケーション検出に対する改善された信頼性を提供する。   The fourth and fifth embodiments, dealing with electronic devices that improve the confidentiality of user input, can be combined with any one of the first to third embodiments described above, so that they are sensed. The signal-to-noise ratio of the received signal may be other spurious sound, such as, for example, the loudspeaker 5, microphone 7, vibration device 19, multiple electronic components of the IC board 21, and the power supply 23 described above to reduce signal quality. This is further improved by taking into account environmental noise caused by the signal generating means. Thus, in addition to an improved level of user input confidentiality, the combination of embodiments provides improved reliability for touch location detection, indeed in a noisy environment.

第4及び第5の実施形態において提案された複数の解決手法は、複数のマスキング信号が各デバイスに対して個々に適合化され、追加的な無権限のセンシング手段の存在を原因とする複数の音響特性の変化が(実に自動的に)検出され、その結果、自動販売機もしくは自動テラーマシンは複数の入力の受信することを停止することができる。操作の検出と同時にマシンに対するアクセスをブロックするための、追加的な複数の安全性特徴を必要とする機械的な複数のボタンに基づき、複数の機密入力を可能とするそのような複数のマシンに対する入力手段と比較すると、複数の音響信号に基づく解決手法は経済的な方法で実現することができる。   The solutions proposed in the fourth and fifth embodiments are a plurality of masking signals individually adapted for each device, resulting from the presence of additional unauthorized sensing means. Changes in acoustic properties are detected (actually automatically) so that the vending machine or automated teller machine can stop receiving multiple inputs. For such machines that allow multiple sensitive inputs, based on mechanical buttons that require additional safety features to block access to the machine upon detection of an operation Compared with input means, a solution based on multiple acoustic signals can be realized in an economical way.

図8は、第4及び第5の実施形態に関する本発明の方法を例示するブロック図に関する本発明に係る第6の実施形態を例示する。   FIG. 8 illustrates a sixth embodiment according to the present invention relating to a block diagram illustrating the method of the present invention relating to the fourth and fifth embodiments.

ステップS101は、センシング手段75を用いて信号をセンスし、次にその信号をフィルタリングユニット79に送信されることを含む。ステップS103によれば、同時に、スプリアス音響信号発生手段76は、参照信号をフィルタリングユニット79に提供する。   Step S 101 includes sensing a signal using the sensing means 75 and then transmitting the signal to the filtering unit 79. According to step S103, at the same time, the spurious acoustic signal generating means 76 provides the reference signal to the filtering unit 79.

放射器77を介してスプリアス信号発生手段76によってインタラクション表面73に入力されたマスキング信号を表す参照信号を考慮すると、その場合フィルタリングユニット79は、ステップS105においてセンスされた信号をフィルタリングして、センシング手段75によってセンスされた信号から、入力されたマスキング信号を原因とする寄与を減少させるかもしくは除去し、その結果、本質的に、インタラクション表面73のロケーションAにおいて、ユーザによって提供されたタッチイベントを原因とする寄与がフィルタリングされた信号においてそのまま残る。   Considering the reference signal representing the masking signal input to the interaction surface 73 by the spurious signal generating means 76 via the radiator 77, the filtering unit 79 then filters the signal sensed in step S105 to provide sensing means. 75, the contribution caused by the input masking signal is reduced or removed from the signal sensed by 75, resulting in a touch event provided by the user essentially at location A of the interaction surface 73. The contribution remains in the filtered signal.

次に、フィルタリングされた信号は、ステップS107において、技術において既知の処理に従って、センスされた信号の複数の特性に基づき、ユーザによって提供されたタッチインタラクションもしくはジェスチャのロケーションを決定することができる、タッチロケーション決定ユニット81に転送される。   The filtered signal is then touched in step S107, according to processing known in the art, based on a plurality of characteristics of the sensed signal, to determine the location of the touch interaction or gesture provided by the user. It is transferred to the location determination unit 81.

別の変形例によれば、追加的な暗号化ステップが、フィルタリングユニットに転送される前のセンスされた信号に対してと、ユーザ入力の機密性をさらに改善するためのフィルタリングユニットに送信される前の、スプリアス音響信号発生手段76によって提供されたスプリアス音響信号との両方に導入される。   According to another variant, an additional encryption step is transmitted to the sensed signal before being forwarded to the filtering unit and to the filtering unit to further improve the confidentiality of the user input. Introduced in both the previous spurious acoustic signal provided by the spurious acoustic signal generating means 76.

Claims (25)

タッチ検出表面を有する電子デバイスであって、当該電子デバイスは、
音響信号を捕捉するためのセンシング手段と、
上記音響信号に基づき、上記タッチ検出表面上にタッチイベントのロケーションを決定するように構成されたタッチロケーション決定ユニットとを備え、
当該電子デバイスは、
上記電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスによって提供された1つもしくはそれ以上の参照信号に基づいて、及び/または上記デバイスの上記1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータに基づいて、上記音響信号の信号対ノイズ比を改善するように構成されたフィルタリングユニットを備えたことを特徴とする電子デバイス。
An electronic device having a touch detection surface, the electronic device comprising:
Sensing means for capturing acoustic signals;
A touch location determination unit configured to determine a location of a touch event on the touch detection surface based on the acoustic signal;
The electronic device is
Based on one or more reference signals provided by one or more spurious acoustic signal generating devices of the electronic device and / or of the one or more spurious acoustic signal generating devices of the device. An electronic device comprising a filtering unit configured to improve the signal-to-noise ratio of the acoustic signal based on one or more parameters.
上記スプリアス音響信号発生デバイスもしくは上記複数のスプリアス音響信号発生デバイスの1つは、上記センスされた音響信号が上記タッチイベント及びスプリアス音響信号を原因とする寄与を構成するように、上記スプリアス音響信号が提供されるように構成され、
上記タッチイベントを原因とする上記スプリアス音響信号に対する寄与率は1より小さいか、もしくは1に等しいことを特徴とする請求項1記載の電子デバイス。
The spurious acoustic signal generating device or one of the plurality of spurious acoustic signal generating devices is configured such that the sensed acoustic signal constitutes a contribution due to the touch event and the spurious acoustic signal. Configured to be provided,
The electronic device according to claim 1, wherein a contribution rate to the spurious acoustic signal caused by the touch event is less than or equal to 1.
上記スプリアス音響信号発生デバイスは、上記参照信号を暗号化するための信号暗号化手段を備え、
上記フィルタリングユニットは、上記参照信号を復号化するための復号化手段を備えることを特徴とする請求項2記載の電子デバイス。
The spurious acoustic signal generating device includes a signal encryption unit for encrypting the reference signal,
The electronic device according to claim 2, wherein the filtering unit includes a decoding unit for decoding the reference signal.
上記センシング手段は、上記センスされた信号を暗号化するための、センスされた信号暗号化手段を備え、
上記フィルタリングユニットは、上記参照信号を復号化するための復号化手段を備えたことを特徴とする請求項2または3記載の電子デバイス。
The sensing means comprises sensed signal encryption means for encrypting the sensed signal,
4. The electronic device according to claim 2, wherein the filtering unit includes decoding means for decoding the reference signal.
上記スプリアス音響信号は、特に白色ノイズのノイズ信号であることを特徴とする請求項2から4のうちのいずれか1つに記載の電子デバイス。   The electronic device according to any one of claims 2 to 4, wherein the spurious acoustic signal is a noise signal of white noise in particular. 上記スプリアス音響信号は、聞き取れないことを特徴とする請求項2から5のうちのいずれか1つに記載の電子デバイス。   6. The electronic device according to claim 2, wherein the spurious acoustic signal cannot be heard. 上記フィルタリングユニットは、適合フィルタリングユニットを備えたことを特徴とする請求項1から6のうちのいずれか1つに記載の電子デバイス。   The electronic device according to claim 1, wherein the filtering unit comprises an adaptive filtering unit. 上記複数のスプリアス音響信号発生デバイスによって提供された、上記複数の参照信号及び/もしくは上記複数のパラメータ間をスイッチングして1つの信号を上記フィルタリングユニットに対して提供するように構成されたスイッチング手段をさらに備えたことを特徴とする請求項1から7のうちのいずれか1つに記載の電子デバイス。   Switching means provided by the plurality of spurious acoustic signal generating devices configured to switch between the plurality of reference signals and / or the plurality of parameters to provide a single signal to the filtering unit; The electronic device according to claim 1, further comprising: 少なくとも2つの上記複数のスプリアス音響信号発生デバイスの上記参照信号、及び/もしくは上記パラメータを加算するように構成された加算手段をさらに備えたことを特徴とする請求項1から8のうちのいずれか1つに記載の電子デバイス。   9. The method according to claim 1, further comprising addition means configured to add the reference signals and / or the parameters of at least two of the plurality of spurious acoustic signal generating devices. The electronic device according to one. 上記1つもしくはそれ以上のパラメータは、少なくとも1つの周波数範囲及び関連する振幅であることを特徴とする請求項1から9のうちのいずれか1つに記載の電子デバイス。   10. The electronic device according to any one of claims 1 to 9, wherein the one or more parameters are at least one frequency range and an associated amplitude. 上記1つもしくはそれ以上のスプリアス音響信号発生デバイスは、少なくとも1つのラウドスピーカ、マイクロフォン、振動デバイス、加速度計、ハードディスクドライブ、ベンチレータ、電源、及び電子構成要素であることを特徴とする請求項1から10のうちのいずれか1つに記載の電子デバイス。   The one or more spurious acoustic signal generating devices are at least one loudspeaker, microphone, vibration device, accelerometer, hard disk drive, ventilator, power supply, and electronic components. The electronic device according to any one of 10. 上記電子デバイスは、少なくとも1つの携帯電話、コンピュータ、ゲームコンソール、電子ブックリーダ、MP3プレイヤ、ビデオプレイヤ、HiFiプレイヤ、自動テラーマシン、アクセス制御システム、自動販売機、及びナビゲーションデバイスであること特徴とする請求項1から11のうちのいずれか1つに記載の電子デバイス。   The electronic device is at least one mobile phone, computer, game console, electronic book reader, MP3 player, video player, HiFi player, automatic teller machine, access control system, vending machine, and navigation device. The electronic device according to any one of claims 1 to 11. 上記電子デバイスは、ハンドヘルドデバイスであることを特徴とする請求項1から12のうちのいずれか1つに記載の電子デバイス。   The electronic device according to claim 1, wherein the electronic device is a handheld device. 請求項1から請求項13のうちのいずれか1つに係る電子デバイスにおける使用のために、フィルタリングユニット及びタッチ局在化ユニットを備えたことを特徴とする集積チップセット。   14. An integrated chipset comprising a filtering unit and a touch localization unit for use in an electronic device according to any one of claims 1-13. タッチ検出表面上にタッチイベントの局在化を決定するために、電子デバイスにおいて使用される音響信号の信号対ノイズ比を改善するための方法であって、当該方法は、
a.音響信号を捕捉するステップと、
b.上記捕捉された音響信号に基づき、上記タッチ検出表面上に、特にタップもしくはスライディング動作の上記タッチイベントのロケーションを決定するステップとを含み、
当該方法は、
c.ステップbの前に、上記電子デバイスの複数のスプリアス音響信号発生デバイスの1つもしくはそれ以上の参照信号、及び/または上記電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータを提供して上記音響信号の信号対ノイズ比を改善するステップを含むことを特徴とする方法。
A method for improving the signal to noise ratio of an acoustic signal used in an electronic device to determine localization of a touch event on a touch detection surface, the method comprising:
a. Capturing an acoustic signal;
b. Determining the location of the touch event of the tap or sliding action on the touch-sensitive surface based on the captured acoustic signal, in particular,
The method is
c. Prior to step b, one or more reference signals of a plurality of spurious acoustic signal generating devices of the electronic device and / or one or more of one or more spurious acoustic signal generating devices of the electronic device Providing the above parameters to improve the signal to noise ratio of the acoustic signal.
ステップcは、
上記電子デバイスの1つもしくはそれ以上のスプリアス音響信号発生デバイスの1つもしくはそれ以上の信号を用いて、及び/または上記電子デバイスの上記1つもしくはそれ以上のスプリアス音響信号発生デバイスの上記1つもしくはそれ以上のパラメータの1つもしくはそれ以上を用いて、ノイズ参照信号を提供するステップと、
上記ノイズ参照信号を適合フィルタリングユニットの参照入力に入力して上記捕捉された音響信号に対するノイズ寄与を減少させるステップとを含むことを特徴とする請求項15記載の方法。
Step c is
Using one or more signals of one or more spurious acoustic signal generating devices of the electronic device and / or the one of the one or more spurious acoustic signal generating devices of the electronic device. Providing a noise reference signal using one or more of the or more parameters;
16. The method of claim 15, comprising: inputting the noise reference signal to a reference input of an adaptive filtering unit to reduce noise contribution to the captured acoustic signal.
ステップcはさらに、
スイッチング手段を用いて、1つの信号もしくはパラメータだけを用いるステップを含むことを特徴とする請求項15または16記載の方法。
Step c further includes
17. A method according to claim 15 or 16, comprising the step of using only one signal or parameter using switching means.
ステップcはさらに、
少なくとも2つの信号及び/もしくはパラメータを加算して上記参照信号を形成することを特徴とする請求項15から17のうちのいずれか1つに記載の方法。
Step c further includes
18. A method according to any one of claims 15 to 17, characterized in that at least two signals and / or parameters are added to form the reference signal.
タッチ検出表面を備えた電子デバイスに対するユーザのタッチをベースとした入力の機密性を改善するための方法であって、当該方法は、
a.上記タッチ検出表面に及び/もしくはその周囲にスプリアス音響信号を提供するステップと、
b.センシング手段を用いて音響信号をセンスするステップとを含み、
上記センスされた音響信号は、上記タッチ検出表面上に上記ユーザによって提供されたタッチイベントを原因とする寄与と、上記スプリアス音響信号を原因とする寄与とを備え、
上記タッチイベントを原因とする上記スプリアス音響信号に対する寄与率は1よりも小さいか、もしくは1に等しく、
当該方法は、
c.上記スプリアス音響信号を表す参照信号に基づき、上記センスされた音響信号をフィルタリングし、それによって上記スプリアス音響信号の寄与を減少させるステップと、
d.上記フィルタリングされたセンスされた音響信号に基づき、上記タッチイベントのロケーションを決定するステップとを含むことを特徴とする方法。
A method for improving the confidentiality of input based on a user's touch on an electronic device with a touch-sensitive surface, the method comprising:
a. Providing a spurious acoustic signal on and / or around the touch-sensitive surface;
b. Sensing an acoustic signal using a sensing means,
The sensed acoustic signal comprises a contribution due to a touch event provided by the user on the touch detection surface and a contribution due to the spurious acoustic signal;
The contribution to the spurious acoustic signal due to the touch event is less than or equal to 1,
The method is
c. Filtering the sensed acoustic signal based on a reference signal representative of the spurious acoustic signal, thereby reducing the contribution of the spurious acoustic signal;
d. Determining the location of the touch event based on the filtered sensed acoustic signal.
上記参照信号は、上記スプリアス音響信号提供手段によって上記フィルタリングユニットに対して提供されることを特徴とする請求項19記載の方法。   The method of claim 19, wherein the reference signal is provided to the filtering unit by the spurious acoustic signal providing means. 上記参照信号は、上記スプリアス音響信号を形成するために使用された制御信号に一致することを特徴とする請求項19または20記載の方法。   21. A method according to claim 19 or 20, wherein the reference signal corresponds to a control signal used to form the spurious acoustic signal. 上記参照信号は、上記スプリアス音響信号提供手段によって暗号化され、並びに/または、
上記センスされた音響信号は、上記センシング手段によって暗号化され、
上記参照信号及び/もしくは上記センスされた音響信号は、上記フィルタリングユニットによって復号化されることを特徴とする請求項19から21のうちのいずれか1つに記載の方法。
The reference signal is encrypted by the spurious acoustic signal providing means and / or
The sensed acoustic signal is encrypted by the sensing means,
The method according to any one of claims 19 to 21, wherein the reference signal and / or the sensed acoustic signal is decoded by the filtering unit.
上記スプリアス音響信号は、白色ノイズであることを特徴とする請求項19から22のうちのいずれか1つに記載の方法。   23. A method according to any one of claims 19 to 22, wherein the spurious acoustic signal is white noise. 上記スプリアス音響信号は、聞き取れないことを特徴とする請求項19から23のうちのいずれか1つに記載の方法。   24. A method according to any one of claims 19 to 23, wherein the spurious acoustic signal is inaudible. 上記方法はさらに、
e)ステップc)の前後に、上記電子デバイスの少なくとも1つの第2のスプリアス音響信号発生デバイスの少なくとも1つの第2の参照信号、及び/もしくは少なくとも1つの第2のスプリアス音響信号発生デバイスの1つもしくはそれ以上のパラメータを提供して上記センスされた音響信号もしくは上記フィルタリングされたセンスされた信号の信号対ノイズ比を改善するステップを含むことを特徴とする請求項19から24のうちのいずれか1つに記載の方法。
The method further includes
e) Before and after step c), at least one second reference signal of at least one second spurious acoustic signal generating device of the electronic device and / or one of at least one second spurious acoustic signal generating device. 25. The method of any one of claims 19 to 24, comprising providing one or more parameters to improve a signal to noise ratio of the sensed acoustic signal or the filtered sensed signal. The method according to any one of the above.
JP2012548378A 2010-01-13 2011-01-13 Noise reduction in electronic devices with touch-sensitive surfaces Pending JP2013517548A (en)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP10290014A EP2354907A1 (en) 2010-01-13 2010-01-13 Noise reduction in electronic device with touch sensitive surface
EP10290014.9 2010-01-13
EP11290001.4 2011-01-03
EP11290001 2011-01-03
PCT/EP2011/000124 WO2011085985A1 (en) 2010-01-13 2011-01-13 Noise reduction in electronic device with touch sensitive surface

Publications (1)

Publication Number Publication Date
JP2013517548A true JP2013517548A (en) 2013-05-16

Family

ID=43640132

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012548378A Pending JP2013517548A (en) 2010-01-13 2011-01-13 Noise reduction in electronic devices with touch-sensitive surfaces

Country Status (6)

Country Link
US (1) US9046959B2 (en)
EP (1) EP2524288A1 (en)
JP (1) JP2013517548A (en)
KR (1) KR20120115386A (en)
CN (1) CN102834798A (en)
WO (1) WO2011085985A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101542961B1 (en) 2013-09-13 2015-08-07 현대자동차 주식회사 Method and system for detecting touch on user terminal
WO2024004446A1 (en) * 2022-06-30 2024-01-04 パナソニックIpマネジメント株式会社 Sound signal reproduction device, method for controlling sound signal reproduction device, and program for controlling sound signal reproduction device

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10198097B2 (en) 2011-04-26 2019-02-05 Sentons Inc. Detecting touch input force
US11327599B2 (en) 2011-04-26 2022-05-10 Sentons Inc. Identifying a contact type
US9189109B2 (en) 2012-07-18 2015-11-17 Sentons Inc. Detection of type of object used to provide a touch contact input
US9477350B2 (en) 2011-04-26 2016-10-25 Sentons Inc. Method and apparatus for active ultrasonic touch devices
US9639213B2 (en) 2011-04-26 2017-05-02 Sentons Inc. Using multiple signals to detect touch input
CN104169848B (en) 2011-11-18 2017-10-20 森顿斯公司 Detect touch input force
US11340124B2 (en) 2017-08-14 2022-05-24 Sentons Inc. Piezoresistive sensor for detecting a physical disturbance
US10235004B1 (en) 2011-11-18 2019-03-19 Sentons Inc. Touch input detector with an integrated antenna
WO2013075136A1 (en) 2011-11-18 2013-05-23 Sentons Inc. Localized haptic feedback
KR20130063131A (en) * 2011-12-06 2013-06-14 삼성전자주식회사 Method and apparatus for configuring touch sensing parameter
CN103309529B (en) * 2012-03-16 2016-10-05 联想(北京)有限公司 A kind of capacitance touch screen and the method identifying touch signal thereof
US9513727B2 (en) 2012-07-18 2016-12-06 Sentons Inc. Touch input surface microphone
US9348468B2 (en) 2013-06-07 2016-05-24 Sentons Inc. Detecting multi-touch inputs
US9524063B2 (en) 2012-07-18 2016-12-20 Sentons Inc. Detection of a number of touch contacts of a multi-touch input
US9644957B2 (en) * 2013-06-17 2017-05-09 Microsoft Technology Licensing, Llc Interaction device corrective parameters
US9588552B2 (en) 2013-09-11 2017-03-07 Sentons Inc. Attaching electrical components using non-conductive adhesive
US9459715B1 (en) 2013-09-20 2016-10-04 Sentons Inc. Using spectral control in detecting touch input
US9880671B2 (en) 2013-10-08 2018-01-30 Sentons Inc. Damping vibrational wave reflections
JP2017530486A (en) * 2014-07-07 2017-10-12 エクスパートシー ソリューションズ インク Method and system for determining the value of a variable of interest in a sample having a living thing
US9619094B2 (en) 2015-06-23 2017-04-11 Microsoft Technology Licensing, Llc Multiple correlations in a touch sensor
US10048811B2 (en) 2015-09-18 2018-08-14 Sentons Inc. Detecting touch input provided by signal transmitting stylus
KR20180010636A (en) * 2016-07-22 2018-01-31 주식회사 센터스 Input device including a plurality of sensors
US10908741B2 (en) 2016-11-10 2021-02-02 Sentons Inc. Touch input detection along device sidewall
US10296144B2 (en) 2016-12-12 2019-05-21 Sentons Inc. Touch input detection with shared receivers
US10126877B1 (en) 2017-02-01 2018-11-13 Sentons Inc. Update of reference data for touch input detection
US10585522B2 (en) 2017-02-27 2020-03-10 Sentons Inc. Detection of non-touch inputs using a signature
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
US11259121B2 (en) 2017-07-21 2022-02-22 Cirrus Logic, Inc. Surface speaker
US11580829B2 (en) 2017-08-14 2023-02-14 Sentons Inc. Dynamic feedback for haptics
US10530363B2 (en) * 2017-08-31 2020-01-07 Synaptics Incorporated Interference monitoring with transmitter electrodes
US10620704B2 (en) 2018-01-19 2020-04-14 Cirrus Logic, Inc. Haptic output systems
US10455339B2 (en) 2018-01-19 2019-10-22 Cirrus Logic, Inc. Always-on detection systems
US11139767B2 (en) 2018-03-22 2021-10-05 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10795443B2 (en) 2018-03-23 2020-10-06 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10820100B2 (en) 2018-03-26 2020-10-27 Cirrus Logic, Inc. Methods and apparatus for limiting the excursion of a transducer
US10832537B2 (en) 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11069206B2 (en) 2018-05-04 2021-07-20 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
CN108712706B (en) * 2018-05-17 2020-09-22 Oppo广东移动通信有限公司 Sound production method, sound production device, electronic device and storage medium
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US11283337B2 (en) 2019-03-29 2022-03-22 Cirrus Logic, Inc. Methods and systems for improving transducer dynamics
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US10976825B2 (en) * 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
US11150733B2 (en) 2019-06-07 2021-10-19 Cirrus Logic, Inc. Methods and apparatuses for providing a haptic output signal to a haptic actuator
CN114008569A (en) 2019-06-21 2022-02-01 思睿逻辑国际半导体有限公司 Method and apparatus for configuring a plurality of virtual buttons on a device
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005529350A (en) * 2002-06-12 2005-09-29 サントル・ナショナル・ドゥ・ラ・レシェルシュ・サイエンティフィーク−セ・エン・エール・エス− Method and apparatus for locating impact on a surface
JP2006509301A (en) * 2002-12-06 2006-03-16 ニュー トランスデューサーズ リミテッド Contact detection device

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5380959A (en) * 1992-06-15 1995-01-10 Carroll Touch, Inc. Controller for an acoustic touch panel
US5334805A (en) * 1992-06-15 1994-08-02 Carroll Touch Controller for an acoustic wave touch panel
US5591945A (en) * 1995-04-19 1997-01-07 Elo Touchsystems, Inc. Acoustic touch position sensor using higher order horizontally polarized shear wave propagation
US6061177A (en) * 1996-12-19 2000-05-09 Fujimoto; Kenneth Noboru Integrated computer display and graphical input apparatus and method
WO2000030025A1 (en) * 1998-11-16 2000-05-25 The Whitaker Corporation Segmented gain controller
AU3898200A (en) 1999-03-24 2000-10-09 Radiant Systems, Inc. System for securing entry of encrypted and non-encrypted information on a touch screen
US6630929B1 (en) * 1999-09-29 2003-10-07 Elo Touchsystems, Inc. Adaptive frequency touchscreen controller
US6473075B1 (en) * 1999-09-29 2002-10-29 Elo Touchsystems, Inc. Adaptive frequency touchscreen controller employing digital signal processing
US7157649B2 (en) * 1999-12-23 2007-01-02 New Transducers Limited Contact sensitive device
US20020050983A1 (en) * 2000-09-26 2002-05-02 Qianjun Liu Method and apparatus for a touch sensitive system employing spread spectrum technology for the operation of one or more input devices
US7392396B2 (en) 2002-03-07 2008-06-24 Symbol Technologies, Inc. Transaction device with noise signal encryption
US7643015B2 (en) * 2002-05-24 2010-01-05 Massachusetts Institute Of Technology Systems and methods for tracking impacts
JP4090329B2 (en) * 2002-11-13 2008-05-28 タッチパネル・システムズ株式会社 Acoustic wave contact detector
US8019449B2 (en) * 2003-11-03 2011-09-13 At&T Intellectual Property Ii, Lp Systems, methods, and devices for processing audio signals
US7525050B1 (en) 2004-04-23 2009-04-28 Luidia, Inc. Interference removal in pointing device locating systems
US8340309B2 (en) * 2004-08-06 2012-12-25 Aliphcom, Inc. Noise suppressing multi-microphone headset
EP1869443B1 (en) 2005-04-13 2010-03-17 Sensitive Object Method for determining the location of impacts by acoustic imaging
US20060262104A1 (en) * 2005-05-19 2006-11-23 Sullivan Darius M Systems and methods for distinguishing contact-induced plate vibrations from acoustic noise-induced plate vibrations
US20070182535A1 (en) * 2006-02-09 2007-08-09 Alps Automotive, Inc. Wireless sourceless sensor
US7884805B2 (en) * 2007-04-17 2011-02-08 Sony Ericsson Mobile Communications Ab Using touches to transfer information between devices
US8179372B1 (en) * 2007-10-01 2012-05-15 Integrated Device Technology, Inc. Electronic display with array context-sensitive search (ACS) technology
US8154382B2 (en) * 2009-05-13 2012-04-10 Crucs Holdings, Llc Systems, methods, and kits for automatically activating a garage door opener
EP2312427B1 (en) * 2009-10-13 2013-09-18 BlackBerry Limited User interface for a touchscreen display
US8418237B2 (en) * 2009-10-20 2013-04-09 Microsoft Corporation Resource access based on multiple credentials
US20110096036A1 (en) * 2009-10-23 2011-04-28 Mcintosh Jason Method and device for an acoustic sensor switch

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005529350A (en) * 2002-06-12 2005-09-29 サントル・ナショナル・ドゥ・ラ・レシェルシュ・サイエンティフィーク−セ・エン・エール・エス− Method and apparatus for locating impact on a surface
JP2006509301A (en) * 2002-12-06 2006-03-16 ニュー トランスデューサーズ リミテッド Contact detection device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101542961B1 (en) 2013-09-13 2015-08-07 현대자동차 주식회사 Method and system for detecting touch on user terminal
WO2024004446A1 (en) * 2022-06-30 2024-01-04 パナソニックIpマネジメント株式会社 Sound signal reproduction device, method for controlling sound signal reproduction device, and program for controlling sound signal reproduction device

Also Published As

Publication number Publication date
US9046959B2 (en) 2015-06-02
KR20120115386A (en) 2012-10-17
CN102834798A (en) 2012-12-19
EP2524288A1 (en) 2012-11-21
WO2011085985A1 (en) 2011-07-21
US20130027359A1 (en) 2013-01-31

Similar Documents

Publication Publication Date Title
US9046959B2 (en) Noise reduction in electronic device with touch sensitive surface
KR101155671B1 (en) Method for determining the locations of at least two impacts
Kwong et al. Hard drive of hearing: Disks that eavesdrop with a synthesized microphone
CN110651237B (en) Multi-point feedback control for touch pads
TW200536417A (en) Method and apparatus to detect and remove audio disturbances
Al-Haiqi et al. On the best sensor for keystrokes inference attack on android
EP2608198A1 (en) System and method for reduction of mechanically-generated noise
Anand et al. Spearphone: A speech privacy exploit via accelerometer-sensed reverberations from smartphone loudspeakers
EP3265903A1 (en) Method of controlling a mobile device
JP2007312309A (en) Mobile terminal device and method of operating the same
Ni et al. Uncovering user interactions on smartphones via contactless wireless charging side channels
Huang et al. Pcr-auth: Solving authentication puzzle challenge with encoded palm contact response
Gao et al. Inertiear: Automatic and device-independent imu-based eavesdropping on smartphones
TW201131443A (en) Noise reduction in electronic device with touch sensitive surface
EP1960935A2 (en) Method and apparatus for masking acoustic keyboard emanations
EP3929695A1 (en) Touch control surfaces for electronic user devices and related methods
JP2012063950A (en) Input device and electronic apparatus
Al-Haiqi et al. Keystrokes Inference Attack on Android: A Comparative Evaluation of Sensors and Their Fusion.
Gao et al. Device-independent smartphone eavesdropping jointly using accelerometer and gyroscope
CN113366873A (en) Security of authentication data on mobile devices
JP4346652B2 (en) Information terminal and input method thereof
CN110321020A (en) A kind of piezo-electric sensor signals noise remove method and device
EP2354907A1 (en) Noise reduction in electronic device with touch sensitive surface
WO2006092746A1 (en) Handheld device with improved vibration unit control.
EP3575994B1 (en) Method and system for real-time-proofing of a recording

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130912

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131015

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140401