JP2021501359A - 低遅延デシメータ及びインターポレータフィルタ - Google Patents

低遅延デシメータ及びインターポレータフィルタ Download PDF

Info

Publication number
JP2021501359A
JP2021501359A JP2020522813A JP2020522813A JP2021501359A JP 2021501359 A JP2021501359 A JP 2021501359A JP 2020522813 A JP2020522813 A JP 2020522813A JP 2020522813 A JP2020522813 A JP 2020522813A JP 2021501359 A JP2021501359 A JP 2021501359A
Authority
JP
Japan
Prior art keywords
signal
noise
filter
noise signal
sample frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020522813A
Other languages
English (en)
Other versions
JP2021501359A5 (ja
JP7282761B2 (ja
Inventor
ポールセン、イェンス・クリスチャン
ソルムントソン、トラウスティ
ミラーニ、アリ・アブドラザデ
ミラー、マーク
Original Assignee
シナプティクス インコーポレイテッド
シナプティクス インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シナプティクス インコーポレイテッド, シナプティクス インコーポレイテッド filed Critical シナプティクス インコーポレイテッド
Publication of JP2021501359A publication Critical patent/JP2021501359A/ja
Publication of JP2021501359A5 publication Critical patent/JP2021501359A5/ja
Application granted granted Critical
Publication of JP7282761B2 publication Critical patent/JP7282761B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/04Circuits for transducers, loudspeakers or microphones for correcting frequency response
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1785Methods, e.g. algorithms; Devices
    • G10K11/17855Methods, e.g. algorithms; Devices for improving speed or power requirements
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1787General system configurations
    • G10K11/17885General system configurations additionally using a desired external signal, e.g. pass-through audio such as music or speech
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083Reduction of ambient noise
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/30Means
    • G10K2210/301Computational
    • G10K2210/3028Filtering, e.g. Kalman filters or special analogue or digital filters
    • G10K2210/30281Lattice filters
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/30Means
    • G10K2210/301Computational
    • G10K2210/3051Sampling, e.g. variable rate, synchronous, decimated or interpolated
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02163Only one microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/01Hearing devices using active noise cancellation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)

Abstract

低遅延動的ノイズキャンセレーションのためのシステムと方法が、環境ノイズを検出してノイズ信号を生成する音声センサと、音声信号を受け取り、インターポレーションフィルタで前記音声信号を処理し、第1サンプル周波数を有する主音声信号を生成する音声処理パスと、前記ノイズ信号を受け取り、アンチノイズ信号を生成する動的ノイズキャンセレーションプロセッサと、前記アンチノイズ信号を受け取り、前記第1サンプル周波数を有するアンチノイズ信号を生成する直接インターポレータと、前記アンチノイズ信号におけるビット数を低減するクリッピングを行うリミッターと、前記主音声信号と前記アンチノイズ信号とを結合して結合出力信号を生成する加算器と、前記結合出力信号を処理する低遅延フィルタとを備えている。

Description

本願は、2017年10月31日に出願された米国仮出願62/579,809の利益と優先権を主張するものであり、参照することによりその全体が本願に組み込まれる。
本願は、全体としてはデジタル信号処理のためのシステム及び方法に関するものであり、より具体的には、例えば動的ノイズキャンセレーションシステムにおける、サンプルレート変換に関する。
デジタル信号を様々なデジタルコンポーネント及び処理に適した異なるサンプルレートに変換することは広く知られている。例えば、所望の信号品質、必要な帯域、遅延に対する要求、処理の経済性、利用可能なシリコン面積、その他の考慮に応じて、デジタル信号処理システムが異なるサンプリングレートを用いることは一般的である。音声処理システムにおいては、低遅延と高性能を実現するために異なるサンプルレートが用いられ得る。例えば、デジタル動的ノイズキャンセレーション(ANC)システムでは、音声処理とANC処理が、異なるサンプルレートで行われてANCシステムの帯域を増加させることがある(例えば、“Understanding Active Noise Cancellation”、Colin H. Hansen、ISBN 0415231922参照)。
しかしながら、オーバーサンプルドコンバータ構成を用いるシステムでは、均一な遅延で信号を結合する際に問題がある。一つの解決方法は、アナログ領域で処理を行い、これにより、デジタルオーバーサンプルド処理に関連する遅延の問題を回避することである。しかしながら、これでは、典型的には広い周波数範囲に渡って対応する能力が制限されるし、他の解決方法では、周波数分解能が制限され、また、不所望なノイズの低減が制限されることになる。更に、これらの解決方法は、しばしば、コンポーネントの変更に鋭敏であり実装依存性がある。前述の観点から、オーバーサンプルドコンバータ構成を用いた動的ノイズキャンセレーション処理のためのシステム及び方法の改良には継続したニーズがある。
低遅延動的ノイズキャンセレーション(ANC)を行うためのシステム及び方法がここに開示されている。様々な実施形態において、システムが、環境ノイズを検知し、ノイズ信号を生成するように動作可能な音声センサと、音声信号を受け取り、インターポレーションフィルタによって該音声信号を処理し、第1サンプル周波数を有する主音声信号を生成する音声処理パスと、該ノイズ信号を受け取り、対応するアンチノイズ信号を生成するように動作可能な動的ノイズキャンセレーションプロセッサと、該アンチノイズ信号を受け取り、該第1サンプル周波数を有するアップサンプリング後アンチノイズ信号を生成するように動作可能であって、オーバーフローを回避するように該アンチノイズ信号の最上位ビットを拡張するように動作可能な符号拡張段と、該アップサンプリング後アンチノイズ信号のビット数を低減するクリッピングを行うように動作可能なリミッターとを備える直接インターポレータと、該主音声信号とアップサンプリング後アンチノイズ信号を受け取って結合し、結合出力信号を生成する加算器と、該結合出力信号を処理する低遅延フィルタとを備えている。
いくつかの実施形態では、低遅延フィルタが複数のフィルタを備えており、各フィルタは、異なるサンプル周波数でフィルタリングを行う。低遅延フィルタは、直列配置で設けられた複数の格子波フィルタを備えていてもよい。各格子波フィルタのそれぞれは、異なる周波数帯を処理する。いくつかの実施形態では、サンプル周波数が、各連続するフィルタにおいて整数ステップで増加される。格子波フィルタが複数の遅延要素を備えていてもよく、特定の出力サンプル周波数での直接サンプリングが、複数のフィルタをインターレースすることで行われてもよい。一つの実装では、N個の遅延要素がリフレクター部(2ポートアダプタ)に設けられ、1つのパスがN/2個の遅延要素で遅延され、他のパスは、入力信号に直接接続されている。ここで、Nは、一連の2の累乗数に等しい。他の実装では、格子波フィルタが、それぞれがN個の単位遅延で遅延される複数のリフレクター要素を備えている1つのパスと(Nは、1より大きい整数)、M個の遅延要素(Mは、1より大きい整数)によって遅延される1つのパスとを含む2つのパスを備えている。いくつかの実施形態では、動的ノイズキャンセレーションプロセッサが、更に、動的キャンセレーションプロセッサによってアンチノイズ信号を得るように動作可能である。ここで、フィルタ係数は、時間領域又は周波数領域で動作してfiltered-X最小二乗法処理によって計算されてもよい。
様々な実施形態で、システムは、第1サンプル周波数を有する主音声信号を受け取って処理するように動作可能な音声処理パスと、該主音声信号を第2サンプリング周波数にダウンサンプリングするように動作可能なデシメータを備える動的ノイズキャンセレーションパスと、該主音声信号とノイズ信号を該第2サンプル周波数で受け取り、該第2サンプル周波数を有するアンチノイズ信号を生成するように動作可能な動的ノイズキャンセレーションプロセッサと、該アンチノイズ信号を該第1サンプル周波数にアップサンプリングするように動作可能なインターポレータと、該アンチノイズ信号と該主音声信号とを該第1サンプル周波数で結合するように動作可能な加算器とを備えている。デシメータとインターポレータは、それぞれ、対応する複数のサンプル周波数でフィルタイングを行うように動作可能な複数のフィルタを備えている。
いくつかの実施形態では、動的ノイズキャンセレーションパスと音声処理パスのそれぞれが、均一な遅延を可能にするように配置された複数の遅延要素を備えるオーバーサンプルド格子フィルタを備えている。当該システムは、更に、環境ノイズを検知し、対応する電気信号を生成するように動作可能なマイクロホンと、該第2サンプル周波数で前記ノイズ信号を生成する低遅延デシメータとを備えていてもよい。当該システムは、更に、該第1サンプル周波数に整合する入出力サンプル周波数を有し、該動的ノイズキャンセレーションパスに設けられたインターポレータによって生成された偽イメージ(aliased image)を除去するように動作可能なオーバーサンプルドインターポレーションフィルタを備えていてもよい。いくつかの実施形態では、前記複数のフィルタのそれぞれが、各段が2倍で動作サンプルレートを変化させる多段格子波フィルタ構成を備えていてもよい。デシメータとインターポレータは、それぞれ、オーバーフローを回避するように受信信号の最上位ビットを拡張するように動作可能な符号拡張段と、出力ビット数を低減するクリッピングを行うように動作可能なリミッターとを備えていてもよい。
様々な実施形態において、方法が、環境ノイズを検知し、ノイズ信号を生成することと、インターポレータフィルタによって音声信号を処理して第1サンプル周波数を有する主音声信号を生成することと、前記ノイズ信号から第2サンプル周波数を有するアンチノイズ信号を生成することと、前記アンチノイズ信号を直接内挿して、前記第1サンプル周波数を有するアップサンプリング後アンチノイズ信号を生成することと、該主音声信号と該アップサンプリング後アンチノイズ信号とを結合して結合出力信号を生成することと、該結合出力信号を低遅延フィルタで処理することとを含む。ここで、直接内挿することは、オーバーフローを回避するようにアンチノイズ信号の最上位ビットを拡張し、ANCリファレンスを内挿係数に等しいゲイン係数で乗算することと、アップサンプリング後アンチノイズ信号の出力ビットの数をクリッピングして減らすこととを含む。
いくつかの実施形態では、当該方法は、更に、直列配置で設けられた複数の格子波フィルタを適用することを含む。ここで、該複数の格子波フィルタのそれぞれは、各連続するフィルタで次々に変更された異なるサンプル周波数を処理する。該複数の格子波フィルタを適用することは、複数の遅延要素を適用することを含んでいてもよい。特定の出力サンプル周波数での直接サンプリングが、複数のフィルタをインターレースすることで行われてもよい。様々な実施形態において、該主音声信号を間引いて該主音声信号を該第2サンプル周波数にダウンサンプリングすることと、該ノイズ信号から該第2サンプル周波数を有するアンチノイズ信号を生成することが、更に、ダウンサンプリングされた主音声信号を分析することを含んでいてもよい。いくつかの実施形態では、当該方法において、該ノイズ信号から該第2サンプル周波数を有する該アンチノイズ信号を生成することが、filtered-X最小二乗法処理を用いてフィルタ係数を計算することを備えている。
本発明の範囲は、クレームによって規定され、該クレームは参照することで本項に組み込まれる。本発明のより完全な理解は、その追加的な利点の実現と共に、下記の1以上の実施形態の詳細な説明を考慮することによって当業者に与えられるであろう。初めに簡単に説明する添付図面のシートを参照する。
本開示の観点及びその利点は、以下の図面とそれに続く詳細な説明を参照することで、より良く理解可能である。類似の参照符号が1以上の図面に図示されている類似の構成要素を識別するために用いられており、それらの図示は、本開示の実施形態を図示する目的のものであり、限定する目的のものではないと理解されるべきである。図面における部材は、必ずしも寸法通りではなく、その代わり、本開示の原理を明確に図示するように強調がなされている。
図1は、1以上の実施形態による、動的ノイズキャンセレーションシステムの第1の例である。
図2は、1以上の実施形態による、動的ノイズキャンセレーションシステムの第2の例である。
図3は、1以上の実施形態による、動的ノイズキャンセレーションシステムの第3の例である。
図4は、1以上の実施形態による、図3に類似し、オーバーサンプルドインターポレーションフィルタを用いる動的ノイズキャンセレーションシステムの例である。
図5は、1以上の実施形態による、8倍オーバーサンプルドインタポレーション又はデシメーションフィルタのトポロジーを図示している。
図6Aは、サンプル周波数を3072kHzとした場合の、図5のオーバーサンプルドフィルタの周波数応答を図示している。 図6Bは、サンプル周波数を3072kHzとした場合の、図5のオーバーサンプルドフィルタの群遅延を図示している。
図7は、1以上の実施形態による、4倍オーバーサンプルドインタポレーション又はデシメーションフィルタのトポロジーを図示している。
図8Aは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図7のオーバーサンプルドフィルタの周波数応答を図示している。 図8Bは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図7のオーバーサンプルドフィルタの群遅延を図示している。
図9は、1以上の実施形態による、2倍オーバーサンプルドインタポレーション又はデシメーションフィルタのトポロジーを図示している。
図10Aは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図9のオーバーサンプルドフィルタの周波数応答を図示している。 図10Bは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図9のオーバーサンプルドフィルタの群遅延を図示している。
図11は、1以上の実施形態による、オーバーサンプルドフィルタのトポロジーを図示している。
図12Aは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図11のオーバーサンプルドフィルタの周波数応答を図示している。 図12Bは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図11のオーバーサンプルドフィルタの群遅延を図示している。
図13Aは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図4のフィルタチェーンの、結合周波数応答を図示している。 図13Bは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図4のフィルタチェーンの、結合周波数応答を図示している。 図13Cは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図4のフィルタチェーンの、結合周波数応答を図示している。
図13Dは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図4のフィルタチェーンの、全体としての群遅延を図示している。 図13Eは、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、図4のフィルタチェーンの、全体としての群遅延を図示している。
図14は、1以上の実施形態による、デシメータを図示している。
図15は、1以上の実施形態による、サンプル周波数を3072kHzとした場合の、フィルタ群遅延の測定を図示している。
図16Aは、1以上の実施形態による、符号拡張及び出力の飽和を行うためのデシメータとロジックを図示している。 図16Bは、1以上の実施形態による、符号拡張及び出力の飽和を行うためのデシメータとロジックを図示している。 図16Cは、1以上の実施形態による、符号拡張及び出力の飽和を行うためのデシメータとロジックを図示している。
図17Aは、1以上の実施形態による、符号拡張及び出力の飽和を行うためのインターポレータとロジックを図示している。 図17Bは、1以上の実施形態による、符号拡張及び出力の飽和を行うためのインターポレータとロジックを図示している。 図17Cは、1以上の実施形態による、符号拡張及び出力の飽和を行うためのインターポレータとロジックを図示している。
図18は、1以上の実施形態による、一般的なオーバーサンプルドフィルタのトポロジーを図示している。
図19Aは、1以上の実施形態による、格子波フィルタ構成を用いた間引きを図示している。 図19Bは、1以上の実施形態による、格子波フィルタ構成を用いた内挿を図示している。
図20Aは、1以上の実施形態による、格子波フィルタの単一セクションを図示している。 図20Bは、1以上の実施形態による、格子波フィルタの例示的な実装を図示している。
図21は、1以上の実施形態による、複数の遅延要素と複数のオールパスフィルタとを有するオーバーサンプルドディメータ/インターポレータを図示している。
図22は、1以上の実施形態による、複数の遅延要素と複数のオールパスフィルタを備えるオーバーサンプルドディメータ/インターポレータを図示している。
本開示の様々な実施形態に従って、動的ノイズキャンセレーションフィルタにおいて低遅延かつ高音質の音声出力を達成するためのシステム及び方法が開示される。
ノイズキャンセレーション及びノイズ低減技術は、騒音の多い環境におけるユーザ体験を向上するために様々な応用で用いられている。1つのアプローチでは、ヘッドホン、ヘッドセット、イヤホンのようなリスニングデバイスが、環境ノイズを検知する1以上の音声センサと、アンチノイズ信号を生成してユーザに対する環境ノイズをキャンセル又は低減する動的ノイズキャンセレーション処理回路を備えている。生成されたアンチノイズ信号がノイズ外乱の反対に等しい(これによりノイズをキャンセルする)一方で、所望の音声、例えば、高忠実音源からの再生には最小の外乱しかないことが望まれる。環境ノイズの望ましい減衰を得るためには、ANCシステムは、受け取ったノイズ信号を低遅延で処理して元のノイズ信号に対して最小の位相シフトしかない反転出力信号を生成し、広い帯域でノイズキャンセレーションを行うように設計される。多くの音声を聞く環境では、約20kHzのノイズ低減帯域を得るためには、約10μsの遅延のフィードバック信号が使用可能であるが、実際に得られる帯域は、ノイズキャンセレーションシステムのトポロジーと実際の音響システムに依存している。
本開示の様々な実施形態は、高音質音声再生システムにおいてオーバーサンプルドコンバータを用いるノイズキャンセレーションシステムを対象としている。一実施形態では、デルタ−シグマ・アナログ−デジタルコンバータ(ADC)とデジタル−アナログコンバータ(DAC)とが音声信号処理に用いられる。ナイキストサンプルレートコンバータと比較すると、デルタ−シグマコンバータは、高サンプルレートを用いており、アナログ信号部品において精度を要求しないので、一般に、実装が安価である。したがって、コストと処理の観点の両方から、ナイキスト基準によって要求されるより高いサンプルレートでノイズキャンセレーションを行うことはしばしば有利であり、これは、より広いノイズキャンセレーション帯域を得るために使用可能である。
多レート信号処理の1つの問題は、遅延の増大の可能性である。ANCシステムでは、キャンセルすべき環境ノイズと同相のアンチノイズ信号を生成するためには、測定されたノイズ(不所望な信号)と高忠実音声(所望の信号)の両方について、時間に正確なリファレンスを動的ノイズ処理システムに提供することが望ましい。いくつかの実施形態では、係数の変更に鋭敏ではないことが知られている格子波フィルタが、乗算を要しない簡単なフィルタソルーションを得るために用いられる。低遅延を得るためには、フィルタ次数が低いことが望まれるが、これは、不幸にも帯域外の信号の減衰が少ない特性を有することがあり、良好な帯域外減衰が望まれる高音質音声信号については問題になり得る。
本開示の実施形態による動的ノイズキャンセレーション(ANC)を実施するシステム100を、図1を参照して説明する。システム100は、ノイズキャンセリングヘッドホン、イヤホン、又は、環境からノイズを検出してノイズをキャンセルする信号を生成する他のシステムにおいて実装され得る。システム100は、1以上のノイズ源からの環境ノイズを検出し、検出したノイズを表す対応電気信号を生成する少なくとも1つのマイクロホン102又は他の音声センサを備えている。様々な実施形態において、該少なくとも1つのマイクロホン102は、フィードフォワード、フィードバック、又は、フィードフォワード/フィードバック複合ANCシステムに配置され得る。マイクロホン102の出力は、オーバーサンプリングされたデジタルビットストリーム(例えば1ビットデジタルマイクロホンからの出力)であってもよく、該オーバーサンプリングされたデジタル音声信号を生成するためにプリアンプと(単一ビット又は多ビットの)デルタ−シグマコンバータとに供給されるアナログ信号であってもよい。デジタル音声信号は、低遅延ANCプロセッサ106への入力のために、多段格子波フィルタのような低遅延デシメータ104によって低いサンプルレートに間引きされる。
低遅延ANCプロセッサ106は、マイクロホン102によって検出された環境ノイズに対応するアンチノイズ信号を生成する。ANCプロセッサ106は、また、音声リファレンス信号として用いられる、時間に正確な音声再生信号を高音質音声再生プロセッサ108から受け取る。様々な実施形態において、ANCプロセッサ106は、内部フィルタノードの時間領域又は周波数領域での更新を用いて、スピーカー114から再生された所望の音声をも含み得るマイクロホン信号から環境ノイズを動的にフィルタリングする。例えば、ANCプロセッサ106は、filtered-x 最小二乗法 (FXLMS) アルゴリズムを実行して、環境ノイズをフィルタリングで除去するようにフィルタ係数を動的に修正してもよい。低遅延を得るために、有限インパルス応答 (FIR) トポロジーがしばしば用いられ、一方では、ノイズのパワースペクトルにかなりの広がりがある場合でも高速に対応できるように、フィルタ更新が、しばしば周波数領域で行われる。これによれば、如何なる主要なノードよりもエネルギー含有量が相当に小さい周波数においてさえ、周波数領域で信号を分離することにより高速に対応することが可能になる。逆周波数変換が、対応する重みを時間領域に変換するために用いられてもよい。
音声再生プロセッサ108は、例えばスピーカー114のような音声出力を介した再生のために所望の音声信号(ここでは主音声信号ともいう)を生成する。所望の音声信号は、ソースファイル(例えば、記録された音楽又は動画ファイル)や、ボイスオーバーIPシステムにおける近端のマイクロホン又は遠端のマイクロホンから受け取った音声信号のような、他のソースからの出力から生成されてもよい。所望の音声信号は、加算器110によってANCプロセッサ106により出力されるアンチノイズ信号と結合される。これらの信号を加算した出力は、低遅延インターポレータ112を用いてフィルタリング及びアップコンバートされてスピーカー114(レシーバと呼ばれることもある)に出力される。
簡潔さのために、図1にはいくつかの標準的な部品、例えば、マイクロホンプリアンプ、MEMSマイクロホンにおいて用いられ得るマイクロホン高電圧ポンプ、低ノイズ電源ユニット、スピーカーアンプ、電源、その他のシステム100の部品が、図示されていないと理解されよう。これらの部品は、当業者には知られており、様々な実際のシステム実装においては含められ得るが、ここでは、処理パスを図示するうえで明確さのために省略されている。
システム100の様々な実施形態では、高忠実性音声信号とANC出力信号の両方が同じ低いサンプルレート(例えば、192kHz)で表され、よって、処理パスにおける低遅延が設計の目標である場合には、いずれもが、同じ低忠実性インターポレーションフィルタで処理される。処理サンプルレートを増大させることは可能であるが、これは、設計の電力消費と物理的大きさを顕著に増大させるであろう。よって、音声再生のための高音質インターポレーションフィルタと、ANC処理のための低遅延フィルタパス(ここでは、動的ノイズキャンセレーションパスとも呼ぶ)を同時に組み合わせることができることが望まれる。これは、動的ノイズキャンセレーション(ANC)のためのシステム200の構成要素を図示する図2の実施形態に図示されているようにして実施され得る。
システム200は、マイクロホン202と、低遅延デシメータ204と、ノイズ信号を受け取りアンチノイズ信号を生成するための低遅延ANCプロセッサ206とを備えている。アンチノイズ信号は、加算器210によって高音質音声信号(ここでは、主音声信号とも呼ばれる)と組み合わせるべきアンチノイズ信号218を生成するために低遅延インターポレータ212に供給される。高音質音声は、高音質音声再生208により、ANCリファレンス信号として用いるためにANCプロセッサ206に供給される。図示されるように、高音質音声信号とノイズ信号は、効率的なANC処理に適した同じ低サンプルレート(例えば、192kHz)である。高音質インターポレータ216(「高音質」の意味は、システムの要求に応じた十分なダイナミックレンジ、減衰量などを含む)は、スピーカー214に出力するための高音質音声信号のサンプリングレートを増大し、高音質音声信号処理パスに遅延を加える。ANCプロセッサ206は、音声出力の、時間に正確な音声リファレンスを用いるので、(ブロック208と206から出力される)これらの2つの信号の異なる信号処理パスには、(即ち、それぞれ、フィルタ212と216を介する)異なる信号処理パスが存在し、これは、内部の群遅延に差異を生じさせ、ANC処理ユニットにおける最善ではない対応となる。ブロック212と216とで遅延が異なると、信号の位相がずれ、ノイズキャンセレーションの性能が劣化する。よって、図1のシステムに関する問題は、単に、高忠実度インターポレータ216と低遅延インターポレーションフィルタ212からの出力を加えることでは解決できない。したがって、システム100もシステム200のいずれも、ANC信号のための低遅延パスとリファレンス音声信号のための高忠実度信号パスの両方を提供しながら、ANCシステムのための時間に正確なリファレンスの問題を解決するものではない。
ANC信号のための低遅延パスとリファレンス音声信号のための高忠実度信号パスの両方を提供しながら、ANCシステムのための時間に正確なリファレンスを提供するシステム300の実施形態が、図3に示されている。マイクロホン302、低遅延デシメータ304、低遅延ANCプロセッサ306、高音質音声再生プロセッサ308、高音質インターポレータ316とスピーカー314は、前に議論した図1、図2に図示されているように実装されてもよい。高音質音声再生プロセッサ308は、高音質インターポレータ316(即ち、高忠実度インターポレーションフィルタ)に供給される高音質音声信号を生成する。高い電力消費、過剰な複雑性又は遅延の相違に関する問題を回避するために、高音質インターポレーションフィルタの高忠実度オーバーサンプルド出力は、フィルタリングすることなく動作する(即ち、N個ごとにサンプルを選択する)デシメータ318によってN個おきに間引きされる。帯域外の信号が高音質インターポレータ316によって除去され、よって信号帯域は不変であるから、フィルタリング(例えば、アンチエイリアシング)は必要ない。ANCプロセッサ306の出力信号(アンチノイズ信号)は、高音質音声信号の周波数に整合するように、インターポレータ320において、より高い周波数にN倍で直接にアップサンプリングされる。一実施形態では、出力信号は、元のサンプルのそれぞれの間に、0に等しいN−1個のサンプルを挿入することで高い周波数にアップアンプリングされる。この動作は、元のノイズ信号の複数の鏡像エイリアスを導入するであろう。アンチノイズ信号は、加算器310によって高忠実度オーバーサンプルド出力と結合され、その結合出力信号は、低遅延インターポレータ312に送られる。
この実施形態における低遅延インターポレータ312は、最初の音声出力のN倍の高いサンプルレートで動作するオーバーサンプルドインターポレータであり、ANCプロセッサ306からの直接的に内挿された信号から出力される偽イメージを除去する一方で、元のオーバーサンプルされた高忠実度オーバーサンプルド音声信号は、偽イメージはすでに高音質インターポレータによって除去されているので、そのまま通過する。オーバーサンプルドインターポレータ312は、各フィルタセクションの内部に追加の遅延要素を加えることで実装されてもよい。即ち、各フィルタセクションは、N倍、N/2倍、N/4倍の低いサンプル周波数で動作する元のフィルタ構成と同じ周波数応答を得るために、元の遅延要素のN倍、N/2倍、N/4倍等の遅延要素を備えている。更に、フィルタ要素が元のサンプルレートのN倍の非常に高いサンプルレートで更新され、これによりフィルタの群遅延を最適にするので、このフィルタ構成は、実際の実装における問題を解決する。この場合、異なるサンプルレート(即ち、異なるサンプル周波数)を有するシステム間で値を転送するときにしばしば遅延を与えることがある、実際のレジスタ転送レベルでの実装に起因する追加の遅延を導入することなく、理論的な性能が得られることがある。図3に示されている一般的な解決手法において、格子波フィルタ以外のフィルタ構成が使用されてもよく、如何なる解決手法も、これらに限定されるべきではない。
様々な実施形態において、オーバーサンプルドインターポレータフィルタは、同じ入出力サンプル周波数を有しており、低遅延デシメーションフィルタとしても使用可能であり、これにより、入力パスの遅延を低減することで更に遅延を低減することができる。それは、本質的には非常に低い遅延と広い帯域を有するローパスフィルタであり、高忠実性の用途では第2のデシメーションパスを追加することができる。
様々な実装について、該フィルタは、帯域外の減衰の観点から理想的であろう応答を有するフィルタを最初に設計し、更に、該フィルタの出力における実際の信号−ノイズ比(SNR)を向上するように係数を調節し、これにより用いられているデルタ−シグマコンバータの実際のノイズ成形を考慮に入れながら該フィルタを最適化することで最適化されてもよい。更に、実際の実装において乗算を除去し、これによりシリコン面積、コスト及び電力消費を顕著に低減するように、係数が切り捨てられてもよい。
ここでは、オーバーサンプルドフィルタ実装400の実施形態を、図4を参照しながら説明する。前に議論したように、デジタルANCフィードバックループにおいて低遅延、低電力、低シリコン面積及び高性能を得るためには、音声処理とANC処理とを異なるサンプルレートで行うことは利点であり得る。図示された実施形態では、音声信号は、3.072Mhzのレートでサンプリングされ、ANC処理はより低い192kHzのレートで行われる。ただし、システム要求に従って他のサンプリングレートが使用され得ることは理解されよう。音声処理自身は、ANC(192kHz)と同じレート又はより低いレート、例えば48kHzで行われてもよい。しかしながら、オーバーサンプルドコンバータ構成を用いる場合には、これらの信号を均一な遅延で結合する際に問題がある。デシメーションパスは別に実施可能であるが、AND処理と音声パスとを均一な遅延で結合する際には問題が生じ得る。もし、インターポレーションパスが低遅延に合わせて最適化されたなら、帯域外鏡像イメージを音声パスからあまり減衰させないであろうし、同様に、もし音声パスを向上させるために遅延について妥協すれば、帯域とANC性能が悪くなる。
音声信号とANCアンチノイズ信号との、高い音声音質と低く均一なパス遅延の両方を得るために、図4の実施形態は、両方のパスで均一な遅延を実現可能なトポロジーのオーバーサンプルドインターポレータを備えている。図示されているように、高音質音声入力信号は、48kHzでサンプリングされ、ハーフバンドフィルタ(セクションS1、S2)によって192kHzにアップサンプリングされる。インターポレーションフィルタ416は、偽鏡像イメージを除去し、該信号を16倍で、3.072MHzの出力音声サンプルレートにアップサンプリングする高音質インターポレータである。音声信号は音声処理パスでフィルタリングされ、音声信号とアンチノイズ信号の結合は、オーバーサンプルされた出力周波数(3.072MHz)で行われる。この実施形態では、短いANC遅延と十分な音声鏡像の減衰が同時に達成される。様々な実施形態において、音声パスは、元のパスの後で(即ち、アンチノイズ信号との結合の後で)フィルタリングされ、これは、最も高い周波数をやや減衰し、更に、帯域外ノイズを低減することがある。ANCオーバーサンプルドインターポレータによる音声信号の不所望な帯域内の減衰は、信号のアップサンプリングが発生する前に行われる小さなイコライゼーションによって訂正可能である。様々な実施形態において、低遅延格子波フィルタが、ループにおける遅延を最小化するようにオーバーサンプルドインターポレータフィルタに用いられる。該オーバーサンプルドインターポレーションフィルタは、ANCのためのノイズ信号パスにおける間引きのために、このパスにおいても低遅延を確保するように、少しだけ変更して使用され得る。即ち、マイクロホンから間引き後出力へのデジタル信号は、オーバーサンプルドインターポレータと類似の構造のオーバーサンプルドデシメータを用いて処理される。
図示された実施形態では、ANC処理は、192kHzのサンプルレートで行われる。音声信号は、ANC処理のための192kHzのリファレンス信号を生成するために、デシメータ418によってN=16個ごとに間引きされる(即ち、16個おきにサンプルを抜き出す)。ANCプロセッサ406は、192kHzのアンチノイズ信号を出力し、該アンチノイズ信号は、加算器410によって音声信号と結合される3.072MHzのアンチノイズ信号を生成するために、インターポレータ420によってN=16倍でアップサンプリングされる。実際の実装では、セクションS3とブロック420からの低周波のエネルギーレベルが整合していることを確保するためにインターポレータ420の後に乗算器を含んでいてもよい。この乗算器は、図4には図示されていない。乗算器は、典型的には、単なるビットのシフトからなる(例えば、16倍の乗算について4回シフト)。このように、インターポレータ420は、単に、サンプルの間にゼロを挿入することからなるのではなく、更に、内挿レートと同じ倍率で各出力サンプルを乗じる。一実施形態では、信号はフィルタリングされずに内挿されるので、内挿されたアンチノイズ信号は、複数の偽イメージを含んでいる。次に、オーバーサンプルドインタポレーションフィルタ412(セクションS5、S6、S7、S8)は、結合された信号から帯域外イメージを除去する一方で、音声信号を通過帯域においてフィルタリングせずに通過させる。オーバーサンプルドインターポレータフィルタ412のそれぞれは、異なる数の内部遅延(例えば、8、4、2、1)を有しており、これにより、該フィルタは、異なる速度で動作して逐次に帯域外イメージを除去する。このようにして、ANC信号と音声信号は、全周波数で同一の群遅延を有し、これにより、高品質なノイズ抑制を可能にする。
ここに開示した実施形態は、従来のシステムに対して数多くの利点を提供することは当業者には理解されるであろう。実施形態は、遅延を低くかつうまく制御し、ANCと音声パスとを別々にフィルタンリングすることを可能にし、加算点の後で両方のパスの遅延を同一にすることを可能にする。
一実施形態では、24小数ビットの語長が、従来の音声コンポーネントと直接に接続するために用いられ、1つのオーバーフロービットを含む25ビットの内部表現が用いられる。理論的には、あらゆる状況でオーバーフローを回避するためには2つまでのオーバーフロービットが必要であるかもしれないが、実際の実装では、1つのオーバーフロービットで十分であり得る。音声コンポーネントは、フィルタに直接に接続されてもよい。ANCプロセッサは、フィルタに直接に接続されてもよい。一実施形態では、ノードX3(ノードX3は、以下の図面に図示されている)の最下位ビット(LSB)は、全てのオーバーサンプルドフィルタでリミットサイクルを回避するためにゼロに設定される。テストによれば、選択されたデルタ−シグマコンバータのダイナミックレンジが既に限定されているという状況では、(25ビットではなく)22ビットしか用いられなくてもSNRの顕著な劣化は見られなかった。フィルタS5〜S8は、図4において、S5、S6、S7、S8の順序で図示されているが、これらのフィルタの、オーバーサンプリングされているという性質により、これらのフィルタの異なる配列も用いられてもよいことが理解されよう。
図5を参照して、ここでは、オーバーサンプルドインターポレーションフィルタのトポロジーの実施形態を説明する。この実施形態では、図4のセクションS5におけるインターポレーションフィルタのような格子波インターポレーションフィルタ500は、16倍にオーバーサンプリングされた音声信号とアンチノイズ信号とを受け取る。該オーバーサンプルドインターポレーションフィルタは、同一の入出力サンプル周波数を有している。該インターポレータをより高いサンプルレートで動作させることにより、ANCプロセッサからの直接に内挿された信号によって生成された偽イメージを除去することが可能になる一方で、元のオーバーサンプリングされた高忠実性のオーバーサンプルド音声信号は、既に偽イメージが除去されているので、事実上、そのまま通過するであろう。オーバーサンプルドインターポレータは、最初の音声出力のN倍の、より高いサンプル周波数で動作し、各フィルタセクションの内部に追加の遅延要素を追加することで実装される。即ち、各フィルタセクションは、N倍、N/2倍、N/4倍の、より低いサンプル周波数で動作する元のフィルタ構成と同じ周波数応答を得るために、元の遅延要素の、それぞれ、N倍(図5に図示されている)、N/2倍、N/4倍等の遅延要素を含んでいる。更に、このフィルタ構成は、フィルタ要素が元のサンプルレートのN倍の非常に高いサンプルレートで更新され、これにより、フィルタの群速度を最適にすることを可能にする(即ち、理論的な性能が得られ得る)ため、実際の実装における問題を解決する。遅延として用いられる任意の整数である一般解について、この解決手法は、各リフレクタセクションにおいて1又は2時間単位の内部遅延を有する古くからある格子波フィルタの一般化とみることもできる。
このフィルタの伝達関数は、下記のノード方程式を参照して導き出すことが可能である:
Y0 = X0 z-N
X1 = X0 + X2z-2N = X0 + (X1-X3) z-2N = X0 + X1z-2N - X3z-2N
X1 = (X0-X3z-2N)/(1-z-2N)
X3 = X2 z-2N +γX1 = (X1-X3) z-2N+γX1
X3(1+z-2N) = (z-2N+γ)X1 = (z-2N+γ)(X0-X3z-2N)/(1-z-2N)
X3(1+z-2N)(1-z-2N) + X3(z-2N+γ) z-2N = (z-2N+γ)X0
X3 = (z-2N+γ)X0/(1+γz-2N)
Out = Y0 + X3 = X0 z-N + X3 = X0(γ+z-N+z-2N+γz-3N)/(1+γz-2N)
図5に図示されたN=8のフィルタについては、
Out = Y0 + X3 = X0 z-8 + X3 = X0(γ+z-8+z-16+γz-24)/(1+γz-16).
γの値は、フィルタカットオフ周波数を決定するであろう。γの値は、まず、阻止帯域での減衰を最大化し、通過帯域での減衰を最小化することから見出された。しかしながら、既定のデルタ−シグマコンバータ構成からの出力のSNRを最適化することによって少し良い値を発見可能である。なぜなら、これは、このコンバータの実際のノイズ成形も考慮に入れるであろうからである。この最適化の後、0.346656であるγの値が得られた。格子波フィルタの低い感受性により、この値は、下記の値:γ = 1/4 + 1/16 + 1/64 + 1/128を用いて、少しの加算/シフト演算によって近似され得る。この近似を行った場合でも、浮遊小数点で乗算とγの最適値を用いることと比較しても固定小数点演算を用いながら0.1dBのSNRの減少しか起こらなかった。このように、完全な乗算演算は、シフトをハードのワイヤで行うと共に3つの加算に置換可能であり、これは、顕著にシリコン面積と電力を節約する。この実装では、フィルタにおいて偽の小振幅振動を発生させるリミットサイクルの問題を回避するために、ノードXからの最下位ビット(LSB)出力を0に設定することによって非線形性が意図的に導入されている。図5の8倍オーバーサンプルドインターポレータの周波数応答と群遅延とが、それぞれ、図6A、図6Bに図示されている。
図7を参照して、図4のセクションS6での使用に適したオーバーサンプルドインターポレータトポロジー700の実施形態が図示されている。図示のように、格子波インターポレーションフィルタは、4倍でオーバーサンプリングされ、伝達関数は次のように計算される(N=4):
Out = Y0 + X3 = X0 z-4 + X3 = X0(γ+z-4+z-8+γz-12)/(1+γz-8)
このフィルタは、元のサンプル周波数の4倍で動作する単位遅延を有するフィルタのように振る舞い、4倍でオーバーサンプリングされた信号の処理を可能にする。図7のインターポレータの周波数応答と群遅延とが、それぞれ、図8A、図8Bに図示されている。
図9を参照して、図4のフィルタS7としての使用に適したオーバーサンプルドインターポレータトポロジー900の実施形態が図示されている。図示のように、格子波インターポレーションフィルタは、2倍でオーバーサンプリングされ、伝達関数は下記のように計算される(N=2):
Out = Y0 + X3 = X0 z-2 + X3 = X0(γ+z-2+z-4+γz-6)/(1+γz-4)
図9の2倍オーバーサンプルドインターポレータの周波数応答と群遅延とが、それぞれ、図10A、図10Bに図示されている。
図11を参照して、図4のセクションS8における使用に適したオーバーサンプルドインターポレータ1100の実施形態が図示されている。図示のように、最終段の格子波インターポレーションフィルタは、直接フィルタ(即ち、オーバーサンプリング無し)であり、伝達関数は、次のように計算される(N=1):
Out = Y0 + X3 = X0 z-1 + X3 = X0(γ+z-1+z-2+γz-3)/(1+γz-2)
図11の直接インターポレータの周波数応答と群遅延とが、それぞれ、図12A、図12Bに図示されている。
フィルタチェーン全体(即ち、図4のセクションS5〜S8)の結合した応答が、図13A〜図13Eに図示されている。図13A〜図13Cは、様々な音声帯域での全体としての周波数応答を図示している。図13D、図13Eは、サンプル周波数を3072kHzとしたときの、フィルタチェーン全体の全体としての群遅延を図示している。図13Eを参照して、ある実施形態では、音声帯域0〜20kHzにおける群遅延の変化は、4.87〜4.99μs(14.95〜15.34入力サンプル)の間で変化し、3%未満である。
図14を参照して、ここでは、デシメータとしての使用に適した例示的なフィルタ配置1400を説明する。この実施形態では、本開示の低遅延オーバーサンプルドインタポレーションフィルタは、オーバーサンプルドデシメータフィルタとして用いられる。インターポレーションフィルタからの一つの相違点は、出力が16個おきに間引かれることである。図は、低遅延の結合を確保するために信号が異なるパスを取り、高音質音声が維持される例示的な構成を図示している。様々な実施形態において、各段は、2分の1ずつサンプルレートを低減しながら(即ち、これらのセクションを3072、1536、769、384kHzで動作させながら)、全てのセクションをN=1で実装し、多段多レート信号処理を用いることで、又は、オーバーサンプルドデシメータを低い周波数、例えば、1536又は768kHzで動作させることで、ほとんど同じ遅延を持ちながらゲート数が少ないデシメーションフィルタを実装することができる。なぜなら、遅延の大部分は、多くの数の内部遅延を有するこれらのセクションにおいて発生するからである。同様に、もし、非常にわずかに高音質音声を妥協してもよいのであれば、最終出力よりも低い周波数、例えば、3072kHzの最終出力について1536kHzで音声とANC信号との加算を行い、これにより、顕著にゲート数を減らし、電力消費を減らすことができる。更に、各段が信号を同じ低遅延格子波フィルタ(N=1)を用いて2倍にアップサンプルする多段多レートインタポレータを設計することもできる。これは、ゲート数が少ないという利点があるが、実際の実装においてはセクション間のわずかな遅延による、わずかに大きい遅延がある。
図15を参照して、ここでは、本開示の実施形態による群遅延の測定について説明する。群遅延は、単一のサイン波(例えば、1kHzのトーン)を用いて、又は、複数のサイン波(例えば、1−95kHzの範囲)を用いて測定可能である。単一のサイン波の群遅延を分析するために、単一のプロットが、オーバーサンプリングされたサイン波(1kHz、サンプリング周波数3072kHz)の入力および出力で作成されてもよい。コンピュータプログラムは、例えば、グラフ上で拡大するズーム機能を用いたマニュアルでの比較によって入力サイン波を出力と比較するように作成可能である。その代わりに、群遅延は、ある周波数帯(例えば、1〜95kHz,各トーンは1kHz離れている)を用い、スペクトル法(例えば、入出力データの位相の推定)を用いて群遅延を計算するプログラムを用いて正確に計算可能である。元の入力が出力と比較され、群遅延が周波数の関数として提供されることがある。 周波数の関数としての位相は、入力及び出力データに対して高速フーリエ変換(FFT)を行ってこれらの値を減算することで得ることができる。位相エイリアシングの問題を回避するために、位相φは、群遅延の計算に用いられるまで、そのままに置いておいてもよい。群遅延ΔTは、ΔT=−φ/(2πf)から計算可能である。ここでfは周波数である。
図16A〜Cを参照して、ここでは、デシメータの実施形態を説明する。図16Aは、アナログ−デジタルコンバータからデジタル音声入力を受け取り、2分の1に減じたサンプリングレートで音声信号を出力するように構成されたデシメータ1600を図示している。図示された実施形態は、処理中の内部オーバーフローに関する問題を回避するように間引きを行ったときに含まれる追加の構成要素を図示している。初段1602は、図16Bに図示されており、22ビットへの符号拡張を含んでおり、即ち、オーバーフローを回避するように最上位ビット(MSB)を拡張し、下位ビットをゼロに設定して、コンバータからの制約された数のビットとフィルタで用いられる内部での精密性との間のインタフェースとしてふるまう。デシメータ1600は、電力消費を低減するために2つの処理パス(Y及びX)が2分の1の入力サンプルレートで計算されることを除けば図11のインターポレータと同様に構成されている。ノードX2に続く二重遅延Z−2でさえ、レジスタ空間と電力を節約するために、入力サンプルレートの半分で更新される単一の遅延要素を用いて実装され得る。図示された実施形態では、デシメータ1600の全てのノードは、2つのオーバーフロービットと20の小数ビットを含む22ビットである。一実施形態では、γの値が1/4+1/16+1/64+1/128であり、乗算がないトポロジーのために用いられている。最終段は、ハードによるクリッピングを行い、20ビットの出力を生成するリミッター1604(図16Cに図示されている)を備えている。リミッターは最上位の3ビットが同一であるか否かをチェックすることで動作する。もしそうなら、元の下位ビットが直接的に出力にコピーされる。しかしながら、もし、上位3ビットが、その全てが同一ではない場合には、オーバーフロー条件が検知され、すべての下位ビットがMSBの反転値になり、2の補数表記で可能な最極値を表す。オーバーフロービットの数は他の値が選択可能である。
図17A〜Cを参照して、ここでは、インターポレータの実施形態を説明する。図17Aは、動的ノイズキャンセレーションプロセッサからデジタル音声入力を受け取って2倍のより高いサンプリングレートを有する音声信号を出力するように構成されたインターポレータ1700を図示している。図示されている実施形態は、処理中のオーバーフローに関する問題を回避するように内挿を行う場合に含まれる追加の構成要素を図示している。初段1702(ここでは、符号拡張段とも呼ばれる)が図17Bに図示されており、22ビットへの符号拡張(即ち、MSBを拡張して下位ビットをゼロに設定する)を含んでいる。図示された実施形態では、インターポレータ1700の全てのノードは、2つのオーバーフロービットと2つの小数ビットとを含む22ビットである。一実施形態では、γの値は1/4+1/16+1/64+1/128であり、乗算がない実装において用いられる。最終段は、ハードによるクリッピングを行い20ビットの出力を生成するリミッター1704(図17Cに図示されており、図16Cに類似している)を備えている。
図18を参照して、1以上の実施形態による、汎用のオーバーサンプルド格子波フィルタのトポロジー1800が図示されている。図示されているように、汎用のフィルタトポロジー1800は、複数の遅延要素(遅延N、2N)を内部に持つ構成(2ポートアダプタ)を図示している。稼働中、該オーバーサンプルドフィルタは、xN遅延要素(例えば、2x、4x、8x、16x等)を備えており、該フィルタは、ナイキストのサンプリング基準によって要求されるよりも高い周波数で動作される。入力ストリームは、低い周波数でやってくる多くのストリームとして読み取られ、該信号は、これらの遅延によって「泡立つ」。例えば、元の予期されたサンプルレートの2倍で信号を処理するために、該フィルタは、2倍の遅延を含んでおり、2倍のレートで動作する。再帰的なシステムとして、信号がシステムにおいて周回し、フィルタは、その追加の遅延のおかげでオーバーサンプリングされた信号を処理することができる。様々な実施形態において、ここに開示された概念は、遅延(M,N)及び(2、2N)が用いられ得るということを含むように拡張され得る。ここで、MとNは、任意の正の整数である。言い換えれば、これは、多フェーズIIRフィルタのように動作する。
ここでは、図19〜22を参照しながら、様々な実装の実施形態を説明する。図19Aは、格子波フィルタ構成を用いたデシメータ1900を図示している。図19Bは、格子波フィルタ構成を用いたインターポレータ1950を図示している。図19A及びBに図示されているように、各パスは、すべての周波数を通過させる1以上の直列接続された(2ポートアダプタに基づく)オールパスフィルタを表している。様々な実施形態において、オールパスフィルタは、位相においてのみ信号を変化させる単位応答を持つフィルタである。図20Aは、格子波フィルタの単一セクション2000(単一の2ポートアダプタ)を図示しており、図20Bは、2ポートアダプタ2050の例示的な実装を図示している。図21、22は、遅延要素の数が任意である(例えば、N>2)実施形態を図示している。図21は、複数の遅延要素と複数のオールパスフィルタとを備えるオーバーサンプルドデシメータ/インターポレータのための一般的な格子波フィルタ構成2100を図示している。図示されているように、フィルタの次数はN(2K+3)+Mである。これらは再帰的フィルタであるけれども、2より多い遅延要素を選択することで、元の伝達関数の複数の鏡像が得られることがある。これは、効率的な高速なフィルタ構成のために用いられ得る。図22は、他のフィルタからの出力を処理する複数のフィルタを備えるオーバーサンプルドデシメータ/インターポレータのための一般的な格子波フィルタ構成2200を図示している。1又は2よりも多い遅延要素を用いることで、2の値よりも高い倍率の直接的な間引き又は内挿に有益であることがある複数の鏡像が得られることがある。いくつかの実施形態では、最終出力ノードで2つのフィルタパスを、加算するのではなく減算することで、同様のアプローチを用いてハイパスフィルタが得られることがある。
前記の実施形態では、オーバーサンプルド格子波フィルタの特定の構成が提示されている。元の格子波フィルタには多くのトポロジーがあることは公知の文献によく知られている(例えば、2ポートアダプタの複数の例については、L. Gasci, “Explicit Formulas for Lattice Wave Digital Filters”, IEEE Trans. Circuits and Systems, Jan 1985, Fig.9 参照)。実施形態は、ここに述べられたトポロジーに限定されるべきではなく、前述されたすべてをも含んでいる。例えば、2より高次のオーバーサンプリング比を有するこれらの既存の構成の複数の遅延要素、又は、一般的な用途の数において2より多い複数の遅延要素の使用を含んでいる。
当てはまる場合、本開示によって提供されている様々な実施形態は、ハードウェア、ソフトウェア、又は、ハードウェアとソフトウェアの組み合わせを用いて実施され得る。また、当てはまる場合には、ここに提示した様々なハードウェア部品及び/又はロジック部品は、本開示の範囲から離れずに、ソフトウェア、ハードウェア及び/又はその両方を備える複合部品に組み合わされることがある。当てはまる場合、ここに提示されている様々なハードウェア部品及び/又はロジック部品は、本開示の範囲から離れずに、ソフトウェア、ハードウェア及び/又はその両方を備えるサブ部品に分離されることがある。加えて、当てはまる場合には、ソフトウェア部品は、ハードウェア部品として実施され得るし、また逆も同様であると考えられる。
前述の開示は、本開示を、開示されている、まさにその形態や特定の使用分野に限定することを意図したものではない。したがって、明示的に記載され、又は、本願に示唆されているものの何れであっても、様々な代替の実施形態及び/又は本開示の変形例が、本開示に照らして可能であると考えられる。例えば、ここに開示された低遅延デシメータと低遅延インターポレータは、動的ノイズキャンセレーションシステムを参照して説明しているが、ここに開示された低遅延フィルタは、他の信号処理システムにおいても使用され得ると理解されよう。本開示の上記された実施形態をもってすれば、当業者は、本開示の範囲から離れることなく形態及び詳細において変更がなされ得ると認識するであろう。したがって、本開示は、クレームによってのみ限定される。

Claims (20)

  1. 環境ノイズを検出し、ノイズ信号を生成するように動作可能な音声センサと、
    音声信号を受け取り、インターポレーションフィルタによって前記音声信号を処理し、第1サンプル周波数を有する主音声信号を生成するように動作可能な音声処理パスと、
    前記ノイズ信号を受け取り、対応するアンチノイズ信号を生成するように動作可能な動的ノイズキャンセレーションプロセッサと、
    前記アンチノイズ信号を受け取り、前記第1サンプル周波数を有するアップサンプリング後アンチノイズ信号を生成するように動作可能な直接インターポレータと、
    前記主音声信号と前記アップサンプリング後アンチノイズ信号とを受け取り、結合出力信号を生成するように動作可能な加算器と、
    前記結合出力信号を処理するように動作可能な低遅延フィルタと、
    を備える
    システム。
  2. 前記低遅延フィルタが、それぞれが異なるサンプル周波数でフィルタリングを行う複数のフィルタを備えている
    請求項1に記載のシステム。
  3. 前記低遅延フィルタは、直列配置で設けられた複数の格子波フィルタを備えており、
    前記複数の格子波フィルタのそれぞれは、異なる周波数帯域を処理する
    請求項2に記載のシステム。
  4. 前記サンプル周波数は、各連続するフィルタで、整数倍で増加される
    請求項3に記載のシステム。
  5. 前記格子波フィルタが、複数の遅延要素を備えており、
    特定の出力サンプル周波数での直接サンプリングが、複数のフィルタをインターレースすることで行われる
    請求項3に記載のシステム。
  6. N個の遅延要素がリフレクター部(2ポートアダプタ)に設けられ、1つのパスがN/2個の遅延要素で遅延され、他の1つのパスが入力信号に直接接続され、
    Nは、1連の2の累乗数である
    請求項5に記載のシステム。
  7. 各格子波フィルタは、Nを1より大きい整数として、それぞれがN単位遅延で遅延される複数のリフレクター要素(2ポートアダプタ)を備える1つのパスと、Mを1より大きい整数として、M個の遅延要素を含む1つのパスとを含む2つのパスを備えている
    請求項3に記載のシステム。
  8. 前記動的ノイズキャンセレーションプロセッサが、更に、filtered-X最小二乗法処理を用いてフィルタ係数を計算することで前記アンチノイズ信号を得るように動作可能な
    請求項1に記載のシステム。
  9. 前記直接インターポレータが、オーバーフローを回避するように前記アンチノイズ信号の最上位ビットを拡張するように動作可能な符号拡張段と、前記アップサンプリング後アンチノイズ信号におけるビット数を低減するようにクリッピングを行うように動作可能なリミッターとを備えている。
    請求項1に記載のシステム。
  10. 複数のリフレクター要素(2ポートアダプタ)を備え、各リフレクター要素がN個(Nは、2より大きい整数)の遅延要素によって遅延される第1パスと、
    M個(Mは、1より大きい整数)の遅延要素によって遅延される第2パスと
    を備える第1格子波フィルタを備える
    システム。
  11. 第1サンプル周波数を有する主音声信号を受け取って処理する音声処理パスと、
    前記主音声信号を第2サンプル周波数にダウンサンプリングするように動作可能なデシメータと、前記第2サンプル周波数で前記主音声信号とノイズ信号とを受け取り前記第2サンプル周波数を有するアンチノイズ信号を生成するように動作可能な動的ノイズキャンセレーションプロセッサと、前記アンチノイズ信号を前記第1サンプル周波数にアップサンプリングするように動作可能なインターポレータとを備える動的ノイズキャンセレーションパスと、
    前記アンチノイズ信号と前記主音声信号とを前記第1サンプル周波数で結合するように動作可能な加算器と
    を備える動的ノイズキャンセレーションシステムを更に備え、
    前記デシメータが、前記第1格子波フィルタを備え、前記インターポレータが、N個の遅延要素とM個の遅延要素をそれぞれ備える2つのパスを有する第2格子波フィルタを備えている
    請求項10のシステム。
  12. 環境ノイズを検出して対応する電気信号を生成するように構成されたマイクロホンと前記第2サンプル周波数で前記ノイズ信号を生成する低遅延デシメータと
    を更に備える
    請求項11のシステム。
  13. 前記第1サンプル周波数に整合する入出力サンプル周波数を有するオーバーサンプルドインターポレーションフィルタを更に備え
    前記オーバーサンプルドインターポレーションフィルタが、前記動的ノイズキャンセレーションパスの前記インターポレータによって生成された偽イメージを除去するように動作可能である
    請求項11のシステム。
  14. 前記第1格子波フィルタと前記第2格子波フィルタとのそれぞれは、各段が2倍で動作サンプルレートを変化させる多段ステージ格子波フィルタ構成を備えている
    請求項11のシステム。
  15. 前記デシメータ及びインターポレータのそれぞれは、オーバーフローを避けるように受信信号の最上位ビットを拡張するように動作可能である符号拡張段と、出力ビットの数を低減するようにクリッピングを行うように動作可能なリミッターとを備える
    請求項14のシステム。
  16. 環境ノイズを検出してノイズ信号を生成することと、
    インターポレーションフィルタで音声信号を処理して第1サンプル周波数を有する主音声信号を生成することと、
    前記ノイズ信号から第2サンプル周波数を有するアンチノイズ信号を生成することと、
    前記アンチノイズ信号を直接内挿することで前記第1サンプル周波数を有するアップサンプリング後アンチノイズ信号を生成することと、
    前記主音声信号と前記アップサンプリング後アンチノイズ信号とを結合して結合出力信号を生成することと、
    低遅延フィルタで前記結合出力信号を処理することと
    を含む
    方法。
  17. フィルタリングが、直列配置に設けられた複数の格子波フィルタを適用することを含み、
    前記格子波フィルタのそれぞれが、各連続するフィルタで逐次に変化する異なるサンプル周波数を処理する
    請求項16に記載の方法。
  18. 直接内挿することは、オーバーフローを回避するように前記アンチノイズ信号の最上位ビットを拡張することと、前記アップサンプリング後アンチノイズ信号の出力ビット数を低減するようにクリッピングを行うこととを含む
    請求項16に記載の方法。
  19. 前記主音声信号を間引いて前記主音声信号を前記第2サンプル周波数にダウンサンプリングすることを更に含み、
    前記ノイズ信号から前記第2サンプル周波数を有する前記アンチノイズ信号を生成することは、更に、ダウンサンプリングされた前記主音声信号を分析することを含む
    請求項16の方法。
  20. 前記ノイズ信号から前記第2サンプル周波数を有する前記アンチノイズ信号を生成することは、filtered-X最小二乗法処理を用いてフィルタ係数を計算することを含む
    請求項16の方法。
JP2020522813A 2017-10-31 2018-10-31 低遅延デシメータ及びインターポレータフィルタ Active JP7282761B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762579809P 2017-10-31 2017-10-31
US62/579,809 2017-10-31
PCT/US2018/058574 WO2019089845A1 (en) 2017-10-31 2018-10-31 Low delay decimator and interpolator filters

Publications (3)

Publication Number Publication Date
JP2021501359A true JP2021501359A (ja) 2021-01-14
JP2021501359A5 JP2021501359A5 (ja) 2021-09-30
JP7282761B2 JP7282761B2 (ja) 2023-05-29

Family

ID=66245756

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020522813A Active JP7282761B2 (ja) 2017-10-31 2018-10-31 低遅延デシメータ及びインターポレータフィルタ

Country Status (5)

Country Link
US (1) US10904661B2 (ja)
EP (1) EP3704796B1 (ja)
JP (1) JP7282761B2 (ja)
CN (1) CN111566934B (ja)
WO (1) WO2019089845A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10810990B2 (en) * 2018-02-01 2020-10-20 Cirrus Logic, Inc. Active noise cancellation (ANC) system with selectable sample rates
TWI760676B (zh) * 2020-01-07 2022-04-11 瑞昱半導體股份有限公司 具有抗噪機制的音訊播放裝置及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1168570A (ja) * 1997-08-22 1999-03-09 Sanyo Electric Co Ltd デルタ・シグマ型d/a変換器
JP2004120182A (ja) * 2002-09-25 2004-04-15 Sanyo Electric Co Ltd デシメーションフィルタおよびインターポレーションフィルタ
JP2008250270A (ja) * 2007-03-02 2008-10-16 Sony Corp 信号処理装置、信号処理方法
JP2013532308A (ja) * 2010-06-01 2013-08-15 クゥアルコム・インコーポレイテッド オーディオ等化のためのシステム、方法、デバイス、装置、およびコンピュータプログラム製品
JP2014519758A (ja) * 2011-06-03 2014-08-14 シラス ロジック、インコーポレイテッド パーソナルオーディオデバイスのための適合的ノイズキャンセリングアーキテクチャ

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6442581B1 (en) * 1999-09-21 2002-08-27 Creative Technologies Ltd. Lattice structure for IIR and FIR filters with automatic normalization
US8094046B2 (en) * 2007-03-02 2012-01-10 Sony Corporation Signal processing apparatus and signal processing method
GB0725111D0 (en) * 2007-12-21 2008-01-30 Wolfson Microelectronics Plc Lower rate emulation
US8135140B2 (en) * 2008-11-20 2012-03-13 Harman International Industries, Incorporated System for active noise control with audio signal compensation
EP2216774B1 (en) * 2009-01-30 2015-09-16 Harman Becker Automotive Systems GmbH Adaptive noise control system and method
US8737636B2 (en) * 2009-07-10 2014-05-27 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for adaptive active noise cancellation
US10115386B2 (en) * 2009-11-18 2018-10-30 Qualcomm Incorporated Delay techniques in active noise cancellation circuits or other circuits that perform filtering of decimated coefficients
US8526628B1 (en) * 2009-12-14 2013-09-03 Audience, Inc. Low latency active noise cancellation system
EP2803137B1 (en) * 2012-01-10 2016-11-23 Cirrus Logic International Semiconductor Limited Multi-rate filter system
WO2016054186A1 (en) * 2014-09-30 2016-04-07 Avnera Corporation Acoustic processor having low latency
US9609451B2 (en) * 2015-02-12 2017-03-28 Dts, Inc. Multi-rate system for audio processing

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1168570A (ja) * 1997-08-22 1999-03-09 Sanyo Electric Co Ltd デルタ・シグマ型d/a変換器
JP2004120182A (ja) * 2002-09-25 2004-04-15 Sanyo Electric Co Ltd デシメーションフィルタおよびインターポレーションフィルタ
JP2008250270A (ja) * 2007-03-02 2008-10-16 Sony Corp 信号処理装置、信号処理方法
JP2013532308A (ja) * 2010-06-01 2013-08-15 クゥアルコム・インコーポレイテッド オーディオ等化のためのシステム、方法、デバイス、装置、およびコンピュータプログラム製品
JP2014519758A (ja) * 2011-06-03 2014-08-14 シラス ロジック、インコーポレイテッド パーソナルオーディオデバイスのための適合的ノイズキャンセリングアーキテクチャ

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
HAKAN JOHANSSON: "DESIGN OF BIRECIPROCAL LINEAR-PHASE LATTICE WAVE DIGITAL FILTERS", [ONLINE], JPN6022032635, January 1996 (1996-01-01), pages 1 - 17, XP055617820, ISSN: 0004849712 *

Also Published As

Publication number Publication date
EP3704796B1 (en) 2024-03-06
EP3704796A1 (en) 2020-09-09
WO2019089845A1 (en) 2019-05-09
US20190132679A1 (en) 2019-05-02
CN111566934A (zh) 2020-08-21
EP3704796A4 (en) 2021-10-27
JP7282761B2 (ja) 2023-05-29
US10904661B2 (en) 2021-01-26
CN111566934B (zh) 2024-04-09

Similar Documents

Publication Publication Date Title
US8611551B1 (en) Low latency active noise cancellation system
US8953813B2 (en) Reduced delay digital active noise cancellation
US10115386B2 (en) Delay techniques in active noise cancellation circuits or other circuits that perform filtering of decimated coefficients
US8848935B1 (en) Low latency active noise cancellation system
KR101393756B1 (ko) 디지털 필터 회로, 디지털 필터 프로그램 및 노이즈 캔슬링시스템
JP4882773B2 (ja) 信号処理装置、信号処理方法
EP2301152A1 (en) System and method for processing a signal with a filter employing fir and iir elements
US20040263363A1 (en) Rational sample rate conversion
WO2014100165A1 (en) Digital microphone with frequency booster
JP7282761B2 (ja) 低遅延デシメータ及びインターポレータフィルタ
US10186249B1 (en) Active noise cancellation system
US10848131B1 (en) Low power lattice wave filter systems and methods
JP5353748B2 (ja) 雑音除去装置および雑音除去方法
JP4549535B2 (ja) 計算を簡単にした周波数濾波用デジタル処理装置
JP2007235502A (ja) オーディオ通信システム
US10972123B1 (en) Signal processing structure
WO2020223065A1 (en) Multichannel, multirate, lattice wave filter systems and methods
US20240054988A1 (en) Reduced Complexity Implementation for Acoustic Noise Canceling
JP4443533B2 (ja) サンプリング周波数変換装置における位相管理装置
Allen Sampling of continuous-time signals

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20210526

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210708

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210708

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220721

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220816

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20221114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230116

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230418

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230517

R150 Certificate of patent or registration of utility model

Ref document number: 7282761

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150