JP2021124659A - 音声漏洩防止装置および音声漏洩防止プログラム - Google Patents
音声漏洩防止装置および音声漏洩防止プログラム Download PDFInfo
- Publication number
- JP2021124659A JP2021124659A JP2020019521A JP2020019521A JP2021124659A JP 2021124659 A JP2021124659 A JP 2021124659A JP 2020019521 A JP2020019521 A JP 2020019521A JP 2020019521 A JP2020019521 A JP 2020019521A JP 2021124659 A JP2021124659 A JP 2021124659A
- Authority
- JP
- Japan
- Prior art keywords
- room
- sound
- sound data
- voice
- speaker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000002265 prevention Effects 0.000 title claims abstract description 32
- 230000007613 environmental effect Effects 0.000 claims abstract description 85
- 238000012545 processing Methods 0.000 claims abstract description 49
- 238000005192 partition Methods 0.000 claims abstract description 23
- 230000006870 function Effects 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 7
- 238000004891 communication Methods 0.000 description 28
- 230000000873 masking effect Effects 0.000 description 21
- 239000000284 extract Substances 0.000 description 5
- 230000002452 interceptive effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000013441 quality evaluation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Landscapes
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
Abstract
Description
例えば、非特許文献1には、マスキング音の基本的な説明と、マスキング音の生成についての説明が記載されている。
これは、特許文献1に記載のマスキング音生成システムが、話者と聴者とが同じ場所に所在したところに設置されることを想定しているためである。
そうした場合では、薄い区画壁では、会議室の会話がオフィスに漏れることがある。このとき、特許文献1に記載のマスキング音生成システムが、オフィスに設置されていると、オフィスでの環境音を中心にマスキング音が生成されるため、会議室から漏れる音声がそのままオフィスに聞こえてしまう可能性がある。
前記第1装置は、前記第1マイクからの室内音を前記室内音データに変換する第1音声処理手段と、前記第1マイクからの環境音を前記環境音データに変換する第2音声処理手段と、前記妨害音データに基づいて、前記スピーカーから妨害音を放音させる音声出力制御手段とを備え、前記第2装置は、前記プロファイル生成手段と、前記会話音声抽出手段と、前記妨害音生成手段とを備えたものとすることができる。
秘匿化手段が、室内音データと環境音データとを間引いて第2装置に送信するため、第1部屋の会話や第2部屋での会話を電気通信回線へ送信しても、悪意あるものが電気通信回線に流れる音声データを盗聴して会話を復元することが防止できる。
図1に示すように音声漏洩防止装置は、第1装置である制御装置10と、第2装置である処理装置20とから構成される。
制御装置10は、企業Cを設置場所として設置されたローカル装置として機能するコンピュータである。
処理装置20は、制御装置10と、電気通信回線の一例であるインターネットNを介して通信可能に接続されたクラウド装置として機能するコンピュータである。
第1マイクM1は、会議室C1内に設置されている。第1マイクM1は、話者の音声を集音する。第2マイクM2は、会議室C1の外部となるオフィスC2内に設置されている。第2マイクM2は、オフィスC2内の音声である環境音を集音する。また、スピーカーSは、オフィスC2に向けて設置されている。スピーカーSは、妨害音を発生して放音する。
また、制御装置10には、スマートフォンPとの無線信号を送受信する無線ルータ装置Rが接続されている。
また、無線ルータ装置Rは、ハブとしての機能を有しており、図示しない中継装置を介してインターネットNに接続されている。
図2に示すように、制御装置10は、通信手段11と、第1音声処理手段12と、第2音声処理手段13と、秘匿化手段14と、音声出力制御手段15と、記憶手段16とを備えている。
通信手段11が無線ルータ装置Rを介してインターネットNに接続する場合には、1000Base−TなどのLANとすることができる。また、通信手段11が無線通信網と通信する場合には、3G〜5G、LTE等とすることができる。
通信手段11は、BLUETOOTH(登録商標)や、その他の近距離無線通信機能を有することができ、この機能により、直接、スマートフォンPと通信することができる。
このとき、この無線通信機能は、会議室C1側に指向性を有することもできる。通信手段11は、近距離(会議室内に在室状態)にある社員が携帯するスマートフォンPであり、識別情報により固体識別されるスマートフォンPとの通信ログ情報を取得し、記憶手段16に格納することができる。
第1音声処理手段12は、第1マイクM1により、図1に示す会議室C1内の話者の音声およびオフィスC2から会議室C1に漏れた環境音を、室内音として集音したアナログ信号である集音信号をデジタル信号である室内音データにAD変換して、記憶手段16に格納する。
第2音声処理手段13は、第2マイクM2によりオフィスC2の話者の音声およびオフィスC2の雑音、外部からの雑音を集音したアナログ信号である環境音信号をデジタル信号である環境音データにAD変換して、記憶手段16に格納する。
音声出力制御手段15は、処理装置20からの妨害音データからアナログ信号である妨害音を発生してスピーカーSから放音する。また、音声出力制御手段15は、スマートフォンPからの音量指示に基づいて、スピーカーSからの音量を調整する。
記憶手段16は、OS(オペレーティングシステム)やアプリケーションソフト、各種の設定、音声データ(室内音データ,環境音データ,妨害音データ)、スマートフォンPを所持する話者を識別するための識別情報を含む通信ログ情報などが格納される。記憶手段16は、ハードディスクドライブとしたり、フラッシュメモリを使用したSSD(ソリッドステートドライブ)としたりすることができる。
処理装置20は、通信手段21と、プロファイル生成手段22と、会話音声抽出手段23と、妨害音生成手段24と、記憶手段25とを備えている。
通信手段21は、インターネットNからの情報を受信して、処理装置20の各手段へ出力したり、各手段からの情報を入力してインターネットNへ送信したりする。通信手段21は、LANとすることができる。
また、プロファイル生成手段22は、環境音の周波数成分を周波数要素データとし、集音時間を時間要素データとして、時間と共に変化する環境音を機械学習により、環境音プロファイル更新・蓄積することもできる。
更に、プロファイル生成手段22が機械学習により環境音プロファイル更新・蓄積するときには、環境音データの録音時刻と、同時刻のスマートフォンPとの通信ログ情報に含まれた識別情報も合わせて機械学習させることにより、環境音に含まれる社員の声の識別に用いることができる。
妨害音生成手段24は、話者音声成分に基づいて、妨害音(マスキング音)となる妨害音データを生成して、通信手段21を介して制御装置10へ送信する。
記憶手段25は、制御装置10の記憶手段16と同様に、OSやアプリケーションソフト、各種の設定、音声データ(室内音データ,環境音データ,妨害音データ)、スマートフォンPと制御装置10との通信ログ情報などが格納される。
スマートフォンPは、WiFi(登録商標)により無線ルータ装置Rを介して、またはBLUETOOTH、その他の近距離無線通信により、直接、制御装置10と通信することができる。また、スマートフォンPは、図1に示すように、携帯電話会社の基地局または中継局などの通信基地Tを介して、インターネットNを通じて、制御装置10と通信することができる。
まず、図4に示す第2マイクM2により、オフィスC2の話者の音声と、オフィスC2の雑音を、環境音として集音する(S10参照)。図2に示す制御装置10では、第2音声処理手段13が、環境音を環境音データに変換して、記憶手段16に格納する。
次に、秘匿化手段14が、環境音データを記憶手段16から読み出し、例えば、所定時間ごとに間引いて処理装置20へ送信する(S20参照)。例えば、環境音データから、数秒間分を抽出し、数秒間を空けて、また数秒間分を抽出して連結することを繰り返して、秘匿化された環境音データとすることができる。
制御装置10の第2音声処理手段13は、継続的に環境音データを、処理装置20へ送信することで、処理装置20のプロファイル生成手段22は、環境音プロファイルが記憶手段25に蓄積される(S30参照)。
図4に示す会議室C1にて会議が行われると、会議での話者の音声や、会議室C1に漏れ聞こえるオフィスC2の話者の音声とオフィスC2の雑音とが、第1マイクM1により室内音として集音される(S40参照)。
次に、秘匿化手段14が、室内音データを記憶手段16から読み出し、例えば、所定時間ごとに間引いて処理装置20へ送信する(S50参照)。例えば、環境音データのときと同様に、室内音データから、数秒間分を抽出し、数秒間を空けて、また数秒間分を抽出して連結することを繰り返して、秘匿化された室内音データとすることができる。
このとき、秘匿化手段14は、記憶手段16に格納されたスマートフォンPの識別情報も一緒に通信手段11を介して処理装置20へ送信する。
妨害音生成手段24は、妨害音データを制御装置10へ送信する(S70参照)。
このとき、スマートフォンPを携帯する社員が、スマートフォンPにて動作する、音量調整を行うアプリケーションソフトを起動して、ボリュームを調整すれば、指定された音量が、無線ルータ装置Rを介して、制御装置10へ送信される。
制御装置10では、通信手段11を介して受信した音量に基づいて、音声出力制御手段15が、指示された音量に、妨害音を調整する。
従って、制御装置10の秘匿化手段14が、音声データを間引いて処理装置20に送信するため、会議室C1の会話やオフィスC2の会話をインターネットNへ送信しても、悪意あるものが音声データを盗聴して会話を復元することが防止できる。
しかし、制御装置10に含まれる、第1音声処理手段12、第2音声処理手段13、秘匿化手段14、音声出力制御手段15、記憶手段16と、処理装置20に含まれる、プロファイル生成手段22、会話音声抽出手段23、妨害音生成手段24、記憶手段25とを同じ装置内に収容することで、制御装置10と処理装置20とを1台の装置で構成することもできる。
11 通信手段
12 第1音声処理手段
13 第2音声処理手段
14 秘匿化手段
15 音声出力制御手段
16 記憶手段
20 処理装置
21 通信手段
22 プロファイル生成手段
23 会話音声抽出手段
24 妨害音生成手段
25 記憶手段
C 企業
C1 会議室
C2 オフィス
M1 第1マイク
M2 第2マイク
S スピーカー
W 区画壁
P スマートフォン
R 無線ルータ装置
N インターネット
T 通信基地
Claims (5)
- 第1部屋に設置された第1マイクにより集音された室内音データと、前記第1部屋と区画壁により隣接する第2部屋に設置された第2マイクにより集音された環境音データとに基づいて、前記第1部屋での会話が前記区画壁から前記第2部屋へ漏洩することを妨害する妨害音データを生成し、前記妨害音データに基づいて前記第2部屋へ向けたスピーカーから妨害音を放音するものであり、
前記環境音データに基づいて、前記第2部屋にて集音される環境音の特徴を抽出し、環境音プロファイルを生成するプロファイル生成手段と、
前記環境音プロファイルに基づいて、前記室内音データから環境音成分を除去することで、前記第1部屋での会話である話者音声成分を抽出する会話音声抽出手段と、
前記話者音声成分に基づいて、妨害音データを生成する妨害音生成手段とを備えた音声漏洩防止装置。 - 前記妨害音生成手段は、前記第1部屋に所在する話者が携帯する端末装置の識別情報に話者音声成分を関連付けることで、前記第1部屋での話者を特定して、前記識別情報に応じた妨害音データを生成する請求項1記載の音声漏洩防止装置。
- 前記第1マイクと前記第2マイクと前記スピーカーとが接続された1以上の第1装置と、前記第1装置と電気通信回線を介して通信可能に接続された第2装置により構成され、
前記第1装置は、前記第1マイクからの室内音を前記室内音データに変換する第1音声処理手段と、前記第1マイクからの環境音を前記環境音データに変換する第2音声処理手段と、前記妨害音データに基づいて、前記スピーカーから妨害音を放音させる音声出力制御手段とを備え、
前記第2装置は、前記プロファイル生成手段と、前記会話音声抽出手段と、前記妨害音生成手段とを備えた請求項1または2記載の音声漏洩防止装置。 - 前記第1装置から送信される前記室内音データと前記環境音データとを間引いて前記第2装置へ送信する秘匿化手段を備えた請求項3記載の音声漏洩防止装置。
- 第1部屋に設置された第1マイクにより集音された室内音データと、前記第1部屋と区画壁により隣接する第2部屋に設置された第2マイクにより集音された環境音データとに基づいて、前記第1部屋での会話が前記区画壁から前記第2部屋へ漏洩することを妨害する妨害音データを生成し、前記妨害音データに基づいて前記第2部屋へ向けたスピーカーから妨害音を放音するためにコンピュータを機能させる音声漏洩防止プログラムであり、
前記コンピュータを、
前記環境音データに基づいて、前記第2部屋にて集音される環境音の特徴を抽出し、環境音プロファイルを生成するプロファイル生成手段、
前記環境音プロファイルに基づいて、前記室内音データから環境音成分を除去することで、前記第1部屋での会話である話者音声成分を抽出する会話音声抽出手段、
前記話者音声成分に基づいて、妨害音データを生成する妨害音生成手段として機能させる音声漏洩防止プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020019521A JP7384397B2 (ja) | 2020-02-07 | 2020-02-07 | 音声漏洩防止装置および音声漏洩防止プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020019521A JP7384397B2 (ja) | 2020-02-07 | 2020-02-07 | 音声漏洩防止装置および音声漏洩防止プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021124659A true JP2021124659A (ja) | 2021-08-30 |
JP7384397B2 JP7384397B2 (ja) | 2023-11-21 |
Family
ID=77458754
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020019521A Active JP7384397B2 (ja) | 2020-02-07 | 2020-02-07 | 音声漏洩防止装置および音声漏洩防止プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7384397B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0595550A (ja) * | 1991-10-01 | 1993-04-16 | Nec Corp | 会議電話用騒音除去回路 |
JP2008124918A (ja) * | 2006-11-14 | 2008-05-29 | Yamaha Corp | マスキング装置およびマスキングシステム |
JP2011170113A (ja) * | 2010-02-18 | 2011-09-01 | Glory Ltd | 会話保護度合評価システムおよび会話保護度合評価方法 |
JP2012098632A (ja) * | 2010-11-05 | 2012-05-24 | Yamaha Corp | マスカ音出力装置及び音声通話装置 |
JP2013015726A (ja) * | 2011-07-05 | 2013-01-24 | Yamaha Corp | 音声記録サーバ装置及び音声記録システム |
-
2020
- 2020-02-07 JP JP2020019521A patent/JP7384397B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0595550A (ja) * | 1991-10-01 | 1993-04-16 | Nec Corp | 会議電話用騒音除去回路 |
JP2008124918A (ja) * | 2006-11-14 | 2008-05-29 | Yamaha Corp | マスキング装置およびマスキングシステム |
JP2011170113A (ja) * | 2010-02-18 | 2011-09-01 | Glory Ltd | 会話保護度合評価システムおよび会話保護度合評価方法 |
JP2012098632A (ja) * | 2010-11-05 | 2012-05-24 | Yamaha Corp | マスカ音出力装置及び音声通話装置 |
JP2013015726A (ja) * | 2011-07-05 | 2013-01-24 | Yamaha Corp | 音声記録サーバ装置及び音声記録システム |
Also Published As
Publication number | Publication date |
---|---|
JP7384397B2 (ja) | 2023-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8538492B2 (en) | System and method for localized noise cancellation | |
US20150358768A1 (en) | Intelligent device connection for wireless media in an ad hoc acoustic network | |
KR101731714B1 (ko) | 음질 개선을 위한 방법 및 헤드셋 | |
US20160275961A1 (en) | Structure for multi-microphone speech enhancement system | |
KR20160046863A (ko) | 주변 환경으로부터 대화의 프라이버시를 보호하는 방법 | |
US20150358767A1 (en) | Intelligent device connection for wireless media in an ad hoc acoustic network | |
US9800220B2 (en) | Audio system with noise interference mitigation | |
US10529358B2 (en) | Method and system for reducing background sounds in a noisy environment | |
US9900735B2 (en) | Communication systems | |
JP6308533B2 (ja) | 補聴器システムの作動方法および補聴器システム | |
CN114746937A (zh) | 用于嘈杂的环境中的谈话隔离和安全性的使用深度神经网络动态频谱掩膜的参与者调谐过滤 | |
JP2021124659A (ja) | 音声漏洩防止装置および音声漏洩防止プログラム | |
JP6580362B2 (ja) | 会議決定方法およびサーバ装置 | |
JP5707871B2 (ja) | 音声通話装置及び携帯電話 | |
CN205004029U (zh) | 阵列式声音掩蔽器 | |
US20220208165A1 (en) | Open active noise cancellation system | |
US10997984B2 (en) | Sounding device, audio transmission system, and audio analysis method thereof | |
US9455678B2 (en) | Location and orientation based volume control | |
JP2020065186A (ja) | 通信装置、通信システム、及び通信方法 | |
CN205028649U (zh) | 多通道声音掩蔽器 | |
WO2024004006A1 (ja) | チャット端末、チャットシステム、およびチャットシステムの制御方法 | |
CN113259823B (zh) | 用于自动设置听力装置的信号处理的参数的方法 | |
US20230206936A1 (en) | Audio device with audio quality detection and related methods | |
US20230206941A1 (en) | Audio system, audio device, and method for speaker extraction | |
EP4335113A1 (en) | Systems and methods for sound processing in personal protective equipment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220913 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230530 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230807 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231010 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231101 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7384397 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |