JP7203775B2 - コミュニケーションサポートシステム - Google Patents
コミュニケーションサポートシステム Download PDFInfo
- Publication number
- JP7203775B2 JP7203775B2 JP2020001124A JP2020001124A JP7203775B2 JP 7203775 B2 JP7203775 B2 JP 7203775B2 JP 2020001124 A JP2020001124 A JP 2020001124A JP 2020001124 A JP2020001124 A JP 2020001124A JP 7203775 B2 JP7203775 B2 JP 7203775B2
- Authority
- JP
- Japan
- Prior art keywords
- sound
- sound collection
- collection control
- support system
- microphone units
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/009—Teaching or communicating with deaf persons
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L21/10—Transforming into visible information
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02166—Microphone arrays; Beamforming
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L2021/065—Aids for the handicapped in understanding
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
Description
3 装身具
31 フロントサポーター
32 サイドサポーター
33 レンズ
4 集音装置
41 マイクロフォンユニット
42 集音制御手段
421 集音制御モジュール
422 音声検知モジュール
5 イメージキャプチャー
6 表示装置
61 ディスプレイ手段
62 リモートコントローラ
63 音声認識手段
900 装着者
901 話し手
Claims (6)
- それぞれ独立して周囲の音を収集してデジタルサウンドデータに変換する複数のマイクロフォンユニット及び該複数のマイクロフォンユニットを制御し、且つ、該複数のマイクロフォンユニットからそれぞれ受信した各前記デジタルサウンドデータを変換して分析用サウンドデータとして作成して出力する集音制御手段を有する集音装置と、
前記集音装置に信号的に接続して前記集音装置により出力される前記分析用サウンドデータを分析し、人間の話し声を検出すると、文字列に変換して出力する音声認識手段及び前記音声認識手段から出力される前記文字列を表示するディスプレイ手段を有する表示装置と、を備えており、
前記集音制御手段は、人間の話し声を検出する音声検知モジュールと、全方位集音モード及び指向性集音モードを実行できる集音制御モジュールと、を有するように構成されており、
前記集音制御モジュールは前記全方位集音モードにおいて、1つの前記マイクロフォンユニットを起動して集音を行い、前記音声検知モジュールにより人間の話し声が検出されると、前記集音制御モジュールは前記指向性集音モードに切り替わって2つの前記マイクロフォンユニットを起動して集音を行うと共に、起動中の全ての前記マイクロフォンユニットからそれぞれ受信した各前記デジタルサウンドデータを変換して分析用サウンドデータとして作成して出力するように構成されていることを特徴とするコミュニケーションサポートシステム。 - 前記集音制御手段の前記集音制御モジュールは、異なる方向にそれぞれ対応する複数の前記指向性集音モードを実行できるように構成されており、
前記集音制御モジュールは、前記音声検知モジュールの検知結果に基づいて、最良の信号対雑音比率が得られるよう、各前記指向性集音モードの間に切り替わりながら作動するように構成されていることを特徴とする請求項1に記載のコミュニケーションサポートシステム。 - 装着者の前方の視野を撮影してデジタルイメージデータに変換するイメージキャプチャーを更に備え、
前記集音制御手段の前記集音制御モジュールは、更に方向指定集音モードを実行できるように構成されており、
前記表示装置は、リモートコントローラーとタッチパネルユニットとを有しており、
前記リモートコントローラーを操作することにより前記方向指定集音モードが起動されると、前記集音装置の制御により前記イメージキャプチャーからの画像がリアルタイムで前記タッチパネルユニットに表示されるように転送され、装着者が前記タッチパネルユニットに表示される画像にあるいずれかの1箇所をタッチすると、前記集音制御手段は、該1箇所に対応する方角に向けて集音するように起動する前記マイクロフォンユニットの数量を制御すると共に、集音した前記デジタルサウンドデータに対してビームフォーミングによるフィルタリング処理を実行して前記分析用サウンドデータを作成することを特徴とする請求項1または請求項2に記載のコミュニケーションサポートシステム。 - 装着者が装着可能な装身具を更に備え、前記イメージキャプチャー及び前記複数のマイクロフォンユニットは該装身具に取り付けられていることを特徴とする請求項3に記載のコミュニケーションサポートシステム。
- 前記装身具は眼鏡であり、前記ディスプレイ手段は、前記眼鏡のレンズに画像を投写表示するプロジェクターを有し、前記眼鏡のレンズに前記音声認識手段から出力される前記文字列を表示できることを特徴とする請求項4に記載のコミュニケーションサポートシステム。
- 前記装身具は眼鏡であり、前記ディスプレイ手段は、前記眼鏡のレンズに設置される透明液晶パネルを有し、前記眼鏡のレンズに前記音声認識手段から出力される前記文字列を表示できることを特徴とする請求項4に記載のコミュニケーションサポートシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW108200532 | 2019-01-11 | ||
TW108200532U TWM579809U (zh) | 2019-01-11 | 2019-01-11 | Communication aid system for severely hearing impaired |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020113982A JP2020113982A (ja) | 2020-07-27 |
JP7203775B2 true JP7203775B2 (ja) | 2023-01-13 |
Family
ID=67703382
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020001124A Active JP7203775B2 (ja) | 2019-01-11 | 2020-01-08 | コミュニケーションサポートシステム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20200227067A1 (ja) |
JP (1) | JP7203775B2 (ja) |
CN (1) | CN111435574A (ja) |
TW (1) | TWM579809U (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106782585B (zh) * | 2017-01-26 | 2020-03-20 | 芋头科技(杭州)有限公司 | 一种基于麦克风阵列的拾音方法及系统 |
CN114615609B (zh) * | 2022-03-15 | 2024-01-30 | 深圳市昂思科技有限公司 | 助听器控制方法、助听器设备、装置、设备和计算机介质 |
CN116033312B (zh) * | 2022-07-29 | 2023-12-08 | 荣耀终端有限公司 | 耳机控制方法及耳机 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017521902A (ja) | 2014-05-26 | 2017-08-03 | シャーマン, ウラディミールSHERMAN, Vladimir | 取得した音響信号のための回路デバイスシステム及び関連するコンピュータで実行可能なコード |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101374178B (zh) * | 2007-08-21 | 2011-01-19 | 华硕电脑股份有限公司 | 通讯装置 |
TWI543635B (zh) * | 2013-12-18 | 2016-07-21 | jing-feng Liu | Speech Acquisition Method of Hearing Aid System and Hearing Aid System |
JP6551417B2 (ja) * | 2014-11-12 | 2019-07-31 | 富士通株式会社 | ウェアラブルデバイス、表示制御方法、及び表示制御プログラム |
CN207612422U (zh) * | 2017-12-07 | 2018-07-13 | 杭州蓝斯特科技有限公司 | 一种可视化助听装置 |
CN108538153A (zh) * | 2018-06-11 | 2018-09-14 | 北京佳珥医学科技有限公司 | 音频转换设备 |
-
2019
- 2019-01-11 TW TW108200532U patent/TWM579809U/zh unknown
- 2019-12-05 CN CN201911232700.2A patent/CN111435574A/zh active Pending
-
2020
- 2020-01-08 JP JP2020001124A patent/JP7203775B2/ja active Active
- 2020-01-09 US US16/738,701 patent/US20200227067A1/en not_active Abandoned
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017521902A (ja) | 2014-05-26 | 2017-08-03 | シャーマン, ウラディミールSHERMAN, Vladimir | 取得した音響信号のための回路デバイスシステム及び関連するコンピュータで実行可能なコード |
Also Published As
Publication number | Publication date |
---|---|
TWM579809U (zh) | 2019-06-21 |
CN111435574A (zh) | 2020-07-21 |
US20200227067A1 (en) | 2020-07-16 |
JP2020113982A (ja) | 2020-07-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7203775B2 (ja) | コミュニケーションサポートシステム | |
US9380374B2 (en) | Hearing assistance systems configured to detect and provide protection to the user from harmful conditions | |
US9491553B2 (en) | Method of audio signal processing and hearing aid system for implementing the same | |
CN105981409B (zh) | 会话辅助系统 | |
US20170303052A1 (en) | Wearable auditory feedback device | |
US20150319546A1 (en) | Hearing Assistance System | |
US20100074460A1 (en) | Self-steering directional hearing aid and method of operation thereof | |
JP2017521902A (ja) | 取得した音響信号のための回路デバイスシステム及び関連するコンピュータで実行可能なコード | |
JP2018511212A5 (ja) | ||
US20110096941A1 (en) | Self-steering directional loudspeakers and a method of operation thereof | |
KR100958106B1 (ko) | 골전도 스피커 및 넥마이크를 구비한 다기능 헤드셋 | |
WO2015109002A2 (en) | Hearing assistance system | |
US11689869B2 (en) | Hearing device configured to utilize non-audio information to process audio signals | |
WO2016167877A1 (en) | Hearing assistance systems configured to detect and provide protection to the user harmful conditions | |
JP2020113981A (ja) | 補聴器システム | |
JP6290827B2 (ja) | オーディオ信号を処理する方法及び補聴器システム | |
CN111128180A (zh) | 一种听力障碍者的辅助对话系统 | |
EP2107826A1 (en) | A directional hearing aid system | |
KR20100014752A (ko) | 골전도 스피커 및 넥마이크를 구비한 다기능 헤드셋 | |
CN219353890U (zh) | 一种健康监测与辅听装置 | |
CN215010233U (zh) | 一种助听智能手环 | |
WO2023007840A1 (ja) | 通話装置 | |
JP2021026098A (ja) | コミュニケーション支援装置 | |
JP2022116869A (ja) | コミュニケーション支援装置、コミュニケーション支援システム | |
KR20230109000A (ko) | 청각장애인을 위한 스마트 글래스 시스템 및 이의 제어 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210817 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220831 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220906 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7203775 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |