JP5028051B2 - 発話・飲食状態検出システム - Google Patents
発話・飲食状態検出システム Download PDFInfo
- Publication number
- JP5028051B2 JP5028051B2 JP2006242312A JP2006242312A JP5028051B2 JP 5028051 B2 JP5028051 B2 JP 5028051B2 JP 2006242312 A JP2006242312 A JP 2006242312A JP 2006242312 A JP2006242312 A JP 2006242312A JP 5028051 B2 JP5028051 B2 JP 5028051B2
- Authority
- JP
- Japan
- Prior art keywords
- state
- microphone
- utterance
- detection system
- eating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本例では、発話、飲食時の周波数スペクトルの差異を利用する。図2は、周波数パターンデータの例を示す。図2の(a)は、発話時の周波数パターンデータであり、0〜3KHzの範囲を示す。100Hz付近や1kHz弱のところで安定して突出している周波数成分が存在していることがわかる。図2の(b)は、咀嚼時の周波数パターンデータであり、0〜3KHzの範囲を示す。こちらは安定して突出している周波数成分がなく、パターンが広がっていて偏りがない。
(2)次に、信号処理部120は体内音マイク102aで検出された音声信号のノイズの除去、増幅処理を行い(AD変換などで)取得する。ここで、体内音マイク102aからの信号を出力信号という。また、信号処理部120で、何らかの処理が施された後の信号を、出力データという。
(4)状態判定部140では一定時間において取得した周波数パターンデータの分布を調べる。周波数幅に広がりがある場合は「飲食状態」、周波数分布が特定成分に偏っている場合には「発話状態」と判定する。
ここで「最大飲食検出回数」は一定時間に発生しうる飲食検出回数の最大値である。
判定結果 (検出回数/最大検出回数)×100%
食事状態 (飲食検出回数/最大飲食検出回数)×100%
25%以上
会話状態 (発話検出回数/最大発話検出回数)×100%
25%以上
未検出状態 上記以外
次に、本実施例の変形例について説明する。基本構成は、上述の周波数分布による方法と同じである。
(4)このように、周波数分布による方法と同様に、会話状態と食事状態を検出することが可能である。
次に、本実施例の変形例について説明する。図3は機能ブロックを示す。図4は、原理を説明する図である。本例では、帯域フィルタ(バンド・パス・フィルタ、BPF)を用いる。フィルタの中心周波数は、発話時の基本周波数である。
(1)帯域フィルタ部401は体内音マイク信号MS1をフィルタリングし、信号増幅部121aへ入力する。上述したように、フィルタの中心周波数は発話時の基本周波数である。
(2)信号増幅部121aは、入力信号を増幅し、AD変換部122aへ入力する。
(3)信号増幅部121bは、体内音マイク信号MS1を増幅し、AD変換部122bへ入力する。
(4)AD変換部122aは所定時間、AD変換値を取得し、サンプリングデータ記憶部201aに記憶する。AD変換部122bは所定時間、AD変換値を取得し、サンプリングデータ記憶部201bに記憶する。
(6)コンパレータ部124aは閾値記憶部204aにあらかじめ記憶された閾値TH1と入力されたパワー値PD1を比較し、パワー値PD1が閾値TH1以上の場合に検出信号DS1を判定部142へ出力する。コンパレータ部124bも同様の処理を行い、検出信号DS2を判定部142へ出力する。
検出信号1
検出信号2 なし あり
なし −− −−
あり 飲食 発話
次に、他の変形例について説明する。本例では、周波数スペクトルデータを用いて判定を行う。図5は、本例の機能ブロックを示している。
(2)AD変換部122では一定時間、AD変換値を取得し、サンプリングデータ記憶部201に記憶する。
(4)判定部142では入力された周波数スペクトルデータSDとパターンデータ記憶部504にあらかじめ記憶された発話/飲食状態用パターンデータPDのパターンマッチングを行い、「発話状態」、「飲食状態」の判定を行い、結果を出力する。これにより、発話状態と飲食状態との判定を行うことができる。
図7に示すように、ここでは体内音マイク102aで取得できる音と、体外音マイク102bで取得できる音の組み合わせにより、発話状態と飲食状態を検出する。
マイクの組み合わせによる検出状態
検出状態 体内音マイク検出 体外音マイク検出
飲食検出状態 あり なし
発話検出状態 あり あり
外部音検出状態 なし あり
未検出状態 なし なし
次に、変形例について図8に基づいて説明する。図8は、本例の機能ブロックを示している。
検出信号DS1 検出信号DS2
発話状態 有り 有り
飲食状態 有り 無し
次に、さらに他の変形例について図9に基づいて説明する。信号増幅部121aは体内音マイク信号MS1を増幅し、AD変換部122aへ入力する。信号増幅部121bは体外音マイク信号MS2を増幅し、AD変換部122bへ入力する。
例)食事の回数が減っている、不規則、時間が短い⇒健康状態が心配される。
会話の回数が減っている、会話時間が短い⇒落ち込んでいる、対人関係に課題を抱えている。
また、上記各実施例において、体内音マイクとして、骨伝導マイクのイヤフォン型のものを用いることができる。これにより、従来の箱型の大きさの装置を装着することに比べれば装着することに対する違和感を軽減可能である。
102a 体内音マイク
120 信号処理部
121、121a、121b 信号増幅部
122、122a、122b AD変換部
102b 体外音マイク
124a、124b コンパレータ部
122a、122b AD変換部
140 状態判定部
141 条件テーブル記憶部
142 判定部
201、201a、201b サンプリングデータ記憶部
202a、202b パワー算出部
203a、203b 閾値比較部
204a、204b 閾値記憶部
401 帯域フィルタ部
503 FFT演算部
504 パターンデータ記憶部
Claims (9)
- 体内音を検出するための体内音マイクと、
体外音を検出するための体外音マイクと、
前記体内音マイク及び前記体外音マイクからの出力信号を演算処理し、出力データを出力する信号処理部と、
前記出力データに基づいて発話状態または飲食状態を判定する状態判定部と、を有し、 前記信号処理部は、出力信号の信号強度を算出し、前記信号強度と閾値との比較結果を出力し、
前記状態判定部は、前記体内音マイクに関する前記比較結果と、前記体外音マイクに関する前記比較結果との組み合わせに基づいて、前記発話状態と前記飲食状態とを判定することを特徴とする発話・飲食状態検出システム。 - 前記体外音マイクは、小型コンデンサマイクと超小型シリコンマイクとの少なくとも一方のマイクであることを特徴とする請求項1に記載の発話・飲食状態検出システム。
- 前記状態判定部は、一定時間における前記発話状態と前記飲食状態との発生頻度を算出し、前記発生頻度と所定の条件値とを比較することを特徴とする請求項1または2に記載の発話・飲食状態検出システム。
- 前記状態判定部は、前記飲食状態における咀嚼状態の発生頻度をさらに算出し、食べているものが固いものか柔らかいものかを判定することを特徴とする請求項1または2に記載の発話・飲食状態検出システム。
- 前記状態判定部は、一定時間内における飲食状態の発生頻度を算出し、咀嚼状態と嚥下状態とを判定することを特徴とする請求項1または2に記載の発話・飲食状態検出システム。
- 前記信号処理部は、前記マイクの出力信号からパワーを計算し、前記パワーが第1の閾値より小さく、かつ、第2の閾値より大きいとき、前記状態判定部での判定を有効とすることを特徴とする請求項1〜5のいずれか一項に記載の発話・飲食状態検出システム。
- 前記体内音マイクは、イヤフォン型の骨伝導マイクであることを特徴とする請求項1に記載の発話・飲食状態検出システム。
- 前記体内音マイクは、使用者の身体に取り付けられるコンタクトマイクであることを特徴とする請求項1に記載の発話・飲食状態検出システム。
- 前記状態判定部は、前記体外音マイクからの出力データを前記体内音マイクからの出力データで除した結果に基づいて判定することを特徴とする請求項2に記載の発話・飲食状態検出システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006242312A JP5028051B2 (ja) | 2006-09-07 | 2006-09-07 | 発話・飲食状態検出システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006242312A JP5028051B2 (ja) | 2006-09-07 | 2006-09-07 | 発話・飲食状態検出システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008061790A JP2008061790A (ja) | 2008-03-21 |
JP5028051B2 true JP5028051B2 (ja) | 2012-09-19 |
Family
ID=39285030
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006242312A Expired - Fee Related JP5028051B2 (ja) | 2006-09-07 | 2006-09-07 | 発話・飲食状態検出システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5028051B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106859653A (zh) * | 2015-09-24 | 2017-06-20 | 富士通株式会社 | 饮食行为检测装置及饮食行为检测方法 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5742340B2 (ja) * | 2011-03-18 | 2015-07-01 | ソニー株式会社 | 咀嚼検出装置および咀嚼検出方法 |
JP5662549B1 (ja) * | 2013-12-18 | 2015-01-28 | 佑太 国安 | 記憶再生装置 |
JP2016029981A (ja) * | 2014-07-25 | 2016-03-07 | 学校法人関西医科大学 | コンタクトピックアップシステム |
JP6390783B2 (ja) | 2015-03-10 | 2018-09-19 | 富士通株式会社 | 食事時間推定方法及び食事時間推定装置 |
WO2018182043A1 (ja) * | 2017-03-31 | 2018-10-04 | コンピュータ・ハイテック株式会社 | 咀嚼又は嚥下の検知装置 |
WO2019225242A1 (ja) * | 2018-05-23 | 2019-11-28 | パナソニックIpマネジメント株式会社 | 摂食嚥下機能評価方法、プログラム、摂食嚥下機能評価装置および摂食嚥下機能評価システム |
JP7408096B2 (ja) | 2020-08-18 | 2024-01-05 | 国立大学法人静岡大学 | 評価装置、及び評価プログラム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09173320A (ja) * | 1995-12-25 | 1997-07-08 | Casio Comput Co Ltd | 音声検査装置 |
JP3564501B2 (ja) * | 2001-03-22 | 2004-09-15 | 学校法人明治大学 | 乳幼児の音声解析システム |
JP2003173375A (ja) * | 2001-09-28 | 2003-06-20 | Toshiba Corp | 生活管理端末装置、生活管理方法並びに生活管理システム |
JP3766973B2 (ja) * | 2002-05-31 | 2006-04-19 | 財団法人北九州産業学術推進機構 | 咀嚼回数検出装置 |
JP2005304890A (ja) * | 2004-04-23 | 2005-11-04 | Kumamoto Technology & Industry Foundation | 嚥下障害の検知方法 |
-
2006
- 2006-09-07 JP JP2006242312A patent/JP5028051B2/ja not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106859653A (zh) * | 2015-09-24 | 2017-06-20 | 富士通株式会社 | 饮食行为检测装置及饮食行为检测方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2008061790A (ja) | 2008-03-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5028051B2 (ja) | 発話・飲食状態検出システム | |
JP3957636B2 (ja) | イヤーマイクロホンの装置および方法 | |
JP6448596B2 (ja) | 補聴システム及び補聴システムの作動方法 | |
US9084062B2 (en) | Conversation detection apparatus, hearing aid, and conversation detection method | |
US20240000339A1 (en) | Ear-worn devices with deep breathing assistance | |
US20140010378A1 (en) | Advanced communication earpiece device and method | |
US11517252B2 (en) | Using a hearable to generate a user health indicator | |
EP2596646B1 (en) | Visually-based fitting of hearing devices | |
US8488825B2 (en) | Hearing aid and hearing aid system | |
AU2010350894A1 (en) | A hearing aid and a method for alleviating tinnitus | |
US9048798B2 (en) | Gain control for a hearing aid with a facial movement detector | |
US11510018B2 (en) | Hearing system containing a hearing instrument and a method for operating the hearing instrument | |
KR101958839B1 (ko) | 치과용 소음 제어 음향 출력 장치 | |
CN114830691A (zh) | 包括压力评估器的听力设备 | |
EP3879853A1 (en) | Adjusting a hearing device based on a stress level of a user | |
JP2011188334A (ja) | 補聴器 | |
JP6447945B1 (ja) | 心拍検出装置および心拍検出方法 | |
CN114830692A (zh) | 包括计算机程序、听力设备和压力评估设备的系统 | |
JP4344262B2 (ja) | 音響情報呈示装置及び方法 | |
JP7403136B2 (ja) | 心拍検出システム | |
KR101695393B1 (ko) | 보청기 | |
US9538295B2 (en) | Hearing aid specialized as a supplement to lip reading | |
US20230104773A1 (en) | Using a hearable to generate a user health indicator based on user temperature | |
US20220151543A1 (en) | Method for recognizing physiological symptom and physiological symptom sensing system | |
JP2022073681A (ja) | 電子聴診器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090827 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120111 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120606 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120625 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150629 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5028051 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |