JP7095692B2 - 情報処理装置及びその制御方法、並びに記録媒体 - Google Patents

Description

本明細書で開示する技術は、ユーザの身体に装着して用いられる情報処理装置及びその制御方法、並びに記録媒体に関する。

近年、腕や頭部などユーザの身体のさまざまな場所に装着して用いられるウェアラブル・デバイスが普及しつつある。ウェアラブル・デバイスは、生体情報や位置情報、その他のユーザの状態を検出したり、ユーザの周囲の様子を撮像又は録音などの記録を行なったり、音声などで多様な情報をユーザに提示したりする用途がある。ウェアラブル・デバイスは、例えば、ライフログの分野やスポーツ支援の分野など、多岐にわたる分野で利用されている。

例えば、ユーザの首の左右両側から後ろ側（背中側）にかけて半周回するような装着ユニットで、ユーザの首に掛けるようにして装着される、ネックバンド型のウェアラブル・デバイスについて提案がなされている（例えば、特許文献１を参照のこと）。

ウェアラブル・デバイスは、ユーザが入力操作を行なうタッチ操作やスライド操作が可能な操作部や、音声認識機能などを備えている。ユーザは、操作部を介した入力操作や音声入力を介して、ウェアラブル・デバイスに対して、撮像、録画の開始又は停止、音声再生の開始又は停止、情報の提示要求又は提示の停止など、さまざまな指示を行なうことができる。

ＷＯ２０１６／０６３５８７ 特表２００４－５２３２８９号公報 特開２００６－３４５２６９号公報

本明細書で開示する技術の目的は、ユーザの身体に装着して用いられる情報処理装置及びその制御方法、並びに記録媒体を提供することにある。

本明細書で開示する技術の第１の側面は、
収音機能を有する収音センサと、
前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、
前記収音センサ及び前記通信部を制御する制御部と、
前記収音センサ、前記通信部、及び前記制御部のうち少なくとも１つに対して電源を供給する電源部と、
前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、
前記筐体部をユーザに固定する貼着部と、
を具備する情報処理装置である。

前記収音センサは、前記ユーザの肉伝導により収音可能である。また、情報処理装置は、前記ユーザの生体情報を検出する生体センサをさらに備え、前記制御部は、前記生体センサにより検出された生体情報に基づいて、前記収音センサにより収音されたオーディオ・データに対する処理を制御するようにしてもよい。

また、本明細書で開示する技術の第２の側面は、収音機能を有する収音センサと、前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、前記収音センサ、前記通信部、及び前記制御部のうち少なくとも１つに対して電源を供給する電源部と、前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、前記筐体部をユーザに固定する貼着部を具備する情報処理装置の制御方法であって、
前記収音センサにより収音したオーディオ・データを処理するステップと、
前記通信部を介した送受信処理を制御するステップと、
を有する情報処理装置の制御方法である。

また、本明細書で開示する技術の第３の側面は、収音機能を有する収音センサと、前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、前記収音センサ、前記通信部、及び前記制御部のうち少なくとも１つに対して電源を供給する電源部と、前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、前記筐体部をユーザに固定する貼着部を具備する情報処理装置を制御するためのコンピュータ・プログラムを記録する記録媒体であって、前記コンピュータ・プログラムは、
前記収音センサにより収音したオーディオ・データを処理するステップと、
前記通信部を介した送受信処理を制御するステップと、
をコンピュータに実行させるようにコンピュータ可読形式で記述される、記録媒体である。

本明細書で開示する技術によれば、ユーザの身体に装着して用いられる情報処理装置及びその制御方法、並びに記録媒体を提供することができる。

なお、本明細書に記載された効果は、あくまでも例示であり、本発明の効果はこれに限定されるものではない。また、本発明が、上記の効果以外に、さらに付加的な効果を奏する場合もある。

本明細書で開示する技術のさらに他の目的、特徴や利点は、後述する実施形態や添付する図面に基づくより詳細な説明によって明らかになるであろう。

図１は、情報処理装置１００がユーザの顎の下に貼着されている様子と、情報処理装置１００の分解図を示した図である。 図２は、本明細書で提案する情報処理装置を貼着可能な場所を例示した図である。 図３は、ユーザの身体表面に貼着して用いられる情報処理装置１００の入出力機能の構成例を模式的に示した図である。 図４は、基板４００への電気部１０１の実装イメージを例示した図である。 図５は、ユーザの身体表面に貼着した状態の情報処理装置１００の断面構成を例示した図である。 図６は、収音センサ４０１がユーザの声を収音する様子を例示した図である。 図７は、貼着場所に応じたセンサ素子並びにアクチュエータ素子の適否を示した図である。 図８は、情報処理装置１００において、収音センサで収音されたオーディオ・データを、生体情報に関連付けて記録又は外部に送信するための処理手順を示したフローチャートである。 図９は、ユーザの身体への貼着状態に応じて情報処理装置１００を動作させるための処理手順を示したフローチャートである。 図１０は、情報処理装置１００－１と情報処理装置１００－２が連携する際の通信シーケンス例を示した図である。 図１１は、情報処理装置１００の貼着場所に応じた処理手順を示したフローチャートである。 図１２は、情報処理装置１００の振動センサで検出される振動データの処理を他の情報端末側で実施する際の通信シーケンス例示した図である。 図１３は、情報処理装置とユーザが所持する情報端末との接続手順を例示した図である。 図１４は、情報処理装置１００とクラウドが、ユーザが所持する情報端末を経由して接続するための処理手順を例示した図である。 図１５は、情報処理装置１００とクラウドが接続するための処理手順を例示した図である。 図１６は、情報処理装置１００とクラウドが接続するための処理手順を例示した図である。

以下、図面を参照しながら本明細書で開示する技術の実施形態について詳細に説明する。

腕時計型情報端末、メガネ型情報端末といった、腕や頭部などに装着して用いられるウェアラブル・デバイスは広く知られている。例えば、腕時計型情報端末は、腕時計のようにユーザの手首付近に巻いて使用され、腕時計の基本機能に加え、メールなどの文字コミュニケーション、歩数計などの活動量測定及び測定結果の表示、音楽再生などの多くの機能を提供する。また、メガネ型情報端末は、装着したユーザの視界の一部に情報を提示することで、ユーザがナビゲーションや最新のニュースなどの情報を常に受け取ることができる。

従来のウェアラブル・デバイスの多くは、ユーザが装着していることが外見上明らかである。例えば、メガネ型情報端末は、一般的な視力矯正用のメガネに比べて形状が大きく異なる。このため、周囲の人に違和感を与えることがあり、ウェアラブル・デバイスの普及の妨げになることが懸念される。ウェアラブル・デバイスの装置本体の意匠を工夫することで、ユーザ本人や周囲に違和感なく受け入れられるようにする方法も考えられる。また、ユーザに新しい形態の装置を利用することに対する心理的違和感を排除することは容易ではない。

そこで、本明細書では、ユーザの身体の表面（若しくは、皮膚）に直接貼着して用いられる情報処理装置について、以下で提案する。ユーザの身体表面に貼着された情報処理装置は、外見上の変化が最小限であることから、周囲の人に違和感を与えずに済むとともに、ユーザ本人にとっても可能な限り装着感を感じさせない。

情報処理装置は、基本的には、物理的に単一の装置として構成され、上述したユーザの身体上のいずれか１つの部位に貼着して用いられる。変形例として、情報処理装置は、物理的に分離した２以上の分割装置の集合体として構成され、上述した２以上に部位に各分割装置が貼着される。後者の場合、各分割装置は、無線通信や生体通信などを利用して相互接続され、各分割装置が協働的に動作して１つの情報処理装置として機能するように構成される。但し、以下では、情報処理装置が物理的に単一の装置として構成される場合に限定して説明する。

情報処理装置は、収音機能を有する収音センサと、収音センサにより検出されたオーディオ・データを外部に無線送信する通信部と、収音センサ及び通信部を制御する制御部と、収音センサ、通信部、及び制御部を少なくとも含む電気部に対して電源を供給する電源部と、これら電気部及び電源部を収納する筐体部と、筐体部をユーザの身体の表面に貼着してユーザの身体に固定する貼着部を基本的な構成要素とする。

ＩｏＴ（Ｉｎｔｅｒｎｅｔ ｏｆ Ｔｈｉｎｇｓ）デバイスにはマウスやキーボードといった従来の入力装置が不在であり、文字情報よりも音声情報を用いたユーザ・インターフェース（ＵＩ）が有力である。したがって、収音センサは、情報処理装置に必須の構成要素の１つということができる。収音センサは、例えば小型のマイクロフォンなどで構成される。

情報処理装置本体を、こめかみや耳裏、顎の下、首、首元、咽喉部など、ユーザの声帯の近傍に貼着して使用する場合、口からの空気伝導や頭部の肉伝導又は骨伝導を含めて、ユーザの肉声を効果的に集音することができる。したがって、情報処理装置は、ライフログ用の音声センシング機能を提供し易くなる。また、顎の下などを貼着場所にすると、情報処理装置は目立たず周囲の人に違和感を与えずに済む。

図１には、一例として、情報処理装置１００がユーザの顎の下に貼着されている様子と、情報処理装置１００の分解図を示している。但し、便宜上、情報処理装置１００の分解図は、ユーザの顎の下に貼着している状態とは天地を逆にして示している。

情報処理装置１００本体は、ユーザの顎の下に隠れるので、外見上の変化がほとんどなく、周囲の人に違和感を与えずに済む。

図示の情報処理装置１００は、収音センサや通信部、制御部、電源部などの回路コンポーネントを搭載した基板からなる電気部１０１と、電気部１０１を収納する筐体部１０２と、筐体部１０２をユーザの身体の表面に貼着してユーザの身体に固定する貼着部１０３を備えている。また、図示の情報処理装置１００は、貼着部１０３の上に体液処理部１０４が積層されている。

筐体部１０２は、情報処理装置１００本体を貼着した部位以外のユーザの身体と接触したり、周囲の人の身体と接触したりした際に、損傷を与えないことを考慮して、柔軟性を有することが好ましい。筐体部１０２は、金属又は非金属の素材を用いて構成されるが、通信部を収納することから、電波透過性を備えている必要がある。

また、情報処理装置１００本体を貼着した部位における外見上の変化が最小限となるように、筐体部１０２の表面（若しくは体裁面）は、肌色に調色されていることが好ましい。あるいは、筐体部１０２の表面を透明色にしたり、ファッション性のある色に塗装したりしてもよい。また、筐体部１０２の表面に、タトゥシールのような模様を形成して、ユーザの個性の表現するようにしてもよい。

但し、情報処理装置１００本体は、ユーザの顎の下だけでなく、ユーザの身体表面のさまざまな場所に貼着して用いられることを想定している。そこで、貼着場所毎に筐体部１０２若しくは情報処理装置１００本体の外観形状を変更してもよいし、すべての貼着場所で共通の外観形状としてもよい。

また、筐体部１０２は、撥水性の素材を用いる、あるいは表面に撥水加工を施すなどして、撥水性を備えていることが好ましい。筐体部１０２の表面に撥水性がないと、ユーザの皮膚から分泌又は排出される体液（汗など）や降雨などが、筐体部１０２の内部に浸み込んで、電気部１０１を構成する回路コンポーネントにダメージを与えたり、さらにその下層の貼着部１０３の貼着性が劣化したりするおそれがある。

電気部１０１は、収音センサや通信部、制御部、電源部などと、これらの回路コンポーネントを搭載した基板からなる（前述）。情報処理装置１００本体が貼着されたユーザの身体表面（自由曲面）の変化に倣うように、電気部１０１を構成する基板は、柔軟性や伸縮性を備えていることが好ましい。例えば、フレキシブル基板を用いるとともに、フレキシブル基板に２軸以上の方向に切れ込みを形成することで、柔軟性や伸縮性が増し、自由曲面に倣い易くなる。逆に、基盤が柔軟性や伸縮性を備えていないと、情報処理装置１００本体は、貼着されたユーザの身体表面から剥離し易くなる。

粘着部１０３は、シート状で、且つ、表面が粘着性能を持つ糊面となっており、ユーザの身体の表面に貼着して、情報処理装置１００本体をユーザの身体に固定することができる。また、ユーザの皮膚から相当量の体液（汗など）が分泌又は排出されることを考慮して、粘着部１０３は、透湿性（若しくは、透水性、透液性）を備えていることが好ましい。例えば、１以上の開口を有する多孔性の素材を用いて粘着部１０３を構成する。

粘着部１０３の糊面は、皮膚に適用可能（例えば、皮膚に刺激を与えることがなく、アレルギーなどを発生し難い）な接着材で形成されていることが好ましい。また、未使用の状態では、糊面にゴミなどが付着せず粘着性能を維持できるよう、粘着部１０３の糊面は剥離紙（図示しない）で保護されていることが好ましい。付言すれば、剥離紙を粘着部１０３から剥離することによって、使用状態に移行して、情報処理装置１００の電源が投入されるように構成してもよい。

体液処理部１０４は、粘着部１０３の開口を介して浸み込んでくるユーザの体液を処理して、電気部１０１に到達しないように体液を遮る。体液処理部１０４は、例えば高分子ポリマー吸湿材のようなメッシュ材を用いて構成される。体液処理部１０４は、毛細管現象により体液を誘導して、環境（情報処理装置１００の外部）に放出する。体液処理部１０４は、交換部品として構成されることが好ましい。

なお、図１には、ユーザの顎の下に貼着されている情報処理装置１００について例示したが、情報処理装置１００本体は、ユーザの身体表面のさまざまな場所に貼着して用いられることが想定される。図２には、本明細書で提案する情報処理装置を貼着することが想定される、ユーザの身体上の部位を例示している。図示のように、情報処理装置は、こめかみ、眉間、耳裏、顎の下、首、首元、咽喉部、上腕、前腕、手首、手の甲、腹部などの部位に貼着して、いわゆるウェアラブル・デバイスとして用いられることを想定している。なお、図示を省略するが、同様の情報処理装置を、人体ではなくさまざまな機械類やモノに貼着して、ＩｏＴデバイスとしても活用することができる。

図４には、基板への電気部１０１の実装イメージを例示している。柔軟性や伸縮性を備えた基板４００上には、収音センサ４０１と、通信処理部を兼用する制御部４０２と、チップ・アンテナ４０３などの回路部品とともに、コイン・バッテリーで構成される電源部４０４が搭載されている。

図３には、ユーザの身体表面に貼着して用いられる情報処理装置１００の入出力機能の構成例を模式的に示している。図示の情報処理装置１００は、センサ部３１０と、アクチュエータ部３２０と、通信部３３０を備えている。

情報処理装置１００本体がユーザの身体表面に接触しているという特徴を活かして、センサ部３１０は、ユーザ（人体）の情報を検出する第１のセンサ部３１１と、ユーザの外（外界）の情報を検出する第２のセンサ部３１２を備えている。また、アクチュエータ部３２０は、ユーザ（人体）に対して情報を出力する第１のアクチュエータ部３２１と、ユーザの外（外界や、周囲の人）に対して情報を出力する第２のアクチュエータ部３２２を備えている。

情報処理装置１００の基本機能として、制御部（図３では図示しない）は、収音センサ、第１のセンサ部３１１、又は第２のセンサ部３１２のうち少なくとも１つのセンサによる検出結果に基づいて、第１のアクチュエータ部３２１又は第２のアクチュエータ部３２２のうち少なくとも一方を駆動する。第１のアクチュエータ部３２１を駆動することで、センサによる検出結果（例えば、ユーザ自身の生体情報、又は周囲の環境情報）を、ユーザに通知することができる。また、第２のアクチュエータ３２２を駆動することで、センサによる検出結果を、ユーザの周囲に伝達することができる。

また、情報処理装置１００が備える機能として、制御部は、センサ部３１０による検出結果を通信部３３０から外部に送出し、又はセンサ部３１０による検出結果に基づいてアクチュエータ部３２０を駆動する。

また、情報処理装置１００が備えるさらに他の機能として、制御部は、通信部３３０を介して外部から受信した情報に基づいて、アクチュエータ３２０の駆動を制御したり、センサ部３１０における検出処理を制御したりする。

なお、制御部は、情報処理装置１００（又はユーザ）を識別する個体識別番号や、外部との情報交換の際に盗聴防止などのために使用する暗号鍵などを保存するためのメモリを含んでいてもよい。

上述した収音センサは、情報処理装置１００本体を貼着したユーザが発声する音声を収音するという観点から、第１のセンサ部３１１に含めることができる。もちろん、収音センサを、第１のセンサ部３１１には含まれない、情報処理装置１００の必須の構成要素として捉えてもよい。収音センサは、口からの空気伝導や、頭部の肉伝導又は骨伝導により、ユーザが発声する音声を収音する。筐体１０２には、空気電動される音声を収音するための収音孔を穿設していることが好ましい。また、収音孔には防水処理が施されていることが好ましい。

また、脳波センサや静脈センサ、筋電センサ、体温センサ、発汗センサ、心拍又は脈拍センサ、視線センサなど、生体情報を検出することができるさまざまなタイプの生体センサを、第１のセンサ部３１１に含めることができる。

例えば、情報処理装置１００が顎の下、首、首元、咽喉部など口や声帯から近い場所に貼着して用いられる場合には、収音センサは、口からの空気伝導や頭部の肉伝導又は骨伝導を含めて、微小な音声情報を拾うことができる。また、雑音がある環境下でも、肉伝導や骨伝導を利用して、ユーザの声を分離して収音することができる。

図５には、ユーザの身体表面に貼着した状態の情報処理装置１００の断面構成を例示している。図４を参照しながら既に説明したように、柔軟性や伸縮性を備えた基板４００上には、収音センサ４０１と、通信処理部を兼用する制御部４０２などの回路部品と、コイン・バッテリーで構成される電源部４０４が搭載されている。また、図６には、収音センサ４０１がユーザの声を収音する様子を例示している。但し、同図では、情報処理装置１００がユーザの咽喉部に貼着されていることを想定している。ユーザが発した声は、肉体や皮膚を伝わって、情報処理装置１００本体まで到達すると、図６中の矢印で示すようにさらに空中を伝搬し、収音センサ４０１の前面空間の空気を振動させる。この空気振動により収音センサ内の振動板（図示しない）が振動することにより、ユーザの声を効率的に収音することができる。

情報処理装置１００は、収音センサにより収音された音響データをオーディオ・ログとして記録し、さらには通信部３３０を介してオーディオ・ログを外部装置に送信するようにしてもよい。また、情報処理装置１００が第１のセンサ３１１として生体センサを含む場合には、収音センサで収音されたオーディオ・データと生体センサで検出された生体情報とを時間方向に同期させて記録したり外部装置に送信したりするようにしてもよい。

但し、オーディオ・ログを常時記録しているとデータ量が膨大になってしまうので、制御部は、生体センサ（上述）から得られる生体情報に基づいてオーディオ・ログのフィルタリング（若しくは、間欠的なオーディオ・データの記録）を実施するようにしてもよい。再生時に、オーディオ・ログと時間方向に同期がとられた生体情報に基づいてフィルタすることにより、オーディオ・ログを間欠的に再生するようにしてもよい。例えば、精度良く検出された心拍数によってオーディオ・ログをフィルタすることにより、ユーザの過去の体験を効率的、効果的に視聴することが可能になる。また、脳波データなどに基づいてユーザが覚醒状態と推定される期間やユーザが興味を示している期間に限定してオーディオ・ログの記録や外部出力を行なうようにしてもよい。

付言すれば、第１のセンサ部３１１に含まれる収音センサと、第１のアクチュエータ部３２１に含まれるスピーカ（後述）との協働的動作により収音⇒増幅⇒再生を行ない、情報処理装置１００を集音器若しくは補聴器として活用することもできる。

また、情報処理装置１００がこめかみや眉間などの頭部に貼着して用いられる場合には、脳波センサを用いて脳波を高い精度で検出することができる。制御部は、脳波センサの検出結果を解析して、ユーザの意思や感情を認識することによって、ＢｒａｉｎＩｎｔｅｒｆａｃｅを実現することができる。また、制御部は、脳波センサの検出結果に基づいてユーザの眠気を感知したときには、例えば第１のアクチュエータ部３２１を駆動させて、電撃などにより眠気を撃退するといった動作も可能である。

また、振動センサを、第１のセンサ部３１１に含めることができる。振動センサは、例えば加速度センサ、ジャイロ・センサ、又は地磁気センサ、あるいはこれらのうち２以上のセンサ素子の組み合わせで構成される。制御部は、振動センサによる検出結果に基づいて、情報処理装置１００を身体に貼着したユーザの姿勢や体動（衝撃、振動、傾斜、転倒、落下、移動、その他）を検知することができる。また、情報処理装置１００がユーザの手の甲や指に貼着して用いられる場合などには、制御部は、振動センサの検出結果を解析して、ユーザが行なったジェスチャーを検出することができる。

さらに制御部は、振動センサで検出した振動データから特徴データを抽出するとともに、所定量だけ蓄積した特徴データの時系列に基づいて、ユーザの行動を認識することができる（例えば、特許文献３を参照のこと）。また、制御部は、特徴データの時系列情報を逐次学習していくようにしてもよい。振動センサから得られる振動データは、情報処理装置１００本体が貼着された場所毎に特徴が相違する。そこで、制御部は、振動センサから得られる振動データ（若しくは、振動データから抽出された特徴データの時系列）に基づいて、情報処理装置１００本体が貼着された場所をさらに推定することもできる。

また、情報処理装置１００本体がユーザの身体に貼着されている貼着状態かどうかを検出する貼着センサも、第１のセンサ部３１１に含めることができる。貼着センサは、例えば、人体が接近してきたことに伴う静電容量の変化を検出する静電容量センサや、人体の表面（皮膚）に照射した赤外線の反射光を検出する赤外線反射センサなどを用いて、貼着センサを構成することができる。制御部は、貼着状態に応じて、情報処理装置１００の起動（待機状態からの復帰）や、認証などの所定の処理の起動を制御するようにしてもよい。

但し、情報処理装置１００本体を貼着した場所に応じて生体情報の検出の適否があり、また、情報処理装置１００自体の用途に応じて生体情報の要否が異なる。したがって、貼着場所と生体情報の要否に応じて適宜必要な生体センサを第１のセンサ部３１１に組み込むようにすればよい。

第２のセンサ部３１２として、（ユーザの肉声ではなく）外界の音響又は騒音を収音する収音センサ（マイクなど）や、周囲の風景を撮像するイメージ・センサ、温度、湿度、照度、気圧などの外部環境情報を検出する環境センサを挙げることができる。また、チップ・アンテナ４０３（前述）は、電波（無線信号）を検出するという観点から、広義で、第２のセンサ部３１２に含めることもできる。

また、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）センサのような位置情報センサを、第２のセンサ部３１２に含めることができる。但し、情報処理装置１００は、位置情報センサ以外の手段により位置検出機能を装備することも可能である。例えば、第２のセンサ部３１２としてイメージ・センサを備えている場合には、ＳＬＡＭ（Ｓｉｍｕｌｔａｎｅｏｕｓ Ｌｏｃａｌｉｚａｔｉｏｎ ａｎｄ Ｍａｐｐｉｎｇ）技術を利用して、自己位置推定を実現することができる。また、ＰｌａｃｅＥｎｇｉｎｅ技術を利用して、チップ・アンテナ４０３で受信する周辺の複数のアクセスポイントからの電波強度のバランスに基づいて、現在地を算出することができる。

第２のセンサ部３１２として位置情報センサを装備し、又は、情報処理装置１００が位置検出機能を有している場合、制御部は、ユーザの位置情報の時系列すなわち経路情報に基づいて、ユーザの行動を認識することができる。

但し、情報処理装置１００本体を貼着した場所に応じて外部環境情報の検出の適否がある。例えば、図１に示したように情報処理装置１００本体がユーザの眉間に貼着されている場合には周囲の風景を撮像するのに適しているが、顎の下に貼着される場合には周囲の風景を撮像するには適していない。したがって、貼着場所と生体情報の要否に応じて適宜必要な環境センサを第２のセンサ部３１２に組み込むようにすればよい。

第１のアクチュエータ部３２１は、基本的には、ユーザの身体に対して直接出力する。例えば、第１のアクチュエータ部３２１として、小型スピーカや、肉伝導により音声を出力する肉伝導スピーカ、ハプティック出力可能なハプティック・デバイス、振動による刺激を印加する振動アクチュエータ、軽い電気刺激を与えるアクチュエータ（若しくは、微弱電流を出力するデバイス）などを挙げることができる。但し、情報処理装置１００本体を貼着した場所に応じて出力の適否があり、また、情報処理装置１００自体の用途に応じて出力の要否が異なる。したがって、貼着場所と情報出力の要否に応じて適宜必要なアクチュエータ素子を第１のアクチュエータ部３２１に組み込むようにすればよい。

第２のアクチュエータ部３２２は、基本的には、情報処理装置１００を装着するユーザやその周囲の人に対して情報を出力する。第２のアクチュエータ部３２２から出力される情報として、通信部３３０を介して受信した、外部から提供される情報を挙げることができる。また、第１のセンサ部３１１や第２のセンサ部３１２による検出結果や、その検出データを制御部で解析又は認識した結果を、第２のアクチュエータ部３２２から出力することもできる。

例えば、第２のアクチュエータ部３２２として、光や画像を出力する表示部や、音声を出力するスピーカなどを挙げることができる。表示部は、例えば柔軟性の高い有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイを用いて構成することができる。表示部は、筐体１０２内には収納されず、筐体１０２の表面に配設される。また、第２のアクチュエータ部３２２としてスピーカが備えられ場合には、筐体１０２の表面には、音響出力孔や排気孔が形成されることもある。

但し、情報処理装置１００本体を貼着した場所に応じて出力の適否があり、また、情報処理装置１００自体の用途に応じて出力の要否が異なる。したがって、貼着場所と情報出力の要否に応じて適宜必要なアクチュエータ素子を第２のアクチュエータ部３２２に組み込むようにすればよい。

通信部３３０は、外部と情報通信を行なう。例えば、通信部３３０は、制御部で処理されたセンサ部３１０の検出結果を外部に出力する。また、通信部３３０は、制御部やアクチュエータ部３２０に対する指示を外部から入力する。

通信部３３０は、例えばＷｉ－Ｆｉなどの無線通信を経由してインターネット上の装置（クラウドなど）と通信を行なう。あるいは、通信部３３０は、Ｂｌｕｅｔｏｏｔｈ（登録商標）やその他の近距離通信機能を用いて、スマートフォンなどユーザが所持する他の情報端末と通信を行なう。通信部３３０が無線を利用して外部装置と情報通信を行なう際には、盗聴防止のために暗号鍵（前述）を用いた秘密通信を行なうことが好ましい。

また、通信部３３０は、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）のような近接無線通信技術を利用して、至近距離の情報端末と通信や認証処理を行なうようにしてもよい。また、通信部３００は、人体通信機能を備え、同じユーザの別の身体部位に貼着された他の情報処理装置や同じユーザが所持する情報端末と人体通信を介して情報通信を行なうようにしてもよい。

第１のセンサ部３１１、第２のセンサ部３１２に適用可能なセンサ素子や、第１のアクチュエータ部３２１、第２のアクチュエータ３２２に適用可能なアクチュエータ素子は、情報処理装置１００本体を貼着した場所にも依存する。貼着場所に応じたセンサ素子並びにアクチュエータ素子の適否を、図７にまとめた。

貼着する場所を限定して、最小限のセンサ素子及びアクチュエータ素子のみを装備するという情報処理装置１００の構成方法と、多くの貼着場所に適用することを想定して、可能な限り多種類のセンサ素子及びアクチュエータ素子を装備するというハイスペックな情報処理装置１００の構成方法が考えられる。

前者の方法によれば、１台の情報処理装置１００を比較的安価に製作することが可能になるので、使い捨てタイプの情報処理装置１００とすることもできる。

また、後者の構成方法によれば、現実に貼着した場所によっては、稼働させる必要がないセンサ素子及びアクチュエータ素子が生じる。そこで、各センサ素子及びアクチュエータ素子のオン／オフを手動で切り替えられるようにしてもよいし、制御部が振動センサから得られる振動データ（ユーザの体動）や生体センサなどのセンサ・データに基づいて貼着場所を推定して自動でオン／オフ切り替え制御を行なうようにしてよい。また、各センサ素子及びアクチュエータ素子の完全なオン／オフの切り替えを制御するのではなく、貼着した場所から推定される使用目的などに応じて、センサ感度を段階的に切り替える、アクチュエータの出力レベルを段階的に切り替える、といった制御を実施するようにしてもよい。

なお、温度センサを内蔵し、人などの検体の皮膚に貼付して用いられる皮膚用パッチ材について、既に提案されている（例えば、特許文献２を参照のこと）。この皮膚用パッチ材は、温度センサの他にマイクロプロセッサや送信機などの電気部とボタン型電池も内蔵するが、収音センサを装備していない。すなわち、この皮膚用パッチ材は、音声情報をＵＩに用いることができない、オーディオ・ログを扱うことができない、という観点などから、本明細書で開示する情報処理装置とは本質的に相違する。

第１の実施例では、ユーザの顎の下（若しくは咽喉部）に貼着される情報処理装置１００（図１を参照のこと）を想定している。

情報処理装置１００は、口や声帯から近い場所に貼着して用いられるので、収音センサは、微小な音声情報をライフログ情報として収音することができる。また、雑音がある環境下でも、肉伝導や骨伝導を利用して、ユーザの声を雑音から分離して効率的に収音することができる（図６を参照のこと）。また、情報処理装置１００は顎の下に貼着されていて目立たないので、ユーザ本人やユーザの対話者に気づかれることなく、オーディオ・ログを記録することができる。

第２の実施例でも、ユーザの顎の下や咽喉部に貼着される情報処理装置１００（図１を参照のこと）を想定している。また、情報処理装置１００は、第１のセンサ３１１として、収音センサの他に、少なくとも１つの生体センサを装備していることを想定している。

生体センサは、脳波センサや静脈センサ、筋電センサ、体温センサ、発汗センサ、心拍又は脈拍センサ、振動センサなどのうち少なくとも１つ、又は２以上の組み合わせで構成される。生体センサは、情報処理装置１００本体を身体表面に貼着したユーザの生体情報を検出する。

第１の実施例と同様に、本実施例においても、情報処理装置１００は顎の下に貼着されていて目立たないので、ユーザ本人やユーザの対話者に気づかれることなく、オーディオ・ログを記録する。また、記録した又はライブのオーディオ・ロデータを、通信部３３０を介して外部装置に送信するようにしてもよい。

また、本実施例では、情報処理装置１００は第１のセンサ３１１として生体センサを含むので、収音センサで収音されたオーディオ・データと生体センサで検出された生体情報とを時間方向に同期させて記録し、又は、生体情報と時間方向に同期をとりながらオーディオ・データを外部装置に送信するようにしてもよい。この場合、オーディオ・データと生体情報を併せて、ユーザのライフログとして管理することができる。

但し、オーディオ・ログを常時記録しているとデータ量が膨大になってしまうという問題がある。そこで、制御部は、生体センサ（上述）から得られる生体情報に基づいて、オーディオ・ログのフィルタリングを実施する。

例えば、情報処理装置１００は、オーディオ・データの再生時に、オーディオ・ログと時間方向に同期がとられた生体情報に基づいてフィルタすることにより、オーディオ・ログを間欠的に再生するようにしてもよい。例えば、心拍数によってユーザの緊張度などを推定することができる。したがって、精度良く検出された心拍数によってオーディオ・ログをフィルタすることにより、ユーザの過去の体験を効率的、効果的に視聴することが可能になる。

また、顎の下ではなく頭部など低ノイズで脳波を検出できる部位に情報処理装置１００本体が貼着されている場合には、脳波データに基づいてユーザが覚醒状態と推定される期間に限定して、オーディオ・ログの記録や外部出力を行なうようにしてもよい。

なお、オーディオ・ログと生体情報の時間方向に同期をとる方法は任意である。例えば、同期化されたオーディオ・データと生体情報を統合するようにしてもよいし、個別に扱われるオーディオ・データと生体情報の各々にタイムスタンプを付けるようにしてもよい。

図８には、情報処理装置１００において、収音センサで収音されたオーディオ・データを、生体情報に関連付けて記録又は外部に送信するための処理手順をフローチャートの形式で示している。図示の処理手順は、例えば情報処理装置１００内の制御部が主導して実施されるものとする。

制御部は、収音センサに音声の入力があった場合には（ステップＳ８０１のＹｅｓ）、続いて、生体センサで生体情報が検出されたかどうかをさらにチェックする（ステップＳ８０２）。

ここで、生体センサで生体情報が検出されない場合には（ステップＳ８０２のＮｏ）、制御部は、生体情報以外の送信条件又は記録条件に従って、収音センサで収音されたオーディオ・データの、第２のアクチュエータ部３２２からの再生出力、外部への送信、又は記録を実施する（ステップＳ８０８）。

また、生体センサで生体情報が検出された場合には（ステップＳ８０２のＹｅｓ）、制御部は、オーディオ・データと生体情報を時間方向に同期させるかどうかをチェックする（ステップＳ８０３）。そして、オーディオ・データと生体情報を時間方向に同期させる場合には（ステップＳ８０３のＹｅｓ）、制御部は、生体情報をオーディオ・データと時間方向に同期させる（ステップＳ８０４）。

次いで、制御部は、収音したオーディオ・データを生体情報でフィルタすべきかどうかをチェックする（ステップＳ８０５）。

そして、制御部は、収音したオーディオ・データを生体情報でフィルタすべきと判断した場合には（ステップＳ８０５のＹｅｓ）、収音したオーディオ・データを生体情報に基づいてフィルタする（ステップＳ８０６）。

次いで、制御部は、収音したオーディオ・データ（生体情報と時間方向に同期された場合や、生体情報に基づいてフィルタされた場合がある）を、第２のアクチュエータ部３２２で再生出力し、通信部３３０を介して外部に送信し、又はオーディオ・ログとして記録すべきかどうかをチェックする（ステップＳ８０７）。

ステップＳ８０７では、制御部は、ユーザからの音声指示や、生体情報の認識結果、通信部３３０を介して受信する外部からの指示などに基づいて、オーディオ・データの再生出力、外部出力、記録の要否を判定する。

そして、ステップＳ８０７における判定結果が肯定的であった場合には、制御部は、収音センサで収音されたオーディオ・データの、第２のアクチュエータ部３２２からの再生出力、外部への送信、又は記録を実施する（ステップＳ８０８）。

第３の実施例では、情報処理装置１００本体を貼着する場所は特に限定されないが、情報処理装置１００本体がユーザの身体に貼着されている貼着状態であるかどうかを検出する貼着センサを装備していることを想定している。

貼着センサは、例えば、人体が接近してきたことに伴う静電容量の変化を検出する静電容量センサや、人体の表面（皮膚）に照射した赤外線の反射光を検出する赤外線反射センサなどを用いて、貼着センサを構成することができる。貼着センサを、情報処理装置１００本体を貼着する場所に適応した構成とすることが好ましい。なお、生体センサで生体信号（心拍など）を検出できる状態になったかどうかを以って、貼着状態を推定することもできる。また、後述する第６の実施例とも関連するが、振動センサから得られる振動データに基づいて、情報処理装置１００本体のユーザの身体への貼着状態とともに貼着された場所も併せて推定することができる。

制御部は、貼着状態に応じて、情報処理装置１００の動作を制御する。基本的に、情報処理装置１００本体がユーザの身体表面に貼着されていない状態は、情報処理装置１００が使用されていない状態とみなすことができる。したがって、貼着センサにより未貼着状態が検出されたときには、制御部は、貼着センサを含む一部の機能を除いて、回路を待機状態又は停止状態に移行させて、低消費電力化を図るようにしてもよい。

一方、貼着センサによりユーザの身体への貼着状態が検出されたときには、制御部は、待機状態又は停止状態の回路を起動させる。また、制御部は、貼着センサによりユーザの身体への貼着状態が検出されたことに応答して、認証処理など所定の処理を起動するようにしてもよい。

ここで言う認証は、情報処理装置１００本体を貼着したユーザの本人認証と、他の機器との認証のいずれか一方又は両方の処理を含むものとする。また、制御部は、認証処理の中で、他の機器とのペアリングも行なうようにしてもよい。前者のユーザ認証には、例えば生体センサで検出される生体情報を用いるようにしてもよい。また、不正なしに認証処理を実現するために、電気部１０１は、ＩＣチップのような耐タンパ性のある回路部品を備えていてもよい。

図９には、ユーザの身体への貼着状態に応じて情報処理装置１００を動作させるための処理手順をフローチャートの形式で示している。図示の処理手順は、例えば情報処理装置１００内の制御部が主導して実施されるものとする。なお、以下では、便宜上、貼着センサは状態が変化したときに（貼着状態から非貼着状態に変わったとき、又は、非貼着状態から貼着状態に変わったとき）、検出信号を出力するものとして説明する。

まず、制御部は、貼着センサからの入力があったかどうかをチェックする（ステップＳ９０１）。

貼着センサからの入力があったときには（ステップＳ９０１のＹｅｓ）、制御部は、情報処理装置１００が貼着状態に移行したかどうかをさらにチェックする（ステップＳ９０２）。

また、貼着センサからの入力がないときには（ステップＳ９０１のＮｏ）、制御部は、貼着センサ以外のセンサ（例えば、生体センサや振動センサなど）の検出結果に基づいて、貼着状態の判別を試みる（ステップＳ９０４）。

そして、情報処理装置１００本体がユーザの身体に貼着された状態であることが分かったとき（ステップＳ９０２のＹｅｓ）、又は、貼着状態であることが推定されたときには（ステップＳ９０５のＹｅｓ）、制御部は、待機状態又は停止状態の回路を起動させ、又は認証処理を起動して（ステップＳ９０３）、本処理を終了する。

一方、情報処理装置１００本体がユーザの身体に貼着された状態でないことが分かったとき（ステップＳ９０２のＮｏ）、又は、貼着状態でないことが推定されたときには（ステップＳ９０５のＮｏ）、制御部は、回路の起動や認証処理の起動をスキップして、本処理を終了する。

第４の実施例では、情報処理装置１００本体は耳裏などの耳に近い部位に貼着されるとともに、情報処理装置１００が第２のアクチュエータとしてスピーカを備えていることを想定している。そして、情報処理装置１００は、スピーカを利用して、ユーザに音声エージェント機能を提供することができる。

情報処理装置１００が、第２のセンサ部３１２として振動センサを装備している場合、制御部は、検出された振動データの時系列に基づいて、ユーザの行動を認識することができる。また、情報処理装置１００が、第２のセンサ部３１２として位置情報センサを装備し、又は、位置検出機能を有している場合には、ユーザの経路情報に基づいて、ユーザの行動を認識することができる。そして、制御部は、行動の認識結果に基づいて、ユーザが置かれている状況に適合した音声エージェントを提供することができる。

制御部は、収音センサで収音されたユーザの音声認識結果や、時々刻々と変化するユーザの位置情報、行動認識結果に基づいて、音声エージェントの駆動を制御する。あるいは、ユーザの現在位置に基づいて推定されるＰＯＩ（Ｐｏｉｎｔ ｏｆ Ｉｎｔｅｒｅｓｔ）の情報を、通信部３３０を介して外部装置（クラウドなど）から取得して、音声エージェントを通じてユーザに提示するようにしてもよい。

また、制御部は、通信部３３０を介して外部装置（スマートフォンなどの情報端末や、クラウドなど）から受信するデータに基づいて、音声エージェントの駆動を制御するようにしてもよい。音声エージェントのための情報を取得する際に、制御部は、通信部３３０を介して外部装置に対して、ユーザの位置情報や行動認識結果などの情報を送信するようにしてもよい。

また、情報処理装置１００本体は手の甲などユーザの目に触れ易い部位に貼着されるとともに、情報処理装置１００が第２のアクチュエータとして表示部を備えていてもよい。表示部は、筐体１０２内には収納されず、筐体１０２の表面に配設することで、ユーザは表示画面を視聴することができる。表示部を柔軟性の高い有機ＥＬディスプレイを用いて構成することで、手の甲などの曲面に倣って情報処理装置１００本体を良好なフィット感で貼着することができる。

情報処理装置１００が、第２のセンサ部３１２として振動センサを装備している場合、制御部は、検出された振動データの時系列に基づいて、ユーザの行動を認識することができる。また、情報処理装置１００が、第２のセンサ部３１２として位置情報センサを装備し、又は、位置検出機能を有している場合には、ユーザの経路情報に基づいて、ユーザの行動を認識することができる。そして、制御部は、収音センサで収音されたユーザの音声認識結果や、ユーザの行動の認識結果に基づいて、ユーザが置かれている状況に適合した視覚的な案内情報を表示部に提示することができる。

また、制御部は、ユーザの音声認識結果やユーザの行動の認識結果の情報を、通信部３３０を介して外部装置に送信し、外部装置から所得される関連情報を表示部に表示するようにしてもよい。もちろん、情報処理装置１００は、外部装置から、ユーザの音声コマンドや行動とは無関係の情報を受信して、表示部に表示することもできる。

また、第４の実施例に係る情報処理装置１００は、スピーカと表示部の両方を備え、通信部３３０を介して外部装置から受信する映像及び音声情報を再生出力するようにしてもよい。

第５の実施例では、同じユーザの身体に同時に貼着されている２台の情報処理装置１００－１と情報処理装置１００－２が連携して動作することを想定している。一方の情報処理装置１００－１はカメラ（若しくは、イメージ・センサ）などの撮像機能を装備し、他方の情報処理装置１００－２は表示部若しくはディスプレイ機能を装備し、情報処理装置１００－１で撮像された映像を例えばリアルタイムで表示出力する。

撮像機能を備えた情報処理装置１００－１を貼着する場所は任意である。但し、ユーザの死角の方向にカメラの視線方向が向くような場所に情報処理装置１００－１を貼着すると、他方の情報処理装置１００－２側ではユーザにとって死角となっている場所を表示することになり、ユーザの視界を補うことができるという効果を得易くなる。例えば、ユーザのこめかみ付近に、カメラが横方向を向くように、情報処理装置１００－１を貼着することが好ましい。

また、ディスプレイ機能を備えた情報処理装置１００－２を貼着する場所は、ユーザ本人が表示画像を観察できる場所、例えば手の甲を挙げることができる。ユーザが右手若しくは利き腕で作業中に表示画像を目視したいときには、左手若しくは利き腕以外の腕の手の甲に情報処理装置１００－２を貼着していることが好ましい。

また、情報処理装置１００－１は、カメラ若しくは撮像機能とともに、周囲音を収音するマイクロフォンを併せて装備してもよい。この場合、情報処理装置１００－２側では、情報処理装置１００－１で撮像された映像とオーディオを併せて出力するようにしてもよい。

情報処理装置１００－１と情報処理装置１００－２は、生体通信又は近距離無線通信を利用して直接通信を行なうことにより、連携して動作する。あるいは、スマートフォンのようなユーザが所持する他の情報端末を経由して情報処理装置１００－１と情報処理装置１００－２が通信して、連携動作を実現することもできる。

図１０には、２台の情報処理装置１００－１と情報処理装置１００－２が連携する際の通信シーケンス例を示している。他の情報端末を経由して連携することも想定されるが、図１０では図面の簡素化のため、情報処理装置１００－１と情報処理装置１００－２が直接通信し、又は、他の情報端末の図示を省略している。

例えば、情報処理装置１００－１と情報処理装置１００－２が同じユーザの身体に同時に貼着された状態となったときに、自動的に、あるいはユーザの手動操作（音声による指示を含む）により、情報処理装置１００－１と情報処理装置１００－２間で認証処理並びにペアリングのための処理が起動し、これらの処理を経て、情報処理装置１００－１と情報処理装置１００－２が連携する状態に入る。

連携している状態では、情報処理装置１００－１から情報処理装置１００－２へ、画像とオーディオ・データを常時送信し続け、情報処理装置１００－２も受信した画像とオーディオ・データを再生出力し続けるようにしてもよい。但し、画像とオーディオ・データを常時送信し続けると、装置の処理負荷が高く、バッテリの消耗が懸念される。とりわけ画像データの処理負荷は高い。通信帯域を使用し続けることも懸念される。そこで、ユーザの生体情報を利用して画像及びオーディオ・データのフィルタを行なうようにしてもよい。

情報処理装置１００－２側で受信データのフィルタを行なうようにすることもできるが、情報処理装置１００－１から送信する前にフィルタを行なうようにすることがシステム全体としては効率的である。また、ユーザの生体情報を、情報処理装置１００－１又は情報処理装置１００－２のいずれに装備された生体センサで検出するようにしてもよい。あるいは、同じユーザに同時に貼着されているその他の情報処理装置で検出された生体情報を利用してフィルタを行なうようにすることも可能である。

なお、上記では説明の簡素化のため、２台の情報処理装置１００－１、１００－２が連携する実施例を取り上げたが、もちろん同じユーザに同時に貼着される３台以上の情報処理装置が連携するという実施例も想定される。

多くの貼着場所に適用することを想定して、可能な限り多種類のセンサ素子及びアクチュエータ素子を装備するという、ハイスペックな情報処理装置１００の構成方法が考えられる（前述）。このような構成方法を採用する場合、現実に貼着した場所に応じて、稼働させることが必須若しくは好ましいセンサ素子及びアクチュエータ素子と、逆に稼働させる必要がないセンサ素子及びアクチュエータ素子が生じる。

稼働させることが好ましいセンサ素子及びアクチュエータ素子を稼働させていないと、ユーザは情報処理装置１００を自分の身体に貼着したことによる十分な恩恵を享受できなくなる。また、稼働させる必要がないセンサ素子及びアクチュエータ素子を稼働し続けると、バッテリを浪費してしまう。

そこで、ハイスペックな情報処理装置１００においては、ユーザの身体に貼着された場所を自動認識又は手動認識（ユーザからの音声による指示を含む）して、各センサ素子及びアクチュエータ素子のオン／オフを切り替え制御するようにする。また、各センサ素子及びアクチュエータ素子の完全なオン／オフの切り替えを制御するのではなく、貼着した場所から推定される使用目的などに応じて、センサ感度を段階的に切り替える、アクチュエータの出力レベルを段階的に切り替える、といった制御を実施するようにしてもよい。

例えば、情報処理装置１００の起動処理として、特定の（若しくは、所定数以上の生体センサを起動させて、制御部は、検出された生体情報（若しくは、検出された複数の生体情報の組み合わせ）に基づいて、貼着場所を推定する。そして、制御部は、推定された貼着場所に基づいて、必要なセンサ素子及びアクチュエータ素子をオンにするとともに、不要なセンサ素子及びアクチュエータ素子をオフにする。

あるいは、制御部は、振動センサで検出した振動データに基づいて情報処理装置１００本体の貼着場所を推定するとともに、推定された貼着場所に基づいて、必要なセンサ素子及びアクチュエータ素子をオンにするとともに、不要なセンサ素子及びアクチュエータ素子をオフにする。

情報処理装置１００本体が貼着された場所毎に、振動データの特徴が相違し、必然的に振動データに基づく行動認識アルゴリズムも相違する。そこで、制御部は、自ら推定した貼着場所に応じた認識アルゴリズムを適用して、振動データに基づくユーザの行動認識を実施するようにし、さらに振動データに基づく行動認識の学習を実施するようにしてもよい。

また、制御部は、貼着場所に応じて起動したアクチュエータ素子を用いて、行動認識結果に応じた駆動制御を実施して、ユーザに対して行動認識結果をフィードバックし、若しくは行動認識結果に基づく情報提供などのサービスを実施するようにしてもよい。

図１１には、情報処理装置１００の貼着場所に応じた処理手順をフローチャートの形式で示している。図示の処理手順は、例えば情報処理装置１００内の制御部が主導して実施されるものとする。

まず、制御部は、自動認識又は手動認識により、情報処理装置１００本体の貼着場所の認識処理を実施する（ステップＳ１１０１）。

ステップＳ１１０１では、制御部は、特定の（若しくは、所定数以上の生体センサを起動させて、制御部は、検出された生体情報（若しくは、検出された複数の生体情報の組み合わせ）に基づいて、情報処理装置１００本体の貼着場所を推定する。あるいは、制御部は、手動認識（ユーザからの音声による指示を含む）に基づいて、情報処理装置１００本体の貼着場所を推定する。あるいは、制御部は、振動センサで検出した振動データに基づいて、情報処理装置１００本体の貼着場所を推定する。

ここで、制御部は、情報処理装置１００本体の貼着場所を推定できたかどうかをチェックする（ステップＳ１１０２）。貼着場所を推定できなかった場合には（ステップＳ１１０２のＮｏ）、貼着場所の推定が不能かどうかをさらにチェックする（ステップＳ１１０６）。

推定不能でなければ（ステップＳ１１０６のＮｏ）、ステップＳ１１０１に戻り、貼着場所の推定処理を継続する。また、貼着場所の推定が不能な場合には（ステップＳ１１０６のＹｅｓ）、本処理を停止（ＡＢＯＲＴ）する。例えば、所定時間以内若しくは所定の試行回数以内で貼着場所を推定することができなかった場合には、推定不能と判定する。あるいは、貼着場所を推定不能な場合には、推定結果に基づかず、あらかじめ決められたセンサ素子及びアクチュエータ素子の組み合わせをオンにするようにしてもよい。

一方、情報処理装置１００本体の貼着場所を推定することができた場合には（ステップＳ１１０２のＹｅｓ）、制御部は、推定された貼着場所に基づいて、必要なセンサ素子及びアクチュエータ素子をオンにするとともに、不要なセンサ素子及びアクチュエータ素子をオフにする（ステップ１１０３）。

その後、制御部は、ステップＳ１１０１で推定した貼着場所に応じた認識アルゴリズムを適用して、振動データに基づくユーザの行動認識を実施する（ステップＳ１１０４）。

そして、制御部は、ステップＳ１１０３で貼着場所に応じて起動したアクチュエータ素子を用いて、行動認識結果に応じた駆動制御を実施して、ユーザに対して行動認識結果をフィードバックし、若しくは行動認識結果に基づく情報提供などのサービスを実施する（ステップＳ１１０５）。

なお、行動認識処理やその学習処理は計算負荷が大きいことから、比較的安価で小型に構成される情報処理装置１００ではなく、スマートフォンなどユーザが所持する他の情報端末で実施するようにしてもよい。

図１２には、情報処理装置１００の振動センサで検出される振動データの処理を他の情報端末側で実施する際の通信シーケンス例を示している。但し、情報処理装置１００は、Ｗｉ－Ｆｉ若しくはその他の近距離無線通信を利用して相互接続されるものとする。

一連の処理に先駆けて、情報処理装置１００と情報端末は認証処理を実施する。

この認証処理に成功すると、情報処理装置１００は、所定期間だけ、自身の振動センサで検出される振動データを情報端末に送信し続ける。

情報端末は、情報処理装置１００から受信した振動データから特徴データを抽出し、特徴データの時系列情報に基づいて情報処理装置１００が貼着されている場所を推定すると、推定結果を情報処理装置１００に返信する。

情報処理装置１００は、情報端末が推定した貼着場所に従って、必要なセンサ素子及びアクチュエータ素子をオンにするとともに、不要なセンサ素子及びアクチュエータ素子をオフにする。

その後も、情報処理装置１００は、自身の振動センサで検出される振動データを情報端末に送信し続ける。

情報端末は、先に自身で推定した情報処理装置１００の貼着場所に応じて、振動データに基づくユーザの行動認識を実施し、さらに振動データに基づく行動認識の学習を実施する。そして、情報端末は、行動認識の結果や学習結果を、ユーザの行動履歴に関する情報として端末内に保存する。また、情報端末は、行動認識の結果や学習結果を、情報処理装置１００にフィードバックする。

情報処理装置１００側では、情報端末からフィードバックされた行動認識結果に応じてアクチュエータ素子の駆動制御を実施して、ユーザに対して行動認識結果をフィードバックし、若しくは行動認識結果に基づく情報提供などのサービスを実施する。

情報処理装置１００は、ユーザの身体表面に貼着して、スタンドアロンのライフログ記録装置として利用に供される一方、ユーザが所持するスマートフォンなどの他の情報端末や、クラウド（インターネット上に設置されたサーバなど）などとも接続して利用することも可能である。情報処理装置１００は、他の情報端末やクラウドに接続することで、これらの計算リソースを活用して、スタンドアロンでは困難な処理を実現可能にして、多種多様なサービスをユーザに提供することが可能になる。

以下では、第７の実施例として、情報処理装置１００と外部装置との接続手順について説明する。

図１３には、情報処理装置１００と、ユーザが所持する情報端末（スマートフォンなど）が接続するための処理手順を例示している。但し、同図では、情報処理装置１００と情報端末はＮＦＣなどの近接無線通信技術を利用して接続されるものとする。

情報処理装置１００は、粘着部１０３の糊面から剥離紙（前述）を剥離したことなどに応答して電源がオンになると（Ｓ１３０１）、粘着部１０３にてユーザの身体表面に貼着されたことを検出する貼着検出待ち状態に入る（Ｓ１３０２）。

そして、情報処理装置１００は、粘着部１０３がユーザの身体表面に貼着されたことを検出すると（Ｓ１３０３のＹｅｓ）、続いて、スマートフォンなど、同じユーザが所持する情報端末からの近接無線通信による接続要求を待機する（ステップＳ１３０４）。

ユーザは、情報端末本体を、自分の皮膚に貼着された情報処理装置１００本体にかざすなどして近接させる（Ｓ１３１１）。そして、情報端末は、近接無線通信を利用して、情報処理装置１００に対して接続要求を発行する（Ｓ１３１２）。

情報処理装置１００は、情報端末から接続要求を受信すると（Ｓ１３０４のＹｅｓ）、情報処理装置１００自身の情報を含む端末情報を、情報端末に対して発行する（Ｓ１３０５）。端末情報の構成は任意である。例えば情報処理装置１００を識別する装置識別情報や、情報処理装置１００本体が貼着されたユーザを特定するユーザ固有情報などを端末情報に含めるようにしてもよい。

情報端末は、接続要求先の情報処理装置１００から端末情報を受信することができたなら（Ｓ１３１３のＹｅｓ）、情報処理装置１００に接続完了通知を送信することで（Ｓ１３１４）、情報処理装置１００との接続を完了する。なお、情報端末は、情報処理装置１００から受信した端末情報の検証若しくは認証処理を行なってから、接続完了通知を送信するようにしてもよい。

また、情報処理装置１００は、接続要求元の情報端末から接続完了通知を受信したことにより（Ｓ１３０６のＹｅｓ）、情報端末との接続を完了する。

図１４には、情報処理装置１００とクラウドが、ユーザが所持する情報端末（スマートフォンなど）を経由して接続するための処理手順を例示している。但し、同図では、情報処理装置１００と情報端末間はＮＦＣなどの近接無線通信技術を利用して接続され、情報端末とクラウド間はインターネットなどの広域ネットワーク経由で接続されることを想定している。

情報処理装置１００は、粘着部１０３の糊面から剥離紙（前述）を剥離したことなどに応答して電源がオンになると（Ｓ１４０１）、粘着部１０３にてユーザの身体表面に貼着されたことを検出する貼着検出待ち状態に入る（Ｓ１４０２）。

そして、情報処理装置１００は、粘着部１０３がユーザの身体表面に貼着されたことを検出すると（Ｓ１４０３のＹｅｓ）、続いて、スマートフォンなど、同じユーザが所持する情報端末からの近接無線通信による接続要求を待機する（ステップＳ１４０４）。

ユーザは、情報端末本体を、自分の皮膚に貼着された情報処理装置１００本体にかざすなどして近接させる（Ｓ１４１１）。そして、情報端末は、近接無線通信を利用して、情報処理装置１００に対して接続要求を発行する（Ｓ１４１２）。

情報処理装置１００は、情報端末から接続要求を受信すると（Ｓ１４０４のＹｅｓ）、情報処理装置１００自身の情報を含む端末情報を、情報端末に対して発行する（Ｓ１４０５）。

情報端末は、接続要求先の情報処理装置１００から端末情報を受信することができたなら（Ｓ１４１３のＹｅｓ）、続いてクラウドに対して接続要求を発行する（Ｓ１４１４）。

クラウドは、情報端末から接続要求を受信すると（Ｓ１４２１のＹｅｓ）、情報端末に接続完了通知を送信することで（Ｓ１４２２）、情報端末（若しくは、情報端末越しの情報処理装置１００）との接続を完了する。なお、クラウドは、情報端末や情報処理装置１００の検証若しくは認証処理を行なってから、接続完了通知を送信するようにしてもよい。

情報端末は、接続要求先のクラウドから接続完了通知を受信すると（Ｓ１４１５のＹｅｓ）、情報処理装置１００に接続完了通知を送信することで（Ｓ１４１６）、情報処理装置１００との接続を完了する。

また、情報処理装置１００は、接続要求元の情報端末から接続完了通知を受信したことにより（Ｓ１４０６のＹｅｓ）、情報端末との接続を完了する。

図１５には、情報処理装置１００とクラウドが接続するための処理手順を例示している。但し、同図では、情報処理装置１００がユーザ認証用の生体センサを搭載していることを想定している。なお、図１４に示した接続手順と同様に、情報処理装置１００とクラウドは、ユーザが所持する情報端末などの中継装置を介して接続を行なってもよいが、図１５では説明の簡素化のため中継装置については図示を省略する。

情報処理装置１００は、粘着部１０３の糊面から剥離紙（前述）を剥離したことなどに応答して電源がオンになると（Ｓ１５０１）、粘着部１０３にてユーザの身体表面に貼着されたことを検出する貼着検出待ち状態に入る（Ｓ１５０２）。

情報処理装置１００は、粘着部１０３がユーザの身体表面に貼着されたことを検出すると（Ｓ１５０３のＹｅｓ）、続いて、生体センサを用いて、ユーザ認証用、すなわちユーザ固有情報となる生体情報を、生体センサを用いてユーザの身体から取得する（ステップＳ１５０４）。そして、情報処理装置１００は、クラウドに対して、ユーザ固有情報を含んだ接続要求を発行する（Ｓ１５０５）。

クラウドは、情報処理装置１００から接続要求を受信すると（Ｓ１５１１のＹｅｓ）、接続要求元の情報処理装置１００に接続完了通知を送信することで（Ｓ１５１２）、情報処理装置１００との接続を完了する。このとき、クラウドは、情報処理装置１００が貼着されたユーザのユーザ固有情報の検証若しくは認証処理を行なってから、接続完了通知を送信するようにしてもよい。

また、情報処理装置１００は、接続要求先のクラウド接続完了通知を受信したことにより（Ｓ１５０６のＹｅｓ）、情報端末との接続を完了する。

図１６には、情報処理装置１００とクラウドが接続するための処理手順を例示している。但し、同図に示す接続手順では、情報処理装置１００の使用開始時（若しくは、購入時）に、情報処理装置１００とこれを身体に貼着したユーザのアカウントとを対応付けるという点で、図１５に示した接続手順とは相違する。なお、図１４に示した接続手順と同様に、情報処理装置１００とクラウドは、ユーザが所持する情報端末などの中継装置を介して接続を行なってもよいが、図１６では説明の簡素化のため中継装置については図示を省略する。

情報処理装置１００は、粘着部１０３の糊面から剥離紙（前述）を剥離したことなどに応答して電源がオンになると（Ｓ１６０１）、粘着部１０３にてユーザの身体表面に貼着されたことを検出する貼着検出待ち状態に入る（Ｓ１６０２）。

情報処理装置１００は、粘着部１０３がユーザの身体表面に貼着されたことを検出すると（Ｓ１６０３のＹｅｓ）、続いて、情報処理装置１００を一意に識別する装置識別情報を、制御部内のメモリなどからから取得する（ステップＳ１６０４）。そして、情報処理装置１００は、クラウドに対して、装置識別情報とユーザ・アカウントの情報を含んだ接続要求を発行する（Ｓ１６０５）。

クラウドは、情報処理装置１００から接続要求を受信すると（Ｓ１６１１のＹｅｓ）、受け取った装置識別情報とユーザ・アカウントを確認して、これらの対応付け処理を実施する（Ｓ１６１２）。そして、クラウドは、接続要求元の情報処理装置１００に接続完了通知を送信することで（Ｓ１６１３）、情報処理装置１００との接続を完了する。

また、情報処理装置１００は、接続要求先のクラウド接続完了通知を受信したことにより（Ｓ１６０６のＹｅｓ）、情報端末との接続を完了する。

以上、特定の実施形態を参照しながら、本明細書で開示する技術について詳細に説明してきた。しかしながら、本明細書で開示する技術の要旨を逸脱しない範囲で当業者が該実施形態の修正や代用を成し得ることは自明である。

本明細書で開示する情報処理装置は、身体の表面（皮膚）に貼着して用いられるウェアラブル・デバイスであり、例えばユーザのこめかみ、眉間、耳裏、顎の下、首、首元、咽喉部、上腕、前腕、手首、手の甲、腹部などの部位に貼着して用いられる。また、同様の情報処理装置を、人体ではなくさまざまな機械類やモノに貼着して、ＩｏＴデバイスとしても活用することができる。

要するに、例示という形態により本明細書で開示する技術について説明してきたのであり、本明細書の記載内容を限定的に解釈するべきではない。本明細書で開示する技術の要旨を判断するためには、特許請求の範囲を参酌すべきである。

なお、本明細書の開示の技術は、以下のような構成をとることも可能である。
（１）収音機能を有する収音センサと、
前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、
前記収音センサ及び前記通信部を制御する制御部と、
前記収音センサ、前記通信部、及び前記制御部のうち少なくとも１つに対して電源を供給する電源部と、
前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、
前記筐体部をユーザに固定する貼着部と、
を具備する情報処理装置。
（２）前記収音センサは、前記ユーザの肉伝導により収音可能である、
上記（１）に記載の情報処理装置。
（３）前記ユーザの生体情報を検出する生体センサをさらに備え、
前記制御部は、前記生体センサにより検出された生体情報に基づいて、前記収音センサにより収音されたオーディオ・データに対する処理を制御する、
上記（１）又は（２）のいずれかに記載の情報処理装置。
（４）前記制御部は、前記生体センサにより検出された生体情報に基づいて、前記オーディオ・データの間欠再生を制御する、
上記（３）に記載の情報処理装置。
（５）前記制御部は、前記オーディオ・データと前記生体情報とを時間方向に同期させた統合信号を生成して、前記通信部を介して出力するように制御する、
上記（３）又は（４）のいずれかに記載の情報処理装置。
（６）前記貼着部における前記ユーザとの貼着状態を検出する貼着センサをさらに備え、
前記制御部は、前記貼着センサにより検出された貼着状態に応じて、前記情報処理装置の動作を制御する、
上記（１）乃至（５）のいずれかに記載の情報処理装置。
（７）さらにアクチュエータを備える、
上記（１）乃至（６）のいずれかに記載の情報処理装置。
（８）前記アクチュエータとしてスピーカを備え、
前記筐体部は、前記貼着部により前記ユーザの耳裏に固定される、
上記（７）に記載の情報処理装置。
（９）前記アクチュエータとして表示部を備える、
上記（７）又は（８）のいずれかに記載の情報処理装置。
（１０）撮像センサをさらに備える、
上記（１）乃至（９）のいずれかに記載の情報処理装置。
（１１）さらに複数種類のセンサと複数種類のアクチュエータを備え、
前記制御部は、前記の複数種類のセンサと複数種類のアクチュエータを制御する、
上記（１）乃至（１０）のいずれかに記載の情報処理装置。
（１２）前記制御部は、前記貼着部で前記筐体部を前記ユーザに固定した場所に応じて、各センサ及び各アクチュエータの少なくともオン／オフを制御する、
上記（１１）に記載の情報処理装置。
（１３）振動センサをさらに備え、
前記制御部は、前記振動センサが検出する前記ユーザの身体の振動データに基づいて認識される固定場所に応じて、各センサ及び各アクチュエータの少なくともオン／オフを制御する、
上記（１１）に記載の情報処理装置。
（１４）前記筐体部は、柔軟性を有する、
上記（１）乃至（１３）のいずれかに記載の情報処理装置。
（１４－１）前記筐体部は、撥水性を有する、
上記（１）乃至（１４）のいずれかに記載の情報処理装置。
（１４－２）前記筐体部の表面は肌色である、
上記（１）乃至（１４）のいずれかに記載の情報処理装置。
（１５）前記収音センサ、前記通信部、及び前記制御部を含む回路部品を搭載する基板部をさらに備え、
前記筐体部は、前記基板部を収納する、
上記（１）乃至（１４）のいずれかに記載の情報処理装置。
（１６）前記基板部は、少なくとも２方向の切り込みを有し、柔軟性又は伸縮性を備える、
上記（１５）に記載の情報処理装置。
（１７）前記貼着部は、１以上の開口を有する、
上記（１）乃至（１６）のいずれかに記載の情報処理装置。
（１８）前記貼着部に積層された体液処理部をさらに備える、
上記（１）乃至（１７）のいずれかに記載の情報処理装置。
（１８－１）前記体液処理部は、吸湿性又は透湿性を有する、
上記（１８）に記載の情報処理装置。
（１８－２）前記体液処理部は、毛細管現象により体液を誘導するメッシュ材からなる、
上記（１８）に記載の情報処理装置。
（１８－３）前記体液処理部は、高分子ポリマー吸湿材からなる、
上記（１８）に記載の情報処理装置。
（１９）収音機能を有する収音センサと、前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、前記収音センサ、前記通信部、及び前記制御部のうち少なくとも１つに対して電源を供給する電源部と、前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、前記筐体部をユーザに固定する貼着部を具備する情報処理装置の制御方法であって、
前記収音センサにより収音したオーディオ・データを処理するステップと、
前記通信部を介した送受信処理を制御するステップと、
を有する情報処理装置の制御方法。
（２０）収音機能を有する収音センサと、前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、前記収音センサ、前記通信部、及び前記制御部のうち少なくとも１つに対して電源を供給する電源部と、前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、前記筐体部をユーザに固定する貼着部を具備する情報処理装置を制御するためのコンピュータ・プログラムを記録する記録媒体であって、前記コンピュータ・プログラムは、
前記収音センサにより収音したオーディオ・データを処理するステップと、
前記通信部を介した送受信処理を制御するステップと、
をコンピュータに実行させるようにコンピュータ可読形式で記述される、記録媒体。

１００…情報処理装置
１０１…電気部、１０２…筐体部
１０３…貼着部、１０４…体液処理部
３１０…センサ部
３１１…第１のセンサ部、３１２…第２のセンサ部
３２０…アクチュエータ部
３２１…第１のアクチュエータ部、３２２…第２のアクチュエータ部
３３０…通信部
４００…基板、４０１…収音センサ、４０２…制御部
４０３…チップ・アンテナ、４０４…電源部

Claims (18)

1. 収音機能を有する収音センサを含む複数種類のセンサと、
   複数種類のアクチュエータと、
   前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、
   前記収音センサ及び前記通信部を制御する制御部と、
   前記収音センサ、前記通信部、及び前記制御部のうち少なくとも１つに対して電源を供給する電源部と、
   前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、
   前記筐体部をユーザに固定する貼着部と、
   を具備し、
   前記制御部は、前記貼着部で前記筐体部を前記ユーザに固定した場所に応じて、各センサ及び各アクチュエータの少なくともオン／オフを制御する、
   情報処理装置。
2. 前記収音センサは、前記ユーザの肉伝導により収音可能である、
   請求項１に記載の情報処理装置。
3. 前記ユーザの生体情報を検出する生体センサをさらに備え、
   前記制御部は、前記生体センサにより検出された生体情報に基づいて、前記収音センサにより収音されたオーディオ・データに対する処理を制御する、
   請求項１に記載の情報処理装置。
4. 前記制御部は、前記生体センサにより検出された生体情報に基づいて、前記オーディオ・データの間欠再生を制御する、
   請求項３に記載の情報処理装置。
5. 前記制御部は、前記オーディオ・データと前記生体情報とを時間方向に同期させた統合信号を生成して、前記通信部を介して出力するように制御する、
   請求項３に記載の情報処理装置。
6. 前記貼着部における前記ユーザとの貼着状態を検出する貼着センサをさらに備え、
   前記制御部は、前記貼着センサにより検出された貼着状態に応じて、前記情報処理装置の動作を制御する、
   請求項１に記載の情報処理装置。
7. さらにアクチュエータを備える、
   請求項１に記載の情報処理装置。
8. 前記アクチュエータとしてスピーカを備え、
   前記筐体部は、前記貼着部により前記ユーザの耳裏に固定される、
   請求項７に記載の情報処理装置。
9. 前記アクチュエータとして表示部を備える、
   請求項７に記載の情報処理装置。
10. 撮像センサをさらに備える、
    請求項１に記載の情報処理装置。
11. 振動センサをさらに備え、
    前記制御部は、前記振動センサが検出する前記ユーザの身体の振動データに基づいて認識される固定場所に応じて、各センサ及び各アクチュエータの少なくともオン／オフを制御する、
    請求項１に記載の情報処理装置。
12. 前記筐体部は、柔軟性を有する、
    請求項１に記載の情報処理装置。
13. 前記収音センサ、前記通信部、及び前記制御部を含む回路部品を搭載する基板部をさらに備え、
    前記筐体部は、前記基板部を収納する、
    請求項１に記載の情報処理装置。
14. 前記基板部は、少なくとも２方向の切り込みを有し、柔軟性又は伸縮性を備える、
    請求項１３に記載の情報処理装置。
15. 前記貼着部は、１以上の開口を有する、
    請求項１に記載の情報処理装置。
16. 前記貼着部に積層された体液処理部をさらに備える、
    請求項１に記載の情報処理装置。
17. 収音機能を有する収音センサを含む複数種類のセンサと、複数種類のアクチュエータと、前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、前記収音センサ、前記通信部、及び制御部のうち少なくとも１つに対して電源を供給する電源部と、前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、前記筐体部をユーザに固定する貼着部を具備する情報処理装置の制御方法であって、
    前記制御部が前記貼着部で前記筐体部を前記ユーザに固定した場所に応じて、各センサ及び各アクチュエータの少なくともオン／オフを制御するステップ、
    前記収音センサにより収音したオーディオ・データを処理するステップと、
    前記通信部を介した送受信処理を制御するステップと、
    を有する情報処理装置の制御方法。
18. 収音機能を有する収音センサを含む複数種類のセンサと、複数種類のアクチュエータと、前記収音センサにより収音されたオーディオ・データを外部に無線送信する通信部と、前記収音センサ、前記通信部、及び制御部のうち少なくとも１つに対して電源を供給する電源部と、前記収音センサ、前記通信部、前記制御部、及び前記電源部のうち少なくとも１つを収納する筐体部と、前記筐体部をユーザに固定する貼着部を具備する情報処理装置を制御するためのコンピュータ・プログラムを記録する記録媒体であって、前記コンピュータ・プログラムは、
    前記制御部が前記貼着部で前記筐体部を前記ユーザに固定した場所に応じて、各センサ及び各アクチュエータの少なくともオン／オフを制御するステップ、
    前記収音センサにより収音したオーディオ・データを処理するステップと、
    前記通信部を介した送受信処理を制御するステップと、
    をコンピュータに実行させるようにコンピュータ可読形式で記述される、記録媒体。

Images