JP2007241866A - 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法 - Google Patents

複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法 Download PDF

Info

Publication number
JP2007241866A
JP2007241866A JP2006066184A JP2006066184A JP2007241866A JP 2007241866 A JP2007241866 A JP 2007241866A JP 2006066184 A JP2006066184 A JP 2006066184A JP 2006066184 A JP2006066184 A JP 2006066184A JP 2007241866 A JP2007241866 A JP 2007241866A
Authority
JP
Japan
Prior art keywords
sensor data
specific signal
signal pattern
feature vector
spatio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006066184A
Other languages
English (en)
Other versions
JP5009543B2 (ja
JP2007241866A5 (ja
Inventor
Toshiki Iso
俊樹 磯
Kenichi Yamazaki
憲一 山崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Priority to JP2006066184A priority Critical patent/JP5009543B2/ja
Publication of JP2007241866A publication Critical patent/JP2007241866A/ja
Publication of JP2007241866A5 publication Critical patent/JP2007241866A5/ja
Application granted granted Critical
Publication of JP5009543B2 publication Critical patent/JP5009543B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Testing Or Calibration Of Command Recording Devices (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

【課題】複軸センサから出力される複軸センサデータに基づいて、そのセンサを含む機器を携行している者のコンテキストを推定するための特定信号パターン特徴マップを作成する。
【解決手段】複軸センサから得られる時系列の複軸センサデータにおける特徴的な信号パターンを検出するシステムにおいて、得られる複軸センサデータの中で検出したい特定信号パターンを辞書データとして獲得し、自己組織化アルゴリズムで学習させて得られる特定信号パターン特徴マップ及び特定信号パターン発火確率マップから辞書データの特定信号パターン基底センサデータを抽出する。抽出されたデータを各軸回りに回転させて生成した擬似データを自己組織化アルゴリズムで学習させ、特定信号パターン特徴マップ及び特定信号パターン発火確率マップを得る。両マップを用い、複軸センサから得られる時系列のデータから特定信号パターンを抽出する。
【選択図】 図5

Description

本発明は複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法に関し、特にユーザのコンテキストを獲得するための特定信号パターン検出システム、特定信号パターン検出方法に関する。
実世界指向型サービスを実現する上でモバイル環境下での個人の状況(コンテキスト)を理解することは重要である。従来、携帯端末を持ち歩くようなモバイル環境下でユーザのコンテキストを獲得に関する研究は、例えば、非特許文献1に記載されている。
非特許文献1においては、自己組織化特徴マップのノードについて区分けを行い(すなわちクラスタリングを行い)、その区分けを固定している。そして、それに従って処理を行うことで、コンテキスト情報を取得している。
A. Krause et. al, "Unsupervised, Dynamic Identification of Physiological and Activity Context in Wearable Computing",[online]、[平成18年3月4日検索]、インターネット<URL:http://www.cc.gatech.edu/ccg/paper_of_week/krause-iswc2003-unsup-activity.pdf>
上述した非特許文献1に記載されている技術には、以下のような制約があった。
(1)獲得したいコンテキストに応じてセンサを特定の位置に固定することが必要
(2)特定の軸のセンサ情報のみ、もしくは、各軸のセンサデータからセンサデータ全体の大きさにしたものを利用しているため、抽出可能な特定信号パターンが限定
(3)辞書データを部分空間法などの線形手法により特定信号パターンの基底データを選択していたため、ゆらぎのあるデータへ適用した場合は基底データの抽出精度に影響を受け易い。
本発明は上述した従来技術の課題を解決するためになされたものであり、その目的は複軸センサの設置位置に依らず、また、センサデータのゆらぎにロバストであるユーザのコンテキストに相当する特定信号パターンを獲得する特定信号パターン検出システム、特定信号パターン検出方法を提供することである。
本発明の請求項1による特定信号パターン検出システムは、
複軸センサから得られる時系列の複軸センサデータにおいて検出したい複数の特定信号パターンを辞書データとして予め獲得するとともに、それらの特定信号パターンに識別ラベルを付与する識別ラベル付与手段と、
前記識別ラベル付与手段によって獲得された特定信号パターンを予め用意された時間窓に基づいて時間分割センサデータとして分割するデータ分割手段と、
前記データ分割手段によって得られた時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成する正規化センサデータ生成手段と、
前記正規化センサデータ生成手段によって得られた正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成する時空間分解センサデータ生成手段と、
前記時空間分解センサデータ生成手段によって得られた時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するエントロピー算出手段と、
前記エントロピー算出手段によって時空間解像度レベルごとに算出された時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択するデータ選択手段と、
前記データ選択手段によって選択された基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するセンサデータ特徴ベクトル生成手段と、
前記センサデータ特徴ベクトル生成手段によって生成された複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成する複軸センサデータ特徴ベクトル生成手段と、
前記複軸センサデータ特徴ベクトル生成手段によって生成された複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成する特定信号パターン特徴マップ生成手段と、
前記特定信号パターン特徴マップ生成手段によって得られた特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出する類似度算出手段と、
前記類似度算出手段によって得られた複軸センサデータ特徴ベクトルの分布統計量を算出する分布統計量算出手段と、
前記前記類似度算出手段及び前記分布統計量算出手段によって得られた複軸センサデータ特徴ベクトルの分布統計量ならびに発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルの類似度を算出する類似度算出手段と、
前記類似度算出手段によって得られた特定信号パターン特徴マップの各ノードごとに特定信号パターンが発火する確率を算出し特定信号パターン発火確率マップを生成する特定信号パターン発火確率マップ生成手段と、
前記特定信号パターン発火確率マップ生成手段によって得られた特定信号パターン発火確率マップのうち予め設定された閾値以上の確率を有するノードを基底特徴ノードベクトルとして抽出する基底特徴ノードベクトル抽出手段と、
前記基底特徴ノードベクトル抽出手段によって抽出された基底特徴ノードベクトルを発火させる基となった複軸センサデータ特徴ベクトルのうち、基底特徴ノードベクトルとの類似度が予め設定された閾値以上のものを基底複軸センサ特徴ベクトルとして抽出する基底複軸センサ特徴ベクトル抽出手段と、
前記基底複軸センサ特徴ベクトル抽出手段によって抽出された基底複軸センサ特徴ベクトルの基となった複軸の基底センサデータを抽出する基底センサデータ抽出手段と、
を含むことを特徴とする。このように構成すれば、質の良いデータを抽出することができる。
本発明の請求項2による特定信号パターン検出システムは、請求項1において、
前記基底センサデータ抽出手段によって抽出された複軸の基底センサデータを予め設定された刻み幅の角度で各軸回りに回転させることで擬似複軸センサデータを生成する擬似複軸センサデータ生成手段と、
前記擬似複軸センサデータ生成手段によって得られた複軸の基底センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成する時空間分解センサデータ生成手段と、
前記時空間分解センサデータ生成手段によって得られた時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するエントロピー算出手段と、
前記エントロピー算出手段によって時空間解像度レベルごとに算出された時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択する基底時空間分解センサデータ選択手段と、
前記基底時空間分解センサデータ選択手段によって選択された基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するセンサデータ特徴ベクトル生成手段と、
前記センサデータ特徴ベクトル生成手段によって生成された複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成する複軸センサデータ特徴ベクトル手段と、
前記複軸センサデータ特徴ベクトル手段によって生成された複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成する特定信号パターン特徴マップ生成手段と、
前記特定信号パターン特徴マップ生成手段によって得られた特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出する類似度算出手段と、
を含むことを特徴とする。このように構成すれば、より質の良いデータを抽出することができる。
本発明の請求項3による特定信号パターン検出システムは、請求項2において、
複軸センサから得られる時系列の複軸センサデータを予め用意された時間窓に基づいて時間分割複軸センサデータとして分割するデータ分割手段と、
前記データ分割手段によって得られた時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成する正規化センサデータ生成手段と、
前記正規化センサデータ生成手段によって得られた正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成する時空間分解センサデータ生成手段と、
前記時空間分解センサデータ生成手段によって得られた時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するエントロピー算出手段と、
前記エントロピー算出手段によって時空間解像度レベルごとに算出された時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択する基底時空間分解センサデータ選択手段と、
前記基底時空間分解センサデータ選択手段によって選択された基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するセンサデータ特徴ベクトル生成手段と、
前記センサデータ特徴ベクトル生成手段によって生成された複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成する複軸センサデータ特徴ベクトル生成手段と、
前記複軸センサデータ特徴ベクトル生成手段によって得られた複軸センサデータ特徴ベクトルを、事前に得られた複数の特定信号パターン特徴マップならびに特定信号パターン発火確率マップに入力することにより得られる発火した特徴マップノードベクトルのうち、予め設定された類似度に基づき複軸センサデータ特徴ベクトルに最も類似したものを特定信号パターン特徴ベクトルとして選択する特定信号パターン特徴ベクトル選択手段と、
を含むことを特徴とする。このように構成すれば、センサが任意の姿勢で設置されても正確なコンテキスト情報を取得することができる。
本発明の請求項4による特定信号パターン検出方法は、
複軸センサから得られる時系列の複軸センサデータにおいて検出したい複数の特定信号パターンを辞書データとして予め獲得するとともに、それらの特定信号パターンに識別ラベルを付与するステップと、
前記獲得された特定信号パターンを予め用意された時間窓に基づいて時間分割センサデータとして分割するステップと、
前記時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成するステップと、
前記正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成するステップと、
前記時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するステップと、
時空間解像度レベルごとに算出された前記時空間分解センサデータ情報エントロピーを予め用意された評価基準に基づいて基底時空間分解センサデータを選択するステップと、
選択された前記基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するステップと、
生成された前記複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成するステップと、
生成された前記複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成するステップと、
前記特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出するステップと、
前記複軸センサデータ特徴ベクトルの分布統計量を算出するステップと、
前記複軸センサデータ特徴ベクトルの分布統計量ならびに前記発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出するステップと、
前記特定信号パターン特徴マップの各ノードごとに特定信号パターンが発火する確率を算出し特定信号パターン発火確率マップを生成するステップと、
前記特定信号パターン発火確率マップのうち予め設定された閾値以上の確率を有するノードを基底特徴ノードベクトルとして抽出するステップと、
抽出された前記基底特徴ノードベクトルを発火させる基となった複軸センサデータ特徴ベクトルのうち、基底特徴ノードベクトルとの類似度が予め設定された閾値以上のものを基底複軸センサ特徴ベクトルとして抽出するステップと、
抽出された前記基底複軸センサ特徴ベクトルの基となった複軸の基底センサデータを抽出するステップと、
を含むことを特徴とする。このような方法によれば、質の良いデータを抽出することができる。
本発明の請求項5による特定信号パターン検出方法は、請求項において、
抽出された前記複軸の基底センサデータを予め設定された刻み幅の角度で各軸回りに回転させることで擬似複軸センサデータを生成するステップと、
前記複軸の基底センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成するステップと、
前記時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するステップと、
時空間解像度レベルごとに算出された前記時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択するステップと、
選択された前記基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するステップと、
生成された前記複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成するステップと、
生成された前記複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成するステップと、
前記特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出するステップと、
を含むことを特徴とする。このような方法によれば、より質の良いデータを抽出することができる。
本発明の請求項6による特定信号パターン検出方法は、請求項5において、
複軸センサから得られる時系列の複軸センサデータを予め用意された時間窓に基づいて時間分割複軸センサデータとして分割するステップと、
前記時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成するステップと、
前記正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成するステップと、
前記時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するステップと、
時空間解像度レベルごとに算出された前記時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択するステップと、
選択された前記基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するステップと、
生成された前記複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成するステップと、
前記複軸センサデータ特徴ベクトルを、事前に得られた複数の特定信号パターン特徴マップならびに特定信号パターン発火確率マップに入力することにより得られる発火した特徴マップノードベクトルのうち、予め設定された類似度に基づき複軸センサデータ特徴ベクトルに最も類似したものを特定信号パターン特徴ベクトルとして選択するステップと、
を含むことを特徴とする。このような方法によれば、センサが任意の姿勢で設置されても正確なコンテキスト情報を取得することができる。
要するに、本発明では、複軸センサから出力されるデータを取得し、取得データに基づいて、前記複軸センサを含む機器を携行している者のコンテキストを推定するための特定信号パターン特徴マップを作成する場合において、複軸ごとにセンシング可能なセンサデバイス(複軸センサ)の設置位置に依存せずに、その複軸センサから得られる時系列の複軸センサデータにおける特徴的な信号パターン(特定信号パターン)を検出するシステムにおいて、複軸センサから得られる複軸センサデータの中で検出したい特定信号パターンを辞書データとして獲得し、その辞書データを自己組織化アルゴリズムで学習させて得られる特定信号パターン特徴マップならびに特定信号パターン発火確率マップから辞書データの特定信号パターン基底センサデータを抽出している。そして、抽出された特定信号パターン基底センサデータを各軸回りに回転させることで生成した擬似データを自己組織化アルゴリズムで学習させることで特定信号パターン特徴マップならびに特定信号パターン発火確率マップを得ている。さらに、上記で得られた、特定信号パターン特徴マップならびに特定信号パターン発火確率マップを用いて、複軸センサから得られる時系列のセンサデータから特定信号パターンを抽出している。
本発明によれば、獲得したいコンテキストごとにモジュール用意して学習させる等のチューニングをすることなくユーザのコンテキストに相当する特定信号パターンが獲得できるという効果がある。
また、複軸センサを特定の位置に固定する必要がないので、専用の複軸センサを用いる必要がなく、例えば携帯電話機に搭載してある複軸センサを用いてプレゼンス情報を取得することができるという効果がある。
以下、本発明の実施の形態を、図面を参照して説明する。以下の説明において参照する各図では、他の図と同等部分は同一符号によって示されている。
なお、以下の説明において、(→)が付加されている符号はそれがベクトルであることを示している。また、→が上に付加されている符号もそれがベクトルであることを示している。
(基本構成)
本発明の実施形態による、複軸センサからの特定信号パターン検出システムの構成について図1を参照して説明する。同図は、特定信号パターン検出システムの基本的な構成例を示すものである。
同図を参照すると、本システムは、ユーザBの状況(コンテキスト)を獲得するために必要な複軸センサデータを検出できる加速度センサを搭載した携帯端末200と、この携帯端末200に搭載された加速度センサから検出された複軸センサデータからユーザBの状況をプレゼンス情報として提供する装置であるプレゼンス提供サーバ100と、このプレゼンス提供サーバ100で提供されたプレゼンス情報をユーザAへ提示するための携帯端末300とを含んで構成されている。なお、同図中のモバイルネットワークNWは、これらの間で信号授受を実現するためのネットワークであり、図示せぬ無線基地局装置、無線基地局制御装置等によって実現される。
図1中のユーザBの携帯端末200の内部構成例が図2に示されている。同図を参照すると、携帯端末200は、加速度センサから複軸センサデータを検出するセンサデータ獲得機能部21と、検出された複軸センサデータをプレゼンス提供サーバへ送信するセンサデータ送信機能部22とが搭載されている。この携帯端末200は、図示せぬCPU、通信部、メモリ、入出力操作部、表示部等、一般的な携帯電話端末としてのハードウェア構成を有しており、これらの構成によって上記の機能を実現している。
図1中のプレゼンス提供サーバ100の内部構成例が図3に示されている。同図を参照すると、プレゼンス提供サーバ100は、上記携帯端末200より送信された複軸センサデータを受信するセンサデータ受信機能部11と、このセンサデータ受信機能部11によって受信された複軸センサデータから信号パターン特徴ベクトルを抽出するセンサデータ解析機能部12と、事前に検出対象となる特定信号パターン特徴ベクトルを抽出し、そのデータを特定信号パターンデータベース101へ格納する特定信号パターン獲得機能部13と、センサデータ解析機能部12で抽出された信号パターン特徴ベクトルとデータベース101に格納されている特定信号パターン特徴ベクトルと照合するセンサデータ照合機能部14と、センサデータ照合機能部14で照合された特定信号パターン特徴ベクトルをプレゼンスデータベース102に基づいてプレゼンス情報に変換するプレゼンス情報変換機能部15と、変換されたプレゼンス情報をユーザAのリクエストに応じて提供するプレゼンス情報送信機能部16とを含んで構成されている。このプレゼンス提供サーバ100は、図示せぬCPU、通信部、メモリ、入出力部、表示部等、一般的なサーバ装置としてのハードウェア構成を有しており、これらの構成によって上記の機能を実現している。
図1中のユーザAの携帯端末300の内部構成例が図4に示されている。同図を参照すると、携帯端末300は、プレゼンス提供サーバ100から送信されたユーザBのプレゼンス情報を受信し表示するプレゼンス情報受信機能部23を含んで構成されている。この携帯端末300は、図示せぬCPU、通信部、メモリ、入出力操作部、表示部等、一般的な携帯電話端末としてのハードウェア構成を有しており、これらの構成によって上記の機能を実現している。
(複軸センサからの特定信号パターン検出方法)
図1〜図4に示されている構成からなるシステムによって実現される、複軸センサからの特定信号パターン検出方法の具体的な処理の流れについて、以下説明する。
図5に示されているように、本検出方法による処理は、オフライン処理で学習を行う段階(C−1)及び段階(C−2)と、オンライン処理で実測を行う段階(C−3)の3つの段階に大別することができる。なお、経年変化に対応するため、追加学習を行う処理を追加してもよい。この処理を追加すれば、ユーザBの年齢増加にも対応できる。
(C−1)
この段階は、質の良いデータを抽出する段階である。この段階では、辞書データD1を入力とし、前処理(S11)、特徴抽出処理(S12)、自己組織化学習(S13)、学習結果解析処理(S14)、基底センサデータ抽出処理(S15)を経て、特定信号パターン特徴マップ及び特定信号パターン発火確立マップからなるデータD2と、特定信号パターン基底センサデータD3とを導出する。
(C−2)
この段階は、上記の段階(C−1)で得たデータを基に、より質の良い辞書データを得る段階である。この段階では、上記段階(C−1)で得られた特定信号パターン基底センサデータD3を入力とし、擬似データ生成処理(S21)、特徴抽出処理(S22)、自己組織化学習(S23)、学習結果解析処理(S24)を経て、特定信号パターン基底センサデータD4を導出する。
(C−3)
この段階は、上記の段階(C−2)で得たデータを基に、実際の測定を行う段階である。この段階では、実測データD5を入力とし、前処理(S31)、特徴抽出処理(S32)、特定信号パターン検出処理(S33)を経て、特定信号パターン分析結果データD6を導出する。
以下、各段階について、図6〜図15を参照して詳細に説明する。
(質の良いデータの抽出)
図6は、図5中の段階(C−1)の詳細な処理内容を示す図である。
図5中の段階(C−1)中の前処理(S11)は図6中の処理(C−1−2)及び(C−1−3)に対応する。図5中の段階(C−1)中の特徴抽出処理(S12)は図6中の処理(C−1−4)から(C−1−7)までに対応する。図5中の段階(C−1)中の自己組織化学習処理(S13)は図6中の処理(C−1−8)に対応する。図5中の段階(C−1)中の学習結果解析処理(S14)は図6中の処理(C−1−9)及び(C−1−10)に対応する。図5中の段階(C−1)中の基底センサデータ抽出処理(S15)は図6中の処理(C−1−11)に対応する。以下、これらの処理の内容について説明する。
処理(C−1−1):ユーザBは複数軸センサデータが獲得できる加速度センサを搭載してある携帯端末を携行している。逐次、ユーザBの状況(コンテキスト)に応じて変動する複数軸センサデータ(加速度ベクトル)が獲得され、パケット通信でプレゼンス提供サーバへ送信される。
処理(C−1−2):プレゼンス提供サーバでは、ユーザBの携帯端末から送信された加速度ベクトルの時系列データを逐次受信する。時系列データとして受信される加速度ベクトル(→)a0(t)をデータ分割する。手法は限定されないが、ここでは、複数の時間窓
Figure 2007241866
を用意してデータ分割する。
処理(C−1−3):その後、データ補正処理を実施する。データ補正処理方法は加速度センサの用途によって異なるが、ここでは、Gaussianフィルターによるノイズ除去処理と、時間窓{tk}での加速度の正規化を行う。
続いて、センサデータ解析から特定信号パターンとの照合について述べる。
任意の姿勢で設置されたセンサから観測される時刻tでの実測データ加速度ベクトルを
(→)a0(t)=(a0x(t)、a0y(t)、a0z(t)) …(2)
理想的な姿勢で設置されたセンサから観測される時刻tにおける辞書データとなる加速度ベクトル(重力加速度も含む)を
(→)aD(t)=(aDX(t)、a0Y(t)、a0Z(t)) …(3)
とおく。
はじめに、辞書データとなる加速度ベクトル(→)aD(t)から特定信号パターン特徴マップを作成する方法について説明する。
処理(C−1−4):まず、加速度ベクトル(→)aD(t)の特徴を解析するために基底関数展開することで時空間解像度レベルごとに時空間分解センサデータに分解する。ここでは局在波による関数展開であるMother WaveletをHarr関数とするWavelet Packet分解を利用する。上記の式(3)の両辺にWavelet Packet分解を施すと解像度レベルpでの加速度ベクトル(→)aD(t)は以下のように表せる。
Figure 2007241866
ここで、(→)u(pq) D(t)は、解像度レベルpのq番目の分解波形(基底関数)を表す。
処理(C−1−5):次に、これら分解波形である基底関数
(→)u(pq) D(t)=
((→)u(pq) x(t)、(→)u(pq) y(t)、(→)u(pq) z(t))
のうち、加速度ベクトル(→)aD(t)を表現するのに最良基底関数となる基底関数を選択する。そこで、以下の情報エントロピーコスト関数を定義する。
Figure 2007241866
式(5)の左辺を最小にするpとqとの組み合わせを選択する。これにより、情報エントロピーの増加を防ぎ(冗長な表現ではなく)、波形を正確に分解することができる。
さらに、選択された基底関数(→)u(pq) D_BN(t)の情報エントロピー
Figure 2007241866
がもっとも大きいものから選び、それらを順次加えていった和が全情報エントロピー(情報エントロピーの総和)に対して閾値TSoEに達するまでの基底関数を選択する。
処理(C−1−6):そして、最終的に得られた基底関数(→)u(pq) D_F(t)に基づいて辞書データの特徴ベクトル加速度ベクトル(→)XDを以下のように定義する。
Figure 2007241866
ここで、
Figure 2007241866
であり、直流成分X(i) D_BN(0)の項は用いない。
処理(C−1−7):また、このとき特徴ベクトルの分布統計量として、下記のモーメントを算出する、ここでは、分布統計量ベクトルを下記のベクトル(→)M((→)X0)として表す。
(→)M((→)X0)=(M(1)((→)X0)、M(2)((→)X0)、…、M(n)((→)X0))…(9)
Figure 2007241866
ただし、
Figure 2007241866
そして、辞書データとなる全ての加速度ベクトル(→)aD(t)について辞書データの特徴ベクトル(→)XDを求める。
処理(C−1−8):次に、特徴ベクトル(→)XDを入力ベクトルとして自己組織化アルゴリズムによって学習させる。ここでは、既に公知であるKohonenの自己組織化アルゴリズムを用いる。
処理(C−1−9):学習終了後に得られる自己組織化特徴マップのノード(i,j)における特徴ノードベクトル(→)VD (i,j)に基づいて、辞書データの特徴ベクトルを入力した時に発火する特徴ノードベクトルとの対応関係を蓄積する。
ここで、自己組織化特徴マップの例が、図7〜図13に示されている。図7は、階段降り動作を行った場合の自己組織化特徴マップの例、図8は、階段昇り動作を行った場合の自己組織化特徴マップの例、図9は、早歩き動作を行った場合の自己組織化特徴マップの例、図10は、電車内歩行動作を行った場合の自己組織化特徴マップの例、図11は、電車着座動作を行った場合の自己組織化特徴マップの例、図12は、走行動作を行った場合の自己組織化特徴マップの例、図13は、平地歩行動作を行った場合の自己組織化特徴マップの例、である。これらは、その動作が行われている最中にいずれかのノードを発火させ、そのノード内に記載されている数値を上昇させたマップである。そして、1つのノードの数値を上昇させる場合、そのノードに隣接する近傍の6つのノードについても数値を上昇させる。このマッピング処理を所定周期(例えば、数秒周期)で繰返し行う。このようにマッピングすることにより、数値の大きなノードほど発火の頻度が高いことになる。すなわち、このマッピング処理によって、発火度数を把握することができる。
非特許文献1においては、自己組織化特徴マップのノードについて区分けを行い(すなわちクラスタリングを行い)、その区分けを固定しそれに従って処理を行っている。このため、図8〜図13のように発火ノードが比較的集中している場合には、非特許文献1に記載の技術を利用して処理を行っても問題無いが、図7のように発火ノードが分散している傾向がある場合には、非特許文献1に記載の技術を利用して処理を行うと正しいコンテキスト情報が得られない。
これに対し、本発明では、ノードの区分けを行わない。そして、ゆらぎのある質の悪いデータは学習対象とせず、質の良いデータのみを自己組織化特徴マップ中から抽出して学習対象とする。このため、図8〜図13のように発火ノードが比較的集中している場合はもちろん、図7のように発火ノードが分散している傾向がある場合でも、正しいコンテキスト情報が得られる。
処理(C−1−10):上記対応関係の蓄積結果に基づいて、特徴ノードベクトル(→)VD (i,j)が発火した時に辞書データの特徴ベクトル(→)XDが特定信号パターンCnである確率P(i,j)(Cn)を算出する。
Figure 2007241866
ここで、
Figure 2007241866
は特定信号パターンCnのうち特徴ノードベクトル(→)VD (i,j)で発火する確率を、P(Cn)は特定信号パターンCnが発生する確率を表し、下記のように定義される。
Figure 2007241866
Figure 2007241866
ただし、
Figure 2007241866
はZが生じる個数を、(→)VD (i,j)は特徴ノード(i,j)で特定信号パターンCnが生じる事象を表す。
そして、全ての特徴ノード(i,j)についての{(→)VD (i,j)}を特定信号パターン特徴マップとして、{P(i,j)(Cn)}を特定信号パターン発火確率マップとして獲得する。
処理(C−1−11):この時、P(i,j)(Cn)が予め設定された閾値TPBを越えている特徴ノードを基底特徴ノードベクトル(→)VD (i,j)として抽出する。さらに基底特徴ノードベクトル(→)VD (i,j)を発火させた特徴ベクトル(→)XDを求め、それを算出する基となった加速度データを基底信号パターンセンサ信号(→)a(B) D(t)として抽出する。
(より質の良い辞書データの構築)
図14は、図5中の段階(C−2)の詳細な処理内容を示す図である。
図5中の段階(C−2)中の擬似データ生成処理(S21)は図14中の処理(C−2−1)に対応する。図5中の段階(C−2)中の特徴抽出処理(S22)は図14中の処理(C−2−2)から(C−2−5)までに対応する。図5中の段階(C−2)中の自己組織化学習処理(S23)は図14中の処理(C−2−6)に対応する。図5中の段階(C−2)中の学習結果解析処理(S24)は図14中の処理(C−2−7)及び(C−2−8)に対応する。以下、これらの処理の内容について説明する。
処理(C−2−1):次に基底信号パターン(→)a(B) D(t)から生成された擬似データである加速度ベクトル(→)a(D) D(t)から特定信号パターン特徴マップを作成する方法について説明する。
各軸のまわりに予め設定された角度α、β、γをそれぞれ独立にΔθ刻みで変えながら以下の式に従って基底信号パターン(→)a(B) D(t)を回転させることで(→)a(D) D(t)を生成する。
Figure 2007241866
そして、回転角の組み合わせ(α、β、γ)ごとに得られた擬似データ(→)a(D) D(t)を、前述の辞書データから特定信号パターン特徴マップと特定信号パターン発火確率マップを獲得したのと同様の手順で擬似データに関する特定信号パターン特徴マップ{(→)V(D) D (i,j)}と特定信号パターン発火確率マップP(i,j) (D)(Cn)を得る。
次に、実測データとなる加速度ベクトル(→)a0(t)から特定信号パターンを抽出する方法について説明する。
前述で辞書データから特定信号パターン特徴マップと特定信号パターン発火確率マップを獲得したのと同様の手順で、実測データとなる加速度ベクトル(→)a0(t)から特徴ベクトル(→)X0ならびに特徴ベクトルの分布統計量ベクトル(→)M((→)X0)を作成する。
処理(C−2−2):まず、加速度ベクトル(→)aD(t)の特徴を解析するために基底関数展開することで時空間解像度レベルごとに時空間分解センサデータに分解する。ここでは局在波による関数展開であるMother WaveletをHarr関数とするWavelet Packet分解を利用する。上記の式(3)の両辺にWavelet Packet分解を施すと解像度レベルpでの加速度ベクトル(→)aD(t)は上述した式(4)のように表せる。
処理(C−2−3):次に、これら分解波形である基底関数
(→)u(pq) D(t)=
((→)u(pq) x(t)、(→)u(pq) y(t)、(→)u(pq) z(t))
のうち、加速度ベクトル(→)aD(t)を表現するのに最良基底関数となる基底関数を選択する。そこで、上記式(5)により情報エントロピーコスト関数を定義し、式(5)左辺を最小にするpとqとの組み合わせを選択する。
さらに、選択された基底関数(→)u(pq) D_BN(t)の情報エントロピー(上述した式(6))がもっとも大きいものから選び、それらを順次加えていった和が全情報エントロピー(情報エントロピーの総和)に対して閾値TSoEに達するまでの基底関数を選択する。
処理(C−2−4):そして、最終的に得られた基底関数(→)u(pq) D_F(t)に基づいて辞書データの特徴ベクトル加速度ベクトル(→)XDを上記式(7)のように定義する。また、上記式(8)と同様であり、直流成分X(i) D_BN(0)の項は用いない。
処理(C−2−5):また、このとき特徴ベクトルの分布統計量として、下記のモーメントを算出する、ここでは、分布統計量ベクトルを上記式(9)、式(10)と同様にベクトル(→)M((→)X0)として表す。
そして、辞書データとなる全ての加速度ベクトル(→)aD(t)について辞書データの特徴ベクトル(→)XDを求める。
処理(C−2−6):次に、特徴ベクトル(→)XDを入力ベクトルとして自己組織化アルゴリズムによって学習させる。ここでは、既に公知であるKohonenの自己組織化アルゴリズムを用いる。
処理(C−2−7):学習終了後に得られる自己組織化特徴マップのノード(i,j)における特徴ノードベクトル(→)VD (i,j)に基づいて、辞書データの特徴ベクトルを入力した時に発火する特徴ノードベクトルとの対応関係を蓄積する。自己組織化特徴マップの例は、すでに述べたので、その説明を省略する。
処理(C−2−8):上記対応関係の蓄積結果に基づいて、特徴ノードベクトル(→)VD (i,j)が発火した時に辞書データの特徴ベクトル(→)XDが特定信号パターンCnである確率P(i,j)(Cn)を上記式(12)によって算出する。
そして、全ての特徴ノード(i,j)についての{(→)VD (i,j)}を特定信号パターン特徴マップとして、{P(i,j)(Cn)}を特定信号パターン発火確率マップとして獲得する。
(実際の測定)
図15は、図5中の段階(C−3)の詳細な処理内容を示す図である。
図5中の段階(C−3)中の前処理(S31)は図15中の処理(C−3−2)及び(C−3−3)に対応する。図5中の段階(C−2)中の特徴抽出処理(S32)は図15中の処理(C−3−4)から(C−3−7)までに対応する。図5中の段階(C−3)中の特定信号パターン検出処理(S33)は図15中の処理(C−3−8)及び(C−3−9)に対応する。以下、これらの処理の内容について説明する。
処理(C−3−1):ユーザBは複数軸センサデータが獲得できる加速度センサを搭載してある携帯端末を携行している。逐次、ユーザBの状況(コンテキスト)に応じて変動する複数軸センサデータ(加速度ベクトル)が獲得され、パケット通信でプレゼンス提供サーバへ送信される。
処理(C−3−2):プレゼンス提供サーバでは、ユーザBの携帯端末から送信された加速度ベクトルの時系列データを逐次受信する。時系列データとして受信される加速度ベクトル(→)a0(t)をデータ分割する。手法は限定されないが、ここでは、複数の時間窓を上記式(1)にしたがって用意してデータ分割する。
処理(C−3−3):その後、データ補正処理を実施する。データ補正処理方法は加速度センサの用途によって異なるが、ここでは、Gaussianフィルターによるノイズ除去処理と、時間窓{tk}での加速度の正規化を行う。
続いて、センサデータ解析から特定信号パターンとの照合について述べる。
任意の姿勢で設置されたセンサから観測される時刻tでの実測データ加速度ベクトルを上記式(2)とし、理想的な姿勢で設置されたセンサから観測される時刻tにおける辞書データとなる加速度ベクトル(重力加速度も含む)を上記式(3)とおく。
はじめに、辞書データとなる加速度ベクトル(→)aD(t)から特定信号パターン特徴マップを作成する方法について説明する。
処理(C−3−4):まず、加速度ベクトル(→)aD(t)の特徴を解析するために基底関数展開することで時空間解像度レベルごとに時空間分解センサデータに分解する。ここでは局在波による関数展開であるMother WaveletをHarr関数とするWavelet Packet分解を利用する。上記の式(3)の両辺にWavelet Packet分解を施すと解像度レベルpでの加速度ベクトル(→)aD(t)は上記(4)のように表せる。
ここで、(→)u(pq) D(t)は、解像度レベルpのq番目の分解波形(基底関数)を表す。
処理(C−3−5):次に、これら分解波形である基底関数
(→)u(pq) D(t)=
((→)u(pq) x(t)、(→)u(pq) y(t)、(→)u(pq) z(t))
のうち、加速度ベクトル(→)aD(t)を表現するのに最良基底関数となる基底関数を選択する。そこで、上記式(5)により情報エントロピーコスト関数を定義し、式(5)左辺を最小にするpとqとの組み合わせを選択する。
さらに、選択された基底関数(→)u(pq) D_BN(t)の情報エントロピー(上述した式(6))がもっとも大きいものから選び、それらを順次加えていった和が全情報エントロピー(情報エントロピーの総和)に対して閾値TSoEに達するまでの基底関数を選択する。
処理(C−3−6):そして、最終的に得られた基底関数(→)u(pq) D_F(t)に基づいて辞書データの特徴ベクトル加速度ベクトル(→)XDを上記式(7)のように定義する。また、上記式(8)と同様であり、直流成分X(i) D_BN(0)の項は用いない。
処理(C−3−7):また、このとき特徴ベクトルの分布統計量として、下記のモーメントを算出する、ここでは、分布統計量ベクトルを上記式(9)、式(10)と同様にベクトル(→)M((→)X0)として表す。
そして、辞書データとなる全ての加速度ベクトル(→)aD(t)について辞書データの特徴ベクトル(→)XDを求める。
処理(C−3−8):そして、この(→)X0を入力ベクトルとして、前述で生成された辞書データならびに回転角の組み合わせ(α、β、γ)ごとの擬似データに基づいた特定信号パターン特徴マップ{(→)V(Dk) D (i,j)}と特定信号パターン発火確率マップ{P(i,j) (Dk)(Cn)}に基づいて特定信号パターン発火確率P(i,j)(Cn、(→)X0)を求める。
処理(C−3−9):そして、以下の条件を満たすCnを特定信号パターンとして検出する。すなわち、
Figure 2007241866
が特定信号パターンCnとして検出される。
上記式(16)で検出された特定信号パターンCnと関連付けられているプレゼンス情報をプレゼンスデータベースから検索する。なお。プレゼンスデータベースは以下のデータ構造を有している。
Figure 2007241866
ユーザAの要求に対しプレゼンス提供サーバは、ユーザBのセキュリティポリシーに従ってプレゼンス情報をユーザAに対して送信することができる。
(実施例)
以上説明した複軸センサからの特定信号パターン検出方法を実現するための、特定信号パターン検出システムの実施例の構成について、図16を参照して説明する。同図において、本例の特定信号パターン検出装置は、センサデータ抽出部(Sensory Data Extraction)100aと、センサデータ前処理部(Sensory Data Preprocessing)100bと、ウェブレットパケット分解部(Wavelet Packet Decomposition)100cと、最良基底関数選択部(Best Basis Function Selection Based on AIC)100dと、特徴パターン算出部(XYZ−Feature Pattern by composition of Entropy Distribution on each axis)100eと、特徴パターン算出部(XYZ−Feature Pattern by composition of Statistic Values of Entropy Distribution on each axis)100fと、自己組織化特徴マップ(Self−Organizing Feature Map(Training Stage))100gと、特定信号パターン発生確率マップ(Specific Patterns Occurrence Probabilities Map based on Best Matching Units)100hと、基底特徴パターン抽出部(Basis Feature Pattern Extraction)100iと、基底センサデータ抽出部(Basis Sensory Data Extraction)100jと、擬似センサデータ生成部(Pseudo−Sensory Data Generation)100kと、センサデータ抽出部(Sensory Data Extraction)100mと、自己組織化特徴マップ部(Self−Organizing Feature Map(Clustering Stage))100nと、特定信号パターン抽出部(Specific Patterns Extraction)100pと、辞書特徴パターン抽出部(Dictionary Feature Map Extraction)100qとを含んで構成されている。
これらの構成において、センサデータ抽出部100aは、上述した処理(C−1−1)を行う。
センサデータ前処理部100bは、上述した処理(C−1−2)及び(C−1−3)、(C−3−2)及び(C−3−3)を行う。
ウェブレットパケット分解部100cは、上述した処理(C−1−4)、(C−2−2)及び(C−3−4)を行う。
最良基底関数選択部100dは、上述した処理(C−1−5)及び(C−2−3)、(C−3−5)を行う。
特徴パターン算出部100eは、上述した処理(C−1−6)、(C−2−4)及び(C−3−6)を行う。
特徴パターン算出部100fは、上述した処理(C−1−7)、(C−2−5)及び(C−3−7)を行う。
自己組織化特徴マップ100gは、上述した処理(C−1−8)及び(C−2−6)を行う。
特定信号パターン発生確率マップ100hは、上述した処理(C−1−9)及び(C−1−10)、(C−2−7)及び(C−2−8)を行う。
基底特徴パターン抽出部100i及び基底センサデータ抽出部100jは、上述した処理(C−1−11)を行う。
擬似センサデータ生成部100kは、上述した処理(C−2−1)を行う。
センサデータ抽出部100mは、上述した処理(C−3−1)を行う。
自己組織化特徴マップ部100nは、上述した処理(C−3−8)を行う。
特定信号パターン抽出部100pは、上述した処理(C−3−9)を行う。
辞書特徴パターン抽出部100qは、辞書特徴マップを出力する処理を行う。
このように、上述した3つの段階(C−1)、(C−2)及び(C−3)を行うため、重複する処理については、その処理を行う構成要素をそれぞれ設けるのではなく、重複する処理に共通して1つの構成要素を設けている。例えば、上記ウェブレットパケット分解部100cは、上述した3回の処理(C−1−4)、(C−2−2)及び(C−3−4)に共通に設けられている。このように重複する処理に共通して1つの構成要素を設ければ、システムのハードウェア規模が増大することを防止できる。
なお、センサデータ抽出部100mは、図2中のセンサデータ獲得機能部21及びセンサデータ送信機能部22、並びに、図3中のセンサデータ受信機能部11に対応する。
また、センサデータ前処理部100b、ウェブレットパケット分解部100c、最良基底関数選択部100d、特徴パターン算出部100e、及び特徴パターン算出部100fは、図3中のセンサデータ解析機能部12に対応する。
さらに、センサデータ抽出部100a、センサデータ前処理部100b、ウェブレットパケット分解部100c、最良基底関数選択部100d、特徴パターン算出部100e、特徴パターン算出部100f、自己組織化特徴マップ100g、特定信号パターン発生確率マップ100h、及び辞書特徴パターン抽出部100qは、図3中のセンサデータ照合機能部14に対応する。
なお、自己組織化特徴マップ部100nは、図3中の特定信号パターン獲得機能部13に対応する。
(まとめ)
以上説明したように、本発明によれば、以下の効果が得られる。
(1)センサを特定の場所に固定する必要がないので、携帯端末に搭載するセンサなどモバイル環境での携行方法に制約を与えないことが可能である。
(2)複軸センサデータを各軸のセンサデータを一組のデータとして扱うことで、複軸センサデータの軌跡が非平面である特定パターンにも対応可能である。
(3)局所波を基底関数とする直交変換と情報エントロピーの情報量基準に基づいて特定信号パターンを分解することで、波形形状に応じた特徴抽出が可能である。
(4)自己組織化アルゴリズムで学習された結果を確率的手法に基づいてクラスタリングしているので、クラスターを代表する特徴ノードを学習データサンプルに対して忠実に決定することができる。
(5)任意の姿勢で設置されたセンサを前提に自己組織化アルゴリズムで学習させているので、極端に高速な捻りの動きでなければ、全ての並進運動の動きを検出することが可能である。
なお、上述した図3又は図16中の構成要素の一部(すなわち機能の一部)を、携帯端末200内に設けても良い。これにより、プレゼンス提供サーバ100の処理負荷を軽減することができる。
本発明は、複数の軸方向ごとにセンサデータが検出できるセンサ搭載型携帯端末を用いて個人に適応したコンテキストを獲得する状況認識システムに利用されるものであり、プレゼンスサービス、コンテキスト通信、コンテキストに基づくサービスナビゲーションならびに健康アドバイスサービスなどのヘルスケアの分野に利用することができる。
本発明の実施形態による、複軸センサからの特定信号パターン検出システムの構成を示す図である。 図1中のユーザBが使用する携帯端末の内部構成例を示す図である。 図1中のプレゼンス提供サーバの内部構成例を示す図である。 図1中のユーザAが使用する携帯端末300の内部構成例 本発明の実施の形態に係る複軸センサからの特定信号パターン検出方法の概略を示す図である。 図5中の段階(C−1)の詳細な処理内容を示す図である。 階段降り動作を行った場合の自己組織化特徴マップの例を示す図である。 階段昇り動作を行った場合の自己組織化特徴マップの例を示す図である。 早歩き動作を行った場合の自己組織化特徴マップの例を示す図である。 電車内歩行動作を行った場合の自己組織化特徴マップの例を示す図である。 電車着座動作を行った場合の自己組織化特徴マップの例を示す図である。 走行動作を行った場合の自己組織化特徴マップの例を示す図である。 平地歩行動作を行った場合の自己組織化特徴マップの例を示す図である。 図5中の段階(C−2)の詳細な処理内容を示す図である。 図5中の段階(C−3)の詳細な処理内容を示す図である。 特定信号パターン検出システムの実施例の構成例を示す図である。
符号の説明
11 センサデータ受信機能部
12 センサデータ解析機能部
13 特定信号パターン獲得機能部
14 センサデータ照合機能部
15、16 プレゼンス情報送信機能部
21 センサデータ獲得機能部
22 センサデータ送信機能部
23 プレゼンス情報受信機能部
100 プレゼンス提供サーバ
100a センサデータ抽出部
100b センサデータ前処理部
100c ウェブレットパケット分解部
100d 最良基底関数選択部
100e、100f 特徴パターン算出部
100g 自己組織化特徴マップ
100h 特定信号パターン発生確率マップ
100i 基底特徴パターン抽出部
100j 基底センサデータ抽出部
100k 擬似センサデータ生成部
100m センサデータ抽出部
100n 自己組織化特徴マップ部
100p 特定信号パターン抽出部
100q 辞書特徴パターン抽出部
101 特定信号パターンデータベース
102 プレゼンスデータベース
200、300 携帯端末

Claims (6)

  1. 複軸センサから得られる時系列の複軸センサデータにおいて検出したい複数の特定信号パターンを辞書データとして予め獲得するとともに、それらの特定信号パターンに識別ラベルを付与する識別ラベル付与手段と、(100a)
    前記識別ラベル付与手段によって獲得された特定信号パターンを予め用意された時間窓に基づいて時間分割センサデータとして分割するデータ分割手段と、(100b)
    前記データ分割手段によって得られた時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成する正規化センサデータ生成手段と、(100b)
    前記正規化センサデータ生成手段によって得られた正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成する時空間分解センサデータ生成手段と、(100c)
    前記時空間分解センサデータ生成手段によって得られた時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するエントロピー算出手段と、(100d)
    前記エントロピー算出手段によって時空間解像度レベルごとに算出された時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択するデータ選択手段と、(100d)
    前記データ選択手段によって選択された基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するセンサデータ特徴ベクトル生成手段と、(100e)
    前記センサデータ特徴ベクトル生成手段によって生成された複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成する複軸センサデータ特徴ベクトル生成手段と、(100e)
    前記複軸センサデータ特徴ベクトル生成手段によって生成された複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成する特定信号パターン特徴マップ生成手段と、(100g)
    前記特定信号パターン特徴マップ生成手段によって得られた特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出する類似度算出手段と、(100h)
    前記類似度算出手段によって得られた複軸センサデータ特徴ベクトルの分布統計量を算出する分布統計量算出手段と、(100f)
    前記前記類似度算出手段及び前記分布統計量算出手段によって得られた複軸センサデータ特徴ベクトルの分布統計量ならびに発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルの類似度を算出する類似度算出手段と、(100f)
    前記類似度算出手段によって得られた特定信号パターン特徴マップの各ノードごとに特定信号パターンが発火する確率を算出し特定信号パターン発火確率マップを生成する特定信号パターン発火確率マップ生成手段と、(100h)
    前記特定信号パターン発火確率マップ生成手段によって得られた特定信号パターン発火確率マップのうち予め設定された閾値以上の確率を有するノードを基底特徴ノードベクトルとして抽出する基底特徴ノードベクトル抽出手段と、(100i)
    前記基底特徴ノードベクトル抽出手段によって抽出された基底特徴ノードベクトルを発火させる基となった複軸センサデータ特徴ベクトルのうち、基底特徴ノードベクトルとの類似度が予め設定された閾値以上のものを基底複軸センサ特徴ベクトルとして抽出する基底複軸センサ特徴ベクトル抽出手段と、(100i)
    前記基底複軸センサ特徴ベクトル抽出手段によって抽出された基底複軸センサ特徴ベクトルの基となった複軸の基底センサデータを抽出する基底センサデータ抽出手段と、(100j)
    を含むことを特徴とする特定信号パターン検出システム。
  2. 前記基底センサデータ抽出手段によって抽出された複軸の基底センサデータを予め設定された刻み幅の角度で各軸回りに回転させることで擬似複軸センサデータを生成する擬似複軸センサデータ生成手段と、(100k)
    前記擬似複軸センサデータ生成手段によって得られた複軸の基底センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成する時空間分解センサデータ生成手段と、(100c)
    前記時空間分解センサデータ生成手段によって得られた時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するエントロピー算出手段と、(100d)
    前記エントロピー算出手段によって時空間解像度レベルごとに算出された時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択する基底時空間分解センサデータ選択手段と、(100d)
    前記基底時空間分解センサデータ選択手段によって選択された基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するセンサデータ特徴ベクトル生成手段と、(100e)
    前記センサデータ特徴ベクトル生成手段によって生成された複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成する複軸センサデータ特徴ベクトル手段と、(100e)
    前記複軸センサデータ特徴ベクトル手段によって生成された複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成する特定信号パターン特徴マップ生成手段と、(100g)
    前記特定信号パターン特徴マップ生成手段によって得られた特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出する類似度算出手段と、(100h)
    を含むことを特徴とする請求項1記載の特定信号パターン検出システム。
  3. 複軸センサから得られる時系列の複軸センサデータを予め用意された時間窓に基づいて時間分割複軸センサデータとして分割するデータ分割手段と、(100b)
    前記データ分割手段によって得られた時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成する正規化センサデータ生成手段と、(100b)
    前記正規化センサデータ生成手段によって得られた正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成する時空間分解センサデータ生成手段と、(100c)
    前記時空間分解センサデータ生成手段によって得られた時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するエントロピー算出手段と、(100d)
    前記エントロピー算出手段によって時空間解像度レベルごとに算出された時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択する基底時空間分解センサデータ選択手段と、(100d)
    前記基底時空間分解センサデータ選択手段によって選択された基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するセンサデータ特徴ベクトル生成手段と、(100e)
    前記センサデータ特徴ベクトル生成手段によって生成された複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成する複軸センサデータ特徴ベクトル生成手段と、(100e)
    前記複軸センサデータ特徴ベクトル生成手段によって得られた複軸センサデータ特徴ベクトルを、事前に得られた複数の特定信号パターン特徴マップならびに特定信号パターン発火確率マップに入力することにより得られる発火した特徴マップノードベクトルのうち、予め設定された類似度に基づき複軸センサデータ特徴ベクトルに最も類似したものを特定信号パターン特徴ベクトルとして選択する特定信号パターン特徴ベクトル選択手段と、(100m,100p)
    を含むことを特徴とする請求項2記載の特定信号パターン検出システム。
  4. 複軸センサから得られる時系列の複軸センサデータにおいて検出したい複数の特定信号パターンを辞書データとして予め獲得するとともに、それらの特定信号パターンに識別ラベルを付与するステップと、(C-1-1)
    前記獲得された特定信号パターンを予め用意された時間窓に基づいて時間分割センサデータとして分割するステップと、(C-1-2)
    前記時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成するステップと、(C-1-3)
    前記正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成するステップと、(C-1-4)
    前記時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するステップと、(C-1-5)
    時空間解像度レベルごとに算出された前記時空間分解センサデータ情報エントロピーを予め用意された評価基準に基づいて基底時空間分解センサデータを選択するステップと、(C-1-5)
    選択された前記基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するステップと、(C-1-6)
    生成された前記複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成するステップと、(C-1-6)
    生成された前記複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成するステップと、(C-1-8)
    前記特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出するステップと、(C-1-9, C-1-10)
    前記複軸センサデータ特徴ベクトルの分布統計量を算出するステップと、
    前記複軸センサデータ特徴ベクトルの分布統計量ならびに前記発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出するステップと、(C-1-7)
    前記特定信号パターン特徴マップの各ノードごとに特定信号パターンが発火する確率を算出し特定信号パターン発火確率マップを生成するステップと、(C-1-10)
    前記特定信号パターン発火確率マップのうち予め設定された閾値以上の確率を有するノードを基底特徴ノードベクトルとして抽出するステップと、(C-1-11)
    抽出された前記基底特徴ノードベクトルを発火させる基となった複軸センサデータ特徴ベクトルのうち、基底特徴ノードベクトルとの類似度が予め設定された閾値以上のものを基底複軸センサ特徴ベクトルとして抽出するステップと、(C-1-11)
    抽出された前記基底複軸センサ特徴ベクトルの基となった複軸の基底センサデータを抽出するステップと、(C-1-11)
    を含むことを特徴とする特定信号パターン検出方法。
  5. 抽出された前記複軸の基底センサデータを予め設定された刻み幅の角度で各軸回りに回転させることで擬似複軸センサデータを生成するステップと、(C-2-1)
    前記複軸の基底センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成するステップと、(C-2-2)
    前記時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するステップと、(C-2-3)
    時空間解像度レベルごとに算出された前記時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択するステップと、(C-2-3)
    選択された前記基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するステップと、(C-2-4)
    生成された前記複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成するステップと、(C-2-4)
    生成された前記複軸センサデータ特徴ベクトルを自己組織化アルゴリズムにより学習させることで自己組織化された特定信号パターン特徴マップを生成するステップと、(C-2-6)
    前記特定信号パターン特徴マップに複軸センサデータ特徴ベクトルを入力した時に発火した特徴マップノードベクトルと複軸センサデータ特徴ベクトルとの類似度を算出するステップと、(C-2-7,C-2-8)
    を含むことを特徴とする請求項4記載の特定信号パターン検出方法。
  6. 複軸センサから得られる時系列の複軸センサデータを予め用意された時間窓に基づいて時間分割複軸センサデータとして分割するステップと、(C-3-2)
    前記時間分割センサデータのノイズ除去ならびにデータの正規化することで正規化センサデータを生成するステップと、(C-3-3)
    前記正規化センサデータを基底関数展開することで時空間解像度レベルごとに時空間分解センサデータを生成するステップと、(C-3-4)
    前記時空間分解センサデータの振幅情報に基づいて時空間解像度レベルごとに時空間分解センサデータ情報エントロピーを算出するステップと、(C-3-5)
    時空間解像度レベルごとに算出された前記時空間分解センサデータ情報エントロピーの総和が最小になるように予め用意された評価基準に基づいて基底時空間分解センサデータを選択するステップと、(C-3-5)
    選択された前記基底時空間分解センサデータの情報エントロピーに基づいてセンサデータ特徴ベクトルを生成するステップと、(C-3-6)
    生成された前記複軸のセンサデータ特徴ベクトルを合成して複軸センサデータ特徴ベクトルを生成するステップと、(C-3-6)
    前記複軸センサデータ特徴ベクトルを、事前に得られた複数の特定信号パターン特徴マップならびに特定信号パターン発火確率マップに入力することにより得られる発火した特徴マップノードベクトルのうち、予め設定された類似度に基づき複軸センサデータ特徴ベクトルに最も類似したものを特定信号パターン特徴ベクトルとして選択するステップと、(C-3-8,C-3-9)
    を含むことを特徴とする請求項5記載の特定信号パターン検出方法。
JP2006066184A 2006-03-10 2006-03-10 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法 Expired - Fee Related JP5009543B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006066184A JP5009543B2 (ja) 2006-03-10 2006-03-10 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006066184A JP5009543B2 (ja) 2006-03-10 2006-03-10 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2012106341A Division JP5297547B2 (ja) 2012-05-07 2012-05-07 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法

Publications (3)

Publication Number Publication Date
JP2007241866A true JP2007241866A (ja) 2007-09-20
JP2007241866A5 JP2007241866A5 (ja) 2009-01-15
JP5009543B2 JP5009543B2 (ja) 2012-08-22

Family

ID=38587314

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006066184A Expired - Fee Related JP5009543B2 (ja) 2006-03-10 2006-03-10 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法

Country Status (1)

Country Link
JP (1) JP5009543B2 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010282400A (ja) * 2009-06-04 2010-12-16 Nippon Telegr & Teleph Corp <Ntt> コンテキスト分析装置及びコンテキスト分析プログラム
JP2011090627A (ja) * 2009-10-26 2011-05-06 Panasonic Electric Works Co Ltd 信号識別方法および信号識別装置
JP2012145457A (ja) * 2011-01-12 2012-08-02 National Institute Of Advanced Industrial & Technology 進行方向推定装置、携帯端末、制御プログラム、コンピュータ読み取り可能な記録媒体、および進行方向推定方法
JP2017199184A (ja) * 2016-04-27 2017-11-02 株式会社メガチップス 状態判定装置、プログラムおよび集積回路
US10586154B2 (en) 2016-03-25 2020-03-10 Megachips Corporation State estimation apparatus, state estimation method, and integrated circuit
JP7393883B2 (ja) 2018-07-17 2023-12-07 パロ アルト リサーチ センター インコーポレイテッド 予め選択されたシグネチャを使用して任意長の時系列を特徴付けるためのシステムおよび方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0764948A (ja) * 1993-08-24 1995-03-10 Kobe Steel Ltd 波形識別用学習装置及び同装置を用いた制御装置
JPH1024026A (ja) * 1996-07-11 1998-01-27 Ricoh Co Ltd 携帯型情報処理装置
JP2005021450A (ja) * 2003-07-03 2005-01-27 Toshiba Corp 生体状態分析装置及び生体状態分析方法
WO2005096597A1 (ja) * 2004-03-30 2005-10-13 Sharp Kabushiki Kaisha 携帯情報処理装置、情報処理システム、携帯情報処理装置の制御方法、携帯情報処理装置の制御プログラムおよび記録媒体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0764948A (ja) * 1993-08-24 1995-03-10 Kobe Steel Ltd 波形識別用学習装置及び同装置を用いた制御装置
JPH1024026A (ja) * 1996-07-11 1998-01-27 Ricoh Co Ltd 携帯型情報処理装置
JP2005021450A (ja) * 2003-07-03 2005-01-27 Toshiba Corp 生体状態分析装置及び生体状態分析方法
WO2005096597A1 (ja) * 2004-03-30 2005-10-13 Sharp Kabushiki Kaisha 携帯情報処理装置、情報処理システム、携帯情報処理装置の制御方法、携帯情報処理装置の制御プログラムおよび記録媒体

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010282400A (ja) * 2009-06-04 2010-12-16 Nippon Telegr & Teleph Corp <Ntt> コンテキスト分析装置及びコンテキスト分析プログラム
JP2011090627A (ja) * 2009-10-26 2011-05-06 Panasonic Electric Works Co Ltd 信号識別方法および信号識別装置
JP2012145457A (ja) * 2011-01-12 2012-08-02 National Institute Of Advanced Industrial & Technology 進行方向推定装置、携帯端末、制御プログラム、コンピュータ読み取り可能な記録媒体、および進行方向推定方法
US10586154B2 (en) 2016-03-25 2020-03-10 Megachips Corporation State estimation apparatus, state estimation method, and integrated circuit
JP2017199184A (ja) * 2016-04-27 2017-11-02 株式会社メガチップス 状態判定装置、プログラムおよび集積回路
JP7393883B2 (ja) 2018-07-17 2023-12-07 パロ アルト リサーチ センター インコーポレイテッド 予め選択されたシグネチャを使用して任意長の時系列を特徴付けるためのシステムおよび方法

Also Published As

Publication number Publication date
JP5009543B2 (ja) 2012-08-22

Similar Documents

Publication Publication Date Title
Zhang et al. Data augmentation and dense-LSTM for human activity recognition using WiFi signal
Zhang et al. Human activity recognition based on motion sensor using u-net
EP3951646B1 (en) Image recognition network model training method, image recognition method and device
US8935195B2 (en) Method of identification and devices thereof
JP5009543B2 (ja) 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法
JP4992043B2 (ja) 行動識別装置、行動識別システムおよび行動識別方法
CN111695605A (zh) 基于oct图像的图像识别方法、服务器及存储介质
Kerola et al. Cross-view human action recognition from depth maps using spectral graph sequences
Yang et al. Autofi: Toward automatic wi-fi human sensing via geometric self-supervised learning
CN112543936A (zh) 用于动作识别的动作结构自注意力图卷积网络
KR20190061538A (ko) 멀티 인식모델의 결합에 의한 행동패턴 인식방법 및 장치
Wang et al. Robust CSI-based human activity recognition with augment few shot learning
Ogunseiju et al. Recognition of workers’ actions from time-series signal images using deep convolutional neural network
Araga et al. Real time gesture recognition system using posture classifier and Jordan recurrent neural network
Qiu et al. Skeleton-based abnormal behavior detection using secure partitioned convolutional neural network model
JP2009533784A (ja) 物体との相互作用を含む複合動作の分類
CN117009770A (zh) 一种基于SDP和视觉Transformer编码的轴承故障诊断方法
Fu et al. Wavelet enhanced image preprocessing and neural networks for hand gesture recognition
Shi et al. WiFi-based activity recognition using activity filter and enhanced correlation with deep learning
Bastwesy et al. Wi-nod: Head nodding recognition by wi-fi csi toward communicative support for quadriplegics
JP2007241866A5 (ja)
JP5297547B2 (ja) 複軸センサからの特定信号パターン検出システム、複軸センサからの特定信号パターン検出方法
Mazzaro et al. A model (in) validation approach to gait classification
Yao et al. Energy efficient communication among wearable devices using optimized motion detection
JP4897314B2 (ja) センサ搭載型携帯端末による歩行状態検出システム、センサ搭載型携帯端末による歩行状態検出方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081003

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120306

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120529

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120531

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5009543

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150608

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees