JP2010517565A - 活動の監視および表示 - Google Patents

活動の監視および表示 Download PDF

Info

Publication number
JP2010517565A
JP2010517565A JP2009549026A JP2009549026A JP2010517565A JP 2010517565 A JP2010517565 A JP 2010517565A JP 2009549026 A JP2009549026 A JP 2009549026A JP 2009549026 A JP2009549026 A JP 2009549026A JP 2010517565 A JP2010517565 A JP 2010517565A
Authority
JP
Japan
Prior art keywords
animal
data
sequence
activity
visual representation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009549026A
Other languages
English (en)
Other versions
JP2010517565A5 (ja
JP5156030B2 (ja
Inventor
ジョン マイケル ギブソン、デイビッド
Original Assignee
セイ システムズ リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by セイ システムズ リミテッド filed Critical セイ システムズ リミテッド
Publication of JP2010517565A publication Critical patent/JP2010517565A/ja
Publication of JP2010517565A5 publication Critical patent/JP2010517565A5/ja
Application granted granted Critical
Publication of JP5156030B2 publication Critical patent/JP5156030B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01KANIMAL HUSBANDRY; CARE OF BIRDS, FISHES, INSECTS; FISHING; REARING OR BREEDING ANIMALS, NOT OTHERWISE PROVIDED FOR; NEW BREEDS OF ANIMALS
    • A01K29/00Other apparatus for animal husbandry
    • A01K29/005Monitoring or measuring activity, e.g. detecting heat or mating
    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01KANIMAL HUSBANDRY; CARE OF BIRDS, FISHES, INSECTS; FISHING; REARING OR BREEDING ANIMALS, NOT OTHERWISE PROVIDED FOR; NEW BREEDS OF ANIMALS
    • A01K29/00Other apparatus for animal husbandry

Abstract

ある期間にわたり動物の活動および行動を監視しかつ表示するシステムおよび方法が開示される。ディスプレイは、動物の活動に関連する視覚的表示シーケンスを含む。
【選択図】図1

Description

本発明は、動物の動作及び行動を監視しかつ表示するシステムおよび方法に関する。より詳しくは、しかし限定ではなく、本発明は、動物の行動を、動物の活動の視覚的表現シーケンスとして決定し且つ表示することに関する。
動物を監視する方法およびシステムには異なる先行技術が存在し、例えば、国際公開公報2005/070326などは、発情期決定システムを開示している。このシステムは、動物の1つ以上の行動を決定するために動物に設置されたセンサ、センサデータを格納する手段、および、センサデータを処理して動物が発情期にあるかどうかの表示を示す手段を備える。データは、動物が発情期にある場合にさまざまなセンサのタイプで生じる典型的なパターンの存在を決定することによって分析される。しかしながら、活動しているかしていないか、および、乳汁産生のようなデータは、単純なグラフ形式で表示される。例えば、活動の期間のような基本測定センサデータ、および、活動期間中に行われる活動のタイプなどの解釈データから推測することによって観察者が動物の行動をわかるようにできる視覚的表現シーケンスの表示については書かれていない。
国際公開公報02/092101は、さまざまなセンサから身体的および生理学的データを収集することによって動物の行動を分析するシステムを開示している。治験における薬の効果を決定すべく、データは、パターン認識を用いて解釈されることにより、動物の行動を評価する。当該公報は、収集したデータをチャートおよび図でグラフィック表示し、時間の経過にわたる特定の行動を示すことを開示している。しかしながら、このシステムは、動物の一連の基本的および解釈された動作を経時的に表示しない。
米国特許公開公報2002/091326は、人間または動物の脈拍および心拍のような生理的状態、姿勢などの身体的状態、または、活動状態を検知するセンサを含む情報取得システムを開示している。システムは、センサからの情報を伝送する手段と、情報を評価して人間または動物の異常な状態を決定する手段とを含む。とはいえ、当該システムも動物の行動をセンサデータから導出した画像シーケンスとして視覚的に表示することは含んでいない。
日本特許公開公報2005196398は、動物の動作のビデオ画像を用いて小動物の行動に関するパターンを分析するシステムを開示している。ここでは、画像は含まれる情報を単純化するために処理され、特定の画像パターンについて分析される。分析から得られた情報は、時間変動グラフに表示される。しかしながら、システムは、分析結果を画像シーケンスとして表示しない。
米国特許6375612は、動物の位置データを時間の経過にわたり収集して動物の動作のパターンを表すデータを生成することによって動物の動作を監視するシステムを開示している。動作のパターンは、水域で動作が多くなるかまたは全体的に動作が減少することは不健康を示すなど、動物の少なくとも1つの体調を決定するために用いられうる。データは、それぞれの動物の動作と基準の動作パターンーンとを比較することによって分析される。システムは、動物の行動のさらなる解釈を可能にするような、分析データからの視覚的表現シーケンスは提供しない。
米国特許6,941,239および米国特許6,571,193は、活動認識システムを開示する。複数のセンサが人間、動物、または、機械などの対象に取り付けられ、特定のセンサが対象の活動または動作などの状態変化についてのデータを提供する。フーリエ解析、または、他のいくつかの周波数解析によって測定されたセンサデータから特性量が決定される。センサデータによって示されるような動作または活動の周波数特性は、動作または活動の一致性を決定すべく参照データと比較するための特性量として用いられる。片手を振りながら歩くなどの動作の組合せは、活動/動作要素の組合せの個別の頻度特性を抽出することによって決定されうる。このような頻度スペクトルは、コンピュータ手段によって容易に分析されて認識されるので、このシステムでは活動および動作の頻度特性が用いられる。
このシステムでは、参照スペクトルと比較される場合の活動および動作は、0.67の確率で早歩き、0.33の確率で走っているというように、参照スペクトルと完全に一致しない場合の確率として表されることができる。観察者の分析を助けるべく、データは、頻度分析によって決定されるような動作または活動を示す文字を動画化するために用いられてよい。このように、文字は、相対強度0.67の早歩きと相対強度0.33の走行との組合せによって特徴付けられる動作によって動画化される。これによって、観察者は、確率表現だけよりも情報量が多い、頻度分析によって決定された動作をより直接的に認知することができる。しかしながら、このシステムは、特定の活動の決定を表示することだけしかできず、動物の全体の行動を決定する活動シーケンスをユーザに見せることはできない。
本願明細書中において用いられる「動物」という用語は、例えば、牛、羊、山羊、鶏、馬、および、豚などの家畜、猫、犬、鳥、魚、および、齧歯類などのペット、および、人間に限らない動物界のいかなるものを指す。
本願明細書中において用いられる「特定の活動」という用語は、動物が示すいかなる識別可能な動作および活動を指し、説明または特徴付けられるいかなる単一の動作、または、動作のいかなる特定の組合せを含む。動作は、歩く、走る、駈ける、跳ぶ、あいさつする、においを嗅ぐ、捜す、掘る、跡をつける、排尿する、日光に当たる、転がる、身繕いする、掻く、眠る、食べる、飲むことを含むがこれらに限定されない。また、動作は、特定の健康状態または他の生物学的条件に特有であり、ノミのせいで掻く、びっこをひく、および、鳴くことを含むがこれらに限定されない。
本願明細書中において用いられる「視覚的表現」という用語は活動または現象をいかなる方法で視覚的に表示することである。これは、アクティブにされるかまたは表示されるアイコンまたはシンボル、監視される動物を含んでも含まなくてもよい実際の一または複数の動物の写真、一連の写真、または、ビデオ画像、グラフまたは表の画像、あるいは、そのような一連の画像、および、コンピュータによって生成されたアニメーションのようなアニメーションを含むがこれらに限定されない。
本願明細書中において用いられる「架空要素」とは、視覚的表現の特殊性を高めるさらなる詳細を追加する目的で視覚的表現に付加されうる特徴または要素のことを指す。
本願明細書中において用いられる「環境条件」とは、動物の周囲の条件のことを指し、温度、湿度、騒音レベル、空気圧、光量、風速および降雨量を含むがこれらに限定されない。
本願明細書中において用いられる「生理的状態」とは、身体的および生物学的機能に関わる動物の状態のことを指し、動物の心拍数、呼吸数、血圧値、血糖値、ストレスレベル、瞳孔拡張、皮膚電気伝導率、および、脳活動を含むがこれらに限定されない。
本願明細書中において用いられる「センサ配列」という用語は、センサ、および、必要に応じて、センサ活動およびセンサデータの伝送または通信に要求される他のいかなる周辺デバイスまたはコンポーネントを含むセンサシステムまたはアセンブリのことを指す。
一側面では、本発明は、動物の行動を表示する方法を広く含み、方法は、動物の動作から特定の活動シーケンスを識別する段階と、特定の活動シーケンスに対応する視覚的表現シーケンスを表示する段階と、を含む。
他の側面では、方法は、動物の行動を観察する方法を広く含む。方法は、動物に取り付けられた少なくとも1つのセンサを用いて動物の動作を検知する段階と、少なくとも1つのセンサから動作データを収集する段階と、動作データから、動物の特定の活動シーケンスを識別する段階と、特定の活動シーケンスに少なくとも部分的に対応する視覚的表現シーケンスを表示する段階と、を含む。
好ましくは、特定の活動は、少なくとも1つのセンサによって検知された動作データと参照動作データとを少なくとも部分的に一致させることによって識別される。
好ましくは、視覚的表現シーケンスは、動作データと参照データとの正確な一致に対応する活動の少なくとも1つの表現を含む。
好ましくは、視覚的表現シーケンスは、動作データと参照データとの見込みに基づく一致に対応する活動の少なくとも1つの表現を含む。
好ましくは、視覚的表現の少なくとも1つは、表現の特殊性を高める少なくとも1つの架空要素を含み、当該架空要素は、動物の実際の活動には必ずしも対応しない。
好ましくは、視覚的表現シーケンスは、特定の活動の少なくとも1つの強度および/または持続時間の表示を含む。
好ましくは、視覚的表現シーケンスは、動物の特定の活動の間における環境条件の表示を含む。
好ましくは、視覚的表現シーケンスは、動物の特定の活動の間の動物の生理的状態の表示を含む。
好ましくは、視覚的表現は、コンピュータによって生成された画像である。
好ましくは、方法は、少なくとも1つの予め決められた活動、または、特定の活動シーケンスが識別された場合に警報通知を発することを含む。
好ましくは、警報通知は、コンピュータシステムにおける視覚および/または音声信号であり、および/または、警報通知は、電子メール、SMSまたはMMSメッセージである。
他の側面では、本発明は、動物監視システムを広く含む。システムは、動物に取り付けられる少なくとも1つのセンサを有するセンサ配列と、センサ配列からデータを収集するデータ収集手段と、処理手段とを備える。処理手段は、動物の特定の活動シーケンスと、特定の活動シーケンスに対応するディスプレイ用の視覚的表現シーケンスとをセンサデータから識別する手段を有する。
好ましくは、処理手段は、コンピュータプロセッサによって用いられる命令を提供するコンピュータソフトウェアである。
好ましくは、センサ配列は、動作、振動、傾斜、場所、音、温度、光量、湿度、心拍数、呼吸数、および、匂いを検知可能な複数のセンサから選ばれる1つ以上のセンサを含む。
好ましくは、データ収集手段は、センサ配列から無線送信機によって信号を受信する無線受信ステーションである。
好ましくは、データ収集手段は、コンピュータネットワークに接続される。
好ましくは、データ収集手段は、インターネットを介してアクセス可能である。
好ましくは、特定の活動を識別する処理手段は、少なくとも1つのセンサによって検知されるデータと参照データとを少なくとも部分的に一致させる機能を有する。
好ましくは、特定の活動を識別する処理手段は、センサデータと参照データとを正確に一致させる機能を有する。
好ましくは、特定の活動を識別する処理手段は、センサデータと参照データとを確率的に一致させる機能を有する。
好ましくは、ディスプレイ用の視覚的表現シーケンスを提供する処理手段は、表現のいかなるものの特殊性を高めるべく少なくとも1つの架空要素を追加する機能を有する。架空要素は、監視される動物の実際の活動に必ずしも対応しない。
好ましくは、ディスプレイ用の視覚的表現シーケンスを提供する処理手段は、特定の活動の少なくとも1つの強度および/または持続時間を示す機能を有する。
好ましくは、ディスプレイ用の視覚的表現シーケンスを提供する処理手段は、動物の特定の活動の間における環境条件の表示を追加する機能を有する。
好ましくは、ディスプレイ用の視覚的表現シーケンスを提供する処理手段は、動物の特定の活動の間に動物の生理的状態の表示を追加する機能を有する。
好ましくは、ディスプレイ用の視覚的表現シーケンスを提供する処理手段は、少なくとも1つの予め決められた活動または特定の活動シーケンスが識別された場合に警報通知を発する機能を有する。
好ましくは、警報通知は、コンピュータシステムにおける視覚および/または音声信号、および/または、電子メール、SMSまたはMMSメッセージである。
以下に本発明の方法およびシステムの好適な形態が添付の図面に関連して記載される。
好適なシステムの概略図である。
センサ配列の一例を示す。
センサデータから生成された動作データの一表現を示す。
動作データに適用されるルールのサンプルディシジョンツリーを示す。
好適な方法のフローチャートを示す。
[好適なシステム]
図には動物監視システムの好適な実施形態が示されている。図1を参照すると、動物監視システムは、動物に取り付けられて用いられるセンサ配列10を備える。センサ配列は、動物の行動および健康を決定するのに用いられうるデータを生成する少なくとも1つのセンサを含む。データは、ここでは受信ステーション11および処理手段12であるデータ収集手段に伝達される。
好ましくは、処理手段は、コンピュータプロセッサによって用いられる命令を提供するコンピュータソフトウェアである。
コンピュータソフトウェアは、収集されたデータと、データベース13からの参照データとを比較することによって、動物の特定の活動をセンサデータから識別する処理手段に命令を提供する。そして、コンピュータソフトウェアは、動物に関わる活動シーケンスを決定し、当該活動シーケンスは、視覚的表現シーケンスとしてディスプレイ手段15に表示されてよい。
[センサ配列]
センサ配列10は、好ましくは、動物の首の周りに取り付けられる首輪のような形態である。例えば、タグ、カフス、皮下デバイスなどの他の形態のセンサ配列も用いられてよい。あるいは、センサ配列は、例えば、首輪に固定または固着されうるデバイスの形態をとる、別個に動物に取り付けられた手段に接続されるのに適した形態であってよい。
センサ配列10は、動物または動物の環境に関連する少なくとも1つのタイプのデータ、より好ましくは、2つ以上のタイプのデータを検知する。センサアセンブリが検知しうるデータの組合せは、(i)動物の2種類以上の動作、(ii)動物を取り巻く環境条件の2つ以上の表示、(iii)動物の少なくとも1種類の動作および動物を取り巻く環境条件の少なくとも1つの表示、を含む。検知されうる動物の動作の例は、歩く、頭を振る、頭を傾けることを含む。環境条件の表示の例は、光量、気温、および、騒音レベルを含む。
一例のセンサ配列は、図2に示される首輪20の形態をとる。首輪は、追加されたセンサによって監視される動物に適した従来のいかなる形状、デザイン、および、材料を用いて製造されてよく、図示されていないが、センサ配列は、電池などの電源、および、データをデータ収集手段に伝送する手段を含む。
センサ配列20におけるセンサは、概して21として示される。図に示すように、第1の傾斜スイッチ22および第2の傾斜スイッチ23は、異なる向きで設けられている。他のセンサも設けられてよく、振動、温度、湿度センサを含むがこれらに限定されない。
複数の傾斜スイッチは、動物の頭の異なる動作を検知するよう異なって配置される。例えば、1つの傾斜スイッチは、食べているときまたは飲んでいるときに動物の頭が低くなるような、縦揺れ活動のような動物の頭の動作、あるいは、歩くまたは走ることに付随するリズミカルな頭の動作を検知するよう配置されてよい。
他の傾斜スイッチは、例えば、動物が耳感染またはノミを有するときに頭を左右に振るかまたは時折頭をかしげるといった横揺れのような活動を検知するよう配列されてよい。
センサからのセンサデータは、好ましくは、センサ配列内のプロセッサに送られ、一実施形態では、プロセッサは、センサで生成されたデータのすべてをセンサ配列内にあるメモリユニットに格納する。好ましくは、プロセッサは、データを選択的にまたは制御可能にメモリユニットに格納する。例えば、図2のセンサ配列を参照すると、1つの傾斜スイッチは実質的に縦揺れ活動を検知しないが、他の傾斜スイッチは横揺れのような動作を検知し、プロセッサは、横揺れのような動作をメモリに格納するだけでよい。
プロセッサは、予め決められた時間間隔でデータを格納または伝送することだけをプログラムされてもよく、それはセンサによって異なってよい。例えば、温度条件が活動センサよりゆっくり変化する場合、プロセッサは、より短い時間間隔で、すなわち、歩きを検知するよう設計された活動センサに対して温度センサに対するよりも定期的にデータを格納および/または伝送する必要があるだろう。
プロセッサを使用してセンサからデータを選択的にまたは制御可能に格納または伝送することは、格納または伝送されるデータ量を重要なデータだけに減らすことで優位性がある。プロセッサは、データ収集手段にデータを短いバーストで伝送したり、および/または、伝送をより短くするためにデータを圧縮したりすることによって、伝送手段による電源の電流消費を減少させてよい。
[受信ステーションおよび処理手段]
図1を参照すると、センサ配列10からのデータは、さらなる処理のために受信ステーション11に送られる。好適な形態では、受信ステーションは、インターネットが使用できる場所にある。
好適な形態におけるセンサ配列からのデータの転送は、センサ配列10を受信ステーション11に物理的に接続することによって実現してよい。例えば、センサ配列は、コンピュータケーブルを介してコンピュータと通信するためのポートを備えてよい。データは、センサ配列のメモリユニットに格納されてから、ケーブルを介してコンピュータに転送される。オプションとして、コンピュータプログラムが、インターネットを使用する受信ステーション11にデータを転送することもできる。
他の形態では、センサアセンブリ10からの信号の転送は、無線で行われる。例えば、データは、無線またはセルラー方式で転送されてよい。データは、802.11bまたはWiFi無線ネットワークなどを介してインターネットを使用する受信ステーション11に転送されてよい。センサ配列10の電池寿命を保つべく、センサからのデータは、例えば、動物の動作、または、環境の温度変化のような状態またはレベルに変化が生じたときのみ転送されてよい。
データは、受信ステーション11で受信されると、好ましくはコンピュータソフトウェアによって制御される処理手段12によって処理される。コンピュータソフトウェアは、動物の特定の活動を決定すること、および、特定の活動および他の環境条件を示す視覚的表現シーケンスを生成する、という2つの主なタスクを有する。
[特定の活動の識別]
識別段階では、コンピュータソフトウェアは、処理手段12に命じてセンサ配列からのデータと参照データとを比較させ、既知のパターンが生じているかどうかを決定し、それによって動物の特定の活動を識別する。比較は、任意のセンサデータの持続時間および強度を組み合わせることと、センサデータパターンと参照データとの正確な一致、または、センサデータと参照データとの見込みに基づく一致を使用すること、とを考慮して行われてよい。
図3は、動作センサからの動作データのグラフィック表現を示す。例えば、プラトー305は、310に示された持続時間での不活動の期間を示す。スロープ315は、活動の期間を表す。このスロープの峻度320は、活動の強度を表し、活動の持続時間は、325で示される。
図3に示すように、センサの1つによって記録される一日の累積的な活動は、活動および不活動の期間に分割されてよい。期間または間隔の数は、要求される詳細レベルに基づく。低レベルでは、データは少ない数の期間に分割され、高いレベルでは、データは、短くて多くの数の期間に分割されてよい。
活動の各期間は、開始時刻、持続時間、および、強度によって説明されうる。活動の性質に関して推測がなされてよい。険しいスロープは走るなど激しい活動の周期を示し、プラトーは、座るまたは横たわるなどの活動を示す。横たわることと座ることとを区別すべく、活動の持続時間が分析されうる。短い期間は座ることを示唆し、長い期間は、眠るかまたは横たわることを示唆するだろう。
活動および不活動の期間は、単一の主センサに基づき決定されてよい。活動期間中に起きることについての追加情報は、対象期間中に他のセンサの読み取りを観察することによって決定されてよい。交差平面動作を検知するよう構成されたセンサは、動物がどちら向きに寝ているか、およびその活動レベルを示し、あるいは、動物が掻いているかどうかを示す。
特定の平面で反応するだけのセンサを配列することにより、動作を分割して基本要素にすることを可能にする。これらの基本要素は、横揺れ、縦揺れ、および、偏揺れに相当する。センサ配列によって示される詳細のレベルは、その組成に基づく。センサの数がより多くなれが情報量も多くなる。
特定の活動シーケンスを決定すべく、データは、順次分析され、特定の活動は、データシーケンスと既知の参照データとを比較することによって識別されてよい。比較用の参照データは、異なる動物、同種の動物の個々、例えば現在監視中である動物のようなある特定の動物、あるいは、それらの組合せを監視することによるデータのライブラリから得られる。データと参照データとを比較することによって特定の活動を識別するには、当業者には既知であるパターンマッチング技術、および、ファジー論理を含むコンピュータ論理が用いられてよい。
図4は、動作データに適用されるサンプルデシジョンツリーを示す。図に示すように、1つのセンサ400からの読み取りは、405で示される高、中、または、低の強度値を示す。同じセンサは、410において示される強度の持続時間を表す。リファレンスデータベースから読み出された格納済みシーケンスの一致に基づき、可能性能ある特定の活動415のリストが得られる。
例えば、センサ読出しが高く持続時間が短い場合、掻く、跳ぶ、または、あいさつすることの特徴を示す。動物が行っているのがこれらの活動のどれなのかを識別すべく、425および420などの異なるセンサデータがさらなる特徴付けのために用いられる。
一実施形態では、活動の解釈は、3つのレベルまたはカテゴリに分割される。カテゴリAルーチンは、正確であり、活動または不活動の期間を示す。
より詳細な活動はカテゴリBによって示される。カテゴリBの活動予測は、主にデータによって行われるが、不確かな期間では、見込みに基づく決定が用いられる。
カテゴリCの活動タイプは、架空であり、視覚的表現を一連のより特徴的なものにするよう指定される。例えば、ユーザは、犬が寝そべっていることを示す視覚的表現シーケンスを見ることができるが、それは、犬が寝ているかどうかは明確に示さない。犬が夢を見ているかまたはいびきをかいているかの表示であるような架空要素を追加することにより、観察者の理解および解釈をより深める追加の視覚的情報を視覚的表現シーケンスに与える。犬は寝ながらいびきをかいていたかまたは夢を見ていたとしてもよいが、それが必ずしもセンサによって決定されていなくてもよい。
動物の活動シーケンスの識別は、動物の健康を決定するためにも用いられてよい。例えば、センサからのデータが例えば犬などの動物が頻繁に掻いていることを示す場合、活動シーケンスまたは、活動シーケンスを識別する処理手段を見ているユーザに、この犬がノミをもっていることを示しうる。健康問題を決定するために特定のセンサデータがどのように用いられるかを以下の表1に示す。
Figure 2010517565
表1:可能性のある健康問題に関連するセンサデータパターン
例えば一日などの定められた期間で犬の横転の回数が増えるということは、ノミがいるか肌がかゆいなどの問題が生じていることを示している。
上記表に示すように、本発明は、動物が耳感染にかかっているかどうかを決定するために用いられてよい。例えば、耳感染にかかっている犬などの動物は、一般的に眠っていても頭を傾けているか、または、頭を振ることがわかっている。したがって、全身運動していないのに頭が傾いているのを検知することは、耳感染を示している場合がある。
犬のような動物は、頭を傾ける、後ろ足でかゆいところを掻くことによってノミによるかゆみに対応することがわかっている。したがって、掻くことに伴う頭の傾きや揺れを感知することにより、本発明は、動物にノミがいるかどうかを決定するのに用いられうる。
[視覚的表現シーケンス]
処理手段12は、動物の特定の活動を決定することに加えて、視覚的表現シーケンスを決定する。一形態では、これは、動物の特定の活動の視覚的表現をデータベースから選択することを含む。それによってユーザは、センサから実際のデータを分析せずとも所望の期間にわたって動物の行動を見ることができる。
図1を参照すると、処理手段12は、視覚的表現14のデータベースへのアクセスを有する。データベース14は、データベース13内に提供されるいかなる架空要素も含め、特定の活動のそれぞれの視覚的表現を表示するのに必要な情報およびデータを有する。
視覚的表現シーケンスは、動物によって行われる活動に対応する、例えば温度、光、騒音、および、降雨量のような動物を取り巻く環境条件も示してよい。同様に、心拍数および呼吸数のような動物の生理的データも示してよい。
好適な形態では、視覚的表現シーケンスは、処理手段12によって識別される特定の活動シーケンスのA、B、Cの3つの詳細レベルの組合せに対応する。例えば、特定の視覚的表現は、A2B3C1(8)として定義される。これは、特定の活動の視覚的表現がレベルAのルーチン2、レベルBのルーチン3、および、レベルCのルーチン1からなり、8秒の長さであることを意味する。例えば、視覚的表現シーケンスは、以下のようであってよい。
A2B3C1(3)
A2B3C3(2)
A2B3C1(3)
A2B3C4(5)
A1B2C2(4)
A1B2C1(6)
A1B3C1(7)
このようなシーケンスは、視覚的表現シーケンス自体より長い期間にわたる動物の行動を表す。多くの場合、24時間監視した結果は、120秒のシーケンスに集約され、すなわち、1時間あたり平均5秒ということである。とはいえ、シーケンス全体にわたる時間の圧縮は、変更可能であってよい。例えば、昼行動物は、夜に長時間眠るので、視覚的シーケンスは、夜の間は動物が他の顕著な特定の活動をせずに寝ているところを単に示し、動物が活動しているときにより時間的な詳細を示してよい。
データベース14における個々の視覚的表現は、各特定の活動に対して固有の画像またはアニメーションであってよい。一形態では、データベース13における各特定の活動または条件について、複数の動物のそれぞれに対して1つの視覚的表現が提供される。この形態では、視覚的表現は、特定の動物に合うよう処理手段によって選ばれてよい。例えば、監視されている動物が犬の場合、視覚的表現は、犬の特定の種類を表すよう選択されてよい。
確定された視覚的表現シーケンスは、ディスプレイ手段15に表示される。ディスプレイ手段15は、例えば、テレビまたはコンピュータスクリーンであってよい。ディスプレイ手段15は、携帯電話またはPDA(パーソナル携帯情報機器)のような通信デバイスの一部をなしてもよい。
[外部デバイス]
本発明のシステムおよび方法は、監視される動物によって用いられうるセンサをデバイスに設けることによって強化されてよい。デバイスからのデータは、動物の活動および行動の識別を向上させるべく、センサ配列からのデータと組み合わせて用いられてよい。
動物を取り巻く環境、例えば、犬小屋または犬の寝床などは、その環境における犬の活動を決定し且つ記録するセンサまたはトランスポンダを備えてよい。近接センサのようなセンサ、および、RFID(無線周波数識別)で用いられるようなトランスポンダが用いられてよい。このような方法で、動物が1つの場所に長い時間居る場合、飼い主は、それが眠れないせいか、無気力によるものか、または、重病のせいかどうかを決定できる。
センサ配列のような外部デバイス用センサは、データを格納するメモリユニット、および、データを選択的または制御可能に格納するかまたはデータ収集手段に送るプロセッサも有してよい。
[好適な方法]
図5を参照すると、好適は方法がフローチャート形式で示されている。方法は、ステップ50から始まり、動物の1種類の動作、または、監視される動物を取り巻く環境に関するセンサ状態、あるいは、動物の生理的状態を検知する。ステップ51において、動物の他の種類の動作、または、監視される動物を取り巻く環境に関するセンサ状態、あるいは、動物の生理的状態が検知される。オプションとして、ステップ51の後にさらなる検知ステップが含まれてもよい。上記検知ステップからのデータは、ステップ52におけるデータベースの参照データと比較される。
ルールのデシジョンツリーは、動作データを解釈する1つの方法である。あるいは、動物自身の履歴データが比較されることにより、動物が典型的に生成するパターンの変化を分析する。例えば、動物の動作がその日のその時間におけるいつもの頻度よりかなり少なくなってくると、問題を示している場合がある。動物から得られたデータは、同様の年齢および種類の他の動物と比較されるか、または、一種類の複数の動物の平均と比べられてよい。
他の形態では、本発明の方法は、ステップ53から始まり、参照データがデータベースから読み出される。このデータは、先に検知した動物の活動または環境に関するセンサ状態、あるいは、動物の生理的条件に従い、格納されていてよい。一形態では、読み出されたデータとデータベース内の情報とを比較することによってステップ52における対比がなされる。
ステップ52における信号の対比は、検知されたようなデータに対応する特定の活動の存在をチェックすることを基本的に含む。これは、センサデータと参照データとの正確な一致または部分的な一致であってよい。チェックの結果は、ステップ54で決定される。
検知されたような信号に対応する特定の活動が存在する場合、方法は55へと進み、特定の活動の視覚的表現がデータベースから読み出され、シーケンスに追加される。視覚的表現のタイプは、データの一致の詳細レベルに基づく。一致度の高いタイプ'A'のアニメーションルーチンまたは画像は、活動または不活動などのより基本的なアクションを示し、一致度の低いタイプ'B'アニメーションルーチンまたは画像は、視覚的表現におけるより高いレベルの詳細に対応する。さらなる要素がタイプ'C'アニメーションルーチンまたは画像として視覚的表現に追加されてよく、当該'C' アニメーションルーチンまたは画像は、現実のものではなく、動物の特定の活動の視覚的表現にさらなる特殊性を追加するのに役立つ。
確定されたシーケンスは、ステップ56においてディスプレイデバイスに送られてよい。そして、シーケンスを見るユーザは、これは、動物を取り巻く環境条件および生理的条件を背景とした動物の活動の組み合わせである、動物の行動を観察してよい。ユーザまたはコンピュータシステムのさらなる処理、あるいは、プロセッサは、動物が健康状態の悪さまたは他のいかなる識別可能な生理的状態に苦しんでいるかどうかを当該動物の行動から決定してよい。
特定の条件が処理手段によって識別された場合、ポップアップのような警報通知が現れ、SMSまたはMMSメッセージが携帯電話に送られるかまたは電子メールメッセージが送られてよい。

Claims (29)

  1. 動物の行動を表示する方法であって、
    前記動物の動作から特定の活動シーケンスを識別する段階と、
    前記特定の活動シーケンスに対応する視覚的表現シーケンスを表示する段階と、
    を備える方法。
  2. 動物の行動を観察する方法であって、
    前記動物に取り付けられた少なくとも1つのセンサを用いて前記動物の動作を検知する段階と、
    前記少なくとも1つのセンサから動作データを収集する段階と、
    前記動作データから、前記動物の特定の活動シーケンスを識別する段階と、
    前記特定の活動シーケンスに少なくとも部分的に対応する視覚的表現シーケンスを表示する段階と、
    を備える方法。
  3. 前記特定の活動は、前記少なくとも1つのセンサによって検知された動作データと参照動作データとが少なくとも部分的に一致することによって識別される、請求項2に記載の方法。
  4. 前記視覚的表現シーケンスは、前記動作データと参照データとの正確な一致に対応した活動の少なくとも1つの表現を含む、請求項1から3のいずれか一項に記載の方法。
  5. 前記視覚的表現シーケンスは、前記動作データと参照データとの見込みに基づく一致に対応する活動の少なくとも1つの表現を含む、請求項1から4のいずれか一項に記載の方法。
  6. 前記視覚的表現の少なくとも1つは、前記視覚的表現の特殊性を高める少なくとも1つの架空要素を含み、前記架空要素は、前記動物の実際の活動とは必ずしも一致しない、請求項1から5のいずれか一項に記載の方法。
  7. 前記視覚的表現シーケンスは、少なくとも1つの前記特定の活動の強度および/または持続時間の表示を有する、請求項1から6のいずれか一項に記載の方法。
  8. 前記視覚的表現シーケンスは、前記動物の前記特定の活動の間における環境条件の表示をさらに有する、請求項1から7のいずれか一項に記載の方法。
  9. 前記視覚的表現シーケンスは、前記動物の前記特定の活動の間の前記動物の生理的状態の表示をさらに有する、請求項1から8のいずれか一項に記載の方法。
  10. 前記視覚的表現は、コンピュータによって生成された画像である、請求項1から9のいずれか一項に記載の方法。
  11. 少なくとも1つの予め決められた活動、または、特定の活動シーケンスが識別された場合、警報通知を発することをさらに含む、請求項1から10のいずれか一項に記載の方法。
  12. 前記警報通知は、コンピュータシステムにおける視覚および/または音声信号である、請求項11に記載の方法。
  13. 前記警報通知は、電子メール、SMSまたはMMSメッセージである、請求項11に記載の方法。
  14. 動物監視システムであって、
    動物に取り付けられる少なくとも1つのセンサを有するセンサ配列と、
    前記センサ配列からデータを収集するデータ収集手段と、
    処理手段と、
    を備え、前記処理手段は、
    前記動物の特定の活動シーケンス、および、前記特定の活動シーケンスに対応する表示用の視覚的表現シーケンスをセンサデータから識別する手段を有する、動物監視システム。
  15. 前記処理手段は、コンピュータプロセッサにより用いられる命令を提供するコンピュータソフトウェアである、請求項14に記載の動物監視システム。
  16. 前記センサ配列は、動作、振動、傾斜、場所、音、温度、光量、湿度、心拍数、呼吸数、および、匂いを検知することが可能な複数のセンサから選ばれる1つ以上のセンサを有する、請求項14または15に記載の動物監視システム。
  17. 前記データ収集手段は、前記センサ配列からの信号を無線送信機によって受信する無線受信ステーションである、請求項14から16のいずれか一項に記載の動物監視システム。
  18. 前記データ収集手段は、コンピュータネットワークに接続される、請求項14から17のいずれか一項に記載の動物監視システム。
  19. 前記データ収集手段は、インターネットを介してアクセス可能である、請求項14から18のいずれか一項に記載の動物監視システム。
  20. 前記特定の活動を識別する前記処理手段は、前記少なくとも1つのセンサによって検知されたデータと参照データとを少なくとも部分的に一致させる機能を有する、請求項14から19のいずれか一項に記載の動物監視システム。
  21. 前記特定の活動を識別する前記処理手段は、センサデータと参照データとを正確に一致させる機能を有する、請求項14から20のいずれか一項に記載の動物監視システム。
  22. 前記特定の活動を識別する前記処理手段は、センサデータと参照データとを確率的に一致させる機能を有する、請求項14から21のいずれか一項に記載の動物監視システム。
  23. 前記表示用の視覚的表現シーケンスを提供する前記処理手段は、少なくとも1つの架空要素を追加して前記視覚的表現のいずれかの特殊性を高める機能を有し、前記架空要素は、監視される前記動物の実際の行動と必ずしも一致しない、請求項14から22のいずれか一項に記載の動物監視システム。
  24. 前記表示用の視覚的表現シーケンスを提供する前記処理手段は、前記特定の活動の少なくとも1つの強度および/または持続時間を示す機能を有する、請求項14から23のいずれか一項に記載の動物監視システム。
  25. 前記表示用の視覚的表現シーケンスを提供する前記処理手段は、前記動物の前記特定の活動の間における環境条件の表示を追加する機能を有する、請求項14から24のいずれか一項に記載の動物監視システム。
  26. 前記表示用の視覚的表現シーケンスを提供する前記処理手段は、前記動物の前記特定の活動の間の前記動物の生理的状態の表示を追加する機能を有する、請求項14から25のいずれか一項に記載の動物監視システム。
  27. 前記処理手段は、少なくとも1つの予め決められた活動または特定の活動シーケンスが識別された場合、警報通知を発する機能を有する、請求項14から26のいずれか一項に記載の動物監視システム。
  28. 前記警報通知は、コンピュータシステムにおける視覚および/または音声信号である、請求項27に記載の動物監視システム。
  29. 前記警報通知は、電子メール、SMSまたはMMSメッセージである、請求項27に記載の動物監視システム。
JP2009549026A 2007-02-09 2008-02-11 活動の監視および表示 Expired - Fee Related JP5156030B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
NZ553146 2007-02-09
NZ553146A NZ553146A (en) 2007-02-09 2007-02-09 Improvements relating to monitoring and displaying activities
PCT/NZ2008/000026 WO2008097111A1 (en) 2007-02-09 2008-02-11 Monitoring and displaying activities

Publications (3)

Publication Number Publication Date
JP2010517565A true JP2010517565A (ja) 2010-05-27
JP2010517565A5 JP2010517565A5 (ja) 2011-03-24
JP5156030B2 JP5156030B2 (ja) 2013-03-06

Family

ID=39681919

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009549026A Expired - Fee Related JP5156030B2 (ja) 2007-02-09 2008-02-11 活動の監視および表示

Country Status (5)

Country Link
US (1) US8305220B2 (ja)
EP (1) EP2114128A4 (ja)
JP (1) JP5156030B2 (ja)
NZ (1) NZ553146A (ja)
WO (1) WO2008097111A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012042470A (ja) * 2010-08-16 2012-03-01 Fujitsu Ltd センサ・データ・ストリームからイベント生起を識別する方法
KR101376189B1 (ko) 2012-12-11 2014-03-28 대한민국 가축의 간이 체위 측정장치
JP2022515837A (ja) * 2018-12-27 2022-02-22 ヒルズ・ペット・ニュートリシャン・インコーポレーテッド 動物の行動と動物の健康を関連付けるためのシステムおよび方法

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0705452D0 (en) 2007-03-22 2007-05-02 Faire Ni Ltd An animal monitoring system and method
GB0822580D0 (en) * 2008-12-11 2009-01-14 Faire Ni Ltd An animal monitoring system and method
NL2006598C2 (nl) * 2011-04-13 2012-10-16 Nedap Nv Werkwijze en inrichting voor het monitoren van bewegingen van een dier.
WO2013055380A1 (en) * 2011-10-13 2013-04-18 Intel Corporation Detection of user activities by a portable device
US9770195B2 (en) * 2012-08-09 2017-09-26 The Regents Of The University Of California Automated scratch detection system and signal processing algorithm for the study of pruritus in animals
US9526437B2 (en) 2012-11-21 2016-12-27 i4c Innovations Inc. Animal health and wellness monitoring using UWB radar
JP5635637B2 (ja) * 2013-03-15 2014-12-03 ヤフー株式会社 動物異常検知装置、動物異常検知方法、およびプログラム
US10149617B2 (en) 2013-03-15 2018-12-11 i4c Innovations Inc. Multiple sensors for monitoring health and wellness of an animal
US10561365B2 (en) * 2013-12-02 2020-02-18 Scr Engineers Ltd System and method of monitoring condition of equines
JP5954343B2 (ja) * 2014-02-12 2016-07-20 カシオ計算機株式会社 情報送信端末、報知制御システム、及び情報送信方法
PL3122173T3 (pl) 2014-03-26 2021-08-30 Scr Engineers Ltd System lokalizacji żywego inwentarza
US11071279B2 (en) 2014-09-05 2021-07-27 Intervet Inc. Method and system for tracking health in animal populations
US10986817B2 (en) 2014-09-05 2021-04-27 Intervet Inc. Method and system for tracking health in animal populations
JP6696967B2 (ja) * 2015-03-05 2020-05-20 株式会社Nttドコモ 監視装置及び動作検出方法
CA3077326A1 (en) 2016-09-28 2018-04-05 S.C.R. (Engineers) Limited Holder for a smart monitoring tag for cows
CN107006389B (zh) * 2016-11-04 2021-06-22 深圳市沃特沃德股份有限公司 终端以及宠物动作信号识别方法和装置
NL2017785B1 (en) 2016-11-14 2018-05-25 N V Nederlandsche Apparatenfabriek Nedap Method and system for generating an attention signal indicating a problem for an animal
WO2019175277A1 (en) 2018-03-14 2019-09-19 Chronolife System and method for processing multiple signals
WO2019209712A1 (en) 2018-04-22 2019-10-31 Vence, Corp. Livestock management system and method
WO2019207041A1 (en) * 2018-04-26 2019-10-31 F. Hoffmann-La Roche Ag Method of and system for tracking an animal in a population of animals
US11699522B2 (en) * 2018-04-27 2023-07-11 Tata Consultancy Services Limited Unified platform for domain adaptable human behaviour inference
BR112021006730A8 (pt) 2018-10-10 2022-09-13 Scr Eng Ltd Método e dispositivo de secagem de animais de pecuária
WO2021173571A1 (en) * 2020-02-24 2021-09-02 Aniv8, Inc. Animal health evaluation system and method
BR112022017261A2 (pt) * 2020-03-09 2022-10-18 Nitto Denko Corp Sistema de detecção de anormalidade
USD990063S1 (en) 2020-06-18 2023-06-20 S.C.R. (Engineers) Limited Animal ear tag
USD990062S1 (en) 2020-06-18 2023-06-20 S.C.R. (Engineers) Limited Animal ear tag
IL275518B (en) 2020-06-18 2021-10-31 Scr Eng Ltd Animal tag
CN116261396A (zh) * 2020-10-01 2023-06-13 希尔氏宠物营养品公司 用于将动物运动的标志与动物活动相关联的系统和方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002034377A (ja) * 2000-07-25 2002-02-05 Denso Corp ペットの代行管理方法及びそれを行う管理局及び飼い主の通信端末
JP2005000031A (ja) * 2003-06-10 2005-01-06 Nec Corp ペット監視システム
US20050081797A1 (en) * 2002-02-27 2005-04-21 Arvo Laitinen Surveillance system for animals
JP2005261315A (ja) * 2004-03-18 2005-09-29 Hitoshi Mizutani 動物の体動検出装置および体動検出方法
GB2430830A (en) * 2005-09-28 2007-04-04 Univ Dundee Image sequence movement analysis system using object model, likelihood sampling and scoring

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4618861A (en) * 1985-03-20 1986-10-21 Cornell Research Foundation, Inc. Passive activity monitor for livestock
EP0816986B1 (en) * 1996-07-03 2006-09-06 Hitachi, Ltd. System for recognizing motions
US6375612B1 (en) * 1998-03-24 2002-04-23 P. Timothy Guichon Method and system for monitoring animals
DE19834257C2 (de) * 1998-07-30 2002-08-08 Frank Mauch Verfahren zur Überwachung eines Tieres, insbesondere eines Pferdes
KR100421740B1 (ko) * 2000-11-14 2004-03-10 삼성전자주식회사 객체 활동 모델링 방법
US6678413B1 (en) * 2000-11-24 2004-01-13 Yiqing Liang System and method for object identification and behavior characterization using video analysis
JP2008500046A (ja) * 2004-05-24 2008-01-10 エクーシス インコーポレイテッド 動物用計測装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002034377A (ja) * 2000-07-25 2002-02-05 Denso Corp ペットの代行管理方法及びそれを行う管理局及び飼い主の通信端末
US20050081797A1 (en) * 2002-02-27 2005-04-21 Arvo Laitinen Surveillance system for animals
JP2005000031A (ja) * 2003-06-10 2005-01-06 Nec Corp ペット監視システム
JP2005261315A (ja) * 2004-03-18 2005-09-29 Hitoshi Mizutani 動物の体動検出装置および体動検出方法
GB2430830A (en) * 2005-09-28 2007-04-04 Univ Dundee Image sequence movement analysis system using object model, likelihood sampling and scoring

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012042470A (ja) * 2010-08-16 2012-03-01 Fujitsu Ltd センサ・データ・ストリームからイベント生起を識別する方法
US9107565B2 (en) 2010-08-16 2015-08-18 Fujitsu Limited Identifying an event occurrence from sensor data streams
KR101376189B1 (ko) 2012-12-11 2014-03-28 대한민국 가축의 간이 체위 측정장치
JP2022515837A (ja) * 2018-12-27 2022-02-22 ヒルズ・ペット・ニュートリシャン・インコーポレーテッド 動物の行動と動物の健康を関連付けるためのシステムおよび方法
US11666037B2 (en) 2018-12-27 2023-06-06 Hills Pet Nutrition, Inc. System and method for associating animal behaviors with animal health
JP7343263B2 (ja) 2018-12-27 2023-09-12 ヒルズ・ペット・ニュートリシャン・インコーポレーテッド 動物の行動と動物の健康を関連付けるためのシステムおよび方法

Also Published As

Publication number Publication date
NZ553146A (en) 2011-05-27
WO2008097111A1 (en) 2008-08-14
EP2114128A1 (en) 2009-11-11
US8305220B2 (en) 2012-11-06
US20100321189A1 (en) 2010-12-23
EP2114128A4 (en) 2013-01-02
JP5156030B2 (ja) 2013-03-06

Similar Documents

Publication Publication Date Title
JP5156030B2 (ja) 活動の監視および表示
US11889818B2 (en) Social group management system and method therefor
US11666037B2 (en) System and method for associating animal behaviors with animal health
US10492473B2 (en) Pet animal collar for health and vital signs monitoring, alert and diagnosis
CN105554482B (zh) 一种加强主人与宠物联系的综合管理装置和方法
CN107708412B (zh) 智能宠物监测系统
US20160058379A1 (en) Animal of Equidae Family Band or Collar for Health & Vital Signs Monitoring, Alert and Diagnosis
den Uijl et al. External validation of a collar-mounted triaxial accelerometer for second-by-second monitoring of eight behavioural states in dogs
CN107205362A (zh) 用于获得关于农场动物的信息的方法
CN112385569A (zh) 使用健康图网络检测和管理牲畜中的疾病爆发
KR20220147015A (ko) 센서 기반 반려동물 관리용 펫링을 이용한 반려동물 토탈케어 시스템
CN116261396A (zh) 用于将动物运动的标志与动物活动相关联的系统和方法
CA3215537A1 (en) System, method, and apparatus for pet condition detection
KR102395173B1 (ko) 반려 동물의 건강 관리를 위한 웨어러블 장치
WO2017145710A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP7427645B2 (ja) データ処理装置、プログラム、データ処理システム、及びデータ処理方法
Rault et al. 5. Cognitive approaches and new technologies: changing methodologies in applied ethology
WO2023140323A1 (ja) 分析支援装置、分析支援方法及びコンピュータープログラム
JP2021168023A (ja) 動物画像情報生成装置、動物画像生成方法、動物画像生成プログラム、および電子機器
US20220096008A1 (en) System and method of smart health monitoring
JP2022143047A (ja) 行動予測モデル生成装置、行動予測装置、行動予測モデル生成システム、行動予測モデル生成方法及びプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110204

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110204

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110819

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110830

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20111130

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20111207

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20111222

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120105

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120120

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121120

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121207

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151214

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5156030

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees