JP7402165B2 - 可動式処置デバイスの位置特定を実施するための装置及び方法 - Google Patents

可動式処置デバイスの位置特定を実施するための装置及び方法 Download PDF

Info

Publication number
JP7402165B2
JP7402165B2 JP2020543273A JP2020543273A JP7402165B2 JP 7402165 B2 JP7402165 B2 JP 7402165B2 JP 2020543273 A JP2020543273 A JP 2020543273A JP 2020543273 A JP2020543273 A JP 2020543273A JP 7402165 B2 JP7402165 B2 JP 7402165B2
Authority
JP
Japan
Prior art keywords
inertial sensor
sensor data
treatment device
movement
layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020543273A
Other languages
English (en)
Other versions
JP2021513415A (ja
Inventor
ファイズ、フェイサル、シャーマン
シャオレ、マオ
Original Assignee
ブラウン ゲーエムベーハー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP18157362.7A external-priority patent/EP3528167A1/en
Priority claimed from EP18157358.5A external-priority patent/EP3528166B1/en
Application filed by ブラウン ゲーエムベーハー filed Critical ブラウン ゲーエムベーハー
Publication of JP2021513415A publication Critical patent/JP2021513415A/ja
Application granted granted Critical
Publication of JP7402165B2 publication Critical patent/JP7402165B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/044Recurrent networks, e.g. Hopfield networks
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C17/00Devices for cleaning, polishing, rinsing or drying teeth, teeth cavities or prostheses; Saliva removers; Dental appliances for receiving spittle
    • A61C17/16Power-driven cleaning or polishing devices
    • A61C17/22Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like
    • A61C17/221Control arrangements therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • AHUMAN NECESSITIES
    • A46BRUSHWARE
    • A46BBRUSHES
    • A46B15/00Other brushes; Brushes with additional arrangements
    • A46B15/0002Arrangements for enhancing monitoring or controlling the brushing process
    • AHUMAN NECESSITIES
    • A46BRUSHWARE
    • A46BBRUSHES
    • A46B15/00Other brushes; Brushes with additional arrangements
    • A46B15/0055Brushes combined with other articles normally separate from the brushing process, e.g. combs, razors, mirrors
    • A46B15/0069Brushes fitted with a interdental devices, e.g. toothpick
    • A46B15/0073Brushes with an arrangement for using the floss
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C17/00Devices for cleaning, polishing, rinsing or drying teeth, teeth cavities or prostheses; Saliva removers; Dental appliances for receiving spittle
    • A61C17/16Power-driven cleaning or polishing devices
    • A61C17/22Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C17/00Devices for cleaning, polishing, rinsing or drying teeth, teeth cavities or prostheses; Saliva removers; Dental appliances for receiving spittle
    • A61C17/16Power-driven cleaning or polishing devices
    • A61C17/22Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like
    • A61C17/24Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like rotating continuously
    • A61C17/26Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like rotating continuously driven by electric motor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • G06F16/285Clustering or classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • AHUMAN NECESSITIES
    • A46BRUSHWARE
    • A46BBRUSHES
    • A46B15/00Other brushes; Brushes with additional arrangements
    • A46B15/0002Arrangements for enhancing monitoring or controlling the brushing process
    • A46B15/0016Arrangements for enhancing monitoring or controlling the brushing process with enhancing means
    • A46B15/0036Arrangements for enhancing monitoring or controlling the brushing process with enhancing means with a lighting means, e.g. laser, bulb
    • AHUMAN NECESSITIES
    • A46BRUSHWARE
    • A46BBRUSHES
    • A46B15/00Other brushes; Brushes with additional arrangements
    • A46B15/0002Arrangements for enhancing monitoring or controlling the brushing process
    • A46B15/0038Arrangements for enhancing monitoring or controlling the brushing process with signalling means
    • AHUMAN NECESSITIES
    • A46BRUSHWARE
    • A46BBRUSHES
    • A46B15/00Other brushes; Brushes with additional arrangements
    • A46B15/0002Arrangements for enhancing monitoring or controlling the brushing process
    • A46B15/0038Arrangements for enhancing monitoring or controlling the brushing process with signalling means
    • A46B15/004Arrangements for enhancing monitoring or controlling the brushing process with signalling means with an acoustic signalling means, e.g. noise
    • AHUMAN NECESSITIES
    • A46BRUSHWARE
    • A46BBRUSHES
    • A46B15/00Other brushes; Brushes with additional arrangements
    • A46B15/0055Brushes combined with other articles normally separate from the brushing process, e.g. combs, razors, mirrors
    • A46B15/0069Brushes fitted with a interdental devices, e.g. toothpick
    • A46B15/0071Toothbrushes with flossing arrangements
    • AHUMAN NECESSITIES
    • A46BRUSHWARE
    • A46BBRUSHES
    • A46B2200/00Brushes characterized by their functions, uses or applications
    • A46B2200/10For human or animal care
    • A46B2200/1066Toothbrush for cleaning the teeth or dentures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0247Pressure sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0252Load cells
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C17/00Devices for cleaning, polishing, rinsing or drying teeth, teeth cavities or prostheses; Saliva removers; Dental appliances for receiving spittle
    • A61C17/16Power-driven cleaning or polishing devices
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61CDENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C17/00Devices for cleaning, polishing, rinsing or drying teeth, teeth cavities or prostheses; Saliva removers; Dental appliances for receiving spittle
    • A61C17/16Power-driven cleaning or polishing devices
    • A61C17/22Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like
    • A61C17/32Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like reciprocating or oscillating
    • A61C17/34Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like reciprocating or oscillating driven by electric motor
    • A61C17/3409Power-driven cleaning or polishing devices with brushes, cushions, cups, or the like reciprocating or oscillating driven by electric motor characterized by the movement of the brush body
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B26HAND CUTTING TOOLS; CUTTING; SEVERING
    • B26BHAND-HELD CUTTING TOOLS NOT OTHERWISE PROVIDED FOR
    • B26B21/00Razors of the open or knife type; Safety razors or other shaving implements of the planing type; Hair-trimming devices involving a razor-blade; Equipment therefor
    • B26B21/40Details or accessories
    • B26B21/405Electric features; Charging; Computing devices
    • B26B21/4056Sensors or controlling means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B26HAND CUTTING TOOLS; CUTTING; SEVERING
    • B26BHAND-HELD CUTTING TOOLS NOT OTHERWISE PROVIDED FOR
    • B26B21/00Razors of the open or knife type; Safety razors or other shaving implements of the planing type; Hair-trimming devices involving a razor-blade; Equipment therefor
    • B26B21/40Details or accessories
    • B26B21/4081Shaving methods; Usage or wear indication; Testing methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching
    • G06F2218/16Classification; Matching by matching signal segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Epidemiology (AREA)
  • Dentistry (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mathematical Physics (AREA)
  • Biomedical Technology (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Brushes (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Manipulator (AREA)
  • Arrangements For Transmission Of Measured Signals (AREA)
  • Image Analysis (AREA)

Description

本発明の実施形態は、可動式処置デバイスの位置特定を実施するための装置、可動式処置デバイスの位置特定を実施するための方法、並びにコンピュータ又は信号プロセッサ上で実行されているときに、可動式処置デバイスの位置特定を実施するための上記方法を実装するためのコンピュータプログラムに関する。
本発明の更なる実施形態は、可動式個人用器具の運動を分類するための装置、可動式個人用器具の運動を分類するための方法、並びにコンピュータ又は信号プロセッサ上で実行されているときに、可動式個人用器具の運動を分類するための上記方法を実装するためのコンピュータプログラムに関する。
可動式処置デバイスは、表面などを処置するために使用され得る。例えば、可動式処置デバイスは、ヘアブラシ、かみそり、グルーマ、歯ブラシなどの個人用器具に関係し得る。これらの例では、処置される表面は、身体、又は上記身体の少なくとも特定の部分若しくはゾーンであり得る。
可動式処置デバイスの他の例としては、例えば、ほうき、モップ、スクラビングブラシなどの家庭用器具を挙げることができる。これらの例では、処置される表面は、床、又は上記床の少なくとも特定の部分若しくはゾーンであり得る。
いくつかの用途では、可動式処置デバイスの現在の場所を知ることが有用である場合がある。いくつかの用途では、追加的又は代替的に、特に個人用器具の場合に、可動式処置デバイスの運動を分類することが有用である場合がある。
現今では、撮像技法は、対象表面に対して可動式処置デバイスを位置特定するために、例えば、上記対象表面を捕捉するカメラによって使用され得る。可動式処置デバイスを位置特定するために、GPSセンサなどのセンサを使用することが知られている場合もある。上述の撮像技法を、可動式処置デバイスの運動を撮像し、上記捕捉された運動を分類するために使用することもできる。
これらの一般的なデバイス及び方法は、大まかな位置特定及び分類のために好適に申し分なく作用し得る。しかしながら、いくつかの欠点が存在し得る。例えば、GPSセンサは、屋外条件でのみ十分に申し分なく作用し得る。対象表面を捕捉するカメラの視界は、時には可動式処置デバイス自体によっても妨害される場合がある。更に、異なるユーザが可動式処置デバイス、例えば、個人用器具を使用している場合であっても、上述のデバイス及び方法の出力は、各ユーザが、上記可動式処置デバイスをどのように使用するかの個別のスタイル及び嗜好を有し得るとしても、ユーザごとに常に同じである。
したがって、可動式処置デバイスの正確な位置特定、及び/又は上述の欠点を伴わない可動式処置デバイスの運動の正確な分類を可能にする、装置及び方法を提供することが望ましいであろう。更に、異なる人物に個別に訓練された技法を提供することによって、これらの装置及び方法を個人化することが望ましいであろう。
一態様によれば、対象表面に対する可動式処置デバイスの位置特定を実施するための装置であって、可動式処置デバイスが、慣性センサを備え、対象表面を処置するように構成されている、装置が提供される。装置は、可動式処置デバイスの運動パターンのセットに含まれる2つ以上の運動パターン間を判別するように構成され得る、運動パターン認識デバイスを備え得る。装置は、慣性センサからの少なくとも1つの慣性センサデータを運動パターン認識デバイスに提供するためのインターフェースを更に備えることができ、少なくとも1つの慣性センサデータは、可動式処置デバイスの運動を表す。運動パターン認識デバイスは、少なくとも1つの慣性センサデータを受信するように構成されたニューラルネットワークを備え得る。ニューラルネットワークは、運動パターンのセットに含まれる運動パターンのうちの少なくとも1つに少なくとも1つの慣性センサデータをマッピングするように更に構成され得る。上記運動パターンは各々、対象表面の1つ以上の異なるゾーンに関連付けられてもよく、それにより、少なくとも1つの運動パターンとの少なくとも1つの慣性センサデータのマッピングは、対象表面の1つ以上のゾーンに対する可動式処置デバイスの位置の推定を示す。
一態様によれば、対象表面に対する可動式処置デバイスの位置特定を実施するための方法であって、可動式処置デバイスが、慣性センサを備え、対象表面を処置するように構成されている、方法が提供される。本方法は、可動式処置デバイスの運動パターンのセットに含まれる2つ以上の運動パターン間を判別する工程を含み得る。本発明の方法は、慣性センサからの少なくとも1つの慣性センサデータを受信する工程を更に含むことができ、少なくとも1つの慣性センサデータは、可動式処置デバイスの運動を表す。更に、本発明の方法は、ニューラルネットワークによって、少なくとも1つの慣性センサデータを受信して処理する工程と、運動パターンのセットに含まれる運動パターンのうちの少なくとも1つに少なくとも1つの慣性センサデータをマッピングする工程と、を含み得る。運動パターンのセットに含まれる上記運動パターンは各々、対象表面の1つ以上の異なるゾーンに関連付けられ、それにより、少なくとも1つの運動パターンと少なくとも1つの慣性センサデータをマッピングする工程は、対象表面の1つ以上のゾーンに対する可動式処置デバイスの位置の推定を示す。
一態様によれば、コンピュータプログラムが記憶されたコンピュータ可読デジタル記憶媒体であって、コンピュータプログラムが、コンピュータ上で作動しているときに、対象表面に対する可動式処置デバイスの位置特定を実施するための上述の方法を実施するためのプログラムコードを有する、コンピュータ可読デジタル記憶媒体が提供される。
一態様によれば、慣性センサを備える可動式個人用器具の運動を分類するための装置であって、装置が、可動式個人用器具の運動パターンのセットに含まれる2つ以上の運動パターン間を判別するように構成された運動パターン認識デバイスを備える、装置が提供される。装置は、慣性センサからの少なくとも1つの慣性センサデータを運動パターン認識デバイスに提供するように構成されたインターフェースを更に備えることができ、少なくとも1つの慣性センサデータは、可動式個人用器具の運動を表す。運動パターン認識デバイスは、少なくとも1つの慣性センサデータを受信し、かつ運動パターンのセットに含まれる運動パターンのうちの少なくとも1つに少なくとも1つの慣性センサデータをマッピングするように構成されたニューラルネットワークを備え得る。少なくとも1つのマッピングされた運動パターンは、1つ以上のクラスの少なくとも1つのクラスメンバに関連付けられ、それにより、少なくとも1つのクラスメンバは、可動式個人用器具の運動に基づいて選択される。
一態様によれば、慣性センサを備える可動式個人用器具の運動を分類するための方法が提供される。本方法は、可動式個人用器具の運動パターンのセットに含まれる2つ以上の運動パターン間を判別する工程を含み得る。本方法は、慣性センサからの少なくとも1つの慣性センサデータを運動パターン認識デバイスに提供する工程を更に含むことができ、少なくとも1つの慣性センサデータは、可動式個人用器具の運動を表す。本方法は、ニューラルネットワークによって、少なくとも1つの慣性センサデータを受信して処理する工程と、運動パターンのセットに含まれる運動パターンのうちの少なくとも1つに少なくとも1つの慣性センサデータをマッピングする工程と、を更に含み得る。少なくとも1つのマッピングされた運動パターンは、少なくとも1つのクラスの少なくとも1つのクラスメンバに関連付けられ、それにより、少なくとも1つのクラスメンバは、可動式個人用器具の運動に基づいて選択される。
一態様によれば、コンピュータプログラムが記憶されたコンピュータ可読デジタル記憶媒体であって、コンピュータプログラムが、コンピュータ上で作動しているときに、可動式個人用器具の運動を分類するための上述の方法を実施するためのプログラムコードを有する、コンピュータ可読デジタル記憶媒体が提供される。
以下では、本発明の実施形態は、図面を参照してより詳細に記載されている。
一実施形態による、本発明の装置の概略ブロック図を示している。 可動式処置デバイスで処置される対象表面の一例を示している。 可動式処置デバイスで処置される対象表面の更なる例を示している。 本発明の装置で使用され得る回帰型ニューラルネットワークの概略ブロック図を示している。 本発明の装置で使用され得るGRUニューラルネットワークの概略ブロック図を示している。 本発明の装置で使用され得るLSTMニューラルネットワークの概略ブロック図を示している。 異なる時間インスタンスにおける1つの層を有するLSTMニューラルネットワークの概略ブロック図を示している。 異なる時間インスタンスにおける2つの層を有するLSTMニューラルネットワークの概略ブロック図を示している。 一実施形態による、本発明の方法のブロック図を示している。 一実施形態による、本発明の装置の概略ブロック図を示している。 更なる実施形態による、本発明の装置の概略ブロック図を示している。 更なる実施形態による、本発明の装置の概略ブロック図を示している。 一実施形態による、本発明の方法のブロック図を示している。
均等又は等価の要素若しくは均等又は等価の機能を有する要素は、以下の記述で、均等又は等価の参照符合で示される。
以下では、個人用器具への参照がなされ、かつ/又は可動式処置デバイスの非限定的な例として、家庭用器具への参照がなされる。しかしながら、これらの器具の種類は、本発明の実施形態及び例を記載するための非限定的な例としてのみ記述されている。したがって、本発明は、これらの例示的に記述される種類の器具のみに限定されるものではない。
更に、方法の任意の方法工程の順序は、非限定的な例としてのみ記載され得る。したがって、本明細書に記載される任意の方法工程を、記載される以外の任意の他の順序で実行することもできる。
いくつかの態様は装置又はデバイスに関して説明されているが、これらの態様は、対応する方法の説明も表すことは明らかであり、ブロック又はデバイスは方法工程又は方法工程の特徴に対応する。同様に、方法又は方法工程に関して説明した態様は、対応する装置又はデバイスの対応するブロック又はアイテム又は特徴の説明も表す。
本発明の第1の態様は、可動式処置デバイスを位置特定するように、特に、可動式処置デバイスを、上記処置デバイスで処置される表面に対して、位置特定するように構成された装置に関する。
かかる可動式処置デバイスの例は、例えば、個人用器具であり得る。個人用器具は、例えば、ヘアブラシ、かみそり、グルーマ、歯ブラシなどであり得る。これらの例では、処置される表面は、身体、又は上記身体の少なくとも特定の部分若しくはゾーンであり得る。
可動式処置デバイスの他の例は、例えば、ほうき、モップ、スクラビングブラシなどの家庭用器具に関し得る。これらの例では、処置される表面は、床、又は上記床の少なくとも特定の部分若しくはゾーンであり得る。
図1は、本発明の一実施形態による装置10を示している。更に、可動式処置デバイス11が描写されている。可動式処置デバイス11は、慣性センサ13を備え得る。更に、可動式処置デバイス11は、対象表面12を処置するように構成され得る。
見られ得るように、可動式処置デバイス11は、対象表面12に対して特定の場所、例えば、対象表面12の中に、そこにおいて、その上に、又はその隣に位置し得る。対象表面12自体は、1つ以上のゾーン21、21、21、…、21に分割され得る。可動式処置デバイス11は、上記ゾーン21、21、21、…、21のうちの少なくとも1つに対する場所に移動され得るか、又は位置し得る。
図1に描写される本発明の装置10は、対象表面12に対して可動式処置デバイス11の位置特定を実施するように構成されている。
装置10は、運動パターン認識デバイス14を備え得る。運動パターン認識デバイス14は、可動式処置デバイス11の運動パターンのセット15に含まれる2つ以上の運動パターン15、15、15、…、15間を判別するように構成され得る。換言すれば、可動式処置デバイス11は、例えば、上記可動式処置デバイス11を使用するユーザによって、異なる線形方向及び/又は回転方向に移動され得る。したがって、可動式処置デバイス11の各運動は、それぞれ又は個別の運動パターンを表し得る。運動パターン認識デバイス14は、異なる運動パターンのセット15を含み得る。運動パターンのセット15は、前述のそれぞれ又は個別の運動パターン15、15、15、…、15のうちの2つ以上を含み得る。運動パターン認識デバイス14は、これら2つ以上の運動パターン15、15、15、…、15間を判別するように構成され得る。つまり、運動パターン認識デバイス14は、第1の運動パターン15を第2の運動パターン15から区別するように構成され得る。
可動式処置デバイス11の運動は、可動式処置デバイス11が備える少なくとも1つの慣性センサ13によって検出され得る。慣性センサ13は、慣性に基づくセンサであり、加速度計、ジャイロスコープ、及び磁力計のうちの少なくとも1つを含み得る。慣性センサ13は、線形速度、角速度、線形加速度、角加速度、及び重力のうちの少なくとも1つを表すセンサデータを提供し得る。慣性センサ13は、1つ以上の慣性センサを備える慣性測定ユニットの一部であり得る。
装置10は、慣性センサ13からの少なくとも1つの慣性センサデータ17、17、17、…、17を受信するための、並びに少なくとも1つの慣性センサデータ17、17、17、…、17を運動パターン認識デバイス14に提供するための、インターフェース16を備え得る。少なくとも1つの慣性センサデータ17、17、17、…、17は、可動式処置デバイス11の運動を表す。換言すれば、可動式処置デバイス11が移動すると、慣性センサ13は、この運動を検知し、少なくとも1つの慣性センサデータ17、17、17、…、17を作成する。したがって、少なくとも1つの慣性センサデータ17、17、17、…、17は、移動した処置デバイス11のそれぞれの運動を表す。
本開示によれば、運動パターン認識デバイス14は、ニューラルネットワーク18を備え得る。ニューラルネットワーク18は、深層学習ネットワークであり得る。ニューラルネットワーク18は、少なくとも1つの慣性センサデータ17、17、17、…、17を受信し、かつ運動パターンのセット15に含まれる運動パターン15、15、15、…、15のうちの少なくとも1つに少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングするように構成され得る。このマッピングは、図1において、破線及び実線の矢印19、19、19、19によって示されている。実線で描画された矢印19は、ニューラルネットワーク18が、少なくとも1つの慣性センサデータ17、17、17、…、17を第3の運動パターン15にうまくマッピングしたことを例示的に示し得る。
セット15に含まれる異なる運動パターン15、15、15、…、15は、単に例示目的のために、異なる幾何学的形状(円、矩形、三角形、星形)によって例示的に記号化される。可動式処置デバイス11の運動パターンは、当然ながら、これらの特定の幾何学的形状に限定されない。
本発明の原理によれば、運動パターン15、15、15、…、15は各々、対象表面12の1つ以上の異なるゾーン21、21、21、…、21に関連付けられる。これは、破線及び実線の矢印20、20、20、…、20によって示されている。見られ得るように、第1の運動パターン15は、破線の矢印20によって示されるように、対象表面12の第1のゾーン21に関連付けられ得る。第2の運動パターン15は、破線の矢印20によって示されるように、対象表面12の第2のゾーン21に関連付けられ得る。第3の運動パターン15は、実線で描画された矢印20によって示されるように、対象表面12の第3のゾーン21に関連付けられ得る。第4の運動パターン15は、破線矢印20によって示されるように、対象表面12の第4のゾーン21に関連付けられ得る。
実線で描画された矢印20は、ニューラルネットワーク18によって少なくとも1つの慣性センサデータ17、17、17、…、17をうまくマッピングした第3の運動パターン15が、対象表面12の第3のゾーン21に関連付けられることを例示的に示し得る。
したがって、少なくとも1つの運動パターン15、15、15、…、15との少なくとも1つの慣性センサデータ17、17、17、…、17のマッピングは、対象表面12の1つ以上のゾーン21、21、21、…、21に対する可動式処置デバイス11の位置の推定を示す。本例では、第3の運動パターン15との少なくとも1つの慣性センサデータ17、17、17、…、17のマッピングは、対象表面12の第3のゾーン21に対する可動式処置デバイス11の位置の推定を示す。
換言すれば、ニューラルネットワーク18は、受信した少なくとも1つの慣性センサデータ17、17、17、…、17を第3の運動パターン15にうまくマッピングした。この例によれば、第3の運動パターン15は第3のゾーン21に関連付けられるため、装置10は、可動式処置デバイス11が第3のゾーン21に位置するか、又は少なくとも1つの慣性センサデータ17、17、17、…、17が作成された時点で、可動式処置デバイス11が少なくとも第3のゾーン21に位置していたとの情報を回収する。
したがって、装置10は、可動式処置デバイス11の実行された運動又は運動パターンによって、簡単に対象表面12に対して可動式処置デバイス11を位置特定するように構成され得る。
一実施形態によれば、可動式処置デバイス11は、個人用器具であり得、対象表面12は、可動式処置デバイス11によって処置される身体部分であり得る。
例えば、可動式処置デバイス11は、ユーザの身体の身体部分を剃毛又は毛づくろいするための、かみそり又はグルーマであり得る。この場合、ユーザの身体が対象表面12であり得る。ユーザの身体12は、異なるゾーン、例えば、左頬ゾーン、右頬ゾーン、頤ゾーンなどに分離され得る。かみそり11を用いて既定の運動パターンを実行することによって、装置10は、ユーザの身体に対してかみそり11を位置特定することができる。例えば、かみそり11が左に傾けられた状態で、かみそり11が、左上隅に方向付けられる運動パターンを実行する場合、装置10は、かみそり11を、例えば、左頬ゾーンに位置するように、位置特定することができる。したがって、装置10は、かみそり11を、その実行された運動パターンによって、簡単にユーザの顔に位置特定することができる。
更なる例として、可動式処置デバイス11は、家庭用器具であり得、対象表面12は、床、壁、家具などの表面であり得る。例えば、可動式処置デバイス11は、真空掃除機であり得、対象表面12は、部屋の床であり得る。部屋12は、異なるゾーン、例えば、部屋の左上隅、部屋の右下隅、部屋の中心、部屋の内側に位置するベッドの下などに分離され得る。真空掃除機11を用いて既定の運動パターンを実行することにより、装置10は、部屋の床に対して真空掃除機11を位置特定することができる。例えば、真空掃除機11のランスが地面近くまで下げられた状態で、真空掃除機11が、単に前方及び後方に方向付けられた運動パターンを実行する場合、装置10は、真空掃除機11を、例えば、「ベッドの下」のゾーンに位置するように位置特定することができる。したがって、装置10は、真空掃除機11を、その実行された運動パターンによって、簡単に部屋の内側に位置特定することができる。
更なる実施形態によれば、可動式処置デバイス11は、口腔ケアデバイスであり得、対象表面12は、歯列であってもよく、歯列12は、異なる歯科ゾーン21、21、21、…、21に分離され、少なくとも1つの運動パターン15、15、15、…、15との少なくとも1つの慣性センサデータ17、17、17、…、17のマッピングは、歯列12の1つ以上の歯科ゾーン21、21、21、…、21に対する口腔ケアデバイス11の位置の推定を示す。
口腔ケアデバイスは、歯ブラシ、特に、電動歯ブラシであり得る。口腔ケアデバイスはまた、デンタルフロス、プラーク除去デバイス、超音波デバイス、及びウォータージェットデバイスのうちの少なくとも1つであり得る。
この例によれば、口腔ケアデバイス11を用いて既定の運動パターンを実行することによって、装置10は、歯列に対して口腔ケアデバイス11を位置特定することができる。例えば、口腔ケアデバイス11が左に傾けられた状態で、口腔ケアデバイス11が、単に上方及び下方に方向付けられた運動パターンを実行する場合、装置10は、口腔ケアデバイス11を、例えば、上顎の左上歯科ゾーンに位置するように、位置特定することができる。したがって、装置10は、口腔ケアデバイス11を、その実行された運動パターンによって、簡単にユーザの歯列に対して位置特定することができる。
一実施形態によれば、歯列を、9つの歯科ゾーンに分離することができ、第1の歯科ゾーンは、歯列の上顎及び下顎の左頬側に対応し、第2の歯科ゾーンは、歯列の上顎の左側及び右側の咬合側に対応し、第3のゾーンは、歯列の下顎の左側及び右側の咬合側に対応し、第4の歯科ゾーンは、歯列の上顎及び下顎の左舌側に対応し、第5の歯科ゾーンは、歯列の上顎及び下顎の右頬側に対応し、第6の歯科ゾーンは、歯列の上顎及び下顎の右舌側に対応し、第7の歯科ゾーンは、歯列の上顎及び下顎の唇側に対応し、第8の歯科ゾーンは、歯列の上顎の口蓋側に対応し、第9の歯科ゾーンは、歯列の前部下顎の口腔側に対応する。
更なる実施形態によれば、運動パターンのセット15に追加的に含まれ得る少なくとも1つの既定の運動パターン15NBは、対象表面12の外側のゾーン21NBに関連付けられても、対象表面12に関連しなくてもよく、少なくとも1つの既定の運動パターン15NBとの少なくとも1つの慣性センサデータ17、17、17、…、17のマッピングは、可動式処置デバイス11が、対象表面12の外側にあるか、又は対象表面12に関連しない上記ゾーン21NBに位置することを示す。
換言すれば、対象表面12の外側のゾーン21NBは、対象表面12に直接関連しないゾーンであってもよい。例えば、可動式処置デバイス11が歯ブラシであり得る場合、対象表面12の外側の上記ゾーン21NBは、歯列の外側のゾーンであり得る。したがって、このゾーン21NBは、ユーザが自身の歯をブラッシングしないことを示し得る。そのため、このゾーンは、「NB」と略される、「ブラッシングしない」ゾーンと称されることもある。このゾーン21NBは、対象表面12の少なくとも1つのゾーンであり得るか、又はこのゾーン21NBは、対象表面の1つ以上のゾーン21、21、21、…、21に加えて、追加のゾーンであり得る。しかしながら、対象表面12の外側のこの特定のゾーン21NBは、上に記載される例示的な歯のブラッシングに限定されない。
図2は、上に記載される例を例示するための歯列12を例示している。歯列12は、対象表面であり得る。歯列12は、9つの歯科ゾーン1a~9aに分離され得る。任意選択で、第10のゾーンNBが存在してもよい。この第10のゾーンNBは、歯列12の外側のゾーンである。したがって、この第10のゾーンNBは、図2には明示的に例示されていない。この第10のゾーンNBは歯列12の歯科ゾーンのうちの1つに関連せず、ひいては、歯列12の歯のブラッシングに関係しないため、この第10のゾーンNBは、「ブラッシングしない」ゾーンと称されることもある。
図2に見られ得るように、第1の歯科ゾーン1aは、歯列12の上顎及び下顎の左頬側に対応し得る。第2の歯科ゾーン2aは、歯列12の上顎の左側及び右側の咬合側に対応し得る。第3のゾーン3aは、歯列12の下顎の左側及び右側の咬合側に対応し得る。第4の歯科ゾーン4aは、歯列12の上顎及び下顎の左舌側に対応し得る。第5の歯科ゾーン5aは、歯列12の上顎及び下顎の右頬側に対応し得る。第6の歯科ゾーン6aは、歯列12の上顎及び下顎の右舌側に対応し得る。第7の歯科ゾーン7aは、歯列12の上顎及び下顎の唇側に対応し得る。第8の歯科ゾーン8aは、歯列12の上顎の口蓋側に対応し得る。第9の歯科ゾーン9aは、歯列12の前部下顎の口腔側に対応し得る。
図3は、更なる例を例示するための歯列12を示している。歯列12は、対象表面であり得る。歯列12は、16個の歯科ゾーン1b~16bに分離され得る。任意選択で、第17のゾーンNBが存在してもよい。この第17のゾーンNBは、歯列12の外側のゾーンである。したがって、この第17のゾーンNBは、図3には明示的に例示されていない。この第17のゾーンNBは歯列12の歯科ゾーンのうちの1つに関連せず、ひいては、歯列12の歯のブラッシングに関係しないため、この第17のゾーンNBは、「ブラッシングしない」ゾーンと称されることもある。
図3に見られ得るように、第1の歯科ゾーン1bは、歯列12の上顎の左頬側に対応し得る。第2の歯科ゾーン2bは、歯列12の上顎の左側の咬合側に対応し得る。第3の歯科ゾーン3bは、歯列12の下顎の左側の咬合側に対応し得る。第4の歯科ゾーン4bは、歯列12の上顎及び下顎の左舌側に対応し得る。第5の歯科ゾーン5bは、歯列12の上顎及び下顎の右頬側に対応し得る。第6の歯科ゾーン6bは、歯列12の上顎の右側の咬合側に対応し得る。第7の歯科ゾーン7bは、歯列12の下顎の右側の咬合側に対応し得る。第8の歯科ゾーン8bは、歯列12の上顎の口蓋側に対応し得る。第9の歯科ゾーン9bは、歯列12の上顎の唇側に対応し得る。第10の歯科ゾーン10bは、歯列12の下顎の唇側に対応し得る。第11の歯科ゾーン11bは、歯列12の上顎の口蓋側に対応し得る。第12の歯科ゾーン12bは、歯列12の前部下顎の口腔側に対応し得る。第13の歯科ゾーン13bは、歯列12の下顎の左頬側に対応し得る。第14の歯科ゾーン14bは、歯列12の下顎の左舌側に対応し得る。第15の歯科ゾーン15bは、歯列12の下顎の右頬側に対応し得る。第16の歯科ゾーン16bは、歯列12の下顎の右舌側に対応し得る。
図2及び図3は、非限定的な例としてのみ記載されている。対象表面12はまた、例示的に記載される9つ又は16個の歯科ゾーンよりも多い又は少ない歯科ゾーンを備えることができる。更に、対象表面12の外側の第10/第17の歯科ゾーンNBは、任意選択である。歯列12の1つ以上の歯科ゾーンの正確な分布は、上に記載される例とは異なる場合がある。
本発明のいくつかの利点のうちの1つは、装置10が対象表面12に対する可動式処置デバイスの位置特定に関して自己学習するという事実である。装置10は、例えば、深層学習ネットワークを活用することによって人工知能を使用することができる。したがって、対象表面12に対する可動式処置デバイス11の位置特定を実施するための装置10は、その性能を、ニューラルネットワーク18を使用することによって、経時的に増強させることができる。
一実施形態によれば、ニューラルネットワーク18は、回帰型ニューラルネットワーク(Recurrent Neural Network、RNN)であり得る。例えば、ニューラルネットワークは、長短期メモリ(Long Short Term Memory、LSTM)ネットワーク又はゲート付き回帰型ユニット(Gated Recurrent Unit、GRU)ネットワークであり得る。
RNNは、いわゆる勾配消失問題という欠点を有することがあり、勾配は、より多くの数の層で急速に消失する。勾配消失は、より緩徐な訓練速度をもたらし得る。したがって、LSTMネットワーク及び/又はGRUネットワークを使用して、勾配消失問題を回避することができる。
LSTMネットワークは、正規ネットワークユニットに加えて、LSTMブロックを含む人工的なニューラルネットワークである。LSTMブロックは、入力が値を覚えるためにいつ十分に大きくなるか、いつ値を覚え続けるべきか、又はいつ値を忘却するべきか、及びいつ値を出力すべきかを決定する、ゲートを含む。
図4は、その最も一般的な形態のRNNの例を示している。ニューラルユニット40には、特定の時間インスタントtで入力41を供給することができる。入力41は、単一の値であっても、2つ以上の値を含むベクトルであってもよい。特定の時間インスタントtにおける入力41を、Xで記号化することもできる。
ニューラルユニット40はまた、任意選択で、更なる入力42を含み得る。この更なる入力42は、以前の時間インスタントt-1において、ニューラルユニット(ここでは描写せず)から提供され得る。
ニューラルユニット40は、数学的動作を提供し得る、少なくとも1つのゲート43を備え得る。この例では、ゲート43は、単一のtanhゲートである。
ニューラルユニット40は、少なくとも1つの出力46を含み得る。出力46は、入力41、及び任意選択で更なる入力42を供給されたtanhゲート43の動作の結果を含み得る。出力46は、後に説明される隠れ状態45をもたらし得る。
ニューラルユニット40は、任意選択で、入力41、及び任意選択で更なる入力42を供給されたtanhゲート43の動作の上述の出力結果から分岐する、更なる出力分岐46を含み得る。
図4では、各描写された線は、1つのノードの出力から他のノードの入力まで、ベクトル全体を搬送し得る。例えば、47において線が合流することは、連結を示しているが、例えば、48において線がフォーク状になることは、そのコンテンツがコピーされ、コピーが異なる位置に進むことを示している。これはまた、以下の図を参照して以下に記載される他のニューラルネットワークについても当てはまる。
図5は、GRUネットワークの例を示している。GRUネットワークは、ニューラルユニット50を備える。上に記載されるRNNニューラルユニット40に加えて、GRUニューラルユニット50は、2つの更なるゲート、つまり、第1のシグモイドゲート53と、第2のシグモイドゲート54と、を備え得る。更に、GRUニューラルユニット50は、例えば、ベクトル加算58のような点別動作55、56、57、58、59を含み得る。
図6Aは、本発明による装置10内のニューラルネットワーク18として活用され得るLSTMネットワークの例を示している。LSTMは、LSTMネットワークの場合には、LSTMブロックとも称され得る、ニューラルユニット60を含み得る。上に記載されるニューラルユニット40、50に加えて、描写されるLSTMネットワークのニューラルユニット60は、ニューラルユニット60の頂部を通って走る水平線61であるセル状態を含み得る。ニューラルユニット60は、セル状態入力62を受信することができ、セル状態出力66を作成することができる。
ニューラルユニット60は、4つのゲート43、53、54、63を更に備え得る。例えば、上に記載されるGRUネットワークと比較して、更なるシグモイドゲート63を備え得る。情報は、これらのゲート43、53、54、63によってセル状態(水平線61)まで除去又は追加され得る。
図6Bは、ニューラルユニットの(時間インスタントtに対する)以前の状態及び後続の状態が描写された更なる例を示している。特に、時間インスタントtにおけるニューラルユニット60が描写されている。更に、以前の時間インスタントt-1における更なるニューラルユニット60t-1が描写されている。なお更に、後続の時間インスタントt+1における更なるニューラルユニット60t+1が描写されている。描写されるニューラルユニット60t-1、60、60t+1は、同じニューラルユニットであるが、異なる時点、つまり、時間インスタントtにおける、以前の時間インスタントt-1及び後続の時間インスタントt+1を表すことができる。
上に記載される入力41はまた、文字Xによって記号化されてもよく、慣性センサ13からの少なくとも1つのセンサデータ17、17、17、…、17を含んでもよい。入力Xは、時間依存性であってもよく、したがって、X=X(t)である。特に、描写される入力Xは、考慮される時間インスタントtの間に取得されたセンサデータ17を含むことができ、描写される入力Xt-1は、以前の時間インスタントt-1の間に取得されたセンサデータ17を含むことができ、描写される入力Xt+1は、後続の時間インスタントt+1の間に取得されたセンサデータ17を含むことができる。
図6Bに更に見られ得るように、ニューラルユニット60t-1、60、60t+1は、各描写される時間インスタントt-1、t、t+1において、例えば、予測によって、それぞれの出力値yt-1、y、yt+1を提供することができる。出力値y(t)は、単一の値であっても、1つ以上のベクトル要素を含むベクトルであってもよい。
出力値y(t)は、以下のように計算され得る。
=ソフトマックス(Why・h+b)
出力値y(t)は、例えば、図7に関してより詳細に説明されるように、確率値を含み得る。例えば、出力値y(t)は、1つ以上のベクトル要素を含むベクトルであり得、各ベクトル要素は、運動パターン15、15、15、…、15のうちの1つを表し得るか、又はより詳細には、各ベクトル要素は、入力X(t)、すなわち、慣性センサデータ17、17、17、…、17が運動パターン15、15、15、…、15のうちの1つに対応し得る確率を示す、確率値を表し得る。
更に、描写されるニューラルユニット60t-1、60、60t+1は、同じ層、つまり、第1の層に配置され得る。本発明のいくつかの例は、1つ以上の更なる層を含み得、各層は、それ自体のニューラルユニット(複数可)を含み得る。かかる例は、例えば、図7を参照して後で記載され得る。しかしながら、少なくとも第1の層を有する例及び実施形態は、図6Bを更に参照して記載される。
この実施形態によれば、ニューラルネットワーク18は、第1の層を備えることができ、上記第1の層は、ニューラルユニット60を備え、第1の時間インスタントtにおいて、少なくとも1つの慣性センサデータX 17は、第1の層のニューラルユニット60に入力される。後続の第2の時間インスタントt+1において、第2の慣性センサデータXt+1 17、及び以前の第1の時間インスタントtのニューラルユニット60の少なくとも1つの出力h 46は、第1の層のニューラルユニット60t+1に入力される。
図7は、ニューラルネットワーク18が、少なくとも2つの層、つまり、第1の層71及び第2の層72を備える、更なる例を示している。第1の層71は、少なくとも第1のニューラルユニット60を備え、第2の層72は、少なくとも第2のニューラルユニット70を備える。
見られ得るように、異なる時間インスタンスt-1、t、t+1の間に取得されたセンサデータ17、17、17は、入力Xt-1、X、Xt+1として、第1の層71のそれぞれのニューラルユニット60t-1、60、60t+1に供給され得る。
第1の層71の各ニューラルユニット60t-1、60、60t+1の出力46t-1、46、46t+1は、入力として、第2の層72のそれぞれのニューラルユニット70t-1、70、70t+1に供給され得る。
第1の層71のニューラルユニット60t-1、60、60t+1及び第2の層72のニューラルユニット70t-1、70、70t+1は、同一であり得る。代替的に、第1の層71のニューラルユニット60t-1、60、60t+1及び第2の層72のニューラルユニット70t-1、70、70t+1の内部構造は、互いに異なり得る。
図7に示される実施形態によれば、ニューラルネットワーク18は、少なくとも第1の層71と、第2の層72と、を備えることができ、第1の層71は、第1のニューラルユニット60を備えることができ、第2の層72は、第2のニューラルユニット70を備えることができ、第1の時間インスタントtにおいて、少なくとも1つの慣性センサデータX 17が、第1の層71の第1のニューラルユニット60に入力され、第1のニューラルユニット60の出力h 46が、第2の層72のニューラルユニット70に入力される。
これまで、垂直方向、すなわち、底部の第1の層71から頂部の第2の層72への信号経路を記載してきた。しかしながら、図7の実施形態では、水平方向の信号経路も示されている。
見られ得るように、第1の時間インスタントtにおける第1のニューラルユニット60のセル状態出力C 66、及び/又は第1の時間インスタントtにおける第1のニューラルユニット60の出力h 46は、入力として、再び第1のニューラルユニット60に、つまり、後続の時間インスタントt+1において第1のニューラルユニット60t+1に供給され得る。既に上述したように、ニューラルユニット60自体は、同じニューラルユニットであり得るが、異なる時間インスタンスt-1、t、t+1におけるニューラルユニット60の状態の例示を容易にするために、複数の連結されたニューラルユニット60t-1、60、60t+1としてのみ図に描写され得る。換言すれば、水平信号経路は、異なる後続の時間インスタンスt-1、t、t+1におけるニューラルユニット60の信号経路を説明し得る。同様に、第2の層72及び任意の更なる層についても当てはまる。
したがって、描写される後続の時間インスタンスt-1、t、t+1は、ニューラルネットワーク18が、取得されたセンサデータ17、17、17、…、17をサンプリングして処理し得る間の長さ77を表し得る。したがって、上記長さ77は、ランレングス、サンプル長さ、又はサンプル期間と称されることがある。例えば、サンプル長さ77は、1秒に対応し得、時間インスタンスt-1、t、t+1は、上記1秒の端数であり得る。例えば、サンプル期間77は、50個のサンプルの長さ、すなわち、50個の時間インスタンスを有し得る。ニューラルネットワーク18は、サンプル期間中に1回作動され得るか、又はニューラルネットワーク18は、2つ以上のサンプル期間にわたって恒久的に作動され得る。
したがって、更なる実施形態によれば、ニューラルネットワーク18は、少なくとも第1の層71と、第2の層72と、を備えることができ、第1の層71は、第1のニューラルユニット60を備えることができ、第2の層72は、第2のニューラルユニット70を備えることができ、第1の時間インスタントtにおいて、少なくとも1つの慣性センサデータX 17が、第1の層71の第1のニューラルユニット60に入力され得、第1のニューラルユニット60の少なくとも1つの出力h 46が、第2の層72のニューラルユニット70に入力され得る。これまでのところ、上に記載されるものと同じであってもよい。しかしながら、追加的に、後続の第2の時間インスタントt+1における第2の慣性センサデータXt+1 17、及び第1の時間インスタントtにおける第1のニューラルユニット60の少なくとも1つの出力h 46は、後続の第2の時間インスタントt+1において第1のニューラルユニット60t+1に入力される。
上述のように、いくつかの数学的動作は、例えば、ゲート43、53、54、63のニューラルネットワーク18によって実行され得る。図7に示される例では、以下の数学的動作を異なる段階で実行することができ、
Figure 0007402165000001
式中、
・i(t)は、入力ゲートの活性化ベクトルであり、
・f(t)は、忘却ゲートの活性化ベクトルであり、
・o(t)は、出力ゲートの活性化ベクトルであり、
・c(t)は、セル状態ベクトルであり、
・h(t)は、LSTMブロック又はニューラルユニット60、70の出力ベクトルである。
この例によれば、入力センサデータX 17は、要素ベクトルX ∈ Rであり得る。例えば、入力テンソルX ∈ R、[A、A、A、G、G、Gであり得る。
更に、重み付けW(t)及びバイアス値b(t)が図7に描写されており、この例では、
・重み付けWhy ∈ R12×256
・バイアスb ∈ R12
更に、出力ベクトルy(t)は、以下のように計算され得る。
=ソフトマックス(Why・h+b)
描写される隠れ状態h(t)はまた、要素ベクトル、例えば、256個の要素h ∈ R256を含む要素ベクトルであり得る。
更に、描写される隠れ状態C(t)はまた、要素ベクトル、例えば、256個の要素C ∈ R256を含む要素ベクトルであり得る。
上述のように、入力慣性センサデータX 17は、6つのベクトル要素、例えば、入力テンソルX ∈ R、[A、A、A、G、G、Gを含む、要素ベクトルX ∈ Rであり得る。これらのベクトル要素[A、A、A、G、G、Gは、慣性センサデータ部分と称されることもある。
一実施形態によれば、少なくとも1つの慣性センサデータ17は、x、y、及びz方向の線形速度と、x、y、及びz軸に対する角速度と、x、y、及びz方向の線形加速度と、x、y、及びz軸に対する角加速度と、を含む群の少なくとも3つの慣性センサデータ部分を含み得る。
換言すれば、慣性センサ13は、1つ以上の時間インスタンスt-1、t、t+1において慣性センサデータ17、17、17、…、17を提供することができ、慣性センサデータ17、17、17、…、17は、1つの観測された時間インスタンスt-1、t、t+1における可動式処置デバイス11の現在の向き及び運動に依存し得る。慣性センサデータ17、17、17、…、17の各々は、少なくとも3つ、又は他の例では、少なくとも6つのベクトル要素を含むベクトルであり得、上記ベクトル要素は、上述の慣性センサデータ部分を表し、上記慣性センサデータ部分のうちの少なくとも1つは、ゼロであり得る。
したがって、慣性センサデータ17、17、17、…、17(ベクトル)、及び特に、センサデータ部分(ベクトル要素)は、1つ以上の後続の時間インスタンスt-1、t、t+1を含むサンプル期間77の間にサンプリングされた、可動式処置デバイス11の現在の運動パターンを表すことができる。
図7に描写される一実施形態によれば、少なくとも1つの慣性センサデータ17(ベクトル)は、1つ以上の慣性センサデータ部分(ベクトル要素)を含み得、第1の時間インスタントtにおけるニューラルユニット60への入力は、上記第1の時間インスタントtの間に回収された1つ以上の慣性センサデータ部分を含む、それぞれの慣性センサデータ17である。少なくとも1つの慣性センサデータ17、17、17、…、17は、サンプル時間77の間にサンプリングされ得る。
ニューラルネットワーク18は、最初に図1を参照して記載されたように、運動パターンのセット15に含まれる少なくとも1つの運動パターン15、15、15、…、15に、サンプル時間77の間にサンプリングされた少なくとも1つのサンプリングされた慣性センサデータ17、17、17、…、17をマッピングすることができる。マッピング後、選択された1つの運動パターンは、マッピングされた運動パターンと称されることがある。
換言すれば、ニューラルネットワーク18は、慣性センサデータ17、17、17、…、17を入力x(t)として受信することができ、1つ以上の確率値を出力y(t)として出力することができる。上述のように、図7に示される例では、出力値y(t)はまた、例えば、少なくとも3つ、又は少なくとも6つ、又は少なくとも12個のベクトル要素を含む、要素ベクトルであり得る。出力ベクトルy(t)の各ベクトル要素は、クラス又はゾーン21、21、21、…、21に関連付けられ得る運動パターン15、15、15、…、15の確率値を表し得る。いくつかの実施形態では、出力値y(t)は、例えば、少なくとも2つ~必要な数のクラス又はゾーン、例えば、9つのゾーン、12個のゾーン、又は16個のゾーンを含む、要素ベクトルであり得る。
したがって、出力ベクトルy(t)は、対象表面12の異なるゾーン21、21、21、…、21を表し得る。例えば、対象表面12が12個のゾーン(例えば、11個の歯科ゾーン及びブラッシングしない第12のゾーン「NB」)を含み得る場合、要素出力ベクトルy(t)は、図7の例に示されるような12個のベクトル要素を含み得、y(t) ∈ R12である。したがって、各ベクトル要素は、対象表面12の異なるゾーン21、21、21、…、21のうちの1つを表し得る。
前述のように、ベクトル要素は、確率値を表し得る。これらの確率値は、対象表面12の異なるゾーン21、21、21、…、21の各々に対する確率値を表し得る。換言すれば、ニューラルネットワーク18は、少なくとも1つの慣性センサデータ17、17、17、…、17を受信し、少なくとも1つの運動パターン15、15、15、…、15に少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングすることができ、上記運動パターン15、15、15、…、15は各々、対象表面12の1つ以上の異なるゾーン21、21、21、…、21に関連付けられ得るため、確率値は、取得された少なくとも1つの慣性センサデータ17、17、17、…、17が対象表面12の異なるゾーン21、21、21、…、21のうちの1つに対応し得る確率を示すことができる。
これは、運動パターン15、15、15、…、15のうちの少なくとも1つに少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングすることと呼ばれる。
各運動パターン15、15、15、…、15は、対象表面12の1つ以上の異なるゾーン21、21、21、…、21に関連付けられ得るため、少なくとも1つの運動パターン15、15、15、…、15との少なくとも1つの慣性センサデータ17、17、17、…、17のマッピングは、対象表面12の1つ以上のゾーン21、21、21、…、21に対する可動式処置デバイス11の位置の推定を示す。本発明の位置検出は、例えば、GPSからの絶対値の地理データとは対照的に、上述の確率値に基づき得るため、処置デバイス11の位置を推定することができる。
換言すれば、装置10は、ニューラルネットワーク18から、簡単にセンサデータ17、17、17、…、17を受信し、対象表面12の1つ以上のゾーン21、21、21、…、21に関連付けられた運動パターン15、15、15、…、15に上記センサデータ17、17、17、…、17をマッピングすることによって、対象表面12のどのゾーン21、21、21、…、21に可動式処置デバイス11が位置するかの推定を導き出すことができる。
したがって、一実施形態によれば、ニューラルネットワーク18の出力y(t)は、対象表面12の1つ以上のゾーン21、21、21、…、21に対する可動式処置デバイス11の位置の推定のための1つ以上の確率値を含み得る。
なお更なる実施形態によれば、運動パターン認識デバイス14は、少なくとも1つの慣性センサデータ17、17、17、…、17から、可動式処置デバイス11と対象表面12との相互運動を決定し、かつ可動式処置デバイス11の決定された運動から、対象表面12の決定された運動を除去するように構成され得る。
例えば、可動式処置デバイス11は、歯ブラシであり得、対象表面12は、ユーザの歯列であり得る。ユーザは、自身の歯をブラッシングしながら自身の頭部を旋回することがある。この場合、慣性センサ13は、歯ブラシが頭部と一緒に移動されるため、ユーザの頭部と歯ブラシとの相互運動を検知することになる。これは、誤った運動検出、したがって、誤ったマッピング、及び最終的にマッピングに基づいた誤った位置特定につながり得る。
しかしながら、上の実施形態によれば、ユーザの頭部(対象表面)12の検知又は決定された運動は、頭部と歯ブラシとの検知された相互運動から除去され得る。結果として、歯ブラシ(処置デバイス)11の所望の運動のみが残る。
図8は、対象表面12に対する可動式処置デバイス11の位置特定を実施するための本発明の方法の一例のブロック図を示しており、可動式処置デバイス11は、慣性センサ13を備え、かつ可動式処置デバイス11は、対象表面12を処置するように構成されている。
ブロック801において、本方法は、可動式処置デバイス11の運動パターンのセット15に含まれる2つ以上の運動パターン15、15、15、…、15間を判別する工程を含む。
ブロック802では、本方法は、慣性センサ13からの少なくとも1つの慣性センサデータ17、17、17、…、17を受信する工程を含み、少なくとも1つの慣性センサデータ17、17、17、…、17は、可動式処置デバイス11の運動を表す。
ブロック803では、本方法は、ニューラルネットワーク18によって、少なくとも1つの慣性センサデータ17、17、17、…、17を受信して処理し、かつ運動パターンのセット15に含まれる少なくとも1つの運動パターン15、15、15、…、15に少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングする工程を含み、運動パターンのセット15に含まれる上記運動パターン15、15、15、…、15は各々、対象表面12の1つ以上の異なるゾーン21、21、21、…、21に関連付けられ、それにより、少なくとも1つの運動パターン15、15、15、…、15との少なくとも1つの慣性センサデータ17、17、17、…、17のマッピングは、対象表面12の1つ以上のゾーン21、21、21、…、21に対する可動式処置デバイス11の位置の推定を示す。
図9は、本発明の第2の態様による装置100を示している。第2の態様の装置100は、第1の態様の上に記載される装置10と同様であり得る。更に、第1の態様の装置10に関して上に記載される特徴の全ては、以下に記載される第2の態様の装置100と組み合わせ可能であり、逆もまた同様である。
第2の態様の装置100は、運動パターン15、15、15、…、15が、対象表面12の異なるゾーン21、21、21、…、21の代わりに、異なるクラス101、102、103、104の1つ以上のクラスメンバ101A、101B、…、104A、104Bにマッピングされ得るという点で、第1の態様の装置10(図1参照)とは異なり得る。
したがって、第2の態様の装置100は、慣性センサ13を備える可動式個人用器具11の運動を分類するように構成されている。装置100は、可動式個人用器具11の運動パターンのセット15に含まれる2つ以上の運動パターン15、15、15、…、15間を判別するように構成された、運動パターン認識デバイス14を備える。
更に、装置100は、慣性センサ13からの少なくとも1つの慣性センサデータ17、17、17、…、17を運動パターン認識デバイス14に提供するためのインターフェース16を備え、少なくとも1つの慣性センサデータ17、17、17、…、17は、可動式個人用器具11の運動を表す。
本発明の第2の態様によれば、運動パターン認識デバイス14は、少なくとも1つの慣性センサデータ17、17、17、…、17を受信し、かつ運動パターンのセット15に含まれる少なくとも1つの運動パターン15、15、15、…、15に少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングするように構成された、ニューラルネットワーク18を備え、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、1つ以上のクラス101、102、103、104の少なくとも1つのクラスメンバ101A、101B、102A、102B、103A、103B、104A、104Bに関連付けられ、それにより、少なくとも1つのクラスメンバ101A、101B、…、104A、104Bが、可動式個人用器具11の運動に基づいて選択される。
換言すれば、ニューラルネットワーク18は、例えば、図1~図8を参照して上で先に記載されるような方法で、少なくとも1つの運動パターン15、15、15、…、15に少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングすることができる。マッピングされた運動パターン15、15、15、…、15は各々、1つ以上のクラス101、102、103、104の少なくとも1つのクラスメンバ101A、101B、…、104A、104Bに関連付けられ得るため、少なくとも1つのクラスメンバ101A、101B、…、104A、104Bは、可動式個人用器具11の少なくとも1つのマッピングされた運動パターン15、15、15、…、15に基づいて、すなわち、可動式個人用器具11の運動に基づいて選択され得る。
図9の非限定的な例は、4つのクラス101、102、103、104を示しており、各クラスは、2つのクラスメンバ101A、101B、…、nA、nBを含む。しかしながら、少なくとも1つのクラスが存在してもよく、各クラスは、少なくとも2つのクラスメンバを含んでもよい。また、3つ以上のクラス、又は更には例示的に描写される4つのクラスよりも多くが存在してもよい。
図9の例に見られ得るように、第1のマッピングされた運動パターン15は、第1のクラス101のクラスメンバ101Aに関連付けられ得る。第nのマッピングされた運動パターン15は、第4のクラス104のクラスメンバnBに関連付けられ得る。第2のマッピングされた運動パターン15は、異なるクラスの2つのクラスメンバ、例えば、第1のクラス101のクラスメンバ101B及び第2のクラス102のクラスメンバ102Aに関連付けられ得る。第3のマッピングされた運動パターン15は、同じクラスの2つのクラスメンバ、例えば、第3のクラスの2つのクラスメンバ103A、103Bに関連付けられ得る。
概して、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、1つ以上のクラス101、102、103、104の少なくとも1つのクラスメンバ101A、101B、102A、102B、103A、103B、104A、104Bに関連付けられ得る。
以下では、クラス及びクラスメンバのいくつかの例が記載される。
一実施形態によれば、1つ以上のクラス101、102、103、104のうちの少なくとも1つのクラス101は、少なくとも1つのクラスメンバ101Aを含み得、上記1つのクラス101は、ユーザ群を表すことができ、上記少なくとも1つのクラスメンバ101Aは、上記ユーザ群の少なくとも1人のユーザを表すことができ、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、可動式個人用器具11の運動に基づいて、上記少なくとも1人のユーザを識別するための少なくとも1つのクラスメンバ101Aに関連付けられ得る。
換言すれば、クラス101、102、103、104のうちの1つは、ユーザ群、すなわち、可動式個人用器具11を使用するユーザの群を表し得る。それぞれのクラスは、上記ユーザ群の1人の特定のユーザを表し得る少なくとも1つのクラスメンバを含み得る。例えば、第1のクラス101は、ユーザ群を表すことができ、上記ユーザ群は、単一の家庭であり得る。この例では、ユーザ群101は、1つのクラスメンバ101A、すなわち、1人の人物のみを含み得る。本発明の装置100は、可動式個人用器具11の運動に基づいて、簡単に上記少なくとも1人のユーザ101Aを識別するように構成され得る。したがって、本発明の装置100は、後でいくつかの例で説明されるように、上記1人の識別されたユーザ101Aとの任意の行為又は相互作用を個人化し得る。
更なる実施形態によれば、1つ以上のクラス101、102、103、104のうちの少なくとも1つのクラス101は、少なくとも2つのクラスメンバ101A、101Bを含み得、上記1つのクラス101は、ユーザ群を表すことができ、上記少なくとも2つのクラスメンバ101A、101Bは、上記ユーザ群の少なくとも2人のユーザを表すことができ、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、可動式個人用器具11の運動に基づいて、ユーザ群内の少なくとも1人のユーザを識別するための上記少なくとも2つのクラスメンバ101A、101Bのうちの1つに関連付けられ得る。
換言すれば、クラス101、102、103、104のうちの1つは、ユーザ群、すなわち、可動式個人用器具11を使用するユーザの群を表し得る。それぞれのクラスは、上記ユーザ群の1人の特定のユーザを表し得る少なくとも1つのクラスメンバを含み得る。例えば、第1のクラス101は、ユーザ群を表すことができ、上記ユーザ群は、ある家族であり得る。上記クラス101のクラス101A、101Bは、家族メンバを表し得る。例えば、ユーザ群101は、1つ以上の家族メンバを含むことができ、例えば、第1のクラスメンバ101Aは、家族の母親を表すことができ、第2のクラスメンバ101Bは、家族の子供を表すことができる。
本発明の装置100は、可動式個人用器具11の運動に基づいて、簡単に少なくとも1人のユーザを識別するように構成され得る。これは、全てのユーザが可動式個人用器具11を異なる又は個別の方法で使用することができる場合に達成され得る。
例えば、一実施形態では、可動式個人用器具11は、歯ブラシ、特に、電動歯ブラシなどの可動式口腔ケアデバイスであり得る。可動式口腔ケアデバイスはまた、デンタルフロス、プラーク除去デバイス、超音波デバイス、及びウォータージェットデバイスのうちの少なくとも1つであり得る。
上の例を取り上げると、母親101Aは、歯ブラシ11を子供101Bとは異なる方法で使用し得る。歯ブラシ11の慣性センサ13は、その慣性センサデータ17、17、17、…、17を、ニューラルネットワーク18を含む運動パターン認識デバイス14に提供することができる。ニューラルネットワーク18は、少なくとも1つの運動パターン15、15、15、…、15に慣性センサデータ17、17、17、…、17をマッピングすることができる。
例えば、図9に示されるように、母親は、第1の運動パターン15に対応するブラッシングスタイルを有し得る。この運動パターン15は、母親を表すクラスメンバ101Aに関連付けられ得る。代わりに、子供は、母親とは異なるブラッシングスタイル、例えば、第2の運動パターン15に対応するブラッシングスタイルを有し得る。この運動パターン15は、子供を表すクラスメンバ101Bに関連付けられ得る。
したがって、本発明の装置100は、可動式個人用器具11の運動に基づいて、簡単にユーザ群のユーザを識別することができる。上述のように、本発明の装置100は、識別されたユーザとの任意の行為又は相互作用を個人化することができる。
一実施形態によれば、運動パターン認識デバイス14は、上記少なくとも1人のユーザ101Aを識別する工程に基づいて、上記識別された少なくとも1人のユーザ101Aによって特徴がある、可動式個人用器具11の2つ以上のユーザ特有の運動パターン115、115、115、…、115を含むユーザ特有の運動パターンのプリセット115を選択するように構成され得る。
かかる例は図10に示されている。この実施形態はまた、2工程処理と称されることもある。第1の工程121で、ユーザが識別される。識別されたユーザは、ニューラルネットワーク18によって個別に訓練された、ユーザ特有の運動パターン115のプリセットを有し得る。第2の工程122では、ニューラルネットワーク18は、ユーザ特有の運動パターンのプリセット115からユーザ特有の運動パターン115、115、115、…、115を使用する。したがって、本発明の装置100は、識別されたユーザごとに個別に行動及び相互作用し得る。
図10では、ニューラルネットワーク18が、少なくとも1つの慣性センサデータ17、17、17、…、17を受信し、かつそれを、運動パターンのセット15に含まれる運動パターン15、15、15、…、15のうちの少なくとも1つにマッピングする、第1の工程121が示されている。少なくとも1つのマッピングされた運動パターン、例えば、第nの運動パターン15は、第1のクラス101のクラスメンバ101Bに関連付けられ得る。この手順は、図9を参照して上に記載される手順に対応し得る。
クラス101は、ユーザ群であり得、クラスメンバ101Bは、上記ユーザ群のユーザであり得る。上の例を取り上げると、識別されたユーザ101Bは、家族の子供であり得る。装置100は、ユーザ特有の運動パターンを記憶している場合がある。つまり、識別されたユーザ、すなわち、子供101Bは、装置100に記憶された運動パターン115、115、115、…、115の、ユーザ独自の個別のユーザ特有のプリセット115を有し得る。第1の工程121での識別に続く任意の更なる行為のために、運動パターン認識デバイス14、特に、ニューラルネットワーク18は、以前に識別されたユーザに属する、これらのユーザ特有の運動パターン115、115、115、…、115を使用し得る。
したがって、ニューラルネットワーク18は、上記少なくとも1人のユーザ101Bを識別する工程121の後に、上記識別された少なくとも1人のユーザ101Bによって特徴がある、可動式個人用器具11の2つ以上のユーザ特有の運動パターン115、115、115、…、115を含む少なくとも1つのユーザ特有の運動パターンのプリセット115を選択し得る。
したがって、ユーザを識別する第1の工程121に続く第2の工程122では、ニューラルネットワーク18は、運動パターン15、15、15、…、15のセット15の代わりに、ユーザ特有の運動パターン115、115、115、…、115のユーザ特有のプリセット115を使用し得る。つまり、運動パターン15、15、15、…、15のセット15を活用することによって装置10、100により実行され得る、本明細書に記載される行為の全てを、運動パターン15、15、15、…、15のセット15の代わりに、運動パターン115、115、115、…、115のユーザ特有のプリセット115を活用することによって装置10、100により、識別されたユーザごとに個別化又は個人化して実行することもできる。
したがって、一実施形態によれば、ニューラルネットワーク18は、上記少なくとも1人のユーザ101Bを識別する第1の工程121の後に、運動パターンのセット15を、選択されたユーザ特有の運動パターンのプリセット115に置き換え、かつ運動パターンのセット15に含まれる2つ以上の運動パターン15、15、15、…、15を、ユーザ特有の運動パターンのプリセット115に含まれる2つ以上のユーザ特有の運動パターン115、115、115、…、115に置き換えるように構成され得る。
追加的又は代替的に、装置100は、少なくとも第2のニューラルネットワークを備え得る。図11は、かかる例を示している。
図11の装置100の例は、図10に示される例の装置100に実質的に対応し得る。図11の装置は、図11の装置が第2のニューラルネットワーク18を備え得る点で、図10の装置とは異なる。
図11に見られ得るように、第1の工程121では、第1のニューラルネットワーク18は、上に記載される行為、例えば、ユーザ群101のユーザ101Bを識別することを実行し得る。しかしながら、第2の工程122では、慣性センサデータ17、17、17、…、17は、上記第2のニューラルネットワーク18に供給され得る。第2のニューラルネットワーク18は、上に記載されるように、運動パターン115、115、115、…、115のユーザ特有のプリセット115を使用し得る。
換言すれば、上記少なくとも1人のユーザ101Bを識別する第1の工程121の後に、運動パターン認識デバイス14は、第2のニューラルネットワーク18を使用することができ、第2のニューラルネットワーク18は、少なくとも1つの慣性センサデータ17、17、17、…、17を受信し、かつ運動パターンのユーザ特有のプリセット115に含まれる少なくとも1つのユーザ特有の運動パターン115、115、115、…、115に少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングするように構成され得、上記ユーザ特有の運動パターン115、115、115、…、115は各々、1つ以上のクラス101、…、104の少なくとも1つのクラスメンバ102A、102Bに関連付けられ、それにより、少なくとも1つのクラスメンバ102A、102Bは、可動式個人用器具11の運動に基づいて選択される。換言すれば、ニューラルネットワーク18は、ユーザが特別に訓練したニューラルネットワークであり得る。
したがって、運動パターン認識デバイス14は、少なくとも1つの慣性センサデータ17、17、17、…、17によって個人用器具デバイス11の運動をユーザが特別に分類するために、ユーザ特有の運動パターン115、115、115、…、115のユーザ特有のプリセット115を使用するように構成され得る。
図10及び図11の例に示されるように、装置100は、第2の工程122で目的を分類するための少なくとも1つのクラス102を含み得る。しかしながら、装置100は、図9の例に示されるように、第2の工程122において、2つ以上のクラスを含み得る。
上記第2の工程122では、例えば、第1の工程121で特定のユーザが識別された後、異なる行為を個人用器具11によって実施することができる。例えば、個人用器具11は、その動作モードを、識別されたユーザに基づいて変更することができる。例えば、個人用器具11は、電気的に駆動され得、かつモータを備えることができ、個人用器具11は、識別されたユーザに基づいて、周波数、振幅、又は脈動などの1つ以上のモータ特有の特徴を変更することができる。追加的又は代替的に、個人用器具11は、ユーザと通信するか、又はユーザにフィードバックを提供するための1つ以上の要素、例えば、光、例えば、LEDなどの視覚要素、又は振動モータなどの触覚要素を備え得る。例えば、個人用器具11は、通信するための上記要素の動作モードを変更することによって、例えば、LED光を異なる色に変更することによって、又は識別されたユーザに基づいて、振動モータによる異なるパルスフィードバックを提供することによって、識別されたユーザに基づいてユーザエクスペリエンスを変更することができる。
ユーザ群の特定のユーザ、例えば、家族の家族メンバを識別することに加えて又は代替的に、装置100は、特定のユーザタイプを識別するように構成され得る。例えば、個人用器具11が歯ブラシである場合、一部の人々は自身の歯のブラッシングを自身の前歯又は切歯で開始するが、一部の他の人々は自身の歯のブラッシングを自身の後歯又は大臼歯で開始し得る。更なる例では、個人用器具がかみそりである場合、一部の人々は、ヒゲの生える向きに沿って剃る場合があり、一部の他の人々は、ヒゲの生える向きに逆らって剃る場合がある。要約すると、ユーザタイプは、特定の方法で個人用器具11を使用するユーザのタイプであり得る。ユーザタイプの群にクラスタ化することができる2人以上のユーザが存在し得る。先に説明したユーザ識別の例は、代わりに、各ユーザを個別に識別する。
ユーザタイプを識別するための一実施形態によれば、1つ以上のクラス101、102、103、104のうちの少なくとも1つのクラス104は、少なくとも2つのクラスメンバnA、nBを含むことができ、上記1つのクラス104は、可動式個人用器具11のユーザタイプを表すことができ、第1のクラスメンバnAは、可動式個人用器具11の第1のユーザタイプを表すことができ、第2のクラスメンバnBは、可動式個人用器具11の第2のユーザタイプを表すことができ、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、可動式個人用器具11の運動に基づいて、可動式個人用器具11のユーザタイプを識別するための第1又は第2のクラスメンバnA、nBのいずれかに関連付けられ得る。
更なる実施形態によれば、運動パターン認識デバイス14は、上記ユーザタイプを識別する工程の後に、上記識別されたユーザタイプによって特徴がある、可動式個人用器具11の2つ以上のユーザタイプ特有の運動パターン115、115、115、…、115を含むユーザタイプ特有の運動パターンのプリセット115を選択するように構成され得、ニューラルネットワーク18は、上記ユーザタイプを識別する工程の後に、運動パターンのセット15を、選択されたユーザタイプ特有の運動パターンのプリセット115に置き換え、かつ運動パターンのセット15に含まれる2つ以上の運動パターン15、15、15、…、15を、2つ以上のユーザタイプ特有の運動パターン115、115、115、…、115に置き換えるように構成され得る。
ユーザ特有の運動パターン115、115、115、…、115のユーザ特有のプリセット115に関して上に説明されていることは全て、ユーザタイプ特有の運動パターン115、115、115、…、115のユーザタイプ特有のプリセット115についても当てはまる。
上述のように、識別されたユーザタイプは、クラスタ又はユーザタイプの群にクラスタ化され得る。したがって、装置100は、ユーザが特定のユーザタイプ群にクラスタ化される前に、ユーザが個人用器具デバイス11を既定の回数にわたって使用し得るクラスタ分析を実施し得る。例えば、ユーザは、自身のかみそりを5日間に5回使用する場合がある。5日のうち4日は、ユーザは、ヒゲの生える向きに逆らって剃る場合がある。したがって、5日目の後に、装置100は、このユーザを、全てのユーザがヒゲの生える向きに逆らって剃るユーザタイプ群にクラスタ化することができる。
クラスタ分析を、より短い時間間隔で実施することもできる。すなわち、歯ブラシ11のオンオフの切り替えを直接連続的に行うことができる。例えば、ユーザは、第1の時間で自身の電動歯ブラシ11をオンオフに切り替え、歯ブラシ11を再び再開させるために、それを第2の時間でオンに切り替えることができる。歯ブラシ11を再開させる時間において、本発明の装置100、特に、ニューラルネットワーク18を再開させることもできる。歯ブラシ11は、オンに切り替えられると、クラスタ分析のための情報を収集することができる。しかしながら、少なくともニューラルネットワーク18は、クラスタ分析のための新たな情報が収集される前に、毎回再開されるものとする。要約すると、装置100は、ユーザを特定のユーザタイプ群に最終的にクラスタ化する前に、クラスタ分析を繰り返し(例えば、5回)実施し得る。
ユーザが特定のユーザタイプ特有の群にクラスタ化された後、ニューラルネットワーク18は、ユーザタイプ特有の運動パターン115、115、115、…、115の、関連付けられたユーザタイプ特有のプリセット115を使用し得る。
かかる実施形態によれば、運動パターン認識デバイス14は、既定の回数にわたってクラスタ分析を繰り返し実施するように構成され得、上記クラスタ分析ごとに、ニューラルネットワーク18は、再開され、かつ再開後に、少なくとも1つの慣性センサデータ17、17、17、…、17を受信し、かつ少なくとも1つの慣性センサデータ17、17、17、…、17を、運動パターンのセット15に含まれる少なくとも1つの運動パターン15、15、15、…、15にマッピングする工程を実施するように構成され得、ニューラルネットワーク18は、既定の回数にわたってクラスタ分析を実施した後に、ユーザタイプ特有の運動パターンのプリセット115を選択するように構成され得る。
本発明の装置100は、可動式個人用器具11の運動を分類するための更により多くのシナリオを提供し得る。したがって、再び図9への参照を行うものとする。
一実施形態によれば、1つ以上のクラス101、102、103、104のうちの少なくとも1つのクラス102は、少なくとも2つのクラスメンバ102A、102Bを含み得、上記1つのクラス102は、可動式個人用器具11の取り扱い評価を表すことができ、第1のクラスメンバ102Aは、可動式個人用器具11の正しい取り扱いを表すことができ、第2のクラスメンバ102Bは、可動式個人用器具11の誤った取り扱いを表すことができ、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、可動式個人用器具11の運動に基づいて、可動式個人用器具11の取り扱いを評価するための第1又は第2のクラスメンバ102A、102Bのいずれかに関連付けられ得る。
換言すれば、装置100は、可動式個人用器具11のユーザが可動式個人用器具11を正しく使用しているか否かを確認するように構成され得る。当然ながら、取り扱い評価を表す上記1つのクラス102を、例えば、ユーザ及び/又はユーザタイプを識別した後に、図10及び図11の上に記載される2工程手順の第2の工程122のクラスとして使用することもできる。
更なる実施形態によれば、1つ以上のクラス101、102、103、104のうちの少なくとも1つのクラス103は、少なくとも2つのクラスメンバ103A、103Bを含み得、上記1つのクラス103は、可動式個人用器具11の運動実行の品質を表すことができ、第1のクラスメンバ103Aは、可動式個人用器具11の良好な運動実行を表すことができ、第2のクラスメンバ103Bは、可動式個人用器具11の不良な運動実行を表すことができ、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、可動式個人用器具11の運動に基づいて、可動式個人用器具11の運動実行の品質を評価するための第1又は第2のクラスメンバ103A、103Bのいずれかに関連付けられ得る。
換言すれば、装置100は、可動式個人用器具11のユーザが可動式個人用器具11を良好な方法で使用し得るか、又は不良な方法で使用し得るかを確認するように構成され得る。良好な方法が、意図される可動式個人用器具の運動を実施する方法であり得る一方、不良な方法は、意図されていない可動式個人用器具11の運動を実施する方法であり得る。例えば、個人用器具11が歯ブラシである場合、装置は、ユーザが良好なブラッシング技法を有し得るか、又は不良なブラッシング技法を有し得るかを確認することができる。
当然ながら、運動実行の品質を表す上記1つのクラス103を、例えば、ユーザ及び/又はユーザタイプを識別した後に、図10及び図11の上に記載される2工程手順の第2の工程122のクラスとして使用することもできる。
装置100のなお更なる実施形態は、図1~図8を参照して記載されるように、装置10と同様であってもよい。
かかる実施形態によれば、1つ以上のクラス101、102、103、104のうちの少なくとも1つのクラス104は、少なくとも2つのクラスメンバnA、nBを含むことができ、上記1つのクラス104は、対象表面12に対する可動式個人用器具11の位置を表すことができ、第1のクラスメンバnAは、対象表面12に対する可動式個人用器具11の第1の位置ゾーン21を表すことができ、第2のクラスメンバnBは、対象表面12に対する可動式個人用器具11の第2の位置ゾーン21を表すことができ、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、可動式個人用器具11の運動に基づいて、第1及び第2の位置ゾーン21、21のうちの少なくとも1つの中に可動式個人用器具11を位置特定するための第1及び第2のクラスメンバnA、nBのうちの少なくとも1つに関連付けられ得る。
換言すれば、1つのクラス104は、対象表面12を表し得る。上記1つのクラス104のクラスメンバnA、nBは、上記対象表面12の異なるゾーン21、21を表し得る。したがって、対象表面12に対する可動式個人用器具11の位置特定は、図1~図8を参照して装置10に関して上に記載されるものと同じ又は少なくとも類似の方法で装置10によって実行され得る。
当然ながら、対象表面12に対する可動式個人用器具11の位置を表す上記1つのクラス104を、例えば、ユーザ及び/又はユーザタイプを識別した後に、図10及び図11の上に記載される2工程手順の第2の工程122のクラスとして使用することもできる。
装置100のニューラルネットワーク18は、図4~図7を参照して記載されている装置10のニューラルネットワーク18と同じ又は類似の特徴を含み得る。したがって、再び図7を簡潔に参照するものとする。
一実施形態によれば、ニューラルネットワーク18は、少なくとも第1及び第2の層71、72を備えることができ、各層は、ニューラルユニット60、70を備えることができ、第1の時間インスタントtにおいて、少なくとも1つの慣性センサデータX 17は、第1の層71のニューラルユニット60に入力され得、後続の第2の時間インスタントt+1において、第2の慣性センサデータXt+1 17、及び以前の第1の時間インスタントtの少なくとも1つの出力h 46は、第1の層71のニューラルユニット60に入力され得、並びに/又は、後続の第2の時間インスタントt+1において、第1の時間インスタントtの少なくとも1つの出力h 46は、第2の層72のニューラルユニット71に入力され得る。
図4~図7に示される装置10のニューラルネットワーク18の任意の特徴に関して上に記載されていることは全て、図9~図11を参照して記載される装置100のニューラルネットワーク18にも当てはまる。
図12は、慣性センサ13を備える可動式個人用器具11の運動を分類するための本発明の方法のブロック図を示している。
ブロック1201において、本方法は、可動式個人用器具11の運動パターンのセット15に含まれる2つ以上の運動パターン15、15、15、…、15間を判別する工程を含む。
ブロック1202では、本方法は、慣性センサ13からの少なくとも1つの慣性センサデータ17、17、17、…、17を運動パターン認識デバイス14に提供する工程を含み、少なくとも1つの慣性センサデータ17、17、17、…、17は、可動式個人用器具11の運動を表す。
ブロック1203において、本方法は、ニューラルネットワーク18によって、少なくとも1つの慣性センサデータ17、17、17、…、17を受信して処理し、かつ運動パターンのセット15に含まれる少なくとも1つの運動パターン15、15、15、…、15に少なくとも1つの慣性センサデータ17、17、17、…、17をマッピングし、少なくとも1つのマッピングされた運動パターン15、15、15、…、15は、少なくとも1つのクラス101、102、103、104の少なくとも1つのクラスメンバ101A、101B、102A、102B、…、nA、nBに関連付けられ、それにより、少なくとも1つのクラスメンバ101A、101B、102A、102B、…、nA、nBは、可動式個人用器具11の運動に基づいて選択される。
本発明の装置10、100のなお更なる例によれば、可動式処置デバイス11は、個人用器具であり得、対象表面12は、可動式処置デバイス11によって処置される身体部分であり得る。
本発明の装置10、100のなお更なる例によれば、可動式処置デバイス11又は可動式個人用器具11は、個人用器具によって対象ゾーンに加えられる圧力を検知するための圧力センサ、及び/又は個人用器具を駆動し得るモータのモータ負荷を検知するための負荷センサを備え得る。
圧力センサ及び/又は負荷センサのそれぞれのセンサデータは、少なくとも1つの慣性センサデータ17、17、17、…、17に加えて又は代替的に、ニューラルユニット18に入力として供給され得る。
本発明の装置10のなお更なる例によれば、装置10は、可動式処置デバイス11が位置する対象表面12の1つ以上のゾーン21、21、21、…、21をユーザに出力するための出力インターフェースを備え得る。
本発明の装置100のなお更なる例によれば、装置100は、ユーザに情報を出力するための出力インターフェースを備えることができ、上記情報は、1つ以上のクラス101、102、103、104、及び/又は1つ以上のクラス101、102、103、104の1つ以上のクラスメンバ101A、101B、…、nA、nBに関連する。
本明細書に記載される実施形態の各々では、センサデータ17、17、17、…、17を、可動式個人用器具又は処置デバイス11に記憶することができ、その後、上に記載されるような方法で、装置10、100に供給することができる。異なるゾーン又はクラスに対する、この記憶されたセンサデータ17、17、17、…、17の任意の後処理を使用して、消費者又はユーザに対して、彼らがどの程度うまく及びどのゾーンをカバーしたか、何を忘却したか、対象の内と外に何が存在したかを、ダッシュボード上に示すことができる。このデータは、1回の使用又は時間の経過に伴う集計使用として示され得る(すなわち、消費者又はユーザに対して、彼らが週の間どのようにブラッシングしてきたかの単純なダッシュボードを示す)。
本発明は、以下の特徴を更に含み得る。
・注意機構(RNNに追加)
・プレフィルタリング作業
・頭部位置依存の除去(線形acclを見る)
・ユーザIDの動的時間伸縮法(フィンガプリント)
・ローカルの高周波数サンプリング、並びに信号の減衰を(頬に基づいて)舌側と頬側とを差別化する8ビットFFT(これは、RNNへの生信号+デバイス分類子が後に続く単純なデバイス分類子によって行われることになる)
・位置予測因子を訓練するだけでなく、「正しくブラッシングする対ブラッシングしない」も訓練する
・クラスタ分析(バケツに留置する前にユーザに1~5回ブラッシングさせる)を行うことにより、そのタイプのユーザに対してカスタム訓練されたRNNを使用する定義された空間にユーザを置く
いくつかの態様は装置の文脈で説明されているものの、これらの態様はまた、対応する方法の説明を表すことは明らかであり、ブロック又はデバイスは、方法工程又は方法工程の特徴に対応する。同様に、方法工程の文脈で説明した態様はまた、対応する装置の対応するブロック又はアイテム又は特徴の説明を表す。方法工程のうちのいくつか又は全ては、例えば、マイクロプロセッサ、プログラマブルコンピュータ、又は電子回路のようなハードウェア装置により(又はそれを使用して)実行されてもよい。いくつかの実施形態では、最も重要な方法工程のうちの1つ以上は、このような装置により実行されてもよい。
特定の実装要件に応じて、本発明の実施形態は、ハードウェアに、又はソフトウェアに、又は少なくとも部分的にハードウェアに、又は少なくとも部分的にソフトウェアに実装することができる。この実装は、電子的可読制御信号が記憶され、それぞれの方法が実施されるようにプログラマブルコンピュータシステムと協働する(又は協働することができる)デジタル記憶媒体、例えばフロッピーディスク、DVD、Blu-Ray、CD、ROM、PROM、EPROM、EEPROM、又はFLASHメモリを使用して実施され得る。したがって、デジタル記憶媒体は、コンピュータ可読であってもよい。
本発明によるいくつかの実施形態は、電子的可読制御信号を有するデータキャリアを備え、データキャリアは、本明細書に記載の方法のうちの1つが実施されるように、プログラマブルコンピュータシステムと協働することができる。
概して、本発明の実施形態は、プログラムコードを有するコンピュータプログラム製品として実装することができ、プログラムコードは、コンピュータプログラム製品がコンピュータ上で動作するときに、これらの方法のうちの1つを実施するように動作可能である。プログラムコードは、例えば、機械可読キャリアに記憶されてもよい。
他の実施形態は、機械可読キャリアに記憶された、本明細書に記載の方法のうちの1つを実施するためのコンピュータプログラムを含む。
換言すれば、本発明の方法のある実施形態は、したがって、コンピュータプログラムがコンピュータ上で動作するときに、本明細書に記載の方法のうちの1つを実施するためのプログラムコードを有するコンピュータプログラムである。
本発明の方法の更なる実施形態は、したがって、本明細書に記載の方法のうちの1つを実施するためのコンピュータプログラムを含む、それが記録されたデータキャリア(又はデジタル記憶媒体、又はコンピュータ可読媒体)である。データキャリア、デジタル記憶媒体、又は記録媒体は、典型的には、有形及び/又は非一時的である。
本発明の方法の更なる実施形態は、したがって、本明細書に記載の方法のうちの1つを実施するためのコンピュータプログラムを表すデータストリーム又は信号のシーケンスである。データストリーム又は信号のシーケンスは、例えば、データ通信接続、例えば、インターネット、Bluetooth低エネルギー(Bluetooth Low Energy、BLE)、WiFi、又は任意の種類のネットワーク、例えば、メッシュネットワーク、を介して転送されるように構成され得る。
更なる実施形態は、本明細書に記載の方法のうちの1つを実施するように構成又は適合された処理手段、例えばコンピュータ又はプログラマブル論理デバイスを含む。
更なる実施形態は、本明細書に記載の方法のうちの1つを実施するためのコンピュータプログラムがインストールされたコンピュータを含む。
本発明による更なる実施形態は、本明細書に記載の方法のうちの1つを実施するためのコンピュータプログラムを受信器に(例えば、電子的又は光学的に)転送するように構成された装置又はシステムを備える。受信器は、例えば、コンピュータ、モバイル機器、メモリデバイスなどであってもよい。装置又はシステムは、例えば、コンピュータプログラムを受信器に転送するためのファイルサーバを備えてもよい。
いくつかの実施形態では、プログラマブル論理デバイス(例えば、フィールドプログラマブルゲートアレイ)を使用して、本明細書に記載の方法の機能のうちのいくつか又は全てを実施してもよい。いくつかの実施形態では、フィールドプログラマブルゲートアレイは、本明細書に記載の方法のうちの1つを実施するために、マイクロプロセッサと協働してもよい。概して、方法は、できれば任意のハードウェア装置により実施されることが好ましい。
本明細書に記載の装置は、ハードウェア装置を使用して実装されても、コンピュータを使用して実装されても、又はハードウェア装置とコンピュータとの組み合わせを使用して実装されてもよい。
本明細書に記載の方法は、ハードウェア装置を使用して実施されても、コンピュータを使用して実施されても、又はハードウェア装置とコンピュータとの組み合わせを使用して実施されてもよい。
上に記載される実施形態は、単に本発明の原理の例示である。本明細書に記載の配置及び詳細に対する変更及び変形は当業者に明らかであろうことが理解される。したがって、すぐ次の特許請求の範囲によってのみ限定され、かつ本明細書に記載の実施形態の記載及び説明により提示された具体的な詳細によっては限定されないことが意図である。
更に、本明細書に開示される寸法及び値は、列挙した正確な数値に厳密に制限されると理解すべきではない。その代わりに、特に指示がない限り、このような寸法はそれぞれ、列挙された値とその値を囲む機能的に同等な範囲との両方を意味することが意図されている。例えば、「40mm」と開示された寸法は、「約40mm」を意味することが意図される。

Claims (14)

  1. 対象表面(12)に対する可動式処置デバイス(11)の位置特定を実施するための装置(10)であって、前記可動式処置デバイス(11)が、慣性センサ(13)を備え、前記対象表面(12)を処置するように構成されており、前記装置(10)が、
    前記可動式処置デバイス(11)の運動パターンのセット(15)に含まれる2つ以上の運動パターン(15、15、15、…、15)間を判別するように構成された、運動パターン認識デバイス(14)と、
    前記慣性センサ(13)からの複数の慣性センサデータ(17、17、17、…、17)を前記運動パターン認識デバイス(14)に提供するためのインターフェース(16)であって、前記複数の慣性センサデータ(17、17、17、…、17)が、前記可動式処置デバイス(11)の運動を表す、インターフェース(16)であって、前記複数の慣性センサデータ(17、17、17、…、17)はサンプル時間の間にサンプリングされ、それぞれの前記複数の慣性センサデータ(17、17、17、…、17)は、前記サンプル時間における異なる時間インスタンスにおいて取得される、インターフェース(16)と、を備え、
    前記運動パターン認識デバイス(14)が、前記複数の慣性センサデータ(17、17、17、…、17)を受信し、かつ前記運動パターンのセット(15)に含まれる少なくとも1つの運動パターン(15、15、15、…、15)に前記複数の慣性センサデータ(17、17、17、…、17)をマッピングするように構成された、ニューラルネットワーク(18)を備え、前記運動パターン(15、15、15、…、15)が各々、前記対象表面(12)の1つ以上の異なるゾーン(21、21、21、…、21)に関連付けられ(20、20、20、…、20)、それにより、前記少なくとも1つの運動パターン(15、15、15、…、15)との前記複数の慣性センサデータ(17、17,17、…、17)の前記マッピングが、前記対象表面(12)の前記1つ以上のゾーン(21、21、21、…、21)に対する前記可動式処置デバイス(11)の場所の推定を示すものであり、
    前記ニューラルネットワーク(18)の出力y(t)が、前記対象表面(12)の前記1つ以上のゾーン(21 、21 、21 、…、21 )に対する前記可動式処置デバイス(11)の場所の前記推定のための1つ以上の確率値を含む、装置(10)。
  2. 前記可動式処置デバイス(11)が、個人用器具であり、前記対象表面(12)が、前記可動式処置デバイス(11)によって処置される身体部分である、請求項1に記載の装置(10)。
  3. 前記可動式処置デバイス(11)が、口腔ケアデバイスであり、前記対象表面(12)が、歯列であり、前記歯列(12)が、異なる歯科ゾーン(1a~9a)に分離され、前記少なくとも1つの運動パターン(15、15、15、…、15)との前記複数の慣性センサデータ(17、17、17、…、17)の前記マッピングが、前記歯列(12)の前記1つ以上の歯科ゾーン(1a~9a)に対する前記口腔ケアデバイス(11)の場所の推定を示す、請求項1又は2に記載の装置(10)。
  4. 前記歯列(12)が、9つの歯科ゾーン(1a~9a)に分離され、第1の歯科ゾーン(1a)が、前記歯列(12)の上顎及び下顎の左側の頬側に対応し、第2の歯科ゾーン(2a)が、前記歯列(12)の上顎の左側及び右側の咬合側に対応し、第3の歯科ゾーン(3a)が、前記歯列(12)の下顎の左側及び右側の咬合側に対応し、第4の歯科ゾーン(4a)が、前記歯列(12)の上顎及び下顎の左側の舌側に対応し、第5の歯科ゾーン(5a)が、前記歯列(12)の上顎及び下顎の右側の頬側に対応し、第6の歯科ゾーン(6a)が、前記歯列(12)の上顎及び下顎の左側の舌側に対応し、第7の歯科ゾーン(7a)が、前記歯列(12)の上顎及び下顎の唇側に対応し、第8の歯科ゾーン(8a)が、前記歯列(12)の上顎の口蓋側に対応し、第9の歯科ゾーン(9a)が、前記歯列(12)の前部下顎の口腔側に対応する、請求項3に記載の装置(10)。
  5. 前記運動パターンのセット(15)に含まれる少なくとも1つの既定の運動パターン(15NB)が、前記対象表面(12)の外側のゾーン(21NB)に関連付けられ、前記少なくとも1つの既定の運動パターン(15NB)との前記複数の慣性センサデータ(17、17、17、…、17)の前記マッピングが、前記可動式処置デバイス(11)が前記対象表面(12)の外側の前記ゾーン(21NB)に位置することを示す、請求項3又は4に記載の装置(10)。
  6. 前記ニューラルネットワーク(18)が、回帰型ニューラルネットワーク(RNN)である、請求項1~5のいずれか一項に記載の装置(10)。
  7. 前記ニューラルネットワーク(18)が、第1の層(71)を備え、前記第1の層(71)が、ニューラルユニット(60)を備え、第1の瞬間tにおいて、前記複数の慣性センサデータのうちの1つの慣性センサデータ(17)が、前記第1の層(71)の前記ニューラルユニット(60)に入力され、後続の第2の瞬間t+1において、第2の慣性センサデータ(17)と、前の前記第1の瞬間tの少なくとも1つの出力h(46)とが、前記第1の層(71)の前記ニューラルユニット(60)に入力される、請求項1~6のいずれか一項に記載の装置(10)。
  8. 前記ニューラルネットワーク(18)が、少なくとも第1の層(71)と、第2の層(72)と、を備え、前記第1の層(71)が、第1のニューラルユニット(60)を備え、前記第2の層(72)が、第2のニューラルユニット(70)を備え、第1の瞬間tにおいて、前記複数の慣性センサデータのうちの1つの慣性センサデータ(17)が、前記第1の層(71)の前記第1のニューラルユニット(60)に入力され、前記第1のニューラルユニット(60)の少なくとも1つの出力h(46)が、前記第2の層(72)の前記第2のニューラルユニット(70)に入力される、請求項1~6のいずれか一項に記載の装置(10)。
  9. 前記ニューラルネットワーク(18)が、少なくとも第1の層(71)と、第2の層(72)と、を備え、前記第1の層(71)が、第1のニューラルユニット(60)を備え、前記第2の層(72)が、第2のニューラルユニット(70)を備え、第1の瞬間tにおいて、前記複数の慣性センサデータのうちの1つの慣性センサデータ(17)が、前記第1の層(71)の前記第1のニューラルユニット(60)に入力され、前記第1のニューラルユニット(60)の少なくとも1つの出力h(46)が、前記第2の層(72)の前記第2のニューラルユニット(70)に入力され、後続の第2の瞬間t+1において、第2の慣性センサデータ(17)と、前記第1の瞬間tにおける前記第1のニューラルユニット(60)の少なくとも1つの出力h(46)とが、前記後続の第2の瞬間t+1において前記第1のニューラルユニット(60)に入力される、請求項1~6のいずれか一項に記載の装置(10)。
  10. それぞれの前記複数の慣性センサデータ(17、17、17、…、17)が、1つ以上の慣性センサデータ部分を含み、第1の瞬間tにおける前記第1のニューラルユニット(60)への入力が、前記第1の瞬間tの間に回収された前記1つ以上の慣性センサデータ部分を含む、それぞれの慣性センサデータ(17、17、17、…、17)である、請求項7~9のいずれか一項に記載の装置(10)。
  11. それぞれの前記複数の慣性センサデータ(17、17、17、…、17)が、x、y、及びz方向の線形速度と、x、y、及びz軸に対する角速度と、x、y、及びz方向の線形加速度と、x、y、及びz軸に対する角加速度と、を含む群の少なくとも3つの慣性センサデータ部分を含む、請求項1~10のいずれか一項に記載の装置(10)。
  12. 前記運動パターン認識デバイス(14)が、前記複数の慣性センサデータ(17、17、17、…、17)から、前記可動式処置デバイス(11)と前記対象表面(12)との相互運動を決定し、かつ前記可動式処置デバイス(11)の前記決定された運動から、前記対象表面(12)の前記決定された運動を除去するように構成されている、請求項1~11のいずれか一項に記載の装置(10)。
  13. 対象表面(12)に対する可動式処置デバイス(11)の位置特定を実施するための方法であって、前記可動式処置デバイス(11)が、慣性センサ(13)を備え、前記対象表面(12)を処置するように構成されており、前記方法が、
    前記可動式処置デバイス(11)の運動パターンのセット(15)に含まれる2つ以上の運動パターン(15、15、15、…、15)間を判別することと、 前記慣性センサ(13)から複数の慣性センサデータ(17、17、17、…、17)を受信することであって、前記複数の慣性センサデータ(17、17、17、…、17)が、前記可動式処置デバイス(11)の運動を表しており、前記複数の慣性センサデータ(17、17、17、…、17)はサンプル時間の間にサンプリングされ、それぞれの前記複数の慣性センサデータ(17、17、17、…、17)は、前記サンプル時間における異なる時間インスタンスにおいて取得されることと、
    ニューラルネットワーク(18)によって、前記複数の慣性センサデータ(17、17、17、…、17)を受信して処理することと、前記運動パターンのセット(15)に含まれる少なくとも1つの運動パターン(15、15、15、…、15)に前記複数の慣性センサデータ(17、17、17、…、17)をマッピングすることと、を備え、
    前記運動パターンのセット(15)に含まれる前記運動パターン(15、15、15、…、15)が各々、前記対象表面(12)の1つ以上の異なるゾーン(21、21、21、…、21)に関連付けられ、それにより、前記少なくとも1つの運動パターン(15、15、15、…、15)との前記複数の慣性センサデータ(17、17、17、…、17)の前記マッピングが、前記対象表面(12)の前記1つ以上のゾーン(21、21、21、…、21)に対する前記可動式処置デバイス(11)の場所の推定を示すものであり、
    前記ニューラルネットワーク(18)の出力y(t)が、前記対象表面(12)の前記1つ以上のゾーン(21 、21 、21 、…、21 )に対する前記可動式処置デバイス(11)の場所の前記推定のための1つ以上の確率値を含む、方法。
  14. コンピュータプログラムが記憶されたコンピュータ可読デジタル記憶媒体であって、前記コンピュータプログラムが、コンピュータ上で作動しているときに、請求項13に記載の方法を実施するためのプログラムコードを有する、コンピュータ可読デジタル記憶媒体。
JP2020543273A 2018-02-19 2019-02-15 可動式処置デバイスの位置特定を実施するための装置及び方法 Active JP7402165B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP18157362.7A EP3528167A1 (en) 2018-02-19 2018-02-19 Apparatus and method for performing a localization of a movable treatment device
EP18157358.5A EP3528166B1 (en) 2018-02-19 2018-02-19 Apparatus and method for classifying a motion of a movable personal appliance
EP18157358.5 2018-02-19
EP18157362.7 2018-02-19
PCT/IB2019/051248 WO2019159128A2 (en) 2018-02-19 2019-02-15 Apparatus and method for performing a localization of a movable treatment device

Publications (2)

Publication Number Publication Date
JP2021513415A JP2021513415A (ja) 2021-05-27
JP7402165B2 true JP7402165B2 (ja) 2023-12-20

Family

ID=65324298

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2020543228A Active JP7221291B2 (ja) 2018-02-19 2019-02-15 可動式処置デバイスの位置特定を実施するための装置及び方法
JP2020543144A Active JP7190496B2 (ja) 2018-02-19 2019-02-15 可動式処置デバイスの運動を分類するための装置及び方法
JP2020543384A Active JP7203856B2 (ja) 2018-02-19 2019-02-15 手持ち式消費者装置の使用を分類するためのシステム
JP2020543273A Active JP7402165B2 (ja) 2018-02-19 2019-02-15 可動式処置デバイスの位置特定を実施するための装置及び方法
JP2022158618A Pending JP2023017766A (ja) 2018-02-19 2022-09-30 可動式処置デバイスの位置特定を実施するための装置及び方法

Family Applications Before (3)

Application Number Title Priority Date Filing Date
JP2020543228A Active JP7221291B2 (ja) 2018-02-19 2019-02-15 可動式処置デバイスの位置特定を実施するための装置及び方法
JP2020543144A Active JP7190496B2 (ja) 2018-02-19 2019-02-15 可動式処置デバイスの運動を分類するための装置及び方法
JP2020543384A Active JP7203856B2 (ja) 2018-02-19 2019-02-15 手持ち式消費者装置の使用を分類するためのシステム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022158618A Pending JP2023017766A (ja) 2018-02-19 2022-09-30 可動式処置デバイスの位置特定を実施するための装置及び方法

Country Status (6)

Country Link
US (5) US20190254796A1 (ja)
EP (3) EP3528172B1 (ja)
JP (5) JP7221291B2 (ja)
KR (2) KR102555432B1 (ja)
CN (4) CN111742327B (ja)
WO (4) WO2019159129A2 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3528172B1 (en) * 2018-02-19 2023-12-27 Braun GmbH System for classifying the usage of a handheld consumer device
KR20210030106A (ko) * 2019-09-09 2021-03-17 엘지전자 주식회사 서버
JP2023531352A (ja) * 2020-06-24 2023-07-24 エッジウェル パーソナル ケア ブランズ リミテッド ライアビリティ カンパニー パーソナルケアデバイスのための機械学習
GB2602086A (en) * 2020-12-17 2022-06-22 Dyson Technology Ltd Oral treatment device
US20220201256A1 (en) * 2020-12-22 2022-06-23 Here Global B.V. Method, apparatus, and system for capturing an image sequence for a visual positioning service request
CN112884132B (zh) * 2021-03-19 2024-04-30 有品国际科技(深圳)有限责任公司 基于神经网络的刷牙检测方法、装置、电动牙刷及介质
CN117835867A (zh) 2021-08-06 2024-04-05 博朗有限公司 电动牙刷及用于其的通用底座
WO2024007106A1 (en) 2022-07-04 2024-01-11 Braun Gmbh Oral scanner system
WO2024007100A1 (en) 2022-07-04 2024-01-11 Braun Gmbh Oral scanner system
WO2024007884A1 (en) 2022-07-04 2024-01-11 Braun Gmbh Oral scanner system
WO2024007113A1 (en) 2022-07-04 2024-01-11 Braun Gmbh Oral scanner system
WO2024007091A1 (en) 2022-07-04 2024-01-11 Braun Gmbh Oral scanner system
WO2024007098A1 (en) 2022-07-04 2024-01-11 Braun Gmbh Oral scanner system
WO2024007117A1 (en) 2022-07-04 2024-01-11 Braun Gmbh Oral scanner system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002090267A (ja) 2000-09-21 2002-03-27 Mitsui Eng & Shipbuild Co Ltd 異常診断方法
WO2016180929A1 (en) 2015-05-13 2016-11-17 Kolibree Toothbrush system with magnetometer for dental hygiene monitoring
WO2017029570A1 (en) 2015-08-19 2017-02-23 Koninklijke Philips N.V. Methods and systems for oral cleaning device localization
WO2017042673A1 (en) 2015-09-08 2017-03-16 Braun Gmbh Determination of a currently treated body portion of a user

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6757602B2 (en) * 1997-02-06 2004-06-29 Automotive Technologies International, Inc. System for determining the occupancy state of a seat in a vehicle and controlling a component based thereon
DE4218600C2 (de) * 1992-06-05 1994-09-22 Bodenseewerk Geraetetech Einrichtung zur Bestimmung von Bewegungsgrößen eines Flugkörpers
KR100580647B1 (ko) * 2004-04-01 2006-05-16 삼성전자주식회사 입력모드 분류가능한 동작기반 입력장치 및 방법
WO2006090197A1 (en) * 2005-02-24 2006-08-31 Nokia Corporation Motion-input device for a computing terminal and method of its operation
KR100799913B1 (ko) * 2005-06-20 2008-02-01 지우솔루션주식회사 양치 패턴 분석 교정장치, 인터렉티브 양치습관 교정 방법및 시스템
JP4388033B2 (ja) 2006-05-15 2009-12-24 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
AU2007348326B2 (en) * 2006-05-31 2012-03-08 Trx Systems, Inc. Method and system for locating and monitoring first responders
US7636645B1 (en) 2007-06-18 2009-12-22 Ailive Inc. Self-contained inertial navigation system for interactive control using movable controllers
US20080102953A1 (en) * 2006-10-31 2008-05-01 Motorola, Inc. Toothbrush affecting game play
DE102007001025B4 (de) 2007-01-02 2008-11-20 Siemens Ag Verfahren zur rechnergestützten Steuerung und/oder Regelung eines technischen Systems
US8462109B2 (en) * 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
US7835999B2 (en) * 2007-06-27 2010-11-16 Microsoft Corporation Recognizing input gestures using a multi-touch input device, calculated graphs, and a neural network with link weights
KR100947046B1 (ko) 2007-11-19 2010-03-10 황진상 운동체 자세 추적 장치, 운동체 자세 추적 방법, 이를이용한 칫솔 자세 추적 장치 및 칫솔 자세 추적 방법
JP5293101B2 (ja) 2008-03-14 2013-09-18 オムロンヘルスケア株式会社 電動歯ブラシ
US10192389B2 (en) * 2008-09-01 2019-01-29 New Bis Safe Luxco S.À.R.L. Methods, apparatus and systems for determining an adjustment value of a gaming device
JP2011059815A (ja) * 2009-09-07 2011-03-24 Sony Corp 情報処理装置、情報処理方法、及び、プログラム
JP5574789B2 (ja) * 2010-04-08 2014-08-20 株式会社東芝 車両周辺監視装置及び車両周辺監視方法
KR20130057688A (ko) * 2011-11-24 2013-06-03 (주)케이엔씨웰빙 양치 패턴 분석용 칫솔 및 분석 시스템
US10314492B2 (en) 2013-05-23 2019-06-11 Medibotics Llc Wearable spectroscopic sensor to measure food consumption based on interaction between light and the human body
US20140065588A1 (en) * 2012-08-31 2014-03-06 Ideas That Work, Llc Toothbrush Training System
US9263036B1 (en) * 2012-11-29 2016-02-16 Google Inc. System and method for speech recognition using deep recurrent neural networks
WO2014089119A1 (en) * 2012-12-03 2014-06-12 Navisens, Inc. Systems and methods for estimating the motion of an object
US9413797B2 (en) * 2013-04-23 2016-08-09 Gurulogic Microsystems Oy Data communication system and method
US9529385B2 (en) * 2013-05-23 2016-12-27 Medibotics Llc Smart watch and human-to-computer interface for monitoring food consumption
US9389694B2 (en) * 2013-10-22 2016-07-12 Thalmic Labs Inc. Systems, articles, and methods for gesture identification in wearable electromyography devices
US9820233B2 (en) * 2013-11-25 2017-11-14 Qualcomm Incorporated Motion state based mobile device positioning
US20160091965A1 (en) 2014-09-30 2016-03-31 Microsoft Corporation Natural motion-based control via wearable and mobile devices
US20160091308A1 (en) * 2014-09-30 2016-03-31 Invensense, Inc. Microelectromechanical systems (mems) acoustic sensor-based gesture recognition
CN107105888B (zh) * 2014-12-22 2019-09-20 太阳星光齿磨公司 牙刷用配件
CN105832315A (zh) * 2015-01-16 2016-08-10 中国科学院上海高等研究院 不受个体运动状态与环境位置影响的远程监测系统
CN104848861B (zh) * 2015-05-28 2017-12-08 西安交通大学 一种基于图像消失点识别技术的移动设备姿态测量方法
US9336482B1 (en) 2015-07-27 2016-05-10 Google Inc. Predicting likelihoods of conditions being satisfied using recurrent neural networks
FI127926B (en) 2015-12-21 2019-05-31 Suunto Oy Sensor-based context management
KR102584374B1 (ko) * 2016-03-14 2023-09-27 콜리브리 준수 모니터링을 위한 시각적 인식을 갖는 구강 위생 시스템
WO2017165231A1 (en) * 2016-03-22 2017-09-28 Magic Leap, Inc. Head mounted display system configured to exchange biometric information
JP2019514448A (ja) 2016-03-31 2019-06-06 ゾール メディカル コーポレイションZOLL Medical Corporation 患者の動きを追跡するシステムおよび方法
JP2017187850A (ja) * 2016-04-01 2017-10-12 株式会社リコー 画像処理システム、情報処理装置、プログラム
US10732621B2 (en) * 2016-05-09 2020-08-04 Strong Force Iot Portfolio 2016, Llc Methods and systems for process adaptation in an internet of things downstream oil and gas environment
CN107516102B (zh) * 2016-06-16 2020-10-23 北京市商汤科技开发有限公司 图像数据分类与建立分类模型方法、装置及系统
US10003924B2 (en) * 2016-08-10 2018-06-19 Yandex Europe Ag Method of and server for processing wireless device sensor data to generate an entity vector associated with a physical location
KR20180070932A (ko) * 2016-12-19 2018-06-27 삼성전자주식회사 이동체 및 이동체의 제어 방법
US20170173262A1 (en) * 2017-03-01 2017-06-22 François Paul VELTZ Medical systems, devices and methods
CN107092894A (zh) * 2017-04-28 2017-08-25 孙恩泽 一种基于lstm模型的运动行为识别方法
CN107153642A (zh) * 2017-05-16 2017-09-12 华北电力大学 一种基于神经网络识别文本评论情感倾向的分析方法
CN107203753B (zh) * 2017-05-25 2020-09-08 西安工业大学 一种基于模糊神经网络和图模型推理的动作识别方法
CN109002189B (zh) * 2017-06-07 2021-09-07 斑马智行网络(香港)有限公司 一种运动识别方法、装置、设备和计算机存储介质
US10726301B2 (en) * 2017-06-29 2020-07-28 The Procter & Gamble Company Method for treating a surface
JP2020530159A (ja) * 2017-08-02 2020-10-15 ストロング フォース アイオーティ ポートフォリオ 2016,エルエルシー 大量のデータセットを使用する産業用のモノのインターネットのデータ収集環境における検出のための方法及びシステム
GB2567850B (en) * 2017-10-26 2020-11-04 Gb Gas Holdings Ltd Determining operating state from complex sensor data
GB2569794A (en) * 2017-12-21 2019-07-03 Yoti Holding Ltd Biometric user authentication
CN111465333B (zh) * 2017-12-28 2022-03-11 高露洁-棕榄公司 口腔卫生系统
EP3528172B1 (en) * 2018-02-19 2023-12-27 Braun GmbH System for classifying the usage of a handheld consumer device
CN108451155B (zh) * 2018-04-13 2020-09-08 深圳市力博得科技有限公司 智能牙刷的控制电路、智能牙刷及刷牙行为的监控方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002090267A (ja) 2000-09-21 2002-03-27 Mitsui Eng & Shipbuild Co Ltd 異常診断方法
WO2016180929A1 (en) 2015-05-13 2016-11-17 Kolibree Toothbrush system with magnetometer for dental hygiene monitoring
WO2017029570A1 (en) 2015-08-19 2017-02-23 Koninklijke Philips N.V. Methods and systems for oral cleaning device localization
WO2017042673A1 (en) 2015-09-08 2017-03-16 Braun Gmbh Determination of a currently treated body portion of a user

Also Published As

Publication number Publication date
KR102613604B1 (ko) 2023-12-15
JP7203856B2 (ja) 2023-01-13
US11755686B2 (en) 2023-09-12
EP3528171B1 (en) 2023-11-22
CN111742328A (zh) 2020-10-02
JP7221291B2 (ja) 2023-02-13
WO2019159127A1 (en) 2019-08-22
WO2019159128A3 (en) 2019-10-17
JP2021513420A (ja) 2021-05-27
US20190254796A1 (en) 2019-08-22
US20230342423A1 (en) 2023-10-26
KR20200108034A (ko) 2020-09-16
WO2019159130A3 (en) 2019-10-17
US20190278786A1 (en) 2019-09-12
CN111742327B (zh) 2024-05-28
CN111742327A (zh) 2020-10-02
JP2021514223A (ja) 2021-06-10
JP2023017766A (ja) 2023-02-07
EP3528172A3 (en) 2020-01-08
EP3528171A3 (en) 2020-01-08
KR20200108035A (ko) 2020-09-16
WO2019159129A3 (en) 2019-10-31
EP3528172A2 (en) 2019-08-21
KR102555432B1 (ko) 2023-07-13
JP2021514221A (ja) 2021-06-10
WO2019159129A2 (en) 2019-08-22
JP7190496B2 (ja) 2022-12-15
CN111771209A (zh) 2020-10-13
WO2019159130A2 (en) 2019-08-22
EP3528170A1 (en) 2019-08-21
WO2019159128A2 (en) 2019-08-22
JP2021513415A (ja) 2021-05-27
EP3528171A2 (en) 2019-08-21
US20190254795A1 (en) 2019-08-22
CN111771208B (zh) 2024-05-28
EP3528172B1 (en) 2023-12-27
US20190254794A1 (en) 2019-08-22
EP3528170B1 (en) 2023-11-22
CN111771208A (zh) 2020-10-13

Similar Documents

Publication Publication Date Title
JP7402165B2 (ja) 可動式処置デバイスの位置特定を実施するための装置及び方法
CN113168910B (zh) 用于操作个人梳理器具或家用清洁器具的设备和方法
US20220398745A1 (en) Apparatus and method for operating a dental appliance
EP3528166B1 (en) Apparatus and method for classifying a motion of a movable personal appliance
EP3528167A1 (en) Apparatus and method for performing a localization of a movable treatment device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200813

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211029

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220111

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221003

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20221003

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20221013

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20221014

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20221228

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20230106

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231208

R150 Certificate of patent or registration of utility model

Ref document number: 7402165

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150