JP6365939B2 - 睡眠補助システム - Google Patents

睡眠補助システム Download PDF

Info

Publication number
JP6365939B2
JP6365939B2 JP2014201125A JP2014201125A JP6365939B2 JP 6365939 B2 JP6365939 B2 JP 6365939B2 JP 2014201125 A JP2014201125 A JP 2014201125A JP 2014201125 A JP2014201125 A JP 2014201125A JP 6365939 B2 JP6365939 B2 JP 6365939B2
Authority
JP
Japan
Prior art keywords
signal
user
parameter
sound
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014201125A
Other languages
English (en)
Other versions
JP2015126869A (ja
Inventor
張韶▲芹▼
▲呉▼旭軒
Original Assignee
瑞軒科技股▲分▼有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 瑞軒科技股▲分▼有限公司 filed Critical 瑞軒科技股▲分▼有限公司
Publication of JP2015126869A publication Critical patent/JP2015126869A/ja
Application granted granted Critical
Publication of JP6365939B2 publication Critical patent/JP6365939B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M21/02Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • A61B5/372Analysis of electroencephalograms
    • A61B5/374Detecting the frequency distribution of signals, e.g. detecting delta, theta, alpha, beta or gamma waves
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4806Sleep evaluation
    • A61B5/4809Sleep detection, i.e. determining whether a subject is asleep or not
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4806Sleep evaluation
    • A61B5/4812Detecting sleep stages or cycles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0027Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0044Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
    • A61M2021/005Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Anesthesiology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Psychology (AREA)
  • Pain & Pain Management (AREA)
  • Acoustics & Sound (AREA)
  • Hematology (AREA)
  • Multimedia (AREA)
  • Psychiatry (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • General Physics & Mathematics (AREA)

Description

本発明は、睡眠補助システム及び睡眠補助方法に関し、特に、快適な睡眠環境を作る睡眠補助システム及び睡眠補助方法に関する。
睡眠品質は、人にとって重要なことである。一般的には、人は、快適で熟知の状態で眠りにつき易い。
しかしながら、人は、入眠直前となる場合、見ているテレビ画面の輝度が明るすぎたり、聞いた音楽の音が大きすぎることで、起こされてしまうことがよくある。あるいは、使用者の聞いた音楽は、順調に入眠するように寄与することができない。従って、人は、入眠しようとする感じがなくなり、更に不眠の問題を引き起こすことが常にある。
そのために、人が眠りたい場合に順調に入眠できるような快適な睡眠環境を如何に作るかは、依然として業界で努力すべき目標である。
本発明の一態様は、睡眠補助システムである。本発明の一実施例によると、複数の所定の周波数帯域を含む脳波信号を捕捉するための捕捉モジュールと、前記複数の所定の周波数帯域のそれぞれに対応する指数を取得するために前記脳波信号を分析して、前記複数の所定の周波数帯域のそれぞれに対応する指数に基づいて不眠度パラメータを算出するための処理モジュールと、前記不眠度パラメータに対応するパラメータ信号を伝送するための伝送モジュールと、を含む睡眠補助装置と、前記伝送モジュールから前記パラメータ信号を受信するためのサーバーと、前記サーバーから伝送されるフィードバック信号に基づいて音を出力する出力装置と、を備える睡眠補助システムであって、前記サーバーは、前記睡眠補助システムの使用情報を含む比較データを保存し、前記パラメータ信号と前記比較データとの比較に基づいて、出力中の音を他の音に切り替える命令を含む前記フィードバック信号を前記出力装置に伝送する。
本発明の別の態様は、睡眠補助システムである。本発明の一実施例によると、前記睡眠補助システムは、複数の所定の周波数帯域を含む脳波信号を捕捉するための捕捉モジュールと、前記複数の所定の周波数帯域のそれぞれに対応する指数を取得するために前記脳波信号を分析して、前記複数の所定の周波数帯域のそれぞれに対応する指数に基づいて不眠度パラメータを算出するための処理モジュールと、前記不眠度パラメータに対応する一パラメータ信号をサーバーに伝送するための伝送モジュールと、を含む睡眠補助装置と、音を出力するための電子装置と、を備え、前記電子装置は、現在出力中の音の情報を前記サーバーに伝送し、前記サーバーからフィードバック信号を受信して、前記フィードバック信号に基づいて前記現在出力中の音を切り替える。
本発明の別の態様は、睡眠補助システムである。本発明の一実施例によると、前記睡眠補助システムは、複数の所定の周波数帯域を含む脳波信号を捕捉するための捕捉モジュールと、前記複数の所定の周波数帯域のそれぞれに対応する指数を取得するために前記脳波信号を分析して、前記複数の所定の周波数帯域のそれぞれに対応する指数に基づいて不眠度パラメータを算出するための処理モジュールと、前記不眠度パラメータに対応するパラメータ信号を伝送するための伝送モジュールと、を含む睡眠補助装置と、前記伝送モジュールから前記パラメータ信号を受信するためのサーバーと、を備え、前記サーバーは、前記パラメータ信号に基づいて前記脳波信号の状態を判断し、前記脳波信号が睡眠状態になると判断する場合、ディスプレイ装置をオフにする命令を含むフィードバック信号を生じる。
本発明の別の態様は、睡眠補助方法である。本発明の一実施例によると、睡眠補助方法は、脳波信号を捕捉する工程と、前記脳波信号を分析して、複数の所定の周波数帯域における各々の指数を取得する工程と、前記所定の周波数帯域における各々の指数に基づいて不眠度パラメータを算出する工程と、前記不眠度パラメータに対応するパラメータ信号を伝送し、前記パラメータ信号と使用情報を含む比較データとの比較をして、前記脳波信号の前記不眠度パラメータが変化したかどうかを判断する工程と、比較結果に基づいて、出力中の音を切り替える命令を含む、対応するフィードバック信号を生じる工程と、を含む方法を睡眠補助システムに実行させる。
上記をまとめると、上記の実施例を適用することで、本発明の睡眠補助システム及びその睡眠補助方法は、使用者の脳波信号に基づいて、使用者の入眠に適している音楽を自動的に選択し、使用者の使用状況を即時に記録して、使用者が順調に入眠することに寄与することができる。また、本発明の睡眠補助システム及びその睡眠補助方法は、更に、使用者の周囲環境の電子装置を調整することができる。使用者が入眠する場合、使用者の脳波信号に基づいて、周囲環境の電子装置からの光源及び/又は音源を次第に少なくし、使用者がより順調に入眠できるようにすることができる。
本発明の上記目的、技術特徴及びメリットをより分かりやすくするために、好ましい実施例で添付図面に合わせて、以下のように詳しく説明する。
本発明の一実施例による睡眠補助システムを示す模式図である。 本発明の一実施例による睡眠補助システムを示す模式図である。 本発明の一実施例による睡眠補助システムを示す模式図である。 本発明の一実施例による睡眠補助システムを示す模式図である。 本発明の一実施例による睡眠補助システムの取扱方法を示すフロー図である。 本発明の一実施例による睡眠補助システムの操作を示す模式図である。 本発明の一実施例による睡眠補助システムの取扱方法を示すフロー図である。
本発明の内容は、以下の実施例によって説明できるが、本発明の実施例は、本発明が以下の実施例で述べられるような任意の所定の環境、応用又は方式でしか実施できないことを制限するためのものではない。従って、以下の実施例の説明は、単に本発明を説明するものであり、本発明を制限するためのものではない。以下の実施例及び図面において、本発明に直接に関わっていない素子については、図示を省略する。且つ、図面に示された各素子同士の寸法比は、単に把握されやすくするものであり、本発明の実際の実施比を制限するためのものではない。
本発明の一実施例は、睡眠補助システム100であり、その模式図を図1Aに示す。
本実施例において、睡眠補助システム100は、睡眠補助装置110と、サーバー120と、を備える。睡眠補助装置110は、使用者の脳波信号112を検出し、使用者の不眠度パラメータを算出することに用いられる。サーバー120は、使用者の不眠度パラメータに対応するパラメータ信号114を受信し、パラメータ信号114と複数のパラメータデータとの比較をしてフィードバック信号116を電子装置130に伝送する。サーバー120は、電子装置130に使用者の入眠に適している音を出力させる。
図1Aに示すように、睡眠補助装置110は、捕捉モジュール111と、処理モジュール113と、伝送モジュール115と、を含む。処理モジュール113は、捕捉モジュール111及び伝送モジュール115に電気的に連結されており、捕捉モジュール111からの信号を受信して受信した信号の処理を行う。処理モジュール113により処理された信号は、伝送モジュール115を介して出力される。
具体的には、睡眠補助装置110は、使用者に着用される場合、睡眠の邪魔にならない軟質又は弾性材料の材質のヘッドセット装置であってよい。睡眠補助装置110は、ヘッドセット装置のみに限定されず、検出接点を有する如何なる装置であってもよい。検出接点は、使用者の頭の皮膚に接続されており、信号を捕捉モジュール111に提供することができ、使用者の頭による生理信号を受動的に検出する。検出接点により検出された信号は、少なくとも、脳の位置に近い生理信号と脳の位置から離れた生理信号を含む。捕捉モジュール111は、検出接点により提供された生理信号に基づいて、ノイズ及び無関係の生理信号を除去して、複数の所定の周波数帯域を含む脳波信号112を捕捉する。
例としては、脳波信号は、脳から生じる電流活動の1つの形式であり、それぞれ、3〜7ヘルツ(Hz)の周波数帯域範囲にあるθ波、8〜12ヘルツの周波数帯域範囲にあるα波、及び18〜30ヘルツの周波数帯域範囲にあるβ波を含む。つまり、捕捉モジュール111は、捕捉された脳波信号112の信号に対して増幅、正規化及びノイズ除去を行い、脳波信号112に含まれるα波、β波及びθ波等の所定の周波数帯域を取得する。
次に、処理モジュール113は、脳波信号112の複数の所定の周波数帯域における各々の指数を取得するために前記脳波信号112を分析して、更に、複数の所定の周波数帯域における各々の指数に基づいて不眠度パラメータを算出することに用いられる。
例としては、下記の表1を参照すると、表1は、本発明の一実施例による脳波信号の所定の周波数帯域を表示する指数表である。
表1に示す指数は、異なる使用者が異なる不眠度にある状態である。例としては、使用者A〜使用者Eの何れも睡眠補助装置110を着用すれば、睡眠補助装置110の捕捉モジュール111は、使用者A〜使用者Eの脳波信号112を即時に捕捉する。続いて、睡眠補助装置110の処理モジュール113は、使用者A〜使用者Eの脳波信号112を分析し始め、α波、β波及びθ波等の所定の周波数帯域における対応する指数を別々に取得する。上記指数の範囲は、0〜10x、0〜10y及び0〜10zにあり、ただし、x、y、zは、通常の係数である。これらの指数は、各周波数帯域の脳波信号を正規化して得られたものである。正規化された指数は、各使用者の各周波数帯域における脳波信号を推定することに用いられることができ、例えば、使用者Aのθ波信号:α波信号:β波信号は、処理された後で約7:7:2となり、これらの指数を介して使用者の現在の不眠度パラメータを算出することができる。説明すべきなのは、上記指数は、単に例を挙げて説明するためのものであり、本発明を制限するためのものではなく、脳波信号に基づいて指数を生じることのできる技術であれば、何れも本発明で保護された範囲にある。
更に、表1を例にして、使用者Bの脳波信号112のθ波、α波及びβ波等の所定の周波数帯域における指数は、それぞれ5x、6y及び3zである。睡眠補助装置110の処理モジュール113は、捕捉されたθ波、α波及びβ波の指数に基づいて使用者Bの不眠度パラメータを算出する。
説明すべきなのは、上記の不眠度パラメータは、それぞれ使用者の不眠度を示すことができる。例としては、表2に示すように、パラメータ値0〜15の分類1は、使用者が「入眠直前」の状態にあることを示し、パラメータ値15〜20の分類2は、使用者が「少し疲れを感じる」状態にあることを示し、パラメータ値20〜30の分類3は、使用者が「入眠直前に目が覚める」状態にあることを示し、パラメータ値30〜60の分類4は、使用者が「眠りたいのに眠れない」状態にあることを示し、パラメータ値60〜100の分類5は、使用者が「昼間のことをしきりに思い出す」状態にあることを示す。しかしながら、上記の脳波信号指数と不眠度パラメータは、単に例を挙げて説明するためのものであり、本発明を制限するためのものではない。
本実施例において、サーバー120は、複数の比較データを保存する。比較データは、以前記録された使用者の脳波の変化、及び脳波の変化に対応して出力された音等のデータを含み、更に、場所、時間又は他の使用者の身分の生理データを含んでもよい。睡眠補助装置110は、不眠度パラメータに対応するパラメータ信号114を、伝送モジュール115を介して無線伝送によってサーバー120に即時に伝送する。サーバー120は、更に、伝送モジュール115からパラメータ信号114を受信して、保存された比較データとパラメータ信号114との比較をして、また比較結果に基づいて、出力中の音を切り替え又は所定の音を出力するフィードバック信号116を生じるかどうかを決めることに用いられる。フィードバック信号116は、出力中の音を他の音に切り替える命令を含む。例えば、使用者の脳波状態が長時間睡眠状態にならず、延いてはよりはっきりした不眠度の分類へ変化する場合、サーバー120は、出力装置に出力中の音を変化させるように命令するフィードバック信号116を生じ、即ち、出力中の音を切り替える上記の命令は、所定の音を出力する命令である。又は、サーバー120は、使用者の脳波がある不眠度の分類となり、一定の期間にわたっても変化しないと判断する場合、履歴記録に基づいてこの状態でこの使用者に最も有効な睡眠補助音楽を選択し、出力装置が出力するように命令するフィードバック信号116を生じる。サーバー120は、使用者の現在の不眠度の分類、システムの当時の時間等の様々な条件に基づいて、使用者個人又はグループの履歴記録データを随時に比較して、最も睡眠補助効果のある所定の音を選択し、又は全ての出力可能な音の優先レベルを配列してから、優先レベルの高い音を選択して出力装置が出力するように命令するフィードバック信号116を生じてもよい。つまり、上記所定の音は、サーバー120が比較データとパラメータ信号114に基づいて決められる。
また、サーバー120は、フィードバック信号116を無線伝送によって電子装置130に即時に伝送して、電子装置130を制御して所定の音を出力させて使用者に聞かせる。サーバー120は、パラメータ信号114に基づいて、使用者が所定の音を聞いた時の不眠度パラメータを記録し、その不眠度パラメータの変化に基づいて後のフィードバック信号116を生じる。本発明の一実施例において、サーバー120内に、例えば出力リスト又は音ファイルリストのような、電子装置130が出力可能な音データが予め保存されており、サーバー120は、これらの音データに基づいて音を選択し、電子装置130を制御して所定の音を出力させるフィードバック信号116を生じる。本発明の別の実施例において、電子装置130内に出力リスト又は出力可能な音ファイルリストの音データが保存されており、サーバー120が電子装置130から出力可能な音の音データを取得し、この音データに基づいて、電子装置130に所定の音を出力させるように制御するフィードバック信号116を生じてもよい。本発明の別の実施例において、サーバー120は、電子装置130に出力音を切り替えるフィードバック信号116を直接に生じ、電子装置130が内部の音データに基づいて出力する音を順を追って出力し又は任意に切り替え、更に、サーバー120に新たに出力する音が何であるかを知らせる信号を生じてもよい。
つまり、本発明の睡眠補助システム100は、学習能力を有するものであり、サーバー120に保存された比較データと使用者の不眠度パラメータとの比較をして、所定の音に対応するフィードバック信号116を電子装置130に伝送し、電子装置130に使用者に最も適している睡眠補助音楽を出力させて、使用者の睡眠に寄与する。説明すべきなのは、電子装置130は、例えば、MP3、クラクション、スマートハンドヘルド装置、コンビュータ又はテレビ等のような、音を出力する機能を持つ如何なる装置であってもよい。本発明の睡眠補助システム100は、従来の電子装置130にインストールするためのアプリケーションプログラムを更に提供してもよい。アプリケーションプログラムは、使用者に操作させるための使用者インターフェースを提供してもよい。使用者は、アプリケーションプログラムによって即時的な脳波信号の情報、又はサーバー120から脳波と出力された音の履歴記録、及び各出力可能な音の睡眠補助効果の評価結果を取得することができる。また、使用者は、使用者インターフェースによって音の出力リストを設定し、又は出力可能な音の出力優先順位を調整することができる。
別の実施例において、図1Bに示すように、睡眠補助装置110は、電子装置130を更に含む。つまり、電子装置130は、睡眠補助装置110の内に内蔵される音を出力する出力モジュールであってよいが、これに限定されない。
また、サーバー120は、フィードバック信号116を電子装置130に伝送して、出力する音を選択ことができるだけでなく、更にフィードバック信号116によって電子装置130が出力する音の音量を制御することができる。
例としては、使用者が電子装置130から出力された所定の音を聞いて、次第に疲れを感じる場合、サーバー120は、受信したパラメータ信号114に基づいて、使用者が入眠状態になると判断する。続いて、サーバー120は、パラメータ信号114に基づいて、対応するフィードバック信号116を電子装置130に伝送する。電子装置130は、フィードバック信号116に対応して所定の音の音量を次第に小さくすることができる。使用者が完全に寝入った場合、対応するフィードバック信号116は、電子装置が所定の音の出力を停止し又は待機モードに入ることを可能にする。使用者の脳波のパラメータ信号114がより深い睡眠状態になっていないことを検出した場合、サーバー120は、電子装置130を制御して出力中の音を切り替えることができる。フィードバック信号116は、サーバー120がパラメータ信号114に基づいて生じたものであるため、サーバー120は、使用者の脳波状態に基づいて電子装置130を即時に制御して、使用者が入眠することに寄与する。また、使用者によって、出力された音で与えられる影響も変わるため、サーバー120は、異なる使用者のパラメータ信号114が異なる状態で異なる音による影響の程度を別々に記録するとともに、異なる使用者の脳波の即時的な状態に対して、電子装置130を制御して睡眠に最も寄与可能な音を出力させてもよい。
別の実施例において、図1Cに示すように、睡眠補助システム100は、ディスプレイ装置140を更に備える。例としては、使用者が寝入る前にテレビ番組又は他のビデオを見ることに慣れるが、入眠前に表示装置をオフにすることを忘れる場合があり、本発明のサーバー120は、伝送モジュール115からパラメータ信号114を受信して、パラメータ信号114に基づいて使用者の脳波信号112の状態を判断することに用いられることができる。サーバー120は、使用者が睡眠状態になると判断する場合、パラメータ信号114に基づいてフィードバック信号116を生じ、フィードバック信号116をディスプレイ装置140に伝送して、ディスプレイ装置140の表示輝度を次第に低下させ、ビデオの出力を停止し又は待機モードに入るように即時に制御する。つまり、フィードバック信号116は、ディスプレイ装置140の輝度を制御する命令又はディスプレイ装置140をオフにする命令を含む。
別の実施例において、図1Dに示すように、睡眠補助システム100は、スピーカー装置150を更に備える。例としては、スピーカー装置150は、音を出力するために用いられる。スピーカー装置150は、現在出力中の音の情報をサーバー120に伝送するとともに、サーバー120からフィードバック信号116を受信して、フィードバック信号116によって現在出力中の音を他の音に切り替える。つまり、サーバー120は、フィードバック信号116をスピーカー装置150に伝送して、スピーカー装置150が音量を次第に低下させ、音の出力を停止し又は待機モードに入るように即時に制御することに用いられる。フィードバック信号116は、音を出力する出力装置(例えば、スピーカー装置150)をオフにし、又は出力装置が出力する音音量を制御する命令を含む。
図2Aを参照すると、図2Aは、本発明の一実施例による睡眠補助システムの取扱方法200を示すフロー図である。以下、取扱方法200についての叙述によって、本案の具体的な細部を更に叙述する。この取扱方法200は、上記各実施例に適用されることができるが、これらに限定されない。
まず、脳波信号112を捕捉する工程S201を実行する。例としては、図1A及び図2Bを同時に参照すると、図2Bは、睡眠補助システムの操作模式図である。例としては、睡眠補助装置110は、着用可能な電子装置であってよい。使用者は、睡眠補助装置110を頭の位置に着用して、睡眠補助装置110における捕捉モジュール111が使用者の脳波信号112を捕捉するようにしてよい。
別の実施例において、工程S201は、脳波信号112の信号に対して増幅、ノイズ除去、正規化及び他の関連演算を行って、複数の所定の周波数帯域信号を取得する工程を更に含む。例としては、脳波信号は、脳から生じる電流活動の1つの形式であり、それぞれα波、β波及びθ波を含む。睡眠補助装置110における捕捉モジュール111は、捕捉された脳波信号112の信号に対して増幅及びノイズ除去を行い、脳波信号112に含まれるα波、β波及びθ波等の所定の周波数帯域信号を取得する。
続いて、複数の所定の周波数帯域における各々の指数を取得するために脳波信号112を分析する工程S203を実行する。
具体的には、睡眠補助装置110における処理モジュール113は、使用者の脳波信号112を分析し、α波、β波及びθ波等の所定の周波数帯域における各々の指数(例えば、上記の表1)を取得することに用いられる。
続いて、複数の所定の周波数帯域における各々の指数に基づいて不眠度パラメータを算出する工程S205を実行する。
例としては、上記の表1を参照すると、使用者Bを例にして、使用者Bの脳波信号112のθ波、α波及びβ波の指数は、それぞれ5x、6y及び3zであり、x、y、zは、通常の係数である。睡眠補助装置110の処理モジュール113は、θ波、α波及びβ波の指数に基づいて不眠度パラメータを算出し、使用者の現在の脳波状態がどの分類であるかを判断する。
その後、不眠度パラメータに対応するパラメータ信号114を伝送し、パラメータ信号114と比較データとの比較をして、脳波信号112の不眠度パラメータが変化したかどうかを判断する工程S207を実行する。
例としては、サーバー120は、複数の比較データを含む。睡眠補助装置110の処理モジュール113は、使用者の脳波信号112を捕捉し、使用者の不眠度パラメータに対応してパラメータ信号114を生じる。続いて、伝送モジュール115は、使用者の不眠度パラメータに対応するパラメータ信号114をサーバー120に伝送する。この場合、サーバー120は、伝送モジュール115からパラメータ信号114を受信して、パラメータ信号114と保存された複数の比較データとの比較をして、脳波信号112の不眠度パラメータが変化したかどうかを判断する。
その後、比較結果に基づいて、出力中の音を切り替える命令を含む、対応するフィードバック信号116を生じる工程S209を実行する。
具体的には、異なる音の各使用者に対する影響が全部同じではなく、各使用者の眠れない程度の状態も異なるため、パラメータ信号114を受信して、出力装置を制御するたびに、サーバー120は、異なる使用者のパラメータ信号114が異なる状態で異なる音を聞いて影響される程度を別々に記録することによって、使用者の習慣及び音の不眠状態に対する影響程度に基づいて、使用者に最も適している睡眠補助音楽を見つけ、対応するフィードバック信号116を電子装置130に伝送して、電子装置130がサーバー120が提案した睡眠補助音楽を出力することができる。つまり、サーバー120は、比較結果に基づいて、出力中の音を他の音に切り替える命令を含む対応するフィードバック信号116を生じる。本発明の一実施例において、サーバー120は、比較データとパラメータ信号114に基づいて所定の音を決め、対応するフィードバック信号116を生じる。フィードバック信号116は、出力中の音を上記所定の音に切り替える命令を含む。本発明の別の実施例において、サーバー120は、電子装置130に出力する音を切り替えらせるフィードバック信号116を直接に生じ、電子装置130が出力する音を順を追って出力し、又は任意に切り替え、更に、サーバー120に新たに出力する音が何であるかを知らせる信号を生じてもよい。
別の実施例において、取扱方法200は、パラメータ信号114に基づいて不眠度パラメータ及び所定の音を記録する工程を更に備える。
例としては、使用者が睡眠補助装置110を用いる場合、サーバー120は、使用者の使用状況に基づいて、使用者の不眠度パラメータ及び聞いた所定の音を記録して、使用者が所定の音を聞く時に脳波状態の生じる変化を算出し、対応するフィードバック信号116を即時に生じる。使用者が一定の期間にわたって現在出力中の音を聞いたと検出するが、不眠度パラメータが依然として低下できず又は睡眠状態にならない場合、出力中の音を切り替えるフィードバック信号116を生じる。また、使用者が現在出力中の音を聞いたにもかかわらず、使用者の不眠度パラメータが眠れない方向へ変化して一定の幅を超えると、再度出力中の音を切り替えるフィードバック信号116を生じ、この時に聞いた音と不眠度パラメータの状態を記録する。その後、睡眠補助システムは、出力する音を選択する場合、これらの記録に基づいて、使用者が聞いた時に睡眠の補助にならない音を先に出力されないようにその優先レベルを低下させる。更には、使用者の脳波が異なる不眠度の分類となる場合、異なる音に対応して、好ましい睡眠補助効果を有することがある。本発明の睡眠補助システムは、使用者の聞いた音を記録しその脳波状態の変化を追跡するため、これらの記録に基づいて、使用者の脳波状態の分類によって、この場合最も有効な睡眠補助音を選択することができる。
理解すべきなのは、上記実施形態で言及した取扱方法の工程については、その順序を特に説明しない限り、何れも実際の需要に応じてその前後順序を調整することができ、延いては同時又は部分的に同時に実行されることができる。
別の実施例において、睡眠補助システム100は、ディスプレイ装置140を更に備える。取扱方法200は、フィードバック信号116をディスプレイ装置140に伝送して、フィードバック信号116に対応して、ディスプレイ装置140の表示光源を次第に少なくする工程を更に備える。
例としては、図1Cを参照すると、ディスプレイ装置140は、テレビであってよい。使用者が睡眠補助装置110を着用しテレビ映像を見る場合、睡眠補助装置110は、使用者の脳波状態を検出し、パラメータ信号114をサーバー120に伝送する。サーバー120は、前記パラメータ信号114に基づいてフィードバック信号116をテレビに伝送する。使用者が睡眠状態になろうとする場合、フィードバック信号116は、テレビを制御して表示輝度を次第に小さくする。使用者が寝入った場合、サーバー120は、パラメータ信号114に基づいてフィードバック信号116を伝送してテレビをオフにする。説明すべきなのは、ディスプレイ装置140は、MP3、スマートハンドヘルド装置、コンビュータ、テレビ又は画面表示機能を持つ如何なる装置であってもよい。
別の実施例において、睡眠補助システム100は、スピーカー装置150を更に備える。取扱方法200は、フィードバック信号116をスピーカー装置150に伝送して、スピーカー装置150の音量をフィードバック信号116に対応して次第に小さくする工程を更に備える。
例としては、図1Dを参照すると、スピーカー装置150をテレビとすることができる。使用者が睡眠補助装置110を着用しながらテレビの音楽を聞く場合、睡眠補助装置110は、使用者の脳波状態を検出し、パラメータ信号114をサーバー120に伝送する。サーバー120は、前記パラメータ信号114に基づいてフィードバック信号116をテレビに伝送する。使用者が睡眠状態になろうとする場合、フィードバック信号116は、テレビを制御し、テレビの音量を次第に小さくする。使用者Bが寝入った場合、サーバー120は、パラメータ信号114に基づいてテレビをオフにする。説明すべきなのは、スピーカー装置150は、MP3、スマートハンドヘルド装置、コンビュータ、テレビ、クラクション又は音を出力する機能を持つ如何なる装置であってもよい。
別の実施例において、図3を参照すると、図3は、本発明の一実施例による睡眠補助システムの取扱方法300を示すフロー図である。取扱方法300は、工程S201、S203、S205、S207、S209に加え、工程S301及びS303を更に備える。工程S201、S203、S205、S207、S209は、既に前の実施例において紹介されたため、ここで繰り返して説明しない。
工程S209を実行した後、続いて、使用者が入眠したかどうかを判断する工程S301を実行する。
例としては、サーバー120は、使用者の使用状況によって使用者の不眠度パラメータ及び聞いた所定の音を記録し、不眠度パラメータに対応するパラメータ信号114に基づいて使用者が入眠したかどうかを判断する。使用者が入眠していない場合、睡眠補助装置110の捕捉モジュール111は、再度、使用者の脳波信号112を捕捉し、パラメータ信号114をサーバー120に伝送して、サーバー120が使用者の不眠度パラメータの変化及び聞いた所定の音を持続的に記録するようにする。続いて、サーバー120は、更に対応するフィードバック信号116を電子装置130に伝送して、電子装置130に、使用者の入眠に最も適している睡眠補助音楽を出力させる。
その後、フィードバック信号116を電子装置130に伝送して、電子装置130がフィードバック信号116に対応して所定の音の音量を次第に小さくする工程S303を実行する。
例としては、使用者が睡眠補助装置110を着用しながら電子装置130の出力している音を聞く場合、睡眠補助装置110は、使用者の脳波状態を検出し、パラメータ信号114をサーバー120に伝送する。サーバー120は、前記パラメータ信号114に基づいてフィードバック信号116を電子装置130に伝送する。使用者が睡眠状態になろうとする場合、フィードバック信号116は、電子装置130に出力する音の音量を次第に低下させる。使用者が寝入った場合、サーバー120は、使用者の脳波信号112に対応するパラメータ信号114に基づいて電子装置130に音楽の出力を停止させる。
上記実施例の説明から、本発明の睡眠補助システム及びその取扱方法は、使用者の脳波信号に基づいて使用者の入眠に適している音楽を自動的に選択し、使用者の使用状況を即時に記録して、使用者が順調に入眠することに寄与することができることが分かった。また、本発明の睡眠補助システム及びその取扱方法は、更に使用者の周囲環境の電子装置を調整することができる。使用者が入眠する場合、使用者の脳波信号に基づいて、周囲環境の電子装置からの光源及び/又は音源を次第に少なくし、使用者がより順調に入眠できるようにすることができる。本発明の睡眠補助システムは、異なる状况に好適に用いられるように、規模を調整してもよい。例としては、サーバー120は、算出と通信機能を持つ任意の電子装置であってよく、又は電子装置130と結合されてもよい。睡眠補助システムの採用した通信プロトコルも、伝送距離と使用者の数によって変わる。使用者の何れも同じ住宅に位置し且つ数に制限がある場合、サーバー120は、データの伝送、保存、比較及び他の関連プログラムを実行するパソコン又は適用可能な他の電子装置であってもよく、睡眠補助装置との間で、例えばワイヤレスネットワーク又はブルートゥース通信プロトコルのような短距離の無線通信プロトコルを採用してもよい。遠く離れた数多くの使用者がいる場合、サーバー120としては、大量の演算機能を持つ中央サーバーが必要となり、且つ、広範囲の移動通信技術を採用する。使用者が一人しかいない場合、サーバー120の算出比較機能は、プロセッサとメモリを有する、対応するソフトウェアプログラムを実行するものに取って代わってもよく、このように、これらの素子は、更に、電子装置130又は睡眠補助装置110と単一の装置として一体化し、本発明の睡眠補助機能を使用者個人へ提供することができ、伝送モジュール115を介してデータ又は信号を遠隔端末装置に伝送し、又は受信する必要がなくなる。音を出力する機能を持つ電子装置又は算出装置には、通常、本発明の睡眠補助システムのアプリケーションプログラムをインストールし、前記各実施例におけるサーバー120又は電子装置130の機能を実行することができるため、本発明の睡眠補助システムは、睡眠補助装置110とアプリケーションプログラムのみを提供し、使用者の従来の電子装置に合わせれば、睡眠補助機能を実行することができる。
本案では、実施例を前述の通り開示したが、これは本案を限定するものではなく、当業者であれば、本発明の精神と領域から逸脱しない限り、多様の変更や修正を加えることができる。従って、本案の保護範囲は、後の特許請求の範囲で指定した内容を基準とする。
100 睡眠補助システム
110 睡眠補助装置
111 捕捉モジュール
112 脳波信号
113 処理モジュール
114 指数信号
115 伝送モジュール
116 フィードバック信号
120 サーバー
130 電子装置
140 ディスプレイ装置
150 スピーカー装置
200、300 取扱方法
S201、S203、S205、S207、S209、S301、S303 工程

Claims (2)

  1. 複数の所定の周波数帯域を含む使用者のリアルタイムの脳波信号を捕捉するための捕捉モジュールと、前記複数の所定の周波数帯域のそれぞれに対応する指数を取得するために前記脳波信号を分析して、前記複数の所定の周波数帯域のそれぞれに対応する指数に基づいてリアルタイムの不眠度パラメータを算出するための処理モジュールと、前記不眠度パラメータに対応するパラメータ信号を伝送するための伝送モジュールと、を含む睡眠補助装置と、
    前記伝送モジュールから前記パラメータ信号を受信するためのサーバーと、
    前記サーバーから伝送されるフィードバック信号に基づいて音を出力する出力装置と、
    を備える睡眠補助システムであって、
    前記サーバーは、使用者の過去の前記脳波信号の記録と前記脳波信号の記録に対応する過去に出力された音を含む複数の比較データを保存し、前記パラメータ信号と前記複数の比較データを比較して前記パラメータ信号の前記不眠度パラメータに対応する前記複数の比較データから前記使用者の過去の前記脳波信号の記録を一つ選択し、前記一つの前記使用者の過去の前記脳波信号の記録に対応して過去に出力された所定の音を示す比較結果を生成し、前記比較結果に対応して現在出力中の音を前記所定の音にリアルタイムで切り替える命令を含む前記フィードバック信号を生成し、前記出力装置に伝送する睡眠補助システム。
  2. 複数の所定の周波数帯域を含む使用者のリアルタイムの脳波信号を捕捉するための捕捉モジュールと、前記複数の所定の周波数帯域のそれぞれに対応する指数を取得するために前記脳波信号を分析して、前記複数の所定の周波数帯域のそれぞれに対応する指数に基づいてリアルタイムの不眠度パラメータを算出する処理モジュールと、前記不眠度パラメータに対応するパラメータ信号をサーバーに伝送する伝送モジュールと、を含む睡眠補助装置と、
    音を出力するための電子装置と、
    を備え、
    前記サーバーは、使用者の過去の前記脳波信号の記録と前記使用者の過去の前記脳波信号の記録に対応する過去に出力された音を含む複数の比較データを保存し、前記不眠度パラメータに対応したパラメータ信号と前記複数の比較データ比較して前記パラメータ信号の前記不眠度パラメータに対応した前記複数の比較データから前記使用者の過去の前記脳波信号の記録を一つ選択し、選択された前記一つの前記使用者の過去の前記脳波信号の記録に対応して過去に出力した所定の音を示す比較結果を生成し、前記比較結果に対応してリアルタイムでフィードバック信号を生成し、
    前記電子装置は、前記サーバーから前記フィードバック信号を受信して、前記フィードバック信号に基づいて現在出力中の音を前記所定の音に切り替える睡眠補助システム。
JP2014201125A 2013-12-30 2014-09-30 睡眠補助システム Active JP6365939B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW102149084A TWI551267B (zh) 2013-12-30 2013-12-30 睡眠輔助系統及其作業方法
TW102149084 2013-12-30

Publications (2)

Publication Number Publication Date
JP2015126869A JP2015126869A (ja) 2015-07-09
JP6365939B2 true JP6365939B2 (ja) 2018-08-01

Family

ID=53482432

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014201125A Active JP6365939B2 (ja) 2013-12-30 2014-09-30 睡眠補助システム

Country Status (3)

Country Link
US (1) US9566410B2 (ja)
JP (1) JP6365939B2 (ja)
TW (1) TWI551267B (ja)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10650920B2 (en) 2012-08-16 2020-05-12 Ginger.io, Inc. Method and system for improving care determination
US10741285B2 (en) 2012-08-16 2020-08-11 Ginger.io, Inc. Method and system for providing automated conversations
US20140052465A1 (en) 2012-08-16 2014-02-20 Ginger.io, Inc. Method for modeling behavior and health changes
US10276260B2 (en) 2012-08-16 2019-04-30 Ginger.io, Inc. Method for providing therapy to an individual
US10740438B2 (en) * 2012-08-16 2020-08-11 Ginger.io, Inc. Method and system for characterizing and/or treating poor sleep behavior
US10068670B2 (en) 2012-08-16 2018-09-04 Ginger.io, Inc. Method for modeling behavior and depression state
TWI551309B (zh) * 2015-08-18 2016-10-01 國立交通大學 腦波控制式睡眠環境輔助系統及其方法
US20170065792A1 (en) * 2015-09-03 2017-03-09 Withings Method and System to Optimize Lights and Sounds For Sleep
JP6608706B2 (ja) * 2016-01-04 2019-11-20 パイオニア株式会社 情報処理装置およびコンピュータプログラム
CN105895126A (zh) * 2016-03-29 2016-08-24 乐视控股(北京)有限公司 指示和控制播放音频/音视频数据的方法及装置
US10013232B2 (en) * 2016-08-29 2018-07-03 Bose Corporation Wireless speaker connection management
US10838685B2 (en) * 2017-03-23 2020-11-17 Fuji Xerox Co., Ltd. Information processing device and non-transitory computer-readable medium
CN108853679B (zh) * 2017-05-10 2023-06-06 京东方科技集团股份有限公司 智能助睡设备及其方法、服务器及系统
FR3067241B1 (fr) * 2017-06-12 2021-05-28 Rythm Systeme habitronique pour l'assistance a l'endormissement
CN107551379A (zh) * 2017-08-17 2018-01-09 重庆华凤衣道文化创意有限公司 一种便携式头戴多功能催眠仪
CN107493525A (zh) * 2017-09-18 2017-12-19 歌尔股份有限公司 蓝牙音箱及音频播放智能控制方法
CN108159547B (zh) * 2018-02-07 2021-03-26 蔡佐宾 催眠方法及催眠系统
US11204955B2 (en) * 2018-11-30 2021-12-21 International Business Machines Corporation Digital content delivery based on predicted effect
US11547350B2 (en) 2018-12-26 2023-01-10 Industrial Technology Research Institute Personalized parameter learning method, sleep-aid device and non-transitory computer readable medium
CN110047575B (zh) * 2019-03-29 2022-12-16 广东工业大学 一种基于远程决策的反馈式助眠系统
US11710576B2 (en) 2021-05-24 2023-07-25 OrangeDot, Inc. Method and system for computer-aided escalation in a digital health platform
CA3234830A1 (en) * 2021-10-08 2023-04-13 Interaxon Inc. Systems and methods to induce sleep and other changes in user states
CN114053551B (zh) * 2022-01-13 2022-05-17 深圳市心流科技有限公司 基于脑电信号的辅助入眠方法、装置、终端及存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1702560B1 (en) * 2000-06-23 2014-11-19 BodyMedia, Inc. System for monitoring health, wellness and fitness
US6488617B1 (en) * 2000-10-13 2002-12-03 Universal Hedonics Method and device for producing a desired brain state
CN101111842A (zh) * 2005-01-31 2008-01-23 皇家飞利浦电子股份有限公司 根据生理效应对歌曲分类
US8213670B2 (en) 2007-06-07 2012-07-03 Acousticsheep, Llc Sleep aid system and method
US7689274B2 (en) 2007-11-30 2010-03-30 Palo Alto Research Center Incorporated Brain-wave aware sleep management
US8768520B2 (en) * 2008-02-25 2014-07-01 Kingsdown, Inc. Systems and methods for controlling a bedroom environment and for providing sleep data
JP2009233027A (ja) * 2008-03-26 2009-10-15 Aisin Seiki Co Ltd 睡眠改善装置及び睡眠改善プログラム
CN102114303A (zh) * 2009-12-30 2011-07-06 深圳富泰宏精密工业有限公司 催眠装置及方法
CN201828822U (zh) * 2010-10-09 2011-05-11 浙江大学 一种基于使用者睡眠状态的家电控制装置
US8573980B2 (en) * 2011-04-04 2013-11-05 Sheepdog Sciences, Inc. Apparatus, system, and method for modulating consolidation of memory during sleep

Also Published As

Publication number Publication date
JP2015126869A (ja) 2015-07-09
US20150187199A1 (en) 2015-07-02
US9566410B2 (en) 2017-02-14
TWI551267B (zh) 2016-10-01
TW201524466A (zh) 2015-07-01

Similar Documents

Publication Publication Date Title
JP6365939B2 (ja) 睡眠補助システム
US10366778B2 (en) Method and device for processing content based on bio-signals
EP3001422A1 (en) Media player automated control based on detected physiological parameters of a user
CN107683399B (zh) 声音输出装置、电子装置、以及其控制方法
KR102060776B1 (ko) 생체 정보에 기반하여 외부 오디오 장치와 연동하여 동작하는 전자 장치 및 방법
EP4362010A2 (en) Headphone, reproduction control method, and program
KR20170027999A (ko) 사용자 단말 장치, 시스템 및 그 제어 방법
AU2023212604B2 (en) User interfaces for managing audio exposure
CN108874130B (zh) 播放控制方法及相关产品
CN104759017A (zh) 睡眠辅助系统及其作业方法
WO2020019858A1 (zh) 麦克风堵孔检测方法及相关产品
JP6489664B2 (ja) ヘッドセットの騒音低減方法及び装置
CN116324969A (zh) 具有定位反馈的听力增强和可穿戴系统
CN109432568B (zh) 一种辅助睡眠的方法、装置、存储介质及终端
CN113949956A (zh) 降噪处理方法、装置、电子设备、耳机及存储介质
WO2012032714A1 (en) User device, server, and operating conditions setting system
CN106648540B (zh) 一种音乐切换方法及装置
US20210026449A1 (en) Neurofeedback focus and productivity system, process, and method of use
CN105852810B (zh) 一种睡眠控制方法
CN108418959A (zh) 电子装置、输出提示信息的方法及相关产品
CN112130664B (zh) 智能降噪方法、智能唤醒方法及使用该方法的装置
CN113870883A (zh) 应用于电视机的语音信号处理方法、装置、介质及设备
CN108882083B (zh) 信号处理方法及相关产品
CN108594993A (zh) 电子装置、音频播放方法及相关产品
CN105708421B (zh) 一种入睡检测方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160412

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160622

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20161129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170329

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20170411

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20170609

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20180327

RD13 Notification of appointment of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7433

Effective date: 20180621

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20180622

R150 Certificate of patent or registration of utility model

Ref document number: 6365939

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250