JP7218232B2 - 通知システム - Google Patents

Description

本発明は、通知システムに関する。

特許文献１には、無線アダプタとスピーカが取り付けられた家電機器において何らかのアクションが発生したときに、無線アダプタが、ホームサーバを介して外部の情報サーバと信号のやり取りを行い、情報サーバから受けた信号に対応する音声通知をスピーカから出力する技術が開示されている。

特開２００５－３１１８６４号公報

ところが、スピーカから出力された音声通知は、無線アダプタ及びスピーカが取り付けられた家電機器の周囲にしか届かないため、通知を受けたいユーザは、家電機器の周囲にいる必要があり、行動が制限される場合がある。また、通知を必要としない場合にもユーザに対する通知が行われてしまうと煩わしいため、ユーザからの通知要求指示があった場合にのみユーザに通知を行えるようにしたいという要望もある。

本発明の課題は、ユーザからの通知要求指示があったときに、通知を受けるユーザに対してより的確な通知を行うことが可能な通知システムを提供することを主たる目的とする。

上記課題を解決すべく、請求項１に記載の発明は、建物内の複数箇所に設けられて周囲の音を取得する音声入力部と、前記建物内の複数箇所に設けられて通知情報を出力する出力部と、前記建物内の複数箇所に設けられて前記建物内にいる生体に係る情報を取得する取得部と、前記音声入力部と前記出力部と前記取得部を制御する制御部と、第１記憶部と、を備え、前記音声入力部は、ユーザから発せられる通知を要求する指示に係る音声を指示音声として取得し、前記取得部は、前記建物内にいる人物の中から生体である前記ユーザを識別するための情報を識別情報として取得し、前記第１記憶部は、前記通知を行う条件が成立したか否かを判断するための登録音を記憶し、前記制御部は、前記音声入力部により取得した前記音が、前記第１記憶部に記憶された前記登録音と一致した場合に、前記通知を行う条件が成立したと判断し、前記通知を行う条件が成立した場合に、前記識別情報に基づいて前記建物内にいる人物の中から前記ユーザを識別し、識別された前記ユーザに対し、前記ユーザに最も近い位置にある前記出力部から前記通知情報を出力することを特徴とする。

請求項１に記載の発明によれば、音声入力部が、ユーザから発せられる通知を要求する指示に係る音声を指示音声として取得すると、制御部は、通知を行う条件が成立した場合に、識別情報に基づいて建物内にいる人物の中からユーザを識別し、識別されたユーザに対し、ユーザに最も近い位置にある出力部から通知情報を出力するので、通知を受けるユーザの居場所を推定して通知情報を出力できることとなる。これにより、通知を受けるユーザに対してより的確な通知を行うことが可能となる。

また、通知を行う条件が成立したか否かを判断するための登録音を記憶する第１記憶部を備え、制御部は、音声入力部により取得した音が、第１記憶部に記憶された登録音と一致した場合に、通知を行う条件が成立したと判断するので、その判断の結果、取得した音と登録音が一致した場合は通知を行い、一致しない場合は通知を行わないようにすることができる。すなわち、ユーザに対する通知の的確性を向上できる。

請求項２に記載の発明は、請求項１に記載の通知システムにおいて、前記通知を行う条件が成立したか否かを判断するための登録情報を記憶する第２記憶部を備え、前記制御部は、前記取得部により取得した前記生体に係る情報が、前記第２記憶部に記憶された前記登録情報と一致とした場合に、前記通知を行う条件が成立したと判断することを特徴とする。

請求項２に記載の発明によれば、取得部により取得した生体に係る情報が、第２記憶部に記憶された登録情報と一致とした場合に、通知を行う条件が成立したと判断するので、その判断の結果、取得した生体に係る情報と登録情報が一致した場合は通知を行い、一致しない場合は通知を行わないようにすることができる。すなわち、ユーザに対する通知の的確性を向上できる。

請求項３に記載の発明は、請求項１又は２に記載の通知システムにおいて、前記ユーザを識別するためのユーザ登録情報を記憶する第３記憶部を備え、前記制御部は、前記識別情報と、前記第３記憶部に記憶された前記ユーザ登録情報とを照合して前記ユーザを識別することを特徴とする。

請求項３に記載の発明によれば、制御部は、ユーザを識別するための識別情報と、ユーザ登録情報とを照合してユーザを識別するので、建物内にいる人物の中から通知を受けるユーザを正確に識別することができる。

請求項４に記載の発明は、請求項１～３のいずれか一項に記載の通知システムにおいて、前記ユーザが所有する情報通信端末と通信するための通信部を備え、前記制御部は、前記取得部により取得された情報に基づいて、前記建物内に前記ユーザがいないと判断した場合に、前記情報通信端末に対して通知を送信することを特徴とする。

請求項４に記載の発明によれば、制御部は、取得部により取得された情報に基づいて、建物内にユーザがいないと判断した場合に、情報通信端末に対して通知を送信するので、ユーザは、たとえ建物内にいなくても通知を受けることができる。

本発明によれば、ユーザからの通知要求指示があったときに、通知を受けるユーザに対してより的確な通知を行うことが可能となる。

建物に通知システムが導入された例を示す図である。 通知システムの構成を示す図である。 記憶部の構成を示す図である。 通知システムのフローを説明するフローチャートである。

以下、図面を参照して本発明の実施の形態について説明する。ただし、以下に述べる実施形態には、本発明を実施するために技術的に好ましい種々の限定が付されているが、本発明の技術的範囲を以下の実施形態及び図示例に限定するものではない。

図１において符号１は建物を示す。この建物１は、ユーザが居住する住宅（所謂戸建て住宅）とされ、本実施形態においては二階建てとなっている。建物１の内部には、複数の部屋１ａ～１ｆがある。また、建物１の上端部には屋根２が設けられ、屋根２の下方には屋根裏部屋２ａがある。

複数の部屋１ａ～１ｆには、リビングルームやダイニングルーム、キッチン、寝室、子供部屋等の居室（日常いる部屋）の他に、浴室、玄関、階段、廊下、トイレ等のような非居室も含まれるものとする。換言すれば、建物１内において壁や床、天井によって仕切られた空間のいずれもが本実施形態における部屋１ａ～１ｆに該当し得る。

建物１に居住するユーザとしては、第１ユーザＵ１と、第２ユーザＵ２と、が含まれている。第１ユーザＵ１及び第２ユーザＵ２は共に成人とするが、これに限られるものではなく、子供（未成年者）であってもよい。ただし、ユーザとなる子供に、乳幼児は含まれないものとする。さらに、建物１には、第１ユーザＵ１及び第２ユーザＵ２以外の生体（生物、動物）がいてもよく、本実施形態における建物１には飼い犬Ｄがいる。なお、生体は、飼い犬Ｄに限らず、その他の動物でもよいし、乳幼児でもよい。すなわち、動物や乳幼児は、ユーザＵ１，Ｕ２としては見なされない。

建物１には、洗濯機３、冷蔵庫、炊飯器、電子レンジ、電気ポット、エアコン、調理用コンロ等を始めとする様々な種類の機器が複数設けられている。また、これらの機器の中には、何らかのアクションが発生したときに、内蔵された音声を出力するものがある。このような音声としては、例えば、電子レンジで調理が完了したときに出力される音声メッセージや、洗濯機３による洗濯が完了したときに出力される電子音（報知音）等が挙げられる。また、電子レンジや洗濯機３の例では、調理が完了したこと、洗濯が完了したこと、が上記の何らかのアクションに相当する。

〔通知システムの構成〕
本実施形態における通知システムは、以上のような建物１に導入されるものであり、図２に示すように、システム全体を総合的に制御する制御部１０と、記憶部１１と、音声入力部１２と、出力部１３と、取得部１４と、通信部１５と、を備える。

上記の制御部１０と、記憶部１１と、通信部１５は、同一筐体内に収納されて一つの装置として構成されている。本実施形態においては、説明の便宜上、当該装置を「情報コア装置Ａ」と称する。情報コア装置Ａは、本実施形態においては屋根裏部屋２ａに設置されているが、これに限られるものではなく、宅内のどの場所に設置されてもよいし、宅外において通信ネットワークＮ上に設置されてもよい。

音声入力部１２と、出力部１３と、取得部１４は、各々の機能を妨げない状態で同一筐体内に収納されて一つのユニットとして構成されている。本実施形態においては、説明の便宜上、当該ユニットを「部屋内ユニットＢ」と称する。部屋内ユニットＢは、複数の部屋１ａ～１ｆのそれぞれに設けられている。

なお、部屋内ユニットＢの配置は、各部屋１ａ～１ｆの、又は建物１全体の動線を考慮することが望ましい。また、部屋内ユニットＢは、建物１の全部屋１ａ～１ｆに設置されることが望ましいが、建物１全体の動線を考慮して配置することで個数を最低限にしてもよい。具体的には、建物１内を、音声入力部１２によって音声を取得でき、かつ出力部１３によって音声を広い範囲に拡散できる条件で複数のエリアに分け、各エリアに部屋内ユニットＢを設置するようにしてもよい。さらに、必要に応じて、音声入力部１２と、出力部１３と、取得部１４を同一筐体内に収納せずに、建物１全体の動線を考慮した位置に個別に設けるようにしてもよい。

情報コア装置Ａの筐体には、接続線１６用のインターフェース１６ａが設けられ、情報コア装置Ａと各部屋内ユニットＢは、接続線１６によってデータ通信可能に接続されている。なお、接続線１６などの有線接続に限られず、例えば無線ＬＡＮなどの通信ネットワークを利用した無線接続によってデータ通信を行うようにしてもよい。

また、接続線１６と同様の配線で、情報コア装置Ａから各部屋内ユニットＢへの電力供給用の電気線を配線してもよい。各部屋内ユニットＢへの電力供給は、部屋内ユニットＢごとに行われてもよい。

制御部１０は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）等を備えたコンピュータであり、記憶部１１に記憶された各種プログラムを実行することができる。すなわち、制御部１０による制御に基づいて、通知システムを構成する各部の動作を実行することができる。

記憶部１１（すなわち、第１記憶部、第２記憶部、第３記憶部を指す。）は、例えばＲＡＭ、ＲＯＭ、不揮発性メモリ、ハードディスクドライブ等により構成され、図３に示すように、制御部１０によって実行される各種プログラムや、各種プログラムの実行に必要な各種データが記憶されている。

記憶部１１に記憶された各種プログラムとしては、音声認識プログラム１１ａ、周囲音声判断プログラム１１ｂ、ユーザ識別プログラム１１ｃ、居場所特定プログラム１１ｄ、通知音声出力プログラム１１ｅ、外部通信プログラム１１ｆ等が記憶されている。これら各種プログラムに基づくシステムの動作については後述する。

記憶部１１に記憶された各種データとしては、ユーザ登録情報１１ｇ、機器登録情報１１ｈ、生体登録情報１１ｉ、指示内容データ１１ｊ、出力用音声データ１１ｋ、ユニット登録情報１１ｍ等が記憶されている。

ユーザ登録情報１１ｇには、ユーザＵ１，Ｕ２の氏名及び呼び名（一人称の場合、ニックネームの場合）に係る情報が含まれる。また、ユーザ登録情報１１ｇには、取得部１４によるユーザ識別の識別情報が含まれる。例えば、ユーザ識別を顔認証で行う場合は、ユーザＵ１，Ｕ２の顔に係る情報が含まれるものとする。さらに、ユーザ登録情報１１ｇには、ユーザＵ１，Ｕ２が発する声の情報が含まれてもよい（少なくとも話者認識が可能な程度の声の情報を指し、「誰」が認識できる情報を指す）。

機器登録情報１１ｈには、通知システムによる通知が行われる機器の情報であり、機器の種類に関する情報（何の機器であるか）、機器が発する何らかのアクションに対応した周囲音声（報知音や音声メッセージ）の種類（すなわち、登録音を指す。）、機器の状態に関する情報（すなわち、登録情報を指す。）が含まれる。また、機器登録情報１１ｈは、機器のメーカーから提供を受けてもよいし、ユーザＵ１，Ｕ２がシステムに対して登録してもよい。なお、機器登録情報１１ｈの登録をユーザＵ１，Ｕ２自身が行う場合は、音声入力部１２で実際の報知音や音声メッセージを記憶させたり、静止画や動画を含む画像データによって機器の状態（例えば、お知らせランプの点滅、エラー表示等のような視覚によって確認される情報など）を記憶させたり、後述する外部の情報通信端末４，５を利用して登録したりすることができるものとする。

生体登録情報１１ｉは、通知システムによる通知が行われる生体の情報であり、生体の種類に関する情報（どの生体であるか）、生体が発する何らかのアクションに対応した周囲音声（例えば泣き声や鳴き声等の音声、笑い声などその他の音声でも可。）の種類（すなわち、登録音を指す。）、生体の状態に関する情報（すなわち、登録情報を指す。）が含まれる。生体登録情報１１ｉは、ユーザＵ１，Ｕ２がシステムに対して登録する。なお、生体登録情報１１ｉの登録をユーザＵ１，Ｕ２自身が行う場合は、音声入力部１２で音声を記憶させたり、静止画や動画を含む画像データによって生体の状態（例えば、飼い犬Ｄの顔や体における動作、乳幼児の顔や体における動作等のような視覚によって確認される情報など）を記憶させたり、後述する外部の情報通信端末４，５を利用して登録したりすることができるものとする。

指示内容データ１１ｊは、ユーザＵ１，Ｕ２から通知を要求する指示を受けた場合の当該指示の内容を指す。ユーザＵ１，Ｕ２からの指示は、通常、音声入力部１２で取得した音声によるものであるため、取得した指示の音声は、上記の音声認識プログラム１１ａによって音声認識処理（テキストデータ化）されて記憶される。音声認識処理されることで、特に、対象となる機器又は生体の種類、周囲音声の種類、通知を受けたい通知対象のユーザＵ１，Ｕ２が特定される。

指示内容データ１１ｊの具体的な例を挙げると、「洗濯が終わったら私に教えて」という指示の場合、「洗濯」が、対象となる機器の種類（洗濯機３）を特定し、「終わったら」が、その機器の動作完了時の報知音を特定し、「私」が通知を受けたいユーザＵ１，Ｕ２を特定している。

なお、指示内容データ１１ｊは、音声認識処理されたものだけでなく、最初からテキスト化されているデータでもよい。換言すれば、ユーザＵ１，Ｕ２からの通知要求指示は、必ずしも音声によるものだけではなく、後述する外部の情報通信端末４，５を利用してテキストデータによる通知要求指示を行えるようにしてもよい。

出力用音声データ１１ｋは、ユーザＵ１，Ｕ２に対して通知される音声（通知音声）を合成するための素になる様々な音声素片データを指す。ユーザＵ１，Ｕ２に対して通知される音声は、これらの音声素片データを適宜繋ぎ合わせて合成させることで構成されている。音声素片データである出力用音声データ１１ｋは、上記の通知音声出力プログラム１１ｅにより適宜合成される。より具体的に説明すると、対象となる機器は必ずしも洗濯機３には限られないため、主語となる音声素片と、述語となる音声素片を、機器又は生体の種類に応じて登録しておき、適宜合成できるようにする。このようにすれば、主語として、洗濯機３の場合は「洗濯が」が抽出され、電子レンジの場合は「調理が」が抽出され、述語としては「終わりました」が共通して使えるようになる。

ユニット登録情報１１ｍは、建物１内の複数の部屋１ａ～１ｆに設けられた各部屋内ユニットＢの個々の登録情報である。すなわち、どの部屋内ユニットＢが、どこの部屋に設けられているかを判別するための情報であり、例えば複数の部屋内ユニットＢすべてにナンバリングを行うなどして判別できるようにする。なお、本実施形態においては、部屋内ユニットＢごとの登録情報としているが、これに限られるものではなく、音声入力部１２ごと、出力部１３ごと、取得部１４ごとに登録情報があってもよい。

音声入力部１２は、周囲の音声を集音する所謂マイク（マイクロフォン）であり、全指向性（無指向性）のものが好適に使用されるが、これに限られるものではない。音声入力部１２は、当該音声入力部１２が設けられた場所の音声を常時集音しているものとする。そして、ユーザＵ１，Ｕ２の通知要求指示に係る指示音声と、機器又は生体から生じる周囲音声（報知音、音声メッセージ、鳴き声、泣き声等）を取得する。

出力部１３は、周囲に音声を発する所謂スピーカであり、広指向性のものが好適に使用されるが、これに限られるものではない。出力部１３は、ユーザＵ１，Ｕ２に対して通知を行う際に音声を出力する。また、ユーザＵ１，Ｕ２からの指示を受け付けたときに、正常に受け付けられた旨を報知する音声を出力してもよい。なお、スピーカの他にも、発光装置（発光部）や、文字を表示可能なモニタを出力部１３として用いてもよい。すなわち、出力部１３から出力される通知情報は、本実施形態においては音声とするが、これに替えて、光や文字による通知情報を出力してもよい。

取得部１４は、建物１内にいる人物の中から生体であるユーザＵ１，Ｕ２を識別するための情報（すなわち、識別情報を指す。）を取得するのに用いられるセンサ類である。このような取得部１４としては、例えば、カメラ（画像センサ）、動作検知センサ、ユーザＵ１，Ｕ２を体温で判別する温度センサ、人の存在を感知する赤外線センサ、ユーザＵ１，Ｕ２の体重を検知する圧力センサ（床に敷設される。）、ユーザＵ１，Ｕ２の声を認識する音声認識システム等が適宜採用される。また、取得部１４として採用されるものは一つのセンサでもよいし、複数のセンサを複合したものでもよい。さらに、建物１内にいる人物の歩き方を、圧力センサ又は音（例えば音声取得部１２により取得）によって取得したり、人の存在を、水道（浴室、洗面所、キッチン、庭等における水道）の吐水量や、温度状況（温度、空調による温度設定）で判別したり、人の存在を、住宅設備（住宅内外にある設備、機器等）の使用状況、使用時間帯で判別してもよい。

本実施形態における取得部１４としては、カメラが採用される。カメラには公知の顔認証システム（２Ｄ対応型又は３Ｄ対応型）が搭載されており、撮影された画像からユーザＵ１，Ｕ２の顔検出及び顔認証が可能となっている。また、カメラによって撮影される画像は動画でもよいし、静止画でもよい。静止画の場合は、カメラに映る画像から適宜切り出せばよい。なお、カメラを採用すれば、顔検出及び顔認証だけでなく、体格などの外的形状からもユーザＵ１，Ｕ２の特定が可能となる。

また、本実施形態においては、上記のカメラと共に、動作検知センサが採用される。動作検知センサは、建物１内における人の動作を検知するセンサである。動体検知センサによって人の動作が検知されると、カメラは、動作を検知された人の顔検出及び顔認識を行う。そのため、建物１内におけるユーザＵ１，Ｕ２の居場所をすぐに判明させることができる。

なお、本実施形態における取得部１４として、上記のようにカメラが採用されるものとしたが、カメラによって撮影される画像は、プライバシーを考慮して録画をしないか、若しくは視聴できないように設定されている。すなわち、カメラによって撮影される画像は、ユーザＵ１，Ｕ２の識別に限定して使用されるものとする。

通信部１５は、制御部１０の制御の下、外部の情報通信端末４，５との間で、所定の通信プロトコルを用いて通信ネットワークＮを介したデータ通信（双方向）を行う。通信ネットワークＮは、特に限定されるものではなく、適宜変更可能であるが、本実施形態においては、例えば移動体通信網や、ＬＡＮ（Local Area Network）、インターネットなどのＷＡＮ（Wide Area Network）等により適宜構成されるものとする。

また、外部の情報通信端末４，５は、上記の制御部１０や記憶部１１、音声入力部１２、出力部１３、取得部１４、通信部１５のように通知システムを直接的に構成するものとは異なり、通信部１５のみを介して接続された端末装置である。したがって、これら情報通信端末４，５は、建物１内に設置されてもよいし、建物１が建築された敷地外にあってもよい。本実施形態において、情報通信端末４はユーザＵ１，Ｕ２又はその家族が使用するパソコンを指し、情報通信端末５はユーザＵ１，Ｕ２又はその家族が所持するスマートフォンやタブレットＰＣ等の携帯端末を指している。パソコンやスマートフォンの他に、例えば建物１内に設置されて建物１で使用される電力等のエネルギーを表示するモニタなどを情報通信端末４，５として採用してもよい。

情報通信端末４，５は、通知システムに対し、少なくとも音声入力データ（音声データ）又は文字入力データ（テキストデータ）の送信が可能に構成されている。これにより、通信部１５を介して通知システムに対し、音声又はテキストの状態の通知要求指示を入力することができる。

〔通知システムの動作〕
次に、図１～図４を参照し、以上のように構成された通知システムの動作について説明する。通知システムの動作は、ユーザＵ１，Ｕ２から通知を要求する指示を受けた場合に、制御部１０が、記憶部１１に記憶された各種プログラムを実行することによって行われる。

なお、記憶部１１には、ユーザ登録情報１１ｇ、機器登録情報１１ｈ、生体登録情報１１ｉ、出力用音声データ１１ｋが事前に登録されているものとする。また、本実施形態においては、第１ユーザＵ１が洗濯作業を行う担当者となっており、第２ユーザＵ２が飼い犬Ｄの世話を行う担当者となっている。

第１ユーザＵ１は、洗濯機３による洗濯作業を開始したら、システムに対して「洗濯が終わったら私に教えて」という音声入力を行う。すなわち、音声入力部１２は、第１ユーザＵ１の通知要求指示に係る指示音声を取得し、指示音声に応じた音声データを生成して情報コア装置Ａ側へと送信する。そして、制御部１０は、通知要求指示に係る指示音声のデータを受け付けて記憶部１１に格納する（ステップＳ１）。

なお、第１ユーザＵ１（第２ユーザＵ２）は、音声入力部１２によって指示音声を取得させようとするタイミングで、合図となる所定の掛け声を発してから指示を出すようにすることが望ましい。掛け声としては特に限定されるものではないが、例えば、通知システムに対して事前に付与された呼び名でもよいし、「通知をお願い」などのように文章化されたものでもよい。

また、洗濯機３は、部屋１ｄに設置されているが、第１ユーザＵ１が指示を出す場所は、部屋１ｄ内である必要はなく、他の部屋１ａ～１ｃ，１ｅ，１ｆから指示を出してもよいし、情報通信端末４，５を通じて外部から指示を出してもよい。

続いて、通知要求指示に係る指示音声のデータを受け付けた制御部１０は、音声認識プログラム１１ａを実行して音声認識を行う（ステップＳ２）。音声認識の結果、「洗濯が終わったら私に教えて」という指示は、対象機器として「洗濯機３」、対象動作の周囲音声として「洗濯完了時の報知音」、対象ユーザとして「第１ユーザＵ１」が特定され、指示内容データ１１ｊとして記憶部１１に記憶される。なお、情報通信端末４，５を通じて外部から音声によって指示があった場合は、同様に音声認識される。ここで、指示内容データ１１ｊと機器登録情報１１ｈに登録された登録音の情報とが紐づけされ、これにより、通知を行う条件が生成されることになる。

また、通知を行う条件の生成を完了させる前に、音声認識後のタイミングで音声認識された状態の指示の内容を音声によって出力部１３から出力し、音声認識結果の成否を第１ユーザＵ１によって確認できるようにしてもよい。音声認識に間違いがあった場合には、その間違いを、ユーザＵ１，Ｕ２が音声入力部１２又は情報通信端末４，５から指摘できるように設定されているものとする。その場合、制御部１０は、音声認識をやり直す。

なお、通知要求指示を出したユーザの声はユーザ登録情報１１ｇとして記憶されている。そのため、通知要求指示を出して音声認識を行う際に、通知要求指示を出した第１ユーザＵ１の声と、第１ユーザＵ１のユーザ登録情報１１ｇとが符合するか判断する処理を行えば、通知要求指示を出したユーザと、通知の対象となるユーザが同一であると見なすことができ、指示内容として、対象ユーザの特定を行う必要がなくなる。すなわち、「洗濯が終わったら私に教えて」という指示の内容を、「洗濯が終わったら教えて」という指示の内容に短縮することができる。記憶部１１には、このような処理を行うため、通知要求指示を出したユーザＵ１，Ｕ２の声と、ユーザＵ１，Ｕ２のユーザ登録情報１１ｇとが符合するか判断するプログラム（図示省略）が記憶されていてもよいものとする。

音声入力部１２は常時集音している状態であり、通知要求指示を受け付けた通知システムは、洗濯機３から音声（周囲音声）が生じるのを待機する待機状態となる（ステップＳ３）。なお、待機状態中は、すぐに通知を行えるように、取得部１４によって第１ユーザＵ１の居場所を常に把握するようにしてもよい。

待機状態中に、音声入力部１２が洗濯機３からの何らかの音声を取得すると（ステップＳ４）、制御部１０は、周囲音声判断プログラム１１ｂを実行し、取得した音声が、第１ユーザＵ１から受け付けた指示の内容と紐づけられた機器登録情報１１ｈの登録音と一致するか判断し、通知を行う条件が成立したか否かを判断する（ステップＳ５）。そして、判断の結果、取得した音声と登録音とが一致した場合はステップＳ６へと進み、一致していなかった場合はステップＳ３の待機状態へと戻る。

取得した音声と登録音とが一致した場合は、まず、取得部１４によって建物１内にいる人物の検知を行う（ステップＳ６）。本実施形態においては、取得部１４として動作検知センサも併用されているため、動作検知センサによって人の検知を行う。

人が検知された場合、制御部１０は、ユーザ識別プログラム１１ｃを実行し、ユーザ登録情報１１ｇに基づいて、その人が第１ユーザＵ１であるか否かを識別する（ステップＳ７）。本実施形態においては、顔認証によってユーザ識別を行うため、カメラである取得部１４のセンシング結果（識別情報）と、ユーザ登録情報１１ｇに含まれた第１ユーザＵ１の顔に係る情報との照合が行われる。

本実施形態においては、建物１内に二人のユーザＵ１，Ｕ２がいるため、二人とも取得部１４によって検知された場合には二人ともユーザ識別を行う。そして、ユーザ識別の結果、通知の対象となる第１ユーザＵ１が特定できた場合はステップＳ８へと進み、第１ユーザＵ１が特定できなかった場合はステップＳ１０へと進む。

ユーザ識別の結果、通知の対象となる第１ユーザＵ１が特定できた場合、制御部１０は、居場所特定プログラム１１ｄを実行し、各部屋内ユニットＢの設置位置情報が含まれたユニット登録情報１１ｍに基づいて、第１ユーザＵ１を識別した取得部１４が建物１内のどこに設けられた取得部１４であるかを判別し、これにより、第１ユーザＵ１の居場所を特定する（ステップＳ８）。

第１ユーザＵ１の居場所が特定できたら、制御部１０は、通知音声出力プログラム１１ｅを実行し、様々な音声素片データが含まれた出力用音声データ１１ｋに基づいて通知に係る音声（通知音声）を適宜合成し、第１ユーザＵ１の居場所の最も近い位置にある出力部１３から出力する（ステップＳ９）。なお、通知を聞いた第１ユーザＵ１が、例えば「ＯＫ」、「わかった」、「ありがとう」等のような、通知に対する了承を意味する言葉を発するまで、繰り返し同じ通知を行うように設定されてもよい。

一方、ユーザ識別の結果、第１ユーザＵ１が特定できなかった場合、制御部１０は、外部通信プログラム１１ｆを実行し、通知に係る音声又はテキストのデータを、通信部１５から通信ネットワークＮを介して情報通信端末４，５に送信する（ステップＳ１０）。なお、送信される通知のデータは、システムに連携するすべての情報通信端末４，５に送信されてもよいし、通知の対象となるユーザが、第１ユーザＵ１のみである場合は、第１ユーザＵ１が所持する情報通信端末５のみに送信されるようにしてもよい。

以上のようにして通知システムは動作する。一連の動作は、生体（本実施形態においては飼い犬Ｄ）の場合も同様である。飼い犬Ｄの世話が担当の第２ユーザＵ２が、システムに対して例えば「飼い犬Ｄが吠えたら僕に教えて」という音声入力を行うと、飼い犬Ｄの吠え声を音声入力部１２が取得した場合に、第２ユーザＵ２に最も近い位置にある出力部１３から通知に係る音声が出力されるか、情報通信端末４，５に対して通知が届く。

さらに、以上のような通知システムの動作は、機器又は生体に係る情報（機器又は生体の動作に係る情報）が、登録情報として、機器登録情報１１ｈ及び生体登録情報１１ｉに登録されているため、取得部１４によって取得される機器又は生体に係る情報でも同様に通知を行うことができる。その場合、指示内容データ１１ｊと機器登録情報１１ｈ又は生体登録情報１１ｉに登録された登録情報とが紐づけされ、これにより、通知を行う条件が生成されることになり、ステップＳ５において条件成立か否か判断される。

なお、通知システムによってユーザＵ１，Ｕ２に通知できる機器や生体の数については、機器登録情報１１ｈや生体登録情報１１ｉとして登録さえ行えば通知が可能となるため特に限定されるものではない。また、同時に複数の通知を受け付けることも可能となっているものとする。

さらに、ユーザＵ１，Ｕ２からの指示がない場合は通知を行わないように設定されている。換言すれば、記憶部１１にユーザ登録情報１１ｇが存在するユーザＵ１，Ｕ２のみが通知要求指示を行うことができる。

また、ステップＳ３の待機状態中において、通知要求指示を出したユーザＵ１，Ｕ２からの指示に基づいて待機状態の解除、すなわち通知の中止を行うことが可能なプログラム（図示省略）も記憶部１１に記憶されているものとする。通知の中止は、ユーザＵ１，Ｕ２が発する声だけでなく、情報通信端末４，５からの音声又はテキストデータによって行うこともできるものとする。

なお、本実施形態においては、建物１として戸建て住宅を採用したが、これに限られるものではなく、マンションやアパート等の集合住宅における各住戸や各種の福祉施設、会社オフィス、シェアハウス等であってもよい。また、一つの敷地内に複数の建物がある場合（例えば、完全分離型の多世帯住宅、母屋と離れ等）は、複数の建物すべてを上記の建物１としてもよいし、一つ一つの建物を上記の建物１としてもよい。

本実施の形態によれば、音声入力部１２が、ユーザＵ１，Ｕ２から発せられる通知を要求する指示に係る音声を指示音声として取得すると、制御部１０は、通知を行う条件が成立した場合に、識別情報に基づいて建物１内にいる人物の中からユーザＵ１，Ｕ２を識別し、識別されたユーザＵ１，Ｕ２に対し、ユーザＵ１，Ｕ２に最も近い位置にある出力部１３から通知情報を出力するので、通知を受けるユーザＵ１，Ｕ２の居場所を推定して通知情報を出力できることとなる。これにより、通知を受けるユーザＵ１，Ｕ２に対してより的確な通知を行うことが可能となる。

また、通知を行う条件が成立したか否かを判断するための登録音を記憶する記憶部１１を備え、制御部１０は、音声入力部１２により取得した音（周囲音声：機器又は生体から発せられる音）が、記憶部１１に記憶された登録音と一致した場合に、通知を行う条件が成立したと判断するので、その判断の結果、取得した音と登録音が一致した場合は通知を行い、一致しない場合は通知を行わないようにすることができる。すなわち、ユーザＵ１，Ｕ２に対する通知の的確性を向上できる。

また、取得部１４により取得した生体に係る情報が、記憶部１１に記憶された登録情報と一致とした場合に、通知を行う条件が成立したと判断するので、その判断の結果、取得した生体に係る情報と登録情報が一致した場合は通知を行い、一致しない場合は通知を行わないようにすることができる。すなわち、ユーザＵ１，Ｕ２に対する通知の的確性を向上できる。

また、制御部１０は、ユーザを識別するための識別情報と、ユーザ登録情報１１ｇとを照合してユーザＵ１，Ｕ２を識別するので、建物１内にいる人物の中から通知を受けるユーザＵ１，Ｕ２を正確に識別することができる。

また、制御部１０は、取得部１４により取得された情報に基づいて、建物１内にユーザＵ１，Ｕ２がいないと判断した場合に、情報通信端末４，５に対して通知を送信するので、ユーザＵ１，Ｕ２は、たとえ建物１内にいなくても通知を受けることができる。

〔変形例〕
なお、本発明を適用可能な実施形態は、上記の実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲で適宜変更可能である。以下、変形例について説明する。以下に挙げる変形例は可能な限り組み合わせてもよい。また、以下の各変形例において、上記の実施形態と共通する要素については、共通の符号を付し、説明を省略又は簡略する。

〔変形例１〕
本変形例において、ユーザＵ１，Ｕ２には、通知を要求する指示を出す通知要求ユーザと、通知を受ける対象の通知対象ユーザと、が含まれ、通知要求ユーザと通知対象ユーザは、同一人物又は別人である。すなわち、通知要求指示を出したユーザ（通知要求ユーザ）と、通知を受けるユーザ（通知対象ユーザ）は同一人物であってもよいし、通知要求ユーザと通知対象ユーザは別人であってもよい。

具体的に説明すると、通知要求ユーザと通知対象ユーザが同一人物である場合は、上記の実施形態で説明したとおり、通知を要求する指示を出したユーザＵ１，Ｕ２に対して、出力部１３から通知が行われる。

一方、通知要求ユーザと通知対象ユーザが別人である場合は、例えば通知要求ユーザが第１ユーザＵ１とした場合に、「洗濯が終わったら○○に教えて」という指示において、「○○」で示した、通知対象ユーザを特定する部分を、第２ユーザＵ２（名前、ニックネーム等）にして指示を出す。このようにすることで、通知要求指示を出したユーザは第１ユーザＵ１であるものの、通知を受ける通知対象ユーザを第２ユーザＵ２とすることができる。

本変形例によれば、通知要求ユーザＵ１，Ｕ２と通知対象ユーザＵ１，Ｕ２が同一人物である場合は、例えば、取得部１４のセンシング精度が高くない場合であっても、通知を要求する指示を出した時点のユーザＵ１（Ｕ２）を識別しておけば、通知を行う際に、建物１内にいる人物の中からユーザＵ１（Ｕ２）を識別しやすくなる。一方、通知要求ユーザＵ１，Ｕ２と通知対象ユーザＵ１，Ｕ２が別人である場合は、例えば、通知を要求する指示を出したユーザＵ１（Ｕ２）が外出しても、他のユーザＵ２（Ｕ１）が通知を受けることができるので、利便性に優れる。

〔変形例２〕
本変形例における通知システムは、ユーザＵ１，Ｕ２を識別する機能の学習を行う識別機能学習部（図示省略）を更に備える。すなわち、上記の実施形態においては、ユーザＵ１，Ｕ２を識別する場合に、取得部１４によるユーザＵ１，Ｕ２を識別するための情報の取得結果と、ユーザＵ１，Ｕ２に関する情報（ユーザ登録情報１１ｇ）とを照合してユーザＵ１，Ｕ２を識別していたが、この処理に、識別機能学習部による学習結果を反映させる。

具体的に説明すると、識別機能学習部は、通知要求指示を出した際のユーザＵ１，Ｕ２の識別結果と、待機状態中の動作検知センサによるユーザの動作の検知結果（上記のとおり、取得部１４は動作検知センサ以外のものでもよい。）と、通知を行う直前のユーザＵ１，Ｕ２の識別結果のデータを蓄積し、ユーザＵ１，Ｕ２の行動パターンを学習する。

識別機能学習部による学習においては、通知要求指示を出したユーザＵ１，Ｕ２と、待機状態中に動作するユーザＵ１，Ｕ２と、通知を受けるユーザＵ１，Ｕ２が一致している必要がある。そのため、待機状態中は、取得部１４によってユーザＵ１，Ｕ２の居場所や行動は常に把握される。また、取得部１４による取得結果は、各家庭（各ユーザ）で生活が異なり、これによって各家庭（各ユーザ）で個性が出るものであるが、識別機能学習部による学習の対象とすることで、ユーザＵ１，Ｕ２の識別精度を向上させることが可能となっている。

ユーザＵ１，Ｕ２の識別に失敗した場合には、その間違いを、ユーザＵ１，Ｕ２が音声入力部１２又は情報通信端末４，５から指摘できるように設定されているものとする。すなわち、間違った情報に基づいて学習を続けないようにすることができる。

本変形例によれば、識別機能学習部によってユーザ識別の成功率を向上させることができるので、建物１内にいる人物の中から通知を受けるユーザＵ１，Ｕ２を、より正確に識別することができる。

〔変形例３〕
本変形例における通知システムは、所謂みまもり機能を発揮することができる。みまもり機能は、遠隔地に居住する人（例えば家族）の様子、留守時の同居人の様子、特に健康状態を見守る機能を指す。見守る側のユーザと、見守られる側のユーザが存在し、少なくとも見守られる側のユーザは、建物１に居住している。見守る側のユーザは、通知を受ける対象のユーザであり、遠隔地にいてもよいし、同居していてもよい。そして、見守る側のユーザは、通信部１５及び通信ネットワークＮを介して通知システムとデータのやり取りが可能な情報通信端末を有する。

みまもり機能は、例えば、見守る側のユーザによる「○○（見守られる側のユーザ）の動きに異常があったら私に教えて」という指示に基づいて開始される。制御部１０は、動作検知センサ及び圧力センサによって見守られる側のユーザの動作を検知し、日常とは異なる動作や圧力が検知された場合（指示の内容と一致する場合）に、見守る側のユーザに対して通知を行う。

見守る側のユーザに対して通知を行う際は、まず、取得部１４によって建物１内にいる人物の検知を行う。そして、通知の対象となる見守る側のユーザが見つからない場合、制御部１０は、外部通信プログラム１１ｆを実行し、例えば「○○（見守られる側のユーザ）が床に倒れています」などの通知に係る音声又はテキストのデータを、通信部１５から通信ネットワークＮを介して情報通信端末４，５に送信する。これにより、見守る側のユーザは、見守られる側のユーザの異常を知ることができる。

その他のみまもり機能としては、見守られる側のユーザが痛がる声を発し、音声入力部１２がその音声を取得した場合に、制御部１０が、外部通信プログラム１１ｆを実行し、見守る側のユーザに対して通知を行う。また、見守る側のユーザは、通知を受けたときに情報通信端末から話しかけ、その声を、出力部１３から見守られる側のユーザに聞かせることも可能となっている。すなわち、音声入力部１２と出力部１３とを利用し、電話のように機能させることができる。

本変形例によれば、通知システムに対し、建物１に居住する人（見守られる側のユーザ）のことを見守る、みまもり機能を追加することができるので、通知システムに対して付加価値を与えることができる。

〔変形例４〕
建物１内における機器が、ネットワーク対応の通信可能な機器である場合は、建物１内におけるＬＡＮなどの通信ネットワーク（有線でも無線でもよい。）を利用し、情報コア装置Ａ（制御部１０）に対して直接的（音声入力部１２を経ず）に、周囲音声に相当するデータのやり取りを行えるようにしてもよい。つまり、例えば洗濯機３がネットワーク対応の通信可能な機器であった場合、洗濯機３から生じる周囲音声（例えば報知音）の代わりに、洗濯機３から送信されるデータに基づいて通知を行えるようにすることができる。

このような場合の通知システムは、建物１内における機器（本変形例においては洗濯機３）に生じるアクションについてユーザＵ１，Ｕ２から通知を要求する指示を受け、前記機器から前記アクションが生じた場合に前記ユーザＵ１，Ｕ２に対して通知を行う構成のものとなる。より詳細に説明すると、本変形例の通知システムは、前記アクションの発生に係る情報を入力する入力部と、前記建物１内の複数箇所に設けられて前記通知に係る音声を出力する出力部１３と、前記建物１内の複数箇所に設けられて前記建物１内にいる人物の中から前記ユーザＵ１，Ｕ２を識別するための取得部１４と、前記入力部と前記出力部１３と前記取得部１４を制御する制御部１０と、を備える。そして、前記制御部１０は、前記入力部によって前記アクションの発生に係る情報が入力された場合に、前記取得部１４を用いて前記建物１内にいる人物の中から前記ユーザＵ１，Ｕ２を識別し、識別された前記ユーザＵ１，Ｕ２に対し、前記ユーザＵ１，Ｕ２に最も近い位置にある前記出力部１３から通知に係る前記音声を出力すること特徴となる。要するに、上記の実施形態における音声入力部１２の代わりに、機器から送信されたデータを情報コア装置Ａに対して入力するための入力部が設けられることとなる。

本変形例によれば、建物１内における機器に生じるアクションについてユーザＵ１，Ｕ２から通知を要求する指示を受けると、制御部１０は、入力部からアクションの発生に係るデータが入力された場合に、取得部１４を用いて建物１内にいる人物の中からユーザＵ１，Ｕ２を識別するので、取得部１４の設けられた箇所からユーザＵ１，Ｕ２の居場所を推定できる。そして、このようにユーザＵ１，Ｕ２の居場所が推定できるので、制御部１０は、識別されたユーザＵ１，Ｕ２に対し、ユーザＵ１，Ｕ２に最も近い位置にある出力部１３から通知に係る音声を出力することができる。これにより、通知を受けるユーザＵ１，Ｕ２の居場所に関係なく、そのユーザＵ１，Ｕ２に対して通知を行うことが可能となる。

なお、本変形例における入力部は、上記の実施形態における音声入力部１２と併用することも可能となっている。これらを併用できれば、ネットワーク対応の通信可能な機器と、ネットワーク非対応の機器の区別なく通知システムによる通知が可能となるので汎用性に優れる。

〔変形例５〕
本変形例の通知システムには、上記の実施形態における出力部１３の代わりに、発光部（図示省略）が採用される。すなわち、建物１に居住するユーザＵ１，Ｕ２が聴覚障害者である場合、出力部１３から通知を行うよりも、発光部から光を発して通知を行った方が認識しやすい。また、発光部は単に光を発するだけではあるものの、通知要求指示を出したことを受けて発光するものであるため、通知手段として十分に役割を果たすことができる。

なお、ユーザＵ１，Ｕ２が聴覚障害者である場合の通知要求指示は、例えば、情報通信端末４，５からのテキストデータ送信を利用したものであってもよいし、音声入力部１２の代わりにカメラを採用し、手話による通知要求指示が出せるようにしてもよい。

〔変形例６〕
本変形例においては、部屋内ユニットＢに対して家電リモコン（図示省略）が付属している。家電リモコンとは、例えばテレビやビデオ、エアコン、照明、音楽プレーヤー等の家電をひとまとめに操作できるようにするものである。また、記憶部１１には、家電リモコンを操作するためのプログラム（図示省略）が更に記憶されている。

制御部１０は、ユーザＵ１，Ｕ２から音声入力部１２を通じて家電の操作に係る指示を受けると、上記のプログラムを実行し、家電リモコンを動作させて家電の操作を行うことができる。

家電リモコンを操作するための上記のプログラムとしては、例えば公知のバーチャルアシスタント（ＡＩ（Artificial Intelligence）アシスタントともいう）が好適に採用されている。バーチャルアシスタントは、音声入力や音声出力との相性も良いため、上記の実施形態における音声入力部１２や出力部１３の機能の一端を担うようにしてもよい。

なお、本変形例においては家電リモコンによって操作できるものとして一般的な家電製品を挙げたが、これに限られるものではなく、例えばバーチャルアシスタントと通信させやすい各種デバイスの操作を行えるようにしてもよい。各種デバイスとしては、例えば、玄関ドアや窓の電子錠、コンセントに差し込まれるとともに簡易構造の家電が接続されて当該家電の電源ＯＮ／ＯＦＦ操作（通電状態の操作）を可能とするスマートプラグ、カーテンの開閉を行う開閉装置、窓の開閉装置、シャッターの開閉装置等、種々のものが挙げられる。

また、家電リモコンは部屋内ユニットＢに付属するとしたが、必要に応じて部屋内ユニットＢには付属せずに、家電や各種デバイスの操作のしやすさを考慮した位置に個別に設けるようにしてもよい。

本変形例によれば、通知システムに対し、建物１内の家電や各種デバイスを操作する家電リモコンの機能を追加することができるので、通知システムに対して付加価値を与えることができる。

Ａ 情報コア装置
Ｂ 部屋内ユニット
Ｄ 飼い犬
Ｎ 通信ネットワーク
Ｕ１ 第１ユーザ
Ｕ２ 第２ユーザ
１ 建物
１ａ 部屋
１ｂ 部屋
１ｃ 部屋
１ｄ 部屋
１ｅ 部屋
１ｆ 部屋
２ 屋根
２ａ 屋根裏部屋
３ 洗濯機
４ 情報通信端末
５ 情報通信端末
１０ 制御部
１１ 記憶部
１１ａ 音声認識プログラム
１１ｂ 周囲音声判断プログラム
１１ｃ ユーザ識別プログラム
１１ｄ 居場所特定プログラム
１１ｅ 通知音声出力プログラム
１１ｆ 外部通信プログラム
１１ｇ ユーザ登録情報
１１ｈ 機器登録情報
１１ｉ 生体登録情報
１１ｊ 指示内容データ
１１ｋ 出力用音声データ
１１ｍ ユニット登録情報
１２ 音声入力部
１３ 出力部
１４ 取得部
１５ 通信部
１６ 接続線

Claims (4)

1. 建物内の複数箇所に設けられて周囲の音を取得する音声入力部と、
   前記建物内の複数箇所に設けられて通知情報を出力する出力部と、
   前記建物内の複数箇所に設けられて前記建物内にいる生体に係る情報を取得する取得部と、
   前記音声入力部と前記出力部と前記取得部を制御する制御部と、
   第１記憶部と、を備え、
   前記音声入力部は、ユーザから発せられる通知を要求する指示に係る音声を指示音声として取得し、
   前記取得部は、前記建物内にいる人物の中から生体である前記ユーザを識別するための情報を識別情報として取得し、
   前記第１記憶部は、前記通知を行う条件が成立したか否かを判断するための登録音を記憶し、
   前記制御部は、
   前記音声入力部により取得した前記音が、前記第１記憶部に記憶された前記登録音と一致した場合に、前記通知を行う条件が成立したと判断し、
   前記通知を行う条件が成立した場合に、前記識別情報に基づいて前記建物内にいる人物の中から前記ユーザを識別し、
   識別された前記ユーザに対し、前記ユーザに最も近い位置にある前記出力部から前記通知情報を出力することを特徴とする通知システム。
2. 前記通知を行う条件が成立したか否かを判断するための登録情報を記憶する第２記憶部を備え、
   前記制御部は、前記取得部により取得した前記生体に係る情報が、前記第２記憶部に記憶された前記登録情報と一致とした場合に、前記通知を行う条件が成立したと判断することを特徴とする請求項１に記載の通知システム。
3. 前記ユーザを識別するためのユーザ登録情報を記憶する第３記憶部を備え、
   前記制御部は、前記識別情報と、前記第３記憶部に記憶された前記ユーザ登録情報とを照合して前記ユーザを識別することを特徴とする請求項１又は２に記載の通知システム。
4. 前記ユーザが所有する情報通信端末と通信するための通信部を備え、
   前記制御部は、前記取得部により取得された情報に基づいて、前記建物内に前記ユーザがいないと判断した場合に、前記情報通信端末に対して通知を送信することを特徴とする請求項１～３のいずれか一項に記載の通知システム。

Images