JP2021086383A - 通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法 - Google Patents

通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法 Download PDF

Info

Publication number
JP2021086383A
JP2021086383A JP2019214632A JP2019214632A JP2021086383A JP 2021086383 A JP2021086383 A JP 2021086383A JP 2019214632 A JP2019214632 A JP 2019214632A JP 2019214632 A JP2019214632 A JP 2019214632A JP 2021086383 A JP2021086383 A JP 2021086383A
Authority
JP
Japan
Prior art keywords
voice
unit
identification
predetermined time
reception
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019214632A
Other languages
English (en)
Other versions
JP7341426B2 (ja
Inventor
寿 千葉
Hisashi Chiba
寿 千葉
朋範 豊田
Tomonori Toyoda
朋範 豊田
守通 古舘
Morimichi Furudate
守通 古舘
聡美 藤崎
Satomi Fujisaki
聡美 藤崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Iwate University
National Institute of Natural Sciences
Original Assignee
Iwate University
National Institute of Natural Sciences
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Iwate University, National Institute of Natural Sciences filed Critical Iwate University
Priority to JP2019214632A priority Critical patent/JP7341426B2/ja
Publication of JP2021086383A publication Critical patent/JP2021086383A/ja
Application granted granted Critical
Publication of JP7341426B2 publication Critical patent/JP7341426B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Selective Calling Equipment (AREA)

Abstract

【課題】突発的な他の音によって音声認識中継処理装置が音声を認識できなかった場合であっても、音声認識中継処理装置が音声を認識でき、制御対象装置を動作させることができる通知システムを提供すること。【解決手段】制御装置60が、検出器30で検出される検出信号からイベントを判断するイベント判断部61と、イベント判断部61でイベントを判断すると、あらかじめ設定した第1識別音声を出力する音声出力部62と、サーバー20から送信される送信データを受信する受信部63と、音声出力部62から第1識別音声を出力したタイミングからの時間を計測するタイマー部64と、受信部63で送信データの受信がなされたかを確認する受信確認部65とを有し、タイマー部64で計測する第1所定時間を経過しても、受信確認部65で送信データの受信が確認できない場合には、音声出力部62から第1識別音声を再度出力することを特徴とする。【選択図】 図1

Description

本発明は、外部からの音声を認識してデータを送信する音声認識中継処理装置と、音声認識中継処理装置から送信されるデータを受信し、データに基づく動作指示データを制御対象装置に送信するとともに、動作指示データを送信したことを知らせる送信データを携帯端末に送信するサーバーとを利用した通知システムに関する。
装置の異常や危険を検知するとブザーやチャイム、光フラッシュなどにより周囲に異常を知らせるセンサが多くの大学や研究所、一般家庭でも利用されている。
しかし、外出中などにより、常にこの異常に気がつく状況にあるとは限らない。このような場合には、携帯端末へのメール、又は携帯端末に電話をかけるなどして素早く異常を示す通知が欲しいと思う場面も多い。しかし、これを実現するためには、例えばセンサの信号を処理して携帯端末にメールを送るなどのシステムを新たに構築する必要があり、コストや運用面でも気軽に導入できる環境ではない。
大学の研究室などでは、例えばサンプルを加熱する実験を行っている際に実験装置がオーバーヒートをすると、警報ブザーが鳴り電源を遮断する仕組みなどが一般的な安全対策である。その際に装置周辺に人がいれば即座に対応できるが、そうでない場合には実験の失敗や装置の故障に直結するため、素早く装置の異常を知らせるシステムが必要であった。
特許文献1には、電気機器を遠隔操作する遠隔操作機能を有し、当該遠隔操作を行ったことに関する情報を無線通信機能により発信することを特徴とするリモートコントロール機器が開示されている。
また、特許文献2には、計測データを判断して、この計測データに対応した、音声データ記憶部に記憶された音声データを読出す計測データ判断部と、この計測データ判断部の制御で読出された音声データを出力する音声データ出力部とを備えた計測結果出力装置が開示されている。
特開2011−250027号公報 特開平9−61197号公報
特許文献1のリモートコントロール機器(携帯端末)によれば、制御コードを含む赤外線信号を赤外線通信部から送信させた後、遠隔操作を行ったことに関する情報(「ユーザID」、遠隔操作対象の電気機器の「機器名」、「場所」、「操作内容」、遠隔操作を行ったタイミング<時刻>など)を管理装置に宛てて電話通信部から発信(送信)させるため、何れかの電気機器が遠隔操作されると、当該遠隔操作を行ったことに関する情報が自動的に発信されるので、電気機器の遠隔操作を行ったことに関する情報を取得できるが、全てのシステムを新たに構築する必要がある。
本発明は、このようなシステムに対して、市販されているスマートスピーカー、又はAIスピーカと呼ばれているデバイスを利用することで、遠隔地にいてもメールを送信し、または自動で電話をかけるなど、あらかじめ設定されている動作を次々と行い素早くイベントを通知するものである。
すなわち、本発明は、各種センサ、さらには住宅用火災警報器などが異常を検知した際に、音声を出力することで、スマートスピーカー、又はAIスピーカと呼ばれているデバイス(音声認識中継処理装置)を用いたシステムによって制御対象装置を動作させるとともに通知を受けるものである。
しかし、デバイス(音声認識中継処理装置)を利用するには、これらのデバイスが認識する音声を出力する必要があるが、音声をインターフェイスとする限り、騒音などの外部からの音によってデバイスが音声を正しく認識できない場合が生じる。
なお、特許文献2は、計測結果を音声で出力するが、計測結果を容易に判断するためのものにすぎない。
本発明は、例えば、突発的な他の音によって音声認識中継処理装置が音声を認識できなかった場合であっても、音声認識中継処理装置が音声を認識でき、制御対象装置を動作させることができる通知システムを提供することを目的とする。
請求項1記載の本発明の通知システムは、外部からの音声を認識してデータを送信する音声認識中継処理装置10と、前記音声認識中継処理装置10から送信される前記データを受信し、前記データに基づく動作指示データを制御対象装置40に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末50に送信するサーバー20と、検出器30で検出される検出信号からイベントを判断すると、前記音声認識中継処理装置10に対して前記制御対象装置40を動作させる識別音声を発する制御装置60とを備えた通知システムであって、前記制御装置60が、前記検出器30で検出される前記検出信号から前記イベントを判断するイベント判断部61と、前記イベント判断部61で前記イベントを判断すると、あらかじめ設定した第1識別音声を出力する音声出力部62と、前記サーバー20から送信される送信データを受信する受信部63と、前記音声出力部62から前記第1識別音声を出力したタイミングからの時間を計測するタイマー部64と、前記受信部63で前記送信データの受信がなされたかを確認する受信確認部65とを有し、前記タイマー部64で計測する第1所定時間を経過しても、前記受信確認部65で前記送信データの受信が確認できない場合には、前記音声出力部62から前記第1識別音声を再度出力することを特徴とする。
請求項2記載の本発明は、請求項1に記載の通知システムにおいて、前記受信確認部65では、前記第1所定時間が経過した後、前記送信データの受信が確認できない限り、前記第1所定時間より長い時間に設定した第2所定時間内に、前記音声出力部62から前記第1識別音声を繰り返し出力することを特徴とする。
請求項3記載の本発明は、請求項2に記載の通知システムにおいて、前記受信確認部65では、前記第2所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部62から前記第1識別音声と異なる第2識別音声を出力することを特徴とする。
請求項4記載の本発明は、請求項3に記載の通知システムにおいて、前記受信確認部65では、前記第2所定時間が経過した後、前記送信データの受信が確認できない限り、前記第2所定時間より長い時間に設定した第3所定時間内に、前記音声出力部62から前記第2識別音声を繰り返し出力することを特徴とする。
請求項5記載の本発明の通知システムにおける制御装置60は、検出器30で検出される検出信号からイベントを判断するイベント判断部61と、前記イベント判断部61で前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置10に対して、あらかじめ設定した第1識別音声を出力する音声出力部62と、前記音声認識中継処理装置10から送信される前記データを受信することで前記データに基づく動作指示データを制御対象装置40に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末50に送信するサーバー20から送信される送信データを受信する受信部63と、前記音声出力部62から前記第1識別音声を出力したタイミングからの時間を計測するタイマー部64と、前記受信部63で前記送信データの受信がなされたかを確認する受信確認部65とを有し、前記タイマー部64で計測する第1所定時間を経過しても、前記受信確認部65で前記送信データの受信が確認できない場合には、前記音声出力部62から前記第1識別音声を再度出力することを特徴とする。
請求項6記載の本発明は、請求項5に記載の通知システムにおける制御装置60において、前記受信確認部65では、前記第1所定時間が経過した後、前記送信データの受信が確認できない限り、前記第1所定時間より長い時間に設定した第2所定時間内に、前記音声出力部62から前記第1識別音声を繰り返し出力することを特徴とする。
請求項7記載の本発明は、請求項6に記載の通知システムにおける制御装置60において、前記受信確認部65では、前記第2所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部62から前記第1識別音声と異なる第2識別音声を出力することを特徴とする。
請求項8記載の本発明は、請求項7に記載の通知システムにおける制御装置60において、前記受信確認部65では、前記第2所定時間が経過した後、前記送信データの受信が確認できない限り、前記第2所定時間より長い時間に設定した第3所定時間内に、前記音声出力部62から前記第2識別音声を繰り返し出力することを特徴とする。
請求項9記載の本発明の通知システムにおける制御方法は、検出器30で検出される検出信号からイベントを判断するイベント判断ステップと、前記イベント判断ステップで前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置10に対して、あらかじめ設定した第1識別音声を出力する音声出力ステップと、前記音声出力ステップで前記第1識別音声を出力したタイミングからの時間が第1所定時間を経過しても、前記音声認識中継処理装置10から送信される前記データによってサーバー20から送信される送信データを、受信部63で受信しない場合には、前記第1識別音声を再度出力する音声再出力ステップとを有することを特徴とする。
請求項10記載の本発明は、請求項9に記載の通知システムにおける制御方法において、前記音声再出力ステップでは、前記送信データの受信が確認できない限り、前記第1所定時間より長い時間に設定した第2所定時間内に、前記音声出力部62から前記第1識別音声を繰り返し出力することを特徴とする。
請求項11記載の本発明は、請求項10に記載の通知システムにおける制御方法において、前記第2所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部62から前記第1識別音声と異なる第2識別音声を出力する異音声出力ステップを有することを特徴とする。
請求項12記載の本発明は、請求項11に記載の通知システムにおける制御方法において、前記異音声出力ステップでは、前記送信データの受信が確認できない限り、前記第2所定時間より長い時間に設定した第3所定時間内に、前記音声出力部62から前記第2識別音声を繰り返し出力することを特徴とする。
本発明によれば、制御装置から出力される第1識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が音声を認識できなかった場合であっても、制御装置から第1識別音声を再度出力することで、音声認識中継処理装置が音声を認識でき、制御対象装置を動作させることができる。
本発明の一実施例による通知システムを機能実現手段で表したブロック図 同通知システムにおける処理流れを示すフローチャート 同通知システムにおける制御装置での処理流れを示すフローチャート
本発明の第1の実施の形態による通知システムは、検出器で検出される検出信号からイベントを判断すると、音声認識中継処理装置に対して制御対象装置を動作させる識別音声を発する制御装置が、検出器で検出される検出信号からイベントを判断するイベント判断部と、イベント判断部でイベントを判断すると、あらかじめ設定した第1識別音声を出力する音声出力部と、サーバーから送信される送信データを受信する受信部と、音声出力部から第1識別音声を出力したタイミングからの時間を計測するタイマー部と、受信部で送信データの受信がなされたかを確認する受信確認部とを有し、タイマー部で計測する第1所定時間を経過しても、受信確認部で送信データの受信が確認できない場合には、音声出力部から第1識別音声を再度出力するものである。本実施の形態によれば、制御装置から出力される第1識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が第1識別音声を認識できなかった場合であっても、制御装置から第1識別音声を再度出力することで、音声認識中継処理装置が第1識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第2の実施の形態は、第1の実施の形態による通知システムにおいて、受信確認部では、第1所定時間が経過した後、送信データの受信が確認できない限り、第1所定時間より長い時間に設定した第2所定時間内に、音声出力部から第1識別音声を繰り返し出力するものである。本実施の形態によれば、例えば騒音が継続した場合であっても、制御装置から第1識別音声を繰り返し出力することで、音声認識中継処理装置が第1識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第3の実施の形態は、第2の実施の形態による通知システムにおいて、受信確認部では、第2所定時間が経過した後、送信データの受信が確認できない場合には、音声出力部から第1識別音声と異なる第2識別音声を出力するものである。本実施の形態によれば、制御装置から出力される第1識別音声を、音声認識中継処理装置が認識できなかった場合であっても、制御装置から第2識別音声を出力することで、音声認識中継処理装置が第2識別音声を認識できる可能性を高め、制御対象装置を動作させることができる。
本発明の第4の実施の形態は、第3の実施の形態による通知システムにおいて、受信確認部では、第2所定時間が経過した後、送信データの受信が確認できない限り、第2所定時間より長い時間に設定した第3所定時間内に、音声出力部から第2識別音声を繰り返し出力するものである。本実施の形態によれば、制御装置から第2識別音声を繰り返し出力することで、音声認識中継処理装置が第2識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第5の実施の形態による通知システムにおける制御装置は、検出器で検出される検出信号からイベントを判断するイベント判断部と、イベント判断部でイベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第1識別音声を出力する音声出力部と、音声認識中継処理装置から送信されるデータを受信することでデータに基づく動作指示データを制御対象装置に送信するとともに、動作指示データを送信したことを知らせる指示送信データを携帯端末に送信するサーバーから送信される送信データを受信する受信部と、音声出力部から第1識別音声を出力したタイミングからの時間を計測するタイマー部と、受信部で送信データの受信がなされたかを確認する受信確認部とを有し、タイマー部で計測する第1所定時間を経過しても、受信確認部で送信データの受信が確認できない場合には、音声出力部から第1識別音声を再度出力するものである。本実施の形態によれば、制御装置から出力される第1識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が認識できなかった場合であっても、制御装置から第1識別音声を再度出力することで、音声認識中継処理装置が第1識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第6の実施の形態は、第5の実施の形態による通知システムにおける制御装置において、受信確認部では、第1所定時間が経過した後、送信データの受信が確認できない限り、第1所定時間より長い時間に設定した第2所定時間内に、音声出力部から第1識別音声を繰り返し出力するものである。本実施の形態によれば、例えば騒音が継続した場合であっても、制御装置から第1識別音声を繰り返し出力することで、音声認識中継処理装置が第1識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第7の実施の形態は、第6の実施の形態による通知システムにおける制御装置において、受信確認部では、第2所定時間が経過した後、送信データの受信が確認できない場合には、音声出力部から第1識別音声と異なる第2識別音声を出力するものである。本実施の形態によれば、制御装置から出力される第1識別音声を、音声認識中継処理装置が認識できなかった場合であっても、制御装置から第2識別音声を出力することで、音声認識中継処理装置が第2識別音声によって指示を認識できる可能性を高め、制御対象装置を動作させることができる。
本発明の第8の実施の形態は、第7の実施の形態による通知システムにおける制御装置において、受信確認部では、第2所定時間が経過した後、送信データの受信が確認できない限り、第2所定時間より長い時間に設定した第3所定時間内に、音声出力部から第2識別音声を繰り返し出力するものである。本実施の形態によれば、制御装置から第2識別音声を繰り返し出力することで、音声認識中継処理装置が第2識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第9の実施の形態による通知システムにおける制御方法は、検出器で検出される検出信号からイベントを判断するイベント判断ステップと、イベント判断ステップでイベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第1識別音声を出力する音声出力ステップと、音声出力ステップで第1識別音声を出力したタイミングからの時間が第1所定時間を経過しても、音声認識中継処理装置から送信されるデータによってサーバーから送信される送信データを、受信部で受信しない場合には、第1識別音声を再度出力する音声再出力ステップとを有するものである。本実施の形態によれば、制御装置から出力される第1識別音声を、例えば、突発的な他の音によって音声認識中継処理装置が認識できなかった場合であっても、制御装置から第1識別音声を再度出力することで、音声認識中継処理装置が第1識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第10の実施の形態は、第9の実施の形態による通知システムにおける制御方法において、音声再出力ステップでは、送信データの受信が確認できない限り、第1所定時間より長い時間に設定した第2所定時間内に、音声出力部から第1識別音声を繰り返し出力するものである。本実施の形態によれば、例えば騒音が継続した場合であっても、制御装置から第1識別音声を繰り返し出力することで、音声認識中継処理装置が第1識別音声を認識でき、制御対象装置を動作させることができる。
本発明の第11の実施の形態は、第10の実施の形態による通知システムにおける制御方法において、第2所定時間が経過した後、送信データの受信が確認できない場合には、音声出力部から第1識別音声と異なる第2識別音声を出力する異音声出力ステップを有するものである。本実施の形態によれば、制御装置から出力される第1識別音声を、音声認識中継処理装置が認識できなかった場合であっても、制御装置から第2識別音声を出力することで、音声認識中継処理装置が第2識別音声によって指示を認識できる可能性を高め、制御対象装置を動作させることができる。
本発明の第12の実施の形態は、第11の実施の形態による通知システムにおける制御方法において、異音声出力ステップでは、送信データの受信が確認できない限り、第2所定時間より長い時間に設定した第3所定時間内に、音声出力部から第2識別音声を繰り返し出力するものである。本実施の形態によれば、制御装置から第2識別音声を繰り返し出力することで、音声認識中継処理装置が第2識別音声を認識でき、制御対象装置を動作させることができる。
以下本発明の一実施例について図面とともに説明する。
図1は、本発明の一実施例による通知システムを機能実現手段で表したブロック図である。
本実施例による通知システムは、外部からの音声を認識してデータを送信する音声認識中継処理装置10と、音声認識中継処理装置10から送信されるデータを受信し、データに基づく動作指示データを制御対象装置40に送信するとともに、動作指示データを送信したことを知らせる指示送信データを携帯端末50に送信するサーバー20と、検出器30で検出される検出信号からイベントを判断すると、音声認識中継処理装置10に対して制御対象装置40を動作させる識別音声を発する制御装置60とで構成される。
例えば、実験室の場合には、検出器30が温度検出器であり、制御対象装置40が空調機や加熱機であり、検出される温度が異常値になると、空調機を動作させ、又は加熱機を停止する。本実施例では、異常値をイベントとした警報システムで説明するが、検出される温度が正常値に戻った場合や設定値に到達した場合にも適用でき、イベントを任意の設定状態や閾値とすることができる。
音声認識中継処理装置10は、外部からの音声を認識する音声認識部11と、音声認識部11で認識した音声データを送信するデータ送信部12とを備えている。
サーバー20は、データ送信部12から送信されるデータを受信するデータ受信部21と、データ受信部21で受信したデータから、制御対象装置40や制御装置60を特定するとともに動作指示データを決定する指示内容決定部22と、指示内容決定部22で決定された動作指示データを制御対象装置40や制御装置60に送信するとともに、動作指示データを送信したことを知らせる指示送信データをあらかじめ通知先として登録している携帯端末50に送信する指示送信部23とを備えている。
制御対象装置40は、指示送信部23からの動作指示データを受信する受信部41と、受信部41で受信した動作指示データによって動作指示を行う動作指示部42とを備えている。
携帯端末50は、指示送信部23からの指示送信データを受信する受信部51と、受信部51で受信した指示送信データによって指示内容を出力する指示内容出力部52とを備えている。指示内容出力部52は、文字データや音声データとして出力される。
制御装置60は、検出器30で検出される検出信号からイベントを判断するイベント判断部61と、イベント判断部61でイベントを判断すると、あらかじめ設定した識別音声を出力する音声出力部62と、サーバー20から送信される送信データを受信する受信部63と、音声出力部62から第1識別音声を出力したタイミングからの時間を計測するタイマー部64と、受信部63で送信データの受信がなされたかを確認する受信確認部65とを備えている。
なお、サーバー20から制御装置60に対して送信する送信データは、制御対象装置40に対して送信される動作指示データと同種のものであることが好ましく、受信部63で動作指示データを受信すると、制御装置60では動作を終了する。
図2は、本発明の一実施例による通知システムにおける処理流れを示すフローチャートである。
検出器30は、継続的に実験室内の室温を検出している(S1)。
検出器30で検出される室温データは、制御装置60に入力され、イベント判断部61において異常か否かを判断している(S2)。
イベント判断部61が異常を判断すると音声出力部62から、異常であること、又はこの異常に基づく動作指示を音声で出力する(S3)。なお、本実施例において、異常であること、又はこの異常に基づく動作指示を表す音声を識別音声とする。
制御装置60から識別音声が出力されると、音声認識中継処理装置10では、音声認識部11において、この識別音声を認識する(S4)。
音声認識部11で認識された音声データはデータ送信部12において送信される(S5)。
音声認識中継処理装置10から音声データが送信されると、サーバー20では、データ受信部21において、音声データを受信する(S6)。
データ受信部21で受信された音声データから、指示内容決定部22では、制御対象装置40や制御装置60を特定するとともに動作指示データを決定する(S7)。
指示内容決定部22で決定された動作指示データ、指示送信データ、及び送信データは、指示送信部23において、制御対象装置40や制御装置60に送信するとともに、あらかじめ通知先として登録している携帯端末50に送信する(S8)。
サーバー20から送信されるデータによって、制御対象装置40では動作を行い(S9)、携帯端末50では制御対象装置40を動作させたことを出力し(S10)、制御装置60では正常にサーバー20から指示が送信されたことを確認する(S11)。
図3は、本発明の一実施例による通知システムにおける制御装置での処理流れを示すフローチャートである。
制御装置60では、イベント判断部61において異常か否かを判断し(S2)、イベント判断部61が異常を判断すると音声出力部62から第1識別音声を出力する(S3)。ここで第1識別音声は、例えば「空調機を作動」という音声とする。
タイマー部64では、音声出力部62から第1識別音声を出力したタイミングからの時間を計測する(S21)。
タイマー部64で計測する時間が第1所定時間を経過し(S22でYes)、第1所定時間より長い時間に設定した第2所定時間内に(S23でNo)、受信部63で指示を受信していない場合には(S24でNo)、音声出力部62から第1識別音声を再度出力する(S25)。
このように、タイマー部64で計測する第1所定時間を経過しても、受信確認部65で指示送信データの受信が確認できない場合には、音声出力部62から第1識別音声を再度出力する(S25)。
制御装置60から第1識別音声を再度出力することで、制御装置60から出力される第1識別音声を、例えば、突発的な他の音によって音声認識中継処理装置10が認識できなかった場合であっても、音声認識中継処理装置10が第1識別音声を認識でき、制御対象装置40を動作させることができる。
受信確認部65では、第1所定時間が経過した後(S22でYes)、送信データの受信が確認できない限り、第1所定時間より長い時間に設定した第2所定時間内に(S23でNo)、音声出力部62から第1識別音声を繰り返し出力することが好ましい。
例えば騒音が継続した場合であっても、制御装置60から第1識別音声を繰り返し出力することで、音声認識中継処理装置10が第1識別音声を認識でき、制御対象装置40を動作させることができる。
タイマー部64で計測する時間が第2所定時間内に(S23でNo)、受信部63で指示を受信した場合には(S24でYes)、正常終了となる(S26)。
タイマー部64で計測する時間が第2所定時間を経過し(S23でYes)、第2所定時間より長い時間に設定した第3所定時間内に(S27でNo)、受信部63で指示を受信していない場合には(S28でNo)、音声出力部62から第1識別音声と異なる第2識別音声を出力する(S29)。ここで第2識別音声は、例えば「エアコンオン」という音声とする。
制御装置60から出力される第1識別音声を、音声認識中継処理装置10が認識できなかった場合であっても、制御装置60から第2識別音声を出力することで、音声認識中継処理装置10が第2識別音声によって指示を認識できる可能性を高め、制御対象装置40を動作させることができる。
受信確認部65では、第2所定時間が経過した後(S23でYes)、送信データの受信が確認できない限り、第2所定時間より長い時間に設定した第3所定時間内に(S27でNo)、音声出力部62から第2識別音声を繰り返し出力することが好ましい。
制御装置60から第2識別音声を繰り返し出力することで、音声認識中継処理装置10が第2識別音声を認識でき、制御対象装置40を動作させることができる。
タイマー部64で計測する時間が第3所定時間内に(S27でNo)、受信部63で指示を受信した場合には(S28でYes)、正常終了となる(S30)。
なお、タイマー部64で計測する時間が第3所定時間を経過した場合には(S27でYes)、異常終了となる(S31)。
このように、本実施例による通知システムにおける制御装置60は、検出器30で検出される検出信号から異常を判断するイベント判断部61と、イベント判断部61で異常を判断すると、音声認識中継処理装置10に対して、あらかじめ設定した第1識別音声を出力する音声出力部62と、サーバー20から送信される送信データを受信する受信部63と、音声出力部62から第1識別音声を出力したタイミングからの時間を計測するタイマー部64と、受信部63で送信データの受信がなされたかを確認する受信確認部65とを有し、タイマー部64で計測する第1所定時間を経過しても、受信確認部65で送信データの受信が確認できない場合には、音声出力部62から第1識別音声を再度出力する。
制御装置60から出力される第1識別音声を、例えば、突発的な他の音によって音声認識中継処理装置10が認識できなかった場合であっても、制御装置60から第1識別音声を再度出力することで、音声認識中継処理装置10が第1識別音声を認識でき、制御対象装置40を動作させることができる。
また、本実施例による通知システムにおける制御装置60は、受信確認部65では、第1所定時間が経過した後、送信データの受信が確認できない限り、第1所定時間より長い時間に設定した第2所定時間内に、音声出力部62から第1識別音声を繰り返し出力することが好ましい。
例えば騒音が継続した場合であっても、制御装置60から第1識別音声を繰り返し出力することで、音声認識中継処理装置10が第1識別音声を認識でき、制御対象装置40を動作させることができる。
また、本実施例による通知システムにおける制御装置60は、受信確認部65では、第2所定時間が経過した後、送信データの受信が確認できない場合には、音声出力部62から第1識別音声と異なる第2識別音声を出力する。
制御装置60から出力される第1識別音声を、音声認識中継処理装置10が認識できなかった場合であっても、制御装置60から第2識別音声を出力することで、音声認識中継処理装置10が第1識別音声を認識できる可能性を高め、制御対象装置40を動作させることができる。
また、本実施例による通知システムにおける制御装置60は、受信確認部65では、第2所定時間が経過した後、送信データの受信が確認できない限り、第2所定時間より長い時間に設定した第3所定時間内に、音声出力部62から第2識別音声を繰り返し出力する。
制御装置60から第2識別音声を繰り返し出力することで、音声認識中継処理装置10が第2識別音声を認識でき、制御対象装置40を動作させることができる。
また、本実施例による通知システムにおける制御方法は、検出器30で検出される検出信号から異常を判断するイベント判断ステップ(S2)と、イベント判断ステップ(S2)で異常を判断すると、音声認識中継処理装置10に対して、あらかじめ設定した第1識別音声を出力する音声出力ステップ(S3)と、音声出力ステップ(S3)で第1識別音声を出力したタイミングからの時間が第1所定時間を経過しても(S22でYes)、音声認識中継処理装置10から送信されるデータによってサーバー20から送信される送信データを、受信部63で受信しない場合には、第1識別音声を再度出力する音声再出力ステップ(S25)とを有する。
制御装置60から出力される第1識別音声を、例えば、突発的な他の音によって音声認識中継処理装置10が認識できなかった場合であっても、制御装置60から第1識別音声を再度出力することで、音声認識中継処理装置10が第1識別音声を認識でき、制御対象装置40を動作させることができる。
また、本実施例による通知システムにおける制御方法は、音声再出力ステップ(S25)では、送信データの受信が確認できない限り(S24でNo)、第1所定時間より長い時間に設定した第2所定時間内に、音声出力部62から第1識別音声を繰り返し出力する。
例えば騒音が継続した場合であっても、制御装置60から第1識別音声を繰り返し出力することで、音声認識中継処理装置10が第1識別音声を認識でき、制御対象装置40を動作させることができる。
また、本実施例による通知システムにおける制御方法は、第2所定時間が経過した後(S23でYes)、送信データの受信が確認できない場合には(S28でNo)、音声出力部62から第1識別音声と異なる第2識別音声を出力する異音声出力ステップ(S29)を有する。
制御装置60から出力される第1識別音声を、音声認識中継処理装置10が認識できなかった場合であっても、制御装置60から第2識別音声を出力することで、音声認識中継処理装置10が第2識別音声によって指示を認識できる可能性を高め、制御対象装置40を動作させることができる。
また、本実施例による通知システムにおける制御方法は、異音声出力ステップ(S29)では、送信データの受信が確認できない限り(S28でNo)、第2所定時間より長い時間に設定した第3所定時間内に(S27でNo)、音声出力部62から第2識別音声を繰り返し出力する。
制御装置60から第2識別音声を繰り返し出力することで、音声認識中継処理装置10が第2識別音声を認識でき、制御対象装置40を動作させることができる。
なお、本実施例では、識別音声は、異常であること、又はこの異常に基づく動作指示を表す音声として説明したが、録音したヒトの声であっても合成音声でもよく、ヒトが意味を理解する言語音に限られず音信号も含む。また、音声出力部62からの識別音声の出力は、スピーカを用いた出力の他に、骨伝導式イヤホンを用いた出力でもよく、骨伝導式イヤホンを用いる場合には、骨伝導式イヤホンを音声認識中継処理装置10に装着する。
また、制御装置60、又は制御装置60と音声認識中継処理装置10の動作確認を定期的に行う機能を備えていることが好ましい。
この定期的な動作確認のためには、制御装置60に、イベント判断部61が異常を判断した場合に音声出力部62から出力される識別音声とは異なる、動作確認用識別音声を、タイマー部64で計測されたタイミング、例えば24時間間隔で、音声出力部62から出力する。タイマー部64が時計機能を備えている場合には、時刻指定によって行ってもよい。
例えば、毎日零時に音声出力部62から動作確認用識別音声を出力する。音声認識中継処理装置10では、音声認識部11においてこの動作確認用識別音声を認識し(S4)、音声認識部11で認識された音声データをデータ送信部12において送信する(S5)。
音声認識中継処理装置10から音声データが送信されると、サーバー20では、データ受信部21において、音声データを受信し(S6)、データ受信部21で受信された音声データから、指示内容決定部22では、制御装置60を特定して送信データを決定する(S7)。
指示内容決定部22で決定された送信データは、指示送信部23において制御装置60に送信する(S8)。制御装置60では、サーバー20からの送信データを受信することで正常動作を確認して処理を終了する。制御装置60でサーバー20からの送信データを受信しない場合には、異常を知らせる出力を行う。
指示内容決定部22で決定された送信データは、指示送信部23において制御装置60に送信するとともに、あらかじめ通知先として登録している携帯端末50に指示送信データを送信することもできる(S8)。この場合には、制御装置60においてだけでなく、携帯端末50においても正常動作の確認結果を知ることができる。
なお、指示内容決定部22で決定された送信データは、指示送信部23において制御装置60に送信する代わりに、あらかじめ通知先として登録している携帯端末50に指示送信データを送信することもできる(S8)。
また定期的な動作確認のためには、音声認識中継処理装置10に音出力部を設け、制御装置60には音信号受信部を設け、音出力部からあらかじめ設定した定刻に音信号データを出力し、音信号受信部で音信号データを受信すると、制御装置60から動作確認用識別音声を出力する。
音声認識中継処理装置10では、音声認識部11においてこの動作確認用識別音声を認識し(S4)、音声認識部11で認識された音声データをデータ送信部12において送信する(S5)。
音声認識中継処理装置10から音声データが送信されると、サーバー20では、データ受信部21において、音声データを受信し(S6)、データ受信部21で受信された音声データから、指示内容決定部22では、制御装置60を特定して送信データを決定する(S7)。
指示内容決定部22で決定された送信データは、指示送信部23において制御装置60に送信する(S8)。制御装置60では、サーバー20からの送信データを受信することで正常動作を確認して処理を終了する。制御装置60でサーバー20からの送信データを受信しない場合には、異常を知らせる出力を行う。
指示内容決定部22で決定された送信データは、指示送信部23において制御装置60に送信するとともに、あらかじめ通知先として登録している携帯端末50に指示送信データを送信することもできる(S8)。この場合には、制御装置60においてだけでなく、携帯端末50においても正常動作の確認結果を知ることができる。
また、指示内容決定部22で決定された送信データは、指示送信部23において制御装置60に送信する代わりに、あらかじめ通知先として登録している携帯端末50に指示送信データを送信することもできる(S8)。
なお、音声認識中継処理装置10に音出力部を設け、制御装置60には音信号受信部を設け、音出力部からあらかじめ設定した定刻に音信号データを出力し、音信号受信部で音信号データを受信すると、制御装置60から動作確認用識別音声を出力する場合には、音声認識中継処理装置10では、音声認識部11においてこの動作確認用識別音声を認識しない場合に、異常を伝えるデータをデータ送信部12から送信することもできる(S5)。
このように、音声認識部11においてこの動作確認用識別音声を認識しない場合に、異常を伝えるデータをデータ送信部12から送信すると、サーバー20では、あらかじめ通知先として登録している携帯端末50に、異常であることを伝える指示送信データを送信する(S8)。
また、制御装置60又は音声認識中継処理装置10に、周囲の騒音に反応して逆位相の音波を発することでノイズを取り除くノイズキャンセリング部を設けることが好ましい。
本発明は、現在既に広く利用されている各種センサを検出器として適用でき、住宅用火災報知器やドア開閉などと連動した防犯システムとしても適用できる。
10 音声認識中継処理装置
11 音声認識部
12 データ送信部
20 サーバー
21 データ受信部
22 指示内容決定部
23 指示送信部
30 検出器
40 制御対象装置
41 受信部
42 動作指示部
50 携帯端末
51 受信部
52 指示内容出力部
60 制御装置
61 イベント判断部
62 音声出力部
63 受信部
64 タイマー部
65 受信確認部

Claims (12)

  1. 外部からの音声を認識してデータを送信する音声認識中継処理装置と、
    前記音声認識中継処理装置から送信される前記データを受信し、前記データに基づく動作指示データを制御対象装置に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末に送信するサーバーと、
    検出器で検出される検出信号からイベントを判断すると、前記音声認識中継処理装置に対して前記制御対象装置を動作させる識別音声を発する制御装置と
    を備えた通知システムであって、
    前記制御装置が、
    前記検出器で検出される前記検出信号から前記イベントを判断するイベント判断部と、
    前記イベント判断部で前記イベントを判断すると、あらかじめ設定した第1識別音声を出力する音声出力部と、
    前記サーバーから送信される送信データを受信する受信部と、
    前記音声出力部から前記第1識別音声を出力したタイミングからの時間を計測するタイマー部と、
    前記受信部で前記送信データの受信がなされたかを確認する受信確認部と
    を有し、
    前記タイマー部で計測する第1所定時間を経過しても、前記受信確認部で前記送信データの受信が確認できない場合には、前記音声出力部から前記第1識別音声を再度出力する
    ことを特徴とする通知システム。
  2. 前記受信確認部では、前記第1所定時間が経過した後、前記送信データの受信が確認できない限り、前記第1所定時間より長い時間に設定した第2所定時間内に、前記音声出力部から前記第1識別音声を繰り返し出力する
    ことを特徴とする請求項1に記載の通知システム。
  3. 前記受信確認部では、前記第2所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部から前記第1識別音声と異なる第2識別音声を出力する
    ことを特徴とする請求項2に記載の通知システム。
  4. 前記受信確認部では、前記第2所定時間が経過した後、前記送信データの受信が確認できない限り、前記第2所定時間より長い時間に設定した第3所定時間内に、前記音声出力部から前記第2識別音声を繰り返し出力する
    ことを特徴とする請求項3に記載の通知システム。
  5. 検出器で検出される検出信号からイベントを判断するイベント判断部と、
    前記イベント判断部で前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第1識別音声を出力する音声出力部と、
    前記音声認識中継処理装置から送信される前記データを受信することで前記データに基づく動作指示データを制御対象装置に送信するとともに、前記動作指示データを送信したことを知らせる指示送信データを携帯端末に送信するサーバーから送信される送信データを受信する受信部と、
    前記音声出力部から前記第1識別音声を出力したタイミングからの時間を計測するタイマー部と、
    前記受信部で前記送信データの受信がなされたかを確認する受信確認部と
    を有し、
    前記タイマー部で計測する第1所定時間を経過しても、前記受信確認部で前記送信データの受信が確認できない場合には、前記音声出力部から前記第1識別音声を再度出力する
    ことを特徴とする通知システムにおける制御装置。
  6. 前記受信確認部では、前記第1所定時間が経過した後、前記送信データの受信が確認できない限り、前記第1所定時間より長い時間に設定した第2所定時間内に、前記音声出力部から前記第1識別音声を繰り返し出力する
    ことを特徴とする請求項5に記載の通知システムにおける制御装置。
  7. 前記受信確認部では、前記第2所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部から前記第1識別音声と異なる第2識別音声を出力する
    ことを特徴とする請求項6に記載の通知システムにおける制御装置。
  8. 前記受信確認部では、前記第2所定時間が経過した後、前記送信データの受信が確認できない限り、前記第2所定時間より長い時間に設定した第3所定時間内に、前記音声出力部から前記第2識別音声を繰り返し出力する
    ことを特徴とする請求項7に記載の通知システムにおける制御装置。
  9. 検出器で検出される検出信号からイベントを判断するイベント判断ステップと、
    前記イベント判断ステップで前記イベントを判断すると、外部からの音声を認識してデータを送信する音声認識中継処理装置に対して、あらかじめ設定した第1識別音声を出力する音声出力ステップと、
    前記音声出力ステップで前記第1識別音声を出力したタイミングからの時間が第1所定時間を経過しても、前記音声認識中継処理装置から送信される前記データによってサーバーから送信される送信データを、受信部で受信しない場合には、前記第1識別音声を再度出力する音声再出力ステップと
    を有する
    ことを特徴とする通知システムにおける制御方法。
  10. 前記音声再出力ステップでは、前記送信データの受信が確認できない限り、前記第1所定時間より長い時間に設定した第2所定時間内に、前記音声出力部から前記第1識別音声を繰り返し出力する
    ことを特徴とする請求項9に記載の通知システムにおける制御方法。
  11. 前記第2所定時間が経過した後、前記送信データの受信が確認できない場合には、前記音声出力部から前記第1識別音声と異なる第2識別音声を出力する異音声出力ステップを
    有する
    ことを特徴とする請求項10に記載の通知システムにおける制御方法。
  12. 前記異音声出力ステップでは、前記送信データの受信が確認できない限り、前記第2所定時間より長い時間に設定した第3所定時間内に、前記音声出力部から前記第2識別音声を繰り返し出力する
    ことを特徴とする請求項11に記載の通知システムにおける制御方法。
JP2019214632A 2019-11-27 2019-11-27 通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法 Active JP7341426B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019214632A JP7341426B2 (ja) 2019-11-27 2019-11-27 通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019214632A JP7341426B2 (ja) 2019-11-27 2019-11-27 通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法

Publications (2)

Publication Number Publication Date
JP2021086383A true JP2021086383A (ja) 2021-06-03
JP7341426B2 JP7341426B2 (ja) 2023-09-11

Family

ID=76087771

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019214632A Active JP7341426B2 (ja) 2019-11-27 2019-11-27 通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法

Country Status (1)

Country Link
JP (1) JP7341426B2 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005017974A (ja) * 2003-06-30 2005-01-20 Noritz Corp 温水システム
JP2005234695A (ja) * 2004-02-17 2005-09-02 Ricoh Elemex Corp ガス漏れ警報器
JP2014002501A (ja) * 2012-06-18 2014-01-09 Hochiki Corp 警報システム
JP2014230061A (ja) * 2013-05-22 2014-12-08 シャープ株式会社 ネットワークシステム、サーバ、家電、プログラムおよび家電の連携方法
JP2016076799A (ja) * 2014-10-03 2016-05-12 シャープ株式会社 家電管理システム、家電、リモコン装置、ロボット
JP2018129751A (ja) * 2017-02-10 2018-08-16 株式会社リクルートホールディングス 作動制御システム及び作動制御方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005017974A (ja) * 2003-06-30 2005-01-20 Noritz Corp 温水システム
JP2005234695A (ja) * 2004-02-17 2005-09-02 Ricoh Elemex Corp ガス漏れ警報器
JP2014002501A (ja) * 2012-06-18 2014-01-09 Hochiki Corp 警報システム
JP2014230061A (ja) * 2013-05-22 2014-12-08 シャープ株式会社 ネットワークシステム、サーバ、家電、プログラムおよび家電の連携方法
JP2016076799A (ja) * 2014-10-03 2016-05-12 シャープ株式会社 家電管理システム、家電、リモコン装置、ロボット
JP2018129751A (ja) * 2017-02-10 2018-08-16 株式会社リクルートホールディングス 作動制御システム及び作動制御方法

Also Published As

Publication number Publication date
JP7341426B2 (ja) 2023-09-11

Similar Documents

Publication Publication Date Title
US7385496B2 (en) Monitoring system
US20160133108A1 (en) Intelligent smoke sensor with audio-video verification
KR20180010204A (ko) Diy 감시 장치 및 방법
US20190130707A1 (en) Event notification using an intelligent digital assistant
JP6401215B2 (ja) 通信装置、及びそれを備えた無線通信システム
JP2011198108A (ja) 宅内異常通報システム
US20220060473A1 (en) Security system
JP7341426B2 (ja) 通知システム、通知システムにおける制御装置、及び通知システムにおける制御方法
JP4784182B2 (ja) 安否情報通信装置及び安否情報通信システム
JP2016009334A5 (ja) 警報器および警報器システム
JP5170749B2 (ja) 住宅監視システム
JP4095408B2 (ja) 監視装置、監視方法および制御プログラム
JP2009176109A (ja) 警備システム
JP6574694B2 (ja) 警備装置および警備業務支援システム
JP3874632B2 (ja) ハウスセキュリティシステム
KR101221490B1 (ko) 무선통신을 이용한 긴급 상황 음성 안내 시스템
KR100718980B1 (ko) 외부 통신선과 실내전력선을 이용한 생활안전 장치 및 그를이용한 외부 경비 원격 모니터링 방법
JP2009245072A (ja) 安否確認システム
KR20060078228A (ko) 무인 진동 방범 시스템 및 그 방법
JP2015056000A (ja) 防犯システム
JP2004266680A (ja) 遠隔制御装置
JP2004056437A (ja) 監視システム
KR200367541Y1 (ko) 화재 감시용 도어 제어 장치
JP5058007B2 (ja) 警備システム
JP2005182252A (ja) 監視システムおよびそのプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221024

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230531

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230622

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230725

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230822

R150 Certificate of patent or registration of utility model

Ref document number: 7341426

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150