CN112740170A - 发话装置、服务器、控制系统、控制方法及程序 - Google Patents

发话装置、服务器、控制系统、控制方法及程序 Download PDF

Info

Publication number
CN112740170A
CN112740170A CN201980061232.9A CN201980061232A CN112740170A CN 112740170 A CN112740170 A CN 112740170A CN 201980061232 A CN201980061232 A CN 201980061232A CN 112740170 A CN112740170 A CN 112740170A
Authority
CN
China
Prior art keywords
speech
information
server
urgency level
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980061232.9A
Other languages
English (en)
Inventor
神崎昭浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN112740170A publication Critical patent/CN112740170A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • G08B21/182Level alarms, e.g. alarms responsive to variables exceeding a threshold
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B3/00Audible signalling systems; Audible personal calling systems
    • G08B3/10Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Emergency Management (AREA)
  • Acoustics & Sound (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Artificial Intelligence (AREA)
  • Telephonic Communication Services (AREA)

Abstract

提供便利性优异的发话装置等。发话装置(1)在通常模式与抑制模式之间切换动作模式,对从所述发话装置、服务器(3)以及外部设备(电气设备2)中的至少任一方获取的、用于生成发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使所述发话装置发出语音。

Description

发话装置、服务器、控制系统、控制方法及程序
技术领域
本发明涉及一种语音发话的发话装置等。
背景技术
已知如下现有技术:在语音发话的发话装置中,在不想使其发话时能够抑制发话。在专利文献1中,公开了一种发话装置,该发话装置中,若检测到规定的命令,则动作模式从未抑制语音发话的通常模式向抑制语音发话的抑制模式转换。
现有技术文献
专利文献
专利文献1:日本公开专利公报“特开2017-161637号公报”
发明内容
发明要解决的问题
然而,专利文献1所记载的发明虽然能够通过用户输入规定的命令而使发话装置的动作模式转换,但无法根据发话的内容来解除对语音发话的抑制。例如,在存在应紧急通知用户的信息的情况下,在抑制模式下工作的发话装置无法对该信息进行语音发话。
本发明的一方式是鉴于上述问题而完成的,其目的在于,实现若有应向用户紧急通知的信息则可靠地进行语音发话的、便利性优异的发话装置等。
解决问题的方案
为了解决上述技术问题,本发明的一方面所涉及的发话装置为在检测出规定的命令时抑制语音发话的发话装置,其中,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换动作模式,对从所述发话装置、与所述发话装置可通信地连接的服务器以及外部设备中的至少任一方获取的、用于生成发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使所述发话装置发出语音。
本发明的一方面所涉及的服务器为与发话装置可通信的连接,并使该发话装置进行语音发话的服务器,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换所述发话装置的动作模式,对从所述发话装置、所述服务器以及外部设备中的至少任一方获取的、用于生成发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使所述发话装置发出语音。
本发明的一方面所涉及的控制系统为语音发话的控制系统,包括在检测出规定的命令时抑制语音发话的发话装置以及与所述发话装置可通信的连接的服务器,其中,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换所述发话装置的动作模式,对从所述发话装置、所述服务器以及外部设备中的至少任一方获取的、用于生成该发话装置的发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述发话装置的所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使该发话装置发出语音。
本发明的一方面所涉及的控制方法为语音发话的控制方法,针对检测出规定的命令时抑制语音发话的发话装置,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换动作模式,对从所述发话装置、与所述发话装置可通信地连接的服务器以及外部设备中的至少任一方获取的、用于生成该发话装置的发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述发话装置的所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使该发话装置发出语音。
发明效果
根据本发明的一方面,能够提供若有应向用户紧急通知的信息则可靠地进行语音发话的、便利性优异的发话装置等。
附图说明
图1是表示根据本发明的第一实施方式的发话控制系统的主要部分构成的一例的框图。
图2是表示根据本发明的第一实施方式的发话控制系统的概要的示意图。
图3是表示根据本发明的第一实施方式的发话控制系统中根据发话信息的紧急度进行语音发话的流程一例的流程图。
图4是表示根据本发明的第一实施方式的发话控制系统与HEMS一体构成的构成例的示意图。
图5是表示根据本发明的第二实施实施方式的发话控制系统的主要部分构成的框图。
具体实施方式
〔第一实施方式〕
以下,使用图1至图4详细说明本发明的第一实施方式。
(关于发话控制系统)
使用图2说明根据本实施方式的发话控制系统200的概要。图2是表示发话控制系统200的概要的示意图。在图示的例子中,发话控制系统200具备发话装置1、电气设备2以及服务器3。
发话装置1是具备利用语音进行发话的功能的装置。此外,发话装置1还具备语音识别功能,能够通过这些功能进行与用户的对话。如图所示,发话装置1具备显示部12、接触传感器13、照度传感器14、图像传感器15以及人体感应传感器16。在图2的例子中作为发话装置1示出了机器人,但也可以是例如智能手机等便携式终端。
显示部12显示发话装置1的脸部。即,发话装置1能够根据显示部12的显示内容来表现发话装置1的表情。此外,接触传感器13是检测用户的接触的传感器。并且,照度传感器14是检测发话装置1的周围的明亮度的传感器,图像传感器15是获取发话装置1的周围的影像的传感器,人体感应传感器16是检测发话装置1的周围的人的传感器。发话装置1根据这些传感器的检测结果而进行动作。
发话装置1在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换动作模式而进行动作,并且在检测到规定的命令时能够抑制语音发话。例如,当发话装置1作为规定的命令而检测到用户发出了诸如“安静”等的抑制发话的命令语句时,则可以将动作模式切换到抑制模式。同样地,若检测出允许发话的命令时,则发话装置1也可以将动作模式切换为通常模式。图2是表示发话装置1在抑制模式下工作的例子。
发话装置1能够从本装置所具备的各种传感器、服务器3以及作为外部设备的电气设备2中的至少任一个获取发话信息。然后,发话装置1通过使用所获取的发话信息来生成发话内容,并且能够语音发出所生成的发话内容。在此,发话信息是用于生成发话装置1进行语音发话的发话内容的信息。发话信息包括传感器的检测值这样的物理量的、在从稳定状态大幅变化的情况下向用户紧急通知的必要性高的重要信息、气象信息、火灾信息这样的发布信息等。例如,发话装置1可以通过将发话信息组合到模板句中生成发话内容,并发出语音。
电气设备2是与发话装置1可通信的连接的该发话装置1的外部的设备,例如是设置于房屋内的家电设备。在图2的例子中,电气设备2作为空调室内机而示出,例如能够使用未图示的温度传感器、湿度传感器等获取室内外的温度、湿度等,并将获取到的信息发送给发话装置1。电气设备2只要是通过电气进行工作,则不需要限定为家电设备,也可以是传感器等。电气设备2也可以为多个。
服务器3是与发话装置1可通信的连接的服务器,例如是经由因特网等网络提供各种信息的云服务器。服务器3例如可以将气温、湿度、天气信息等信息发送给发话装置1。
当发话信息包括应向用户紧急通知的信息时,即使该发话装置1在抑制模式下工作,发话装置1也可以根据该发话信息生成发话内容并进行语音发话。换言之,发话装置1判断发话信息的紧急度,在该紧急度为规定的阈值以上的情况下,即使在抑制模式下工作也能够进行语音发话。
在图2的例子中,发话装置1基于从电气设备2以及服务器3获取到的气温、湿度、天气信息等发话信息来检测下雨的可能性较高。在此,表示下雨的可能性高的发话信息的紧急度被设定为规定的阈值以上。此时,发话装置1根据下雨的可能性高这样的紧急度为规定的阈值以上的发话信息,生成“好像要下雨了”的发话内容并进行语音发话。用户根据发话装置1的语音发话而判断为周边地区下雨的可能性高,认为需要将在外晾干的洗好的衣物收起来。然后,用户能够进行适当的应对(在该情况下把洗好的衣物收起来)。
如上所述,根据本实施方式的发话控制系统200,如果存在包含应向用户紧急通知的信息的发话信息,则即使发话装置1在抑制模式下工作也能够根据发话信息生成发话内容,并使该发话装置1进行语音发话。由此,能够提供一种具备便利性优异的发话装置1的发话控制系统200,如果存在例如火灾信息这样的应向用户紧急通知的信息,则该发话控制系统200可靠地进行语音发话。
并且,即使发话装置1在抑制模式下工作也进行语音发话的、紧急度被设定为规定的阈值以上的发话信息不限于上述例子。例如,发话装置1也可以获取照度传感器14、人体感应传感器16的检测结果、电子锁的认证结果、或自家的电力消耗量作为发话信息,并根据该变化检测出人回家或人从自家外出的情况。并且,若检测出回家或外出,则针对获取的发话信息,设为紧急度在规定的阈值以上,发话装置1即使在抑制模式下工作时,也可以进行语音发话。
进一步,发话装置1也可以使用与回家时刻或外出时刻相关的历史记录来判断发话信息的紧急度。例如,发话装置1也可以在从所累积的历史记录所表示的平均回家时刻或外出时刻偏离了规定值以上的情况下,针对所获取的发话信息,设为紧急度在规定的阈值以上,即使在抑制模式下工作也进行语音发话。此时,也可以基于发话装置1识别出的用户的语音、电子锁的认证结果、有无与智能手机等便携式终端的通信等,来确定目标用户。例如,当判断为孩子到达平均回家时刻也没有回家,则发话装置1可以语音发出担心孩子的发话内容。发话装置1例如也可以基于日历信息仅提取平日的历史记录,计算平日的平均回家时刻以及外出时刻而用于紧急度的判断。
此外,发话装置1也可以获取温度、湿度等信息作为发话信息,在根据这些信息判断为下雨的可能性高的情况、判断为中暑、热休克等健康损害的危险性高的情况下,即使在抑制模式下工作也进行语音发话。此时,用于判断的发话信息可以是从电气设备2等获取的温度、湿度等物理量,也可以是从服务器3等获取的气象信息等的发布信息。
进一步,发话装置1也可以将从电气设备2等通知的气体泄漏信息、火灾信息、或者从服务器3等通知的地震速报、气象警报(特别警报等)等应紧急向用户通知的信息的紧急度设定为规定的阈值以上。即,发话装置1也可以在紧急地获取了应通知给用户的信息的情况下,即使在抑制模式下工作也能够进行语音发话。作为应紧急通知给用户的信息,也可以包含道路的拥堵信息、电车的延迟信息等。
(发话控制系统的构成)
使用图1说明根据本实施方式的发话控制系统200的构成。图1是表示发话控制系统200的主要部分构成的一例的框图。发话控制系统200具备发话装置1、电气设备2以及服务器3。并且,关于电气设备2以及服务器3,基于图2说明完毕,因此在此不重复说明。
发话装置1具备控制部10、存储部11、显示部12、接触传感器13、照度传感器14、图像传感器15、人体感应传感器16、加速度传感器17、语音输入部18、语音输出部19以及通信部20。并且,关于显示部12、接触传感器13、照度传感器14、图像传感器15以及人体感应传感器16,基于图2说明完毕,因此在此不重复说明。
存储部11存储由发话装置1处理的各种数据。在存储部11中,例如也可以按该发话信息的每个种类存储规定的阈值,该规定的阈值是后述的紧急度判断部107用于发话信息的紧急度的判断。加速度传感器17是检测加速度并输出的传感器,能够根据加速度传感器17的输出值检测发话装置1被移动等。语音输入部18受理来自发话装置1的外部的语音输入。语音输出部19按照控制部10的控制输出语音(语音发话)。通信部20是用于发话装置1与电气设备2以及服务器3进行通信的部件。通信部20按照控制部10的指示从电气设备2和服务器3获取发话信息。
控制部10综合控制发话装置1的各部分,具备语音识别部100、频率分析部101、图像分析部102、命令检测部103、动作模式控制部104、显示控制部105、发话控制部106以及紧急度判断部107。
语音识别部100对语音输入部18受理的输入语音进行识别,输出语音识别结果。具体而言,语音识别部100将所输入的语音所包含的用户发出的词语作为文本数据输出。
频率分析部101对语音输入部18受理的输入语音(主要是可听音的语音)的频带进行分析,并输出分析结果。具体而言,频率分析部101通过上述分析检测规定的频带的语音持续了规定时间,并将这一情况通知给命令检测部103。更详细而言,频率分析部101检测4000Hz以上且小于5000Hz的频带的声音持续了规定时间。此外,频率分析部101检测100Hz以下的频带的声音断续地或者周期性地持续了规定时间以上。并且,使用频率分析部101的例子在后述的第二实施方式中进行说明。
图像分析部102分析图像传感器15获取的发话装置1的周围的图像,检测用户进行了规定的行为,并将这一情况通知给命令检测部103。并且,使用图像分析部102的例子在后述的第三实施方式中进行说明。
命令检测部103将各种传感器的检测结果发送至动作模式控制部104。检测结果中可以包含如图2所示的命令,若检测到规定的命令,则命令检测部103将检测到的命令向动作模式控制部104发送。
动作模式控制部104根据命令检测部103检测出的命令,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换动作模式。具体而言,动作模式控制部104在发话装置1的动作模式为通常模式的情况下,使用显示控制部105以及发话控制部106输出各种信息,在为抑制模式的情况下,使用显示控制部105输出各种信息。
动作模式控制部104能够将从命令检测部103接收到的各种传感器中的检测结果作为发话信息向紧急度判断部107发送。若动作模式控制部104从紧急度判断部107接收到发话信息的紧急度为规定的阈值以上的意思的通知,则即使发话装置1在抑制模式下工作也能够指示发话控制部106根据该发话信息生成发话内容。
显示控制部105将图像显示于显示部12。例如,当动作模式控制部104使动作模式转换时,显示控制部105使与转换后的动作模式相应的表情的图像显示于显示部。
发话控制部106控制发话装置1的发话。更详细而言,作为发话信息,发话控制部106根据上述各种传感器的检测结果、从电气设备2和服务器3获取的信息以及语音识别部100的语音识别结果中的至少任一个来生成发话内容,并使语音输出部19语音发出该发话内容。在从紧急度判断部107接收到判断结果是发话信息的紧急度为规定的阈值以上的情况下,即使发话装置1的动作模式是抑制模式,发话控制部106也能够生成发话内容,并使语音输出部19语音发出该发话内容。
紧急度判断部107针对发话信息判断紧急度,该发话信息是从动作模式控制部104接收到的各种传感器的检测结果、以及控制部10经由通信部20从电气设备2以及服务器3获取的信息中的至少任一个。紧急度判断部107能够将判断结果发送至动作模式控制部104。
紧急度判断部107例如在各种传感器的检测结果从稳定状态起大幅变化的情况下,视为是紧急向用户通知的必要性较高的重要信息(物理量),判断各种传感器的检测结果是否从稳定状态下的检测值起大幅变化。具体而言,如果检测结果与稳定状态下的检测值之间的差值为规定值以上,则紧急度判断部107判断为检测结果从稳定状态大幅变化。在检测结果从稳定状态大幅变化的情况下,紧急度判断部107也可以判断为发话信息的紧急度在规定的阈值以上。在此,稳定状态下的检测值例如可以是基于与各种传感器的检测结果相关的过去的历史记录的统计量(例如平均值)。
此外,紧急度判断部107在作为发话信息而控制部10经由通信部20从电气设备2以及服务器3获取到的信息是气象信息、火灾信息等的发布信息的情况下,也可以判断为该发话信息的紧急度是规定的阈值以上。
(处理流程)
图3表示根据本实施方式的发话控制系统200中判断发话信息的紧急度而判断发话装置1中的语音发话的可否的流程的一例的流程图。并且,在流程图的开始时刻,发话装置1的动作模式可以是通常模式和抑制模式中的任一种。
首先,发话装置1获取本装置具备的各种传感器的检测值、从电气设备2或服务器3获取的信息的至少任一个作为用于构成发话内容的发话信息。然后,关于获取到的发话信息,如使用图1和图2说明过的那样,紧急度判断部107判断该发话信息的紧急度是否为规定的阈值以上,将判断结果发送到动作模式控制部104(S1)。在判断为紧急度小于规定的阈值的情况下(S1为“否”),处理进入到S2。另一方面,在判断为紧急度在规定的阈值以上的情况下(S1为“是”),处理进入到S3。
在S2中,动作模式控制部104判断发话装置1是否在抑制模式下工作(S2)。当判断为不是在抑制模式下工作的情况下(在S2中为“否”),处理进入到S3。另一方面,在判断为在抑制模式下工作的情况下(S2为“是”),动作模式控制部104不指示发话控制部106进行语音发话而结束一系列的处理。
在S3中,动作模式控制部104对发话控制部106指示发话信息的语音发话。然后,发话控制部106根据发话信息生成发话内容,并使语音输出部19语音发出该发话内容(S3)。
通过以上的处理,根据本实施方式的发话控制系统200的发话装置1判断构成发话内容的发话信息的紧急度。然后,如果紧急度是规定的阈值以上,则即使在抑制模式下工作,也能够根据发话信息生成发话内容,并语音发出该发话内容。
(HEMS中的发话装置的发话控制)
根据本实施方式的发话控制系统可以与HEMS(Home Energy Management System:家庭能源管理系统)一体地构成。使用图4说明与HEMS一体构成的发话控制系统200A。在图4中,发话装置1A、空调室内机2A以及空调室外机2B、以及服务器3分别与图1中的发话装置1、电气设备2以及服务器3对应。即,在图4中,发话装置1A作为智能手机等便携终端示出。
(系统构成)
图4是与HEMS一体构成的发话控制系统200的概略构成图。
在图4所示的发话控制系统200A中,具备:空调室内机2A、空调室外机(电气设备)2B、电视机等家电设备;与蓄电池21连接的功率调节器22;能够从功率调节器22获取信息并显示的电力监视器23;能够对空调室内机2A发送远程控制信号的HEMS控制器30;以及使用Ethernet(注册商标)与HEMS控制器30有线连接的路由器31。
家电设备中的空调室内机2A和空调室外机2B在两个装置中通常被称为空调,在以下的说明中仅记载为空调的情况下,视为包含空调室内机2A和空调室外机2B的设备。空调室内机2A具有使用无线LAN进行通信的功能,能够经由具有无线LAN的功能的路由器31与HEMS控制器30进行通信。
功率调节器22与太阳能电池(太阳能电池面板)27和蓄电池21连接,具有将由太阳能电池27发出的直流电力积蓄到蓄电池21的功能、将由太阳能电池27发出的直流电力或积蓄到蓄电池21的电力转换为交流电力并供给到负载(电气设备)的功能、向系统电力网25逆流的功能、将从系统电力网25供给的交流电力转换为直流电力并积蓄到蓄电池21的功能等。此外,通过使用传感器26来监视设置有本实施方式的发话控制系统200A的房屋的主干的电力,由此获取与电流的方向、其大小有关的信息。由此,掌握是从系统电力网25购买电力的状态(购电状态)还是向系统电力网25进行逆流的状态(售电状态)。进一步,功率调节器22也具有测量由太阳能电池27发出的电力的功能、从蓄电池21获取蓄电池21的蓄电量的信息的功能等。
电力监视器23具有显示部、用户操作受理部、进行与功率调节器22的通信的功能等,用户通过使用电力监视器23,能够确认由功率调节器22获取的信息。进一步,电力监视器23能够受理来自用户的操作,能够进行功率调节器22等的运转控制。此外,功率监视器23具有经由无线LAN的通信功能,能够基于控制命令与外部设备协作,该控制命令是符合ECHONETLite(注册商标)等的基于无线的控制命令。
HEMS控制器30是将符合ECHONETLite的控制命令发送到控制对象的设备(在本实施方式中为空调室内机2A)的控制装置。控制命令可以基于HEMS控制器30的判断来发送,或者可以转发从服务器3发送的控制命令。此时,来自HEMS控制器30的控制命令经由路由器31被发送至控制对象的设备。
此外,HEMS控制器30具备如下功能:使用与各家电设备对应地设置的未图示的电力测量装置来测量各家电设备的消耗电力,并将与测量出的消耗电力有关的信息发送到服务器3。因此,用户能够使用发话装置1A确认服务器3中储存的与各家电设备的电力有关的信息。此外,能够使用符合ECHONETLite的控制命令与上述的电力监视器23协作。
路由器31是一般的路由器,具有与互联网40连接的功能。另外,路由器31具备IEEE802.11标准的无线LAN(Local Area Network:局域网),利用无线LAN与空调室内机2A进行通信。另一方面,使用Ethernet(注册商标)与HEMS控制器30有线连接。
除了使用图1及图2说明的功能之外,发话装置1A还具有作为HEMS的构成要素的功能。即,如果从连接到HEMS的电气设备获取的发话信息的紧急度为规定的阈值以上,则即使在抑制模式下工作,发话装置1A也能够根据发话信息生成发话内容,并进行语音发话。然后,发话装置1A访问服务器3而能够进行与发话控制系统200A内的各家电设备的消耗电力相关的信息、动作状态的阅览、针对各家电设备的控制命令的登记。
由于发话装置1A与服务器3之间的通信经由公众电话线路网41与因特网40进行,所以用户也能够从外出目的地等进行控制。并且,在用户位于房屋内的情况下,也可以使用无线LAN经由路由器31进行通信。
除了使用图1和图2说明的功能之外,服务器3还具有与HEMS控制器30进行通信的接口,并具有在从发话装置1A对控制对象的家电设备进行了控制命令的情况下,将其发送给HEMS控制器30的功能。此外,服务器3具有接收从HEMS控制器30发送的关于发电电力、售电电力、购电电力、电气设备的消耗电力以及累计电量的电力的信息,并存储该信息的功能。此外,服务器3还具备与发话装置1A进行通信的接口,如果存在来自发话装置1A的请求,则服务器3向发话装置1A提供这些信息。
并且,在本实施方式中,通过一个服务器3来实现上述的功能,但也可以通过分别独立的服务器实现各个功能。例如,可以由分别独立的服务器来构成将向发话装置1A发送发布信息等的服务器以及具有HEMS控制器30所关联的功能的服务器,并在服务器间进行交互,其中,HEMS控制器30所关联的功能是指远程控制家电设备的功能、接收与发送来的电力、累计电量有关的信息的功能等。
〔第二实施方式〕
使用图5说明本发明的第二实施方式。并且,为了便于说明,对与在上述实施方式中说明的构件具有相同功能的构件,标注相同的附图标记,并不重复其说明。
(发话控制系统的构成)
使用图5说明根据本实施方式的发话控制系统200B的构成。图5是表示发话控制系统200B的主要部分构成的一例的框图。发话控制系统200B具备发话装置1B、电气设备2以及服务器3B。
发话控制系统200B的基本结构与上述第一实施方式的发话控制系统200相同,但一部分构成不同。发话控制系统200B是在服务器3B中实施关于上述第一实施方式中发话装置1实施的各种处理的构成。
发话装置1B是使服务器3B实施由上述第一实施方式的发话装置1实施的各种处理的构成。具体而言,发话装置1B经由通信部20向服务器3B发送语音输入部18受理的语音、各种传感器的检测结果以及从电气设备2接收到的信息。然后,发话装置1B根据经由通信部20从服务器3B接收到的各种数据,进行使用语音输出部19的语音发话、动作模式的切换等。
服务器3B能够实施上述第一实施方式中由发话装置1实施的各种处理。在图示的例子中,服务器3B具备服务器控制部310以及服务器通信部320。服务器控制部310具备语音识别部311、频率分析部312、图像分析部313、命令检测部314、动作模式控制部315、显示控制部316、发话控制部317以及紧急度判断部318。
服务器控制部310经由服务器通信部320在与发话装置1B之间收发各种数据。语音识别部311、频率分析部312、图像分析部313、命令检测部314、动作模式控制部315、显示控制部316、发话控制部317以及紧急度判断部318分别与上述第一实施方式中的语音识别部100、频率分析部101、图像分析部102、命令检测部103、动作模式控制部104、显示控制部105、发话控制部106以及紧急度判断部107对应。
具体而言,如果从发话装置1B接收到的数据中存在用于将该发话装置1B的动作模式切换为抑制模式的命令,则服务器3B能够通过命令检测部314检测该命令。此时,动作模式控制部315不向发话控制部317发出生成发话内容的指示,由此能够将发话装置1B的动作模式切换为抑制模式。
此外,如果发话信息为发话装置1B所具备的各种传感器的检测结果、发话装置1B从电气设备2接收到的信息以及服务器3B所具有的信息中的至少任一个,则服务器3B的紧急度判断部318能够判断该发话信息的紧急度。如果发话信息的紧急度是规定的阈值以上,则动作模式控制部315即使在使发话装置1B在抑制模式下工作的情况下,也指示发话控制部317根据发话信息生成发话内容。发话控制部317所生成的发话内容被发送到发话装置1B,发话装置1B使用语音输出部19对接收到的发话内容进行声音发话。
由此,根据本实施方式的发话控制系统200B通过服务器3B实施各种处理,从而与上述第一实施方式所涉及的发话控制系统200同样地,如果有应向用户紧急通知的信息,则能够对发话装置1B可靠地进行语音发话。
〔变形例〕
在上述各实施方式中,发话装置1、1A、1B进行语音发话的情况下的发话的音调、音量等可以根据发话信息的紧急度而不同。例如,发话装置1、1A、1B可以根据发话信息的紧急度的高度来增大语音发话的音量并进行发话。此外,在发话信息是火灾信息这样的危险性高的信息的情况下,发话装置1、1A、1B也可以以具有紧迫感的音调进行语音发话。
此外,也可以使用发话装置1、1A以及1B以外的设备向用户通知紧急度在规定的阈值以上的发话信息。例如,如果电气设备2是具备显示器、扬声器的构成,则发话装置1、1A以及1B也可以根据发话信息生成发话内容并进行语音发话,同时使用该电气设备2通过影像、声音来输出发话信息。
〔通过软件的实现例〕
发话装置1的控制块(尤其是动作模式控制部104及紧急度判断部107)可以由形成在集成电路(IC芯片)等中的逻辑电路(硬件)实现,或者可以通过软件来实现。
在后者的情况下,发话装置1具备计算机,该计算机执行作为实现各功能的软件的程序的命令。该计算机例如至少包括一个处理器(控制装置),同时至少包括一个用于存储所述程序的、计算机可读取的存储介质。并且,在所述计算机中,通过所述处理器从所述记录介质读取并执行所述程序来达到本发明的目的。作为所述处理器能够使用例如CPU(Central Processing Unit)。作为存储介质,可以使用“非暂时性有形介质”,例如ROM(Read Only Memory)等之外,还可以使用磁带、磁盘、卡、半导体存储器、可编程逻辑电路等。此外,也可以还具备对所述程序进行展开的RAM(Random Access Memory)等。此外,所述程序也可以经由可传输该程序的任意的传输介质(通信网络、广播波等)供给至所述计算机。并且,本发明的一个方面也可以以上述程序通过电子传输来具体化、并嵌入在载波中的数据信号的形式来实现。
〔总结〕
本发明的第一方面所涉及的发话装置为在检测出规定的命令时抑制语音发话的发话装置,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换动作模式,对从所述发话装置、与所述发话装置可通信地连接的服务器以及外部设备中的至少任一方获取的、用于生成发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使所述发话装置发出语音。
根据上述构成,在发话装置中,如果存在紧急度为规定的阈值以上的发话信息,则即使发话装置在抑制模式下工作,也能够根据发话信息生成发话内容,并进行语音发话。由此,能够提供一种如果存在例如火灾信息这样的应向用户紧急通知的信息则可靠地进行语音发话的、便利性优异的发话装置。
本发明的第二方面所涉及的发话装置可以构成为:在所述第一方面中,所述发话信息包括物理量,在该物理量从稳定状态大幅变化的情况下,判断为所述紧急度在规定的阈值以上。根据上述构成,在发话信息中包含的物理量从稳定装置大幅变化,应向用户紧急通知的必要性高的情况下,即使在抑制模式下工作,发话装置1也可以根据该发话信息生成发话内容并进行语音发话。
本发明的第三方面的发话装置可以构成为:在所述第二方面中,如果所述物理量与基于与该物理量相关的历史记录的统计量之间的差值为规定值以上,则判断为所述紧急度为规定的阈值以上。根据上述结构,在发话信息所包含的物理量从基于与该物理量相关的历史记录的统计量偏离了规定值以上的情况下,即使在抑制模式下工作,发话装置也能够根据发话信息生成发话内容并进行语音发话。
本发明的第四方面涉及的发话装置可以构成为:在所第二或第三方面中,所述物理量是电力消耗量。根据上述构成,在发话信息中包含的电力消耗量从稳定装置大幅变化的情况下,即使在抑制模式下工作,发话装置也可以根据发话信息生成发话内容,并进行语音发话。
本发明的第五方面所涉及的服务器为与发话装置可通信的连接,并使该发话装置进行语音发话的服务器,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换所述发话装置的动作模式,对从所述发话装置、所述服务器以及外部设备中的至少任一方获取的、用于生成发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使所述发话装置发出语音。根据所述构成,能够获得与所述方式1相同的作用和效果。
本发明的第六方面所涉及的控制系统为语音发话的控制系统,包括在检测出规定的命令时抑制语音发话的发话装置以及与所述发话装置可通信的连接的服务器,其中,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换所述发话装置的动作模式,对从所述发话装置、所述服务器以及外部设备中的至少任一方获取的、用于生成该发话装置的发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述发话装置的所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使该发话装置发出语音。根据所述构成,能够获得与所述方式1相同的作用和效果。
本发明的第七方面所涉及的控制方法为语音发话的控制方法,针对检测出规定的命令时抑制语音发话的发话装置,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换动作模式,对从所述发话装置、与所述发话装置可通信地连接的服务器以及外部设备中的至少任一方获取的、用于生成该发话装置的发话内容而使用的发话信息判断紧急度,在所述紧急度为规定的阈值以上的情况下,即使所述发话装置的所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使该发话装置发出语音。根据所述构成,能够获得与所述方式1相同的作用和效果。
本发明的各方面涉及的发话装置1也可以由计算机实现,在这种情况下,通过使计算机作为所述发话装置1所具备的各部分(软件要素)进行操作从而利用计算机实现所述发话装置1的发话装置的控制程序以及储存有该程序的计算机可读取的存储介质也包含于本发明的范围之内。
本发明不限于上述各实施方式,能在权利要求所示的范围中进行各种变更,将在不同的实施方式中分别公开的技术手段适当组合而得到的实施方式也包含于本发明的技术范围。而且,能够通过组合各实施方式分别公开的技术方法来形成新的技术特征。
附图标记说明
200、200A、200B 发话控制系统
1、1A、1B 发话装置
10 控制部
104 动作模式控制部
106 发话控制部
107 紧急度判断部
11 存储部
2 电气设备(外部设备)
3、3B 服务器
310 服务器控制部
315 动作模式控制部
317 发话控制部
318 紧急度判断部

Claims (8)

1.一种在检测出规定的命令时抑制语音发话的发话装置,其特征在于,
在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换动作模式,
对从所述发话装置、与所述发话装置可通信地连接的服务器以及外部设备中的至少任一方获取的、用于生成发话内容而使用的发话信息判断紧急度,
在所述紧急度为规定的阈值以上的情况下,即使所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使所述发话装置发出语音。
2.如权利要求1所述的发话装置,其特征在于,
所述发话信息包括物理量,在该物理量从稳定状态大幅变化的情况下,判断为所述紧急度在规定的阈值以上。
3.如权利要求2所述的发话装置,其特征在于,
如果所述物理量与基于与该物理量相关的历史记录的统计量之间的差值为规定值以上,则判断为所述紧急度为规定的阈值以上。
4.如权利要求2或3所述的发话装置,其特征在于,
所述物理量是电力消耗量。
5.一种与发话装置可通信的连接,并使该发话装置进行语音发话的服务器,其特征在于
在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换所述发话装置的动作模式,
对从所述发话装置、所述服务器以及外部设备中的至少任一方获取的、用于生成发话内容而使用的发话信息判断紧急度,
在所述紧急度为规定的阈值以上的情况下,即使所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使所述发话装置发出语音。
6.一种语音发话的控制系统,包括在检测出规定的命令时抑制语音发话的发话装置以及与所述发话装置可通信的连接的服务器,其特征在于,
在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换所述发话装置的动作模式,
对从所述发话装置、所述服务器以及外部设备中的至少任一方获取的、用于生成该发话装置的发话内容而使用的发话信息判断紧急度,
在所述紧急度为规定的阈值以上的情况下,即使所述发话装置的所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使该发话装置发出语音。
7.一种语音发话的控制方法,其特征在于,
针对检测出规定的命令时抑制语音发话的发话装置,在语音发话未被抑制的通常模式与语音发话被抑制的抑制模式之间切换所述发话装置的动作模式,
对从所述发话装置、与所述发话装置可通信地连接的服务器以及外部设备中的至少任一方获取的、用于生成该发话装置的发话内容而使用的发话信息判断紧急度,
在所述紧急度为规定的阈值以上的情况下,即使所述发话装置的所述动作模式为所述抑制模式,也根据所述发话信息生成所述发话内容,使该发话装置发出语音。
8.一种程序,其特征在于,所述程序使计算机作为权利要求1所述的发话装置发挥作用。
CN201980061232.9A 2018-09-21 2019-09-20 发话装置、服务器、控制系统、控制方法及程序 Pending CN112740170A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018177817A JP2020052445A (ja) 2018-09-21 2018-09-21 発話装置、サーバ、制御システム、制御方法、およびプログラム
JP2018-177817 2018-09-21
PCT/JP2019/037109 WO2020059879A1 (ja) 2018-09-21 2019-09-20 発話装置、サーバ、制御システム、制御方法、およびプログラム

Publications (1)

Publication Number Publication Date
CN112740170A true CN112740170A (zh) 2021-04-30

Family

ID=69887253

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980061232.9A Pending CN112740170A (zh) 2018-09-21 2019-09-20 发话装置、服务器、控制系统、控制方法及程序

Country Status (5)

Country Link
US (1) US20220036876A1 (zh)
JP (1) JP2020052445A (zh)
CN (1) CN112740170A (zh)
DE (1) DE112019004709T5 (zh)
WO (1) WO2020059879A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118675500A (zh) * 2024-08-21 2024-09-20 成都职业技术学院 一种应急语言自动生成方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7539628B2 (ja) 2020-03-24 2024-08-26 株式会社ジェイテクト 飼育装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009080601A (ja) * 2007-09-26 2009-04-16 Sanyo Electric Co Ltd 緊急地震速報配信システム及び電話装置
JP2013191912A (ja) * 2012-03-12 2013-09-26 Sharp Corp 情報処理システム、情報処理方法およびプログラム
JP2014085975A (ja) * 2012-10-26 2014-05-12 Hochiki Corp 防災警報システム
JP2015148648A (ja) * 2014-02-04 2015-08-20 シャープ株式会社 対話システム、発話制御装置、対話装置、発話制御方法、発話制御装置の制御プログラム、および、対話装置の制御プログラム
US9368114B2 (en) * 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
JP2016224393A (ja) * 2015-05-27 2016-12-28 シャープ株式会社 発話制御装置、及び電子機器
CN106453966A (zh) * 2016-12-05 2017-02-22 北京奇虎科技有限公司 移动通信设备间互动提示方法及设备
JP2017161637A (ja) * 2016-03-08 2017-09-14 シャープ株式会社 発話装置、発話装置の制御方法、制御プログラム、および記録媒体

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140343937A1 (en) * 2013-05-16 2014-11-20 Voxer Ip Llc Interrupt mode for communication applications
US8564421B2 (en) * 2010-04-30 2013-10-22 Blackberry Limited Method and apparatus for generating an audio notification file
JP2013167806A (ja) * 2012-02-16 2013-08-29 Toshiba Corp 情報通知支援装置、情報通知支援方法、および、プログラム
US9875494B2 (en) * 2013-04-16 2018-01-23 Sri International Using intents to analyze and personalize a user's dialog experience with a virtual personal assistant
JP6771149B2 (ja) * 2015-10-06 2020-10-21 パナソニックIpマネジメント株式会社 情報端末の制御方法、および、情報システム
US9946862B2 (en) * 2015-12-01 2018-04-17 Qualcomm Incorporated Electronic device generating notification based on context data in response to speech phrase from user
US10338766B2 (en) * 2017-09-06 2019-07-02 Realwear, Incorporated Audible and visual operational modes for a head-mounted display device
US10623512B2 (en) * 2017-10-11 2020-04-14 International Business Machines Corporation Presenting notifications to a user of a computing device
WO2019195799A1 (en) * 2018-04-05 2019-10-10 Synaptics Incorporated Context-aware control for smart devices
US11276396B2 (en) * 2018-05-01 2022-03-15 Dell Products, L.P. Handling responses from voice services
US11076035B2 (en) * 2018-08-28 2021-07-27 Sonos, Inc. Do not disturb feature for audio notifications
US11416210B2 (en) * 2019-06-07 2022-08-16 Sonos, Inc. Management of media devices having limited capabilities

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009080601A (ja) * 2007-09-26 2009-04-16 Sanyo Electric Co Ltd 緊急地震速報配信システム及び電話装置
JP2013191912A (ja) * 2012-03-12 2013-09-26 Sharp Corp 情報処理システム、情報処理方法およびプログラム
JP2014085975A (ja) * 2012-10-26 2014-05-12 Hochiki Corp 防災警報システム
US9368114B2 (en) * 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
JP2015148648A (ja) * 2014-02-04 2015-08-20 シャープ株式会社 対話システム、発話制御装置、対話装置、発話制御方法、発話制御装置の制御プログラム、および、対話装置の制御プログラム
JP2016224393A (ja) * 2015-05-27 2016-12-28 シャープ株式会社 発話制御装置、及び電子機器
JP2017161637A (ja) * 2016-03-08 2017-09-14 シャープ株式会社 発話装置、発話装置の制御方法、制御プログラム、および記録媒体
CN106453966A (zh) * 2016-12-05 2017-02-22 北京奇虎科技有限公司 移动通信设备间互动提示方法及设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118675500A (zh) * 2024-08-21 2024-09-20 成都职业技术学院 一种应急语言自动生成方法

Also Published As

Publication number Publication date
US20220036876A1 (en) 2022-02-03
JP2020052445A (ja) 2020-04-02
DE112019004709T5 (de) 2021-07-15
WO2020059879A1 (ja) 2020-03-26

Similar Documents

Publication Publication Date Title
US10397042B2 (en) Method and apparatus for automation and alarm architecture
US10803720B2 (en) Intelligent smoke sensor with audio-video verification
CN109982228B (zh) 一种麦克风故障检测方法及移动终端
CN110506185B (zh) 空气调和机及其控制方法、及控制程序
US11189285B2 (en) Air purifier
WO2016049778A1 (en) Method and apparatus for resource balancing in an automation and alarm architecture
WO2016075887A1 (ja) 外出支援装置、およびプログラム
CN107612798B (zh) 呼叫门铃的方法、装置和系统
WO2017117674A1 (en) Intelligent smoke sensor with audio-video verification
CN112032988B (zh) 空调的控制系统及方法、电子设备
CN105371445A (zh) 一种控制方法以及装置
CN112740170A (zh) 发话装置、服务器、控制系统、控制方法及程序
US20170085598A1 (en) Communication apparatus and wireless communication system including same
CN111669681B (zh) 智能音响的控制方法、设备及存储介质
KR20170044331A (ko) 무선통신을 이용한 선박 내 경보 출력 시스템
CN117031973A (zh) 一种家电设备控制方法、装置、设备及存储介质
KR102378126B1 (ko) Lte망을 이용한 건물 절전 시스템의 원격 고장진단 및 모니터링 시스템
CN113167496A (zh) 空气调节系统
US11443743B2 (en) Voice control information output system, voice control information output method, and recording medium
US20210035577A1 (en) Control system and control method
WO2019034244A1 (en) IMAGE DISPLAY DEVICE WITH PRIORITY ALLOCATION FUNCTION TO SOUNDS
KR20180086046A (ko) 감시 시스템 및 그 동작 방법
US20200058319A1 (en) Information processing device, electronic apparatus, control method, and storage medium
JP2016045810A (ja) メッセージ送信サーバ、外部機器、メッセージ送信システム、メッセージ送信サーバの制御方法、制御プログラム、および記録媒体
JP2023148419A (ja) 警報システム及び警報器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination