CN110709785B - 设备控制系统 - Google Patents

设备控制系统 Download PDF

Info

Publication number
CN110709785B
CN110709785B CN201880035915.2A CN201880035915A CN110709785B CN 110709785 B CN110709785 B CN 110709785B CN 201880035915 A CN201880035915 A CN 201880035915A CN 110709785 B CN110709785 B CN 110709785B
Authority
CN
China
Prior art keywords
unit
sound
control
function
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880035915.2A
Other languages
English (en)
Other versions
CN110709785A (zh
Inventor
田坂昭夫
广瀬忠史
北浦嘉浩
松原笃志
坪井宏祐
郑志明
栗山直子
阪井圣一
松村直树
大岛久典
贡图鲁·纳文
前田敏行
津田哲志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daikin Industries Ltd
Original Assignee
Daikin Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daikin Industries Ltd filed Critical Daikin Industries Ltd
Publication of CN110709785A publication Critical patent/CN110709785A/zh
Application granted granted Critical
Publication of CN110709785B publication Critical patent/CN110709785B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/56Remote control
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/30Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
    • F24F11/46Improving electric energy efficiency or saving
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/62Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/34Graphical or visual programming
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/56Remote control
    • F24F11/58Remote control using Internet communication
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/62Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • F24F11/63Electronic processing
    • F24F11/64Electronic processing using pre-stored data

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Selective Calling Equipment (AREA)
  • Air Conditioning Control Device (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Air Humidification (AREA)
  • Remote Monitoring And Control Of Power-Distribution Networks (AREA)
  • Stored Programmes (AREA)

Abstract

设定支持装置(1400)具备关键字输入接受部(1410)、控制命令选择部(1420)、以及特定控制登记部(1430),用于支持通过声音输入控制控制设备的控制系统(1001)中的特定控制的设定。关键字输入接受部(1410)接受与关键字对应的信息的输入。控制命令选择部(1420)将对控制设备(1010、1020)的规定控制命令显示在编辑画面(G)上,并接受控制命令的选择。特定控制登记部(1430)将由关键字输入接受部(1410)输入的关键字(K)和由控制命令选择部(1420)选择的控制命令相关联地登记到特定控制(DB1104T)。

Description

设备控制系统
技术领域
本发明涉及一种设备控制系统。
背景技术
已经开发了使用户的周围环境舒适的各种设备。在这些设备中也有一些识别用户的声音的设备。
专利文献1(日本特开2006-308848号公报)中公开了一种基于用户发出的声音控制设备的技术。
专利文献2(日本特许第2552744号公报)中公开了一种能够按每个用户设定浴室环境的系统。
专利文献3(日本特开2006-320621号公报)中公开了一种释放减轻压力的气味的空调机。
专利文献4(日本特开2001-324202号公报)中公开了一种具备声音输入输出单元的空调机。
专利文献5(国际公开2012/176690号公报)中公开的结构推定用户关于“节能自动控制”的容限,实现功耗的降低和舒适性的并存。
专利文献6(特开2009-290967号公报)中公开有一种促进住宅的功耗抑制的系统。
专利文献7(日本特开2010-181064号公报)中公开有一种可进行声音操作的空调机。
发明内容
发明要解决的问题
在通过声音输入来控制多个设备的情况下,每次控制单个设备可能很麻烦。此外,难以在另一个地方再现用户在某个地方感到舒适的环境。此外,在现有系统中,可能无法使有愤怒情绪的人平静下来。另外,有关关于环境的舒适性,相同的用户的感觉可能不同。此外,使用户输入关于是否允许降低功耗的意向会损害实用性。而且,在现有系统中,没有利用关于多个设备的顺序动作的信息。另外,在现有系统中,很少假设用户拥有多个可进行声音操作的设备的情况。
第一问题是,在通过声音输入控制设备的控制系统中,提供一种用于提高用户的便利性的设定支持装置及程序。
第二问题是,在不同的地方容易地再现用户喜好的环境。
第三问题是,提供一种能够使说话者冷静的空气调节系统。
第四问题是,更加忠实地实现用户对室内环境调节的期望。
第五问题是,推定作为空调机等的用户对于功耗的削减的容限而不依赖于用户的操作,并且维持舒适性。
第六问题是,通过利用关于设置在住宅中的多个设备的顺序动作的信息,为用户提供舒适感。
第七问题是,提供能够用简单的操作停止有关多个可进行声音操作的设备的声音识别处理的设备控制系统、由该设备控制系统控制的设备、以及设备的控制方法。
用于解决问题的方案
[第一构成]
第一观点所涉及的设定支持装置在控制系统中使用,该控制系统具备接受用户发出的声音的输入的声音输入接受部、分析声音的声音输入分析部、基于声音输入分析部的分析结果控制控制设备的控制部、以及将与规定关键字对应的声音的输入和控制设备的规定的控制相关联地存储为特定控制的特定控制存储部,该设定支持装置是用于支持特定控制的设定的装置。在此,设定支持装置具备关键字输入接受部、控制命令选择部、以及特定控制登记部。在此,关键字输入接受部接受与关键字对应的信息的输入。控制命令选择部将对设备的规定控制命令显示在编辑画面上,并接受控制命令的选择。特定控制登记部将由关键字输入接受部输入的关键字与由控制命令选择部选择的控制命令相关联地登记到特定控制存储部。
在第一观点所涉及的设定支持装置中,由于可以在编辑画面上将对应于声音输入的关键字和对设备的控制命令相关联,所以在通过声音输入来控制设备的控制系统中,用户可容易地设定控制命令。其结果是,在通过声音输入控制设备的控制系统中,能够提高用户的便利性。
第二观点所涉及的设定支持装置在第一观点所涉及的设定支持装置中,控制命令选择部在编辑画面上以下拉格式显示多个所述控制命令。
在第二观点所涉及的设定支持装置中,由于控制命令选择部在编辑画面上以下拉格式显示多个所述控制命令,所以用户可直观地进行操作来设定控制命令。
第三观点所涉及的设定支持装置在第一观点或第二观点的设定支持装置中,特定控制登记部将多个控制命令与一个关键字相关联。
在第三观点所涉及的设定支持装置中,由于特定控制登记部将多个控制命令与一个关键字相关联,所以用户可通过直观地操作设定控制命令。
第四观点所涉及的设定支持装置在第一观点至第三观点中任一观点的设定支持装置中,关键字输入接受部在编辑画面上显示能够输入关键字的关键字图像。另外,控制命令选择部在编辑画面上显示与控制命令对应的控制命令图像。另外,特定控制登记部通过在编辑画面上指定和移动关键字图像及控制命令图像并建立关联,使关键字和控制命令相关联。
在第四观点所涉及的设定支持装置中,由于具备上述构成,所以用户可通过直观的操作设定控制命令。
第五观点所涉及的设定支持装置在第一观点至第四观点中任一观点的设定支持装置中,特定控制登记部将特定控制与识别用户的用户信息相关联地登记到特定控制存储部。
在第五观点所涉及的设定支持装置中,由于特定控制登记部将特定控制和用户信息相关联地登记,所以可设定与每个用户的喜好一致的特定控制。
第六观点所涉及的设定支持装置在第一观点至第五观点中任一观点的设定支持装置中,特定控制登记部将特定控制与用户读出关键字时的声纹相关联地登记到特定控制存储部。
在第六观点所涉及的设定支持装置中,由于特定控制登记部将特定控制登记部和用户读出关键字时的声纹相关联地登记到特定动作存储部,所以可设定只有已登记声纹的用户能够控制的特定控制。
第七观点所涉及的程序在控制系统中使用,该控制系统具备:接收用户发出的声音的输入的声音输入接受部、分析所述声音的声音输入分析部、基于声音输入分析部的分析结果控制控制设备的控制部、以及将与规定关键字对应的声音的输入和所述控制设备的规定控制相关联地存储为特定控制的特定控制存储部,该程序用于实现用于支持特定控制的设定的设定支持装置。具体地说,第七观点所涉及的程序使计算机作为关键字输入接受部、控制命令选择部、以及特定控制登记部发挥作用。在此,关键字输入接受部接受与关键字对应的信息的输入。控制命令选择部在编辑画面上显示对控制设备的规定控制命令,并接受控制命令的选择。特定控制登记部将由关键字输入接受部输入的关键字和由控制命令选择部选择的控制命令相关联地登记到特定控制存储部。
在第七观点所涉及的程序中,由于可在计算机中使用,并将与声音输入对应的关键字和对控制设备的控制命令在编辑画面上相关联,所以在通过声音输入来控制设备的控制系统中,用户可容易地设置控制命令。其结果是,在通过声音输入控制设备的控制系统中,能够提高用户的便利性。
[第二构成]
第八观点所涉及的环境调节系统使用设置于对象空间的对象环境调节设备来调节环境。环境调节系统具备设备信息获取部、存储部、运算部、以及控制部。设备信息获取部获取对象环境调节设备的信息。存储部存储要实现的环境状态。运算部计算用于实现环境状态的对象环境调节设备的控制参数。控制部基于控制参数控制对象环境调节设备。
根据该构成,存储部存储的环境状态通过基于控制参数的控制再现为对象空间的环境。因此,能够再现用户喜好的环境。
第九观点所涉及的环境调节系统在第八观点所涉及的环境调节系统中,基于设备信息获取部从设置在与对象空间不同的基准空间中的基准环境调节设备或基准环境传感器获取的信息,由运算部计算环境状态。
根据该构成,基于基准空间的环境创建环境状态,并在对象空间中可再现该环境状态。因此,能够在对象空间中可再现基准空间的环境。
第十观点所涉及的环境调节系统在第九观点所涉及的环境调节系统中,还具备接受来自用户的输入的输入部和从所述输入提取指令的指令提取部。在指令提取部提取了旨在进行环境状态的再现的所述指令的情况下,控制部基于为实现环境状态而计算的控制参数,控制对象环境调节设备。
根据该构成,当接到旨在进行环境状态再现的指令时,控制部根据环境状态控制对象环境调节设备。因此,通过用户发出的指令来再现用户喜好的环境。
第十一观点所涉及的环境调节系统在第十观点所涉及的环境调节系统中,还具备基于输入进行用户认证的认证部。在认证部将用户认证为授权持有者的情况下,控制部能够控制对象环境调节设备。
根据该构成,在用户被认证为授权持有者的情况下,用户能够控制环境调节设备。因此,因为无权限者不能控制环境调节设备,所以易于确保安全。
第十二观点所涉及的环境调节系统在第九观点至第十一观点中任一观点所涉及的环境调节系统中,对象环境调节设备及基准环境调节设备均包括空调机。
根据该构成,基准空间及对象空间的环境调节设备均包括空调机。因此,在对象空间中可再现影响用户的舒适感的空气调节。
第十三观点所涉及的环境调节系统在第九观点至第十二观点中任一观点所涉及的环境调节系统中,存储部构成为:基于设备信息获取部从设置于对象空间中的对象环境调节设备或对象环境传感器获取的信息,将环境状态更新为由运算部计算的值。
根据该构成,存储部存储的环境状态能够使用对象空间的环境进行更新。因此,在用户中意对象空间的环境的情况下,可保存与该环境相关的设定。
第十四观点所涉及的环境调节系统在第八观点至第十三观点中任一观点所涉及的环境调节系统中,环境状态包括温度。
根据该构成,环境状态包括温度。因此,用户喜好的温度在对象空间中可再现。
第十五观点所涉及的环境调节系统在第八观点至第十四观点中任一观点所涉及的环境调节系统中,环境状态包括风量。
根据该构成,环境状态包括风量。因此,用户喜好的风量在对象空间中可再现。
第十六观点所涉及的环境调节系统在第八观点至第十五观点中任一观点所涉及的环境调节系统中,环境状态包括湿度。
根据该构成,环境状态包含湿度。因此,用户喜好的湿度在对象空间中可再现。
第十七观点所涉及的环境调节系统在第八观点至第十六观点中任一观点所涉及的环境调节系统中,环境状态包括照度。对象环境调节设备包括照明器具。
根据该构成,环境状态包括照度。因此,用户喜好的照度在对象空间中可再现。
第十八观点所涉及的环境调节系统在第八观点至第十七观点中任一观点所涉及的环境调节系统中,环境状态包括气味。对象环境调节设备包括芳香发生器。
根据该构成,环境状态包括气味。因此,用户喜好的味道在对象空间中可再现。
[第三构成]
第十九观点所涉及的空气调节系统具备调节空气送出部、声音探测部、声音输入分析部、判定部、以及控制部。调节空气送出部向对象空间送出调节空气。声音探测部探测对象空间中存在的说话者发出的声音。声音分析部分析声音的输入并将其转换为语言信息。判定部判定由声音输入分析部分析的语言信息中是否包含规定怒气用语。在由判定部判定为包含怒气用语的情况下,控制部控制调节空气的状态。
在第十九观点所涉及的空气调节系统中,由于在由声音输入分析部分析的语言信息中包含规定怒气用语的情况下控制调节空气的状态,所以可以使说话者冷静。
第二十观点所涉及的空气调节系统在第十九观点所涉及的空气调节系统中,在判定为包含怒气用语的情况下,控制部基于怒气用语和说话者发出的声音的音量,控制调节空气的状态。
在第二十观点所涉及的空气调节系统中,由于不仅考虑怒气用语,还考虑说话者发出的声音的音量来控制调节空气的状态,所以更确切地说,能够根据说话者的怒气进行控制。
第二十一观点所涉及的空气调节系统在第二十观点所涉及的空气调节系统中,还具备将怒气用语及音量和怒气分类相关联地存储的怒气分类存储部。通过这样的构成,能够实现可进行与怒气分类相应的控制的空气调节系统。
第二十二观点所涉及的空气调节系统在第十九观点至第二十一观点中任一观点的空气调节系统中,还具备特定说话者的位置的位置特定部。而且,在判定为包括怒气用语的情况下,控制部根据说话者的位置来控制调节空气的状态。
在第二十二观点所涉及的空气调节系统中,能够根据说话者的位置准确地控制调节空气。例如,可通过怒气分类提供能够进行精细控制的空气调节系统。
第二十三观点所涉及的空气调节系统在第十九观点至第二十二观点中任一观点的空气调节系统中,还具备声音输出部,在判定为包含怒气用语的情况下,该声音输出部用声音输出用于减轻怒气的句子。
在第二十三观点所涉及的空气调节系统中,由于在调节空气的控制同时,用声音输出用于减轻怒气的句子,所以能够提高使说话者冷静的效果。
第二十四观点所涉及的空气调节系统在第十九观点至第二十三观点中任一观点的空气调节系统中,具备空气调节装置和可经由网络与空气调节装置通信的信息处理装置。而且,空气调节装置具有所述调节空气送出部、所述声音探测部及所述控制部。另外,信息处理装置具有所述声音输入分析部及所述判定部。
在第二十四观点所涉及的空气调节系统中,通过上述构成,可利用网络上的信息处理装置进行系统构建。具体地说,通过使用实现在网络上构建的神经网络等的信息处理装置,能够高精度地执行声音分析。其结果是,能够提高声音输入的分析精度,并且能够提高系统的可靠性。
[第四构成]
第二十五观点所涉及的室内环境调节系统具备存储部、探测部、室内环境调节器、输出部、以及输入部。存储部存储室内环境的设定值。探测部探测室内环境的状态值。室内环境调节器根据设定值调节室内环境。输出部在由探测部探测到的状态值达到设定值的情况下,发出询问用户是否同意状态值的消息。输入部获取用户针对消息的回答。
根据该构成,关于是否同意实现设定温度的环境或者进一步变更室内温度,用户可通过输入部将自己的希望反馈给室内环境调节系统。因此,可改善用户对室内环境的调节的满意度。
第二十六观点所涉及的室内环境调节系统在第二十五观点所涉及的室内环境调节系统中,还具备控制部。控制部重复如下步骤:直到关于最新的状态值用户接受为止,变更设定值,控制室内环境调节器,使得由探测部探测到的状态值达到设定值,并且从输出部发出询问用户是否同意由探测部探测到的状态值的消息。
根据该构成,室内环境调节系统反复进行室内环境的调节和向用户提问,直到得到来自用户的同意为止。因此,用户对室内环境的调节的满意度进一步提高。
第二十七观点所涉及的室内环境调节系统在第二十五观点或第二十六观点所涉及的室内环境调节系统中,室内环境调节器是空调机。设定值是设定温度。状态值是室内温度。
根据该构成,室内环境调节器是空调机。因此,用户对室内温度的满意度提高。
第二十八观点所涉及的室内环境调节系统在第二十五观点或第二十六观点所涉及的室内环境调节系统中,室内环境调节器是加湿器。设定值是设定湿度。状态值是室内湿度。
根据该构成,室内环境调节器是加湿器。因此,用户对室内湿度的满意度提高。
第二十九观点所涉及的室内环境调节系统在第二十五观点或第二十六观点所涉及的室内环境调节系统中,室内环境调节器是照明器具。设定值是设定照度。状态值是室内照度。
根据该构成,室内环境调节器是照明器具。因此,用户对室内照度的满意度提高。
第三十观点所涉及的室内环境调节系统在第二十五观点至第二十九观点中任一观点所涉及的室内环境调节系统中,输入部是从用户的声音获取声音数据的声音输入部。室内环境调节系统还具备从声音数据提取文本的文本提取部和解释文本并提取用户的指令的解释部。
根据该构成,输入部接受用户的声音。因此,由于用户可通过声音向室内环境调节系统发出指令,所以操作简单。
第三十一观点所涉及的室内环境调节系统在第三十观点所涉及的室内环境调节系统中,文本提取部及解释部的至少一方经由网络与室内环境调节器连接。
根据该构成,文本提取部及解释部的至少一方设置于远离室内环境调节器的地方。因此,室内环境调节器不需要承担高处理能力。
第三十二观点所涉及的室内环境调节系统在第三十观点或第三十一观点所涉及的室内环境调节系统中,还具备从声音数据提取声纹并基于声纹识别多个用户的用户识别部。存储部关联存储各用户和关于各用户的设定值记录。室内环境调节系统将与由用户识别部特定的用户对应的设定值记录视为设定值。
根据该构成,用户识别部从声纹识别用户。因此,可将对各用户来说最佳的设定值反映在室内环境中。
第三十三观点所涉及的室内环境调节系统在第三十二观点所涉及的室内环境调节系统中,基于来自由用户识别部识别的用户的同意,更新存储于存储部的设定值记录。
根据该构成,多个用户可分别更新对自己来说最佳的设定值。因此,各用户的满意度进一步提高。
[第五构成]
第三十四观点所涉及的空调管理系统具备空调机、声音输入部、状态提取部、判定部、、以及控制部。声音输入部获取用户发出的声音。状态提取部从声音提取用户的状态。判定部基于用户的状态判定是否进行节能运转。控制部根据判定部的决定进行节能运转。
根据该构成,判定部自动地决定是否进行节能运转。因此,可减轻用户决定的负担。
第三十五观点所涉及的空调管理系统具备空调机、图像输入部、状态提取部、判定部、以及控制部。图像输入部获取用户的图像或视频。状态提取部从图像或视频中提取用户的状态。判定部基于用户的状态判定是否进行节能运转。控制部根据判定部的决定进行节能运转。
根据该构成,判定部自动地决定是否进行节能运转。因此,可减轻用户决定的负担。
第三十六观点所涉及的空调管理系统在第三十四观点所涉及的空调管理系统中,状态是从声音导出的所述用户的情绪。在情绪为积极的情况下,判定部决定进行节能运转,在情绪为负面的情况下,判定部决定不进行所述节能运转。
根据该构成,当存在抱有负面情绪的用户时,不进行节能运转。因此,可进行考虑到抱有负面情绪的用户的运转。
第三十七观点所涉及的空调管理系统在第三十五观点所涉及的空调管理系统中,状态是从图像或视频导出的所述用户的情绪。在情绪为积极的情况下,判定部决定进行节能运转,在情绪为负面的情况下,判定部决定不进行所述节能运转。
根据该构成,存在抱有负面情绪的用户时,不进行节能运转。因此,可进行考虑到抱有负面情绪的用户的运转。
第三十八观点所涉及的空调管理系统在第三十四观点至第三十七观点所涉及的空调管理系统中,节能运转包含降低所述空调机的能力。
根据该构成,在节能运转时空调机的能力下降。因此,可降低空调机的功耗。
第三十九观点所涉及的空调管理系统在第三十四观点至第三十七观点所涉及的空调管理系统中,节能运转包括对来自电力公司的抑制请求作出同意的响应。
根据该构成,节能运转包括对来自电力公司的抑制请求的同意响应。因此,由于基于用户的状态自动地决定同意或拒绝,所以可减轻用户的负担。
[第六构成]
第四十观点所涉及的家庭系统具备输入部、时钟部、记录部、控制部、以及模式(pattern)提取部。输入部接收用户的指令。时钟部获得时间。记录部记录将时间和指令相关联的日志。控制部按照指令控制多个设备。模式提取部通过日志分析,提取包含在规定时间差以内对多个装置发出的多个指令的顺序指令模式。
根据该构成,可获得特征性的顺序指令模式。因此,家庭系统能够掌握用户感到舒适的可能性高的控制的模式。
第四十一观点所涉及的家庭系统在第四十观点所涉及的家庭系统中,还具备预测部,该预测部基于提取的顺序指令模式,预测用户可能要发出的指令。
根据该构成,预测部基于顺序指令模式,预测用户可能要进行的下一设备的控制。因此,家庭系统能够掌握用户感到舒适的可能性高的下一个控制。
第四十二观点所涉及的家庭系统在第四十一观点所涉及的家庭系统中,还具备输出消息的输出部。基于预测,控制部使输出部发出将用户要发出的指令通知给用户的消息。
根据该构成,消息输出部将用户可能喜好进行的下一设备的控制通知给该用户。因此,可抑制用户忘记操作给自己带来舒适感的设备的情况。
第四十三观点所涉及的家庭系统在第四十一观点所涉及的家庭系统中,基于预测,控制部使多个设备中的至少一个执行用户可能要发出的指令。
根据该构成,消息输出部将用户喜好进行的下一设备的控制通知给该用户。因此,可抑制用户忘记操作给自己带来舒适感的设备。
第四十四观点所涉及的家庭系统在第四十观点至第四十三观点中任一观点所涉及的家庭系统中,输入部是从用户的声音获取声音数据的声音输入部。家庭系统还具备从声音数据提取文本的文本提取部和解释文本并提取用户的指令的解释部。
根据该构成,用户可通过声音发出指令。因此,对于用户来说,家庭系统的操作是容易的。
第四十五观点所涉及的家庭系统在第四十观点至第四十四观点中任一观点所涉及的家庭系统中,多个设备包括空调机。
根据该构成,家庭系统控制空调机。因此,家庭系统能够实现用户感到舒适的温度等。
[第七构成]
第四十六观点所涉及的设备控制系统控制第一设备和第二设备。第一设备具有第一声音输入部,发送第一声音输入部接受的声音数据。第二设备具有第二声音输入部,发送第二声音输入部接受的声音数据。设备控制系统具备第一声音数据接受部、第二声音数据接受部、第一声音分析部、第二声音分析部、探测部、以及停止决定部。第一声音数据接受部接受第一设备发送的声音数据。第二声音数据接受部接受第二设备发送的声音数据。第一声音分析部分析第一声音数据接受部接受的声音数据。第二声音分析部分析第二声音数据接受部接受的声音数据。探测部探测第一设备已接受了停止第一功能的指示的情况,第一功能是与声音识别处理相关的功能的至少一部分,声音识别处理是:第一声音输入部接受声音并发送所接受的声音的声音数据,第一声音数据接受部接受所发送的声音数据,并使第一声音分析部分析所接受的声音数据。停止决定部决定停止第二功能的情况,该第二功能是与声音识别处理相关的功能的至少一部分,声音识别处理是:当探测部探测到第一设备已接受了停止第一功能的指示时,关于第二设备,第二声音输入部接受声音并发送所接受的声音数据,第二声音数据接受部接受所发送的声音数据,并使第二声音分析部分析所接受的声音数据。
在本设备控制系统中,在第一设备已接受了停止与声音识别处理相关的功能的至少一部分的第一功能的指示的情况下,停止与第二设备的声音识别处理相关的功能的至少一部分的第二功能。换言之,在本设备控制系统中,用户停止第一设备的声音识别处理,由此,第二设备的声音识别处理也停止。因此,通过利用本设备控制系统,可省去分别停止执行多个设备的声音识别处理的麻烦,能够用简单的操作停止多个设备的声音识别处理。
第四十七观点所涉及的设备控制系统在第四十六观点所涉及的设备控制系统中,第二功能是第二声音输入部的声音接受功能或第二设备的声音数据发送功能。
在此,由于不从第二设备发送声音数据,所以容易防止伴随发送声音数据而产生的有关隐私的问题、声音数据的监听等问题。
第四十八观点所涉及的设备控制系统在第四十七观点所涉及的设备控制系统中,还具备停止请求部,停止请求部根据停止决定部的决定,向第二设备发送请求停止第二功能的信号。
在此,由于第二设备中的第二功能的停止被直接指示给第二设备,所以停止关于第二设备的声音识别处理的可靠性高。
第四十九观点所涉及的设备控制系统在第四十六观点所涉及的设备控制系统中,第二功能是第二声音数据接受部接受第二设备发送的声音数据的功能、第二声音分析部分析第二设备发送的声音数据的功能、或蓄积第二设备发送的声音数据的功能。
在此,可仅通过设备控制系统的处理来停止关于第二设备的声音识别处理。
第五十观点所涉及的设备控制系统在第四十六观点至第四十九观点中任一观点所涉及的设备控制系统中,第二功能是与第一功能同一种类的功能。
在此,在停止了与关于第一设备的声音识别处理相关的功能的情况下,有关关于第二设备的声音识别处理,可停止同一种类的功能。因此,关于声音识别处理,可使第一设备和第二设备一起进入用户期望的状态。
第五十一观点所涉及的设备控制系统在第四十六观点至第五十观点中任一观点所涉及的设备控制系统中,第二设备还具有报知第二功能已被停止的报知部。另外,优选的是,设备控制系统还具备停止信息发送部。当停止决定部已决定停止第二功能时,停止信息发送部向第二设备发送功能停止信息,以使报知部报知第二功能的停止。
在此,当用户对于第一设备停止声音识别处理时,能够确认对于第二设备也已停止了声音识别处理。
第五十二观点所涉及的设备控制系统在第四十六观点至第五十一观点中任一观点所涉及的设备控制系统中,还具备判断与第一设备关联的设备的判断部。在探测部探测到第一设备已接受了停止第一功能的指示且判断部判断为与第一设备关联的设备中包含第二设备的情况下,停止决定部决定对于第二设备停止第二功能。
在此,也能够在与关于第一设备的声音识别处理同时,停止有关与第一设备关联的关于第二设备的声音识别处理。相反而言,在判断为第一设备和第二设备不相关的情况下,即使关于第一设备的声音识别处理被停止,有关关于第二设备的声音识别处理也能够持续有效。
第五十三观点所涉及的设备控制系统在第四十六观点至第五十二观点中任一观点所涉及的设备控制系统中,第一设备接受的第一功能的停止的指示中包括对物理开关的指示、远程控制器进行的指示、或通过声音对第一声音输入部发出的指示中的任何指示。
第五十四观点所涉及的设备控制系统在第四十六观点至第五十三观点中任一观点所涉及的设备控制系统中,探测部还探测第一设备已接受了开始第一功能的指示的情况。优选的是,设备控制系统还具备开始决定部。当探测部探测到第一设备已接受了开始第一功能的指令时,决定部决定使第二设备开始第二功能。
在此,在第一设备已接受了开始(重新开始)与该声音识别处理相关的第一功能的指示的情况下,与关于第二设备的声音识别处理相关的第二功能也被开始(重新开始)。换言之,在本设备控制系统中,用户可通过使关于第一设备的声音识别处理有效,使关于第二设备的声音识别处理也有效。因此,通过利用本设备控制系统,可省去对多个设备中的每一个有效地执行关于声音识别处理的麻烦,并且可通过简单的操作开始关于多个设备的声音识别处理。
第五十五观点所涉及的设备是可进行声音操作的设备。设备具备声音输入部、声音数据发送部、指示接受部、以及停止信息接受部。声音输入部接受声音。声音数据发送部将声音输入部接受的声音作为声音数据发送到具有声音分析部的设备控制系统。指示接受部接受停止与声音识别处理相关的功能的至少一部分的指示,该声音识别处理是:声音输入部接受声音,声音数据发送部发送声音数据,使设备控制系统的声音分析部分析所发送的声音数据。停止信息接受部接受从设备控制系统发送的功能停止信息,该功能停止信息是停止对应于与可进行声音操作的其它设备的声音识别处理相关的功能的至少一部分的、关于停止该设备的与声音设备处理相关的功能的至少一部分的决定的信息。
在本设备中,可根据用户的指示停止关于该设备的声音识别处理,并可配合关于其它设备的声音识别处理的停止,停止关于该设备的声音识别处理。因此,通过使用本设备,可省去分别停止执行关于多个设备的声音识别处理的麻烦,通过简单的操作停止关于多个设备的声音识别处理。
第五十六观点所涉及的设备在第五十五观点所涉及的设备中,指示接受部是物理开关。
在本设备中,由于通过物理开关停止与声音识别处理相关的功能,所以停止声音识别处理的可靠性高。
第五十七观点所涉及的控制方法是第一设备和第二设备的控制方法。第一设备具有第一声音输入部和第一声音数据发送部。第一声音数据发送部将第一声音输入部接受的声音的第一声音数据发送到设备控制系统。设备控制系统具有接受第一声音数据的第一声音数据接受部及分析第一声音数据接受部接受的第一声音数据的第一声音分析部。第二设备具有第二声音输入部和第二声音数据发送部。第二声音数据发送部将第二声音输入部接受的声音的第二声音数据发送到设备控制系统。设备控制系统还具有接受第二声音数据的第二声音数据接受部及分析第二声音数据接受部接受的第二声音数据的第二声音分析部。控制方法具备探测步骤和决定步骤。在探测步骤中,探测第一设备已已接受了停止第一功能的指示的情况,该第一功能是与声音识别处理相关的功能的至少一部分,该声音识别处理是:第一声音输入部接受第一声音,第一声音数据发送部发送第一声音数据,第一声音数据接受部接受所发送的第一声音数据,并使第一声音分析部分析所接受的第一声音数据。在决定步骤中,在探测到第一设备已接受了停止第一功能的指示时,关于第二设备,决定停止第二功能,该第二功能是与声音识别处理相关的功能的至少一部分,该声音识别处理是:第二声音输入部接受第二声音,第二声音数据发送部发送第二声音数据,第二声音数据接受部接受所发送的第二声音数据,并使第二声音分析部分析所接受的声音数据。
在本控制方法中,在探测到第一设备已接受了停止与该声音识别处理相关的功能的至少一部分的第一功能的指示的情况下,决定也停止与关于第二设备的声音识别处理相关的功能的至少一部分的第二功能。因此,通过利用本控制方法,可省去分别停止执行多个设备的声音识别处理的麻烦,并可通过简单的操作停止多个设备的声音识别处理。
附图说明
[第一构成]
图1是表示第一构成的第一实施方式所涉及的设备控制系统1001的构成的示意图;
图2是表示同实施方式所涉及的设备控制系统1001的构成的示意图;
图3是表示同实施方式所涉及的服务器1100的构成的示意图;
图4A是用于说明同实施方式所涉及的设备控制系统1001的动作的序列图;
图4B是用于说明同实施方式所涉及的设备控制系统1001的动作的序列图;
图5是表示同实施方式所涉及的设备控制系统1001的构成的示意图;
图6是表示同实施方式所涉及的设定支持装置1400的构成的示意图;
图7是用于说明同实施方式所涉及的设定支持装置1400的动作的流程图;
图8是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图9是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图10是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图11是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图12是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图13是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图14是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图15是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图;
图16是用于说明同实施方式所涉及的设定支持装置的变形例的示意图;
[第二构成]
图17是第二构成的一实施方式所涉及的环境调节系统2090的概略图;
图18是环境调节系统2090的构成的框图;
图19是基准环境调节设备2062的详细框图;
图20是环境调节系统2090的功能方面的框图;
图21是保存于存储部2017中的环境状态的一例;
图22是表示再现环境状态的对象空间TS的图;
图23是第一变形例所涉及的环境调节系统2090A的概略图;
图24是第二变形例所涉及的环境调节系统2090B的概略图;
[第三构成]
图25是表示第三构成的一实施方式所涉及的空气调节系统3001的概念的示意图;
图26是表示同实施方式所涉及的信息处理单元3020P及服务器100的构成的示意图;
图27是表示同实施方式所涉及的怒气分类DB3104D的构成的示意图;
图28A是用于说明同实施方式所涉及的空气调节系统3001的动作的序列图;
图28B是用于说明同实施方式所涉及的空气调节系统3001的动作的序列图;
图29是表示变形例A所涉及的信息处理单元3020P的构成的示意图;
图30是表示变形例B所涉及的信息处理单元3020P的构成的示意图;
图31是表示变形例D所涉及的空气调节系统3001的概念的示意图;
图32是表示变形例E所涉及的空气调节系统3001的概念的示意图;
[第四构成]
图33是第四构成的一实施方式所涉及的室内环境调节系统4090的概略图;
图34是室内环境调节系统4090的构成的框图;
图35是空调机4062的详细框图;
图36是室内环境调节系统4090的功能方面的框图;
图37是表示微调程序的流程图;
图38是第一变形例所涉及的室内环境调节系统4090A的概略图;
图39是第二变形例所涉及的室内环境调节系统4090B的概略图;
[第五构成]
图40是第五构成所涉及的空调管理系统5090的示意图;
图41是表示第五构成所涉及的空调管理系统5090的构成的框图;
图42是第五构成所涉及的空调管理系统5090的功能方面的框图;
[第六构成]
图43是第六构成的一实施方式所涉及的家庭系统6090的概略图;
图44是家庭系统6090的构成的框图;
图45是家庭系统6090的功能方面的框图;
图46是表示日志的一例的表。
图47是本发明第一变形例所涉及的家庭系统6090A的概略图;
图48是本发明的第二变形例所涉及的家庭系统6090B的功能框图;
[第七构成]
图49是第七构成的一实施方式所涉及的设备控制系统及由设备控制系统控制的设备的概略框图;
图50是用于说明关于声音输入到第一设备的声音输入部时的第一设备及设备控制系统的动作的序列图;
图51是用于说明关于声音输入到第二设备的声音输入部时的第二设备及设备控制系统的动作的序列图;
图52是说明关于第一设备已接受了停止作为声音识别处理的第一功能的一例的声音输入部的声音接受功能的指示时的设备及设备控制系统的动作的序列图;
图53是对第一设备已接受了停止声音数据接受部的接受功能的指示时的设备及设备控制系统的动作进行说明的序列图,该接受功能是声音识别处理的第一功能的一例,即声音数据接受部接受第一设备的声音数据发送部发送的声音数据;
图54是对第一设备已接受了开始(重新开始)声音输入部的声音接受功能的指示时的设备及设备控制系统的动作进行说明的序列图,该声音输入部的声音接受功能是声音识别处理的第一功能的一例;
图55是对第一设备已接受了开始(重新开始)声音数据接受部的接受功能的指示时的设备及设备控制系统的动作进行说明的序列图,该接受功能是声音识别处理的第一功能的一例,即声音数据接受部接受第一设备的声音数据发送部发送的声音数据。
具体实施方式
[第一构成]
(1)设备控制系统1001的概述
(1-1)设备控制系统1001的构成
图1、2是表示本发明一实施方式所涉及的设备控制系统1001的构成的示意图。
设备控制系统1001具备声音输入装置1060、红外线输出装置1070、以及服务器1100。在设备控制系统1001中,用户1005可通过执行向声音输入装置1060输入控制指示来控制规定控制设备。在此,作为控制设备,存在“第一类型设备1010”和“第二类型设备1020”。另外,将这些控制设备配置于房间R中。
此外,在图1、2中,声音输入装置1060、红外线输出装置1070、服务器1100各示出一台,但各装置的数量不限于此。服务器1100可与任意数量的装置连接,并管理这些装置。
第一类型设备1010可通过红外线的输出信号控制。例如,作为第一类型设备1010,可举出电风扇1010a、照明设备1010b、电视1010c、空调1010d等。补充说明的是,可按每个控制设备预先设定红外线的输出信号的模式,并通过使用红外线的输出信号的模式来控制控制设备1010。在此,将红外线的输出信号的模式与控制内容的对应关系存储于后述的红外线模式DB1104A。此外,在以下的说明中,在表示任意第一类型设备时使用符号1010,在表示单个的第一类型设备时标注小写英文字母的下标。
第二类型设备1020可经由网络NW直接控制服务器1100。第二类型设备1020与第一类型设备1010同样,也可举出电风扇1020a、照明设备1020b、电视1020c、空调1020d等。此外,在以下的说明中,在表示任意第二类型设备时使用符号1020,在表示单个的第二类型设备时标注小写英文字母的下标。
声音输入设备1060接受控制指示对规定控制设备1010、1020的输入。在此,声音输入装置1060具有麦克风,经由该麦克风通过声音输入接受来自用户1005的针对控制设备1010、1020的控制指示。然后,声音输入设备1060将对应于所接受的声音输入的声音信息发送到服务器1100。此外,在声音输入装置1060探测到用户1005发出的声音的情况下,将该声音信息原样发送到服务器1100。
红外线输出装置1070向控制设备(第一类型设备)1010输出红外线。另外,红外线输出装置1070具有姿势控制机构1070A,当从服务器1100接收到后述的相对位置信息时,基于该相对位置信息控制红外线输出装置1070的姿势。此外,红外线输出装置1070可以安装在位置被固定于规定空间(房间R)内的固定式设备1020F的内部。固定式设备1020F例如是空调机、照明器具、电视等,并被安装固定于房间R的天花板或墙壁上。或者,固定式设备1020F也可以被嵌入固定于房间R的天花板或墙壁中。
如图3所示,服务器1100具有输入部1101、输出部1102、通信部1103、存储部1104、以及处理部1105,经由因特网等网络NW连接到声音输入装置1060及红外线输出装置1070。
在此,输入部1101可由任意输入装置实现,向服务器1100输入各种信息。输出部1102可由任意输出装置实现,输出来自服务器1100的各种信息。通信部1103与外部的网络NW连接,可进行信息通信。
存储部1104由ROM、RAM等实现,存储输入到服务器1100的信息及通过服务器1100计算的信息等。而且,存储部1104存储“红外线模式数据库(DB)1104A”、“相对位置数据库(DB)1104B”、“特定控制数据库(DB)1104T”。
红外线模式DB1104A按每个控制设备(第一类型设备1010)存储红外线的输出信号的模式与规定控制内容的对应关系。
相对位置DB1104B存储表示红外线输出装置1070与规定空间(房间R)内的控制设备(第一类型设备1010)的相对位置关系的“相对位置信息”。此外,当红外线输出装置1070被固定到固定式设备1020F上时,作为相对位置信息,也可以使用表示固定式设备1020F的位置与第一类型设备1010的位置的相对位置关系的信息,代替表示红外线输出装置1070的位置与第一类型设备1010的位置的相对位置关系的信息。
特定控制DB1104T存储将对应于规定关键字的声音的输入与控制设备的规定控制相关联的“特定控制”。特定控制由后述的设定支持装置1400设定。
处理部1105由CPU等实现,执行服务器1100中的信息处理。在此,处理部1105通过执行存储在存储部1104中的程序,作为“声音输入分析部1110”、“控制内容特定部1120”、“第一控制部1130”、“第二控制部1135”发挥作用。
声音输入分析部1110分析从声音输入设备1060接收的输入的内容。具体地说,声音输入装置1060使用神经网络等,从声音信息中分析与该声音对应的含义,并将其转换为文本信息。
控制内容特定部1120根据声音输入分析部1110的分析结果,特定表示控制设备及控制指示的控制内容。例如,当声音输入装置1060接受了声音输入时,控制内容特定部1120判定由声音输入分析部1110转换的文本信息中是否包含对应于控制设备及控制指示的语言信息并特定控制内容。
在此,控制内容特定部1120在特定了控制设备是第一类型设备1010的情况下,将与该控制设备对应的控制内容发送到第一控制部1130。另一方面,控制内容特定部1120在特定了控制设备是第二类型设备1020的情况下,将与该控制设备对应的控制内容发送到第二控制部1135。
当由控制内容特定部1120特定了与第一类型设备1010相关的控制内容的情况下,第一控制部1130向红外线输出装置1070发送对应于该控制内容的红外线模式。详细地说,第一控制部1130基于由控制内容特定部1120特定的控制内容及存储在红外线模式DB1104A中的信息,向红外线输出装置1070发送红外线的输出命令。由此,第一类型设备1010经由红外线输出装置1070来控制。另外,第一控制部1130将红外线输出装置1070及成为对象的第一类型设备1010的相对位置信息与红外线的输出命令一起发送到红外线输出装置1070。从相对位置DB1104B提取相对位置信息。
当由控制内容特定部1120特定了与第二类型设备1020相关的控制内容的情况下,第二控制部1135基于该控制内容并经由网络NW控制第二类型设备1020。
(1-2)设备控制系统1001的动作
图4A、4B是用于说明本实施方式所涉及的设备控制系统1001的动作的序列图。
首先,由用户1005使用声音输入装置1060进行对控制设备1010、1020的声音输入(S1)。然后,声音输入设备1060将与所接受的声音输入对应的输入信息发送到服务器1100(S2)。
接下来,服务器1100接收输入信息(S3),并分析声音输入的内容(S4)。接着,服务器1100特定表示控制设备1010、1020和对该控制设备1010、1020的控制指示的控制内容(S5)。
在此,在服务器1100特定了控制内容是与第一类型设备1010相关的内容的情况下(S6-Yes),基于控制内容从红外线模式DB1104A提取红外线模式的信息(S7)。此外,服务器1100从相对位置DB1104B提取第一类型设备1010与红外线输出装置70(或固定式设备1020F)的相对位置信息(S8)。而且,服务器1100将红外线模式的信息及相对位置信息与红外线的输出命令一起发送到红外线输出装置1070(S9)。
接下来,当红外线输出装置1070与红外线的输出命令一起接收红外线模式的信息及相对位置信息时(S10),基于相对位置信息朝向对应的控制设备1010变更姿势(S11)。而且,红外线输出装置1070基于所接收的红外线模式的信息朝向控制设备(第一类型设备)1010输出红外线(S12)。
另一方面,与上述步骤S6并行,当服务器1100特定了控制内容是与第二类型设备1020相关的内容时(S13-Yes),基于控制内容并经由网络NW控制控制设备(第二类型设备)1020(S14)。
在上述步骤S6、S13中,在服务器1100不能特定控制内容是与第一类型设备1010及第二类型设备1020相关的内容的情况下,结束处理(S6-No,S13-No)。
此外,上述步骤S6~9的处理和步骤S13、14的处理顺序不同,可以先处理其中任何一个。
(1-3)特征
如以上所作说明,本实施方式所涉及的设备控制系统1001具备声音输入装置1060、红外线输出装置1070、以及服务器1100。在此,声音输入设备1060通过声音输入从用户1005接受针对控制设备1010、1020的控制指示。红外线输出装置1070向控制设备1010、1020输出红外线。服务器1100具有声音输入分析部1110、控制内容特定部1120、第一控制部1130、以及第二控制部1135。声音输入分析部1110分析从声音输入设备1060接收的输入的内容。控制内容特定部1120根据声音输入分析部1110的分析结果,特定表示控制设备及控制指示的控制内容。当由控制内容特定部1120特定了与第一类型设备1010相关的控制内容的情况下,第一控制部1130向红外线输出装置1070发送对应于该控制内容的红外线模式。当由控制内容特定部1120特定了与第二类型设备1020相关的控制内容的情况下,第二控制部1135基于该控制内容并经由网络NW控制第二类型设备1020。
因此,在本实施方式所涉及的设备控制系统1001中,能够控制可通过输出红外线模式来控制的第一类型设备1010及可经由网络NW来控制的第二类型设备1020。
此外,在本实施方式所涉及的设备控制系统1001S中,网络NW上的服务器1100能够根据分析声音输入的分析结果向红外线输出装置1070S发送红外线的输出命令。在此,在尝试通过声音输入来控制设备时,信息处理量可能会变得庞大。即使在这种情况下,在设备控制系统1001S中,通过使用实现在网络NW上构建的神经网络等的服务器1100,也能够高精度地执行声音分析。由此,即使是声音输入,也能够精细地特定控制设备1010及控制指示。其结果是,能够提供可容易地控制任意设备的设备控制系统1001。
此外,在本实施方式所涉及的设备控制系统1001中,网络NW上的服务器1100具有红外线模式DB1104A,按每个控制设备存储红外线的输出信号的模式与规定控制内容的对应关系。由此,可统一设定红外线的输出信号的模式的变更、更新和追加等。但是,在本实施方式所涉及的设备控制系统1001中,红外线模式DB1104A的信息也可以不是服务器1100,而是各红外线输出装置1070的存储部所保有的存储。
(2)设定支持装置的详情
(2-1)设定支持装置的构成
如图5所示,设定支持装置1400是经由网络NW与上述的设备控制系统1001连接,支持用于容易进行控制设备1010、1020的控制的设定的装置。具体地说,设定支持装置1400是用于支持将与规定关键字K对应的声音的输入与控制设备的规定控制相关联地设定为“特定控制”的装置。此外,该设定支持装置1400通过在计算机中安装后述的“设定支持程序”来实现。
在此,如图6所示,设定支持装置1400具有输入部1401、输出部1402、通信部1403、存储部1404、以及处理部1405,经由因特网等网络NW与服务器1100连接。输入部1401由键盘、麦克风等实现,向设定支持装置1400输入各种信息。输出部1402由显示器等实现,输出来自设定支持装置1400的各种信息。通信部1403与外部的网络NW连接,可进行信息通信。存储部1404由ROM、RAM等实现,存储输入到设定支持装置1400的信息及通过设定支持装置1400计算的信息等。处理部1405由CPU等实现,执行设定支持装置1400中的信息处理。在此,处理部1405通过执行存储在存储部1404中的“设定支持程序P”,作为“关键字输入接受部1410”、“控制命令选择部1420”、“特定控制登记部1430”发挥作用。
关键字输入接受部1410接受与规定关键字K对应的声音的输入。具体地说,关键字输入接受部1410在编辑画面G上显示可输入关键字K的关键字图像GK,通过键盘等接受关键字K的文字信息(参照后述的图8等)。另外,关键字输入接受部1410也可以通过麦克风等接受与关键字K对应的声音输入。
控制命令选择部1420在编辑画面G上显示针对控制设备1010、1020的规定控制命令O,并接受控制命令O的选择(参照后述的图10等)。具体地说,控制命令选择部1420在编辑画面G上显示与控制命令O对应的控制命令图像GO。例如,控制命令选择部1420在编辑画面G上显示以下拉格式显示多个控制命令O1、O2、...的控制命令图像GO。然后,在根据以下拉格式显示的多个控制命令O1、O2、...指定了任意控制命令O的情况下,接受所指定的控制命令O的选择。
特定控制登记部1430使由关键字输入接受部1410输入的关键字K与由控制命令选择部1420选择的控制命令O相关联而作为“特定控制”登记到服务器1100的特定控制DB1104T。具体地说,特定控制登记部1430通过在编辑画面G上指定和移动关键字图像GK及控制命令图像GO并使它们相关联,使关键字K与控制命令O相关联。另外,特定控制登记部1430不仅可以使一个控制命令O1与一个关键字K相关联,还可以使多个控制命令O1、O2、...与一个关键字K相关联。此外,特定控制登记部1430能够将特定控制与识别用户5的用户信息相关联地登记到特定控制DB1104T。另外,特定控制登记部1430也能够将特定控制与读出关键字时的用户5的声纹相关联地登记到特定控制DB1104T。
(2-2)设定支持装置1400的动作
图7是用于说明本实施方式所涉及的设定支持装置1400的动作的流程图。图8~15是表示同实施方式所涉及的设定支持装置1400中的画面转换的概念的示意图。
首先,由用户1005使用设定支持装置1400,进行关键字K对控制设备1010、1020的登记(T1)。具体地说,用户1005经由输入部1401输入显示命令,从而在编辑画面G上显示图8所示的关键字图像GK。而且,可以将关键字K输入关键字图像GK的空白部。在此,作为一例,如图9所示,输入“烧洗澡水”之类的词作为关键字K。
接着,用户5使用输入部1401选择显示在编辑画面G上的控制命令图像GO1。在此,多个控制命令O1、O2、...以下拉格式显示在编辑画面G上。而且,如图10所示,通过用户1005操作显示在编辑画面G上的指针P,从多个控制命令O1、O2、...中选择任意控制命令O(T2)。在图10中,选择O1(在此对应“热水”)。由此,如图11所示,显示与所选择的控制命令对应的控制命令图像GO1。
接着,如图12所示,通过用户1005操作指针P,控制命令图像GO1移动到关键字图像GK附近。由此,进行关键字图像GK与所选择的控制命令图像GO1的临时关联(T4)。具体地说,如图13所示,示出当关键字图像GK和控制命令图像GO1接近时连接两者的线L被显示,进行临时关联。同样地,进行关键字图像GK与另一控制命令图像GO2的临时关联(T5-No,T6)。由此,进入图14所示的画面。
之后,如图15所示,通过用户5在编辑画面G上按下登记按钮图像GT等,将与关键字图像GK对应的关键字K和与控制命令图像GO1、GO2对应的多个控制命令O1、O2、...关联为“特定控制”(T5-Yes)。而且,将该特定控制的信息登记到服务器1100的特定控制DB1104T中(T7)。
(2-3)特征
(2-3-1)
如以上所作说明,本实施方式所涉及的设定支持装置1400是设备控制系统1001中的用于支持特定控制的设定的装置,设备控制系统1001具备:接收用户发出的声音的输入的声音输入装置1060、分析声音的声音输入分析部1110、基于声音输入分析部1110的分析结果控制控制设备1010、1020的控制部1130、1135、以及将与规定关键字K对应的声音的输入和控制设备1010、1020的规定控制相关联地存储为特定控制的特定控制DB1104T。
在此,设定支持装置1400具备关键字输入接受部1410、控制命令选择部1420、以及特定控制登记部1430。关键字输入接受部1410接受与关键字对应的信息的输入。控制命令选择部1420在编辑画面G上显示针对控制设备1010、1020的规定控制命令,并接受控制命令的选择。特定控制登记部1430将由关键字输入接受部1410输入的关键字K与由控制命令选择部1420选择的控制命令相关联地登记到特定控制DB1104T中。
因此,在本实施方式所涉及的设定支持装置1400中,因为能够使与声音输入对应的关键字K与针对控制设备1010、1020的控制命令在编辑画面G上相关联,所以在通过声音输入控制控制设备1010、1020的设备控制系统1001中,用户1005能够容易地设定控制命令。其结果是,在通过声音输入来控制控制设备1010、1020的设备控制系统1001中,能够提高用户1005的便利性。
(2-3-2)
另外,在本实施方式所涉及的设定支持装置1400中,特定控制登记部1430能够使多个控制命令O1、O2、...与一个关键字K相关联。由此,可通过一个关键字K的声音输入来执行由多个动作构成的一系列控制。
(2-3-3)
另外,在本实施方式所涉及的设定支持装置1400中,控制命令选择部1420能够在编辑画面G上以下拉格式显示多个控制命令。由此,能够提供用户5可通过直观的操作设定控制命令的设定支持装置1400。
此外,在本实施方式所涉及的设定支持装置1400中,在编辑画面G上显示关键字输入接受部1410可输入关键字的关键字图像GK。另外,控制命令选择部1420在编辑画面G上显示与控制命令对应的控制命令图像GO。另外,特定控制登记部1430通过在编辑画面G上指定和移动关键字图像GK及控制命令图像GO并使它们相关联,使关键字K与控制命令相关联。由此,能够提供用户1005可通过直观的操作设定控制命令的设定支持装置1400。
(2-3-4)
另外,在本实施方式所涉及的设定支持装置1400中,特定控制登记部1430将特定控制与用户信息相关联地登记。由此,可设定与每个用户的喜好一致的控制命令。
此外,在本实施方式所涉及的设定支持装置1400中,特定控制登记部1430将关键字K与读出关键字K时的声纹相关联地登记。由此,可设定仅登记声纹的用户1005能够控制的控制命令。
(2-4)变形例
(2-4-1)
在上述说明中,设定支持装置1400作为“关键字输入接受部1410”、“控制命令选择部1420”、“特定控制登记部1430”发挥作用,但这些功能也可以从服务器1100适时提供。即,如图16中的概念所示,设定支持装置1400也可以是所谓的瘦客户机。在这种情况下,设定支持装置1400每次进行将规定关键字和规定控制相关联地登记为“特定控制”的处理时,均经由网络NW访问设定支持功能提供装置1200B的服务器,利用设定支持功能提供装置1200B提供的“关键字输入接受部”、“控制命令选择部”、“特定控制登记部”的功能。此外,设定支持功能提供装置1200B也可以由与服务器1100相同的装置构成,也可以以两者协作的方式构成。
通过这样的构成,用户5可通过使用声音输入装置1060(麦克风)等开始关联处理(V1),并在编辑画面G上进行关键字登记(V2)。在设定支持装置1400中,当由用户1005进行在编辑画面G上的关联设定时(V3),登记该设定内容,结束处理(V4)。
(2-4-2)
此外,本实施方式所涉及的服务器1100能够将按每时刻决定的规定控制设备1010、1020的控制预先登记为“日程信息”。在这种情况下,当该时刻到来时,在控制设备1010、1020中,执行与日程信息对应的控制。例如,当规定时刻到来时,基于日程信息读出声音,并将声音输入到声音输入装置1060。或者,代替声音输入,将与该声音输入对应的文本信息等输入到声音输入装置1060,以控制控制设备1010、1020。
<附记>
此外,本发明并不限定于上述各实施方式本身。本发明在实施阶段,在不脱离其主旨的范围内可将构成要素变形并具体化。另外,本发明可通过上述各实施方式中公开的多个构成要素的适当组合来形成各种发明。例如,也可以从实施方式所示的所有构成要素中删除一些构成要素。此外,也可以将构成要素适当地组合成不同的实施方式。
[第二构成]
(1)整体构成
图17表示一实施方式所涉及的设备控制系统。本实施方式的设备控制系统构成为环境调节系统2090。环境调节系统2090包括设置于建筑物2060中的路由器2061、基准环境调节设备2062、声音输入输出装置2063、基准环境传感器2069、以及服务器2040。基准环境调节设备2062、声音输入输出装置2063、基准环境传感器2069及服务器2040通过网络2050连接。
(1-1)基准环境调节设备2062
基准环境调节设备2062是通过环境改变人的五感刺激的设备。基准环境调节设备2062中,例如包括空调机、电风扇、加湿器、电动窗、照明器具、窗帘器具、电香薰锅等。图17所示的基准环境调节设备2062构成为空调机。基准环境调节设备2062被设置于基准空间RS中。
基准环境调节设备2062经由具有交换集线器的路由器2061连接于网络2050。路由器2061与基准环境调节设备2062之间的链路也可以由有线通信和无线通信中的任何一种来实现。
(1-2)声音输入输出装置63
声音输入输出装置2063与基准环境调节设备2062同样地设置于基准空间RS。声音输入输出装置2063经由路由器2061连接于网络2050。在声音输入输出装置2063中设置有声音输入部2064和声音输出部2065。路由器2061与声音输入输出装置2063之间的链路可通过有线通信和无线通信中的任何一种来实现。
此外,作为向基准环境调节设备2062的输入单元,除声音输入输出装置2063以外,还可以并用有线遥控器、红外线遥控器、无线遥控器等。
(1-3)基准环境传感器2069
基准环境传感器2069测定与基准空间RS的环境相关的物理量。所测定的物理量例如是温度或湿度等。基准环境传感器2069经由路由器2061连接到网络2050。路由器2061与基准环境传感器2069之间的链路也可通过有线通信和无线通信中的任何一种来实现。
因为基准环境传感器2069不是必须的部件,所以不必一定设置在建筑物2060中。
(1-4)网络2050
网络2050例如是使用PSTN(公共交换电话网)等构建的因特网。
(1-5)服务器2040
服务器2040设置于距建筑物2060较远的地方,并连接到网络2050。服务器2040响应基准环境调节设备2062的用户发出的声音,控制基准环境调节设备2062。服务器2040可以作为单一计算机构成,也可以由分别具有不同的功能的多个计算机2040a、2040b构成。例如,某计算机2040a可以负责声音的分析及指令的提取,而另一计算机2040b可以负责基准环境调节设备2062的控制和异常检测。在这种情况下,多个计算机2040a、2040b也可以被设置在彼此分开的地方而由不同的企业拥有或管理。
(2)详细构成
图18是环境调节系统2090的构成的框图。
(2-1)基准环境调节设备2062
作为空调机构成的基准环境调节设备2062具有输入输出接口部2621、处理器2622、以及制冷剂回路2623。输入输出接口部2621经由路由器2061与网络2050连接,与其它设备交换信息。制冷剂回路2623包括传感器和致动器,调节房间的空气。处理器2622控制基准环境调节设备2062的致动器,读取传感器的输出,并且与输入输出接口部2621交换信息。
图19是基准环境调节设备2062的详细框图。基准环境调节设备2062包括室外机2070和室内机2080。输入输出接口部2621搭载于室内机2080上。处理器2622包括搭载于室外机2070上的室外机控制器2079和搭载于室内机2080上的室内机控制器2089。制冷剂回路2623包括搭载于室外机2070上的压缩机2071、四通切换阀2072、室外热交换器2073、室外膨胀阀2075、气体关闭阀2077、液体关闭阀2078、以及搭载于室内机2080上的室内热交换器2081。室外机控制器2079控制压缩机2071、四通切换阀2072、风扇2074、室外膨胀阀2075,并且读取搭载于室外机2070上的未图示的各种传感器的检测值。室内机控制器2089控制风扇2082,并且读取包括探测室温的室温传感器2083在内的搭载于室内机2080上的各种传感器的检测值。
(2-2)声音输入输出装置2063
返回图18,声音输入输出装置2063具有输入输出接口部2631、声音输入部2064、以及声音输出部2065。输入输出接口部2621经由路由器2061与网络2050连接,与其它设备交换信息。
声音输入部2064具有麦克风2641、放大器2642和AD转换器2643。麦克风2641获取模拟声音信号。放大器2642放大所获取的模拟声音信号。AD转换器2643对放大的模拟声音信号进行AD转换,并将得到的声音数据SD发送到输入输出接口2631部。
声音输出部2065具有DA转换器2653、放大器2652、以及扬声器2651。DA转换器2653对从输入输出接口部2631接收到的输出数据OD进行DA转换,并将获得的模拟输出信号发送到放大器2652。放大器2652放大模拟输出信号。扬声器2651发出与放大后的模拟输出信号相应的声音。
(2-3)基准环境传感器2069
尽管在图18中未详细示出,但基准环境传感器2069对与所测定的环境相关的物理量进行AD转换,并作为数字数据发送到路由器2061。
(2-4)服务器2040
服务器2040具有计算机2040a、2040b。包含在服务器2040中的计算机的数量可以是几个。在此,仅对计算机2040a的构成进行说明。计算机2040a具有输入输出接口部2041、处理器2042、以及存储器2043。输入输出接口部2041与网络2050连接。处理器2042实施各种处理。在处理中,包括经由输入输出接口部2041的信息的收发及各种算术运算等。存储器2043通过处理器2042的写入动作等来存储信息。
(3)功能框
图20是环境调节系统2090的功能方面的框图。环境调节系统2090除声音输入部2064及声音输出部2065之外,还具有多个功能框、即:文本转换部2011、声音识别词典2012、解释部2013、控制部2014、设备信息获取部2016、存储部2017、运算部2018、以及认证部2019。
功能框2011~2019也可以构成为存储于服务器2040的计算机2040a、2040b的存储器2043中且被处理器2042执行的程序等软件。或者,功能框2011~2019其本身也可以构成为集成电路、硬盘驱动器等硬件。功能框2011~2019的物理上的搭载位置可以是计算机2040a、2040b,也可以是声音输入输出装置2063、基准环境调节设备2062或其它地方。
(4)基本动作
(4-1)声音操作
基准空间RS例如是用户的家。用户经由声音输入输出装置2063的声音输入部2064实现自己喜好的环境。例如,用户通过声音向声音输入部2064发出“温度再低点”、“风量再大点”、“降低湿度”等指令。
用户的声音通过图18的AD转换器2643转换为数字信号的声音数据SD。声音数据SD例如经由网络2050到达服务器2040。图20的文本转换部2011在参照声音识别词典2012的同时,将声音数据SD转换为文本。解释部2013解释文本,并提取用户想要的指令CM。即,文本转换部2011和解释部2013作为从声音中提取指令的指令提取部发挥作用。
控制部2014将输出数据OD发送到声音输出部2065,例如使扬声器2651发出“稍微降低温度”等声音消息。控制部2014将控制信号发送到作为空调机而构成的基准环境调节设备2062,并控制基准环境调节设备2062,使得当前控制参数即设定温度的值降低规定量。
空调机以外的基准环境调节设备2062也能够同样地控制。例如,在作为与环境调节系统2090对应的照明器具而构成的基准环境调节设备2062被设置于基准空间RS中的情况下,用户通过声音对声音输入部2064发出“再亮点”的命令时,控制部2014增大照明器具的照度。
(4-2)用户认证
环境调节系统2090具有用户认证功能,使得只有拥有权限的用户才能够控制基准环境调节设备2062。用户认证的方法可采用各种各样的方法。
例如,也可以是认证部2019接收从命令基准环境调节设备2062动作的声音生成的声音数据SD,并通过利用声纹分析特定用户,控制部2014仅执行特定用户的指令。
或者,也可以是在环境调节系统2090命令基准环境调节设备2062的动作之后,控制部2014向声音输出部2065发出要求念出密码的消息。当解释部2013检测到已经念出正确的密码时,控制部2014可进行用户期望的基准环境调节设备2062的控制。
(5)环境再现动作
(5-1)基准空间RS中的环境保护
作为基准空间RS的居民的用户感到家里的环境舒适时,可将该环境状态保存到环境调节系统2090中。首先,用户命令声音输入部2064“将当前的室内环境保存在收藏夹中”。
响应用户的指令,设备信息获取部2016获取基准环境调节设备2062的设备信息及控制参数。控制参数包含像“设定温度26℃”那样的被普遍理解的参数、像“微风模式”那样的遵循该机种特有的定义的参数。而且,设备信息获取部2016获取基准环境传感器2069的检测值。
接着,运算部18从所获取的控制参数计算环境状态。图21表示环境状态的一例。环境状态的各项目原则上由普遍使用的物理单位来表现。运算部2018参照设备信息,将机种特有的控制参数转换为用物理单位表现的量。
环境状态与被认证的用户相关联地保存于存储部2017。
(5-2)对象空间TS中的环境再现
图22表示对象空间TS。对象空间TS例如是宾馆的房间等、除基准空间RS以外的设置有多个对象环境调节设备2091~2097的地方。对象环境调节设备2091~2097与设置于基准空间RS中的基准环境调节设备2062同样,经由网络2050与服务器2040连接。被认证的用户可经由声音输入输出装置2063发出与对象环境调节设备2091-2097的动作相关的指令。对象环境调节设备2091~2097例如是空调机2091、电风扇2092、加湿器2093、电动窗2094、照明器具2095、窗帘器具2096、电香薰锅2097。也可以使用其它芳香发生器具代替电香薰锅2097。此外,作为向多个对象环境调节设备2091~2097的输入单元,除声音输入输出装置2063以外,也可以并用有线遥控器、红外线遥控器、无线遥控器等。
此外,对象环境传感器2099也可以设置在对象空间TS中。对象环境传感器2099测定与对象空间TS的环境相关的物理量。所测定的物理量例如是温度或湿度等。对象环境传感器2099也经由网络2050与服务器2040连接。
用户可命令环境调节系统2090在对象空间TS再现与基准空间RS的环境接近的环境。首先,用户命令声音输入部“再现我最喜欢的环境”。响应用户的指令,设备信息获取部2016获取设置于对象空间TS中的对象环境调节设备2091-2097的设备信息。接着,调用控制部2014所保存的环境状态。接着,控制部2014请求运算部2018使用处于对象空间TS中的对象环境调节设备2091~2097,计算最接近所调用的环境状态的控制参数。
例如,为了实现包含在环境状态中的风量,可利用空调机2091和风扇2092。因此,运算部2018计算空调机2091、电风扇2092、电动窗2094的开关产生的送风的适当的平衡。尽管环境状态中含有湿度项目,但在设置于对象空间TS中的空调机2091不具有湿度控制功能的情况下,运算部2018通过适当地确定加湿器2093的控制参数来实现环境的湿度项目。关于照度项目,运算部2018通过照明器具2095和窗帘器具2096的控制参数来实现。关于气味项目,运算部2018确认是否可以使用电香薰锅2097。
最后,控制部2014基于运算部2018计算的控制参数,控制对象环境调节设备2091~2097。在此过程中,控制部2014也可以使用对象环境传感器2099的检测值进行反馈控制。由此,在对象空间TS中再现与基准空间RS的环境接近的环境。
(5-3)对象空间TS中的环境保护
用户在感觉得对象空间TS的环境舒适的情况下,可将该环境状态保存到环境调节系统2090的存储部2017中。该方法类似于保存基准空间RS的环境的情况。
(6)特征
(6-1)
存储部2017存储的环境状态通过基于控制参数的控制再现为对象空间TS的环境。因此,能够再现用户喜好的环境。
(6-2)
基于基准空间RS的环境创建环境状态,并在对象空间TS中再现该环境状态。因此,能够通过对象空间TS再现基准空间RS的环境。
(6-3)
当接收到旨在进行环境状态的再现的指令时,控制部2014根据环境状态控制对象环境调节设备2091~2097。因此,通过用户发出的指令来再现用户喜好的环境。
(6-4)
用户在被认证为授权持有者的情况下,能够控制环境调节设备。因此,无权限者不能控制环境调节设备,所以容易确保安全。
(6-5)
基准空间RS及对象空间TS的环境调节设备均包括空调机。因此,在对象空间TS中再现影响用户的舒适度的空气调节。
(6-6)
存储部17存储的环境状态能够使用对象空间TS的环境进行更新。因此,在用户喜欢对象空间TS的环境的情况下,可保存与该环境相关的设定。
(6-7)
根据该构成,环境状态可包括温度、风量、湿度、照度、气味。因此,在对象空间TS中再现用户喜好的这些环境。
(7)变形例
(7-1)第一变形例
图23表示上述实施方式的第一变形例所涉及的环境调节系统2090A。在环境调节系统2090A不具有声音输入输出装置2063,而在基准环境调节设备2062中设置有声音输入部2064及声音输出部2065这一点上不同于上述实施方式。
根据该构成,由于不存在声音输入输出装置2063,所以环境调节系统2090需要的设置空间较小。
(7-2)第二变形例
图24表示实施方式的第二变形例所涉及的环境调节系统2090B。在环境调节系统2090B中,使用便携式终端2067代替声音输入输出装置2063进行来自用户的指令的接收及向用户的消息发送。便携终端2067例如是安装有专用应用程序的智能手机。在基准环境调节设备2062中设置有用于与移动终端2067通信的天线2066。天线2066也可以内置于基准环境调节设备2062中。或者,也可以构成为天线2066、外部适配器,并且通过配线连接到基准环境调节设备2062。
根据该构成,由于也可以不按基准空间RS及对象空间TS等每个地方设置声音输入输出装置2063等用户接口终端,所以能够降低环境调节系统2090B的成本。
(7-3)第三变形例
向基准环境调节设备62及对象环境调节设备2091-2097的输入单元不限于声音输入输出装置2063或移动终端2067,可以采用任何方式。例如,也可以采用有线遥控器、红外线遥控器、无线遥控器、可识别图像的相机、可携带的BLE信标标签或RFID标签、电容传感器等各种传感器等作为输入单元。
[第三构成]
(1)空气调节系统3001的构成
图25是表示一实施方式所涉及的设备控制系统的概念的示意图。本实施方式的设备控制系统构成为空气调节系统3001。
空气调节系统3001具备空调机3020(空气调节装置)和可经由网络NW与空调机3020通信的服务器3100。在图25中,为了便于说明,示出了一台空调机3020连接于服务器3100的状态,但服务器3100能够与任意数量的空调机3020连接。另外,在以下的说明中,在表示任意用户时使用符号3005,在表示单个用户时附加小写英文字母的下标。
(1-1)空调机3020
空调机3020使用压缩机、热交换器、膨胀阀、风扇、百叶窗等内部机构,在对象空间内生成规定状态的调节空气并将其吹出。这种空调机3020的内部机构由内置的信息处理单元3020P控制。
此外,“调节空气的状态”是指调节空气的温度、风量、风向中的任何一种或任意组合的状态。另外,将空调机3020配置在房间R内。
如图26所示,信息处理单元3020P具有输入部3021、输出部3022、通信部3023、存储部3024、以及处理部3025,并且经由因特网等网络NW与外部的服务器3100连接。
输入部3021向信息处理单元3020P输入各种信息。例如,输入部3021可由一般的遥控器构成,用户3005可经由这样的遥控器将各种命令输入到空调机3020。另外,输入部3021也可以具有各种传感器,传感器的检测值作为输入信息被发送到处理部3025。在此,输入部3021包括麦克风,通过这样的麦克风将用户3005发出的声音输入到空调机3020。此外,被输入的声音由后述的处理部3025分析,获取包含声音的频率及音量的声音信息。
输出部3022由扬声器等实现,并输出来自信息处理单元3020P的各种信息。通信部3023与外部网络NW连接,能够进行信息通信。存储部3024由RAM及ROM等实现,存储输入到信息处理单元3020P的信息及由信息处理单元3020P计算的信息等。
处理部3025由CPU等实现,执行信息处理单元3020P中的信息处理。在此,处理部3025通过执行存储在存储部3024中的程序,作为“调节空气送出部3025A”、“声音探测部3025B”、“特定控制部3025C”发挥作用。
调节空气送出部3025A控制空调机3020的内部机构,以生成规定状态的调节空气并其向规定方向吹出。具体地说,调节空气送出部3025A根据经由输入部3021(遥控器等)输入的用户3005的命令,控制空调机3010的内部机构。
声音探测部3025B经由输入部3021(麦克风)探测存在于配置空调机3020的空间(房间R)中的用户3005发出的声音。声音探测部3025B获取包含用户3005的声音频率及音量的声音信息。声音探测部3025B当获取到声音信息时,经由通信部3023将该声音信息发送到服务器3100。
特定控制部3025C在空调机3020达到特定状态时,以与该特定状态对应的控制条件控制空调机20的内部机构。由此,变更或维持调节空气的状态。在此,对于在空调机3020的周边环境“有生气的人”的特定状态,预先设定“怒气模式”的控制条件。而且,当从后述的服务器100接收到与“怒气模式”对应的控制命令时,特定控制部3025C以“怒气模式”的控制条件控制空调机3020的内部机构。
(1-2)服务器3100
如图26所示,服务器3100具有输入部3101、输出部3102、通信部3103、存储部3104、以及处理部3105,经由因特网等网络NW与内置在空调机3020中的信息处理单元3020P连接。
在此,输入部3101向服务器3100输入各种信息。输出部3102输出来自服务器3100的各种信息。通信部3103与外部的网络NW连接,可进行信息通信。
存储部3104由ROM、RAM等实现,存储输入到服务器3100的信息及由服务器3100计算的信息等。在此,存储部3104存储“怒气分类DB104D”。
如图27所示,怒气分类DB3104D将怒气用语W及音量和怒气分类相关联地存储。例如,怒气分类DB3104D对于“别开玩笑啦”这样的怒气用语W,在音量“大”的情况下,关联存储“激烈的争吵”这样的怒气分类(怒气分类1)。另外,怒气分类DB3104D对应于“激烈争吵”的怒气分类(怒气分类1),存储有规定控制内容的控制命令。具体地说,怒气分类DB3104D针对“激烈的争吵”这样的怒气分类,存储有执行“降低温度”的控制a、“降低湿度”的控制b、以及“提高风量”的控制c的控制命令。另外,例如,怒气分类DB3104D对于“混蛋”这样的怒气用语W,在音量“小”的情况下,关联存储“轻微的争吵”这样的怒气分类(怒气分类3)。另外,怒气分类DB3104D针对“轻微的争吵”这样的怒气分类(怒气分类3),存储有执行“提高风量”这样的控制c的控制命令。
处理部3105由CPU等实现,执行服务器3100中的信息处理。在此,处理部3105通过执行存储在存储部3104中的程序,作为“声音输入分析部3110”、“状态判定部(判定部)3125”发挥作用。
声音输入分析部3110分析声音输入并将其转换成文本信息(语言信息)。在此,当从空调机3020接收到与声音输入对应的声音信息时,根据该声音信息,分析声音的含义并将其转换为文本信息。将该转换后的文本信息发送给状态判定部3125。此外,声音输入分析部3110由神经网络等实现。
状态判定部3125判定空调机3020是否处于特定状态。在此,状态判定部3125判定是否是空调机3020的周边环境存在“生气的人”的状态作为特定状态。具体地说,状态判定部3125配合存储在怒气分类DB3104D中的信息和由声音输入分析部3110分析出的文本信息,判定该文本信息中是否包含规定“怒气用语W”。在判定为包含怒气用语W的情况下,状态判定部3125判定是在空调机3020的周边环境存在“生气的人”的状态,将空调机3020设定为“怒气模式”。而且,状态判定部3125从怒气分类DB3104D中提取对应于怒气模式的控制命令,将所提取的控制命令发送给空调机3020的信息处理单元3020P。
(2)空气调节系统3001的动作
图28A、4B是用于说明本实施方式所涉及的空气调节系统3001的动作的序列图。
在配置有空调机3020的房间R内,当多个用户3005a、3005b开始对话时,空调机3020经由麦克风等探测用户3005a、3005b对话的声音(S1)。然后,空调机3020将用户3005a、3005b对话的声音信息适时发送到服务器3100(S2)。
在服务器3100中,当从空调机3020接收声音信息时,将该声音信息转换为文本信息(S3、S4)。在此,在用户3005a和用户3005b发生口角的情况下,该对话中可能包含怒气用语W。在服务器3100中,每次配合分析出的文本信息和存储于怒气分类DB3104D中的信息,随时判定该文本信息中是否包含怒气用语W(S5)。
而且,当判定为用户3005a、3005b的对话中包含怒气用语W的情况下,服务器3100将空调机3020设定为“怒气模式”。具体地说,服务器3100根据对话中包含的怒气用语W和进行该对话时的音量来决定怒气分类(S5-Yes,S6)。然后,服务器3100将基于所决定的怒气分类的控制命令发送到空调机3020(S7)。
接着,空调机3020从服务器3100接收控制命令,将调节空气的控制状态变更为怒气模式(S8、S9)。然后,在空调机3020中,以怒气模式控制调节空气直到经过规定时间为止(S10)。
然后,上述步骤S2~S10的处理一直持续到用户3005a、3005b对话的声音探测不到为止(S11-Yes,S2)。另一方面,在用户3005a、3005b对话的声音未被探测到的情况下,解除怒气模式的控制,将调节空气的控制状态返回到探测声音之前的状态(S11-No、S12)。
(3)特征
(3-1)
如上所作说明,本实施方式所涉及的空气调节系统3001具备调节空气送出部3025A、声音探测部3025B、声音输入分析部3110、状态判定部(判定部)3125、以及特定控制部(控制部)3025C。调节空气送出部3025A向对象空间(房间R)发送调节空气。声音探测部3025B获取与存在于对象空间内(房间R)的用户(说话者)3005a、3005b发出的声音对应的声音信息。声音输入分析部3110分析声音的输入并将其转换为语言信息。状态判定部3125判定由声音输入分析部3110分析的语言信息是否包括规定怒气用语W。当由状态判定部3125判定为包含怒气用语W的情况下,特定控制部3025C控制调节空气的状态。
因此,在本实施方式所涉及的空气调节系统3001中,由于在由声音输入分析部3110分析的语言信息中包含规定怒气用语W的情况下控制调节空气的状态,所以能够使用户3005a、3005b冷静。
补充说明的是,由于是在根据声音分析语言信息之后判定怒气,所以能够高精度地判定用户3005a、3005b的怒气。在此基础上,通过改变调节空气的状态,能够给说出含有怒气言辞的用户(例如,夫妻争吵的人们)转移注意力的契机。其结果是,能够提供能够使说话者冷静的空气调节系统。
(3-2)
另外,本实施方式所涉及的空气调节系统3001具备空调机3020和可经由网络NW与空调机3020通信的服务器3100。而且,空调机3020具有调节空气送出部3025A、声音探测部3025B、以及特定控制部3025C。另外,服务器3100具有声音输入分析部3110和状态判定部3125。
总之,在本实施方式所涉及的空气调节系统3001中,利用网络NW上的服务器3100来构建系统。这样,通过采用能够在网络NW上执行信息处理的构成,可容易地构建神经网络等。其结果是,能够提高声音输入的分析精度,并且能够提高系统的可靠性。
(3-3)
另外,在本实施方式所涉及的空气调节系统3001中,当由状态判定部3125判定为包含怒气用语W时,特定控制部3025C基于怒气用语W和用户3005a、3005b(说话者)发出的声音的音量来控制调节空气的状态。补充说明的是,在本实施方式所涉及的空气调节系统3001中,当判定为声音信息中包含怒气用语W时,状态判定部3125将空调机3020设定为怒气模式。而且,状态判定部基于怒气用语W和用户3005a、3005b发出的声音的音量,从怒气分类DB3104D中提取与怒气分类对应的控制命令,并将该控制命令发送到空调机3020。而且,空调机3020的特定控制部3025C接收控制命令,并基于控制命令控制调节空气的状态。
因此,在本实施方式所涉及的空气调节系统3001中,由于不仅考虑怒气用语W,还考虑用户3005a、3005b发出的声音的音量来控制调节空气的状态,所以能够提供可更加准确地进行与说话者的怒气相应的控制的空气调节系统3001。
(3-4)
另外,本实施方式所涉及的空气调节系统3001还具备怒气分类DB(怒气分类存储部)3104D,其将怒气用语W及音量与怒气分类相关联地存储。通过这样的构成,能够实现可进行与怒气分类相应的空气调节系统3001。
补充说明的是,根据怒气分类,有时轻度的刺激会增加用户3005的怒气。在这种情况下,希望不要给予过多的刺激。另一方面,根据怒气分类,为了减轻怒气,有时也积极地给予刺激更好些。在本实施方式所涉及的空气调节系统3001中,可根据情况随时优化怒气分类的设定。
(4)变形例
(4-1)变形例A
在本实施方式所涉及的空气调节系统3001中,如图29所示,空调机3020的处理部3025也可以作为特定用户3005(说话者)的位置的“位置特定部3025D”发挥作用。具体地说,空调机20作为输入部3021具有各种传感器,位置特定部3025D基于该传感器的检测值计算表示用户3005的位置的位置信息。
另外,在特定用户3005的位置时,特定控制部3025C也可以根据用户3005的位置控制调节空气的状态。由此,能够根据用户的位置可靠地控制调节空气。
此外,空调机3020也可以是向服务器3100发送表示用户3005的位置的位置信息的构成。在此,服务器3100还将反映用户的位置信息的控制内容与怒气分类相关联地存储作为怒气分类DB3104D。因此,在这样的构成的情况下,从怒气分类DB3104D中提取反映用户的位置信息的控制内容。因此,空调机3020的特定控制部3025C能够以考虑到用户3005a、3005b的位置的怒气模式来控制调节空气的状态。由此,通过向用户3005a、3005b的面部施加强风来分散注意力。另外,例如,根据怒气分类,对于生气的人,有时将风轻轻地吹到脚下比将风吹到脸上可以更有效地减少怒气。在这种情况下,在本变形例A所涉及的空气调节系统3001中,通过更新存储于怒气分类DB3104D中的信息,也能够精细地设定怒气模式的调节空气的控制。
(4-2)变形例B
另外,在本实施方式所涉及的空气调节系统3001中,空调机3020的处理部3025如图30所示也可以作为“句子输出命令部3025E”发挥作用。具体地说,在以怒气模式控制空调机3020的情况下,句子输出命令部3025E经由输出部3022的扬声器通过声音输出用于减轻怒气的规定句子。此外,用于减轻怒气的规定句子也可以存储于空调机3020的存储部3024,也可以存储于服务器3100的存储部3104。
另外,用于减轻怒气的规定句子也可以与怒气分类相关联地存储于怒气分类DB3104D。而且,也可以是当空调机3020接收到怒气模式的控制命令时,通过声音输出该句子的构成。在这种构成的情况下,句子输出命令部3025E经由输出部3022的扬声器输出例如“好像有点热。暂时降低温度。“等与文本信息对应的声音。此外,根据怒气的程度,有时期望使用一些平淡之辞。
这样,根据本变形例B所涉及的空气调节系统3001,由于在控制调节空气的同时,通过声音输出用于减轻怒气的句子,所以能够提高使用户3005冷静的效果。
(4-3)变形例C
另外,本实施方式所涉及的空气调节系统3001可设定是否与怒气分类相关联地报知(播放)怒气模式的开始和/或结束。此外,根据怒气的程度,有时为了刺激用户3005,反而期望不播放怒气模式的开始和/或结束。
另外,也可以向服务器3100的管理员通知怒气模式已开始。由此,服务器3100的管理员可特定连接到服务器100的多个空调中设定了怒气模式的空调机。换言之,能够特定怒气模式的空调机的所在处,从而可特定有“生气的人”的状态的地方。其结果是,能够预测发生争执的地方。
(4-4)变形例D
另外,上述的服务器3100的各功能也可以在多个服务器中分散执行。例如,如图31所示,空气调节系统3001也可以是具备第一服务器3100A及第二服务器3200A来代替服务器3100的构成。在此,第一服务器3100A具有上述的声音输入分析部的功能,第二服务器3200A具有除此以外的功能。补充说明的是,在通过声音输入控制空调机3020的情况下,对声音输入的分析可能需要大量的处理。即使在这种情况下,在空气调节系统3001中,也可通过使用实现构件在网络NW上的神经网络等的第一服务器3100A,高精度地执行声音分析。另一方面,通过使第二服务器3200A执行声音输入的分析以外的负荷低的处理,能够提高系统的使用性等。
(4-5)变形例E
在上述说明中,空调机3020作为输入部3021而具有麦克风,处理部3025作为声音探测部3025B发挥作用,但是,本实施方式所涉及的空气调节系统3001不限定于这样的构成。
例如,如图32所示,空气调节系统3001也可以是如下构成:空调机3020不具备上述构成,而是单独具备声音输入装置3060。在此,声音输入设备3060经由麦克风探测存在于配置空调机3020的空间(房间R)的用户3005发出的声音。然后,声音输入设备3060当探测到声音时,将该声音信息发送给服务器3100。
(4-6)变形例F
此外,本实施方式所涉及的空气调节系统3001也可以基于怒气用语的数量的增减、根据声音的音量增减的变化量等来控制调节空气的状态。例如,空气调节系统3001也可以判定愤怒言辞减少、说话声的大小已平息等情况,使调节空气的控制返回到原来的状态。
(4-7)变形例G
此外,本实施方式所涉及的空气调节系统3001不限于上述的内容,可以根据怒气分类的设定进行各种调节空气的控制。
例如,在用户3005a、3005b之间出现夫妻争吵时,空气调节系统3001能够基于声音信息来判断优势方(激烈的一方),并朝向优势方改变风向。
例如,空气调节系统3001一旦识别到争吵(激烈之状),就能够从空调机3020吹出离子等。根据离子等的种类,可预见分散用户3005的注意力的效果。
例如,空气调节系统3001一旦探测到激烈的声音的争论(大音量),就降低调节空气的温度。由此,可预见使用户3005冷静的效果。
例如,空气调节系统3001与家庭网络联动,一旦探测到正在争吵的用户3005a、3005b,就暂停其家中的所有或一部分电器。在此之上,空气调节系统3001从空调机3020吹出热风。由此,可预见给生活带来危机感的效果。其结果是,可预见使正在争吵的用户3005a、3005b和解的效果。
总之,空气调节系统3001能够对应于怒气分类,根据声音信息判定用户3005的情绪。换言之,能够从声音中读出人的情绪。而且,在空气调节系统3001中,能够对处于兴奋状态的用户3005施加冷风等来转移注意力。但是,根据怒气分类,会进行吹冷风之外的控制。
<附记>
此外,本发明并不限定于上述各实施方式本身。本发明在实施阶段在不脱离其主旨的范围内可以将构成要素变形并具体化。另外,本发明能够通过上述各实施方式中公开的多个构成要素的适当的组合而形成各种发明。例如,可以从实施方式所示的所有构成要素中删除一些构成要素。此外,也可以在不同的实施方式中将构成要素适当组合。
[第四构成]
(1)整体构成
图33表示一实施方式所涉及的设备控制系统。本实施方式的设备控制系统构成为室内环境调节系统4090。室内环境调节系统4090包括设置于建筑物4060中的路由器4061、空调机4062及声音输入输出装置4063和服务器4040。空调机4062、声音输入输出装置4063、以及服务器4040通过网络4050连接。
路由器4061具有交换集线器,并连接到网络4050。空调机4062与路由器4061连接。路由器4061与空调机4062之间的链路可通过有线通信和无线通信中的任何一种来实现。
声音输入输出装置4063经由与空调机4062相同的路由器4061连接到网络4050。在声音输入输出装置4063中设置有声音输入部4064和声音输出部4065。路由器4061与声音输入输出装置4063之间的链路可通过有线通信和无线通信中的任何一种实现。
网络4050例如是使用PSTN(公共交换电话网)等构建的因特网。
服务器4040设置于距建筑物4060较远的地方,并连接到网络4050。服务器4040响应空调机4062的用户发出的声音而控制空调机4062。服务器4040可以作为单一计算机构成,也可以由分别具有不同的功能的多个计算机4040a、4040b构成。例如,也可以是某一计算机4040a负责声音的分析及指令的执行,另一计算机4040b负责空调机62的控制和异常检测。在这种情况下,多个计算机4040a、4040b可以被设置在彼此分开的地方且而不同的企业拥有或管理。
(2)详细构成
图34是室内环境调节系统4090的构成的框图。
(2-1)空调机4062
空调机4062具有输入输出接口部4621、处理器4622、以及制冷剂回路4623。输入输出接口部4621经由路由器4061与网络4050连接,与其它设备交换信息。制冷剂回路4623包括传感器和致动器,调节房间的空气。处理器4622控制空调机4062的致动器,读取传感器的输出,并且与输入输出接口部4621交换信息。
图35是空调机4062的详细框图。空调机4062包括室外机4070及室内机4080。输入输出接口部4621搭载于室内机4080。处理器4622包括搭载于室外机4070的室外机控制部4079及搭载于室内机4080的室内机控制部4089。制冷剂回路4623包括搭载于室外机4070的压缩机4071、四通切换阀4072、室外热交换器4073、室外膨胀阀4075、气体关闭阀4077、液体关闭阀4078、以及搭载于室内机4080的室内热交换器4081。室外机控制部4079控制压缩机4071、四通切换阀4072、风扇4074、以及室外膨胀阀4075,并且读取搭载于室外机4070的未图示的各种传感器的检测值。室内机控制部4089控制风扇4082,并且读取包括探测室温的室温传感器4083的搭载在室内机4080中的各种传感器的检测值。
(2-2)声音输入输出装置4063
返回到图34,声音输入输出装置4063具有输入输出接口部4631、声音输入部4064、以及声音输出部4065。输入输出接口部4621经由路由器4061与网络4050连接,与其它设备交换信息。声音输入部4064具有麦克风4641、放大器4642、AD转换器4643。麦克4641获取模拟声音信号。放大器放大所获取的模拟声音信号。AD转换器4643对放大的模拟声音信号进行AD转换,将获得的声音数据SD发送到输入输出接口4631部。声音输出部4065具有DA转换器4653、放大器4652、以及扬声器4651。DA转换器4653对从输入输出接口部4631接收到的输出数据OD进行DA转换,将获得的模拟输出信号发送到放大器4652。放大器4652放大模拟输出信号。扬声器4651发出与放大后的模拟输出信号相应的声音。
(2-3)服务器4040
服务器4040具有计算机4040a、4040b。包含于服务器4040中的计算机的数量可以是几个。在此,仅对计算机4040a的构成进行说明。计算机4040a具有输入输出接口部4041、处理器4042、以及存储器4043。输入输出接口部4041连接到网络4050。处理器4042实施各种处理。在处理中,包括经由输入输出接口部4041的信息的收发及各种算术运算等。存储器4043通过处理器4042的写入动作等来存储信息。
(3)功能框
图36是室内环境调节系统4090的功能方面的框图。室内环境调节系统4090除具有声音输入部4064和声音输出部4065之外,还具有多个功能框,即,文本转换部4011、声音识别词典4012、解释部4013、控制部4014、存储部4017、以及用户识别部4019。
功能框4011~4019也可以构成为存储于服务器4040的计算机4040a、4040b的存储器4043中且在处理器4042中执行的程序等软件成。或者,功能框4011~4019本身也可以构成为集成电路、硬盘驱动器等硬件。功能框4011~4019的物理上的搭载位置可以是计算机4040a、4040b,也可以是声音输入输出装置4063、空调机4062或其它地方。例如,控制部4014的至少一部分构成为空调机4062的处理器4622。
(4)基本动作
(4-1)声音操作
用户经由图34的声音输入输出装置4063的声音输入部4064,指示自己想要使空调机4062执行的动作。例如,用户用声音对声音输入部4064说“打开空调机”、“温度再低点”等指令。
用户的声音由AD转换器4643转换为数字信号的声音数据SD。声音数据SD例如经由网络4050到达服务器4040。图36的文本转换部4011在参照声音识别词典4012的同时将声音数据SD转换为文本。解释部4013解释文本,并提取用户想要的指令CM。
控制部4014向声音输出部4065发送输出数据OD,并例如使图34的扬声器4651发出“稍微降低温度”等声音消息。控制部4014将控制信号发送到空调机4062的制冷剂回路4623,并以使当前控制参数即设定温度的值降低规定温度的方式控制空调机4062。
(4-2)用户的识别
室内环境调节系统4090具有识别多个用户的功能。例如,用户识别部4019接收从命令空调机4062动作的声音生成的声音数据SD,通过声纹分析来特定用户。存储部4017与各用户相关联地存储每个用户不同的与温度等相关的喜好的设定值记录。存储在存储部4017中的喜好的设定值记录通过与该设定对应的用户的指令,由控制部4014作为设定值调用,用于控制室温等实际的状态值。
(5)用于追求舒适性的微调程序
空调动作的结果是,当由室温传感器4083检测到的状态值即室温Tr到达由用户决定的设定值即设定温度Ts时,室内环境调节系统4090开始微调程序。微调程序按图37所示的流程图的要领执行。在步骤S0中,开始微调程序。在步骤S1中,处理根据室温Tr是否达到设定温度Ts而分支。在步骤S1中为NO的情况下,在步骤S2中控制温度,使室温Tr接近设定温度Ts,之后,再次返回步骤S1。在步骤S1中为YES的情况下,处理进入步骤S3。在步骤S3中,控制部4014向声音输出部4065发出询问用户是否满意室温Tr的消息。在步骤S4中,声音输入部4064获取用户的声音,解释部4013提取用户的指令。在步骤S5中,处理根据用户的指令的内容而分支。在指示的内容是告知用户对室温Tr满足之意的情况下,进入步骤S6,微调程序结束。在步骤S5中,在指令的内容是要求再稍微提高室温Tr的情况下,进入步骤S7,将设定温度Ts加上规定量ΔT。在步骤S5中,在指令的内容是请求稍再微降低室温Tr的情况下,进入步骤S8,将设定温度Ts减去规定量ΔT。在步骤S7或步骤S8结束之后,处理返回到步骤S1。
如上所述,室内环境调节系统4090反复进行室内环境的调节(步骤S2)和向用户的提问(步骤S3),直到用户同意最新的室温Tr。
(6)特征
(6-1)
关于是否同意实现了设定温度Ts的环境或者是否进一步变更室温Tr,用户可通过声音输入部4064对室内环境调节系统4090反馈自己的希望。因此,用户对室内环境的调节的满意度得到提高。
(6-2)
直到获得用户的同意为止,室内环境调节系统4090反复进行室内环境的调节和向用户的提问。因此,用户对室内环境的调节的满意度进一步提高。
(6-3)
声音输入部4064接受用户的声音。因此,由于用户可通过声音向室内环境调节系统4090发出指令,所以操作简单。
(6-4)
例如,可将文本提取部4011及解释部4013中的至少一方放在设置于远离空调机4062的地方的40服务器40。因此,空调机4062不需要承担高处理能力。
(6-5)
用户识别部4019根据声纹识别用户。因此,对各用户来说,能够将最佳的设定值反映在室内环境中。
(6-6)
多个用户可分别更新对自己来说最佳的设定值。因此,各用户的满意度进一步提高。
(7)变形例
(7-1)第一变形例
在上述实施方式中,用于调节室内环境调节系统4090可控制的环境的设备只有空调机4062。取而代之,如图38所示,室内环境调节系统4090A也可以控制其以外的室内环境调节设备。第一变形例所涉及的室内环境调节系统4090A控制的室内环境调节设备除了空调机4062之外,是加湿器4062A和照明器具4062B。关于加湿器4062A,存储部4017将设定湿度存储为设定值,控制部4014以使室内湿度接近设定湿度的方式控制加湿器4062A。关于照明器具4062B,存储部4017将设定照度存储为设定值,控制部4014以使室内照度接近设定湿度的方式控制照明器具6240B。当然,也可以设置除上述以外的室内环境调节设备,并由室内环境调节系统4090A控制。
根据该构成,能够更舒适地调节用户的五感刺激。
(7-2)第二变形例
在上述实施方式中,用户对室内环境调节系统4090的输入输出是声音。取而代之,如图39所示,用户也可通过除了声音以外的方式进行对室内环境调节系统4090B进行输入输出。第二变形例所涉及的室内环境调节系统4090B具备遥控器4063A,代替声音输入输出装置4063。遥控器4063A与空调机4062直接进行无线通信或红外线通信。在遥控器4063A上设置有输入用的键4064A和输出用的显示器4065A。
根据该构成,用户可以向室内环境调节系统4090传送希望而不依赖于听觉。
[第五构成]
(1)整体构成
图40表示一实施方式所涉及的设备控制系统。本实施方式的设备控制系统构成为空调管理系统5090。空调管理系统5090包括多个物件5060A、5060B及服务器5040。空调管理系统5090与电力公司5030协作形成需求响应系统。空调管理系统5090从电力公司5030接收电力,并与电力公司5030进行通信。
电力公司5030使用电力线5032向物件5060A、5060B提供电力。在电力公司5030中设置有电力管理装置5031。电力管理装置5031可使用通信线5033并经由网络5050与物件5060A、5060B的控制器5061通信。
电力管理装置5031可使用通信线5033对物件5060A、5060B发送催促电力使用量的抑制的“抑制请求”。
(2)详细构成
(2-1)物件60A、60B
建筑物5060A、5060B是住宅、办公楼、工厂等建筑物。在物件5060A、5060B中设有空调机5062、照明器具5066、换气扇5067等电气设备组。另外,在物件5060A、5060B上设置有控制器5061、功率计5068、以及声音输入输出装置5063。
(2-1-1)空调机5062
空调机5062调整设置室内的温度等。空调机5062的功耗根据电源ON/OFF、制热模式/制冷模式、设定温度、外部环境等而改变。
(2-1-2)照明器具5066
照明器具5066的功耗根据电源ON/OFF、照度调节等而改变。
(2-1-3)换气扇5067
换气扇5067的功耗根据电源ON/OFF而改变。
(2-1-4)控制器5061
控制器5061可对电力公司5030的电力管理装置5031发送对于抑制请求的同意及拒绝。此外,控制器5061在考虑到是否有抑制请求的基础上控制电气设备。
(2-1-5)功率计5068
功率计5068测量物件5060A、5060B中使用的电量。测量结果由控制器5061监视。
(2-1-6)声音输入输出装置5063
声音输入输出装置5063作为电气设备组的声音遥控器动作。例如,声音输入输出装置5063被设置在与空调机5062同一房间。
(2-2)服务器5040
服务器5040用于使声音输入输出装置5063作为电气设备组的声音遥控器动作。服务器5040可以构成为单一的计算机,也可以由分别具有不同功能的多个计算机构成。例如,某一计算机负责声音的分析及指令的提取,另一计算机可以负责电气设备的控制和异常检测。在这种情况下,多个计算机也可以设置在彼此分开的地方而由不同的企业拥有或管理。
(3)硬件构成
图41是空调管理系统5090的硬件构成的框图。本图只记载设置于一个物件中的电气设备组。
(3-1)空调机5062
空调机5062具有输入输出接口部5621、处理器5622、以及制冷剂回路5623。输入输出接口部5621经由控制器5061与连接到网络50,与其它设备交换信息。制冷剂回路5623包括传感器和致动器,调节房间的空气。处理器5622控制空调机5062的致动器,读取传感器的输出,并且与输入输出接口部5621交换信息。
(3-2)声音输入输出装置5063
声音输入输出装置5063具有输入输出接口部5631、声音输入部5064、以及声音输出部5065。输入输出接口部5621经由控制器5061与网络5050连接,与其它设备交换信息。
声音输入部5064具有麦克风5641、放大器5642、AD转换器5643。麦克风5641获取模拟声音信号。放大器5642放大所获取的模拟声音信号。AD转换器5643对放大的模拟声音信号进行AD转换,并将获得的声音数据SD发送到输入输出接口5631部。
声音输出部5065具有DA转换器5653、放大器5652、以及扬声器5651。DA转换器5653对从输入输出接口部5631接收到的输出数据OD进行DA转换,并将获得的模拟输出信号发送到放大器5652。放大器5652放大模拟输出信号。扬声器5651发出与放大后的模拟输出信号对应的声音。
(3-3)服务器5040
服务器5040具有计算机5040a、5040b。服务器5040中所含的计算机的数量也可以是几个。在此,仅对计算机5040a的构成进行说明。计算机5040a具有输入输出接口部5041、处理器5042、以及存储器5043。输入输出接口部5041连接到网络5050。处理器5042实施各种处理。在处理中,包括经由输入输出接口部5041的信息收发及各种算术运算等。存储器5043通过处理器5042的写入动作等来存储信息。
(3-4)控制器5061
控制器5061具有输入输出接口部5611、5614、5615、处理器5612、以及存储器5613。输入输出接口部5611连接到网络5050。输入输出接口部5614连接到空调机5062。输入输出接口部5615连接到声音输入输出装置5063。存储器5613存储各种信息。处理器5612统管各种通信、运算、信息的记录、信息的读出、以及其它一般处理。
(4)功能框
图42是空调管理系统5090的功能方面的框图。空调管理系统5090除了声音输入部5064及声音输出部5065以外,还具有多个功能框,即,文本转换部5011、声音识别词典5012、解释部5013、控制部5014、状态提取部5015、状态提取词典5016、判定部5017、以及存储部5018。
功能框5011~5018也可以构成为存储于服务器5040的计算机5040a、5040b的存储器5043中且在处理器5042中执行程序等的软件。或者,功能框5011~5018其本身也可以构成为集成电路、硬盘驱动器等硬件。功能框5011~5018的物理搭载位置可以是计算机5040a、5040b,也可以是声音输入输出装置5063、空调机5062或其它地方。
(5)基本动作
用户经由图41的声音输入输出装置5063的声音输入部5064,指示要使空调机5062执行的动作。例如,用户用声音对声音输入部5064说“打开空调机”、“温度再低点”等指令。
用户的声音由AD转换器5643转换为数字信号的声音数据SD。声音数据SD例如经由网络5050到达服务器5040。图42的文本转换部5011在参照声音识别词典5012的同时将声音数据SD转换为文本。解释部5013解释文本,并提取用户想要的指令CM。
控制部5014向声音输出部5065发送输出数据OD,例如将“稍微降低温度”等声音消息发送给图41中的扬声器5651。控制部5014将控制信号发送到空调机5062的制冷剂回路5623,并以使当前控制参数即设定温度的值降低规定温度的方式控制空调机5062。
空调机5062以外的电气设备也能够同样控制。例如,当用户用声音对声音输入部5064发出“再亮一点”的命令时,控制部5014增大照明器具5066的照度。
(6)需求响应动作
(6-1)状态提取
状态提取部5015在参照状态提取词典5016的同时分析从声音输入部5064发送的声音数据SD,掌握在室内的用户的情绪。作为情绪,可以有各种各样的捕捉方法。举出一例,作为应掌握的情绪,也可以使用从声音的强度或声音波形的形状导出的用户的兴奋度。
(6-2)模式判定
在有来自电力管理装置的与电力使用相关的抑制请求的情况下,判定部5017根据状态提取部5015掌握的用户的情绪,判定部5017决定是否接受抑制请求。具体地说,判定部5017在情绪为积极时判定为同意抑制请求的“同意模式”,在情绪为负面时判定为拒绝抑制请求的“拒绝模式”。
(6-3)对电力管理装置5031的通知
作为控制部5014的一部分发挥作用的控制器5061的处理器5612在“同意模式”时对电力管理装置5031发送同意抑制请求,在“拒绝模式”时发送拒绝抑制请求。
(6-4)记录
对电力管理装置5031发送的同意或拒绝的发送历史被保存在存储部5018中。
(7)特征
(7-1)
判定部5017自动地决定是否进行对来自电力公司的抑制请求的同意响应。因此,可减轻用户决定的负担。
(7-2)
在存在抱有负面情绪的用户时,不进行对抑制请求的同意响应。因此,进行考虑到抱有负面情绪的用户的运转。
(8)变形例
(8-1)图像/视频输入
也可以代替由声音输入部5064获取声音数据,使用相机等的图像输入部来获取图像或视频的数据。状态提取部5015也可以检测用户的表情、姿势或动作等,并接着根据该检测内容掌握用户的情绪。
(8-2)节能运转
基于判定部5017的输出进行的处理也可以代替对电力管理装置5031发送同意或拒绝,而执行与需求响应无关的节能运转。即,也可以在“同意模式”时执行节能运转,在“拒绝模式”时执行通常运转。在此所说的节能运转例如可举出对空调机5062的压缩机的马达转速施加限制,降低空调机5062的能力等。
[第六构成]
(1)整体构成
图43表示一实施方式所涉及的设备控制系统。本实施方式的设备控制系统构成为家庭系统6090。家庭系统6090包括作为住宅的建筑物6060和设置于远程位置的服务器6040。在建筑物6060中设置有路由器6061、声音输入输出装置6063、以及设备组6070。路由器6061和服务器6040经由网络6050连接。
(2)详细构成
(2-1)网络6050
网络6050例如是使用PSTN(公共交换电话网)等构建的因特网。
(2-2)路由器6061
路由器6061连接到网络6050且具有交换集线器。声音输入输出装置6063和设备6070通过有线或无线通信的链路与路由器6061连接。
(2-3)设备组6070
设备组6070例如包括空调机6071、浴室热水器6072、电视6073、照明器具6074、可穿戴终端6075、烹调器具6076、以及冰箱6077。
(2-4)声音输入输出装置6063
声音输入输出装置6063用于通过声音指令操作设备组6070。在声音输入输出装置6063中设置有声音输入部6064和声音输出部6065。
(2-5)服务器6040
服务器6040响应用户发出的声音来控制设备组6070。服务器6040可以构成为单一计算机,也可以由分别具有不同的功能的多个计算机6040a、6040b构成。例如,也可以是某一计算机6040a负责声音的分析及指令的执行,另一计算机6040b负责空调机6071的控制和异常检测。在这种情况下,多个计算机6040a、6040b可以被设置在彼此分开的地方而由不同的企业拥有或管理。
(3)硬件构成
图44是家庭系统6090的构成的框图。
(3-1)设备组70
属于设备组6070的一个设备即空调机6071具有输入输出接口部6711、处理器6712、以及制冷剂回路6713。输入输出接口部6711经由路由器6061连接到网络6050,与其它设备交换信息。制冷剂回路6713包括传感器和致动器,调节房间的空气。处理器6712控制空调机6071的致动器,读取传感器的输出,并且与输入输出接口部6711交换信息。
属于设备组6070的其它设备通常与空调机6071同样,也具有处理器、致动器、传感器、输入输出接口。处理器控制致动器,读取传感器的输出,并与输入输出接口交换信息。
(3-2)声音输入输出装置6063
声音输入输出装置6063具有输入输出接口部6631、声音输入部6064、以及声音输出部6065。输入输出接口部6631经由路由器6061与网络6050连接,与其它设备交换信息。
声音输入部6064具有麦克风6641、放大器6642、以及AD转换器6643。麦克风6641获取模拟声音信号。放大器6642放大所获取的模拟声音信号。AD转换器6643对放大的模拟声音信号进行AD转换,并将获得的声音数据SD发送到输入输出接口6631部。
声音输出部6065具有DA转换器6653、放大器6652、以及扬声器6651。DA转换器6653对从输入输出接口部6631接收到的输出数据OD进行DA转换,并将获得的模拟输出信号发送到放大器6652。放大器6652放大模拟输出信号。扬声器6651发出与放大后的模拟输出信号对应的声音。
(3-3)服务器6040
服务器6040具有计算机6040a、6040b。包含在服务器6040中的计算机的数量也可以是几个。在此,仅对计算机6040a的构成进行说明。计算机6040a具有输入输出接口部6041、处理器6042、以及存储器6043。输入输出接口部6041连接于网络6050。处理器6042实施各种处理。在处理中,包括经由输入输出接口部6041的信息的收发及各种算术运算等。存储器6043通过处理器6042的写入动作等来存储信息。
(4)功能框
图45是家庭系统6090的功能方面的框图。家庭系统6090除声音输入部6064及声音输出部6065之外,还具有多个功能框,即,文本提取部6011、声音识别词典6012、解释部6013、控制部6014、时钟部6015、记录部6016、模式提取部6017、以及预测部6018。
功能框6011~6018也可以构成为存储于服务器6040的计算机6040a、6040b的存储器6043中且在处理器6042中执行的程序等软件。或者,功能框6011~6018本身也可以构成为集成电路、硬盘驱动器等硬件。功能框6011~6018的物理搭载位置可以是计算机6040a、6040b,也可以是声音输入输出装置6063、空调机6071或其它地方。例如,控制部6014的至少一部分构成为空调机6071的处理器6712。
(5)动作
(5-1)声音操作
用户经由图44的声音输入输出装置6063的声音输入部6064指示要使设备组6070执行的操作。例如,用户用声音对声音输入部6064说“打开空调机”、“温度再低点”等指令。
用户的声音由AD转换器6643转换为数字信号的声音数据SD。声音数据SD例如经由网络6050到达服务器6040。图45的文本提取部6011在参照声音识别词典6012的同时将声音数据SD转换成文本。解释部6013解释文本,提取用户想要的指令CM。由此,解释部6013例如掌握指令CM与空调机6071相关。
控制部6014向声音输出部6065发送输出数据OD,例如,向图44的扬声器6651发送“稍微降低温度”等声音消息。控制部6014将控制信号发送给空调机6071的制冷剂回路6713,并以使当前控制参数即设定温度的值降低规定温度的方式控制空调机6071。
(5-2)获取设备动作
服务器6040获取设置于设备组6070中的传感器输出及发送到设备组6070的指令CM的内容。传感器输出及控制的指令CM与由时钟部6015测量的时间相关联,作为图46所示的日志保存在记录部6016。
(5-3)提取用户的行为模式
通过分析日志,模式提取部6017提取发生频率高的设备动作模式。作为特征性的设备动作模式,例如可列举如下。
(5-3-1)日期时间与设备动作的相关性强
在特定的日历日、星期或时间进行的对某一设备的指令或检测的记录。
·工作日的下午7点左右,接通照明器具6074的电源。(下班回到家)
·下午6点左右,可穿戴终端6075探测心律的上升。(傍晚的慢跑)
·下午6点左右,使用烹调器具6076。(准备晚餐)
(5-3-2)多个设备动作的相关性强
规定时间差以内的多个顺序指令或检测对单个设备的记录。
·使用浴室热水器6072后,降低空调机6071的设定温度。(加大沐浴后的制冷)
·在通过可穿戴终端6075检测到心率的上升后,提高空调机6071的设定温度。
(减弱慢跑后的制冷)
·在烹调器具6076的使用中,降低空调机6071的设定温度。(烹调中加大制冷)
(5-3-3)日期和时间与多个设备动作的相关性强
·周五晚上8点左右,接通电视6073的电源后,打开冰箱6077的门。(一边喝饮料一边看电视)
(5-4)预测用户行为
预测部6018根据模式提取部6017所提取的设备动作模式,预测在不久的将来可能发生的模式。例如,当前时间为下午5点55分,使空调机6071的设定温度为26℃。而且,预测部6018预测“在5点后的下午6点左右空调机71的设定温度被变更为25℃的可能性大”。
(5-5)设备控制
控制部6014基于预测进行控制。作为控制方法,例如可举出以下两种模式。
(5-5-1)积极主动模式
在用户操作设备组6070中的任何一个之前,控制部6014预先进行用户可能进行的操作。例如,基于上述预测,控制部6014在下午6点将空调机6071的设定温度从26℃变更为25℃。
(5-5-2)忠告模式
控制部6014向用户发出消息,告知其预测的操作。例如,基于上述预测,控制部6014在下午6点控制声音输出部6065,发出“现在是下午6点。你可能需要将空调机的温度降低到25℃。”这样的消息。
(6)特征
(6-1)
获得特征性顺序指令模式。因此,家庭系统6090能够掌握用户感到舒适的可能性高的控制模式。
(6-2)
预测部6018基于顺序指令模式,预测用户接下来可能进行的设备的控制。因此,家庭系统6090能够掌握用户感到舒适的可能性高的下一个控制。
(6-3)
消息输出部接着将用户可能喜好进行的设备的控制通知给该用户。因此,可抑制用户忘记带来自身舒适的设备操作的情况。
(6-4)
声音输出部6065将用户接着可能喜欢进行的设备的控制通知给该用户。因此,可抑制用户忘记操作给自己带来舒适感的设备的情况。
(6-5)
用户可通过声音发出指令。因此,对于用户来说,家庭系统6090的操作容易。
(6-6)
家庭系统6090控制空调机6071。因此,家庭系统6090能够实现用户感觉舒适的温度等。
(7)变形例
(7-1)第一变形例
如图47所示,也可以代替上述方式的声音输入输出装置6063,使用智能手机6063A。在本图中省略了设备组。智能手机6063A向网络6050的连接可通过与路由器6061之间的无线通信来实现,也可以使用手机运营商的4G线路等来实现。也可以使用文字消息代替声音消息。也可以在智能手机6063A的画面上显示卡通形象的图像或动画,像该卡通形象正在说出消息那样进行演示。
此外,不限于声音输入输出装置6063、智能手机6063A,还可以采用触摸面板、键盘、照相机、LED指示器等各种方式的输入输出单元。
(7-2)第二变形例
在图48所示的第二变形例中,家庭系统6090B包括称为文脉部6019的功能框。文脉部6019在参照人的、或者每个国家或地区的生活方式的文脉的同时,创建与从预测部输出的模式一致的消息。
例如,当照明器具6074在周五晚上点亮时,也可以从声音输出部6065发出“这周工作辛苦啦。冰箱里有冰镇啤酒呦。”等犒劳的言辞。
该文脉部6019例如也可以由神经网络构成。
(7-3)第三变形例
也可通过声音输出部6065之外的输出单元向用户提示预测部6018进行的模式预测。在这种情况下,也可以进一步设置判定部,将用户按提示操作了设备的事件判定为提示成功,将用户进行了与提示不同的操作的事件判定为提示不成功。而且,也可以设置记录这样的提示的成功及不成功的历史的模式提示结果记录部。
根据该构成,由于能够与设备的操作日志一起分析成功及不成功的历史,所以能够提高历史的记录以后的用户的行为的可预测性,或便于成功提示。
(7-4)第四变形例
在上述第三变形例中对用户提示设备操作的模式时,也可以考虑建筑物6060的外部信息来决定提示的内容。
例如,夏天也可以根据电网的负荷接近极限的状况,进行“空调的平时设定温度是25℃,但今天设为为26℃怎么样?”之类的提示。
[第七构成]
以下,参照附图,对本公开的设备控制系统的一实施方式所涉及的设备控制系统7400、由设备控制系统7400控制的本公开的设备的一实施方式所涉及的第一设备7010、第二设备7020及第三设备7030、以及这些设备的控制方法的一实施方式进行说明。
(1)总体概述
参照图49,对设备控制系统7400、由设备控制系统7400控制的第一设备7010、第二设备7020及第三设备7030的概况进行说明。
图49是设备控制系统7400、由设备控制系统7400控制的第一设备7010、第二设备7020及第三设备7030的示意框图。此外,在图49中,为了避免附图变得复杂,省略了描绘,但第三设备7030与第一设备7010及第二设备7020同样,也具有声音输入部、声音数据发送部、开始/停止请求接受部、开始/停止部信息接受部、报知部、开关、遥控器等构成。
第一设备7010、第二设备7020及第三设备7030各自与设备控制系统7400通过网络7040连接(参照图49)。网络7040例如是因特网,但也可以是WAN等。
第一设备7010、第二设备7020及第三设备7030是可通过声音操作的设备。在此,第一设备7010、第二设备7020及第三设备7030是设置于同一建筑物,例如独幢楼房的住宅中的设备。但是,设置位置不过是例示而已,这些设备也可以是设置在办公楼、酒店、工厂等中的设备。在此,第一设备7010及第二设备7020设置于第一空间(例如住宅的一层),第三设备7030设置于第二空间(例如,住宅的二层)。
此外,在此,以在建筑物内设置有三台设备(第一设备7010、第二设备7020及第三设备7030)的情况为例进行说明,但不限于此,也可以在建筑物内设置两台或四台以上的设备。另外,在此,以设置于一个建筑物内的第一设备7010、第二设备7020及第三设备7030为例进行说明,但设备也可以被设置于多个建筑物中,设置于多个建筑物中的设备也可经由网络7040与设备控制系统7400连接。
在本实施方式中,第一设备7010、第二设备7020及第三设备7030是家电产品。家电产品例如包括空调机、电视、录像机、音响设备、冰箱、微波炉、洗衣机、照明器具等。此外,在此所列举的设备的种类为例示。第一设备7010、第二设备7020及第三设备7030可以是所列举的设备以外的家电产品,也可以是家电产品以外的设备。第一设备7010、第二设备7020及第三设备7030可以皆为同一种类的设备,也可以是不同出位的设备。虽然没有限定,但在本实施方式中,第一设备7010及第三设备7030是空调机,第二设备7020是电视。
关于与第一设备7010、第二设备7020及第三设备7030的声音操作有关的构成/功能等,稍后进行描述。此外,由于空调机、电视等家电产品是普遍广为人知的设备,所以在此省略关于与第一设备7010、第二设备7020及第三设备7030的声音操作有关的构成/功能以外的说明。
设备控制系统7400是接受从第一设备7010、第二设备7020及第三设备7030发送来的声音数据并分析所接受的声音数据的系统。另外,设备控制系统7400是将基于声音数据的分析结果的信号(指示或信息)发送到第一设备7010、第二设备7020及第三设备7030,由此控制第一设备7010、第二设备7020及第三设备7030的系统。
设备控制系统7400包括第一服务器7100、第二服务器7200及第三服务器7300(参照图49)。第一服务器7100、第二服务器7200及第三服务器7300相互通过网络7040可通信地连接。
第一服务器7100、第二服务器7200及第三服务器7300通常设置在与设置第一设备7010、第二设备7020、以及第三设备7030的建筑物不同的地方。第一服务器7100、
第二服务器7200及第三服务器7300可以设置在同一地方,也可分别设置在不同的地方。
第一服务器7100是接受从第一设备7010、第二设备7020及第三设备7030发送来的声音数据并分析所接受的声音数据的服务器。另外,第一服务器7100是对与关于第一设备7010、第二设备7020及第三设备7030的声音识别处理有关的功能的开始/停止执行各种处理的服务器。关于详细情况,稍后进行描述。
此外,关于第一设备7010的声音识别处理是指,第一设备7010接受声音,发送第一设备7010接受的声音的声音数据,第一服务器7100接受从第一设备7010发送来的声音数据,并分析所接受的声音数据的一系列的处理。更具体地说,第一设备7010的声音识别处理是指,声音输入部7012接受声音并发送由声音数据发送部7014接受的声音数据,声音数据接受部7110接受从第一设备7010发送来的声音数据并使声音分析部7120分析所接受的声音数据的一系列的处理。此外,关于第一设备7010的声音输入部7012及声音数据发送部7014和设备控制系统7400的声音数据接受部7110及声音分析部7120,稍后进行描述。
与关于第一设备7010的声音识别处理相关的功能例如包括以下功能:
1)声音输入部7012的声音接受功能
2)声音数据发送部7014的声音数据发送功能
3)声音数据接受部7110接受第一设备7010发送的声音数据的功能
4)声音分析部7120分析由第一设备7010发送的声音数据的功能
5)将第一设备7010发送的声音数据蓄积在后述的第一服务器7100的存储部7190中的功能
由于与关于第二设备7020及第三设备7030的声音识别处理及关于第二设备7020及第三设备7030的声音识别处理相关的功能分别和与关于第一设备7010的声音识别处理及关于第一设备7010的声音识别处理相关的功能是同样的,所以在此省略说明。
第二服务器7200是将基于第一设备7010或第三设备7030(空调机)发送的声音数据的第一服务器7100的声音分析部7120的分析结果的信号发送到作为声音数据的发送源的第一设备7010及第三设备7030的服务器。例如,具体地说,第二服务器7200基于第一设备7010发送的“运转开始”这样的声音的声音数据的分析结果(声音数据的内容是运转开始的指示这样的分析结果),对第一设备7010发送运行开始的指令(信号)。
此外,在此,第二服务器7200将基于来自第一设备7010或第三设备7030的声音数据的分析结果的信号发送到作为声音数据的发送源的第一设备7010或第三设备7030。但是,设备控制系统7400不限于这种方式。例如,在第一设备7010及第三设备7030是不同制造商的空调机的情况、或者即使厂商相同空调的类型等也不同的情况下,设备控制系统7400除了第一到第三服务器之外,还可以具有第四服务器(未图示)。而且,也可以构成为第二服务器7200将基于来自第一设备7010的声音数据的分析结果的信号发送到第一设备7010,第四服务器将基于来自第三设备7030的声音数据的分析结果的信号发送到第三设备7030。此外,第二服务器7200也可以构成为不管第一设备7010及第三设备7030的空调制造商的差异或空调类型的差异,而将基于来自第一设备7010或第三设备7030的声音数据的分析结果的信号发送到作为声音数据的发送源的第一设备7010或第三设备7030。
第三服务器7300是将基于第一服务器7100的声音分析部7120对第二设备7020(本实施方式中为电视)发送的声音数据的分析结果的信号发送到作为声音数据的发送源的第二设备7020的服务器。例如,具体地说,第二服务器7200基于第二设备7020发送的“电源接通”这样的声音的声音数据的分析结果(声音数据的内容是电源接通的指令这一分析结果),向第二设备7020发送电源接通的指令信号。
此外,在此,第三服务器7300向第二设备7020发送基于声音数据的分析结果的信号,但不限于此。例如,设备控制系统7400也可以构成为不具有第三服务器7300,而第二服务器7200作为本实施方式的第三服务器7300发挥作用。
(2)详细构成
下面,进一步说明与设备(第一设备7010、第二设备7020及第三设备7030)的声音操作有关的构成/功能等和设备控制系统7400。
(2-1)第一设备、第二设备及第三设备
第一设备7010、第二设备7020及第三设备7030都是第一设备的一例,并且是第二设备的一例。
下面,以第一设备7010为例,对与第一设备7010、第二设备7020及第三设备7030的声音操作有关的构成/功能等进行说明。
此外,第二设备7020的声音输入部7022、声音数据发送部7024、开始/停止请求接受部7026、开始/停止信息接受部7027、报知部7028、开关7021a、遥控器7021b分别与第一设备7010的声音输入部7012、声音数据发送部7014、开始/停止请求接受部7016、开始/停止信息接受部7017、报知部7018、开关7011a、遥控器7011b相同。另外,关于声音操作,第三设备7030也具有与第一设备7010同样的构成。因此,在此省略对第二设备7020及第三设备7030的说明。
作为与声音操作有关的构成,第一设备7010主要具有:包括麦克风的声音输入部7012、具备CPU及存储CPU执行的程序等的存储器的控制基板(省略图示)、可以与网络7040连接的通信接口(未图示)、包括LED的报知部7018、设于第一设备的主体(未图示)的物理开关7011a、用于对第一设备7010发送各种指令的遥控器7011b等。遥控器7011b可以与第一设备7010的主体通过有线连接,也可通过无线(例如通过红外线信号)向第一设备7010的主体发送信号。
第一设备7010通过控制基板的CPU执行程序而作为声音数据发送部7014、开始/停止请求接受部7016、开始/停止信息接受部7017等发挥作用。
下面,对第一设备7010的开关7011a及遥控器7011b、声音输入部7012、声音数据发送部7014、开始/停止请求接受部7016、开始/停止信息接受部7017、及报知部7018进行说明。
(2-1-1)开关及遥控器
开关7011a及遥控器7011b是指示接受部的一例。指示接受部是接受停止与声音识别处理相关的功能的至少一部分的指示的功能部,该功能部中,声音输入部7012接受声音,声音数据发送部7014发送声音数据,并使设备控制系统7400的声音分析部7120分析发送的声音数据。另外,开关7011a及遥控器7011b也是接受开始(重新开始)与声音识别处理相关的功能的至少一部分的指示的功能部。
开关7011a是物理开关(例如,按钮开关)。
遥控器7011b是用于作为第一设备7010的空调机的动作、例如第一设备7010的打开/关闭、运转模式的设定、设定温度的输入等的遥控器。另外,在遥控器7011b上设置有接受开始/停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的指示的开关。
在开关7011a及遥控器7011b接受了开始/停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的指示的情况下,优选第一设备7010将功能开始通知信号/功能停止通知信号发送到设备控制系统7400。
功能开始通知信号/功能停止通知信号是通知已接受了开始/停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的指示的意旨的信号。此外,优选的是,在功能开始通知信号/功能停止通知信号中,不仅接受功能的开始/停止的指示,作为信息还被附加接受哪个功能的开始/停止的指示。
(2-1-2)声音输入部
声音输入部7012具有接受声音的麦克风(未图示),接受声音的输入。
声音输入部7012的声音接受功能优选构成为能够指示开始(执行)/停止。
声音输入部7012的声音接受功能优选构成为能够通过对开关7011a的指示(按下开关7011a)或来自遥控器7011b的指示(操作遥控器7011b)来指示开始/停止。此外,优选的是,在按照对开关7011a的指示、来自遥控器7011b的指示已开始/停止了声音输入部7012的声音接受功能的情况下,从第一设备7010向第一服务器7100发送通知该意旨的信号(功能开始通知信号/功能停止通知信号)。
另外,优选的是,当开始/停止请求接受部7016接受声音输入部7012的声音接受功能的开始/停止请求时,根据该请求,指示开始/停止声音输入部7012的声音接受功能。
(2-1-3)声音数据发送部
声音数据发送部7014将声音输入部7012接受的声音作为声音数据发送到具有声音分析部7120的设备控制系统7400。声音数据发送部7014例如将对声音输入部7012接受的声音进行了A/D转换后的数字声音信号(声音数据)发送到设备控制系统7400。
声音数据发送部7014的声音数据发送功能优选构成为能够指示开始(执行)/停止。
声音数据发送部7014的声音数据发送功能优选构成为能够通过对开关7011a的指示、来自遥控器7011b的指示来指示开始/停止。此外,在按照对开关7011a的指示、来自遥控器7011b的指示已开始或停止了声音数据发送部7014的声音数据发送功能的情况下,从第一设备7010对第一服务器7100发送通知该意旨的信号(功能开始通知信号/功能停止通知信号)。
另外,声音数据发送部7014的声音数据发送功能也可以通过来自声音输入部7012的声音输入来指示开始/停止。例如,第一设备7010具有声音识别芯片,该声音识别芯片仅识别输入到声音输入部7012的声音中的特定声音(例如,指示声音数据发送部7014的声音数据发送功能的开始/停止的声音)。通过具有这样的声音识别芯片,可根据对声音输入部7012的特定声音的输入,指示声音数据发送部7014的声音数据发送功能的开始/停止。此外,优选的是,即使在按照对声音输入部7012的声音的指示已开始或停止了声音数据发送部7014的声音数据发送功能的情况下,也从第一设备7010对第一服务器7100发送通知该意旨的信号(功能开始通知信号/功能停止通知信号)。
另外,优选的是,当开始/停止请求接受部7016接受开始/停止声音数据发送部7014的声音数据发送功能的请求时,根据该请求,指示开始/停止声音数据发送部7014的声音数据发送功能。
(2-1-4)开始/停止请求接受部
开始/停止请求接受部7016接收后述的设备控制系统7400的开始/停止请求部7180发送的、开始/停止与关于第一设备7010的声音识别处理相关的功能的请求。此外,开始/停止请求接受部7016接受的功能的开始/停止请求是可通过第一设备7010指示开始/停止的功能。例如,开始/停止请求接受部7016接受的功能的开始/停止请求是声音输入部7012的声音接受功能的开始/停止的请求、声音数据发送部7014的声音数据发送功能的开始/停止的请求。当开始/停止请求接受部7016接收到请求开始/停止与关于第一设备7010的声音识别处理相关的功能的信号时,第一设备7010根据该信号开始/停止与关于第一设备7010的声音识别处理相关的功能。
(2-1-5)开始/停止信息接受部
开始/停止信息接受部7017接受从后述的设备控制系统7400的开始/停止信息发送部7170发送的功能停止信息。
功能停止信息是对应于停止与可通过声音操作的其它设备(第一设备7010以外的设备)的声音识别处理相关的功能的至少一部分(第一功能)的、有关停止与该设备(第一设备7010)的声音识别处理相关的功能的至少一部分(第二功能)的决定的信息。换言之,功能停止信息是如下信息:当与可通过声音操作的其它设备(第一设备7010以外的设备)的声音识别处理相关的功能的至少一部分被停止,并且由后述的设备控制系统7400的开始/停止决定部7160据此决定停止与该设备(第一设备7010)的声音识别处理相关的功能的至少一部分时,为了通知该决定而发送到第一设备7010的信息。
另外,开始/停止信息接受部7017接受后述的设备控制系统7400的开始/停止信息发送部7170发送的功能开始信息。
功能开始信息是对应于开始与可通过声音操作的其它设备(第一设备7010以外的设备)的声音识别处理相关的功能的、有关决定开始与该设备(第一设备7010)的声音识别处理相关的功能的信息。换言之,功能开始信息是是如下信息:当与关于可通过声音操作的其它设备(第一设备7010以外的设备)的声音识别处理相关的功能被开始,且声音识别处理变为有效,从而由后述的设备控制系统7400的开始/停止决定部7160决定开始与该设备(第一设备7010)的声音识别处理相关的功能(使关于该设备(第一设备7010)的声音识别处理有效)时,为了通知该决定而发送到第一设备7010的信息。
(2-1-6)报知部
报知部7018是用于向第一设备10的用户报知关于第一设备7010的声音识别处理是否有效的功能部。报知部7018例如包括LED。
报知部7018报知停止与关于第一设备7010的声音识别处理相关的功能的至少一部分。换言之,报知部7018报知已停止关于第一设备7010的声音识别处理。具体地说,在作为指示接受部的一例的开关7011a、遥控器7011b或声音输入部7012已接受了停止与关于第一设备7010的声音识别处理相关的功能中的任一功能的指示的情况下、或者开始/停止信息接受部7017已接受了功能停止信息的情况下,报知部7018使第一色LED(例如红色LED)点亮。
另外,报知部7018报知开始与关于第一设备7010的声音识别处理相关的功能。报知部7018报知与关于第一设备7010的声音识别处理相关的所有功能都已开始(未停止)。换言之,报知部7018报知关于第一设备7010的声音识别处理是有效的(是可执行状态)。具体地说,在作为指示接受部的一例的开关7011a、遥控器7011b或声音输入部7012已接受了开始与关于第一设备7010的声音识别处理相关的功能的指示的情况下、或开始/停止信息接受部7017已接受了功能开始信息的情况下,报知部7018使第二色LED(例如蓝色LED)点亮。
(2-2)设备控制系统
对设备控制系统7400的第一服务器7100、第二服务器7200及第三服务器7300进行说明。
(2-2-1)第一服务器
第一服务器7100是具有包括处理器、主存储装置及辅助存储装置的存储装置、以及通信接口等的计算机。第一服务器7100经由网络7040与第一设备7010、第二设备7020、第三设备7030、第二服务器7200及第三服务器7300可通信地连接。
在第一服务器7100中,处理器通过执行存储在存储部7190(存储装置)中的程序来执行各种处理。第一服务器7100作为执行各种处理的功能部,具有声音数据接受部7110、声音分析部7120、分析结果发送部7130、探测部7140、判断部7150、开始/停止决定部7160、开始/停止信息发送部7170、以及开始/停止请求部7180。
另外,存储部7190作为有关开始/停止关于第一设备7010、第二设备7020及第三设备7030的声音识别处理及与声音识别处理相关的功能的至少一部分功能的信息的存储区域,包括关联信息存储区域7192及声音数据存储区域7194。
此外,在关联信息存储区域7192中,与关联的设备的识别码相关联地存储有由设备控制系统7400控制的设备的识别码。
在此,所谓某一设备(称为设备A)与另一设备(称为设备B)相关联,是指处于如下优选的关系:当与关于设备A的声音识别处理相关的至少一部分功能(第一功能)被开始/停止时,与关于设备B的声音识别处理相关的至少一部分功能(第二功能)被开始/停止。例如,具体地说,在将设备A和设备B比较接近地配置的情况下,设备A和设备B多处于如下优选的关系:当与关于设备A的声音识别处理相关的至少一部分功能被开始/停止时,与关于设备B的声音识别处理相关的至少一部分功能被开始/停止。
关于使某一设备A与哪个设备相关联地进行存储,例如基于设备A的用户从未图示的信息终端等输入到第一服务器7100的信息来决定。
若举出具体例,则例如在输入了设备A和设备B设置于同一空间的信息的情况下,将设备A和设备B作为关联的设备存储于关联信息存储区域7192。例如,若为图49的例子,则由于第一设备7010及第二设备7020被配置于同一空间(第一空间),所以第一设备7010和第二设备7020被相关联地存储。另一方面,由于第三设备7030被配置于与第一设备7010和第二设备7020不同的空间(第二空间),所以第三设备7030不与第一设备7010和第二设备7020相关联地存储。
另外,在其它例中,在被输入设备A和设备B设置于同一建筑物中的信息的情况下,设备A和设备B也可以作为关联的设备存储于关联信息存储区域7192。
另外,在其它例中,在多个设备通过无线LAN与建筑物内的多个接入点进行通信的情况下,利用同一接入点的设备彼此也可以作为关联的设备存储于关联信息存储区域7192。
另外,在再一例中,通过设备用户的申报,设备A和设备B也可以作为相关联的设备存储于关联信息存储区域7192。
以下,对声音数据接受部7110、声音分析部7120、分析结果发送部7130、探测部7140、判断部7150、开始/停止决定部7160、开始/停止信息发送部7170及开始/停止请求部7180进行说明。
(2-2-1-1)声音数据接受部
声音数据接受部7110是第一声音数据接受部及第二声音数据接受部的一例。声音数据接受部7110接受由第一设备7010的声音数据发送部7014、第二设备7020的声音数据发送部7024及第三设备7030的声音数据发送部(未图示)发送的声音数据。优选的是,当声音数据接受部7110接受第一设备7010的声音数据发送部7014、第二设备7020的声音数据发送部7024及第三设备7030的声音数据发送部(未图示)发送的声音数据时,所接受的声音数据在执行声音分析之前被临时蓄积在声音数据存储区域7194中。但是,声音数据的蓄积定时是一例,声音数据也可以在执行声音分析之前或执行期间蓄积在声音数据存储区域7194中。
作为与关于第一设备7010的声音识别处理相关的功能的一例的声音数据接受部7110接受第一设备7010发送的声音数据的功能(以后,为了简化说明而简称为声音数据接受功能)优选构成为能够从第一设备7010指示开始/停止。
具体地说,声音数据接受功能的开始/停止优选例如构成为可通过对第一设备7010的开关7011a的指示、来自第一设备7010的遥控器7011b的指示(利用功能开始通知信号及功能停止通知信号)而对第一服务器7100进行请求。而且,优选当请求开始/停止声音数据接受功能时,第一服务器7100根据该请求指示开始/停止声音数据接受功能。
另外,也可以通过来自声音输入部7012的声音输入来指示开始/停止声音数据接受功能。例如,优选的是,当向声音输入部7012输入指示开始/停止声音数据接受功能的声音,该声音的声音数据被声音数据接受部7110接受,且由声音分析部7120识别到指示开始/停止声音数据接受功能的情况时,第一服务器7100根据该指示执行/停止声音数据接受功能。
另外,优选的是,在后述的开始/停止决定部7160已决定停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的情况下,第一服务器7100能够指示执行/停止声音数据接受功能。
另外,优选作为与关于第一设备7010的声音识别处理相关的功能的一例的、将第一设备7010发送的声音数据蓄积在存储部7190的声音数据存储区域7194的功能(为了简化说明,简称为声音数据蓄积功能)也构成为能够从第一设备7010指示开始/停止。具体地说,因为只要与声音数据接受功能的开始/停止同样地实现即可,所以省略说明。
另外,优选的是,当后述的开始/停止决定部7160已决定停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的情况下,第一服务器7100能够指示执行/停止声音数据蓄积功能。
在此,对声音数据接受部7110接受第一设备7010发送的声音数据的功能及将第一设备7010发送的声音数据蓄积在存储部7190的声音数据存储区域7194的功能的开始/停止进行说明。关于声音数据接受部7110接受第二设备7020或第三设备7030发送的声音数据的功能的开始/停止,由于与上述说明同样,因此在此省略说明。
(2-2-1-2)声音分析部
声音分析部7120是第一声音分析部及第二声音分析部的一例。声音分析部7120对于分析声音数据接受部7110(第一设备7010、第二设备7020及第三设备)所接受的声音数据,分析声音数据是何种内容。具体地说,声音分析部7120例如分析声音数据并求出其特征量,利用包含存储在存储装置中的声学模型、语言模型及发音词典的声音识别词典,从特征量生成文本信息。声音分析部7120生成的文本信息没有限定,但例如是“运转开始”、“设定温度25度”、“制冷运转”等文本信息。
作为与关于第一设备7010的声音识别处理相关的功能的一例的、由声音分析部7120分析第一设备7010发送的声音数据的功能(以后,为了简化说明,简称为声音数据分析功能)优选构成为能够从第一设备7010指示开始/停止。具体地说,只要与上述声音数据接受功能的开始/停止同样地实现即可,所以省略说明。
另外,优选的是,在后述的开始/停止决定部7160已决定停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的情况下,第一服务器7100能够指示执行/停止声音数据分析功能。
在此,对声音分析部7120分析第一设备7010发送的声音数据的功能的开始/停止进行说明。声音分析部7120分析第二设备7020及第三设备7030发送的声音数据的功能的开始/停止与上述说明同样,所以在此省略说明。
(2-2-1-3)分析结果发送部
分析结果发送部7130将声音分析部7120的声音分析结果(声音分析部7120生成的文本信息)发送到第二服务器7200及第三服务器7300。此外,优选的是,声音分析结果中包含有关成为声音分析的对象的声音数据的发送源的信息。
此外,分析结果发送部7130也可以将声音分析结果发送到与成为声音分析对象的声音数据的发送源相关联的服务器。例如,在此,在成为声音分析的对象的声音数据的发送源是第一设备7010或第三设备7030的情况下,分析结果发送部7130将声音分析结果发送到第二服务器7200。另一方面,在成为声音分析的对象的声音数据的发送源是第二设备7020的情况下,分析结果发送部7130将声音分析结果发送到第三服务器7300。
另外,在其它实施方式中,分析结果发送部7130也可以基于声音分析结果的内容选择声音分析结果的发送地址(例如,在此,若为针对空调的内容,则选择第二服务器7200,若为针对电视的指令,则选择第三服务器7300),并将分析结果发送到所选择的服务器。
(2-2-1-4)探测部
探测部7140探测第一设备7010已接受了停止与关于第一设备7010的声音识别处理相关的功能的至少一部分(第一功能)的指示的情况。另外,同样,探测部7140探测第二设备7020已接受了停止与关于第二设备7020的声音识别处理相关的功能的至少一部分的指示的情况、及第三设备7030已接受了停止与关于第三设备7030的声音识别处理相关的功能的至少一部分的指示的情况。
另外,探测部7140也探测第一设备7010已接受了开始停止中的第一功能的指示的情况。同样,探测部7140也探测第二设备7020已接受了开始与关于第二设备7020的声音识别处理相关的停止中的功能的指示的情况、及第三设备7030已接受了开始与关于第三设备7030的声音识别处理相关的停止中的功能的指示的情况。
具体地说,如上所述,在开关7011a及遥控器7011b已接受了开始/停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的指示的情况下,探测部7140基于从第一设备7010发送的信号(功能开始通知信号/功能停止通知信号),探测第一设备7010已接受了开始/停止与关于第一设备7010的声音识别处理相关的第一功能的指示的情况。另外,在声音分析部7120分析的声音数据是指示开始/停止与关于第一设备7010的声音识别处理相关的第一功能的内容的情况下,探测部7140探测第一设备7010已接受了开始/停止与关于第一设备7010的声音识别处理相关的第一功能的指示的情况。
第二设备20已接受了停止与声音识别处理相关的功能的至少一部分的指示、第三设备30已接受了停止与声音识别处理相关的功能的至少一部分的指示的探测也用同样的方法进行即可。
此外,探测部7140也可以基于从第一设备7010发送的信号功能开始通知信号/功能停止通知信号,探测第一设备7010已接受了开始/停止与声音识别处理相关的第一功能的指示的情况。例如,在第一功能为第一设备7010的通信功能的情况下,探测部7140也可以基于第一服务器7100是否能够与第一设备7010通信,探测第一设备7010已接受了开始/停止与声音识别处理相关的第一功能的情况。
(2-2-1-5)判断部
判断部7150判断与第一设备7010、第二设备7020及第三设备7030关联的设备。判断部7150例如基于存储在存储部7190的关联信息存储区域7192中的信息,判断与第一设备7010、第二设备7020及第三设备7030关联的设备。
(2-2-1-6)开始/停止决定部
开始/停止决定部7160决定停止与声音识别处理相关的至少一部分功能(第二功能),该声音识别处理是:当探测部7140探测到某一设备(称为设备A)已接受了停止与关于设备A的声音识别处理相关的功能的至少一部分功能(第一功能)的指示时,针对另一设备(称为设备B),声音输入部接受声音并发送所接受的声音数据,声音数据接受部7110接受所发送的声音数据,使声音分析部7120分析所接受的声音数据。更具体地说,在探测部7140探测到设备A已接受了停止关于设备A的声音识别处理的第一功能的指示且在判断部7150判断为与设备A关联的设备中包括设备B的情况下,开始/停止决定部7160决定停止与关于设备B的声音识别处理相关的第二功能。
举出具体例进行说明。
例如,在关联信息存储区域7192中,第一设备7010与第二设备7020相关联地存储,且第一设备7010与第三设备7030不相关联地存储。换言之,在判断部7150判断为与第一设备7010相关联的设备中,包括第二设备7020,不包括第三设备7030。而且,假设探测部7140探测到第一设备7010已接受了停止关于设备的声音识别处理的第一功能的指示的情况。在该情况下,开始/停止决定部7160决定停止与关于第二设备7020的声音识别处理相关的至少一部分功能(第二功能)。另一方面,对于与第三设备30的声音识别处理相关的功能,开始/停止决定部160不决定停止。
此外,优选的是,关于设备A的声音识别处理将被停止的第一功能与基于第一功能的停止而停止的关于设备B的声音识别处理的第二功能是同一种功能。
此外,第二功能与第一功能是同一种功能例如是指在第一功能是声音输入部7012的声音接受功能的情况下,第二功能是声音输入部7022的声音接受功能。另外,第二功能与第一功能是同一种功能例如是指在第一功能是第一设备7010的声音数据发送功能的情况下,第二功能是第二设备7020的声音数据发送功能。另外,第二功能与第一功能是同一种功能例如是指在第一功能是声音分析部7120分析第一设备7010发送的声音数据的功能的情况下,第二功能是声音分析部7120分析第二设备7020发送的声音数据的功能。
但是,第一功能与第二功能也可以不是同一种功能。例如,也可以预先确定关于设备A的声音识别处理已停止第一功能的情况下停止的、关于设备B的声音识别处理的第二功能(无论第一功能是何种功能)。
在开始/停止决定部7160已决定停止关于设备B的声音识别处理的第二功能的情况、第二功能是在可通过设备控制系统7400停止的功能的情况下,第一服务器7100进行使该第二功能停止的处理。此外,在可通过设备控制系统7400停止的功能中包括声音数据接受部7110接受设备发送的声音数据的功能、声音分析部7120分析设备发送的声音数据的功能、以及将设备发送的声音数据蓄积在第一服务器7100的存储部7190的声音数据存储区域7194的功能。另一方面,在第二功能是无法通过设备控制系统7400停止的功能情况(是通过设备B停止的功能的情况)下,后述的开始/停止请求部7180向设备B发送停止请求。
另外,当探测部7140探测到某一设备(称为设备A)已接受了开始(重新开始)与关于设备A的声音识别处理相关的功能的至少一部分功能(停止中的第一功能)的指示时,针对另一设备(称为设备B),开始/停止决定部7160决定开始(重新开始)与声音识别处理相关的至少一部分功能(停止中的第二功能),该声音识别处理是:声音输入部接受声音并发送所接受的声音数据,声音数据接受部7110接受所发送的声音数据,使声音分析部7120分析所接受的声音数据。更具体地说,当探测部7140探测到设备A已接受了开始关于设备A的声音识别处理的第一功能的指示,且判断部7150判断为与设备A管理的设备中包括设备B的情况下,开始/停止决定部7160决定开始与关于设备B的声音识别处理相关的第二功能。即,在探测到可执行关于设备A的声音识别处理,且判断部7150判断为与设备A关联的设备中包括设备B的情况下,开始/停止决定部7160决定可执行关于设备B的声音识别处理。
在开始/停止决定部7160已决定开始(重新开始)关于设备B的声音识别处理的第二功能的情况、第二功能是可通过设备控制系统7400开始的功能的情况(换言之,第二功能是通过设备控制系统7400停止的功能的情况)下,第一服务器7100进行使该第二功能开始的处理。另一方面,在第二功能是无法通过设备控制系统7400开始的功能的情况(是通过设备B开始的功能的情况)下,后述的开始/停止请求部7180对设备B发送开始请求。
(2-2-1-7)开始/停止信息发送部
开始/停止信息发送部7170对第二设备7020发送功能开始信息/功能停止信息,以使得当开始/停止决定部7160已决定开始/停止与关于某一设备的声音识别处理相关的第二功能时,该设备的报知部报知第二功能的停止。
例如,若举出具体例来说明,则开始/停止信息发送部7170向第二设备7020发送功能开始信息/功能停止信息,以使得当开始/停止决定部7160已决定开始/停止与关于第二设备7020的声音识别处理相关的第二功能时,第二设备7020的报知部7028报知第二功能的停止。
此外,在第二功能是通过设备开始/停止的功能的情况(即,第二功能是设备的声音输入部的声音接受功能、声音数据发送部的声音数据发送功能的情况下,后述的开始/停止请求部7180将请求开始/停止第二功能的信号发送到设备。因此,在第二功能是通过设备开始/停止的功能的情况下,也可以发送后述的开始请求/停止请求,代替功能开始信息/功能停止信息。换言之,在第二功能是通过设备开始/停止的功能的情况下,开始/停止请求部7180也可以兼有开始/停止信息发送部7170的作用。
(2-2-1-8)开始/停止请求部
开始/停止请求部7180根据开始/停止决定部7160的决定,将请求停止第二功能的信号发送给第二设备7020。
具体地说,在开始/停止决定部7160决定开始/停止关于某一设备的声音识别处理的第二功能,且第二功能是无法通过设备控制系统7400停止的功能的情况(是通过设备停止的功能的情况)下,开始/停止请求部7180生成开始/停止请求并将其发送到设备。
(2-2-2)第二服务器及第三服务器
第二服务器7200是具有处理器、包括主存储装置及辅助存储装置的存储装置、以及通信接口等的计算机。第二服务器7200经由网络7040至少与第一设备7010、第三设备7030及第一服务器7100可通信地连接。
第三服务器7300也是与第二服务器7200同样的计算机。第二服务器7200经由网络7040至少与第二设备7020和第一服务器7100可通信地连接。
通过处理器执行存储于存储部的程序,第二服务器7200执行各种处理。第二服务器7200具有分析结果接收部7210和信号生成发送部7220作为执行各种处理的功能部。
分析结果接收部7210接收第一服务器7100的声音分析部7120对第一设备7010或第三设备7030发送的声音数据的分析结果(例如,文本数据)。
信号生成发送部7220基于分析结果接收部7210接收到的分析结果(文本数据),生成信号(指令)并将其发送,以使得声音数据的发送源的第一设备7010或第三设备7030处于与分析结果对应的运转状态(例如,在分析结果为“开始空调机的运转”这样的文本数据的情况下,开始声音数据的发送源设备的运转。
关于第三服务器7300也同样,第三服务器7300具有分析结果接收部7310和信号生成发送部7320。
分析结果接收部7310接收第一服务器7100的声音分析部7120对第二设备7020发送的声音数据的分析结果(例如,文本数据)。
信号生成发送部7320基于分析结果接收部7310接收到的分析结果(文本数据),生成信号(指令)并将其发送,以使得声音数据发送源的第二设备7020处于与分析结果对应的运转状态(例如,在分析结果为“电源接通”这样的文本数据的情况下,声音数据的发送源设备的电源接通。
(3)设备的声音操作
对设备的声音操作进行说明。设备的声音操作能够在可执行关于该设备的声音识别处理的状态(为了执行声音识别处理而需要的功能未停止的状态)下执行。
在此,参照图50,以第一设备7010通过声音操作的情况为例,说明设备的声音操作。此外,第三设备7030通过声音操作时的处理流程与第一设备7010通过声音操作时的处理流程是同样的,只是设备不同,所以省略说明。
首先,在步骤S1中,设为用于指示的声音(例如,“开始运转空调机”)被输入第一设备的声音输入部7012。其结果是,声音数据从声音输入部7012接受的声音的声音数据发送部7014发送到设备控制系统7400的第一服务器7100。
接着,在步骤S2中,第一服务器7100的声音数据接受部7110接受声音数据。
接着,在步骤S3中,声音数据接受部7110所接受的声音数据被存储于存储部7190的声音数据存储区域7194。存储于声音数据存储区域7194的声音数据除在下一步骤S4中被用于声音分析以外,作为声音数据的历史数据被存储于声音数据存储区域7194。
此外,在此,在执行声音数据的声音分析之前,声音数据被存储于声音数据存储区域7194,但是取而代之,或者在此基础上,也可以在存储部7190中将声音分析结果存储为历史数据。
接着,在步骤S4中,声音分析部7120进行存储于声音数据存储区域7194的声音数据的声音分析。所获得的声音分析结果由分析结果发送部7130发送到第二服务器7200。
在步骤S5中,第二服务器7200的分析结果接收部7210接收分析结果发送部7130发送的分析结果。
接着,在步骤S6中,信号生成发送部7220基于分析结果(声音数据的内容是运转开始指示这样的分析结果)生成信号(指令或信息),并发送到第一设备7010。
接着,在步骤S7中,第一设备7010接收从信号生成发送部7220发送的信号,在例如信号是指令的情况下,执行与该指令对应的动作。
图51是说明第二设备7020通过声音操作时的设备的声音操作的序列图。在此,虽然在使用第三服务器7300代替第二服务器7200这一点上不同,但因为关于处理的内容与第一设备7010被通过声音操作的情况是同样的,所以省略说明。
(4)关于某一设备停止了声音识别处理的第一功能时的、其它设备中的声音识别处理的第二功能的停止处理
接着,参照图52及图53的序列图,对关于某一设备已停止声音识别处理的第一功能时的、其它设备中的声音识别处理的第二功能的停止处理进行说明。
在图52中,作为关于第一设备7010的声音识别处理的第一功能的一例,以停止声音输入部7012的声音接受功能的情况为例,说明其它设备(第一设备7010以外的设备)中的声音识别处理的第二功能的停止处理。
此外,在此,假设在判断部7150基于存储在存储部7190的关联信息存储区域7192中的信息判断为与第一设备7010关联的设备中包含第二设备7020且不包含第三设备7030进行说明。另外,在此,设定对关于第一设备7010的声音识别处理而停止的第一功能(即声音输入部7012的声音接受功能)与基于第一功能的停止而停止的关于其它设备的声音识别处理的第二功能是同一种功能进行说明。
此外,在图52的序列图中,第一功能及第二功能是声音输入部的声音接受功能,但即使在第一功能及第二功能是声音数据发送部的声音数据发送功能的情况下,处理的流程(除停止的功能不同这一点外)也是同样的。
首先,在步骤S21中,设为对作为指示接受部的一例的物理开关7011a指示声音输入部7012的声音接受功能。
其结果是,成为声音不被第一设备7010的声音输入部7012接受的状态(步骤S23)。例如,在步骤S23中,不向使声音输入部7012动作的电气/电子电路供给电力。而且,在步骤S24中,报知部7018通过使(第二色LED(例如蓝色LED)熄灭)第一色LED(例如红色LED)点亮来报知停止关于第一设备7010的声音识别处理。
另外,在步骤S21中,开关7011a接受了指示的结果是,从第一设备7010向第一服务器7100通知声音输入部7012的声音接受功能已被停止的意旨(功能停止通知信号)。此外,优选在功能已被停止的意旨的通知中,不仅是通知功能已被停止,而且还发送能够特定哪个功能已被停止的信息。在步骤S22中,第一服务器7100的探测部7140基于从第一设备7010发送的信号,探测已接受了停止与关于第一设备7010的声音识别处理相关的第一功能的指示的情况。
接着,在步骤S25中,第一服务器7100的判断部7150基于存储在存储部7190的关联信息存储区域7192中的信息,判断与第一设备7010关联的设备。在此,与第一设备7010关联的设备中包括第二设备7020,且不包括第三设备7030。
接着,在步骤S26中,基于步骤S22及步骤S25的结果,开始/停止决定部7160决定停止与关于第二设备7020的声音识别处理相关的至少一部分功能(第二功能)。特别是,在此,作为与关于第二设备7020的声音识别处理相关的第二功能的一例,开始/停止决定部7160决定停止与第一功能为同一种类的、声音输入部7022的声音接受功能。此外,另一方面,开始/停止决定部7160不决定与关于第三设备7030的声音识别处理相关的功能的停止。
此外,声音输入部7022的声音接受功能是无法通过设备控制系统7400停止的功能(通过第二设备7020停止的功能)。因此,在步骤S27中,开始/停止请求部7180向第二设备7020发送第二功能(声音输入部22的声音接受功能)的停止请求。
在第二设备7020中,当开始/停止请求接受部7026接受了停止请求时(步骤S28),据此被指示停止声音输入部7022的声音接受功能,且停止声音输入部7022的声音接受功能(步骤S29)。
接着,在步骤S30中,由于在步骤S26中开始/停止决定部7160已决定停止与关于第二设备7020的声音识别处理相关的第二功能(声音输入部7022的声音接受功能),所以开始/停止信息发送部7170向第二设备7020发送功能停止信息,以使得第二设备7020的报知部7028报知第二功能的停止。
在第二设备7020中,当开始/停止信息接受部7027接受了功能停止信息时(步骤S31),报知部7018据此使(第二色LED(例如,蓝色LED)熄灭)第一色LED(例如红色LED)点亮。
此外,在此,除停止请求以外,第一服务器7100还发送功能停止信息,但也可以省略功能停止信息的发送。而且,当第二设备7020接收到停止请求时,报知部7018也可以使(使第二色的LED(例如蓝色LED)熄灭)第一色的LED(例如红色LED)点亮。换言之,停止请求也可以兼有功能停止信息的作用。
此外,假设在步骤S1中作为关于第二设备7020的声音识别处理的第一功能的一例,声音输入部7022的声音接受功能被停止的情况在第一设备7010中进行的处理在第二设备7020中进行,在第二设备7020中进行的处理在第一设备7010中进行,除此以外,处理流程相同,因此省略说明。另外,假设在步骤S1中作为关于第三设备7030的声音识别处理的第一功能的一例,在声音输入部的声音接受功能被停止的情况在本实施方式中不存在与第三设备7030相关联的设备,因此,仅停止第三设备7030的声音输入部的声音接受功能,对于第一设备7010和第二设备7020没有特别的影响。
接着,在图53中,作为关于第一设备7010的声音识别处理的第一功能的一例,以停止声音数据接受部7110接受第一设备7010发送的声音数据的功能(以后,为了简化说明,称为第一声音数据接受功能)的情况为例,对其它设备(第一设备7010以外的设备)中的声音识别处理的第二功能的停止处理进行说明。
此外,在此,假设在判断部7150基于存储在存储部7190的关联信息存储区域7192中的信息判断为与第一设备7010关联的设备中包含第二设备7020,且不包含第三设备7030进行说明。另外,在此,假设针对关于第一设备7010的声音识别处理而停止的第一功能(即第一声音数据接受功能)与基于第一功能的停止而停止的关于其它设备的声音识别处理的第二功能(以后,为了简化说明,称为第二声音数据接受功能)是同一种功能进行说明。
此外,在图53的序列图中,第一功能及第二功能是声音数据接受部7110接受声音数据的功能,但即使在第一功能及第二功能是声音分析部7120分析声音数据的功能或者将声音数据蓄积在存储部7190中的功能中的任一功能的情况下,处理的流程也是同样的(除了被停止的功能不同这一点之外)。
首先,在步骤S41中,对作为指示接受部的一例的物理开关7011a,指示停止第一声音数据接受功能。
在步骤S42中,报知部7018通过使(使第二色LED(例如蓝色LED)熄灭)第一色LED(例如红色LED)点亮来报知停止关于第一设备7010的声音识别处理的第一功能。
在步骤S41中开关7011a接受了指示的结果是,从第一设备7010向第一服务器7100发送停止第一声音数据接受功能的意旨(功能停止通知信号)(请求停止第一声音数据接受功能)。此外,优选功能被停止的意旨的通知中不仅是通知功能已停止,而且还发送能够特定哪个功能已被停止的信息。在步骤S43中,第一服务器7100的探测部7140基于从第一设备7010发送的信号,探测已接受了停止与关于第一设备7010的声音识别处理相关的第一功能的指示。
另外,第一服务器7100根据停止第一声音数据接受功能的通知(请求),指示停止第一声音数据接受功能(步骤S44)。其结果是,声音数据接受部7110成为不接受从第一设备7010发送来的声音数据的状态。
接着,在步骤S45中,第一服务器7100的判断部7150基于存储在存储部7190的关联信息存储区域7192中的信息,判断与第一设备7010关联的设备。在此,与第一设备7010关联的设备中包括第二设备7020,且不包括第三设备7030。
接着,在步骤S46中,基于步骤S43及步骤S45的结果,开始/停止决定部7160决定停止与关于第二设备7020的声音识别处理相关的至少一部分功能(第二功能)。特别是,在此,作为与关于第二设备7020的声音识别处理相关的第二功能的一例,开始/停止决定部7160决定停止与第一功能为同一种类的第二声音数据接受功能。此外,另一方面,开始/停止决定部7160不决定与关于第三设备7030的声音识别处理相关的功能的停止。
此外,第二声音数据接受功能是可通过设备控制系统7400停止的功能。因此,在步骤S47中,第一服务器7100指示停止第二声音数据接受功能(步骤S44)。其结果是,声音数据接受部7110成为不接受从第二设备20发送来的声音数据的状态。
接着,在步骤S48中,由于在步骤S47中开始/停止决定部7160已决定停止与关于第二设备7020的声音识别处理相关的第二功能(第二声音数据接受功能),所以开始/停止信息发送部7170向第二设备7020发送功能停止信息,以使得第二设备7020的报知部7028报知第二功能的停止。
在第二设备7020中,当开始/停止信息接受部7027接受了功能停止信息时(步骤S51),报知部7018据此使(使第二色LED(例如蓝色LED)熄灭)第一色LED(例如红色LED)点亮(步骤S52)。
(5)关于某一设备开始(重新开始)声音识别处理的第一功能时的、其它设备中的声音识别处理的第二功能的开始(重新开始)处理
在图54及图55的序列图中示出关于某一设备开始声音识别处理的第一功能时的、其它设备中的声音识别处理的第二功能的开始处理。
在图54中,作为关于第一设备7010的声音识别处理的第一功能的一例,以声音输入部7012的声音接受功能开始的情况为例,示出其它设备(第一设备7010以外的设备)中的声音识别处理的第二功能的开始处理。
此外,在此,假设在判断部7150基于存储在存储部7190的关联信息存储区域7192中的信息判断为与第一设备7010关联的设备中包含第二设备7020,且不包含第三设备7030。另外,在此,针对关于第一设备7010的声音识别处理而开始的第一功能(即声音输入部7012的声音接受功能)与基于第一功能的开始而开始的关于其它设备的声音识别处理的第二功能是同一种功能。
图54的序列图与图52的序列图不同之处在于,是开始第一功能及第二功能还是停止第一功能及第二功能,但流程大致相同。因此,在此对图54的序列图省略。
在图55中,作为关于第一设备7010的声音识别处理的第一功能的一例,以开始声音数据接受部7110接受第一设备7010发送的声音数据的功能(以下,为了简化说明,称为第一声音数据接受功能)的情况为例,示出其它设备(第一设备7010以外的设备)中的声音识别处理的第二功能的开始处理。
此外,在此,假设在判断部7150基于存储在存储部7190的关联信息存储区域7192中的信息判断为与第一设备7010关联的设备中包含第二设备7020,且不包含第三设备7030。另外,在此,针对关于第一设备7010的声音识别处理而开始的第一功能(即第一声音数据接受功能)与基于第一功能的停止而开始的关于其它设备的声音识别处理的第二功能(以后,为了简化说明,称为第二声音数据接受功能)是同一种功能。
图55的序列图与图53的序列图不同之处在于,是开始第一功能及第二功能还是开始第一功能及第二功能,但流程大致相同。因此,在此对图55的序列图省略。
(6)特征
(6-1)
本实施方式的设备控制系统7400控制作为第一设备的一例的第一设备7010和作为第二设备的一例的第二设备7020。第一设备7010具有作为第一声音输入部的一例的声音输入部7012,并发送声音输入部7012所接受的声音的声音数据。第二设备7020具有作为第二声音输入部的一例的声音输入部7022,并发送声音输入部7022所接受的声音的声音数据。设备控制系统7400具备作为第一声音数据接受部及第二声音数据接受部的一例的声音数据接受部7110、作为第一声音分析部及第二声音分析部的一例的声音分析部7120、探测部7140、以及开始/停止决定部7160。声音数据接受部7110接受第一设备7010发送的声音数据。声音数据接受部7110接受第二设备7020发送的声音数据。声音分析部7120分析声音数据接受部7110接受的声音数据。探测部7140探测第一设备7010已接受了停止与关于第一设备7010的声音识别处理相关的功能的至少一部分的第一功能的指示的情况,该声音识别处理是:声音输入部7012接受声音并发送所接受的声音的声音数据,声音数据接受部7110接受所发送的声音数据,使声音分析部7120分析所接受的声音数据。当探测部7140探测到第一设备7010已接受了停止第一功能的指示时,对于第二设备7020,开始/停止决定部7160决定与声音识别处理相关的功能的至少一部分的第二功能,该声音识别处理是:声音输入部7022接受声音并发送所接受的声音的声音数据,声音数据接受部7110接受所发送的声音数据,使声音分析部7120分析所接受的声音数据。
在本设备控制系统7400中,在第一设备7010接受了停止与声音识别处理相关的功能的至少一部分的第一功能的指示的情况下,停止与第二设备7020的声音识别处理相关的功能的至少一部分的第二功能。换言之,在本设备控制系统7400中,通过用户停止第一设备7010的声音识别处理,第二设备7020的声音识别处理也被停止。因此,通过使用本设备控制系统7400,可省去分别停止执行多个设备的声音识别处理的麻烦,可通过简单的操作停止多个设备的声音识别处理。
(6-2)
在本实施方式的设备控制系统7400中,第二功能是声音输入部7022的声音接受功能或第二设备7020的声音数据发送功能。
在此,由于不再从第二设备7020发送声音数据,所以可容易防止伴随发送声音数据而产生的有关隐私的问题、声音数据的监听之类的问题。
(6-3)
本实施方式的设备控制系统7400具备作为停止请求部的一例的开始/停止请求部7180。开始/停止请求部7180根据开始/停止决定部7160的决定,对第二设备7020发送请求停止第二功能的信号。
在此,由于第二设备7020中的第二功能的停止直接指示给第二设备7020,所以停止关于第二设备7020的声音识别处理的可靠性高。
(6-4)
在本实施方式的设备控制系统7400中,第二功能也可以是声音数据接受部7110接受第二设备7020发送的声音数据的功能、声音分析部7120分析第二设备7020发送的声音数据的功能、或蓄积第二设备7020发送的声音数据的功能。
在此,仅通过设备控制系统7400的处理,就能够停止关于第二设备7020的声音识别处理。
(6-5)
在本实施方式的设备控制系统7400中,所述第二功能与所述第一功能是同一种功能。
此外,第二功能与第一功能是同一种功能例如是指,在第一功能是声音输入部12的声音接受功能的情况下,第二功能是声音输入部7022的声音接受功能。另外,第二功能与第一功能是同一种功能例如是指,在第一功能是第一设备7010的声音数据发送功能的情况下,第二功能是第二设备7020的声音数据发送功能。另外,第二功能与第一功能是同一种功能例如是指,在第一功能是声音分析部7120分析第一设备7010发送的声音数据的功能的情况下,第二功能是声音分析部7120分析第二设备7020发送的声音数据的功能。
在此,在停止了与关于第一设备7010的声音识别处理相关的功能的情况下,可停止与关于第二设备7020的声音识别处理同一种类的功能。因此,关于声音识别处理,能够使第一设备7010和第二设备7020一起进入到用户期望的状态。
(6-6)
在本实施方式的设备控制系统7400中,第二设备7020具有报知停止第二功能的报知部7028。设备控制系统7400具备作为停止信息发送部的一例的开始/停止信息发送部7170。开始/停止信息发送部7170向第二设备7020发送功能停止信息,使得当开始/停止决定部7160决定停止第二功能时,报知部7028报知停止第二功能。
在此,当用户对于第一设备7010停止声音识别处理时,可确认对于第二设备7020也停止声音识别处理。
(6-7)
本实施方式的设备控制系统7400具备判断与第一设备7010关联的设备的判断部7150。在探测部7140探测到第一设备7010已接受了停止第一功能的指示,且判断部7150判断为与第一设备7010关联的设备中包括第二设备7020的情况下,开始/停止决定部7160决定对于第二设备7020停止第二功能。
在此,在停止关于第一设备7010的声音识别处理的同时,也停止有关与第一设备7010关联的关于第二设备7020的声音识别处理。相反而言,在判定为第一设备7010与第二设备7020不相关联的情况下,即使停止关于第一设备7010的声音识别处理,有关关于第二设备7020的声音识别处理仍然有效。
(6-8)
在本实施方式的设备控制系统7400中,第一设备7010接受的停止第一功能的指示中包括对物理开关7011a的指示、通过遥控器7011b的指示、或通过声音对声音输入部7012的指示。
(6-9)
在本实施方式的设备控制系统7400中,探测部7140探测第一设备7010已接受了开始第一功能的指示的情况。设备控制系统7400具备作为开始决定部的一例的开始/停止决定部7160。当探测部7140探测到第一设备7010已接受了开始第一功能的指示时,开始/停止决定部7160决定第二设备7020开始第二功能。
在此,在第一设备7010接受了开始(重新开始)与该声音识别处理相关的第一功能的指示的情况下,与关于第二设备7020的声音识别处理相关的第二功能也被开始(重新开始)。换言之,在本设备控制系统7400中,用户通过使关于第一设备7010的声音识别处理有效,也能够使关于第二设备7020的声音识别处理有效。因此,通过使用本设备控制系统7400,可省去对于多个设备的每一个使声音识别处理的执行有效的麻烦,可通过简单的操作开始关于多个设备的声音识别处理。
(6-10)
本实施方式的第二设备7020是可通过声音操作的设备。第二设备7020具备声音输入部7022、声音数据发送部7024、指示接受部(例如,开关7021a、遥控器7021b、声音输入部7022)、以及作为停止信息接受部的一例的开始/停止信息接受部7027。声音输入部7022接受声音。声音数据发送部7024将声音输入部7022接受的声音作为声音数据发送到具有声音分析部7120的设备控制系统7400。指示接受部接受停止与声音识别处理相关的功能的至少一部分的指示,该声音识别处理是:声音输入部7022接受声音,声音数据发送部7024发送声音数据,使设备控制系统7400的声音分析部7120分析所发送的声音数据。开始/停止信息接受部7027接受有关停止该第二设备7020的声音识别处理的功能的至少一部分的决定的功能停止信息,该功能停止信息对应于停止从设备控制系统7400发送的、与可通过声音操作的其它设备(例如第一设备7010)的声音识别处理相关的功能的至少一部分。
虽然省略了说明,但关于第一设备7010及第三设备7030也是同样的。
在第二设备7020中,可根据用户的指示对于第二设备7020停止声音识别处理,并且配合关于其它设备(例如第一设备7010)的声音识别处理的停止,停止关于第二设备7020的声音识别处理。因此,通过使用第二设备7020,可省去分别停止执行关于多个设备的声音识别处理的麻烦,可通过简单的操作停止关于多个设备的声音识别处理。
此外,若通过物理开关7021a停止与声音识别处理相关的功能,则能够提高停止声音识别处理的可靠性(能够抑制产生声音识别处理未被停止的状态)。
(6-11)
本实施方式的控制方法是第一设备7010和第二设备7020的控制方法。第一设备7010具有作为第一声音输入部的一例的声音输入部7012和作为第一声音数据发送部的一例的声音数据发送部7014。声音数据发送部7014将声音输入部7012接受的声音的第一声音数据发送到设备控制系统7400。设备控制系统7400具有作为接受第一声音数据的第一声音数据接受部的一例的声音数据接受部7110及作为分析声音数据接受部7110接受的第一声音数据的第一声音分析部的一例的声音分析部7120。第二设备7020具有作为第二声音输入部的一例的声音输入部7022和作为第二声音数据发送部的一例的声音数据发送部7024。声音数据发送部7024将声音输入部7022接受的声音的第二声音数据发送到设备控制系统7400。设备控制系统7400具有作为接受第二声音数据的第二声音数据接受部的一例的声音数据接受部7110及作为分析声音数据接受部7110接受的第二声音数据的第二声音分析部的一例的声音分析部7120。控制方法具备探测步骤(步骤S22、S42)和决定步骤(步骤S26、S48)。在探测步骤中,探测第一设备7010已接受了停止与声音识别处理相关的功能的至少一部分的第一功能的指示的情况,该声音识别处理是:声音输入部7012接受第一声音,声音数据发送部7014发送第一声音数据,声音数据接受部7110接受所发送的第一声音数据,使声音分析部7120分析所接受的第一声音数据。在决定步骤中,决定停止与声音识别处理相关的功能的至少一部分的第二功能,该声音识别处理是:在探测到第一设备7010已接受了停止第一功能的指示的情况下,对于第二设备7020,声音输入部7022接受第二声音,声音数据发送部7024发送第二声音数据,声音数据接受部7110接受所发送的第二声音数据,并使声音分析部7120分析所接受的第二声音数据。
在本控制方法中,在探测到第一设备7010已接受了停止与该声音识别处理相关的功能的至少一部分的第一功能的指示的情况下,决定也停止与关于第二设备7020的声音识别处理相关的功能的至少一部分的第二功能。因此,通过使用本控制方法,可省去分别停止执行多个设备的声音识别处理的麻烦,可通过简单的操作停止多个设备的声音识别处理。
(7)变形例
以下示出上述实施方式的变形例。此外,变形例也可以在不矛盾的范围内相互适当地组合。
(7-1)变形例A
在上述实施方式中,设备控制系统7400具有三台服务器(第一服务器7100、第二服务器7200、以及第三服务器7300),但不限于此。
例如,设备控制系统7400也可以具有单个服务器,该单个服务器具有与上述第一服务器7100、第二服务器7200及第三服务器7300的功能同样的功能。另外,例如,设备控制系统7400也可以构成为具有两台或四台以上的服务器,这些服务器具有与上述第一服务器7100、第二服务器7200及第三服务器7300的功能同样的功能。
另外,例如,也可通过与第二服务器7200及第三服务器7300不同的多个服务器的协作来实现与上述第一服务器7100的功能同样的功能。
(7-2)变形例B
在上述实施方式中,第一设备10、第二设备20及第三设备30是家电设备,但不限于此。例如,第一设备10也可以是家电设备的声音操作设备。
声音操作设备是具有接受声音的声音输入部,将声音输入部接受的声音数据发送到设备控制系统7400,接收基于设备控制系统7400的声音数据的分析结果的信号,并据此操作作为操作对象的家电设备的动作的设备。若举出具体例,则声音操作设备是第一设备7010的声音操作设备(声音遥控器)。声音操作设备接受针对第一设备7010的指令声音(例如,“开始运转空调机”这样的声音),并将所接受的声音数据发送到设备控制系统7400。而且,声音操作设备接收基于设备控制系统7400的声音数据的分析结果的信号(表示声音数据的内容是空调机的运转开始指示这样的分析结果的信号),从声音操作设备的红外线信号发送部将运转开始的指令信号发送到作为操作对象的空调机。
另外,例如,声音操作设备也可以具有接受声音的声音输入部,将声音输入部接受的声音数据发送到设备控制系统7400,并将基于声音数据的分析结果的信号从设备控制系统7400发送到通过网络7040连接的设备的操作对象,由此来控制操作对象。
(7-3)变形例C
在上述实施方式中,声音数据接受部7110作为第一声音数据接受部及第二声音数据接受部发挥作用,声音分析部7120作为第一声音分析部及第二声音分析部发挥作用,但不限于此。
例如,也可以在第二服务器中设置接受第一设备7010及第三设备7030发送的声音数据的第一声音数据接受部和分析第一声音数据接受部接受的声音数据的第一声音数据接受部,在第三服务器中设置接受第二设备7020发送的声音数据的第二声音数据接受部和分析第二声音数据接受部接受的声音数据的第二声音分析部,代替在第一服务器7100中设置声音数据接受部7110及声音分析部7120。
虽然上面对实施方式及变形例进行了说明,但是应当理解,在不脱离权利要求书中记载的主旨和范围的情况下,可以在形式及细节上进行各种变更。
工业上的可利用性
本公开广泛应用于控制多个可通过声音操作的设备的设备控制系统、由设备控制系统控制的可通过声音操作的设备、以及这些设备的控制方法并且是有用的。
附图标记说明
[第一构成]
1001 设备控制系统(控制系统)
1005 用户
1010 第一类型设备(控制设备)
1020 第二类型设备(控制设备)
1060 声音输入接受部
1070 红外线输出装置
1100 服务器
1104T 特定控制存储部
1110 声音输入分析部
1120 控制内容特定部
1130 第一控制部(控制部)
1135 第二控制部(控制部)
1400 设定支持装置
1410 关键字输入接受部
1420 控制命令选择部
1430 特定控制登记部
G 编辑画面
GK 关键字图像
GO 控制命令图像
K 关键字
O 控制命令
NW 网络
P 设定支持程序
[第二构成]
2011 文本提取部
2012 声音识别词典
2013 解释部
2014 控制部
2016 设备信息获取部
2017 存储部
2018 运算部
2019 认证部
2040 服务器
2050 网络
2060 建筑物
2061 路由器
2062 空调机
2063 声音输入输出装置
2064 声音输入部
2065 声音输出部
2069 基准环境传感器
2090 环境调节系统
2091 空调机
2092 电风扇
2093 加湿器
2094 电动窗
2095 照明器具
2096 窗帘器具
2097 电香薰锅
2099 对象环境传感器
RS 基准空间
TS 对象空间
[第三构成]
3001 空气调节系统
3005a 用户(说话者)
3005b 用户(说话者)
3020 空调机(空气调节装置)
3020P 信息处理单元
3021 输入部
3022 输出部
3023 通信部
3024 存储部
3025 处理部
3025A 调节空气送出部
3025B 声音探测部
3025C 特定控制部
3025D 位置特定部
3025E 句子输出命令部
3060 声音输入装置
30100 服务器(信息处理装置)
3100A 第一服务器(第一信息处理装置)
3101 输入部
3102 输出部
3103 通信部
3104 存储部
3104D 怒气分类DB(怒气分类存储部)
3110 声音输入分析部
3125 状态判定部
3200A 第二服务器(第二信息处理装置)
NW 网络
[第四构成]
4011 文本提取部
4012 声音识别词典
4013 解释部
4014 控制部
4015 用户识别部
4016 存储部
4040 服务器
4050 网络
4060 建筑物
4061 路由器
4062 空调机(室内环境调节器)
4063 声音输入输出装置
4064 声音输入部
4065 声音输出部
4070 室外机
4080 室内机
4090 室内环境调节系统
[第五构成]
5011 文本提取部
5012 声音识别词典
5013 解释部
5014 控制部
5015 状态提取部
5016 状态提取词典
5017 判定部
5018 存储部
5030 电力公司
5031 电力管理装置
5040 服务器
5050 网络
5060A、5060B 物件
5061 控制器
5062 空调机
5063 声音输入输出装置
5064 声音输入部
5065 声音输出部
5066 照明器具
5067 换气扇
5068 功率计
5090 空调管理系统
[第六构成]
6011 文本提取部
6013 解释部
6014 控制部
6015 时钟部
6016 记录部
6017 模式提取部
6018 预测部
6019 文脉部
6040 服务器
6050 网络
6060 建筑物
6061 路由器
6063 声音输入输出装置
6064 声音输入部
6065 声音输出部
6071 空调机
6072 浴室热水器
6073 电视
6074 照明器具
6075 可穿戴终端
6076 烹调器具
6077 冰箱
6090 家庭系统
[第七构成]
7010 第一设备(设备)
7011a 开关(物理开关、指示接受部)
7011b 遥控器(远程控制器、指示接受部)
7012 声音输入部(第一声音输入部、指示接受部)
7014 声音数据发送部(第一声音数据发送部)
7016 开始/停止请求接受部(停止信息接受部)
7017 开始/停止信息接受部(停止信息接受部)
7018 报知部
7020 第二设备(设备)
7021a 开关(物理开关、指示接受部)
7021b 遥控器(远程控制器、指示接受部)
7022 声音输入部(第二声音输入部、指示接受部)
7024 声音数据发送部(第二声音数据发送部)
7026 开始/停止请求接受部(停止信息接受部)
7027 开始/停止信息接受部(停止信息接受部)
7028 报知部
7110 声音数据接受部(第一声音数据接受部、第二声音数据接受部)
7120 声音分析部(第一声音分析部、第二声音分析部)
7140 探测部
7150 判断部
7160 开始/停止决定部(停止决定部、开始决定部)
7170 开始/停止信息发送部(停止信息发送部)
7180 开始/停止请求部(停止请求部)
7400 设备控制系统
S22、S42 探测步骤
S26、S48 决定步骤
现有技术文献
专利文献
专利文献1:日本特开2006-308848号公报
专利文献2:日本专利第2552744号公报
专利文献3:日本特开2006-320621号公报
专利文献4:日本特开2001-324202号公报
专利文献5:国际公开2012/176690号公报
专利文献6:日本特开2009-290967号公报
专利文献7:日本特开2010-181064号公报

Claims (1)

1.一种设定支持装置(1400),其在控制系统(1001)中使用,所述控制系统(1001)具备接受用户(1005)发出的声音的输入的声音输入接受部(1060)、分析所述声音的声音输入分析部(1110)、基于所述声音输入分析部的分析结果控制多个控制设备(1010、1020)的控制部(1130、1135)、以及将与规定关键字(K)对应的声音的输入和所述控制设备的规定控制相关联地存储为特定控制的特定控制存储部(1104T),所述设定支持装置(1400)用于支持所述特定控制的设定,所述设定支持装置(1400)具备:
关键字输入接受部(1410),其从所述用户接受与所述关键字对应的信息的输入;
控制命令选择部(1420),其将对所述控制设备的规定控制命令(O)显示在编辑画面(G)上,并从所述用户接受所述控制命令的选择;以及
特定控制登记部(1430),其根据所述用户的指示,将由所述用户通过所述关键字输入接受部输入的关键字与由所述用户通过所述控制命令选择部选择的控制命令相关联地登记到所述特定控制存储部,
所述特定控制登记部将所述关键字、所述控制命令、表示所述关键字和所述控制命令之间的关联的标识显示在所述编辑画面上,
所述控制部(1130、1135)经由网络(NW)和服务器(1100)对所述多个控制设备(1010、1020)中的至少一部分(1020)发送信号。
CN201880035915.2A 2017-07-14 2018-07-13 设备控制系统 Active CN110709785B (zh)

Applications Claiming Priority (15)

Application Number Priority Date Filing Date Title
JP2017138625 2017-07-14
JP2017138626 2017-07-14
JP2017-138627 2017-07-14
JP2017-138612 2017-07-14
JP2017138612 2017-07-14
JP2017-138626 2017-07-14
JP2017138627 2017-07-14
JP2017138613 2017-07-14
JP2017138624 2017-07-14
JP2017-138624 2017-07-14
JP2017-138613 2017-07-14
JP2017-138625 2017-07-14
JP2017213117 2017-11-02
JP2017-213117 2017-11-02
PCT/JP2018/026445 WO2019013316A1 (ja) 2017-07-14 2018-07-13 機器制御システム

Publications (2)

Publication Number Publication Date
CN110709785A CN110709785A (zh) 2020-01-17
CN110709785B true CN110709785B (zh) 2023-08-04

Family

ID=65001357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880035915.2A Active CN110709785B (zh) 2017-07-14 2018-07-13 设备控制系统

Country Status (5)

Country Link
US (1) US11680722B2 (zh)
EP (6) EP4040289B1 (zh)
JP (6) JP7060811B2 (zh)
CN (1) CN110709785B (zh)
WO (1) WO2019013316A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7364923B2 (ja) * 2019-01-29 2023-10-19 ダイキン工業株式会社 空気調和システム、サーバ、空気調和システムの制御方法、プログラム及び記録媒体
JP6927237B2 (ja) 2019-01-29 2021-08-25 ダイキン工業株式会社 空気調和システム
KR20210110676A (ko) 2019-02-12 2021-09-08 구글 엘엘씨 차량 클라이언트 장치가 온디바이스 기능을 사용하도록 지시
US11948582B2 (en) * 2019-03-25 2024-04-02 Omilia Natural Language Solutions Ltd. Systems and methods for speaker verification
WO2020241297A1 (ja) * 2019-05-27 2020-12-03 パナソニックIpマネジメント株式会社 室内環境制御システム、及び、室内環境制御方法
JP7140391B2 (ja) * 2019-09-10 2022-09-21 Necプラットフォームズ株式会社 無線接続システム及び無線接続方法
BE1027725B1 (nl) * 2019-11-04 2021-06-08 Atlas Copco Airpower Nv Werkwijze voor het beheren van een compressor
JP2021107699A (ja) * 2019-12-27 2021-07-29 アイリスオーヤマ株式会社 送風機
JP7404974B2 (ja) * 2020-03-31 2023-12-26 ブラザー工業株式会社 情報処理装置及びプログラム
JP7400593B2 (ja) * 2020-03-31 2023-12-19 ブラザー工業株式会社 情報処理装置及びプログラム
WO2021210186A1 (ja) * 2020-04-18 2021-10-21 三菱電機株式会社 空気調和機動作システム、空気調和機およびサーバ
JP6989683B2 (ja) * 2020-05-17 2022-01-05 株式会社Remy 音声制御調理器具プラットフォーム
WO2022083361A1 (zh) * 2020-10-19 2022-04-28 海信视像科技股份有限公司 接收装置、信息处理装置及信息处理系统
CN116761960A (zh) 2021-02-08 2023-09-15 三菱电机株式会社 空调控制系统以及空调控制系统程序
KR102568109B1 (ko) * 2022-06-13 2023-08-18 보원엔지니어링 주식회사 정보통신의 네트워크 무선 송수신 설치 시스템

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1342308A (zh) * 2000-01-05 2002-03-27 松下电器产业株式会社 机器设定装置、机器设定系统以及记录机器设定处理程序的记录媒体
WO2011043639A2 (es) * 2009-10-08 2011-04-14 Alcantara Talavera Magno Métodos y sistema de control por voz
CN103645690A (zh) * 2013-11-27 2014-03-19 中山大学深圳研究院 一种语音控制数字家庭智能盒的方法
CN103905871A (zh) * 2014-03-24 2014-07-02 小米科技有限责任公司 智能家电控制方法、装置及终端
JP2015109041A (ja) * 2013-12-05 2015-06-11 株式会社東芝 製造検査支援装置、製造検査支援方法、及び製造検査支援プログラム
CN106257355A (zh) * 2015-06-18 2016-12-28 松下电器(美国)知识产权公司 设备控制方法和控制器

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0395348A (ja) 1989-09-08 1991-04-19 Matsushita Electric Ind Co Ltd 空気調和機
JP2552744B2 (ja) 1989-12-28 1996-11-13 ▲高▼木産業株式会社 浴室システム
JPH11316037A (ja) * 1998-05-06 1999-11-16 Matsushita Electric Ind Co Ltd 冷暖房装置
JP2001036981A (ja) 1999-07-16 2001-02-09 Fujitsu Ltd 遠隔制御装置および遠隔制御プログラムを記録したコンピュータ読み取り可能な記録媒体
US8108218B1 (en) * 1999-12-13 2012-01-31 Avaya Inc. Methods and apparatus for voice recognition for call treatment modification on messaging
JP3827058B2 (ja) * 2000-03-03 2006-09-27 アルパイン株式会社 音声対話装置
JP2001324202A (ja) 2000-05-15 2001-11-22 Matsushita Electric Ind Co Ltd 空調装置
JP2002287796A (ja) 2001-03-23 2002-10-04 Ricoh Co Ltd 音声制御機構及び画像形成装置
JP2002318843A (ja) * 2001-04-20 2002-10-31 Misawa Homes Co Ltd 設備機器遠隔管理システム、設備機器遠隔管理装置、設備機器遠隔管理方法および記憶媒体
JP2003100471A (ja) 2001-09-26 2003-04-04 Toshiba Lighting & Technology Corp 照明制御システム
JP2003111157A (ja) 2001-09-28 2003-04-11 Toshiba Corp 統合コントローラ、機器制御方法及び機器制御プログラム
JP3811646B2 (ja) * 2001-12-21 2006-08-23 アルゼ株式会社 空調調整システム及び空調調整方法
JP3720037B2 (ja) 2002-11-22 2005-11-24 松下電器産業株式会社 操作履歴利用システム及びその方法
JP4579612B2 (ja) * 2003-09-10 2010-11-10 パナソニック株式会社 機器連携装置
JP2005142905A (ja) 2003-11-07 2005-06-02 Matsushita Electric Ind Co Ltd リモートコントロール装置及びリモートコントロールシステム
JP2006308848A (ja) 2005-04-28 2006-11-09 Honda Motor Co Ltd 車両機器制御装置
JP2006320621A (ja) 2005-05-20 2006-11-30 Sharp Corp ストレスケア装置およびそれを備えてなる空調装置ならびにロボット装置
JP2008040726A (ja) 2006-08-04 2008-02-21 Univ Of Electro-Communications ユーザ支援システム及びユーザ支援方法
GB0709738D0 (en) * 2007-05-22 2007-06-27 Graham Robin Distributed temperature control system
JP2009228910A (ja) 2008-03-19 2009-10-08 Brother Ind Ltd 空調制御システム
JP5178325B2 (ja) 2008-05-28 2013-04-10 株式会社東芝 機器制御装置、機器制御方法及びプログラム
JP2010181064A (ja) 2009-02-04 2010-08-19 Panasonic Corp 空気調和機
JP5062273B2 (ja) 2010-03-12 2012-10-31 ダイキン工業株式会社 エネルギー管理システム
US9338238B2 (en) * 2010-12-03 2016-05-10 Siemens Industry, Inc. Operation scheduler for a building automation system
WO2012176690A1 (ja) 2011-06-22 2012-12-27 パナソニック株式会社 省エネコントローラ、省エネ制御システム
JP2013130371A (ja) 2011-12-22 2013-07-04 Mitsubishi Heavy Ind Ltd 空気調和機の制御装置、空気調和機、及び空気調和機の制御方法
JP2013200080A (ja) * 2012-03-26 2013-10-03 Sharp Corp 空調制御システム
KR20140060040A (ko) * 2012-11-09 2014-05-19 삼성전자주식회사 디스플레이장치, 음성취득장치 및 그 음성인식방법
JP2014182583A (ja) 2013-03-19 2014-09-29 Panasonic Corp 環境制御システム
JP6068280B2 (ja) * 2013-07-10 2017-01-25 ジョンソンコントロールズ ヒタチ エア コンディショニング テクノロジー(ホンコン)リミテッド 空気調和機
JP2015108464A (ja) 2013-12-04 2015-06-11 日立アプライアンス株式会社 運転制御システム
US9952571B2 (en) 2014-03-24 2018-04-24 Xiaomi Inc. Method and terminal device for controlling smart home appliance
EP3839673A1 (en) 2014-05-15 2021-06-23 Sony Corporation Information processing device, display control method, and program
WO2016052795A1 (ko) 2014-09-30 2016-04-07 주식회사 티노스 차량용 공조 장치 및 이의 제어 방법
US10386795B2 (en) * 2014-10-30 2019-08-20 Vivint, Inc. Methods and apparatus for parameter based learning and adjusting temperature preferences
US9485344B2 (en) 2014-12-01 2016-11-01 Honeywell International Inc. Personalizing interaction with a structure
WO2016157537A1 (ja) 2015-04-03 2016-10-06 三菱電機株式会社 空気調和システム
JP6573474B2 (ja) 2015-04-14 2019-09-11 シャープ株式会社 音声認識システム
EP3292454A1 (en) * 2015-05-04 2018-03-14 Johnson Controls Technology Company Multi-function home control system with control system hub and remote sensors
JP5994900B1 (ja) * 2015-05-19 2016-09-21 ダイキン工業株式会社 複数の空気調和装置の管理装置
JP6468079B2 (ja) * 2015-06-01 2019-02-13 富士通株式会社 制御システム及び同システムの処理方法
JP6461738B2 (ja) 2015-07-24 2019-01-30 シャープ株式会社 連携システムおよび機器制御サーバ
JP2017180943A (ja) 2016-03-30 2017-10-05 株式会社富士通ゼネラル 空気調和機
JPWO2018074224A1 (ja) 2016-10-21 2019-02-28 株式会社デイジー 雰囲気醸成システム、雰囲気醸成方法、雰囲気醸成プログラム、及び雰囲気推定システム
JP6855274B2 (ja) 2017-02-21 2021-04-07 シャープ株式会社 空気清浄機および空気清浄機の制御方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1342308A (zh) * 2000-01-05 2002-03-27 松下电器产业株式会社 机器设定装置、机器设定系统以及记录机器设定处理程序的记录媒体
WO2011043639A2 (es) * 2009-10-08 2011-04-14 Alcantara Talavera Magno Métodos y sistema de control por voz
CN103645690A (zh) * 2013-11-27 2014-03-19 中山大学深圳研究院 一种语音控制数字家庭智能盒的方法
JP2015109041A (ja) * 2013-12-05 2015-06-11 株式会社東芝 製造検査支援装置、製造検査支援方法、及び製造検査支援プログラム
CN103905871A (zh) * 2014-03-24 2014-07-02 小米科技有限责任公司 智能家电控制方法、装置及终端
CN106257355A (zh) * 2015-06-18 2016-12-28 松下电器(美国)知识产权公司 设备控制方法和控制器

Also Published As

Publication number Publication date
WO2019013316A1 (ja) 2019-01-17
EP4040287A1 (en) 2022-08-10
JP2022084865A (ja) 2022-06-07
JP7364948B2 (ja) 2023-10-19
EP4040287B1 (en) 2024-04-24
EP4036709B1 (en) 2024-04-24
US20200232671A1 (en) 2020-07-23
JP2022095739A (ja) 2022-06-28
US11680722B2 (en) 2023-06-20
JP2021145350A (ja) 2021-09-24
EP3654174A4 (en) 2021-08-18
JP7060811B2 (ja) 2022-04-27
EP3654174A1 (en) 2020-05-20
EP4040288B1 (en) 2023-09-27
JP2022084864A (ja) 2022-06-07
JPWO2019013316A1 (ja) 2020-08-06
JP2022088507A (ja) 2022-06-14
CN110709785A (zh) 2020-01-17
EP4036710A1 (en) 2022-08-03
JP7104357B2 (ja) 2022-07-21
EP4040289B1 (en) 2023-09-20
JP7348558B2 (ja) 2023-09-21
EP4040289A1 (en) 2022-08-10
EP4040288A1 (en) 2022-08-10
JP7425349B2 (ja) 2024-01-31
EP4036709A1 (en) 2022-08-03

Similar Documents

Publication Publication Date Title
CN110709785B (zh) 设备控制系统
US20230362434A1 (en) Video Integration with Home Assistant
JP6918215B2 (ja) 機器制御システム及び機器制御方法
JP2016206851A (ja) 制御装置、制御装置の制御方法、制御システム、環境制御機器、および制御プログラム
CN109584874A (zh) 电器设备控制方法、装置、电器设备及存储介质
KR20150069961A (ko) 홈 디바이스를 제어하는 방법 및 장치
US20240187276A1 (en) Multi-Source Smart-Home Device Control
CN117222079A (zh) 一种基于家庭网络的照明控制系统
TW202325034A (zh) 電子機器控制裝置、通信終端及電子機器
KR20220001903A (ko) 클라우드 플랫폼 기반의 공동주택의 스마트홈 시스템
JP2022013035A (ja) 音声制御システム、及び、音声制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant